WO2017116015A1 - 콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템 - Google Patents

콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템 Download PDF

Info

Publication number
WO2017116015A1
WO2017116015A1 PCT/KR2016/013875 KR2016013875W WO2017116015A1 WO 2017116015 A1 WO2017116015 A1 WO 2017116015A1 KR 2016013875 W KR2016013875 W KR 2016013875W WO 2017116015 A1 WO2017116015 A1 WO 2017116015A1
Authority
WO
WIPO (PCT)
Prior art keywords
contents
content
theme
video
photo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2016/013875
Other languages
English (en)
French (fr)
Inventor
송혁
이영한
고민수
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Korea Electronics Technology Institute
Original Assignee
Korea Electronics Technology Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Korea Electronics Technology Institute filed Critical Korea Electronics Technology Institute
Publication of WO2017116015A1 publication Critical patent/WO2017116015A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring

Definitions

  • the present invention relates to a content generation technology, and more particularly, to a method and system for automatically generating content using the content recognition technology.
  • a user In order to generate a video, a user needs to collect a desired video, photo, music, etc. according to his or her taste, and perform a section editing / arranging operation, which is cumbersome.
  • the present invention has been made to solve the above problems, and an object of the present invention is to provide a method and system for automatically generating content based on content recognition technology for automatically generating more simple and natural video content.
  • Automatic video content generation method for achieving the above object, the step of classifying the theme of the video content; Classifying the theme of the photographic contents; Selecting a theme; Collecting video contents and photo contents classified by the selected theme; And generating video content by using the collected video contents and photo contents.
  • the automatic video content generating method comprises the steps of: classifying themes of music contents; The method may further include selecting one of music contents classified by the selected theme.
  • the generating may include generating video content by using the collected video content, photo content, and the selected music content.
  • the scenes of the video contents and the photo contents may be arranged in synchronization with the bits of the selected music content.
  • the automatic video content generating method may further include providing a visual effect to the points where the scenes and the photo contents are changed.
  • the video content theme classification step may include: classifying video content into scene units and extracting a key frame for each scene; Recognizing an object appearing in a key frame; Analyzing the key frame and the before / after frames together to recognize the behavior of the object; Recognizing a situation in consideration of the color distribution of the key frame and recognized objects and behaviors; And classifying a theme of the video content with reference to the object, the action, and the situation.
  • the storage unit that stores the video content and photo content; And an automatic editing unit for classifying a theme of video contents, classifying a theme of photo contents, selecting a theme, and collecting video contents and photo contents classified by the selected theme to generate video contents.
  • FIG. 1 is a block diagram of an automatic content generation system according to an embodiment of the present invention.
  • FIG. 2 is a flowchart provided to explain a method for automatically generating content according to another embodiment of the present invention
  • FIG. 3 is a flowchart provided to explain a video content automatic classification process
  • 5 is a flowchart provided for explaining the music content automatic classification process.
  • FIG. 1 is a block diagram of an automatic content generation system according to an embodiment of the present invention.
  • the automatic content generation system according to an embodiment of the present invention automatically generates video content based on content recognition.
  • the moving image content generation is completely automatic without the user's selection / manipulation or the like.
  • Automatic content generation system according to an embodiment of the present invention that performs such a function, as shown in Figure 1, the content storage unit 110, the communication unit 120, the automatic content editing unit 130 and the content output unit ( 140).
  • the content storage unit 110 stores various contents possessed by the user.
  • the content includes a video, picture, music content and the like.
  • the communication unit 120 is a means for communicating with an external network and an external device, and in an embodiment of the present invention, connects to a mobile storage device, a mobile terminal, a cloud server / system, and an SNS server system.
  • the automatic content editing unit 130 combines the contents stored in the content storage unit 110 with the contents obtainable from the outside through the communication unit 120 to generate new video content.
  • the video content generated by the automatic content editing unit 130 is output through the content output unit 140.
  • FIG. 2 is a flowchart provided to explain a method for automatically generating content according to another embodiment of the present invention.
  • the automatic content editing unit 130 classifies video contents, photo contents, and music contents by theme (S210 ⁇ S230).
  • Content recognition technology is used for content classification, which will be described below with reference to FIGS. 3 to 5.
  • FIG. 3 is a flowchart provided to explain a video content automatic classification process.
  • the automatic content editing unit 130 classifies video content into scene units and extracts a key frame for each scene (S211).
  • the key frame may be simply a frame located in the middle of the scene, or may be a frame located elsewhere.
  • the automatic content editing unit 130 recognizes an object (person, object) appearing in the key frame extracted in step S211 (S212), and analyzes the front / rear frames together to recognize the behavior of the object (S213).
  • the automatic content editing unit 130 recognizes the situation of the content in consideration of both the overall color distribution of the key frame extracted in step S211 and the objects / actions recognized in steps S212 and S213 (S214).
  • the automatic content editing unit 130 classifies the theme of the video content with reference to the object / behavior / situation recognized in step S212 / S212 / S213 (S215). There is no restriction on the theme applicable in step S215.
  • Themes generally include birthdays, trips, friends, night scenes, and the like, as well as other themes, of course, the same applies to photo content and music content described below.
  • FIG. 4 is a flowchart provided to explain a process of automatically classifying photographic contents.
  • the automatic content editing unit 130 recognizes an object (a person or an object) appearing in the photo content (S221), and considers both the overall color distribution of the photo content and the behavior recognized in step S221. Thus, the situation of the content is recognized (S222).
  • the automatic content editing unit 130 classifies the theme of the photo content with reference to the object / situation recognized in step S221 and step S222 (S223).
  • 5 is a flowchart provided for explaining the music content automatic classification process.
  • the automatic content editing unit 130 analyzes the volume of music content to detect the bits (S231). Specifically, in step S231, the timing of the strongest bit is detected.
  • the automatic content editing unit 130 classifies the theme of the music content by analyzing the bits detected in operation S231 and the tone and tone, in operation S232.
  • the automatic content editing unit 130 selects a theme (S240).
  • Theme selection may be made randomly, or may be made based on date information, time information, weather information, and user's emotion information identified through SNS.
  • the automatic content editing unit 130 collects video contents and photo contents classified under the selected theme (S250), and selects one of music contents classified under the selected theme (S260).
  • the automatic content editing unit 130 arranges the 'photos' and 'scenes of the video contents' collected in step S250 in synchronization with the 'bit of music content' selected in step S260 (S270).
  • step S270 the photos and scenes are arranged such that playback starts at the strongest bit of the music content.
  • the automatic content editing unit 130 gives a visual effect to the points where the pictures and the scenes are changed (S280).
  • visual effects you can use a variety of effects, such as listing, zooming in, zooming out, vanishing, and flying.
  • the video content is automatically generated by the automatic content editing unit 130.
  • the generated video content may be output through the content output unit 140 or stored in the content storage unit 110.
  • the video content generated by the automatic content editing unit 130 may be implemented to be automatically transmitted to another terminal of the user through the communication unit 120, automatically uploaded to the cloud server / system, and automatically posted to the SNS.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템이 제공된다. 본 발명의 실시예에 따른 자동 동영상 콘텐츠 생성 방법은, 동영상 콘텐츠들과 사진 콘텐츠들의 테마를 분류하고, 선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하여 동영상 콘텐츠를 생성한다. 이에 의해, 보다 간편하게 다양한 동영상 콘텐츠들을 생성할 수 있게 된다.

Description

콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템
본 발명은 콘텐츠 생성 기술에 관한 것으로, 더욱 상세하게는 콘텐츠 인식 기술을 이용하여, 콘텐츠를 자동으로 생성하기 위한 방법 및 시스템에 관한 것이다.
동영상을 생성하기 위해서는, 사용자가 자신의 취향에 따라 원하는 동영상, 사진, 음악 등을 수집하고, 구간 편집/배열 등의 작업을 수행하여야 하는데, 번거로운 작업이다.
또한, 생성된 동영상에 삽입된 배경 음악과 영상 간에는 연관성이 부족하여, 음악 따로 영상 따로 재생되는 느낌을 배제할 수 없다. 음악에 동기화시켜 영상을 표시하면 문제는 해결되지만, 동기화 작업은 사용자에게 매우 번거롭고 어려운 작업에 해당한다.
이에 따라, 보다 간편한 방법으로 동영상 콘텐츠를 생성하기 위한 방안의 모색이 요청된다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 보다 간편하고 자연스러운 동영상 콘텐츠를 자동으로 생성하기 위한 콘텐츠 인식 기술 기반의 콘텐츠 자동 생성 방법 및 시스템을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 자동 동영상 콘텐츠 생성 방법은, 동영상 콘텐츠들의 테마를 분류하는 단계; 사진 콘텐츠들의 테마를 분류하는 단계; 테마를 선택하는 단계; 선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하는 단계; 및 수집된 동영상 콘텐츠들과 사진 콘텐츠들을 이용하여, 동영상 콘텐츠를 생성하는 단계;를 포함한다.
그리고, 본 발명의 일 실시예에 따른 자동 동영상 콘텐츠 생성 방법은, 음악 콘텐츠들의 테마를 분류하는 단계; 선택된 테마로 분류된 음악 콘텐츠들 중 하나를 선택하는 단계;를 더 포함하고, 상기 생성 단계는, 수집된 동영상 콘텐츠들과 사진 콘텐츠들 및 선택된 음악 콘텐츠를 이용하여, 동영상 콘텐츠를 생성할 수 있다.
또한, 상기 생성 단계는, 상기 동영상 콘텐츠들의 씬들과 상기 사진 콘텐츠들을, 상기 선택된 음악 콘텐츠의 비트에 동기화시켜 배열할 수 있다.
그리고, 본 발명의 일 실시예에 따른 자동 동영상 콘텐츠 생성 방법은, 상기 씬들과 상기 사진 콘텐츠들이 바뀌는 지점들에 시각 효과를 부여하는 단계;를 더 포함할 수 있다.
또한, 상기 동영상 콘텐츠 테마 분류단계는, 동영상 콘텐츠를 씬 단위로 구분하고, 씬 마다 키 프레임을 추출하는 단계; 키 프레임에 등장한 객체를 인식하는 단계; 상기 키 프레임과 전/후 프레임들을 함께 분석하여, 상기 객체의 행동을 인식하는 단계; 상기 키 프레임의 색 분포 및 인식된 객체와 행동을 고려하여, 상황을 인식하는 단계; 상기 객체, 상기 행동 및 상기 상황을 참조하여, 상기 동영상 콘텐츠의 테마를 분류하는 단계;를 포함할 수 있다.
한편, 본 발명의 다른 실시예에 따른, 자동 동영상 콘텐츠 생성 시스템은, 동영상 콘텐츠들 및 사진 콘텐츠들이 저장된 저장부; 및 동영상 콘텐츠들의 테마를 분류하고, 사진 콘텐츠들의 테마를 분류하며, 테마를 선택하고, 선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하여 동영상 콘텐츠를 생성하는 자동 편집부;를 포함한다.
이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 콘텐츠 인식 기술 기반의 콘텐츠 자동 생성을 통해, 보다 간편하게 다양한 동영상 콘텐츠들을 생성할 수 있게 된다.
또한, 본 발명의 실시예들에 따르면, 재생되는 영상과 배경 음악 간의 동기를 자동으로 맞출 수 있어, 영상과 음악이 일체화된 자연스러운 동영상을 생성/감상할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 콘텐츠 자동 생성 시스템의 블럭도,
도 2는 본 발명의 다른 실시예에 따른 콘텐츠 자동 생성 방법의 설명에 제공되는 흐름도,
도 3은 동영상 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도,
도 4는 사진 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도, 그리고,
도 5는 음악 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 콘텐츠 자동 생성 시스템의 블럭도이다. 본 발명의 실시예에 따른 콘텐츠 자동 생성 시스템은, 콘텐츠 인식 기반으로 동영상 콘텐츠를 자동으로 생성한다.
본 발명의 실시예에서, 동영상 콘텐츠 생성은, 사용자의 선택/조작 등의 개입 없이 완전한 자동으로 이루어진다.
이와 같은 기능을 수행하는 본 발명의 실시예에 따른 콘텐츠 자동 생성 시스템은, 도 1에 도시된 바와 같이, 콘텐츠 저장부(110), 통신부(120), 자동 콘텐츠 편집부(130) 및 콘텐츠 출력부(140)를 포함한다.
콘텐츠 저장부(110)에는 사용자가 소장하고 있는 다양한 콘텐츠들이 저장되어 있다. 콘텐츠에는, 동영상, 사진, 음악 콘텐츠 등이 포함된다.
통신부(120)는 외부 네트워크, 외부 기기와 통신하는 수단으로, 본 발명의 실시예에 있어서, 이동식 저장장치, 모바일 단말, 클라우드 서버/시스템, SNS 서버 시스템에 연결한다.
자동 콘텐츠 편집부(130)는 콘텐츠 저장부(110)에 저장되어 있는 콘텐츠들과 통신부(120)를 통해 외부로부터 획득할 수 있는 콘텐츠들을 결합하여, 새로운 동영상 콘텐츠를 생성한다.
자동 콘텐츠 편집부(130)에 의해 생성된 동영상 콘텐츠는 콘텐츠 출력부(140)를 통해 출력된다.
이하에서, 자동 콘텐츠 편집부(130)에 의해 동영상 콘텐츠가 자동으로 생성되는 과정에 대해, 도 2를 참조하여 상세히 설명한다. 도 2는 본 발명의 다른 실시예에 따른 콘텐츠 자동 생성 방법의 설명에 제공되는 흐름도이다.
도 2에 도시된 바와 같이, 먼저, 자동 콘텐츠 편집부(130)는, 동영상 콘텐츠들, 사진 콘텐츠들 및 음악 콘텐츠들을 테마 별로 분류한다(S210~S230). 콘텐츠 분류에는 콘텐츠 인식 기술이 사용되며, 이하에서 도 3 내지 도 5를 참조하여 설명한다.
도 3은 동영상 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도이다.
도 3에 도시된 바와 같이, 먼저, 자동 콘텐츠 편집부(130)는 동영상 콘텐츠를 씬 단위로 구분하고 씬 마다 키 프레임을 추출한다(S211). 키 프레임은, 단순하게는 씬의 중간에 위치하는 프레임으로 할 수도 있고, 그 밖의 다른 지점에 위치하는 프레임으로 할 수도 있다.
다음, 자동 콘텐츠 편집부(130)는 S211단계에서 추출된 키 프레임에 등장한 객체(사람, 사물)를 인식하고(S212), 전/후 프레임들을 함께 분석하여 객체의 행동을 인식한다(S213).
나아가, 자동 콘텐츠 편집부(130)는 S211단계에서 추출된 키 프레임의 전체적인 색 분포 및 S212단계/S213단계에서 인식한 객체/행동을 모두 고려하여, 콘텐츠의 상황을 인식한다(S214).
이후, 자동 콘텐츠 편집부(130)는 S212단계/S212단계/S213단계에서 인식한 객체/행동/상황을 참조하여, 동영상 콘텐츠의 테마를 분류한다(S215). S215단계에서 적용가능한 테마에 대한 제한은 없다.
테마에는, 일반적으로, 생일, 여행, 친구, 야경 등이 포함되는데, 그 밖의 다른 테마들이 더 포함될 수 있음은 물론이며, 이는 이하에서 설명할 사진 콘텐츠와 음악 콘텐츠에 대해서도 마찬가지이다.
도 4는 사진 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도이다.
도 4에 도시된 바와 같이, 먼저, 자동 콘텐츠 편집부(130)는 사진 콘텐츠에 등장한 객체(사람, 사물)를 인식하고(S221), 사진 콘텐츠의 전체적인 색 분포와 S221단계에서 인식한 행동을 모두 고려하여, 콘텐츠의 상황을 인식한다(S222).
이후, 자동 콘텐츠 편집부(130)는 S221단계/S222단계에서 인식한 객체/상황을 참조하여, 사진 콘텐츠의 테마를 분류한다(S223).
도 5는 음악 콘텐츠 자동 분류 과정의 설명에 제공되는 흐름도이다.
도 5에 도시된 바와 같이, 먼저, 자동 콘텐츠 편집부(130)는 음악 콘텐츠의 음량을 분석하여 비트들을 검출한다(S231). 구체적으로, S231단계에서는 강한 비트의 타이밍을 검출한다.
다음, 자동 콘텐츠 편집부(130)는 S231단계에서 검출된 비트들과 음색 및 음조 등을 분석하여, 음악 콘텐츠의 테마를 분류한다(S232).
다시, 도 2를 참조하여 설명한다.
다음, 자동 콘텐츠 편집부(130)는 테마를 선택한다(S240). 테마 선택은 랜덤하게 이루어질 수도 있고, 날짜 정보, 시간 정보, 날씨 정보, SNS를 통해 파악한 사용자의 감정 정보를 기반으로 이루어질 수도 있다.
자동 콘텐츠 편집부(130)는 선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하고(S250), 선택된 테마로 분류된 음악 콘텐츠들 중 하나를 선택한다(S260).
이후, 자동 콘텐츠 편집부(130)는, S250단계에서 수집된 '사진들'과 '동영상 콘텐츠들의 씬들'을 S260단계에서 선택된 '음악 콘텐츠의 비트'에 동기화시켜 배열한다(S270).
구체적으로, S270단계에서, 사진들과 씬들은 음악 콘텐츠의 강한 비트에서 재생이 시작되도록 배열된다.
다음, 자동 콘텐츠 편집부(130)는 사진들과 씬들이 바뀌는 지점들에 시각 효과를 부여한다(S280). 시각 효과로, 나열, 확대, 축소, 소멸, 날아가기 등과 같은 다양한 효과를 제한 없이 사용할 수 있다.
이에 의해, 자동 콘텐츠 편집부(130)에 의해 동영상 콘텐츠가 자동으로 생성된다. 생성된 동영상 콘텐츠는 콘텐츠 출력부(140)를 통해 출력되거나 콘텐츠 저장부(110)에 저장될 수 있다.
나아가, 자동 콘텐츠 편집부(130)에 의해 생성된 동영상 콘텐츠는 통신부(120)를 통해 사용자의 다른 단말로 자동 전송, 클라우드 서버/시스템에 자동 업로드, SNS에 자동 게시되도록 구현하는 것도 가능하다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (6)

  1. 동영상 콘텐츠들의 테마를 분류하는 단계;
    사진 콘텐츠들의 테마를 분류하는 단계;
    테마를 선택하는 단계;
    선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하는 단계; 및
    수집된 동영상 콘텐츠들과 사진 콘텐츠들을 이용하여, 동영상 콘텐츠를 생성하는 단계;를 포함하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 방법.
  2. 청구항 1에 있어서,
    음악 콘텐츠들의 테마를 분류하는 단계;
    선택된 테마로 분류된 음악 콘텐츠들 중 하나를 선택하는 단계;를 더 포함하고,
    상기 생성 단계는,
    수집된 동영상 콘텐츠들과 사진 콘텐츠들 및 선택된 음악 콘텐츠를 이용하여, 동영상 콘텐츠를 생성하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 방법.
  3. 청구항 2에 있어서,
    상기 생성 단계는,
    상기 동영상 콘텐츠들의 씬들과 상기 사진 콘텐츠들을, 상기 선택된 음악 콘텐츠의 비트에 동기화시켜 배열하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 방법.
  4. 청구항 3에 있어서,
    상기 씬들과 상기 사진 콘텐츠들이 바뀌는 지점들에 시각 효과를 부여하는 단계;를 더 포함하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 방법.
  5. 청구항 1에 있어서,
    상기 동영상 콘텐츠 테마 분류단계는,
    동영상 콘텐츠를 씬 단위로 구분하고, 씬 마다 키 프레임을 추출하는 단계;
    키 프레임에 등장한 객체를 인식하는 단계;
    상기 키 프레임과 전/후 프레임들을 함께 분석하여, 상기 객체의 행동을 인식하는 단계;
    상기 키 프레임의 색 분포 및 인식된 객체와 행동을 고려하여, 상황을 인식하는 단계;
    상기 객체, 상기 행동 및 상기 상황을 참조하여, 상기 동영상 콘텐츠의 테마를 분류하는 단계;를 포함하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 방법.
  6. 동영상 콘텐츠들 및 사진 콘텐츠들이 저장된 저장부; 및
    동영상 콘텐츠들의 테마를 분류하고, 사진 콘텐츠들의 테마를 분류하며, 테마를 선택하고, 선택된 테마로 분류된 동영상 콘텐츠들과 사진 콘텐츠들을 수집하여 동영상 콘텐츠를 생성하는 자동 편집부;를 포함하는 것을 특징으로 하는 자동 동영상 콘텐츠 생성 시스템.
PCT/KR2016/013875 2015-12-27 2016-11-29 콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템 Ceased WO2017116015A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0187017 2015-12-27
KR1020150187017A KR101898765B1 (ko) 2015-12-27 2015-12-27 콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템

Publications (1)

Publication Number Publication Date
WO2017116015A1 true WO2017116015A1 (ko) 2017-07-06

Family

ID=59224910

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/013875 Ceased WO2017116015A1 (ko) 2015-12-27 2016-11-29 콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템

Country Status (2)

Country Link
KR (1) KR101898765B1 (ko)
WO (1) WO2017116015A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220261435A1 (en) * 2021-01-22 2022-08-18 Samsung Electronics Co., Ltd. Method and electronic device for providing personalized media content

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111753762B (zh) * 2020-06-28 2024-03-15 北京百度网讯科技有限公司 视频中关键标识的识别方法、装置、设备以及存储介质
KR102553519B1 (ko) * 2021-12-07 2023-07-10 한국전자기술연구원 컴퓨터와 사람의 협업을 통한 동영상 반자동 편집을 위한 인공지능 기반 동영상 편집 추천 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002189813A (ja) * 2000-12-20 2002-07-05 Fuji Xerox Co Ltd コンテンツ再利用サービスシステム及びコンテンツ再利用方法
KR20050003690A (ko) * 2003-07-04 2005-01-12 주식회사 엠투그래픽스 동영상의 자동편집장치와 그 방법 및 동영상자동편집방법이 저장된 기록매체
KR20110121830A (ko) * 2010-05-03 2011-11-09 삼성전자주식회사 이동통신 단말기에서 자동으로 뮤직비디오를 생성하기 위한 장치 및 방법
JP2014081957A (ja) * 2007-06-05 2014-05-08 Intellectual Ventures Fund 83 Llc 意味分類装置を利用した自動的なストーリー生成
US20150147045A1 (en) * 2013-11-26 2015-05-28 Sony Corporation Computer ecosystem with automatically curated video montage

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002189813A (ja) * 2000-12-20 2002-07-05 Fuji Xerox Co Ltd コンテンツ再利用サービスシステム及びコンテンツ再利用方法
KR20050003690A (ko) * 2003-07-04 2005-01-12 주식회사 엠투그래픽스 동영상의 자동편집장치와 그 방법 및 동영상자동편집방법이 저장된 기록매체
JP2014081957A (ja) * 2007-06-05 2014-05-08 Intellectual Ventures Fund 83 Llc 意味分類装置を利用した自動的なストーリー生成
KR20110121830A (ko) * 2010-05-03 2011-11-09 삼성전자주식회사 이동통신 단말기에서 자동으로 뮤직비디오를 생성하기 위한 장치 및 방법
US20150147045A1 (en) * 2013-11-26 2015-05-28 Sony Corporation Computer ecosystem with automatically curated video montage

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220261435A1 (en) * 2021-01-22 2022-08-18 Samsung Electronics Co., Ltd. Method and electronic device for providing personalized media content
US11829408B2 (en) * 2021-01-22 2023-11-28 Samsung Electronics Co., Ltd Method and electronic device for providing personalized media content

Also Published As

Publication number Publication date
KR101898765B1 (ko) 2018-09-13
KR20170077000A (ko) 2017-07-05

Similar Documents

Publication Publication Date Title
US10325627B2 (en) Information processing method and image processing apparatus
CN110968736B (zh) 视频生成方法、装置、电子设备及存储介质
KR102290419B1 (ko) 디지털 컨텐츠의 시각적 내용 분석을 통해 포토 스토리를 생성하는 방법 및 장치
WO2018038277A1 (ko) 대화방을 통해 각 사용자의 상태를 반영한 화상 데이터를 공유하는 메시지 공유 방법메시지 공유 방법 및 상기 방법을 실행시키기 위한 컴퓨터 프로그램
CN110866236B (zh) 隐私图片显示方法、装置、终端及存储介质
EP3533021A1 (en) Context based augmented advertisement
CN114567819B (zh) 视频生成方法、装置、电子设备及存储介质
WO2015119335A1 (ko) 콘텐츠 추천 방법 및 장치
TW201417575A (zh) 影像自動字幕
CN102088597A (zh) 动静结合估计视频视觉显著度的方法
WO2020259449A1 (zh) 一种短视频的生成方法及装置
CN113610720A (zh) 视频去噪方法及装置、计算机可读介质和电子设备
US9973649B2 (en) Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program
CN106791032A (zh) 静态图像转换为动态影像的方法和装置
CN116095363A (zh) 基于关键行为识别的移动端短视频高光时刻剪辑方法
CN108958592B (zh) 视频处理方法及相关产品
US10984248B2 (en) Setting of input images based on input music
WO2017003031A1 (ko) 감성 아바타 이모티콘 기반의 초경량 데이터 애니메이션 방식 제공 방법, 그리고 이를 구현하기 위한 감성 아바타 이모티콘 제공 단말장치
WO2017116015A1 (ko) 콘텐츠 인식 기술 기반 콘텐츠 자동 생성 방법 및 시스템
CN114780795A (zh) 一种视频素材筛选方法、装置、设备及介质
CN112860941A (zh) 一种封面推荐方法、装置、设备及介质
JP2001127990A (ja) 情報通信システム
WO2019132066A1 (ko) 다중 프로필을 제공하는 방법 및 시스템
CN115039412B (zh) 图像显示装置、系统以及方法
CN110324609B (zh) 输出信号同步性检测方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16881967

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16881967

Country of ref document: EP

Kind code of ref document: A1