KR20170090343A - Multi-media file structure and system including meta information for providing user request and environment customize contents - Google Patents

Multi-media file structure and system including meta information for providing user request and environment customize contents Download PDF

Info

Publication number
KR20170090343A
KR20170090343A KR1020160081524A KR20160081524A KR20170090343A KR 20170090343 A KR20170090343 A KR 20170090343A KR 1020160081524 A KR1020160081524 A KR 1020160081524A KR 20160081524 A KR20160081524 A KR 20160081524A KR 20170090343 A KR20170090343 A KR 20170090343A
Authority
KR
South Korea
Prior art keywords
information
content
multimedia file
image
additional information
Prior art date
Application number
KR1020160081524A
Other languages
Korean (ko)
Other versions
KR101823767B1 (en
Inventor
최준균
전규영
양진홍
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Publication of KR20170090343A publication Critical patent/KR20170090343A/en
Application granted granted Critical
Publication of KR101823767B1 publication Critical patent/KR101823767B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8549Creating video summaries, e.g. movie trailer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]

Abstract

A method for constructing a multimedia file according to an embodiment of the present invention includes the steps of: generating a meta information area in a moving picture file format; adding at least one or more additional information with respect to a specific scene of the moving picture in the meta information area of the moving picture file format; converting the additional information into content including the additional information by adding the additional information to the meta information area; and providing the content to be consumed based on the production type of the content. Accordingly, the present invention can extract an accurate form of image content.

Description

사용자 요구 및 환경 맞춤형 콘텐츠 제공을 위한 메타 정보를 포함하는 멀티미디어 파일 구조 및 그 시스템{MULTI-MEDIA FILE STRUCTURE AND SYSTEM INCLUDING META INFORMATION FOR PROVIDING USER REQUEST AND ENVIRONMENT CUSTOMIZE CONTENTS} TECHNICAL FIELD [0001] The present invention relates to a multimedia file structure including meta information for providing user-requested and environment-customized contents, and a system thereof. [0002] MULTI-MEDIA FILE STRUCTURE AND SYSTEM INCLUDING META INFORMATION FOR PROVIDING USER REQUEST AND ENVIRONMENT CUSTOMIZE CONTENTS [

아래의 설명은 사용자 요구 및 환경 맞춤형 콘텐츠 제공을 위한 메타 정보를 포함하는 멀티미디어 파일 구조 및 그 시스템에 관한 것이다.
The following description relates to a multimedia file structure and its system including meta information for providing user-demand and environment-customized contents.

모바일 단말에서 동영상 콘텐트의 소비가 크게 늘고 있지만 여전히 데이터에 대한 비용이나 소비에 필요한 시간 등의 문제로 인해 동영상 콘텐트를 꺼려하는 경우가 많다. 예를 들면, 사용자 단말에 데이터가 부족한 경우, 동영상 초기 로딩 시간을 싫어하는 경우, 이어폰의 사용자 어려운 경우, 동영상을 충분히 재생할 시간이 없는 경우, 전체 화면 재생에 따른 제어권 박탈을 싫어하는 경우 등에 따라 동영상 콘텐트의 재생을 꺼려한다. Although the consumption of video content on the mobile terminal is greatly increased, there are still many cases in which the user reluctantly relies on the video content due to the cost of data or the time required for consumption. For example, when there is insufficient data in the user terminal, when the user of the earphone is difficult, when the user does not have sufficient time to reproduce the moving picture, when he / she does not want to remove the control due to the full screen reproduction, I am reluctant to play.

이로 인해 도 1과 같이 사용자들이 직접 동영상을 스틸컷 형태로 추출하여 줄거리와 함께 새로운 형태의 콘텐트로 제작하는 경우가 많다. 하지만 이러한 경우 사용자가 직접 수작업으로 콘텐트를 생성 하기 때문에 시간과 노력이 많이 소요된다. 또한 개개인이 따로 제작하기 때문에 콘텐트 원 저작자의 의도가 반영되기 어렵다는 문제점이 있다.
As a result, as shown in FIG. 1, there are many cases in which users directly extract a still image of a moving picture and create a new type of content together with a plot. However, in this case, it takes time and effort because the user manually generates the content by hand. In addition, there is a problem that it is difficult to reflect the intention of the original content creator because individual productions are made separately.

일 실시예에 따른 멀티미디어 파일 구조 및 그 시스템은 사용자 요구 및 환경 맞춤형 콘텐트 제공을 위한 메타 정보를 포함하는 멀티미디어 파일을 제공할 수 있다.
The multimedia file structure and the system according to an exemplary embodiment may provide a multimedia file including meta information for providing a user-requested and environment-customized content.

일 실시예에 따르면, 멀티미디어 파일 구조 시스템은, 동영상 파일 포맷에 메타 정보 영역을 생성하는 단계; 상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계; 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계; 및 상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 단계를 포함할 수 있다.According to one embodiment, a multimedia file structure system includes: generating a meta information area in a video file format; Adding at least one additional information with respect to a specific scene of a moving picture in a meta information area of the moving picture file format; Converting the additional information into content including the additional information by adding the additional information to the meta information area; And providing the content to consume the content based on the created Type.

일측에 따르면, 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 스틸컷 이미지를 추출할 시간 및 상기 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환하는 단계를 포함할 수 있다. According to one aspect of the present invention, when the additional information is added to the meta information area, the step of converting the additional information into the content including the additional information may include a time information, description information, advertisement information, And extracting the text information to be written in the still-cut image and automatically converting the extracted text information into image-type content.

일측에 따르면, 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 스틸컷 이미지를 나열하여 상기 이미지 형태의 콘텐트로 변환하는 단계를 포함할 수 있다.According to an aspect of the present invention, the step of converting the additional information into the content including the additional information as the additional information is added to the meta information area may include the time information, the description information, the advertisement information, the referrer information, In this case, the still-cut image may be listed and converted into the content of the image format.

또 다른 일측에 따르면, 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공개 범위가 설정됨을 수신하는 단계를 포함하고, 상기 콘텐트가 복수의 형태로 제작됨에 따라 상기 콘텐트를 소비하도록 제공하는 단계는, 상기 요약 레벨의 값에 따라 상기 이미지 형태의 콘텐트를 선택적으로 노출하는 단계를 포함할 수 있다. According to another aspect of the present invention, the step of converting the additional information into the content including the additional information as the additional information is added to the meta information area may include a step of converting the time information, the description information, the advertisement information, the referrer information, Comprising the steps of: receiving an indication that an open range for content in the form of an image has been set, wherein the providing of the content to consume as the content is produced in a plurality of forms comprises: And selectively exposing the content in the form of an image.

또 다른 일측에 따르면, 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 프레임 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 상기 콘텐트를 변환하는 단계를 포함할 수 있다. According to another aspect of the present invention, the step of converting the additional information into the content including the additional information as the additional information is added to the meta information area may include a step of converting the time information, the description information, the advertisement information, the referrer information, And if so, specifying the frame type to convert the content based on the intent of the content provider.

또 다른 일측에 따르면, 상기 변환된 콘텐트를 소비하도록 제공하는 단계는, 리퍼러 정보 및 링크 정보에 기초하여 사용자에게 추가적인 정보를 제공하거나 상기 사용자가 관심있는 장면 및 포인트에 통계화하여 제공하는 단계를 포함할 수 있다.According to another aspect, providing the transformed content to consume includes providing additional information to the user based on the referrer information and the link information, or providing the user with statistical information on the scene and point of interest can do.

또 다른 일측에 따르면, 상기 메타 정보 영역은, 메타 정보의 프레임 타입을 싱글(Single), 쿼드(Quad) 또는 기 정의된 타입의 넘버가 입력됨에 응답하여 상기 입력된 타입으로 구성하는 단계를 포함할 수 있다. According to another aspect of the present invention, the meta information area includes a step of configuring the frame type of the meta information into the input type in response to the input of a single, quad or predefined type number .

또 다른 일측에 따르면, 상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계는, 상기 동영상에서 오디오 마이닝(Audio Mining)을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하여 상기 메타 정보 영역에 저장하는 단계를 포함할 수 있다. According to another aspect of the present invention, the step of adding at least one or more additional information related to a specific scene of a moving picture to a meta information area of the moving picture file format may include a specific effect based on audio mining in the moving picture, And extracting a still cut image associated with the inserted segment and storing the extracted still cut image in the meta information area.

일 실시예에 따르면, 멀티미디어 파일 구성 방법에서 확장된 멀티미디어 파일을 실행시키기 위한 컴퓨터 프로그램에 있어서, 상기 멀티미디어 파일 구성 방법은, 동영상 파일 포맷에 추가적인 메타 정보 영역을 생성하는 단계; 상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계; 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계; 및 상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 단계를 포함할 수 있다. According to an embodiment, there is provided a computer program for executing an extended multimedia file in a multimedia file composition method, the computer program comprising the steps of: generating a meta information area in a video file format; Adding at least one additional information with respect to a specific scene of a moving picture in a meta information area of the moving picture file format; Converting the additional information into content including the additional information by adding the additional information to the meta information area; And providing the content to consume the content based on the created Type.

일 실시예에 따르면, 멀티미디어 파일 구성 시스템은, 동영상 파일 포맷에 메타 정보 영역을 생성하는 생성부; 상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 부가부; 상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 변환부; 및 상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 제공부를 포함할 수 있다.According to one embodiment, a multimedia file organizing system includes: a generating unit for generating a meta information area in a moving picture file format; An adder for adding at least one additional information in relation to a specific scene of a moving picture in a meta information area of the moving picture file format; A converting unit for converting the additional information into content including the additional information as the additional information is added to the meta information area; And a providing unit for providing the content to be consumed based on a type in which the content is produced.

일측에 따르면, 상기 변환부는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 스틸컷 이미지를 추출할 시간 및 상기 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환할 수 있다. According to one aspect, when the time information, the description information, the advertisement information, and the referer information for the specific scene are included, the converting unit extracts the time to extract the still-cut image and the text information to be written in the still- To the image type content.

또 다른 일측에 따르면, 상기 변환부는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 스틸컷 이미지를 나열하여 상기 이미지 형태의 콘텐트로 변환할 수 있다. According to another aspect of the present invention, when the time information, the description information, the advertisement information, the referer information, and the image information for the specific scene are included, the converting unit may convert the still-cut images into the content of the image format .

또 다른 일측에 따르면, 상기 변환부는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공개 범위가 설정됨을 수신하는 것을 포함하고, 상기 제공부는, 상기 요약 레벨의 값에 따라 상기 이미지 형태의 콘텐트를 선택적으로 노출할 수 있다. According to another aspect of the present invention, the converting unit includes receiving a setting of a range of the image-type content when the time information, the description information, the advertisement information, the referrer information, and the summary level of the specific scene are included , The providing unit may selectively expose the content of the image format according to the value of the summary level.

또 다른 일측에 따르면, 상기 변환부는, 상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 프레임 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 상기 콘텐트를 변환할 수 있다. According to another aspect of the present invention, when the conversion unit includes time information, description information, advertisement information, referrer information, and summary level for the specific scene, the conversion unit converts the content based on the intention of the content provider by designating a frame type can do.

또 다른 일측에 따르면, 상기 제공부는, 리퍼러 정보 및 링크 정보에 기초하여 사용자에게 추가적인 정보를 제공하거나 상기 사용자가 관심있는 장면 및 포인트에 통계화하여 제공할 수 있다. According to another aspect, the providing unit may provide additional information to the user based on the referrer information and the link information, or may provide the user with the scene and points of interest statistically.

또 다른 일측에 따르면, 상기 메타 정보 영역은, 메타 정보의 프레임 타입을 싱글(Single), 쿼드(Quad) 또는 기 정의된 타입의 넘버가 입력됨에 응답하여 상기 입력된 타입으로 구성할 수 있다. According to another aspect of the present invention, the meta information area may configure the frame type of the meta information into the input type in response to the input of a single, quad or a predefined type number.

또 다른 일측에 따르면, 상기 부가부는, 상기 동영상에서 오디오 마이닝(Audio Mining)을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하여 상기 메타 정보 영역에 저장하는 것을 포함할 수 있다. According to another aspect of the present invention, the adding unit may include extracting a still-cut image related to a section in which a specific effect is inserted based on audio mining in the moving image, and storing the extracted still-cut image in the meta information area have.

상기 변환부는, 상기 동영상에서 오디오 마이닝(Audio Mining)을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하거나 상기 동영상의 메타 데이터 정보를 이용하여 스틸컷 이미지를 추출할 수 있다.
The converting unit may extract a still-cut image related to a section in which a specific effect is inserted based on audio mining in the moving image or extract a still-cut image using metadata of the moving image .

일 실시예에 따른 멀티미디어 파일 구성 시스템은 동영상을 추가적인 노력이나 시간의 소비 없이 정확한 형태의 이미지 콘텐트를 추출하는 것이 가능하도록 제공할 수 있다. The multimedia file composition system according to an embodiment can provide a moving picture so that it can extract image contents of an accurate form without any additional effort or time consuming.

일 실시예에 따른 멀티미디어 파일 구성 시스템은 동영상 전체를 이미지 형태의 콘텐트로 제공할 수 있고, 제작자의 의도가 반영된 이미지 형태의 콘텐트를 제공할 수 있다. 또한, 동영상 대비 트래픽 및 프로세싱 비용이 감소하기 때문에 저비용으로 서비스를 제공하는 것이 가능하다.
The multimedia file organizing system according to an exemplary embodiment can provide the entire moving image as content in the form of an image, and can provide content in the form of an image reflecting the intention of the producer. In addition, because traffic and processing costs are reduced compared to video, it is possible to provide services at low cost.

도 1은 동영상 콘텐트를 이미지로 변환해서 소비하는 경우의 예시를 나타내는 도면이다.
도 2는 일 실시예에 따른 멀티미디어 파일 구성 시스템의 네트워크 환경을 설명하기 위한 도면이다.
도 3은 일 실시예에 따른 멀티미디어 파일 구성 시스템의 구성을 설명하기 위한 블록도이다.
도 4는 일 실시예에 따른 맞춤형 콘텐트 서비스의 예를 나타낸 도면이다.
도 5는 일 실시예에 따른 동영상 파일 포맷의 구성을 설명하기 위한 도면이다.
도 6은 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우를 설명하기 위한 도면이다.
도 7은 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우를 설명하기 위한 도면이다.
도 8 및 9는 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우를 설명하기 위한 도면이다.
도 10은 일 실시예에 있어서, 메타 정보의 형태를 설명하기 위한 도면이다.
도 11은 일 실시예에 따른 멀티미디어 파일 구성 시스템의 멀티미디어 파일 구성 방법을 설명하기 위한 흐름도이다.
1 is a diagram showing an example of a case where video content is converted into an image and consumed.
2 is a view for explaining a network environment of a multimedia file configuration system according to an embodiment.
3 is a block diagram illustrating a configuration of a multimedia file configuration system according to an embodiment.
4 is a diagram illustrating an example of a customized content service according to an embodiment.
5 is a diagram for explaining a configuration of a moving picture file format according to an embodiment.
FIG. 6 is a view for explaining a case in which time information, description information, advertisement information and referrer information for a main scene are included in one embodiment.
FIG. 7 is a view for explaining a case in which time information, description information, advertisement information, referrer information, and image information for a main scene are included in one embodiment.
8 and 9 are views for explaining a case in which time information, description information, advertisement information, referrer information, and summary level for a main scene are included in one embodiment.
10 is a diagram for explaining a form of meta information in an embodiment.
11 is a flowchart illustrating a method of configuring a multimedia file in a multimedia file configuration system according to an embodiment.

이하, 실시예를 첨부한 도면을 참조하여 상세히 설명한다.
Hereinafter, embodiments will be described in detail with reference to the accompanying drawings.

도 2는 일 실시예에 따른 멀티미디어 파일 구성 시스템의 네트워크 환경을 설명하기 위한 도면이다.2 is a view for explaining a network environment of a multimedia file configuration system according to an embodiment.

스틸컷 이미지 정보를 포함한 동영상 콘텐트 서비스 제공 환경에서, 멀티미디어 파일 구성 시스템은 사용자의 요구 사항 또는 환경에 따라 동영상 또는 이미지 형태의 콘텐트를 제공할 수 있다. 콘텐트 서버(Content Server)(200)는 사용자 단말(210), OTT(Over The Top) 또는 Web Enabled Devices(211)에 캡션이 부가된 동영상 또는 이미지 형태의 콘텐트를 제공할 수 있다. 콘텐트 서버(Content Server)(200)는 실시간으로 스트리밍되는 동영상에 대하여 이미지 형태의 콘텐트로 제공할 수 있다. In a video content service providing environment including still cut image information, a multimedia file composition system can provide moving image or image type content according to a user's requirement or environment. The content server 200 may provide a moving image or an image in which caption is added to the user terminal 210, the OTT (Over The Top), or the Web Enabled Devices 211. The content server 200 may provide the content to be streamed in real time as image-type content.

통계 서버(Statistics Server)(201) 및/또는 광고 서버(Ad.Server)(202)에서 제공하는 통계 정보 또는 광고 정보를 동영상 또는 이미지 형태의 콘텐트에 부가하여 제공될 수 있다. 예를 들면, 리퍼러 정보를 통해 사용자가 소비한 이미지에 대한 통계 정보를 통계 서버(201)를 통해 수집할 수 있고, 링크 정보를 통해 광고나 추가 정보를 광고 서버(202) 또는 별도의 서버를 통하여 사용자 단말, OTT(Over The Top) 또는 Web Enabled Devices(211) 등에 제공할 수 있다. 또한 동영상 또는 이미지의 메타 정보 중 주요 장면에 대한 디스크립션 정보 또는 광고 정보를 이용해 광고 서버(202)로부터 키워드 기반 광고 매칭 기능을 제공할 수 있다. 이때, 콘텐트 서버(200)는 동영상을 이미지 형태의 콘텐트로 변환하는 과정에서 소요되는 처리 시간을 예측하여 이미지 광고를 제공할 수도 있다. May be provided by adding statistical information or advertisement information provided by a statistics server 201 and / or an ad server 202 to moving image or image type content. For example, statistical information on an image consumed by a user can be collected through the statistical server 201 through the referrer information, and the advertisement or additional information can be transmitted through the advertisement server 202 or a separate server A user terminal, OTT (Over The Top), Web Enabled Devices 211, and the like. In addition, the advertisement server 202 may provide a keyword-based advertisement matching function using description information or advertisement information of a main scene among meta information of a moving image or an image. At this time, the content server 200 may provide the image advertisement by predicting the processing time required for converting the moving image into the image type content.

사용자 단말(210)은 PC, 노트북, 스마트폰(smart phone), 태블릿(tablet), 웨어러블 컴퓨터(wearable computer) 등으로, 콘텐츠 제공 시스템과 관련된 웹/모바일 사이트의 접속 또는 서비스 전용 어플리케이션의 설치 및 실행이 가능한 모든 단말 장치를 의미할 수 있다. 이때, 사용자 단말(210)은 웹/모바일 사이트 또는 전용 어플리케이션의 제어 하에 서비스 화면 구성, 데이터 입력, 데이터 송수신, 데이터 저장 등 서비스 전반의 동작을 수행할 수 있다.The user terminal 210 may be a personal computer (PC), a notebook computer, a smart phone, a tablet, a wearable computer, or the like, May refer to all possible terminal devices. At this time, the user terminal 210 can perform the service-wide operation such as service screen configuration, data input, data transmission / reception, and data storage under the control of the web / mobile site or the dedicated application.

멀티미디어 파일 구성 시스템에 포함된 프로세서는 생성부, 부가부, 변환부 및 제공부를 포함할 수 있다. 이러한 프로세서 및 프로세서의 구성요소들은 멀티미디어 파일 구성 시스템을 제어할 수 있다. 이때, 프로세서 및 프로세서의 구성요소들은 메모리가 포함하는 운영체제의 코드와 적어도 하나의 프로그램의 코드에 따른 명령(instruction)을 실행하도록 구현될 수 있다. 여기서, 프로세서의 구성요소들은 멀티미디어 파일 구성 시스템에 저장된 프로그램 코드가 제공하는 제어 명령에 따라 프로세서에 의해 수행되는 서로 다른 기능들(different functions)의 표현들일 수 있다. The processor included in the multimedia file configuration system may include a generating unit, an adding unit, a converting unit, and a providing unit. These processor and processor components can control the multimedia file configuration system. At this time, the processor and the components of the processor may be implemented to execute instructions according to code of the operating system and code of at least one program that the memory includes. Here, the components of the processor may be representations of different functions performed by the processor in accordance with control commands provided by the program code stored in the multimedia file composition system.

생성부는 동영상 파일 포맷에 메타 정보 영역을 생성할 수 있다.The generator may generate a meta information area in the video file format.

부가부는 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가할 수 있다. 예를 들면, 메타 정보 영역에 저장된 동영상에서 오디오 마이닝을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하여 메타 정보 영역에 저장할 수 있다. 변환부는 메타 정보 영역에 포함된 메타 정보를 이용하여 스틸컷 이미지를 추출할 수 있다. The appending unit may add at least one or more additional information with respect to a specific scene of the moving picture in the meta information area of the moving picture file format. For example, it is possible to extract a still-cut image related to a section in which a specific effect is inserted based on audio mining from a moving image stored in the meta information area, and store the extracted still-cut image in the meta information area. The converting unit may extract the still-cut image using the meta information included in the meta information area.

변환부는 메타 정보 영역에 부가 정보를 부가함에 따라 부가 정보가 포함된 콘텐트로 변환할 수 있다. 변환부는 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 스틸컷 이미지를 추출할 시간 및 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환할 수 있다. The converting unit may convert the content into the content including the additional information as the additional information is added to the meta information area. If the time information, the description information, the advertisement information, and the referer information for a specific scene are included, the converting unit extracts the time to extract the still-cut image and the text information to be written in the still-cut image and automatically converts the extracted text information into image- .

변환부는 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 스틸컷 이미지를 나열하여 이미지 형태의 콘텐트로 변환할 수 있다. When the conversion unit includes time information, description information, advertisement information, referrer information, and image information for a specific scene, the still-cut image may be listed and converted into image-type content.

변환부는 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공개 범위가 설정됨을 수신할 수 있다. 제공부는 요약 레벨의 값에 따라 이미지 형태의 콘넨트를 선택적으로 노출할 수 있다. The converting unit may receive the setting of the open range for the content in the image format when the converting unit includes time information, description information, advertisement information, referrer information, and summary level for a specific scene. The provider may selectively expose the image type of content according to the value of the summary level.

변환부는 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 프레임 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 콘텐트를 변환할 수 있다. When the conversion unit includes time information, description information, advertisement information, referrer information, and summary level for a specific scene, a frame type can be specified to convert the content based on the intention of the content provider.

제공부는 콘텐트가 제작된 타입에 기초하여 콘텐트를 소비하도록 제공할 수 있다. The providing unit may provide the content to consume the content based on the produced type.

도 3은 일 실시예에 따른 멀티미디어 파일 구성 시스템의 구성을 설명하기 위한 블록도이다.3 is a block diagram illustrating a configuration of a multimedia file configuration system according to an embodiment.

멀티 미디어 파일 구성 시스템은 콘텐트 서버(300)에 의하여 동작될 수 있다. The multimedia file organizing system may be operated by the content server 300.

콘텐트 서버(300)는 스토리지(Storage) 또는 데이터베이스(301, 302, 303), 스트리머(Streamer)(310), V2I 엔진(Engine)(320), WAS(330) 및 통계(Statistics) 데이터베이스(340)를 포함할 수 있다. The content server 300 includes storage or databases 301, 302 and 303, a streamer 310, a V2I engine 320, a WAS 330 and a statistics database 340 ).

스트리머(Streamer)(310)는 사용자의 요청에 따라 미디어(예를 들면, 동영상)을 스트리밍 하는 기능을 제공할 수 있다. 스트리머(310)는 MPEG-DASH, HLS(HTTP Live Streaming), Progressive Download, MMT(MPEG Media Transport), RTP(Real-time Transport Protocol) 기반의 동영상 스트리밍을 지원할 수 있다. The streamer 310 may provide a function of streaming media (e.g., video) in response to a user's request. The streamer 310 can support moving picture streaming based on MPEG-DASH, HLS (HTTP Live Streaming), Progressive Download, MMT (MPEG Media Transport), and RTP (Real-time Transport Protocol).

스토리지 또는 데이터베이스(301, 302, 303)는 원본 콘텐트(Original Content), 메타 데이터(Metadata), 변환된 콘텐트(Converted Content)가 각각의 스토리지 또는 데이터베이스에 저장될 수 있다. 예를 들면, 원본 콘텐트를 저장하고 있는 스토리지 또는 데이터베이스(301), 메타 데이터를 저장하고 있는 스토리지 또는 데이터베이스(302), 변환된 콘텐트를 저장하고 있는 스토리지 또는 데이터베이스(303)가 각각 존재할 수 있다.The storage or databases 301, 302, and 303 may store original content, metadata, and converted content in respective storages or databases. For example, there may be a storage or database 301 storing the original content, a storage or database 302 storing the metadata, a storage storing the converted content, or a database 303, respectively.

V2I 엔진(Video to Image Engine)(320)은 Subtitle & Meta Script Analyzer(321) 및 FFmpeg(322)를 포함할 수 있다. Subtitle & Meta Script Analyzer(321)는 메타데이터가 저장되어 있는 스토리지 또는 데이터베이스(302) 및 원본 콘텐트가 저장되어 있는 스토리지 또는 데이터베이스(301) 상에서 자막(Subtitle) 및 메타 스크립트(Meta Script)에 대한 정보를 읽어들여 상기 정보에 기초하여 콘텐트 생성 기능을 제공할 수 있다. 예를 들면, Subtitle & Meta Script Analyzer(321)는 메타 정보를 이용하여 콘텐트를 구성할 수 있다. The V2I engine (Video to Image Engine) 320 may include a Subtitle & Meta Script Analyzer 321 and a FFmpeg 322. Subtitle & Meta Script Analyzer 321 stores information about subtitle and meta-script on the storage or database 302 where metadata is stored and on the storage or database 301 where original content is stored And provide a content generation function based on the information. For example, the Subtitle & Meta Script Analyzer 321 can construct the content using meta information.

FFmpeg(322)는 동영상에서 이미지를 추출 및 자막 오버레이(Overlay) 기능을 수행하는 오픈 소스 소프트웨어 모듈일 수 있다. 이때, 원본 콘텐트에서 추출하는 정보는 시스템의 설정에 따라 변환된 콘텐트 스토리지 또는 데이터베이스에 저장되어 재사용될 수 있다. FFmpeg 322 may be an open source software module that extracts images from a movie and performs a subtitle overlay function. At this time, the information extracted from the original content can be stored and reused in the converted content storage or database according to the setting of the system.

WAS(330)은Content Player(331), Request Handler(332) 및 Statistics(333) 모듈을 포함할 수 있다. The WAS 330 may include a Content Player 331, a Request Handler 332, and a Statistics 333 module.

Content Player(331)는 HTML 5 기반의 Content Player로 비디오 또는 맞춤형 이미지 형태의 콘텐트 소비를 선택할 수 있는 기능을 제공할 수 있다. 이때, MPEG DASH 기반의 플레이어와의 호환을 위해 별도의 스크립트를 통해 플레이어 상에 비디오 또는 이미지를 재생하는 기능을 노출할 수 있다. The content player 331 can provide a function of selecting content consumption in the form of video or custom image with an HTML 5 based content player. At this time, for the compatibility with the player based on the MPEG DASH, a function of playing a video or an image on the player through a separate script can be exposed.

Request Handler(332)는 사용자의 콘텐트 소비 형태의 선택에 응답하여 단말의 환경 정보(예를 들면, 단말에 이어폰의 연결 여부, 네트워크의 대역폭의 제약, 사용자의 Pre-setting)에 기초하여 콘텐트 재생과 관련된 요청을 분기하여 스트리머(310)을 통해 비디오 스트리밍을 제공할 것인지, V2I 엔진(320)을 통해 이미지 기반의 콘텐트를 제공할 것인지를 결정할 수 있다. The request handler 332 responds to the selection of the content consumption mode of the user to reproduce the content based on the environment information of the terminal (for example, whether the earphone is connected to the terminal, the bandwidth limitation of the network, It may branch the associated request to determine whether to provide video streaming via streamer 310 or to provide image-based content via V2I engine 320. [

Statistics 모듈(333)은 사용자의 콘텐트 소비에 따른 통계 정보를 생성하기 위한 모듈로서, 개별 콘텐트 소비시 발생하는 광고 요청과 관련된 정보도 함께 기록할 수 있다. 별도의 광고, 통계로 연결되는 경우(예를 들면, 리퍼러 정보, 링크 메타데이터 이용시) 콘텐트 서버측에서는 해당 연결 요청에 대한 기록을 남길 수 있다. The statistics module 333 is a module for generating statistical information according to user's content consumption, and can also record information related to an advertisement request generated when individual contents are consumed. In the case of connecting to separate advertisements and statistics (for example, when using referrer information and link metadata), the content server side can leave a record of the connection request.

통계 데이터베이스(Statistics Database)(340)는 사용자의 콘텐트 소비 정보, 리퍼러 정보, 링크 정보 등의 요청에 따른 기록을 저장하는 역할을 담당할 수 있다. 이때, 통계 데이터베이스(340) 이외에 별도로 Ad.broker 모듈의 연결이 가능하다. The statistics database 340 may store a record according to a request of a user for content consumption information, referrer information, link information, and the like. At this time, besides the statistical database 340, Ad.broker module can be connected separately.

도 5는 일 실시예에 따른 동영상 파일 포맷의 구성을 설명하기 위한 도면이다. 5 is a diagram for explaining a configuration of a moving picture file format according to an embodiment.

종래의 동영상 파일 포맷은 헤더(Header)(510) 및 데이터 영역(520)으로 구성되어 있다. 본 발명은 동영상 파일 포맷에 메타 정보 영역(530)을 부가한 동영상 파일 구조를 제공할 수 있다. The conventional moving image file format is composed of a header 510 and a data area 520. The present invention can provide a moving picture file structure in which a meta information area 530 is added to a moving picture file format.

이에 따라 동영상 파일 포맷에 헤더(Header)(510), 데이터 영역(520) 및 메타 정보 영역(530)으로 구성될 수 있다. Accordingly, the video file format may include a header 510, a data area 520, and a meta information area 530.

동영상 파일 포맷에 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보 등을 추가할 수 있으며, 스틸컷 이미지 정보를 추가할 수도 있다. Time information, description information, advertisement information, referrer information, and the like for a specific scene can be added to the moving picture file format, and the still-cut image information can be added.

메타 데이터 영역이 부가된 동영상 파일 포맷은 일반 동영상 콘텐트처럼 재생될 수 있으며, 추가된 정보는 사용자에게 노출되지 않는다. 콘텐트 제공자 또는 제작자가 의도를 반영하여 복수의 형태로 소비할 수 있는 콘텐트를 제작할 경우, 메타 정보 영역을 추가하여 작성할 수 있다. The video file format to which the metadata area is added can be reproduced like normal video content, and the added information is not exposed to the user. When a content provider or a producer can produce content that can be consumed in a plurality of formats by reflecting the intention, a meta information area can be added and created.

도 10을 참고하면, 메타 정보의 형태를 설명하기 위한 도면이다. 메타 정보의 형태는 HTML Tag 형태 또는 JSON 형태로 표현될 수 있으며, HTML Tag 형태 또는 JSON는 서로 변환 가능하다. Referring to FIG. 10, this is a diagram for explaining a form of meta information. The type of meta information can be expressed in HTML Tag form or JSON form, and HTML Tag form or JSON can be mutually converted.

메타 정보는 리퍼러 정보 및 링크 정보를 통해 사용자에게 추가적인 정보를 제공하거나 사용자가 관심있는 장면이나 포인트를 통계할 수 있다. The meta information may provide additional information to the user through the referrer information and the link information, or may allow the user to view the scene or point of interest.

메타 정보 영역은 메타 정보의 프레임 타입을 싱글(Single), 쿼드(Quad) 또는 기 정의된 타입의 넘버가 입력됨에 응답하여 입력된 타입으로 구성될 수 있다. The meta information area may be composed of a single type, a quad, or a type entered in response to the input of a number of a predefined type.

도 6은 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우를 설명하기 위한 도면이다. FIG. 6 is a view for explaining a case in which time information, description information, advertisement information and referrer information for a main scene are included in one embodiment.

멀티미디어 파일 구성 시스템은 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 콘텐트를 서비스하는 플랫폼이나 시스템에서 메타 정보에 기반하여 스틸컷 이미지를 추출할 시간 및 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환할 수 있다. When the multimedia file configuration system includes time information, description information, advertisement information, and referrer information for a specific scene, the time and the time for extracting the still-cut image based on the meta information in the platform or the system servicing the content It is possible to extract the text information to be written and automatically convert the text information into image-type content.

도 7은 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우를 설명하기 위한 도면이다.FIG. 7 is a view for explaining a case in which time information, description information, advertisement information, referrer information, and image information for a main scene are included in one embodiment.

멀티미디어 파일 구성 시스템은 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 콘텐트를 서비스하는 플랫폼이나 시스템에서 메타 정보에 기반하여 스틸컷 이미지를 나열하여 이미지 형태의 콘텐트로 변환할 수 있다. When the multimedia file configuration system includes time information, description information, advertisement information, referrer information, and image information for a specific scene, the still-cut image is listed based on the meta information in the platform or the system that provides the content, Can be converted into content.

도 8 및 9는 일 실시예에 있어서, 주요 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우를 설명하기 위한 도면이다.8 and 9 are views for explaining a case in which time information, description information, advertisement information, referrer information, and summary level for a main scene are included in one embodiment.

도 8을 참고하면, 멀티미디어 파일 구성 시스템은 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공가 범위가 설정됨을 수신할 수 있다. 예를 들면, 사용자로부터 콘텐트를 이미지로 구성함에 있어서, 전체 이미지를 모두 보여줄 것인지, 일부의 중요 이미지만을 요약하여 보여줄 것인지를 선택할 수 있다. Referring to FIG. 8, when the multimedia file configuration system includes time information, description information, advertisement information, referrer information, and summary level for a specific scene, it is possible to receive that an annexed range is set for content in image form. For example, in configuring the content as an image from a user, it is possible to select whether to display the entire image or only a part of important images in a summary format.

멀티미디어 파일 구성 시스템은 요약 레벨(summary_level)에 기초하여 이미지 형태의 콘텐트를 선택적으로 노출할 수 있다. 예를 들면, 요약 레벨은 1 내지 10까지의 범위로 구성될 수 있으며, 요약 레벨값이 높아질수록 이미지의 수가 적어질 수 있다. The multimedia file organizing system may selectively expose the content of the image type based on the summary level (summary_level). For example, the summary level can be comprised in the range of 1 to 10, and the higher the summary level value, the fewer the number of images can be.

도 9를 참고하면, 멀티미디어 파일 구성 시스템은 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 프레임의 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 콘텐트를 변환할 수 있다. 멀티미디어 파일 구성 시스템은 콘텐트 제공자가 원하는 방식대로 다양하고 섬세하게 표현할 수 있도록 제공할 수 있다. 예를 들면, 콘텐트 제공자가 이미지 프레임을 복수의 분할로 나누어 하나의 이미지로 제작할 수 있고, 테두리를 형성하여 제작할 수도 있다. Referring to FIG. 9, when the multimedia file configuration system includes time information, description information, advertisement information, referrer information, and summary level for a specific scene, the multimedia file configuration system specifies a type of the image frame to display the content based on the intention of the content provider Can be converted. The multimedia file composition system can provide various and delicate expressions in a manner desired by the content provider. For example, a content provider may divide an image frame into a plurality of divisions to produce one image, or may form a frame.

도 4를 참고하면, 맞춤형 콘텐트 서비스의 예를 나타낸 것으로, 사용자는 콘텐트 타입에 기초하여 콘텐트를 소비할 수 있다. 예를 들면, 사용자는 동영상 또는 이미지 형태의 콘텐트를 소비할 수 있다. 사용자는 이미지를 스와이프 또는 스크롤함으로써 이미지 형태의 콘텐트를 볼 수 있다. Referring to FIG. 4, there is shown an example of a customized content service in which a user can consume content based on a content type. For example, a user may consume content in the form of a movie or image. The user can view the content in image form by swiping or scrolling the image.

멀티미디어 파일 구성 시스템은 동영상에서 제공되던 추가 콘텐트(예를 들면, 광고)를 이미지 형태의 콘텐트 환경에서도 제공할 수 있다. 예를 들면, 멀티디미어 파일 구성 시스템은 동영상을 재생하기 전에 프리로딩 광고, 중간 삽입 광고 및 팝업 콘텐트 등을 이미지 형태의 콘텐트를 제공할 때에도 제공할 수 있다. The multimedia file organizing system may also provide additional content (e.g., advertisements) provided in the video in an image-like content environment. For example, a multi-demime file organization system may provide preloading advertisements, intermediate interstitials, and pop-up content, etc., in the form of images in the form of images before reproducing the moving pictures.

도 11은 일 실시예에 따른 멀티미디어 파일 구성 시스템의 멀티미디어 파일 구성 방법을 설명하기 위한 흐름도이다. 11 is a flowchart illustrating a method of configuring a multimedia file in a multimedia file configuration system according to an embodiment.

사용자는 사용자가 소비할 콘텐트 타입을 결정할 수 있다. 멀티미디어 파일 구성 시스템은 사용자로부터 소비하고자 하는 콘텐트 타입이 결정됨을 수신할 수 있다(1110). 멀티미디어 파일 구성 시스템은 사용자로부터 선택된 콘텐트 타입을 판단할 수 있다. The user can determine the type of content the user will consume. The multimedia file organizing system may receive (1110) that a content type to be consumed by the user is determined. The multimedia file organizing system can determine the content type selected from the user.

멀티미디어 파일 구성 시스템은 사용자로부터 콘텐트 타입으로 동영상이 결정됨에 따라 동영상 데이터를 스트리밍할 수 있다(1111). 사용자는 동영상 형태로 콘텐트를 소비할 수 있다(1112).The multimedia file organizing system may stream the moving picture data as the moving picture is determined from the user as the content type (1111). The user may consume the content in the form of a video (1112).

멀티미디어 파일 구성 시스템은 사용자로부터 콘텐트 타입으로 이미지가 결정됨에 따라 맞춤형 콘텐트 제공을 위한 메타 정보가 포함되었는지 여부를 판단할 수 있다(1120). 이때, 메타 정보가 포함되어 있는 경우, 멀티미디어 파일 구성 시스템은 콘텐트에 포함된 메타 정보를 분석할 수 있다(1121). The multimedia file organizing system may determine whether the meta information for providing the customized content is included as the image is determined as a content type from the user (1120). At this time, if the meta information is included, the multimedia file organizing system can analyze the meta information included in the content (1121).

콘텐트에 메타 정보가 포함되어 있지 않은 경우, 멀티미디어 파일 구성 시스템은 콘텐트에 포함된 자막 정보 또는 프레임 정보 중 어느 하나의 정보를 추출할 수 있다(1130). 멀티미디어 파일 구성 시스템은 콘텐트에 포함된 자막 정보 또는 프레임 정보 이외의 정보들을 추출할 수도 있다. If the content does not include meta information, the multimedia file organizing system may extract any one of the caption information and the frame information included in the content (1130). The multimedia file organizing system may extract information other than the caption information or the frame information included in the content.

멀티미디어 파일 구성 시스템은 콘텐트로부터 메타 정보가 포함된 이미지를 추출할 수 있다(1122). 멀티미디어 파일 구성 시스템은 콘텐트로부터 메타 정보가 포함된 이미지를 추출할 수 있고, 콘텐트에 포함된 자막 정보 및 프레임 정보를 포함하고 있는 이미지를 추출할 수 있다. The multimedia file organizing system may extract the image including the meta information from the content (1122). The multimedia file composition system can extract an image including meta information from the content, and extract an image including the caption information and the frame information included in the content.

멀티미디어 파일 구성 시스템은 추출된 이미지를 사용자의 콘텐트 플레이어에서 바로 재생하거나 웹 페이지로 구성할 수 있다(1123). 멀티미디어 파일 구성 시스템은 이미지를 재생하거나 웹 페이지로 구성하여 사용자가 이미지 형태로 소비하도록 제공할 수 있다. 사용자는 이미지 형태로 콘텐트를 소비하게 된다(1124). The multimedia file composition system can reproduce the extracted image directly from the user's content player or configure it as a web page (1123). The multimedia file composition system can reproduce an image or configure it as a web page so that the user consumes it in an image form. The user consumes the content in image form (1124).

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate array (FPGA) , A programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (17)

멀티미디어 파일 구성 방법에 있어서,
동영상 파일 포맷에 메타 정보 영역을 생성하는 단계;
상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계;
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계; 및
상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
A method of configuring a multimedia file,
Generating a meta information area in a video file format;
Adding at least one additional information with respect to a specific scene of a moving picture in a meta information area of the moving picture file format;
Converting the additional information into content including the additional information by adding the additional information to the meta information area; And
Providing the content to consume the content based on the created Type
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 스틸컷 이미지를 추출할 시간 및 상기 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
The step of converting the additional information into the content including the additional information as the additional information is added to the meta information area,
If the time information, the description information, the advertisement information, and the referer information for the specific scene are included, the time for extracting the still-cut image and the text information to be written in the still-cut image are extracted and automatically converted into the content of the image type step
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 스틸컷 이미지를 나열하여 상기 이미지 형태의 콘텐트로 변환하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
The step of converting the additional information into the content including the additional information as the additional information is added to the meta information area,
When the still picture includes the time information, the description information, the advertisement information, the referer information, and the image information of the specific scene, the step of converting the still pictures into the content of the image type
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공개 범위가 설정됨을 수신하는 단계
를 포함하고,
상기 콘텐트가 복수의 형태로 제작됨에 따라 상기 콘텐트를 소비하도록 제공하는 단계는,
상기 요약 레벨의 값에 따라 상기 이미지 형태의 콘텐트를 선택적으로 노출하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
The step of converting the additional information into the content including the additional information as the additional information is added to the meta information area,
The method comprising the steps of: receiving a set of information about a specific scene, including a time information, description information, advertisement information, referrer information, and a summary level,
Lt; / RTI >
Wherein the step of providing the content to be consumed as the content is produced in a plurality of forms comprises:
Selectively exposing the content of the image type according to the value of the summary level
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 프레임 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 상기 콘텐트를 변환하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
The step of converting the additional information into the content including the additional information as the additional information is added to the meta information area,
If the content includes time information, description information, advertisement information, referrer information, and summary level for the specific scene, the step of converting the content based on the intention of the content provider by designating a frame type
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 콘텐트를 소비하도록 제공하는 단계는,
리퍼러 정보 및 링크 정보에 기초하여 사용자에게 추가적인 정보를 제공하거나 상기 사용자가 관심있는 장면 및 포인트에 통계화하여 제공하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
Wherein providing the content to consume comprises:
Providing additional information to the user based on the referrer information and the link information, or providing the user with the scene and points of interest statistically and providing
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 메타 정보 영역은,
메타 정보의 프레임 타입을 싱글(Single), 쿼드(Quad) 또는 기 정의된 타입의 넘버가 입력됨에 응답하여 상기 입력된 타입으로 구성하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
Wherein the meta information area comprises:
Configuring the frame type of the meta information into the input type in response to the input of a number of a single, quad or predefined type
Wherein the multimedia file comprises a plurality of multimedia files.
제1항에 있어서,
상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계는,
상기 동영상에서 오디오 마이닝(Audio Mining)을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하여 상기 메타 정보 영역에 저장하는 단계
를 포함하는 멀티미디어 파일 구성 방법.
The method according to claim 1,
Wherein the step of adding at least one or more additional information with respect to a specific scene of a moving picture in a meta information area of the moving picture file format comprises:
Extracting a still cut image related to a section in which a specific effect is inserted based on audio mining in the moving image and storing the extracted still cut image in the meta information area
Wherein the multimedia file comprises a plurality of multimedia files.
멀티미디어 파일 구성 방법에서 확장된 멀티미디어 파일을 실행시키기 위한 컴퓨터 프로그램에 있어서,
상기 멀티미디어 파일 구성 방법은,
동영상 파일 포맷에 추가적인 메타 정보 영역을 생성하는 단계;
상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 단계;
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 단계; 및
상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 단계
를 포함하는 것을 특징으로 하는 컴퓨터 프로그램.
A computer program for executing an extended multimedia file in a multimedia file composition method,
The multimedia file configuration method includes:
Creating an additional meta information area in the video file format;
Adding at least one additional information with respect to a specific scene of a moving picture in a meta information area of the moving picture file format;
Converting the additional information into content including the additional information by adding the additional information to the meta information area; And
Providing the content to consume the content based on the created Type
And a computer program product.
멀티미디어 파일 구성 시스템에 있어서,
동영상 파일 포맷에 메타 정보 영역을 생성하는 생성부;
상기 동영상 파일 포맷의 메타 정보 영역에 동영상의 특정 장면과 관련하여 적어도 하나 이상의 부가 정보를 부가하는 부가부;
상기 메타 정보 영역에 부가 정보를 부가함에 따라 상기 부가 정보가 포함된 콘텐트로 변환하는 변환부; 및
상기 콘텐트가 제작된 타입(Type)에 기초하여 상기 콘텐트를 소비하도록 제공하는 제공부
를 포함하는 멀티미디어 파일 구성 시스템.
In a multimedia file organizing system,
A generating unit generating a meta information area in a video file format;
An adder for adding at least one additional information in relation to a specific scene of a moving picture in a meta information area of the moving picture file format;
A converting unit for converting the additional information into content including the additional information as the additional information is added to the meta information area; And
And providing the content to be consumed based on a type in which the content is produced.
And a multimedia file system.
제10항에 있어서,
상기 변환부는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보 및 리퍼러 정보를 포함하는 경우, 스틸컷 이미지를 추출할 시간 및 상기 스틸컷 이미지에 기입할 텍스트 정보를 추출하여 자동으로 이미지 형태의 콘텐트로 변환하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein,
If the time information, the description information, the advertisement information, and the referer information for the specific scene are included, the time for extracting the still-cut image and the text information to be written in the still-cut image are extracted and automatically converted into the content of the image type
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 변환부는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 이미지 정보를 포함하는 경우, 스틸컷 이미지를 나열하여 상기 이미지 형태의 콘텐트로 변환하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein,
If the time information, description information, advertisement information, referrer information, and image information for the specific scene are included, the still-cut images are listed and converted into the content of the image format
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 변환부는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 이미지 형태의 콘텐트에 대한 공개 범위가 설정됨을 수신하는
것을 포함하고,
상기 제공부는,
상기 요약 레벨의 값에 따라 상기 이미지 형태의 콘텐트를 선택적으로 노출하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein,
When the information includes the time information, the description information, the advertisement information, the referrer information, and the summary level for the specific scene,
≪ / RTI >
Wherein the providing unit comprises:
Selectively exposing the content of the image type according to the value of the summary level
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 변환부는,
상기 특정 장면에 대한 시간 정보, 디스크립션 정보, 광고 정보, 리퍼러 정보 및 요약 레벨을 포함하는 경우, 프레임 타입을 지정하여 콘텐트 제공자의 의도에 기초하여 상기 콘텐트를 변환하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein,
If the time information, description information, advertisement information, referrer information, and summary level of the specific scene are included, the content type is designated and the content is converted based on the intention of the content provider
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 제공부는,
리퍼러 정보 및 링크 정보에 기초하여 사용자에게 추가적인 정보를 제공하거나 상기 사용자가 관심있는 장면 및 포인트에 통계화하여 제공하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein the providing unit comprises:
Providing additional information to the user based on the referrer information and link information, or providing the user with statistics and /
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 메타 정보 영역은,
메타 정보의 프레임 타입을 싱글(Single), 쿼드(Quad) 또는 기 정의된 타입의 넘버가 입력됨에 응답하여 상기 입력된 타입으로 구성하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
Wherein the meta information area comprises:
The frame type of the meta information is configured as a single type, a quad type or a type of the predefined type,
Wherein the multimedia file system comprises:
제10항에 있어서,
상기 부가부는,
상기 동영상에서 오디오 마이닝(Audio Mining)을 기반으로 특정 이팩트(Effect)가 삽입된 구간과 관련된 스틸컷 이미지를 추출하여 상기 메타 정보 영역에 저장하는
것을 특징으로 하는 멀티미디어 파일 구성 시스템.
11. The method of claim 10,
[0027]
Extracts a still-cut image related to an interval in which a specific effect is inserted based on audio mining in the moving image, and stores the extracted still-cut image in the meta information area
Wherein the multimedia file system comprises:
KR1020160081524A 2016-01-27 2016-06-29 Multi-media file structure and system including meta information for providing user request and environment customize contents KR101823767B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160009946 2016-01-27
KR20160009946 2016-01-27

Publications (2)

Publication Number Publication Date
KR20170090343A true KR20170090343A (en) 2017-08-07
KR101823767B1 KR101823767B1 (en) 2018-01-31

Family

ID=59654025

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160081524A KR101823767B1 (en) 2016-01-27 2016-06-29 Multi-media file structure and system including meta information for providing user request and environment customize contents

Country Status (1)

Country Link
KR (1) KR101823767B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102305517B1 (en) * 2021-06-02 2021-09-27 에스케이스토아 주식회사 System for video conversioning for commerce contents and operation method thereof

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220055372A (en) 2020-10-26 2022-05-03 주식회사 유니크유엑스 Micro-learning system using time attribute markup language and learning content management method using the same

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101109151B1 (en) * 2009-09-07 2012-03-13 곽경신 Apparatus and method for displaying comics image contents
KR100987879B1 (en) * 2009-12-29 2010-10-13 전용욱 The supporting method for moving photograph

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102305517B1 (en) * 2021-06-02 2021-09-27 에스케이스토아 주식회사 System for video conversioning for commerce contents and operation method thereof

Also Published As

Publication number Publication date
KR101823767B1 (en) 2018-01-31

Similar Documents

Publication Publication Date Title
US9530452B2 (en) Video preview creation with link
CN108965397A (en) Cloud video editing method and device, editing equipment and storage medium
US8265457B2 (en) Proxy editing and rendering for various delivery outlets
KR101524379B1 (en) System and method for the caption replacement of the released video for the interactive service
EP3531707A1 (en) Audio content playback control
US20210127174A1 (en) Augmentation of audio/video content with enhanced interactive content
KR101770094B1 (en) Method and system for providing video content based on image
KR101823767B1 (en) Multi-media file structure and system including meta information for providing user request and environment customize contents
US10972809B1 (en) Video transformation service
US20230336842A1 (en) Information processing apparatus, information processing method, and program for presenting reproduced video including service object and adding additional image indicating the service object
KR20090066607A (en) Method and system for providing additional service of moving picture with transparent layer
JP2016072858A (en) Media data generation method, media data reproduction method, media data generation device, media data reproduction device, computer readable recording medium and program
KR20180036197A (en) Method and system for recognition of the scene based on length of script
US20200107054A1 (en) Systems and methods for modifying date-related references of a media asset to reflect absolute dates
KR20180036190A (en) Method and system for recognition of the scene based on keyword
US10049158B1 (en) Analyzing user behavior relative to media content
KR101805349B1 (en) Method and apparatus for providing edited contents
US9084011B2 (en) Method for advertising based on audio/video content and method for creating an audio/video playback application
KR20150032059A (en) Responsive contents rpoviding system and method of controlling the same
US20230042909A1 (en) Systems and methods for generating media manifests
US20220078497A1 (en) Embeddable media playback interaction sharing
US20230276105A1 (en) Information processing apparatus, information processing apparatus, and program
US20230319346A1 (en) Systems and methods for automatically generating content items from identified events
CN117692707A (en) Control display processing method and device, storage medium and electronic equipment
US20100332673A1 (en) Method and apparatus of referring to stream included in other saf session for laser service and apparatus for providing laser service

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant