KR100857381B1 - Contents service system and method - Google Patents

Contents service system and method Download PDF

Info

Publication number
KR100857381B1
KR100857381B1 KR1020060133822A KR20060133822A KR100857381B1 KR 100857381 B1 KR100857381 B1 KR 100857381B1 KR 1020060133822 A KR1020060133822 A KR 1020060133822A KR 20060133822 A KR20060133822 A KR 20060133822A KR 100857381 B1 KR100857381 B1 KR 100857381B1
Authority
KR
South Korea
Prior art keywords
source
video
scene
information
data
Prior art date
Application number
KR1020060133822A
Other languages
Korean (ko)
Other versions
KR20080078748A (en
Inventor
함종민
장준기
안정은
Original Assignee
엔에이치엔(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔에이치엔(주) filed Critical 엔에이치엔(주)
Priority to KR1020060133822A priority Critical patent/KR100857381B1/en
Publication of KR20080078748A publication Critical patent/KR20080078748A/en
Application granted granted Critical
Publication of KR100857381B1 publication Critical patent/KR100857381B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/483Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]

Abstract

본 발명은 컨텐츠 서비스 시스템 및 방법에 관한 것으로서, 이 시스템은, 사용자에게 동영상 등록 절차를 제공하고, 사용자의 요청에 따라 동영상 컨텐츠를 검색하여 사용자 단말기에 제공하는 동영상 서비스 서버, 그리고 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나를 생성하고 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나에 기초하여 동영상 컨텐츠의 출처를 추출하는 출처 추출 서버를 포함한다. 본 발명에 의하면, 동영상 컨텐츠로부터 텍스트, 장면 및 오디오 데이터를 추출하고 패턴 매칭을 이용함으로써 동영상의 출처를 추출할 수 있으며, 이에 따라 저작권을 보호하는 데 기초를 마련할 수 있다.The present invention relates to a content service system and method, wherein the system provides a video registration procedure to a user, a video service server for searching and providing video content to a user terminal according to a user's request, and index data from the video content. And a source extraction server that generates at least one of scene data and audio data and extracts a source of the moving image content based on at least one of the index data, the scene data and the audio data. According to the present invention, the text, scene and audio data can be extracted from the video content and the source of the video can be extracted by using pattern matching, thereby providing a basis for protecting copyright.

컨텐츠 서비스 시스템, 동영상, 저작권, 텍스트, 장면, 오디오 Content Service System, Video, Copyright, Text, Scene, Audio

Description

컨텐츠 서비스 시스템 및 방법 {CONTENTS SERVICE SYSTEM AND METHOD}Content Service System and Method {CONTENTS SERVICE SYSTEM AND METHOD}

도 1은 본 발명의 실시예에 따른 컨텐츠 서비스 시스템을 설명하기 위한 블록도이다.1 is a block diagram illustrating a content service system according to an exemplary embodiment of the present invention.

도 2는 본 발명의 실시예에 따른 컨텐츠 서비스 시스템에서 사용되는 등록 컨텐츠의 메타 정보와 저작물 데이터베이스를 도시한 개략도이다.2 is a schematic diagram illustrating a metadata database and a copyright database of registered content used in a content service system according to an exemplary embodiment of the present invention.

도 3은 본 발명의 실시예에 따른 컨텐츠 서비스 시스템의 동작을 설명하기 위한 흐름도이다.3 is a flowchart illustrating an operation of a content service system according to an exemplary embodiment of the present invention.

도 4는 도 3에 도시한 텍스트 기반 출처 추출의 한 예를 설명하기 위한 흐름도이다.FIG. 4 is a flowchart for explaining an example of text-based source extraction shown in FIG. 3.

도 5는 도 4에 도시한 흐름도에 따라 텍스트 기반 출처를 추출한 한 예를 도시한 예시도이다.5 is an exemplary diagram illustrating an example of extracting a text-based source according to the flowchart shown in FIG. 4.

도 6은 도3에 도시한 비디오 기반 출처 추출의 한 예를 설명하기 위한 흐름도이다.FIG. 6 is a flowchart for explaining an example of video-based source extraction shown in FIG. 3.

도 7은 도 3에 도시한 오디오 기반 출처 추출의 한 예를 설명하기 위한 흐름도이다.FIG. 7 is a flowchart for explaining an example of audio-based source extraction shown in FIG. 3.

도 8은 본 발명의 실시예에 따라 사용자 단말기에 표시되는 동영상 서비스 화면의 한 예이다.8 is an example of a video service screen displayed on a user terminal according to an embodiment of the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for main parts of the drawings>

100: 사용자 단말기, 200: 통신망,100: user terminal, 200: communication network,

300: 동영상 서비스 서버, 330: 출처 추출 서버,300: video service server, 330: source extraction server,

360: 저작물 업데이트 서버, 400: 동영상 데이터베이스,360: asset update server, 400: video database,

450: 저작물 데이터베이스, 452: 텍스트 데이터베이스,450: asset database, 452: text database,

454: 장면 데이터베이스, 456: 오디오 데이터베이스,454: scene database, 456: audio database,

본 발명은 컨텐츠 서비스 시스템 및 방법에 관한 것으로, 보다 상세하게는 동영상과 같은 컨텐츠에 대한 저작권을 보호하는 데 기초를 마련할 수 있는 컨텐츠 서비스 시스템 및 방법에 관한 것이다.The present invention relates to a content service system and method, and more particularly to a content service system and method that can provide a basis for protecting the copyright for content such as video.

최근 초고속 인터넷이 급속도로 보급됨에 따라 인터넷은 현대 생활에 없어서는 안 될 필수품이 되었다. 많은 사용자가 인터넷을 통하여 정보 검색, 온라인 게임, 전자 상거래, 인터넷 뱅킹, 이메일 등을 이용하고 있다. 더욱이 인터넷을 통하여 수동적으로 정보를 수용하기만 하는 것에서 탈피하여 적극적으로 자신이 정보를 생성하고 생성된 정보를 다른 사용자와 공유하려는 사용자가 늘고 있다. 특히 개방, 공유, 참여를 표방하는 웹2.0에 기초한 동영상 UCC(user created contents, 사용자 제작 컨텐츠)가 네티즌에게 크게 인기를 끌고 있으며 광범위하게 확산되고 있다. 이러한 분위기에 힘입어 네티즌이 올린 동영상을 저장하여 등록하고 사용자 의 요청에 따라 이를 재생하는 서비스를 제공하는 동영상 서비스 사업자도 급격히 증가하고 있는 추세이다.With the rapid spread of high speed internet in recent years, it has become an indispensable necessity in modern life. Many users use information retrieval, online games, e-commerce, internet banking, and e-mail through the Internet. Moreover, more and more users are actively attempting to create information and share the generated information with other users, instead of simply accepting information through the Internet. In particular, the video UCC (user created contents) based on Web 2.0, which promotes openness, sharing and participation, is very popular with netizens and is widely spread. Thanks to this atmosphere, video service providers, which provide services for storing and registering videos uploaded by netizens and playing them at the request of users, are rapidly increasing.

한편, 사용자 대부분은 자신이 직접 제작한 동영상이 아니라 타인, 특히 방송사 등의 공중파 방송이나 애니메이션, 영화, 뮤직 비디오 등의 영상물을 단순히 복제하거나 편집하여 자신의 입맛에 맞는 동영상으로 만들어 이를 보고 즐기고 있다. 그런데 이러한 영상물을 만든 방송사 등이 영상물에 대하여 저작권을 가지고 있으므로 사용자 또는 동영상 서비스 업체가 이를 임의로 사용하면 저작권을 침해할 수 있다. 그 동안 저작권에 대하여 심각하게 고려하고 있지 않던 영상 저작권자들이 최근 동영상 서비스 사업자에 대하여 자신들이 제작한 영상물에 대한 저작권을 보호해 달라고 요청하고 있으며, 더 나아가 이들 사이에서 저작권 관련 법적 분쟁으로 진행될 가능성도 높아지고 있다.On the other hand, most of the users do not make their own video, but rather simply copy or edit the video, such as broadcasting, broadcast, animation, movies, music videos of others, such as broadcasters to create a video that suits their taste and enjoy it. However, since the broadcaster who made such a video has a copyright on the video, the user or the video service company may infringe the copyright if used arbitrarily. Video copyright holders, who have not been seriously considering copyright, have recently asked video service providers to protect the copyrights of their own productions. have.

이런 가운데 동영상 서비스 사업자들도 동영상 업로드 시점에 저작권 침해를 경고하거나 운영 요원을 두고 서비스 사이트 내 모니터링 기능을 강화하는 방식으로 나름대로 자율적으로 저작권을 보호하려고 노력하고 있다. 그러나 단순히 이러한 방법만으로는 저작권 문제가 해결되기 어려운 실정이다. 이미 영상 콘텐츠 소비와 생산의 패러다임이 근본적으로 변화하고 있다는 점에 대해서는 사용자 및 동영상 서비스 사업자는 물론 영상 저작권자 모두 동의하고 있다. 영상 저작권자들과 동영상 서비스 사업자들이 뉴미디어 환경에서 새로운 수익 창출과 새로운 마케팅 기회를 찾기 위해서라도 동영상 서비스의 저작권 문제에 대해 전향적인 자세로 임할 필요가 있으며, 저작권 보호를 위한 보다 합리적인 방안을 마련할 필요가 있 다.In the meantime, video service providers are also trying to protect copyright in their own way by warning them of copyright infringement at the time of video upload or by strengthening monitoring functions on service sites. However, it is difficult to solve the copyright problem simply by this method. Users and video service providers as well as video copyright owners agree that the paradigm of video content consumption and production is already fundamentally changing. Video copyright owners and video service providers need to take a proactive approach to copyright issues in video services to find new revenue and new marketing opportunities in the new media environment. have.

따라서 본 발명이 이루고자 하는 기술적 과제는 컨텐츠의 저작권을 보호하는 데 보다 합리적인 기초를 마련할 수 있는 컨텐츠 서비스 시스템 및 방법을 제공하는 것이다.Therefore, the present invention is to provide a content service system and method that can provide a more reasonable basis for protecting the copyright of the content.

이러한 기술적 과제를 이루기 위한 본 발명의 한 실시예에 따른 컨텐츠 서비스 시스템은, 사용자에게 동영상 등록 절차를 제공하고, 사용자의 요청에 따라 동영상 컨텐츠를 검색하여 사용자 단말기에 제공하는 동영상 서비스 서버, 그리고 상기 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나를 생성하고 상기 색인 데이터, 상기 장면 데이터 및 상기 오디오 데이터 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출하는 출처 추출 서버를 포함한다.The content service system according to an embodiment of the present invention for achieving the technical problem, a video service server for providing a video registration procedure to the user, and retrieves the video content to the user terminal according to the user's request, and the video And a source extraction server that generates at least one of index data, scene data, and audio data from content, and extracts a source of the video content based on at least one of the index data, the scene data, and the audio data.

저작권자로부터의 동영상 저작물에서 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보 중 적어도 하나를 생성하는 저작물 업데이트 서버, 그리고 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나를 기억하는 저작물 데이터베이스를 더 포함하며, 상기 출처 추출 서버는 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출할 수 있다.An asset update server for generating at least one of source text information, source scene information, and source audio information in a video asset from a copyright holder, and a copyright database storing at least one of the source text information, the source scene information, and the source audio information. The source extracting server may extract the source of the video content based on at least one of the source text information, the source scene information, and the source audio information.

상기 출처 추출 서버는 상기 저작물 데이터베이스를 검색하여 상기 색인 데 이터와 동일한 상기 출처 텍스트 정보가 있으면 상기 출처 텍스트 정보에 관련된 출처를 추출할 수 있다.The source extracting server may search the asset database and extract a source related to the source text information if the source text information equal to the index data is present.

상기 출처 추출 서버는 상기 동영상 컨텐츠로부터 소정 장면의 프레임 데이터를 추출하고 상기 프레임 데이터에 대하여 소정 신호 처리를 행하여 상기 장면 데이터를 생성하며 상기 장면 데이터와 상기 출처 장면 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출한 후 상기 유사도의 크기에 따라 상기 출처 장면 정보에 관련된 출처를 추출할 수 있다.The source extraction server extracts frame data of a predetermined scene from the video content, performs predetermined signal processing on the frame data to generate the scene data, and performs pattern matching on the scene data and the source scene information to obtain similarity. After the calculation, the source related to the source scene information may be extracted according to the magnitude of the similarity.

상기 출처 추출 서버는 상기 동영상 컨텐츠로부터 소정 구간의 오디오 정보를 추출하고 상기 오디오 정보에 대하여 소정 신호 처리를 행하여 상기 오디오 데이터를 생성하며 상기 오디오 데이터와 상기 출처 오디오 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출한 후 상기 유사도의 크기에 따라 상기 출처 오디오 정보에 관련된 출처를 추출할 수 있다.The source extraction server extracts audio information of a predetermined section from the video content, performs predetermined signal processing on the audio information to generate the audio data, and performs pattern matching on the audio data and the source audio information to obtain similarity. After calculation, a source related to the source audio information may be extracted according to the magnitude of the similarity.

상기 장면 데이터 및 상기 오디오 데이터의 생성 방식은 각각 상기 출처 장면 정보 및 상기 출처 오디오 정보의 생성 방식과 실질적으로 동일할 수 있다.The method of generating the scene data and the audio data may be substantially the same as the method of generating the source scene information and the source audio information, respectively.

상기 출처 텍스트 정보에 관련된 출처, 상기 출처 장면 정보에 관련된 출처 및 상기 출처 오디오 정보에 관련된 출처에 서로 다른 가중치를 둘 수 있으며, 각 출처에 대응하는 유사도와 상기 가중치에 기초하여 출처의 순위를 정할 수 있다.Sources associated with the source text information, sources associated with the source scene information, and sources associated with the source audio information may be weighted differently, and sources may be ranked based on the similarity and the weight corresponding to each source. have.

상기 동영상 컨텐츠를 기억하고 상기 출처 추출 서버로부터 상기 동영상 컨텐츠의 출처 정보를 받아 기억하는 동영상 데이터베이스를 더 포함할 수 있다.The apparatus may further include a video database that stores the video content and receives and stores source information of the video content from the source extraction server.

상기 동영상 컨텐츠의 출처와 관련된 출처 노출 동작을 하거나 상기 동영상 컨텐츠의 출처에 기초하여 상기 동영상 컨텐츠의 저작권료를 산출할 수 있다.The source exposure operation associated with the source of the video content may be performed or a copyright fee of the video content may be calculated based on the source of the video content.

본 발명의 다른 태양에 따른 컨텐츠 서비스 방법은, 동영상 컨텐츠를 등록하는 단계, 상기 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나를 생성하는 단계, 상기 색인 데이터, 상기 장면 데이터 및 상기 오디오 데이터 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출하는 단계, 그리고 상기 동영상 컨텐츠를 검색하여 사용자 단말기에 제공하는 단계를 포함한다.According to another aspect of the present invention, there is provided a content service method, including registering video content, generating at least one of index data, scene data, and audio data from the video content, the index data, the scene data, and the audio data. Extracting a source of the video content based on at least one of the following; and searching and providing the video content to a user terminal.

저작권자로부터의 동영상 저작물에서 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보 중 적어도 하나를 생성하고 기억하는 단계를 더 포함하며, 상기 출처 추출 단계는 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출하는 단계를 포함할 수 있다.Generating and storing at least one of source text information, source scene information, and source audio information in a video asset from a copyright holder, wherein the source extracting step comprises the source text information, the source scene information, and the source audio information The method may include extracting a source of the video content based on at least one of the methods.

상기 출처 추출 단계는 상기 색인 데이터와 동일한 상기 출처 텍스트 정보가 있으면 상기 출처 텍스트 정보에 관련된 출처를 추출하는 단계를 더 포함할 수 있다.The source extracting step may further include extracting a source related to the source text information if there is the same source text information as the index data.

상기 장면 데이터 생성 단계는, 상기 동영상 컨텐츠로부터 소정 장면의 프레임 데이터를 추출하는 단계, 그리고 상기 프레임 데이터에 대하여 소정 신호 처리를 행하여 상기 장면 데이터를 생성하는 단계를 포함하고, 상기 출처 추출 단계는, 상기 장면 데이터와 상기 출처 장면 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출하는 단계, 그리고 상기 유사도의 크기에 따라 상기 출처 장면 정보에 관련된 출처를 추출하는 단계를 더 포함할 수 있다.The scene data generating step may include extracting frame data of a predetermined scene from the moving image content, and generating the scene data by performing a predetermined signal processing on the frame data. The method may further include calculating similarity by performing pattern matching on the scene data and the source scene information, and extracting a source related to the source scene information according to the magnitude of the similarity.

상기 오디오 데이터 생성 단계는, 상기 동영상 컨텐츠로부터 소정 구간의 오디오 정보를 추출하는 단계, 그리고 상기 오디오 정보에 대하여 소정 신호 처리를 행하여 상기 오디오 데이터를 생성하는 단계를 포함하며, 상기 출처 추출 단계는, 상기 오디오 데이터와 상기 출처 오디오 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출하는 단계, 그리고 상기 유사도의 크기에 따라 상기 출처 오디오 정보에 관련된 출처를 추출하는 단계를 더 포함할 수 있다.The generating of the audio data includes extracting audio information of a predetermined section from the video content, and generating the audio data by performing a predetermined signal processing on the audio information. The method may further include calculating similarity by performing pattern matching on audio data and the source audio information, and extracting a source related to the source audio information according to the magnitude of the similarity.

상기 장면 데이터 및 상기 오디오 데이터의 생성 방식은 각각 상기 출처 장면 정보 및 상기 출처 오디오 정보의 생성 방식과 실질적으로 동일할 수 있다.The method of generating the scene data and the audio data may be substantially the same as the method of generating the source scene information and the source audio information, respectively.

상기 출처 텍스트 정보에 관련된 출처, 상기 출처 장면 정보에 관련된 출처 및 상기 출처 오디오 정보에 관련된 출처에 서로 다른 가중치를 둘 수 있으며, 각 출처에 대응하는 유사도와 상기 가중치에 기초하여 출처의 순위를 정할 수 있다.Sources associated with the source text information, sources associated with the source scene information, and sources associated with the source audio information may be weighted differently, and sources may be ranked based on the similarity and the weight corresponding to each source. have.

상기 동영상 컨텐츠의 출처와 관련된 출처 노출 동작을 하거나 상기 동영상 컨텐츠의 출처에 기초하여 상기 동영상 컨텐츠의 저작권료를 산출하는 단계를 더 포함할 수 있다.The method may further include performing a source exposing operation related to the source of the video content or calculating a copyright fee of the video content based on the source of the video content.

본 발명의 다른 태양에 따른 컴퓨터로 읽을 수 있는 매체는 상기한 방법 중 어느 하나를 컴퓨터에 실행시키기 위한 프로그램을 기록한다.A computer readable medium according to another aspect of the present invention records a program for causing a computer to execute any of the above methods.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention.

먼저, 도 1 및 도 2를 참고하여 본 발명의 실시예에 따른 컨텐츠 서비스 시스템에 대하여 상세하게 설명한다.First, a content service system according to an exemplary embodiment of the present invention will be described in detail with reference to FIGS. 1 and 2.

도 1은 본 발명의 실시예에 따른 컨텐츠 서비스 시스템을 설명하기 위한 블록도이고, 도 2는 본 발명의 실시예에 따른 컨텐츠 서비스 시스템에서 사용되는 등록 컨텐츠의 메타 정보와 저작물 데이터베이스를 도시한 개략도이다.FIG. 1 is a block diagram illustrating a content service system according to an exemplary embodiment of the present invention, and FIG. 2 is a schematic diagram illustrating metadata information and a copyright database of registered content used in a content service system according to an exemplary embodiment of the present invention. .

도 1을 참고하면, 본 발명의 실시예에 따른 컨텐츠 서비스 시스템은 동영상 서비스 서버(300), 출처 추출 서버(330), 저작물 업데이트 서버(360), 동영상 데이터베이스(400), 그리고 저작물 데이터베이스(450)를 포함하며, 통신망(200)을 통하여 복수의 사용자 단말기(100)와 연결되어 있다.Referring to FIG. 1, a content service system according to an embodiment of the present invention includes a video service server 300, a source extraction server 330, an asset update server 360, a video database 400, and an asset database 450. It includes, and is connected to the plurality of user terminals 100 through the communication network 200.

사용자 단말기(100)는 동영상 서비스를 제공받기 위하여 컨텐츠 서비스 시스템에 접속하여 정보를 주고받는 장치로서, 데스크톱 컴퓨터뿐만 아니라 노트북 컴퓨터, 워크스테이션, 팜톱(palmtop) 컴퓨터, 개인 휴대 정보 단말기(personal digital assistant, PDA), 웹 패드, 휴대폰, 스마트 폰 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 단말기로 이루어질 수 있다.The user terminal 100 is a device that accesses a content service system to provide a video service and exchanges information. The user terminal 100 is a desktop computer as well as a laptop computer, a workstation, a palmtop computer, a personal digital assistant, PDA), a web pad, a mobile phone, a smart phone, etc. may be formed of a terminal having a computing capability with a memory means and a microprocessor.

사용자 단말기(100)는 통신망(200)을 통하여 컨텐츠 서비스 시스템과 접속하기 위한 통신 모듈(도시하지 않음) 및 응용 프로그램(도시하지 않음)을 포함하며, 영상을 촬영하는 웹 카메라 또는 PC 카메라(도시하지 않음)를 포함할 수도 있다.The user terminal 100 includes a communication module (not shown) and an application program (not shown) for connecting to a content service system through the communication network 200, and a web camera or a PC camera (not shown) for capturing an image. Or not).

응용 프로그램은 사용자의 조작에 따라 통신망(200)을 통하여 컨텐츠 서비스 시스템에 접속하여 다양한 기능을 수행한다. 응용 프로그램의 한 예로서, 마이크 로소프트(Microsoft)사의 인터넷 익스플로러(Internet Explorer)와 같은 웹 브라우저를 들 수 있으나 이에 한정되지 않으며 컨텐츠 서비스 시스템에서 제공하는 전용 프로그램일 수도 있다. 응용 프로그램은 사용자 단말기(100)에 저장되어 있는 동영상 또는 웹 카메라 등으로 촬영한 영상을 컨텐츠 서비스 시스템에 업로드하는 모듈(도시하지 않음)을 포함할 수 있으며, 컨텐츠 서비스 시스템에 저장되어 있는 동영상을 재생하기 위한 재생 모듈(도시하지 않음)을 포함할 수 있다. 이들 모듈은 액티브엑스(activeX)로 구현될 수 있다.The application program accesses the content service system through the communication network 200 according to a user's operation and performs various functions. An example of the application may include a web browser such as Microsoft's Internet Explorer, but is not limited thereto and may be a dedicated program provided by a content service system. The application may include a module (not shown) for uploading a video recorded with a web camera or the like stored in the user terminal 100 to a content service system, and playing a video stored in the content service system. It may include a playback module (not shown). These modules can be implemented in activeX.

통신망(200)은 구내 정보 통신망(local area network, LAN), 도시권 통신망(metropolitan area network, MAN), 광역 통신망(wide area network, WAN), 인터넷 등을 가리지 않고, 통신 방식도 유선, 무선을 가리지 않으며 어떠한 통신 방식이라도 상관없다.The communication network 200 does not select a local area network (LAN), a metropolitan area network (MAN), a wide area network (WAN), the Internet, and the like. It doesn't matter what type of communication you have.

동영상 서비스 서버(300)는 사용자에게 동영상 등록 절차를 제공하고, 사용자의 요청에 따라 등록된 동영상을 검색하여 사용자 단말기(100)에 제공한다. 즉 동영상 서비스 서버(300)는 사용자로부터의 요청에 따라 사용자 단말기(100)로부터 동영상을 업로드 받아 동영상 데이터베이스(400)에 저장하고 등록한다. 사용자는 동영상을 등록하는 과정에서 해당 동영상이 서비스되는 카테고리, 예를 들면, 동영상, 블로그, 카페 등의 서비스 카테고리를 선택할 수 있으며, 동영상과 관련된 정보를 함께 등록할 수 있다. 그리고 동영상 서비스 서버(300)는 사용자의 검색 요청에 따라 해당 동영상을 해당 서비스 카테고리에 표시하여 사용자가 동영상을 재생할 수 있도록 한다. 한편 동영상 서비스 서버(300)는 동영상의 출처를 표시하거 나 출처와 관련된 웹사이트의 링크를 제공하는 등의 동영상의 출처와 관련된 동작을 수행할 수 있다.The video service server 300 provides a video registration procedure to the user, searches for the registered video at the user's request, and provides the video to the user terminal 100. That is, the video service server 300 uploads a video from the user terminal 100 according to a request from the user, and stores and registers the video in the video database 400. In the process of registering a video, the user may select a service category such as a video, for example, a video, a blog, a cafe, and the like, and may register information related to the video. The video service server 300 displays the video in the corresponding service category according to the user's search request so that the user can play the video. Meanwhile, the video service server 300 may perform an operation related to the source of the video such as displaying the source of the video or providing a link to a website related to the source.

동영상 데이터베이스(400)는 사용자가 업로드한 동영상을 기억하며, 동영상을 등록하는 과정에서 입력하는 동영상의 제목, 동영상 카테고리, 태그, 본문, 자막 등도 동영상 컨텐츠와 함께 기억한다. 또한 동영상 데이터베이스(400)는 사용자가 동영상을 등록하는 과정에서 입력하는 동영상의 출처를 기억할 수 있으며, 이와 별도로 출처 추출 서버(330)에서 자동으로 추출한 동영상의 출처를 기억할 수 있다.The video database 400 stores a video uploaded by a user, and also stores a title, a video category, a tag, a text, a subtitle, and the like of the video input during the video registration. In addition, the video database 400 may store the source of the video inputted by the user in the process of registering the video, and may separately store the source of the video automatically extracted from the source extraction server 330.

출처 추출 서버(330)는 사용자가 업로드하여 등록된 동영상 컨텐츠로부터 메타 정보(MI)를 생성한다. 도 2를 참고하면, 메타 정보(MI)는 색인 데이터(TD), 장면 데이터(SD) 및 오디오 데이터(AD)를 포함한다. 그리고 출처 추출 서버(330)는 색인 데이터(TD)에 기초하여 텍스트 기반 출처를 추출하고, 장면 데이터(SD)에 기초하여 장면 기반 출처를 추출하며, 오디오 데이터(AD)에 기초하여 오디오 기반 출처를 추출한다. 또한 추출된 텍스트 기반 출처, 장면 기반 출처 및 오디오 기반 출처에 기초하여 등록된 동영상의 출처를 종합적으로 판단한다. 출처 추출 서버(330)는 동영상의 출처를 동영상 서비스 서버(300)로 전송하고 동영상 데이터베이스(400)에 저장하여 컨텐츠 서비스 시스템이 동영상 출처와 관련된 동작을 수행할 수 있도록 한다.The source extraction server 330 generates meta information MI from the video content uploaded and registered by the user. Referring to FIG. 2, the meta information MI includes index data TD, scene data SD, and audio data AD. The source extraction server 330 extracts a text-based source based on the index data TD, extracts a scene-based source based on the scene data SD, and extracts an audio-based source based on the audio data AD. Extract. In addition, based on the extracted text-based source, scene-based source, and audio-based source, the source of the registered video is comprehensively determined. The source extraction server 330 transmits the source of the video to the video service server 300 and stores the video in the video database 400 so that the content service system can perform an operation related to the video source.

저작물 데이터베이스(450)는 텍스트 데이터베이스(452), 장면 데이터베이스(454) 및 오디오 데이터베이스(456)를 포함하며, 동영상 저작물과 관련된 출처 정보를 기억한다. 이 출처 정보는 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보를 포함한다. 저작물 데이터베이스(450)는 저작물 업데이트 서버(360)로부터 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보를 받아 텍스트 데이터베이스(452), 장면 데이터베이스(454) 및 오디오 데이터베이스(456)에 각각 저장한다. 저작물 데이터베이스(450)는 필요에 따라 동영상 저작물 자체를 기억할 수도 있다.The asset database 450 includes a text database 452, a scene database 454, and an audio database 456, and stores source information associated with the video asset. This source information includes source text information, source scene information, and source audio information. The asset database 450 receives the source text information, the source scene information, and the source audio information from the asset update server 360 and stores them in the text database 452, the scene database 454, and the audio database 456, respectively. The asset database 450 may store the video asset itself as needed.

저작물 업데이트 서버(360)는 동영상 저작물을 저작권자로부터 받아 동영상 저작물로부터 출처 정보를 생성한 후 이를 저작물 데이터베이스(450)에 저장하여 동영상 저작물과 관련된 출처 정보를 업데이트한다. 출처 정보는 동영상 저작물의 제목, 저작권자, 해당 동영상 저작물의 사이트 주소를 포함하며, 출처 텍스트 정보는 동영상 저작물과 관련된 키워드를 포함한다. 출처 장면 정보는 동영상 저작물의 적어도 하나의 대표 장면과 관련된 정보이고, 출처 오디오 정보는 동영상 저작물의 적어도 하나의 대표 구간에 대한 정보이다. 저작물 업데이트 서버(360)가 출처 장면 정보 및 출처 오디오 정보를 생성하는 방식은 각각 출처 추출 서버(330)가 장면 데이터(SD) 및 오디오 데이터(AD)를 생성하는 방식과 실질적으로 동일하다. 한편 컨텐츠 서비스 사업자가 저작권자로부터 동영상 저작물을 받아 저작물 업데이트 서버(360)에 입력할 수 있으나, 저작권자가 직접 통신망(200)을 통하여 동영상 저작물을 저작물 업데이트 서버(360)에 입력하여 동영상 저작물을 업데이트할 수도 있다.The asset update server 360 receives the video asset from the copyright holder, generates source information from the video asset, and stores the same in the asset database 450 to update the source information related to the video asset. The source information includes the title of the video asset, the copyright holder, and the site address of the video asset, and the source text information includes keywords related to the video asset. The source scene information is information related to at least one representative scene of the moving picture asset, and the source audio information is information about at least one representative section of the moving picture asset. The manner in which the asset update server 360 generates the source scene information and the source audio information is substantially the same as the manner in which the source extraction server 330 generates the scene data SD and the audio data AD, respectively. Meanwhile, the content service provider may receive a video asset from the copyright holder and input the video asset into the asset update server 360, but the copyright holder may update the video asset by directly inputting the video asset into the asset update server 360 through the communication network 200. have.

그러면 컨텐츠 서비스 시스템의 동작에 대하여 도 3 내지 도 8을 참고하여 좀 더 상세하게 설명한다.The operation of the content service system will now be described in more detail with reference to FIGS. 3 to 8.

도 3은 본 발명의 실시예에 따른 컨텐츠 서비스 시스템의 동작을 설명하기 위한 흐름도이고, 도 4는 도 3에 도시한 텍스트 기반 출처 추출의 한 예를 설명하기 위한 흐름도이며, 도 5는 도 4에 도시한 흐름도에 따라 텍스트 기반 출처를 추출한 한 예를 도시한 예시도이다. 도 6은 도3에 도시한 비디오 기반 출처 추출의 한 예를 설명하기 위한 흐름도이고, 도 7은 도 3에 도시한 오디오 기반 출처 추출의 한 예를 설명하기 위한 흐름도이며, 도 8은 본 발명의 실시예에 따라 사용자 단말기에 표시되는 동영상 서비스 화면의 한 예이다.3 is a flowchart illustrating an operation of a content service system according to an exemplary embodiment of the present invention, FIG. 4 is a flowchart illustrating an example of text-based source extraction shown in FIG. 3, and FIG. 5 is illustrated in FIG. 4. This is an exemplary view showing an example of extracting a text-based source according to the flow chart shown. FIG. 6 is a flowchart for explaining an example of video-based source extraction shown in FIG. 3, FIG. 7 is a flowchart for explaining an example of audio-based source extraction shown in FIG. 3, and FIG. 8 is an embodiment of the present invention. According to an embodiment, it is an example of a video service screen displayed on a user terminal.

도 3을 참고하면, 컨텐츠 서비스 시스템이 사용자에게 동영상 등록 절차를 제공하고, 사용자는 사용자 단말기(100)에 저장되어 있는 동영상 또는 웹 카메라 등에서 촬영되고 있는 영상을 컨텐츠 서비스 시스템에 업로드하여 동영상을 등록한다(S500). 사용자 단말기(100)의 응용 프로그램에서 동영상을 인코딩하고, 구간 설정이나 장면 선택 등의 편집 작업을 한 후 컨텐츠 서비스 시스템으로 업로드할 수 있으며, 이와 달리 컨텐츠 서비스 시스템에서 동영상을 인코딩하고 편집할 수도 있다. 후자의 경우 인코딩 동작을 동영상 서비스 서버(300)에서 수행할 수 있으나 별도의 인코딩 서버를 구비하여 수행할 수도 있다.Referring to FIG. 3, the content service system provides a video registration procedure to the user, and the user registers the video by uploading the video captured by the video terminal or the web camera stored in the user terminal 100 to the content service system. (S500). The application program of the user terminal 100 encodes a video, edits such as section setting or scene selection, and uploads the video to the content service system. Alternatively, the video service may encode and edit the video. In the latter case, the encoding operation may be performed by the video service server 300, but may be performed with a separate encoding server.

사용자는 서비스 카테고리를 미리 선택하여 동영상을 업로드할 수 있으며, 컨텐츠 서비스 시스템에서 제공하는 형식에 따라 동영상의 제목, 동영상 카테고리, 태그, 본문, 자막 등의 동영상 관련 정보를 등록할 수 있다. 또한 사용자는 사용자가 판단하는 동영상의 출처를 등록할 수 있다.The user may upload a video by selecting a service category in advance, and may register video related information such as a title, a video category, a tag, a text, and a caption of the video according to a format provided by the content service system. In addition, the user may register the source of the video determined by the user.

컨텐츠 서비스 시스템은 등록된 동영상에 대하여 텍스트 기반 출처를 추출한다(S510). 텍스트 기반 출처 추출에 대하여 도 4 및 도 5를 참고하여 좀 더 상세하게 설명한다.The content service system extracts a text-based source from the registered video (S510). Text-based source extraction will be described in more detail with reference to FIGS. 4 and 5.

도 4를 참고하면, 사용자로부터 동영상이 업로드되어 컨텐츠 서비스 시스템에 등록되면, 출처 추출 서버(330)는 동영상 데이터베이스(400)로부터 해당 동영상 컨텐츠의 텍스트를 추출한다(S511). 텍스트에는 동영상 등록 시 사용자가 입력한 동영상의 제목, 태그, 타이틀, 본문, 자막 등이 포함된다. 그리고 출처 추출 서버(330)는 추출된 텍스트로부터 형태소를 추출하고 단어를 추출하는 등의 파싱 작업을 수행하여 텍스트 중 동영상의 특징을 나타낼 수 있는 색인 데이터(TD)를 생성한다(S513). 색인 데이터(TD)는 주로 명사일 수 있으나 서술형 문장처럼 특정 형태의 단어 집합일 수도 있다. 한 동영상 컨텐츠에서 색인 데이터(TD)의 수효는 하나 이상일 수 있으며, 각 색인 데이터(TD)가 텍스트에 나타나는 출현 빈도도 하나 이상일 수 있다.Referring to FIG. 4, when a video is uploaded from a user and registered in the content service system, the source extraction server 330 extracts the text of the video content from the video database 400 (S511). The text includes the title, tag, title, body, subtitle, etc. of the video input by the user when registering the video. The source extraction server 330 performs parsing such as extracting a morpheme from the extracted text and extracting a word to generate index data TD that can represent a feature of the video in the text (S513). The index data TD may be mainly a noun but may be a specific set of words, such as a descriptive sentence. The number of index data TD in one video content may be one or more, and the frequency of occurrence of each index data TD in text may also be one or more.

출처 추출 서버(330)는 추출된 색인 데이터(TD)에 대하여 텍스트 데이터베이스(452)를 검색하여(S515), 텍스트 데이터베이스(452)에 저장되어 있는 동영상 관련 키워드 중에서 해당 색인 데이터(TD)와 동일한 것이 있는지 판단한다(S517). 그 결과 색인 데이터(TD)와 동일한 키워드가 있으면, 해당 키워드에 관련된 출처 정보를 참고하여 텍스트 기반 출처를 추출한다(S519). 출처 추출 서버(330)는 텍스트 데이터베이스(452) 전체에 대하여 검색을 완료할 때까지 단계(S515) 내지 단계(S519)를 반복하고(S521), 각 색인 데이터(TD)에 대하여 텍스트 데이터베이 스(452)를 검색하여 텍스트 기반 출처를 추출한다. 그런 후 텍스트 데이터베이스(452)의 검색을 완료하면 동작을 되돌린다. 텍스트 기반 출처에 있어서 경우에 따라 복수 개의 출처가 추출될 수도 있다.The source extraction server 330 searches the text database 452 for the extracted index data TD (S515), and among the keywords related to the video stored in the text database 452, the same as that of the index data TD. It is determined whether there is (S517). As a result, if there is a keyword equal to the index data TD, a text-based source is extracted by referring to source information related to the keyword (S519). The source extraction server 330 repeats steps S515 to S519 until the search for the entire text database 452 is completed (S521), and for each index data TD, a text database ( Search 452) to extract text-based sources. The operation then returns when the search of the text database 452 is completed. In the case of text-based sources, a plurality of sources may be extracted in some cases.

도 5에 도시한 것처럼, 사용자가 동영상을 등록할 때 입력한 텍스트가 "제목: 주몽 45회 방영분, 태그: 주몽, 본문: 드디어 주몽이 소서노와 고구려 건국의 기틀을 만듭니다. 크하하∼"이라고 하자. 출처 추출 서버(330)는 이 텍스트로부터 "주몽", "소서노", "고구려", "건국" 등과 같은 색인 데이터(TD)를 추출할 수 있다. 한편 여기서 각 색인 데이터(TD)에 대응하는 숫자는 각 색인 데이터(TD)가 전체 색인 데이터(TD)에서 차지하는 출현 빈도의 비율을 나타낸다. "주몽"이라는 색인 데이터(TD)는 0.6의 비율로 나타나고, "소서노"는 0.2의 비율로 나타난다. 한편 텍스트 데이터베이스(452)에는 〈주몽〉이라는 드라마에 대한 출처 정보가 "주몽:MBC:www.imbc.com/broad/tv/drama/jumong"이라고 저장되어 있으며, 키워드로서 "주몽, 소서노, 모팔모"가 입력되어 있다.As shown in Fig. 5, when the user registers a video, the text inputted is "Title: Jumong 45 episodes aired, tag: Jumong, text: Finally, Jumong makes the foundation of founding Sosono and Goguryeo. Khaha ~" . The source extraction server 330 may extract index data (TD) such as "Jumong", "Sosono", "Goguryeo", "Founding", etc. from this text. In this case, the number corresponding to each index data TD represents a ratio of the frequency of appearance of each index data TD in the entire index data TD. The index data (TD) of "Jumong" appears at the ratio of 0.6 and "Sorso" at the ratio of 0.2. On the other hand, the text database 452 stores the source information of the drama "Jumong" as "Jumong: MBC: www.imbc.com/broad/tv/drama/jumong ", and the keyword "Jumong, Sosono, and Mopalmo" as a keyword. Is input.

검색 결과, 색인 데이터(TD) "주몽" 및 "소서노"가 텍스트 데이터베이스(452)의 키워드와 일치하므로 해당 키워드와 관련된 출처 정보를 참고하여 텍스트 기반 출처를 추출할 수 있다. 이 예의 경우 두 개의 색인 데이터(TD)에 대하여 동일한 출처가 추출되었으므로 하나의 출처가 텍스트 기반 출처로서 추출된다. 이와 같이 추출된 출처가 하나의 동일한 출처를 가리킨다면 추출된 출처가 적절하다는 것을 의미하게 된다.As a result of the search, the index data (TD) "Jumong" and "Sorso" match the keywords of the text database 452, so that text-based sources can be extracted by referring to the source information related to the keywords. In this example, the same source is extracted for two index data (TDs), so one source is extracted as a text-based source. If the extracted sources point to the same one, it means that the extracted sources are appropriate.

추출된 출처를 색인 데이터(TD), 비율, 저작권자, 해당 저작물의 웹사이트 등을 포함하여 표시할 수 있으며, 도 5에 도시한 것처럼,The extracted source may be displayed including index data (TD), ratio, copyright holder, website of the copyrighted work, and the like, as shown in FIG.

"주몽: 0.6, MBC, www.imbc.com/broad/tv/drama/jumong","Jumong: 0.6, MBC, www.imbc.com/broad/tv/drama/jumong ",

"소서노: 0.2, MBC, www.imbc.com/broad/tv/drama/jumong"이라고 표시할 수 있다."Sosono: 0.2, MBC, www.imbc.com/broad/tv/drama/jumong ".

그러나 각 색인 데이터(TD)에 대응하는 출처가 서로 다른 경우라면 색인 데이터(TD)의 비율에 따라 출처의 순위를 정하거나, 장면 기반 출처 또는 오디오 기반 출처를 참고하여 출처를 결정할 수 있다. 이와 달리 텍스트 데이터베이스(452)에 저장된 키워드에 가중치를 두고 해당 색인 데이터의 비율과 가중치를 곱하여 유사도를 계산할 수 있으며, 유사도의 크기에 따라 출처의 순위를 정할 수도 있다.However, if the source corresponding to each index data (TD) is different, the source may be ranked according to the ratio of the index data (TD), or the source may be determined by referring to the scene-based source or the audio-based source. Alternatively, the similarity can be calculated by weighting the keywords stored in the text database 452 by multiplying the ratio and the weight of the corresponding index data, and ranking the sources according to the size of the similarity.

다시 도 3을 참고하면, 컨텐츠 서비스 시스템은 등록된 동영상에 대하여 장면 기반 출처를 추출한다(S530). 장면 기반 출처 추출에 대하여 도 6을 참고하여 좀 더 상세하게 설명한다.Referring to FIG. 3 again, the content service system extracts a scene-based source for the registered video (S530). Scene-based source extraction will be described in more detail with reference to FIG. 6.

도 6을 참고하면, 사용자로부터 동영상이 업로드되어 컨텐츠 서비스 시스템에 등록되면, 출처 추출 서버(330)는 동영상 데이터베이스(400)에 등록된 동영상 컨텐츠로부터 적어도 하나의 대표 장면을 캡쳐한다(S531). 여기서 대표 장면을 캡쳐한다는 것은 대표 장면의 프레임 데이터를 추출하는 것을 의미한다.Referring to FIG. 6, when a video is uploaded from a user and registered in the content service system, the source extraction server 330 captures at least one representative scene from the video content registered in the video database 400 (S531). Here, capturing the representative scene means extracting frame data of the representative scene.

소정 알고리즘을 통하여 인물이 부각된 장면을 대표 장면으로 캡쳐할 수 있으며, 미리 설정된 시간에 대응하는 장면을 대표 장면으로 캡쳐할 수도 있다. 이와 달리 사용자가 동영상을 등록할 때 통상 특징적 장면을 표지로 선택하므로 이 표지를 대표 장면으로 캡쳐할 수도 있다. 등록 동영상의 장면 캡쳐 방식은 동영상 저작물로부터 출처 장면 정보를 구하기 위하여 장면을 캡쳐하는 방식과 실질적으로 동일하다.A scene in which a person stands out may be captured as a representative scene through a predetermined algorithm, and a scene corresponding to a preset time may be captured as a representative scene. In contrast, when a user registers a moving picture, a typical scene is selected as a cover so that the cover can be captured as a representative scene. The scene capturing method of the registered video is substantially the same as the capturing the scene to obtain source scene information from the video asset.

출처 추출 서버(330)는 캡쳐된 프레임 데이터에 대하여 필터 처리를 하여 잡음을 제거하고 화상을 강조하는 등의 전처리를 수행한다(S533). 그리고 화상을 확대하거나 축소하고, 화상의 위치를 보정하거나 필요에 따라 화상을 회전하며, 농도에 대하여 정규화하는 등의 정규화 조작을 수행한다(S535). 그런 후 정규화된 화상에 대한 특징을 충실히 나타내는 파라미터를 추출한다. 즉, 정규화된 데이터로부터 색상, 질감, 모양 등의 영상 내용과 관련된 특징을 추출하여 장면 데이터(SD)를 생성한다(S537).The source extraction server 330 performs filter processing on the captured frame data to remove noise and to emphasize an image (S533). A normalization operation is performed such as enlarging or reducing the image, correcting the position of the image, rotating the image as necessary, and normalizing the density (S535). Then, parameters that faithfully represent the characteristics for the normalized picture are extracted. That is, the scene data SD is generated by extracting a feature related to image content such as color, texture, and shape from the normalized data (S537).

생성된 장면 데이터(SD)와 장면 데이터베이스(454)에 저장되어 있는 출처 장면 정보에 대하여 패턴 매칭을 수행하여 이 둘 사이의 유사도를 산출한다(S539). 유사도는 다양한 방식으로 계산할 수 있다. 출처 장면 정보도 앞서 설명한 것과 동일하게 동영상 저작물로부터 대표 장면을 추출하고 전처리, 정규화 조작 및 특징을 추출한 데이터로서, 등록된 동영상의 대표 장면에 대하여 장면 데이터(SD)를 생성하는 방식과 동일한 방식으로 생성되어 저장된다.Pattern matching is performed on the generated scene data SD and the source scene information stored in the scene database 454 to calculate a similarity between the two (S539). Similarity can be calculated in various ways. The source scene information is also the same as described above, and extracts the representative scene from the video asset, preprocesses, normalizes operations, and features, and generates the scene data (SD) for the representative scene of the registered movie. And stored.

계산된 유사도를 임계값과 비교하여(S541) 유사도가 임계값보다 크면 해당 출처 장면 정보에 관련된 출처 정보를 참조하여 장면 기반 출처를 추출한다(S543). 출처 추출 서버(330)는 장면 데이터베이스(454) 내의 출처 장면 정보 전체에 대하여 패턴 매칭을 완료할 때까지 단계(S539) 내지 단계(S543)를 반복한다(S545). 장면 데이터(SD)가 복수인 경우 각 장면 데이터(SD)에 대하여 동일한 동작을 반복하 여 장면 기반 출처를 추출한다. 그런 후 장면 데이터베이스(454)의 패턴 매칭을 완료하면 동작을 되돌린다.When the similarity is greater than the threshold value by comparing the calculated similarity with the threshold value (S541), the scene-based source is extracted by referring to the source information related to the source scene information (S543). The source extraction server 330 repeats steps S539 to S543 until the pattern matching is completed for all source scene information in the scene database 454 (S545). When there are a plurality of scene data SDs, the same operation is repeated for each scene data SD to extract a scene-based source. The operation then returns when the pattern matching of the scene database 454 is completed.

장면 기반 출처에 있어서도 경우에 따라 복수 개의 출처가 추출될 수도 있다. 즉, 임계값을 넘는 유사도를 산출하는 출처 장면 정보가 하나 이상 추출될 수 있으며, 이 경우 유사도의 크기에 따라 출처의 순위를 정할 수 있다. 경우에 따라 장면 기반 출처가 추출되지 않을 수도 있다.Even in scene-based sources, a plurality of sources may be extracted in some cases. That is, one or more source scene information for calculating a similarity exceeding a threshold may be extracted, and in this case, the ranking of sources may be ranked according to the magnitude of the similarity. In some cases, scene-based sources may not be extracted.

다시 도 3을 참고하면, 컨텐츠 서비스 시스템은 등록된 동영상에 대하여 오디오 기반 출처를 추출한다(S550). 오디오 기반 출처 추출에 대하여 도 7을 참고하여 좀 더 상세하게 설명한다.Referring to FIG. 3 again, the content service system extracts an audio-based source for the registered video (S550). Audio-based source extraction will be described in more detail with reference to FIG. 7.

도 7을 참고하면, 사용자로부터 동영상이 업로드되어 컨텐츠 서비스 시스템에 등록되면, 출처 추출 서버(330)는 동영상 데이터베이스(400)에 등록된 동영상 컨텐츠로부터 적어도 하나의 대표 구간을 선택한다(S551).Referring to FIG. 7, when a video is uploaded from a user and registered in the content service system, the source extraction server 330 selects at least one representative section from the video content registered in the video database 400 (S551).

소정 알고리즘을 통하여 주로 음성이 부각된 구간을 대표 구간으로 선택할 수 있으며, 미리 설정된 시간에 대응하는 구간을 대표 구간으로 선택할 수도 있다. 이와 달리 대표 구간은 앞서 비디오 기반 출처 추출에서 대표 장면을 포함하는 구간으로 선택할 수도 있다. 등록 동영상의 구간 선택 방식은 동영상 저작물로부터 출처 오디오 정보를 구하기 위하여 구간을 선택하는 방식과 실질적으로 동일하다.A section in which the voice is mainly highlighted may be selected as the representative section through a predetermined algorithm, and a section corresponding to a preset time may be selected as the representative section. Alternatively, the representative section may be selected as a section including the representative scene in the video-based source extraction. The section selection method of the registered video is substantially the same as the section selection method for obtaining source audio information from the video asset.

출처 추출 서버(330)는 대표 구간 내에서 오디오 정보가 없는 부분은 잘라내고, 이 구간에서 오디오를 추출하여 전처리를 수행한다(S553). 음성을 대상으로 오디오 기반 출처를 추출하는 경우 선택된 구간 내의 데이터가 음성인지 판단하는 과정을 전처리 과정에 포함시킬 수 있다. 그리고 잡음을 제거하거나 인코딩 시에 발생하는 오디오 왜곡을 제거하는 등의 정규화 조작을 수행한다(S555). 그런 후 정규화된 오디오에 대하여 음색, 톤 등의 오디오 특징을 충실히 나타낼 수 있는 파라미터를 추출하여 오디오 데이터(AD)를 생성한다(S557).The source extraction server 330 cuts out the part without audio information in the representative section, extracts the audio from this section, and performs preprocessing (S553). In the case of extracting an audio-based source from voice, a process of determining whether data in a selected section is voice may be included in the preprocessing process. In operation S555, a normalization operation such as removing noise or removing audio distortion generated during encoding is performed. Then, the audio data AD is generated by extracting a parameter capable of faithfully representing audio characteristics such as a tone and tone for the normalized audio (S557).

생성된 오디오 데이터(AD)와 오디오 데이터베이스(456)에 저장되어 있는 출처 오디오 정보에 대하여 패턴 매칭을 수행하여 이 둘 사이의 유사도를 산출한다(S559). 유사도는 다양한 방식으로 계산할 수 있다. 출처 오디오 정보도 앞서 설명한 것과 동일하게 동영상 저작물로부터 대표 구간을 추출하고 전처리, 정규화 조작 및 특징을 추출한 데이터로서, 등록된 동영상의 대표 구간에 대하여 오디오 데이터(AD)를 생성하는 방식과 동일한 방식으로 생성되어 저장된다.Similarity between the two is calculated by performing pattern matching on the generated audio data AD and the source audio information stored in the audio database 456 (S559). Similarity can be calculated in various ways. As described above, the source audio information is data extracted from the video asset, preprocessing, normalization manipulation, and feature extraction. The audio information is generated in the same manner as that of generating audio data (AD) for the representative video segment of the registered video. And stored.

산출된 유사도를 임계값과 비교하여(S561) 유사도가 임계값보다 크면 해당 출처 오디오 정보에 관련된 출처 정보를 참조하여 오디오 기반 출처를 추출한다(S563). 출처 추출 서버(330)는 오디오 데이터베이스(456) 내의 출처 오디오 정보 전체에 대하여 패턴 매칭을 완료할 때까지 단계(S559) 내지 단계(S563)를 반복한다(S545). 오디오 데이터(AD)가 복수인 경우 각 오디오 데이터(AD)에 대하여 동일한 동작을 반복하여 오디오 기반 출처를 추출한다. 그런 후 오디오 데이터베이스(456)의 패턴 매칭을 완료하면 동작을 되돌린다.When the similarity is greater than the threshold value by comparing the calculated similarity with the threshold value (S561), the audio-based source is extracted by referring to the source information related to the corresponding source audio information (S563). The source extraction server 330 repeats steps S559 to S563 until the pattern matching is completed for all source audio information in the audio database 456 (S545). When the audio data AD is plural, the same operation is repeated for each audio data AD to extract an audio-based source. The operation then returns when the pattern matching of the audio database 456 is completed.

오디오 기반 출처에 있어서도 경우에 따라 복수 개의 출처가 추출될 수도 있다. 즉, 임계값을 넘는 유사도를 가지는 출처 오디오 정보가 하나 이상 추출될 수 있으며, 이 경우 유사도의 크기에 따라 출처의 순위를 정할 수 있다. 경우에 따라 장면 기반 출처가 추출되지 않을 수도 있다.In audio-based sources, a plurality of sources may be extracted in some cases. That is, one or more source audio information having a similarity exceeding a threshold may be extracted, and in this case, the source may be ranked according to the size of the similarity. In some cases, scene-based sources may not be extracted.

지금까지 텍스트 기반 출처, 장면 기반 출처 및 오디오 기반 출처를 차례로 추출하는 것으로 설명하였으나 각 출처 추출 프로세스의 순서는 바뀔 수 있다. 또한 장면 패턴 매칭 및 오디오 패턴 매칭은 이와 다른 방법으로 수행할 수도 있다.So far, we have described text-based sources, scene-based sources, and audio-based sources in turn, but the order of each source extraction process can be changed. In addition, scene pattern matching and audio pattern matching may be performed in different ways.

다시 도 3을 참고하면, 출처 추출 서버(330)는 추출된 텍스트 기반 출처, 장면 기반 출처, 오디오 기반 출처에 기초하여 동영상 출처를 종합적으로 판단한다(S570).Referring again to FIG. 3, the source extraction server 330 comprehensively determines a video source based on the extracted text-based source, scene-based source, and audio-based source (S570).

텍스트 기반 출처, 장면 기반 출처, 오디오 기반 출처에 서로 다른 가중치를 둘 수 있으며, 추출된 출처가 복수인 경우 각 출처에 대응하는 유사도와 가중치를 곱하여 높은 값을 가지는 순서대로 출처의 순위를 정할 수 있다. 동영상의 특징 상 장면 기반 출처에 상대적으로 높은 가중치를 부여할 수 있다.Text-based sources, scene-based sources, and audio-based sources can be weighted differently, and if there are multiple extracted sources, the source can be ranked in order of highest value by multiplying the similarity and weight corresponding to each source. . Due to the characteristics of the video, a relatively high weight may be given to the scene-based source.

그러나 이와 달리 텍스트 기반 출처, 장면 기반 출처 및 오디오 기반 출처를 독립적으로 추출하여 동영상의 출처로 정할 수 있으며, 동영상 컨텐츠로부터 색인 데이터(TD), 장면 데이터(SD) 및 오디오 데이터(AD) 중 적어도 하나를 추출하고 색인 데이터(TD), 장면 데이터(SD) 및 오디오 데이터(AD) 중 적어도 하나에 기초하여 동영상 컨텐츠의 출처를 추출할 수도 있다.In contrast, text-based sources, scene-based sources, and audio-based sources can be independently extracted and designated as the source of a video, and at least one of index data (TD), scene data (SD), and audio data (AD) is extracted from the video content. And extract the source of the video content based on at least one of the index data TD, the scene data SD, and the audio data AD.

동영상의 출처가 추출되지 않을 수도 있으며, 추출된 출처가 전혀 없는 경우라면 이 동영상은 저작물에 관계되지 않은 사용자가 직접 제작한 동영상일 수 있다.The source of the video may not be extracted. If there is no extracted source, the video may be a video produced by a user who is not related to the asset.

한편 텍스트 기반 출처, 장면 기반 출처 및 오디오 기반 출처를 서버단에 표 시한 후 컨텐츠 서비스 시스템의 조작자의 선택에 따라 동영상의 최종 출처를 결정하도록 할 수도 있다. 즉, 텍스트 기반 출처 중 유사도가 높은 상위 순위, 예를 들면 1위부터 10위까지의 출처를 표시하고, 마찬가지로 장면 기반 출처 중 유사도가 높은 상위 순위의 출처를 표시하며, 오디오 기반 출처 중 유사도가 높은 상위 순위의 출처를 표시하여 두고 조작자가 실제 등록 동영상의 대표 장면을 검토하며 최종 출처를 결정할 수 있다. 조작자는 사용자가 동영상을 등록할 때 입력한 출처와 컨텐츠 서비스 시스템에서 추출된 출처가 동일한지 확인할 수 있다.Meanwhile, text-based sources, scene-based sources, and audio-based sources may be displayed on the server side, and the final source of the video may be determined according to the operator's selection of the content service system. That is, it displays the top rankings with the highest similarity among text-based sources, for example, the top ones with the top ten, similarly the top rankings with the highest similarity among the scene-based sources, and the high similarity among the audio-based sources. The source of the top rank is marked and the operator can review the representative scene of the actual registered video and determine the final source. The operator can check whether the source input when the user registers the video and the source extracted from the content service system are the same.

컨텐츠 서비스 시스템은 동영상의 출처가 추출되면 이 출처와 관련된 소정 동작을 수행한다(S580). 즉, 출처 추출 서버(330)는 추출된 출처를 동영상 서비스 서버(300)에 전달한다. 또한 이를 동영상 데이터베이스(400)에 전달하여 동영상 컨텐츠와 함께 기록하여 둔다. 그런 후 동영상 서비스 서버(300)는 사용자로부터의 요청에 따라 동영상 컨텐츠를 사용자 단말기(100)에 표시하면서 추출된 출처와 관련하여 다음과 같이 다양한 노출 동작을 수행할 수 있다.When the source of the video is extracted, the content service system performs a predetermined operation related to the source (S580). That is, the source extraction server 330 delivers the extracted source to the video service server 300. In addition, it is delivered to the video database 400 and recorded along with the video content. Thereafter, the video service server 300 may perform various exposure operations as follows with respect to the extracted source while displaying the video content on the user terminal 100 according to a request from the user.

노출 동작의 예로서, 컨텐츠 서비스 시스템은 추출된 출처를 동영상 컨텐츠와 함께 표시할 수 있다.As an example of the exposure operation, the content service system may display the extracted source together with the video content.

또한 컨텐츠 서비스 시스템은 추출된 출처와 관련된 웹사이트의 링크를 제공할 수 있다. 도 8을 참고하면, 사용자 단말기(100)에 표시되는 동영상 재생기(150) 내부에 출처와 관련된 웹사이트 링크(160)가 배치되어 있다. 물론 이 링크(160)는 동영상 재생기(150) 외부에 배치될 수도 있다. 사용자가 웹사이트 링크(160)를 클릭하면 출처에 관련된 사이트로 이동하여 동영상 저작물을 더 볼 수 있다.The content service system may also provide a link to a website related to the extracted source. Referring to FIG. 8, a website link 160 related to a source is disposed in the video player 150 displayed on the user terminal 100. Of course, the link 160 may be disposed outside the video player 150. When the user clicks on the website link 160, he or she can go to a site related to the source to view more video assets.

그리고 컨텐츠 서비스 시스템은 추출된 출처에 관련된 배너 광고(170)를 동영상 컨텐츠와 함께 게재할 수도 있다. 물론 저작권자의 배너 광고(170) 이외의 컨텐츠 서비스 사업자의 수익을 위한 별도의 광고를 함께 게재할 수도 있으며, 이 경우 저작권자와 해당 광고 수익을 배분할 수도 있다.In addition, the content service system may post a banner advertisement 170 related to the extracted source together with the video content. Of course, a separate advertisement for the profit of the content service provider other than the banner advertisement 170 of the copyright holder may be displayed together, and in this case, the copyright owner and the corresponding advertisement revenue may be distributed.

또한 컨텐츠 서비스 시스템은 사용자 단말기(150)에 표시되는 동영상 재생기(150) 내부 또는 외부에 버튼을 구비하여 사용자가 이 버튼을 클릭하면 저작물 데이터베이스(450)로부터 동영상 컨텐츠와 관련된 동영상 저작물을 읽어 이를 재생하거나 다운로드하도록 할 수 있다. 이 경우 유료 또는 무료로 동영상 저작물을 이용하도록 할 수 있으며, 유료인 경우 컨텐츠 서비스 사업자와 저작권자가 수익을 배분할 수 있다. 이렇게 함으로써 저작권자의 웹사이트로 이동하여 동영상 저작물을 이용하는 번거로움을 없앨 수 있다. 그리고 사용자가 동영상 저작물을 다운로드받아 편집 등을 수행할 수 있도록 할 수 있으며 편집된 동영상 컨텐츠를 재등록하거나 추가로 등록할 수도 있다. 이때 동영상 저작물 전체가 다운로드될 수도 있으나 필요한 부분에 대하여만 허용될 수도 있다.In addition, the content service system includes a button inside or outside the video player 150 displayed on the user terminal 150, and when a user clicks the button, the content service system reads a video asset related to the video content from the asset database 450 and plays it. You can download it. In this case, a video asset may be used for a fee or free of charge. In case of a fee, a content service provider and a copyright holder may distribute the revenue. This removes the hassle of going to the copyright holder's website and using the video asset. In addition, the user may download and edit the video asset, and may also re-register or additionally register the edited video content. At this time, the entire video asset may be downloaded, but may be allowed only for necessary portions.

컨텐츠 서비스 시스템은 추출된 출처의 동영상 저작물과 관련된 내용을 노출시킬 수 있다. 즉, 해당 동영상 저작물에 대한 사용자의 만족도를 조사하거나 특정 내용에 대하여 설문 조사를 하거나 투표 등을 수행하여 사용자의 의견을 물을 수 있다. 또한 동영상 저작물 내용과 관련된 물품, 예를 들면 드라마 내의 주인공이 즐겨 사용하는 물품의 정보를 제공하거나 이 물품의 구매를 위한 표시를 행할 수도 있다.The content service system may expose content related to the video asset of the extracted source. In other words, the user's satisfaction with the video asset may be investigated, a questionnaire may be asked for a specific content, or a vote may be performed to ask for the user's opinion. In addition, information related to the contents of the video work, for example, the information of the favorite items that are used by the main character in the drama may be provided or a display for the purchase of the article may be performed.

이와 같이 추출된 출처를 이용하여 추출된 출처와 관련된 다양한 노출 동작을 수행할 수 있다. 여기서 설명한 것들은 예일 뿐이며, 더욱 다양한 방법으로 추출된 출처를 이용할 수 있다.As such, the extracted source may be used to perform various exposure operations related to the extracted source. The description here is just an example, and you can use extracted sources in more various ways.

한편, 이러한 노출 동작과 별도로, 컨텐츠 서비스 시스템은 사용자가 업로드한 동영상의 출처를 알 수 있으므로 업로드한 동영상의 수효에 따라 또는 등록된 동영상의 재생 횟수에 따라 해당 동영상의 저작권자에게 지불할 저작권료를 산출할 수 있다.On the other hand, apart from such an exposure operation, the content service system can know the source of the uploaded video so that the user can calculate the copyright fee to be paid to the copyright holder of the video according to the number of uploaded videos or the number of plays of the registered video. Can be.

앞서 예로서 설명한 출처 관련 동작은 컨텐츠 서비스 사업자와 저작권자의 협의에 따라 선택적으로 수행될 수 있다.Source-related operations described as examples above may be selectively performed according to the agreement of the content service provider and the copyright holder.

이렇게 추출된 출처와 관련된 노출 동작을 수행함으로써 다양한 비즈니스 모델을 만들 수 있으므로 컨텐츠 서비스 사업자와 저작권자가 모두 만족할 수 있는 수익 모델을 만들 수 있다. 또한 저작권료 산정을 할 때도 추출된 출처를 이용할 수 있다. 이렇게 추출된 출처에 기초하여 다양한 처리를 수행할 수 있으므로 저작권을 보호하는 데 기초를 마련할 수 있다.Since various business models can be created by performing the exposure operation related to the extracted source, a profit model that can satisfy both the content service provider and the copyright holder can be created. You can also use the extracted sources to calculate your royalty. Various processing can be performed based on the extracted source, thus providing a basis for protecting copyrights.

지금까지 컨텐츠로서 동영상을 예로 하여 설명하였으나, 음악, 사진, 그림 등과 같은 컨텐츠에도 동일하게 적용할 수 있다.Although a description has been made of a video as an example so far, the same may be applied to content such as music, photos, and pictures.

본 발명의 실시예는 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터로 읽을 수 있는 매체를 포함한다. 이 매체는 지금까지 설명한 것과 같이 컨텐츠를 서비스하는 방법을 실행시키기 위한 프로그램 또는 프 로세스를 기록한다. 이 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 이러한 매체의 예에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기 매체, CD 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 자기-광 매체, 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 하드웨어 장치 등이 있다. 또는 이러한 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Embodiments of the invention include a computer readable medium containing program instructions for performing various computer-implemented operations. This medium records a program or process for executing a method of serving content as described so far. The media may include, alone or in combination with the program instructions, data files, data structures, and the like. Examples of such media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CDs and DVDs, floppy disks and program commands such as magnetic-optical media, ROM, RAM, flash memory, and the like. Hardware devices configured to store and perform such operations. Alternatively, the medium may be a transmission medium such as an optical or metal wire, a waveguide, or the like including a carrier wave for transmitting a signal specifying a program command, a data structure, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

이상에서 본 발명의 바람직한 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although the preferred embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concepts of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

이와 같이, 본 발명에 의하면, 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터를 추출하고, 저작물 데이터베이스에 기억되어 있는 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보와 패턴 매칭을 수행함으로써 동영상의 출처를 추출할 수 있다.As described above, according to the present invention, the source of the video is extracted by extracting index data, scene data, and audio data from the video content, and performing pattern matching with source text information, source scene information, and source audio information stored in the asset database. Can be extracted.

또한 동영상을 노출할 때 출처를 표시하고 해당 웹사이트의 링크를 제공하거나 배너 광고를 게재하는 등 추출된 출처에 기초하여 다양한 처리를 수행할 수 있 으므로 저작권을 보호하는 데 기초를 마련할 수 있다.When the video is exposed, various processing can be performed based on the extracted source, such as displaying the source, providing a link to the website, or displaying a banner advertisement, thereby providing a foundation for protecting copyright.

Claims (18)

사용자에게 동영상 등록 절차를 제공하고, 사용자의 요청에 따라 동영상 컨텐츠를 검색하여 사용자 단말기에 제공하는 동영상 서비스 서버, 그리고A video service server that provides a video registration procedure to a user, retrieves video content according to a user's request, and provides the video to a user terminal; 상기 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나를 생성하고 상기 색인 데이터, 상기 장면 데이터 및 상기 오디오 데이터 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출하되 미리 기억되어 있는 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보 중 적어도 하나를 참조하여 상기 동영상 컨텐츠의 출처를 추출하는 출처 추출 서버Generating at least one of index data, scene data, and audio data from the video content, and extracting a source of the video content based on at least one of the index data, the scene data, and the audio data; A source extraction server that extracts a source of the video content by referring to at least one of source scene information and source audio information 를 포함하는 컨텐츠 서비스 시스템.Content service system comprising a. 제1항에서,In claim 1, 저작권자로부터의 동영상 저작물에서 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나를 생성하는 저작물 업데이트 서버, 그리고An asset update server for generating at least one of the source text information, the source scene information, and the source audio information in a video asset from a copyright holder; and 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나를 기억하는 저작물 데이터베이스를 더 포함하는And a work database for storing at least one of the source text information, the source scene information, and the source audio information. 컨텐츠 서비스 시스템.Content service system. 제2항에서,In claim 2, 상기 출처 추출 서버는 상기 저작물 데이터베이스를 검색하여 상기 색인 데이터와 동일한 상기 출처 텍스트 정보가 있으면 상기 출처 텍스트 정보에 관련된 출처를 추출하는 컨텐츠 서비스 시스템.And the source extracting server searches the asset database and extracts a source related to the source text information if there is the same source text information as the index data. 제2항에서,In claim 2, 상기 출처 추출 서버는 상기 동영상 컨텐츠로부터 소정 장면의 프레임 데이터를 추출하고 상기 프레임 데이터에 대하여 소정 신호 처리를 행하여 상기 장면 데이터를 생성하며 상기 장면 데이터와 상기 출처 장면 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출한 후 상기 유사도의 크기에 따라 상기 출처 장면 정보에 관련된 출처를 추출하는 컨텐츠 서비스 시스템.The source extraction server extracts frame data of a predetermined scene from the video content, performs predetermined signal processing on the frame data to generate the scene data, and performs pattern matching on the scene data and the source scene information to obtain similarity. And calculating a source related to the source scene information according to the magnitude of the similarity. 제2항에서,In claim 2, 상기 출처 추출 서버는 상기 동영상 컨텐츠로부터 소정 구간의 오디오 정보를 추출하고 상기 오디오 정보에 대하여 소정 신호 처리를 행하여 상기 오디오 데이터를 생성하며 상기 오디오 데이터와 상기 출처 오디오 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출한 후 상기 유사도의 크기에 따라 상기 출처 오디오 정보에 관련된 출처를 추출하는 컨텐츠 서비스 시스템.The source extraction server extracts audio information of a predetermined section from the video content, performs predetermined signal processing on the audio information to generate the audio data, and performs pattern matching on the audio data and the source audio information to obtain similarity. And calculating a source related to the source audio information according to the magnitude of the similarity. 제2항 내지 제5항 중 어느 한 항에서,The method according to any one of claims 2 to 5, 상기 장면 데이터 및 상기 오디오 데이터의 생성 방식은 각각 상기 출처 장면 정보 및 상기 출처 오디오 정보의 생성 방식과 실질적으로 동일한 컨텐츠 서비스 시스템.And a method of generating the scene data and the audio data is substantially the same as the method of generating the source scene information and the source audio information, respectively. 제2항 내지 제5항 중 어느 한 항에서,The method according to any one of claims 2 to 5, 상기 출처 텍스트 정보에 관련된 출처, 상기 출처 장면 정보에 관련된 출처 및 상기 출처 오디오 정보에 관련된 출처에 서로 다른 가중치를 둘 수 있으며, 각 출처에 대응하는 유사도와 상기 가중치에 기초하여 출처의 순위를 정하는 컨텐츠 서비스 시스템.Different weights may be assigned to sources related to the source text information, sources related to the source scene information, and sources related to the source audio information, and the ranking of the sources based on the similarity and the weight corresponding to each source. Service system. 제1항 내지 제5항 중 어느 한 항에서,The method according to any one of claims 1 to 5, 상기 동영상 컨텐츠를 기억하고 상기 출처 추출 서버로부터 상기 동영상 컨텐츠의 출처 정보를 받아 기억하는 동영상 데이터베이스를 더 포함하는 컨텐츠 서비스 시스템.And a video database for storing the video content and receiving and storing source information of the video content from the source extraction server. 제1항 내지 제5항 중 어느 한 항에서,The method according to any one of claims 1 to 5, 상기 동영상 컨텐츠의 출처와 관련된 출처 노출 동작을 하거나 상기 동영상 컨텐츠의 출처에 기초하여 상기 동영상 컨텐츠의 저작권료를 산출하는 컨텐츠 서비스 시스템.A content service system that performs a source exposure operation related to the source of the video content or calculates a royalty fee for the video content based on the source of the video content. 동영상 컨텐츠를 등록하는 단계,Registering video content, 상기 동영상 컨텐츠로부터 색인 데이터, 장면 데이터 및 오디오 데이터 중 적어도 하나를 생성하는 단계,Generating at least one of index data, scene data, and audio data from the video content; 상기 색인 데이터, 상기 장면 데이터 및 상기 오디오 데이터 중 적어도 하나에 기초하여 상기 동영상 컨텐츠의 출처를 추출하는 단계, 그리고Extracting a source of the video content based on at least one of the index data, the scene data, and the audio data, and 상기 동영상 컨텐츠를 검색하여 사용자 단말기에 제공하는 단계Searching for the video content and providing the same to a user terminal; 를 포함하며,Including; 상기 출처 추출 단계는 미리 기억되어 있는 출처 텍스트 정보, 출처 장면 정보 및 출처 오디오 정보 중 적어도 하나를 참조하여 상기 동영상 컨텐츠의 출처를 추출하는 단계를 포함하는The source extracting step may include extracting the source of the video content by referring to at least one of source text information, source scene information, and source audio information stored in advance. 컨텐츠 서비스 방법.Content service method. 제10항에서,In claim 10, 저작권자로부터의 동영상 저작물에서 상기 출처 텍스트 정보, 상기 출처 장면 정보 및 상기 출처 오디오 정보 중 적어도 하나를 생성하고 기억하는 단계를 더 포함하는 컨텐츠 서비스 방법.Generating and storing at least one of the source text information, the source scene information, and the source audio information in a video asset from a copyright holder. 제11항에서,In claim 11, 상기 출처 추출 단계는 상기 색인 데이터와 동일한 상기 출처 텍스트 정보가 있으면 상기 출처 텍스트 정보에 관련된 출처를 추출하는 단계를 더 포함하는 컨텐츠 서비스 방법.The source extracting step may further include extracting a source related to the source text information if there is the same source text information as the index data. 제11항에서,In claim 11, 상기 장면 데이터 생성 단계는,The scene data generation step, 상기 동영상 컨텐츠로부터 소정 장면의 프레임 데이터를 추출하는 단계, 그리고Extracting frame data of a predetermined scene from the video content; and 상기 프레임 데이터에 대하여 소정 신호 처리를 행하여 상기 장면 데이터를 생성하는 단계를 포함하고,Performing the predetermined signal processing on the frame data to generate the scene data; 상기 출처 추출 단계는,The source extraction step, 상기 장면 데이터와 상기 출처 장면 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출하는 단계, 그리고Calculating similarity by performing pattern matching on the scene data and the source scene information, and 상기 유사도의 크기에 따라 상기 출처 장면 정보에 관련된 출처를 추출하는 단계를 더 포함하는Extracting a source related to the source scene information according to the magnitude of the similarity; 컨텐츠 서비스 방법.Content service method. 제11항에서,In claim 11, 상기 오디오 데이터 생성 단계는,The audio data generating step, 상기 동영상 컨텐츠로부터 소정 구간의 오디오 정보를 추출하는 단계, 그리고Extracting audio information of a predetermined section from the video content; and 상기 오디오 정보에 대하여 소정 신호 처리를 행하여 상기 오디오 데이터를 생성하는 단계를 포함하며,Performing the predetermined signal processing on the audio information to generate the audio data, 상기 출처 추출 단계는,The source extraction step, 상기 오디오 데이터와 상기 출처 오디오 정보에 대하여 패턴 매칭을 수행하여 유사도를 산출하는 단계, 그리고Calculating a similarity by performing pattern matching on the audio data and the source audio information, and 상기 유사도의 크기에 따라 상기 출처 오디오 정보에 관련된 출처를 추출하는 단계를 더 포함하는Extracting a source related to the source audio information according to the magnitude of the similarity; 컨텐츠 서비스 방법.Content service method. 제11항 내지 제14항 중 어느 한 항에서,The method according to any one of claims 11 to 14, 상기 장면 데이터 및 상기 오디오 데이터의 생성 방식은 각각 상기 출처 장면 정보 및 상기 출처 오디오 정보의 생성 방식과 실질적으로 동일한 컨텐츠 서비스 방법.The method of generating the scene data and the audio data is substantially the same as the method of generating the source scene information and the source audio information, respectively. 제11항 내지 제14항 중 어느 한 항에서,The method according to any one of claims 11 to 14, 상기 출처 텍스트 정보에 관련된 출처, 상기 출처 장면 정보에 관련된 출처 및 상기 출처 오디오 정보에 관련된 출처에 서로 다른 가중치를 둘 수 있으며, 각 출처에 대응하는 유사도와 상기 가중치에 기초하여 출처의 순위를 정하는 컨텐츠 서비스 방법.Different weights may be assigned to sources related to the source text information, sources related to the source scene information, and sources related to the source audio information, and the ranking of the sources based on the similarity and the weight corresponding to each source. Service method. 제10항 내지 제14항 중 어느 한 항에서,The method according to any one of claims 10 to 14, 상기 동영상 컨텐츠의 출처와 관련된 출처 노출 동작을 하거나 상기 동영상 컨텐츠의 출처에 기초하여 상기 동영상 컨텐츠의 저작권료를 산출하는 단계를 더 포함하는 컨텐츠 서비스 방법.Calculating a copyright fee of the video content based on the source exposure operation related to the source of the video content or the source of the video content. 컴퓨터에 제10항 내지 제14항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.A computer-readable medium having recorded thereon a program for causing a computer to execute the method of claim 10.
KR1020060133822A 2006-12-26 2006-12-26 Contents service system and method KR100857381B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020060133822A KR100857381B1 (en) 2006-12-26 2006-12-26 Contents service system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060133822A KR100857381B1 (en) 2006-12-26 2006-12-26 Contents service system and method

Publications (2)

Publication Number Publication Date
KR20080078748A KR20080078748A (en) 2008-08-28
KR100857381B1 true KR100857381B1 (en) 2008-09-05

Family

ID=39880724

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060133822A KR100857381B1 (en) 2006-12-26 2006-12-26 Contents service system and method

Country Status (1)

Country Link
KR (1) KR100857381B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102566921B1 (en) * 2021-05-25 2023-08-14 주식회사 한글과컴퓨터 Electronic terminal apparatus which inserts source information of the image inserted into an electronic document, and the operating method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030012945A (en) * 2001-08-06 2003-02-14 삼성전자주식회사 Contents uploading system and a method thereof
KR20050006565A (en) * 2003-07-09 2005-01-17 주식회사 픽스트리 System And Method For Managing And Editing Multimedia Data
KR20050015955A (en) * 2003-12-29 2005-02-21 엔에이치엔(주) contents circulation system through network and method thereof
KR20050033961A (en) * 2003-10-07 2005-04-14 주식회사 팬택앤큐리텔 Apparatus for insert source information of a image data and it's method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030012945A (en) * 2001-08-06 2003-02-14 삼성전자주식회사 Contents uploading system and a method thereof
KR20050006565A (en) * 2003-07-09 2005-01-17 주식회사 픽스트리 System And Method For Managing And Editing Multimedia Data
KR20050033961A (en) * 2003-10-07 2005-04-14 주식회사 팬택앤큐리텔 Apparatus for insert source information of a image data and it's method
KR20050015955A (en) * 2003-12-29 2005-02-21 엔에이치엔(주) contents circulation system through network and method thereof

Also Published As

Publication number Publication date
KR20080078748A (en) 2008-08-28

Similar Documents

Publication Publication Date Title
US20200058088A1 (en) Method and system for determining content treatment
US10123068B1 (en) System, method, and program product for generating graphical video clip representations associated with video clips correlated to electronic audio files
US9785841B2 (en) Method and system for audio-video signal processing
US10872193B2 (en) Method for publishing composite media content and publishing system to perform the method
US10346001B2 (en) System and method for describing a scene for a piece of media
JP5649303B2 (en) Method and apparatus for annotating media streams
JP5409268B2 (en) Information presenting apparatus and portable terminal
US20080208692A1 (en) Sponsored content creation and distribution
US20080098032A1 (en) Media instance content objects
JP2003157288A (en) Method for relating information, terminal equipment, server device, and program
TWI457768B (en) A content generation apparatus, a system for providing a web-based service to permit integration of user generated content with sponsored media and a computer-implemented method
WO2014100893A1 (en) System and method for the automated customization of audio and video media
JP5143592B2 (en) Content reproduction apparatus, content reproduction method, content reproduction system, program, and recording medium
US8676576B2 (en) Information processing system, information processing apparatus, information processing program and recording medium
US20100131085A1 (en) System and method for on-demand delivery of audio content for use with entertainment creatives
KR101140318B1 (en) Keyword Advertising Method and System Based on Meta Information of Multimedia Contents Information like Ccommercial Tags etc.
KR100854143B1 (en) Method for advertisement using moving picture user-created contents
US20170024097A1 (en) Method and Host Server for Creating a Composite Media File
JP2002215075A (en) Advertisement delivery and display method and system
JP5335500B2 (en) Content search apparatus and computer program
US20110004671A1 (en) System and Method for Secure Delivery of Creatives
KR100857381B1 (en) Contents service system and method
WO2014048576A2 (en) System for video clips
WO2023058101A1 (en) Moving-image reproduction assistance system, moving-image reproduction assistance method, and program
Carter Pure cheek: the Ben Dover story

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110707

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20130626

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150722

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20160725

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20170704

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20190701

Year of fee payment: 12