KR100543597B1

KR100543597B1 - Multimedia searching and browsing method

Info

Publication number: KR100543597B1
Application number: KR1020020010032A
Authority: KR
Inventors: 김현준; 박기수; 김주민
Original assignee: 엘지전자 주식회사
Priority date: 2002-02-25
Filing date: 2002-02-25
Publication date: 2006-01-20
Also published as: KR20030070480A

Abstract

본 발명은 네트워크(network)를 기반으로 하여 멀티미디어 콘텐츠의 메타데이터(metadata)를 생성하고 이 메타데이터 파일을 서버와 사용자, 사용자간에 공유하여 멀티미디어 콘텐츠를 검색 및 브라우징(browsing)하는 시스템에 관한 것이다.The present invention relates to a system for generating metadata of a multimedia content based on a network and sharing the metadata file between a server, a user, and a user to search and browse the multimedia content.

본 발명의 멀티미디어 검색 및 브라우징 시스템은 네트워크(21)를 기반으로 하여 서버 시스템(22)과 사용자1(23), 사용자2(24), 사용자3(25),...,사용자N이 연결된다. 서버 시스템(22)은 콘텐츠 데이터 베이스(Contents DB)(26), 메타데이터 서버(Description Server)(27), 메타데이터 생성기(DG)(28), 메타데이터 데이터 베이스(Description DB)(29)를 포함한다. 상기 기술한 메타데이터 파일(Description File)은 실제 데이터 추적정보, 데이터 관리정보, 데이터 색인정보, 실제 콘텐츠 링크 정보, 데이터 요약정보를 기술하며, 상기 메타데이터 사용자가 메타데이터 파일만을 기반으로 하여 실제 콘텐츠를 소유하지 않더라도 콘텐츠에 대한 검색이나 브라우징을 수행할 수 있다.In the multimedia search and browsing system of the present invention, the server system 22 is connected to the user 1 (23), the user 2 (24), the user 3 (25), ..., user N based on the network 21. . The server system 22 stores a contents database 26, a metadata server 27, a metadata generator (DG) 28, and a metadata database 29. Include. The above-described metadata file describes actual data tracking information, data management information, data index information, actual content link information, and data summary information, and the metadata user uses the actual content based only on the metadata file. You can search or browse content even if you don't own it.

멀티미디어, 콘텐츠, 메타데이터, 메타데이터 생성기, 브라우저Multimedia, Content, Metadata, Metadata Generator, Browser

Description

How to search and browse multimedia content {MULTIMEDIA SEARCHING AND BROWSING METHOD}

도1은 오프라인 기반에서 MPEG7 메타데이터 생성기와 브라우저의 기능을 요약하여 나타낸 도면BRIEF DESCRIPTION OF THE DRAWINGS Figure 1 summarizes the functions of MPEG7 metadata generator and browser on an offline basis.

도2는 오프라인 기반의 MPEG7 메타데이터 생성기 및 브라우저의 구성을 나타낸 도면2 is a block diagram of an offline-based MPEG7 metadata generator and browser.

도3은 본 발명에 따른 네트워크 기반 메타데이터 생성기와 브라우저를 나타낸 도면3 illustrates a network based metadata generator and browser in accordance with the present invention.

도4는 메타데이터 생성기를 이용한 메타데이터 파일 생성과 브라우징을 설명하기 위한 도면4 is a diagram for explaining metadata file generation and browsing using a metadata generator.

멀티미디어 콘텐츠의 생성자나 공급자는 방대한 양의 콘텐츠에 대한 아카이 빙(archiving)을 필요로 하며, 멀티미디어 콘텐츠의 사용자들은 멀티미디어 데이터의 효율적인 검색 및 브라우징을 필요로 하고 있다.Producers and providers of multimedia content need archiving vast amounts of content, and users of multimedia content need efficient search and browsing of multimedia data.

MPEG7 응용에서는 이와 같은 멀티미디어 콘텐츠의 아카이빙이나 검색 및 브라우징을 위하여 멀티미디어 콘텐츠의 메타데이터를 생성하고 이 메타데이터를 기반으로 하여 사용자가 원하는 멀티미디어 콘텐츠에 대한 검색 및 브라우징을 가능하게 하고 있다.In the MPEG7 application, metadata for multimedia content is generated for archiving, searching, and browsing such multimedia content, and based on the metadata, a user can search for and browse multimedia content.

메타데이터의 생성은 오프라인을 기반으로 하고 있으며, 멀티미디어 콘텐츠의 생성자나 공급자에 의해서 이루어진다. 그러나 오프라인 기반에서 메타데이터의 생성, 검색, 브라우징은 일반 사용자가 메타데이터를 이용하기 위해서는 콘텐츠를 포함하여 해당 메타데이터 파일을 동시에 소유할 때에만 멀티미디어 콘텐츠 검색과 브라우징을 할 수 있다는 문제점이 따른다. 이러한 문제점 때문에 온라인에서 메타데이터 파일만을 이용한 멀티미디어 콘텐츠에 대한 검색과 브라우징에 대한 개발의 필요성이 제기되고 있으며, 또한 방대한 양의 콘텐츠를 보유하고 있는 콘텐츠 제공자뿐만 아니라 일반 사용자들이 소유하고 있는 메타데이터 파일에 대한 공유, 검색을 할 수 있는 브라우저의 개발 필요성이 제기되고 있다.The generation of metadata is based off-line and is done by the creator or provider of multimedia content. However, the generation, retrieval, and browsing of metadata on an offline basis has a problem that the general user can search and browse multimedia contents only when the metadata file including the contents is owned in order to use the metadata. Due to these problems, the necessity of developing a search and browsing for multimedia contents using only metadata files online has been raised. Also, metadata files owned by general users as well as content providers having a large amount of contents have been raised. There is a need to develop a browser that can share and search.

본 발명은 네트워크를 기반으로 하여 멀티미디어 콘텐츠의 메타데이터 생성과 검색 및 브라우징이 온라인 상에서 이루어질 수 있도록 한 메타데이터 생성과 검색 및 브라우징 시스템을 제공함을 목적으로 한다.An object of the present invention is to provide a metadata generation, retrieval and browsing system that enables metadata generation, retrieval and browsing of multimedia contents online based on a network.

또한 본 발명은 콘텐츠 제공자가 메타데이터 파일만을 이용하여 콘텐츠의 광 고나 아카이빙을 할 수 있도록 하고, 일반 사용자가 다양한 단말기를 통해 멀티미디어 콘텐츠에 대한 브라우징과 검색을 할 수 있도록 한 네트워크 기반 메타데이터 생성과 검색 및 브라우징 시스템을 제공함을 목적으로 한다.In addition, the present invention allows the content provider to advertise or archive content using only the metadata file, and network-based metadata generation and retrieval that enables general users to browse and search for multimedia contents through various terminals. And a browsing system.

또한 본 발명은 네트워크 환경에서 콘텐츠 제공자의 멀티미디어 콘텐츠 메타데이터 파일 생성과 사용자의 멀티미디어 데이터의 검색 및 브라우징을 위하여, 콘텐츠 제공자에 의해서 생성된 메타데이터 파일 또는 일반 사용자가 생성한 메타데이터 파일의 공유를 기반으로 하는 멀티미디어 콘텐츠의 검색 및 브라우징 시스템을 제공함을 목적으로 한다.
또한 본 발명은 온라인으로 메타데이터의 생성과 편집을 가능하게 하며, 콘텐츠의 공유가 아닌 메타데이터 파일 공유를 기반으로 하여 사용자간에 멀티미디어 콘텐츠에 대한 검색이나 브라우징을 가능하게 하고, 메타데이터 파일이 참조하는 콘텐츠의 변화나 변동에 대한 내용을 스스로 업데이트 할 수 있도록 한 멀티미디어 콘텐츠의 검색 및 브라우징 시스템을 제공함을 목적으로 한다. In addition, the present invention is based on the sharing of the metadata file generated by the content provider or the metadata file generated by the general user for generating the multimedia content metadata file of the content provider and search and browsing of the multimedia data of the user in a network environment An object of the present invention is to provide a system for searching and browsing multimedia contents.
In addition, the present invention enables the creation and editing of metadata online, and enables search or browsing of multimedia content among users based on metadata file sharing, not sharing content, and which metadata file refers to. It is an object of the present invention to provide a system for searching and browsing multimedia contents, which enables users to update contents of changes or changes of contents by themselves.

삭제delete

상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일을 서버와 사용자, 사용자간에 네트워크를 기반으로 온라인 상에서 생성하거나 편집할 수 있도록 한 것을 특징으로 한다.In order to achieve the above object, a multimedia content search and browsing system according to the present invention is characterized in that a metadata file for multimedia content can be generated or edited online based on a network between a server, a user, and a user.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일을 서버와 사용자, 사 용자간에 네트워크를 기반으로 공유하고, 메타데이터 파일 공유를 기반으로 온라인에서 메타데이터 파일을 이용한 멀티미디어 콘텐츠의 검색이나 브라우징을 수행함을 특징으로 한다.In addition, the multimedia content search and browsing system of the present invention for achieving the above object, the metadata file for the multimedia content between the server and the user, users share the network based on the metadata file sharing online Searching or browsing multimedia content using metadata files.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일을 서버를 거치지 않고 사용자간에 온라인을 기반으로 공유함을 특징으로 한다. 즉, 사용자들 간에 IP를 이용하여 메타데이터 파일을 공유함으로써 서버에 대한 부담을 줄일 수 있고, 콘텐츠 제공자는 효율적으로 메타데이터 파일을 광고할 수 있으며, 일반 사용자들은 손쉽게 메타데이터 파일을 얻거나 이용할 수 있음을 특징으로 한다.In addition, the multimedia content retrieval and browsing system of the present invention for achieving the above object is characterized in that for sharing the metadata file for the multimedia content on-line between users without going through the server. In other words, sharing metadata files using IP among users can reduce the burden on the server, content providers can efficiently advertise the metadata files, and end users can easily obtain or use the metadata files. It is characterized by the presence.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일의 목록을 사용자의 브라우저에 저장할 수 있음을 특징으로 한다. 즉, 이동 단말기 등에서는 저장 용량이 작기 때문에 상기 공유를 기반으로 하는 메타데이터 파일을 직접 저장하지 않고 메타데이터 파일이 있는 온라인 상의 위치와 메타데이터 파일의 이름만을 저장함으로써, 효율적으로 메타데이터를 사용할 수 있음을 특징으로 한다.In addition, the multimedia content search and browsing system of the present invention for achieving the above object is characterized in that the list of metadata files for the multimedia content can be stored in the user's browser. That is, since the mobile terminal has a small storage capacity, the metadata can be efficiently used by storing only the online location where the metadata file is located and the name of the metadata file without directly storing the metadata file based on the sharing. It is characterized by the presence.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일의 목록을 사용자의 브라우저에 저장하고, 브라우저는 사용자가 지정한 메타데이터 파일 목록에 있는 메타데이터들에 대한 변동이나 변화를 사용자에게 알려주거나 스스로 업데이트 하는 에이전트(Agent) 기능을 수행함을 특징으로 한다. 즉, 사용자가 지정한 메타데 이터 파일 목록에 있는 메타데이터들의 위치가 변경될 때 이를 반영함으로써, 메타데이터 파일 공유를 기반으로 하는 멀티미디어 콘텐츠의 검색이나 브라우징을 정확하게 수행할 수 있도록 함을 특징으로 한다.In addition, the multimedia content search and browsing system of the present invention for achieving the above object, stores a list of metadata files for the multimedia content in the user's browser, the browser metadata in the user specified metadata file list It is characterized by performing the agent function that informs the user of the change or change in the system or updates itself. In other words, when the location of the metadata in the metadata file list designated by the user is changed, it is reflected, so that it is possible to accurately search or browse multimedia contents based on metadata file sharing.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠에 대한 메타데이터 파일을 온라인 기반으로 공유하고, 메타데이터 파일에 파일 이름, 파일 크기, 콘텐츠 지문의 실제 콘텐츠 추적정보를 기술함으로써, 메타데이터가 참조하는 콘텐츠의 변동이나 변화를 업데이트할 수 있음을 특징으로 한다. 즉, 메타데이터 파일이 참조하는 콘텐츠의 위치변화 등으로 인하여 해당 멀티미디어 콘텐츠를 검색하지 못하게 되는 등의 문제점을 해결할 수 있음을 특징으로 한다.In addition, the multimedia content search and browsing system of the present invention for achieving the above object, share the metadata file for the multimedia content on an online basis, and the actual content tracking information of the file name, file size, content fingerprint in the metadata file By describing, the variation or change of the content referred to by the metadata can be updated. That is, it is possible to solve a problem such that the multimedia content cannot be searched due to the change of the position of the content referred to by the metadata file.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템은, 멀티미디어 콘텐츠의 데이터 베이스, 메타데이터를 생성하는 메타데이터 생성기, 상기 생성된 메타데이터의 데이터 베이스, 메타데이터를 이용한 해당 멀티미디어 콘텐츠의 검색이나 브라우징 지원을 위한 서버를 포함하는 멀티미디어 서비스 시스템과; 브라우저를 탑재하고 상기 멀티미디어 서버와 네트워크를 기반으로 온라인 상에 연결되어 상기 메타데이터 파일을 공유하며, 이를 이용한 온라인 멀티미디어 콘텐츠의 브라우징을 수행하는 사용자 단말수단; 을 포함하여 이루어지는 것을 특징으로 한다.In addition, the multimedia content search and browsing system of the present invention for achieving the above object, a database of multimedia content, a metadata generator for generating metadata, the database of the generated metadata, the corresponding multimedia content using the metadata A multimedia service system including a server for supporting search or browsing of a server; A user terminal means equipped with a browser and connected online via a network with the multimedia server to share the metadata file and to browse online multimedia contents using the same; Characterized in that comprises a.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템에서, 상기 사용자 단말수단은 메타데이터 파일의 목록을 저장하고, 이 메타데이터 파일 목록을 이용해서 해당 멀티미디어 콘텐츠의 브라우징을 수행함을 특징으로 한다.In addition, in the system for retrieving and browsing multimedia contents of the present invention for achieving the above object, the user terminal means stores a list of metadata files and performs browsing of the corresponding multimedia contents using the metadata file list. It is done.

또한 상기 목적을 달성하기 위한 본 발명의 멀티미디어 콘텐츠의 검색 및 브라우징 시스템에서, 상기 사용자 단말수단은 사용자가 보유한 멀티미디어 콘텐츠의 저장수단, 상기 사용자가 보유하고 있는 멀티미디어 콘텐츠의 메타데이터를 생성하는 메타데이터 생성기를 포함하고, 사용자가 보유한 멀티미디어 콘텐츠의 해당 메타데이터를 상기 온라인 기반으로 다른 사용자나 서버와 공유함을 특징으로 한다.In addition, in the multimedia content search and browsing system of the present invention for achieving the above object, the user terminal means is a storage means for storing the multimedia content owned by the user, a metadata generator for generating metadata of the multimedia content held by the user And the corresponding metadata of the multimedia content held by the user and shared with other users or servers on the online basis.

이하, 첨부된 도면을 참조하여 본 발명의 온라인-메타데이터 파일 공유 기반의 멀티미디어 콘텐츠 검색 및 브라우징 시스템의 실시예를 설명한다.Hereinafter, with reference to the accompanying drawings will be described an embodiment of an online-metadata file sharing based multimedia content search and browsing system of the present invention.

먼저, 도1은 오프라인 환경에서 메타데이터 파일 생성기와 브라우저의 기능을 정의한 내용을 요약하여 보여준다. 특히 도1의 경우는 오프라인 기반에서 MPEG7 메타데이터 생성기와 브라우저의 기능에 대해서 보여주고 있다. 도1에 나타낸 바와 같이 메타데이터 생성기/편집기(DG : Description Generator)는 멀티레벨의 요약 지원(Support multi-level summary), 주석 지원(Support annotation), 텍스트 타입의 기술 출력(Textural DDL description output), 2진 타입의 기술 출력(Binary description output), 기술 편집 지원(Support description Editing)이 가능하며, 브라우저(Browser)는 멀티 레벨 요약 브라우징(Multi-level summary browsing), 비디오 내의 주석 검색(Annotation search within a video), 주석 목록 검색(Listing existing annotation for the within-a-video search), 그리고 주석기반 검색(Annotation-based with respect to multiple videos)을 지원한다.First, FIG. 1 summarizes the contents of defining a metadata file generator and a browser in an offline environment. In particular, FIG. 1 illustrates the functions of the MPEG7 metadata generator and the browser on an offline basis. As shown in FIG. 1, the metadata generator / editor (DG: Description Generator) includes support multi-level summary, support annotation, textual DDL description output, Binary-type Binary description output, Support description Editing are available, and the browser is multi-level summary browsing, Annotation search within a video. video, listing existing annotation for the within-a-video search, and annotation-based with respect to multiple videos.

도2는 오프라인 기반의 MPEG7 메타데이터 생성기 및 브라우저의 구성을 보여준다. 도2에서 메타데이터 생성기는 멀티미디어 콘텐츠에 대해 MPEG7의 표준에 정의된 계층적 하이라이트 요약 기술(Hierachical Highlight Summary Description)을 이용하여 메타데이터를 텍스트 형태의 파일(Textural Description)과 2진 형태의 파일(Binary for MPEG7)을 생성하고 이러한 메타데이터 파일을 데이터 베이스에 저장하며, 브라우저에서는 메타데이터 파일 또는 데이터 베이스를 대상으로 멀티미디어 데이터에 대해서 계층적 하이라이트 브라우징을 할 수 있고 키워드를 이용하여 특정 하이라이트를 검색할 수 있다.Figure 2 shows the configuration of the offline-based MPEG7 metadata generator and browser. In FIG. 2, the metadata generator uses the hierarchical highlight summary description defined in the MPEG7 standard for multimedia content to convert metadata into a textual file and a binary file. for MPEG7) and store these metadata files in a database, and the browser can hierarchically highlight multimedia data or search for specific highlights using keywords. have.

도2에서 메타데이터 생성기(1)는 기술정보 생성을 위한 사용자 인터페이스(2), DOM 메모리(3), DDL 라이터(4), BiM 인코더(5), DDL 해석기(6), BiM 디코더(7)를 포함하고 있다. 도2에서 브라우저(8)는 DDL 해석기(9), BiM 디코더(10), DOM 메모리(11), 브라우저 사용자 인터페이스(12), 기술정보 변환기(13), 기술정보 데이터 베이스(14), 질의 인터페이스(15)를 포함하고 있다. In FIG. 2, the metadata generator 1 includes a user interface 2 for generating technical information, a DOM memory 3, a DDL writer 4, a BiM encoder 5, a DDL interpreter 6, and a BiM decoder 7. It includes. In FIG. 2, the browser 8 includes a DDL interpreter 9, a BiM decoder 10, a DOM memory 11, a browser user interface 12, a technical information converter 13, a technical information database 14, and a query interface. It includes (15).

사용자 인터페이스(2)는 기술정보 생성 시스템(1)과 사용자 사이의 인터페이스(DG UI: Description Generation User Interface)이다. DOM 메모리(3)는 'Document Object Model Memory'이고 사용자 인터페이스(2)와 시스템 사이의 데이터를 일시 저장하기 위한 인터페이스 환경을 제공한다. DDL 라이터(Description Definition Language Writer)(4)는 DOM 메모리(3)와 연결되어 멀티미디어 데이터에 대한 기술정보를 DDL 타입으로 변환하고 텍스트 DDL 기술 파일(Textural DDL Description File)(16)을 생성한다. BiM 인코더(Binary format of MPEG-7 Encoder)(5)는 상기 DOM 메모리(3)와 연결되어 멀티미디어 데이터에 대한 기술정보를 2진 포맷의 기술정보로 변환하고 해당 파일(Binary Description File)(17)을 생성한다.The user interface 2 is an interface between the technical information generation system 1 and the user (DG UI). The DOM memory 3 is a 'Document Object Model Memory' and provides an interface environment for temporarily storing data between the user interface 2 and the system. A description definition language writer 4 is connected to the DOM memory 3 to convert description information about multimedia data into a DDL type and to generate a textual DDL description file 16. A BiM encoder (Binary format of MPEG-7 Encoder) (5) is connected to the DOM memory (3) to convert the technical information on the multimedia data into a binary format of the technical information (Binary Description File) (17) Create

도2에 나타낸 브라우저(8)에서 DDL 해석기(9)는 입력된 DDL 파일(16)을 해석하여 DOM 메모리(11)에 저장한다. BiM 디코더(10)는 입력된 BiM 파일(17)을 디코딩하여 DOM 메모리(11)에 저장한다. DOM 메모리(11)에 저장된 해석된 DDL 파일이나 디코딩된 BiM 파일은 브라우저 사용자 인터페이스(12)에 의해서 브라우징된다. 한편, DOM 메모리(11)에 저장된 해석된 DDL 파일이나 디코딩된 BiM 파일은 기술정보 변환기(13)에 의해서 변환되어 기술정보 데이터 베이스(14)로 구축되고, 질의 인터페이스(15)는 상기 기술정보 데이터 베이스(14)와 브라우저 사용자 인터페이스(12) 사이에서 사용자 요구(질의)에 따른 브라우징이 이루어지도록 질의 정보의 처리와 검색 결과의 제공을 수행한다.In the browser 8 shown in Fig. 2, the DDL interpreter 9 interprets the input DDL file 16 and stores it in the DOM memory 11. The BiM decoder 10 decodes the input BiM file 17 and stores it in the DOM memory 11. The interpreted DDL file or decoded BiM file stored in the DOM memory 11 is browsed by the browser user interface 12. Meanwhile, the interpreted DDL file or the decoded BiM file stored in the DOM memory 11 is converted by the technical information converter 13 and constructed into the technical information database 14, and the query interface 15 is the technical information data. Processing of query information and provision of a search result are performed so that browsing according to user request (query) is performed between the base 14 and the browser user interface 12.

지금까지 설명한 도2의 메타데이터 생성기와 브라우저는 오프라인을 기반으로 하여 메타데이터의 생성, 검색 그리고 브라우징을 가능하게 한다. 그러나 이 경우에는 일반 사용자가 메타데이터를 이용하기 위해서는 콘텐츠를 포함하여 메타데이터 파일을 동시에 소유할 때에만 콘텐츠 검색과 브라우징을 할 수 있다는 제약이 있다. 이러한 제약 때문에 온라인에서 메타데이터 파일만을 이용한 멀티미디어 콘텐츠에 대한 검색과 브라우징이 요구되고 있으며, 또한 방대한 양의 콘텐츠를 보유하고 있는 콘텐츠 제공자뿐만 아니라 일반 사용자들이 소유하고 있는 메타데이터 파일에 대한 공유, 검색을 가능하게 하는 브라우저가 요구된다.The metadata generator and browser of FIG. 2 described so far enables the generation, search, and browsing of metadata on an offline basis. However, in this case, in order to use the metadata, there is a limitation that the user can search and browse the contents only when the metadata file including the contents is owned at the same time. Due to these limitations, the search and browsing of multimedia contents using only metadata files are required online, and the sharing and searching of metadata files owned by general users as well as content providers having a large amount of contents are required. A browser is required to enable it.

그러므로, 본 발명에서는 콘텐츠 제공자가 메타 데이터 파일만을 이용하여 콘텐츠의 광고나 아카이빙을 할 수 있도록 하고, 일반 사용자가 다양한 단말기를 통해 멀티미디어 콘텐츠에 대한 브라우징과 검색을 수행할 수 있도록 도3에 나타낸 바와 같이 네트워크 환경에서 온라인을 기반으로 하는 메타데이터 생성과 브라우징 시스템을 제안하였다.Therefore, in the present invention, as shown in FIG. 3, the content provider can advertise or archive content using only the metadata file, and the general user can browse and search for multimedia content through various terminals. In this paper, we propose an online metadata generation and browsing system.

네트워크(21)를 기반으로 하여 서버 시스템(22)과 사용자1(23), 사용자2(24), 사용자3(25),...,사용자N이 연결된다. 여기서 사용자들은 네트워크를 기반으로 하여 상호 연결되고 메타데이터 파일을 공유함으로써, 사용자가 곧 서버가 될 수도 있다.Based on the network 21, the server system 22 is connected to the user 1 (23), the user 2 (24), the user 3 (25), ..., user N. Here, users are interconnected on a network basis and share metadata files, so that users can be servers.

서버 시스템(22)은 콘텐츠 데이터 베이스(Contents DB)(26), 메타데이터 서버(Description Server)(27), 메타데이터 생성기(DG)(28), 메타데이터 데이터 베이스(Description DB)(29)를 포함한다. 사용자(23)는 국부 저장장치(23a)와 단말기(23b)를 포함하는데 여기서 국부 저장장치(23a)는 단말기(23b)에 내장될 수도 있고, 단말기(23b)는 메타데이터 생성기와 브라우저를 탑재하는 PC가 될 수 있다. 사용자(24) 또한 국부 저장장치(24a)와 단말기(24b)를 포함하는데 여기서 국부 저장장치(24a)는 단말기(24b)에 내장될 수도 있고, 단말기(24b)는 메타데이터 생성기와 브라우저를 탑재하는 PC가 될 수 있다. 사용자3(25)은 이동 단말기(25a)를 유선 혹은 무선 네트워크를 기반으로 연결할 수 있으며, 이동 단말기(25a)는 메타데이터 파일을 이용한 멀티미디어 콘텐츠의 검색과 브라우징을 위하여 브라우저를 탑재한다. 또한 상기 사용자 단말기에는 사용자가 소유하고 있는 멀티미디어 콘텐츠 에 대한 메타데이터를 생성할 수 있는 메타데이터 생성기를 탑재할 수도 있다.The server system 22 stores a contents database 26, a metadata server 27, a metadata generator (DG) 28, and a metadata database 29. Include. The user 23 includes a local storage 23a and a terminal 23b, wherein the local storage 23a may be embedded in the terminal 23b, and the terminal 23b may include a metadata generator and a browser. It can be a PC. The user 24 also includes a local storage 24a and a terminal 24b, where the local storage 24a may be embedded in the terminal 24b, and the terminal 24b includes a metadata generator and a browser. It can be a PC. The user 3 25 may connect the mobile terminal 25a based on a wired or wireless network, and the mobile terminal 25a may include a browser for searching and browsing multimedia content using metadata files. In addition, the user terminal may be equipped with a metadata generator that can generate metadata for the multimedia content owned by the user.

상기 기술한 메타데이터 파일(Description File)은 실제 데이터 추적정보, 데이터 관리정보, 데이터 색인정보, 실제 콘텐츠 링크 정보, 데이터 요약정보를 기술하며, 본 발명의 온라인 기반 멀티미디어 콘텐츠의 메타데이터 생성과 검색 및 브라우징 시스템에 따르면 상기 메타데이터 사용자가 메타데이터 파일만을 기반으로 하여 실제 콘텐츠를 소유하지 않더라도 콘텐츠에 대한 검색이나 브라우징을 수행할 수 있다. 이와 같은 메타데이터 파일은 크기가 실제 콘텐츠에 비해서 비교할 수 없을 만큼 작기 때문에 사용자는 다양한 단말기에서 손쉽게 콘텐츠에 대한 검색이나 브라우징을 수행할 수 있고, 콘텐츠 제공자 또한 효율적으로 콘텐츠에 대한 광고나 아카이빙을 할 수 있게 된다.The above-described metadata file describes actual data tracking information, data management information, data index information, actual content link information, and data summary information, and generates and retrieves metadata of the online-based multimedia content of the present invention. According to the browsing system, even if the metadata user does not own the actual content based only on the metadata file, the metadata user may search or browse the content. Since these metadata files are so small that they cannot be compared to actual content, users can easily search or browse the content on various terminals, and content providers can also efficiently advertise or archive content. Will be.

도4는 상기 메타데이터 생성기를 이용한 메타데이터 파일의 생성과 브라우징의 예를 보여주고 있다.4 shows an example of generating and browsing a metadata file using the metadata generator.

도4에 나타낸 바와 같이 메타데이터 즉, 멀티미디어 콘텐츠(MM Contents)를 기술하는 정보(Description File)는 실제 데이터 추적정보, 데이터 관리정보, 데이터 검색을 위한 색인정보, 실제 데이터 링크(Link) 정보, 데이터 요약 정보 등을 기술하고 있으며, 이는 콘텐트 공급자(Content Provider)용 메타데이터 생성기(Decription Generator)에 의해서 생성되고, 온라인을 기반으로 하여 사용자 단말기와 연결되어 업로드 또는 다운로드가 이루어지게 된다. 사용자 단말기의 경우 브라우저를 탑재함으로써 상기 메타데이터를 이용한 멀티미디어 콘텐츠의 브라우징이 이루어지게 된다.As shown in FIG. 4, metadata, that is, a description file describing multimedia content (MM Contents) includes actual data tracking information, data management information, index information for data retrieval, actual data link information, and data. Summary information is described, which is generated by a metadata generator for a content provider, and connected to a user terminal on an online basis to upload or download. In the case of a user terminal, a multimedia content is browsed using the metadata by mounting a browser.

도3 및 도4를 참조하여 네트워크 기반의 멀티미디어 콘텐츠 메타데이터 생성 및 검색 시스템의 동작을 설명한다.3 and 4, the operation of the network-based multimedia content metadata generation and retrieval system will be described.

앞서 설명한 콘텐츠 데이터 베이스(26)는 멀티미디어 데이터 베이스이고, 기술 데이터 베이스(29)는 메타데이터 파일 데이터 베이스이며, 메타데이터 생성기(DG)(28)에 의해서 생성, 편집된 메타데이터 파일들을 저장한다. 그리고 메타데이터 생성기(28)는 메타데이터를 생성하거나 편집하기 위한 것으로서, 예를 들면 MPEG7 표준에 적합한 메타데이터 파일을 생성한다. 메타데이터 서버(27)는 사용자(23,24,25)에게 메타데이터 생성기와 브라우저를 배포하며, 일반 사용자가 메타데이터 서버에 메타데이터 파일을 업로드와 다운로드할 수 있도록 지원하며, 또한 기술 데이터 베이스(29)에 있는 메타데이터 파일을 관리한다.The content database 26 described above is a multimedia database, the description database 29 is a metadata file database, and stores metadata files created and edited by the metadata generator (DG) 28. The metadata generator 28 is for generating or editing metadata, for example, generating a metadata file conforming to the MPEG7 standard. The metadata server 27 distributes metadata generators and browsers to users 23, 24, and 25, and enables end users to upload and download metadata files to the metadata server. Manage the metadata file in 29).

콘텐츠 제공자는 콘텐츠 데이터 베이스(26)에 있는 콘텐츠에 대해서 메타데이터 생성기(28)를 이용해서 메타 데이터를 생성하고 이를 기술 데이터 베이스(29)에 저장하며, 사용자는 단말기에 탑재된 브라우저를 이용해서 상기 컨텐츠 제공자가 제공하는 메타데이터 파일을 다운받거나 온라인을 이용할 수 있다. 또한 사용자 자신도 메타데이터 생성기를 탑재함으로써 자신의 로컬 디스크 등의 저장장치에 있는 콘텐츠에 대해서 메타데이터를 생성하거나 편집하여 메타데이터 서버(27)에 업로드할 수 있다. 또한 사용자는 상기 서버를 거치지 않고 다른 사용자가 공유를 허가한 메타데이터 파일에 대해 온라인 기반의 다운로드가 가능하고, 이를 메타데이터 목록에 저장하여 메타데이터를 이용한 멀티미디어 콘텐츠의 브라우징 및 검색을 수행할 수 있다.The content provider generates the metadata using the metadata generator 28 for the content in the content database 26 and stores it in the description database 29, and the user uses the browser mounted on the terminal. Metadata files provided by content providers can be downloaded or used online. In addition, the user himself can mount a metadata generator to create or edit metadata for content in a storage device such as his local disk and upload it to the metadata server 27. In addition, the user can download the metadata file that has been shared by another user without going through the server, and can store the data in the metadata list to browse and search the multimedia contents using the metadata. .

예를 들면, 사용자1(23)이 자신이 보유한 멀티미디어 콘텐츠에 대한 메타데이터 파일을 생성하고, 이를 네트워크(21)를 기반으로 공유하여, 사용자2(24) 또는 사용자3(25)이 서버(27)를 거치지 않고 상기 사용자1(23)이 공유를 허가한 해당 멀티미디어 콘텐츠에 대한 검색과 브라우징을, 사용자1이 생성한 메타데이터 파일을 이용해서 할 수 있는 것이다.For example, User 1 (23) creates a metadata file for the multimedia content he owns and shares it based on the network 21, so that User 2 (24) or User 3 (25) has a server (27). Without searching the user, the user 1 23 can search and browse the corresponding multimedia content using the metadata file generated by the user 1.

브라우저는 사용자 단말기에 탑재되며, 메타데이터 파일에 기술된 실제 데이터 추적정보를 이용해서 메타데이터 파일이 참조하는 해당 멀티미디어 콘텐츠의 링크 정보나 변경 내용들을 업데이트(update)하며, 또한 브라우저에서 사용자가 지정한 메타데이터 파일 목록에 메타데이터 파일의 위치를 검사하여 사용자에게 알려주거나 업데이트한다. 여기서 메타데이터 파일 목록은 다른 사용자나 메타데이터 서버에 있는 메타데이터 파일 목록이다. 메타데이터에서 콘텐츠 요약 정보는 MPEG7 표준에서 계층적 하일라이트 요약 기술(Hierarchical Highlight Summary Description)을 사용하고, 데이터 요약 정보는 콘텐츠의 줄거리 등의 전체적인 요약을 텍스트로 나타내며, 데이터 검색 색인 정보는 칼라 히스토그램 등의 MPEG7 표준에서 정의된 기술자(Descriptor) 등을 이용하여 기술하며, 데이터 관리 정보는 실제 메타 데이터 생성자에 권리를 부여하기 위한 생성자 정보를 기술한다.The browser is mounted on the user terminal and uses the actual data tracking information described in the metadata file to update the link information or the changes of the corresponding multimedia content referred to by the metadata file. Check the location of the metadata file in the list of data files to inform or update the user. Here, the metadata file list is a list of metadata files in another user or metadata server. In the metadata, the content summary information uses hierarchical highlight summary description in the MPEG7 standard. The data summary information indicates the overall summary such as the content of the content as text, and the data search index information indicates the color histogram. The descriptor is defined using a descriptor defined in the MPEG7 standard, and the data management information describes creator information for granting rights to the actual metadata creator.

지금까지 설명한 바와 같이 도3 및 도4에 나타낸 네트워크 기반의 메타데이터 생성 및 브라우징 시스템에 따르면, 콘텐츠 제공자와 일반 사용자가 콘텐츠가 아닌 메타데이터 파일의 공유만을 이용하여 콘텐츠와 메타데이터의 정보를 공유할 수 있기 때문에 일반 사용자는 다양한 단말기에서 온라인을 기반으로 하여 손쉽게 멀티미디어 콘텐츠에 대한 검색과 브라우징을 수행할 수 있게 된다. 또한 일반 사용자도 자신이 소유하고 있는 콘텐츠에 대해서 손쉽게 메타데이터를 생성하고 유포할 수 있게 된다.As described above, according to the network-based metadata generation and browsing system shown in Figs. As a result, general users can easily search and browse multimedia contents online based on various terminals. In addition, general users can easily create and distribute metadata about their own contents.

본 발명은 MPEG7 메타데이터 생성기 및 브라우저를 네트워크 환경으로 확장하였고, 이를 기반으로 계층적 요약 기술 정보를 포함하는 메타데이터 파일을 이용하여 온라인에서 사용자가 다양한 단말기를 이용한 멀티미디어 콘텐츠의 계층적 브라우징이나 텍스트 기반 검색을 할 수 있다.The present invention extends the MPEG7 metadata generator and browser to a network environment, and based on this, hierarchical browsing or text-based multimedia content using various terminals online by a user using a metadata file including hierarchical summary description information. You can search.

또한 본 발명은 온라인으로 메타데이터를 생성하거나 편집할 수 있도록 함으로써, 콘텐츠 제공자가 다양한 단말기를 이용하여 원격으로 메타데이터 파일을 수정하거나 편집할 수 있어서 손쉽게 메타데이터 관리를 할 수 있다.In addition, the present invention allows the metadata to be created or edited online, so that the content provider can modify or edit the metadata file remotely using various terminals, thereby easily managing the metadata.

또한 본 발명은 멀티미디어 콘텐츠의 공유가 아닌, 메타데이터 파일 공유를 기반으로 하여 사용자간에 멀티미디어 검색 및 브라우징을 할 수 있다. 따라서 사용자는 멀티미디어 콘텐츠를 소유하지 않고도 콘텐츠에 대한 검색이나 브라우징을 수행할 수 있으며, 메타데이터를 다운받지 않더라도 메타데이터를 사용할 수 있기 때문에 콘텐츠나 메타데이터를 직접 다운받아서 검색이나 브라우징할 때에 문제가 되는 불편함을 해소하고 시간을 단축할 수 있다.In addition, the present invention can perform multimedia search and browsing between users based on metadata file sharing, not sharing of multimedia content. Therefore, the user can search or browse the contents without owning the multimedia contents, and the metadata can be used even if the metadata is not downloaded. It can alleviate inconvenience and reduce time.

또한 본 발명은 네트워크 환경에서 콘텐츠에 대한 메타데이터 파일을 생성하고 사용자들은 메타데이터 파일만을 공유함으로써 많은 양의 콘텐츠에 대한 검색이나 브라우징을 효율적으로 수행할 수 있다. In addition, the present invention generates a metadata file for the content in the network environment, and users can efficiently search or browse a large amount of content by sharing only the metadata file.

또한 본 발명은 메타데이터 파일에 기술된 실제 데이터 추적정보를 이용하여 실제 콘텐츠의 링크 소실 등의 변동이나 변화가 발생하였을 때 그 내용을 자동으로 업데이트함으로써 메타데이터 파일의 유용성을 유지할 수 있다. 따라서 메타데이터 파일이 참조하는 실제 콘텐츠에 변동이나 변화가 있을 때 발생하는 문제를 방지할 수 있다.In addition, the present invention can maintain the usefulness of the metadata file by automatically updating the contents when the change or change of the link loss of the actual content occurs using the actual data tracking information described in the metadata file. Therefore, a problem that occurs when there is a change or change in the actual content referred to by the metadata file can be prevented.

또한 콘텐츠 제공자는 멀티미디어 콘텐츠에 대한 메타데이터를 생성하여 유포함으로써 콘텐츠 모두를 공유하는 방법에 비하여 보다 다양하고 효율적인 광고효과를 얻을 수 있으며, 사용자들에 의한 콘텐츠의 유포, 소실, 변경 등을 방지할 수 있다.In addition, by providing and distributing metadata about multimedia contents, a content provider can obtain more diverse and efficient advertising effects than the method of sharing all contents, and can prevent distribution, loss, and change of contents by users. have.

또한 사용자들은 이동 단말기와 같은 다양한 형태의 단말기에서 메타데이터만을 이용해서 멀티미디어 콘텐츠에 대한 검색 및 브라우징을 할 수 있고, 서버에 저장된 메타데이터 파일뿐만 아니라 다른 사용자가 소유하고 있는 메타데이터 파일에 대해서도 검색 및 브라우징을 할 수 있기 때문에 다양한 콘텐츠에 대한 검색과 브라우징이 가능하다.

In addition, users can search and browse multimedia contents using metadata only in various types of terminals such as mobile terminals, and search and browse metadata files owned by other users as well as metadata files stored on the server. You can browse and search and browse a variety of content.

Claims

Generating a metadata file for the multimedia content online;

Sharing a metadata file of the generated multimedia content by being connected to an online server through a network between a server, a user terminal, and the user terminal;

In the user terminal, based on the metadata file sharing, the metadata file list including the online location and the file name of the metadata file is stored, and the corresponding multimedia content is searched using the stored metadata file list. Or browsing the multimedia content, characterized in that the step of performing the browsing.

The method of claim 1, wherein the metadata file shared online is editable by the user terminal online.

The method of claim 1, wherein the metadata file shared online is shared between user terminals using IP.

delete

The method of claim 1, wherein the user terminal describes a file name, a file size, and actual content tracking information of a content fingerprint in a metadata file to update a change or change of content referred to by the metadata. And browsing method.

delete