KR101333064B1 - System for extracting multimedia contents descriptor and method therefor - Google Patents

System for extracting multimedia contents descriptor and method therefor Download PDF

Info

Publication number
KR101333064B1
KR101333064B1 KR1020090075392A KR20090075392A KR101333064B1 KR 101333064 B1 KR101333064 B1 KR 101333064B1 KR 1020090075392 A KR1020090075392 A KR 1020090075392A KR 20090075392 A KR20090075392 A KR 20090075392A KR 101333064 B1 KR101333064 B1 KR 101333064B1
Authority
KR
South Korea
Prior art keywords
multimedia
descriptor
information
multimedia content
web
Prior art date
Application number
KR1020090075392A
Other languages
Korean (ko)
Other versions
KR20110017760A (en
Inventor
유창동
김일영
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020090075392A priority Critical patent/KR101333064B1/en
Publication of KR20110017760A publication Critical patent/KR20110017760A/en
Application granted granted Critical
Publication of KR101333064B1 publication Critical patent/KR101333064B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/12—Payment architectures specially adapted for electronic shopping systems
    • G06Q20/123—Shopping for digital content
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Strategic Management (AREA)
  • Multimedia (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Accounting & Taxation (AREA)
  • Tourism & Hospitality (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 네트워크를 통해 사용자에게 저장공간을 제공하고, 사용자로부터 대량의 멀티미디어 콘텐츠를 수신하여 저장공간에 업로드하며, 멀티미디어 콘텐츠로부터 기술자(descriptor)를 추출하여 그 정보를 추가로 저장함으로써, 콘텐츠의 검색 및 정렬을 하도록 하는 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법에 관한 것이다.The present invention relates to a multimedia content descriptor extraction system and a method thereof, and more particularly, to provide a storage space to a user through a network, receive a large amount of multimedia content from the user, upload the multimedia content to the storage space, and The present invention relates to a multimedia content descriptor extraction system and method for retrieving and sorting content by extracting a descriptor) and storing the information additionally.

본 발명은 멀티미디어 콘텐츠 기술자 추출시스템에 있어서, 웹브라우저를 구비한 적어도 하나 이상의 사용자 단말기와, 사용자 인터페이스를 제공하기 위한 웹사이트를 운용하는 웹 서버와, 수신하는 멀티미디어 콘텐츠를 저장하여 분석하고 내재된 정보를 이용하여 기술자로 추출하며, 기술자를 해당 멀티미디어 콘텐츠에 추가입력하고, 기술자로 해당 멀티미디어 콘텐츠를 검색하여 웹 서버를 통해 사용자 단말기로 제공하는 멀티미디어 사전서비스 서버; 를 포함하는 것을 특징으로 한다.The present invention relates to a multimedia content descriptor extraction system, comprising: at least one or more user terminals including a web browser, a web server for operating a website for providing a user interface, and information for storing and analyzing received multimedia content; A multimedia pre-service server which extracts a technician to the technician, adds the technician to the multimedia contents, searches the multimedia contents with the technician, and provides the multimedia contents to the user terminal through a web server; And a control unit.

멀티미디어, 객체 인식, 기술자 Multimedia, object recognition, descriptor

Description

멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법{System for extracting multimedia contents descriptor and method therefor}System for extracting multimedia contents descriptor and method therefor}

본 발명은 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 네트워크를 통해 사용자에게 저장공간을 제공하고, 사용자로부터 대량의 멀티미디어 콘텐츠를 수신하여 저장공간에 업로드하며, 멀티미디어 콘텐츠로부터 기술자(descriptor)를 추출하여 그 정보를 추가로 저장함으로써, 콘텐츠의 검색 및 정렬을 하도록 하는 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법에 관한 것이다.The present invention relates to a multimedia content descriptor extraction system and a method thereof, and more particularly, to provide a storage space to a user through a network, receive a large amount of multimedia content from the user, upload the multimedia content to the storage space, and The present invention relates to a multimedia content descriptor extraction system and method for retrieving and sorting content by extracting a descriptor) and storing the information additionally.

오늘날 디지털 멀티미디어 디바이스의 사용이 일반화되고 있다. 이러한 디바이스는 디지털 메모리 장치에 콘텐츠를 저장하게 된다. 현대의 디지털 메모리 장치와 디지털 멀티미디어의 압축 기술의 발전은 사용자가 대량의 디지털 멀티미디어 콘텐츠를 손쉽게, 적은 비용으로 저장할 수 있게 하였고, 인터넷과 멀티미디어의 발전에 따라 멀티미디어 데이터의 양이 기하급수적으로 증가하고 있으며, 이에 따라 멀티미디어 데이터의 효율적인 관리 및 검색의 필요성이 대두되고 있다.Today, the use of digital multimedia devices is becoming common. Such a device will store content in a digital memory device. Advances in modern digital memory devices and digital multimedia compression technology have made it possible for users to store large amounts of digital multimedia contents easily and at low cost. The amount of multimedia data has increased exponentially with the development of the Internet and multimedia. Accordingly, there is a need for an efficient management and retrieval of multimedia data.

그러나 멀티미디어 데이터는 데이터 용량이 상당히 크고, 이미지, 비디오, 텍스트 등 다양한 타입의 정보가 혼합되어 있다는 특징 때문에 사용자가 멀티미디어 데이터베이스로부터 직접 멀티미디어 데이터를 검색하는데 어려운 문제점이 있다.However, multimedia data has a problem that it is difficult for a user to search the multimedia data directly from the multimedia database because of its large data capacity and various types of information such as images, videos, and texts.

따라서 멀티미디어 데이터를 효율적으로 검색하고 관리하는 기술이 요구되는데, 대부분 멀티미디어 콘텐츠의 기술자를 추출하고, 이를 기반으로 한 멀티미디어 콘텐츠 검색, 관리 및 공유 시스템을 제안하였다. 그러나 대부분의 시스템은 멀티미디어 콘텐츠의 생성 시간, 크기 등 파일 헤더로부터 얻을 수 있는 물리적인 정보만을 기술자로 사용함으로써, 이들만으로 멀티미디어 콘텐츠에 접근해야 한다는 문제점이 있다.Therefore, there is a need for a technology for efficiently searching and managing multimedia data. Most of them have extracted a technician of multimedia contents and proposed a system for searching, managing and sharing multimedia contents based on the same. However, most systems use only physical information obtained from file headers, such as creation time and size of multimedia content, as a descriptor, thereby requiring access to multimedia content only.

종래, 농구경기에 관한 멀티미디어 콘텐츠를 검색을 예를 들면, 물리적인 정보인 멀티미디어 콘텐츠의 생성 시간, 크기 등 파일 헤더를 기술자로 사용하여 검색할 뿐, 농구경기에 관한 멀티미디어 콘텐츠에 해당하는 다양한 객체정보(이미지, 비디오, 텍스트 등)와 이에 대한 상위 추상적인 개념의 의미적인 기술자에 대한 검색이 어려운 문제점이 있다.Conventionally, a multimedia content related to a basketball game is searched using, for example, a file header such as a creation time and a size of the multimedia content as physical information as a descriptor, and various object information corresponding to the multimedia content related to the basketball game. (Images, videos, texts, etc.) and the search for semantic descriptors of higher abstract concepts about them are difficult.

그리고 보다 상위의, 추상적인 개념의 기술자를 이용하는 시스템에서도 기술자를 추출하는 과정을 전적으로 사용자에게 맡기고 있어 대량의 사용자에게 많은 시간을 허비하게 됨에 따라 많은 사용자를 확보하지 못한다는 문제점이 있다.In addition, even in a system using a higher level abstraction descriptor, the process of extracting the descriptor is entirely left to the user, and thus a large number of users are wasted, thus failing to secure a large number of users.

본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 본 발명의 목적은 사용자가 입력한 멀티미디어 콘텐츠에 내재되어 있는 정보를 추출하여 기술자로 표현하기 위한 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법을 제공함에 있다.The present invention has been made in view of the above problems, and an object of the present invention is to provide a multimedia content descriptor extraction system and method for extracting and expressing information inherent in multimedia content input by a user as a descriptor. .

또한 본 발명의 다른 목적은 멀티미디어 콘텐츠에서 추출한 기술자를 토대로 멀티미디어 사전을 구축하는 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법을 제공함에도 있다.It is another object of the present invention to provide a multimedia content descriptor extraction system and method for constructing a multimedia dictionary based on a descriptor extracted from multimedia content.

그리고 본 발명의 다른 목적은 멀티미디어 콘텐츠에서 추출한 기술자를 기반으로 하여 추상적인 상위개념으로도 이종의 멀티미디어 콘텐츠를 검색하는 멀티미디어 콘텐츠 기술자 추출시스템 및 그 방법을 제공함에도 있다.Another object of the present invention is to provide a multimedia content descriptor extraction system and method for retrieving heterogeneous multimedia contents based on abstract descriptors extracted from multimedia contents.

본 발명은 멀티미디어 콘텐츠 기술자 추출시스템에 있어서, 웹브라우저를 구비한 적어도 하나 이상의 사용자 단말기; 상기 사용자 단말기로 사용자 인터페이스를 제공하기 위한 웹사이트를 운용하는 웹 서버; 및 상기 사용자 단말기로부터 사용자 인터페이스를 통해 수신하는 멀티미디어 콘텐츠를 저장하여 분석하고 내재된 정보를 이용하여 기술자로 추출하며, 상기 기술자를 해당 멀티미디어 콘텐츠에 추가입력하고, 상기 기술자로 해당 멀티미디어 콘텐츠를 검색하여 상기 웹 서버를 통해 상기 사용자 단말기로 제공하는 멀티미디어 사전서비스 서버; 를 포함하는 것을 특징으로 한다.The present invention provides a multimedia content descriptor extraction system, comprising: at least one user terminal having a web browser; A web server operating a web site for providing a user interface to the user terminal; And storing and analyzing multimedia contents received from the user terminal through a user interface, extracting the information into a technician using embedded information, adding the technician to the multimedia contents, and searching the multimedia contents with the technician. A multimedia pre-service server provided to the user terminal through a web server; And a control unit.

한편, 본 발명은 멀티미디어 콘텐츠 기술자 추출방법에 있어서, (a) 멀티미디어 사전서비스 서버가 유선 또는 무선 통신망을 통해 사용자 단말기로부터 입력받는 입력정보에 대한 데이터와 사용자 ID정보에 대한 데이터를 웹 서버를 통해 수신하는 단계; (b) 상기 사용자 단말기로부터 수신하는 멀티미디어 콘텐츠를 멀티미디어 사전으로 저장하는 단계; (c) 상기 수신하는 멀티미디어 콘텐츠를 분석하여 내재된 정보를 이용하여 기술자로 추출하는 단계; 및 (d) 상기 기술자를 상기 저장된 해당 멀티미디어 콘텐츠에 추가입력시켜 저장하는 단계;를 포함하는 것을 특징으로 한다.Meanwhile, the present invention provides a method for extracting a multimedia content descriptor, comprising: (a) a multimedia preservice server receiving data on input information and user ID information input from a user terminal through a wired or wireless communication network through a web server; Making; (b) storing the multimedia content received from the user terminal as a multimedia dictionary; (c) analyzing the received multimedia content and extracting the extracted multimedia content to a technician using embedded information; And (d) additionally storing the descriptor in the stored corresponding multimedia content.

상기와 같은 본 발명에 따르면, 멀티미디어 콘텐츠에 내재되어 있는 정보를 추출하여 기술자로 표현하는 효과가 있다.According to the present invention as described above, there is an effect of extracting the information inherent in the multimedia content to express it to the technician.

또한 멀티미디어 콘텐츠에서 추출한 기술자를 토대로 멀티미디어 데이터베이스를 구축하여 콘텐츠 기반 검색을 하도록 하는 효과가 있다.In addition, there is an effect of making a content-based search by building a multimedia database based on the descriptor extracted from the multimedia content.

또한 멀티미디어 콘텐츠에서 추출한 기술자를 기반으로 하여 추상적인 상위개념으로도 이종의 멀티미디어 콘텐츠를 검색하는 효과가 있다.In addition, based on the descriptor extracted from the multimedia contents, there is an effect of searching for heterogeneous multimedia contents with an abstract higher concept.

그리고 콘텐츠 기반 검색으로 관련 멀티미디어 콘텐츠를 쉽게 검색할 수 있으며 이를 네트워크 환경으로 확장하여 추출된 기술자로 검색, 관리 및 공유를 하도록 하는데 효과가 있다.In addition, content-based retrieval makes it easy to search for related multimedia contents, and it is effective to extend it to network environment to search, manage and share with extracted technicians.

본 발명의 구체적 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명 으로 더욱 명백해질 것이다. 이에 앞서 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.Specific features and advantages of the present invention will become more apparent from the following detailed description based on the accompanying drawings. It is to be noted that the detailed description of known functions and constructions related to the present invention is omitted when it is determined that the gist of the present invention may be unnecessarily blurred.

도 1은 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출시스템의 개략적인 구성도이다.1 is a schematic diagram of a multimedia content descriptor extraction system according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출시스템은 사용자 단말기(100), 웹 서버(200), 멀티미디어 사전서비스 서버(300), 결제서버(400)를 포함하여 구성된다.As shown in FIG. 1, the multimedia content descriptor extraction system according to an embodiment of the present invention includes a user terminal 100, a web server 200, a multimedia preservice server 300, and a payment server 400. It is composed.

-사용자 단말기(100)-User terminal 100

우선, 사용자 단말기(100)는 유선 또는 무선 통신망을 통해 적어도 하나 이상의 웹 서버(200)에 접속하여 사용자 인터페이스(UI) 제공을 위한 통신채널을 연결하는 것을 특징으로 하는 단말장치의 총칭으로서, 이를 위해 사용자 단말기는 통신망에 접속하기 위한 네트워크 통신 기능과, 적어도 하나 이상의 웹브라우저를 구비하여 이루어지는 것을 특징으로 하는 데스크탑 컴퓨터 또는 노트북 또는 휴대/이동이 가능한 휴대단말을 적어도 하나 이상을 포함하여 이루어지는 것이 바람직하다.First, the user terminal 100 is a generic term for a terminal device, which connects a communication channel for providing a user interface (UI) by connecting to at least one web server 200 through a wired or wireless communication network. The user terminal preferably includes at least one of a desktop computer or a laptop or a portable / mobile portable terminal, characterized in that it comprises a network communication function for connecting to a communication network, and at least one web browser.

여기서, 본 발명의 일실시예에 따른 사용자 단말기(100)는 TCP/IP(Transmission Control Protocol/Internet Protocol)기반 유선 통신망에 연결된 유선단말을 적어도 하나 이상 포함하여 이루어지는 것이 바람직하며, 상기 통신망에 구비된 HTTP(Hyper-Text Transfer Protocol)호환 프로토콜에 따라 웹 서 버(200)와 사용자 인터페이스 제공을 위한 통신채널을 연결하는 것이 바람직하다.Here, the user terminal 100 according to an embodiment of the present invention preferably comprises at least one wired terminal connected to a Transmission Control Protocol / Internet Protocol (TCP / IP) based wired communication network. It is preferable to connect the communication channel for providing the user interface with the web server 200 according to the Hyper-Text Transfer Protocol (HTTP) compatible protocol.

또한 CDMA(Code Division Multiple Access)/WCDMA(Wide-CDMA) 기반 무선 통신망, 또는 IEEE 802.11x 기반 무선 통신망, 또는 IEEE 802.16x 기반 무선 통신망 중 어느 하나의 무선 통신망에 연결된 무선단말을 적어도 하나 이상 포함하여 이루어지는 것이 바람직하며, 상기 통신망에 구비된 HTTP(Hyper-Text Transfer Protocol)호환 프로토콜에 따라 웹 서버(200)와 사용자 인터페이스 제공을 위한 통신채널을 연결하는 것이 바람직하다.And at least one wireless terminal connected to any one of a code division multiple access (CDMA) / wide-CDMA (WCDMA) based wireless communication network, an IEEE 802.11x based wireless communication network, or an IEEE 802.16x based wireless communication network. Preferably, it is preferable to connect a communication channel for providing a user interface with the web server 200 according to a Hyper-Text Transfer Protocol (HTTP) compatible protocol provided in the communication network.

그리고 웹 서버(200)와 사용자 인터페이스를 위한 통신채널이 연결된 후, 사용자 단말기는 통신채널을 통해 웹 서버(200)로부터 사용자 인터페이스를 위한 HTML(Hyper-Text Markup Language)호환 웹 문서(*.html, *.htm, *.asp, *.jsp, *.xml, *.wml 등)를 수신하는 것을 특징으로 하며, 웹 문서는 사용자 단말기(100)에 구비된 웹브라우저를 통해 출력된다.After the communication channel for the user interface with the web server 200 is connected, the user terminal is provided with a Hyper-Text Markup Language (HTML) compatible web document (* .html,) for the user interface from the web server 200 through the communication channel. * .htm, * .asp, * .jsp, * .xml, * .wml, etc.), and a web document is output through a web browser provided in the user terminal 100.

본 발명의 일실시예에 따른 사용자 단말기(100)는 웹 서버(200)에서 제공하는 적어도 하나 이상의 사용자 인터페이스를 출력하고, 상기 사용자 인터페이스를 통해 적어도 하나 이상의 정보를 입력 또는 선택하여 웹 서버(200)로 전송하기 위한 기능 구성(예컨대, 웹브라우저와 통신 기능 또는 웹 서버(200)와 통신하는 통신기능 등)이 구비되어 있는 것이 바람직하다.The user terminal 100 according to an embodiment of the present invention outputs at least one or more user interfaces provided by the web server 200, and inputs or selects at least one or more information through the user interface to the web server 200. It is preferable that a function configuration (for example, a communication function for communicating with a web browser or a communication function for communicating with the web server 200, etc.) is provided.

본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 사용자 단말기(100)가 사용자 인터페이스를 위한 통신채널을 연결하고, 웹 서버(200)로부터 사용자 인터페이스 제공을 위한 웹 문서를 수신하여 웹브라우저를 통해 출력하는 기 술적 특징을 기 숙지하고 있을 것이므로, 이에 대한 상세한 설명은 편의상 생략한다.Those skilled in the art to which the present invention pertains, the user terminal 100 connects the communication channel for the user interface, receives a web document for providing the user interface from the web server 200 to the web browser Since you will be familiar with the technical features to output through, a detailed description thereof will be omitted for convenience.

-웹 서버(200)-Web server (200)

또한 웹 서버(200)는 유선 또는 무선 통신망을 통해 사용자 단말기로 사용자 인터페이스(UI)를 제공하기 위한 웹사이트를 운용하는 기능을 수행한다.In addition, the web server 200 performs a function of operating a website for providing a user interface (UI) to a user terminal through a wired or wireless communication network.

이러한 기능을 수행하기 위하여, 웹 서버는 웹 운용DB(210), 웹페이지 운용부(220), 웹 인터페이스부(230), 정보 처리부(240)를 포함한다.In order to perform such a function, the web server includes a web operation DB 210, a web page operation unit 220, a web interface unit 230, and an information processing unit 240.

웹 운용DB(210)는 사용자 인터페이스 제공을 위한 적어도 하나 이상의 웹 문서를 생성하기 위한 적어도 하나 이상의 웹 문서 소스 및 디지털 컨텐츠를 포함하는 웹 운용 데이터를 저장한다. The web operation DB 210 stores web operation data including at least one web document source and digital content for generating at least one web document for providing a user interface.

여기서 웹 운용 데이터 중, 웹 문서 소스는 웹 서버(200)에서 사용자 인터페이스 제공을 위해 적어도 하나 이상의 사용자 단말기(100)로 제공하는 웹 문서를 생성하기 위한 HTML호환 태그와 각종 스크립트(Script)코드를 포함하여 이루어지는 것이 바람직하다.Here, the web document source of the web operation data includes an HTML compatible tag and various script codes for generating a web document provided by the web server 200 to the at least one user terminal 100 to provide a user interface. It is preferable to make it.

웹페이지 운용부(220)는 상기 웹 운용DB와 연계하여 사용자 인터페이스 제공을 위해 상기 사용자 단말기로 제공할 웹페이지에 대응하는 적어도 하나 이상의 HTML 호환 웹 문서를 생성한다. 여기서, 웹페이지 운용부(210)는 웹 운용DB와 연계하여 사용자 인터페이스 제공을 위해 사용자 단말로 제공할 웹페이지에 대응하는 적어도 하나 이상의 HTML 호환 웹 문서(예컨대, *.html, *.htm, *.asp, *.jsp, *.xml, *.wml 등)를 생성한다. The webpage manager 220 generates at least one HTML compatible web document corresponding to a webpage to be provided to the user terminal for providing a user interface in connection with the web manager DB. Here, the web page operation unit 210 is linked to the web operation DB at least one or more HTML-compatible web document corresponding to the web page to be provided to the user terminal to provide a user interface (eg, * .html, * .htm, * create .asp, * .jsp, * .xml, * .wml, etc.

본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 상기 웹 운용 데이터에 포함된 웹 문서 소스와 디지털 컨텐츠를 포함하여 사용자 인터페이스 제공을 위한 적어도 하나 이상의 웹 문서가 생성되는 기술적 특징을 기 숙지하고 있을 것이므로, 이에 대한 상세한 설명은 편의상 생략한다.Those skilled in the art to which the present invention pertains understand the technical features of generating at least one web document for providing a user interface including a web document source and digital content included in the web operation data. Since there will be, a detailed description thereof will be omitted for convenience.

웹 인터페이스부(230)는 상기 사용자 단말기와 연결된 통신망에 구비된 HTTP호환 프로토콜에 따라 사용자 인터페이스를 위해 사용자 단말기로 제공할 웹페이지에 대응하는 적어도 하나 이상의 HTML호환 웹문서를 제공하기 위한 통신 채널을 연결 및 유지하는 기능을 한다.The web interface unit 230 connects a communication channel for providing at least one HTML compatible web document corresponding to a web page to be provided to the user terminal for the user interface according to the HTTP compatible protocol provided in the communication network connected to the user terminal. And maintain.

정보 처리부(240)는 사용자 단말기로부터 웹 인터페이스부를 통해 수신한 상기 사용자에 따른 입력정보, 사용자 ID정보 및 비용정보에 대한 데이터를 상기 멀티미디어 사전서비스 서버 또는 상기 결제 서버로 전송하고, 상기 멀티미디어 사전서비스 서버로부터 수신하는 멀티미디어 콘텐츠를 상기 사용자 단말기로 제공하도록 처리한다.The information processor 240 transmits data on input information, user ID information, and cost information according to the user received from the user terminal through the web interface to the multimedia preservice server or the payment server, and the multimedia preservice server Process to provide the multimedia content received from the user terminal.

-멀티미디어 사전서비스 서버(300)-Multimedia pre-service server 300

멀티미디어 사전서비스 서버는 기술자 생성수단(310), 멀티미디어 사전(320), 검색수단(330), 제어수단(340)을 포함하여 구성된다.The multimedia dictionary service server includes a descriptor generation unit 310, a multimedia dictionary 320, a search unit 330, and a control unit 340.

도 2는 본 발명의 일실시예에 따른 기술자 생성수단을 나타내는 블록도이다.2 is a block diagram showing a descriptor generating means according to an embodiment of the present invention.

우선, 기술자 생성수단(310)은 사용자로부터 입력수단을 통해 수신하는 멀티미디어 콘텐츠를 분석하여 내재된 정보에 대한 기술자(descriptor)를 생성하는 구성요소이다.First, the descriptor generating unit 310 is a component that generates a descriptor for embedded information by analyzing multimedia content received through an input means from a user.

이러한 기능을 수행하는 기술자 생성수단(310)은, 도 2에 도시된 바와 같이, 헤더 인식부(311), 객체 인식부(312), 기술자 생성부(313)를 포함하여 구성된다.Descriptor generating means 310 for performing this function, as shown in Figure 2, comprises a header recognition unit 311, object recognition unit 312, descriptor generation unit 313.

여기서, 헤더 인식부(311)는 수신한 멀티미디어 콘텐츠의 파일헤더를 분석하여 그 결과 이미지, 오디오, 비디오 중 어느 하나인 것으로 판단하고, 멀티미디어 콘텐츠의 헤더정보를 인식한다. 여기서, 헤더정보는 수신한 멀티미디어 콘텐츠의 파일명, 파일생성날짜, 파일크기 등을 포함한다.Here, the header recognition unit 311 analyzes the file header of the received multimedia content, determines that the image header is one of an image, audio, and video, and recognizes header information of the multimedia content. Here, the header information includes a file name, file creation date, file size, and the like of the received multimedia content.

또한 객체 인식부(312)는 수신한 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹 등의 특정영역을 인식하고, 기설정된 데이터와 비교하여, 해당 텍스트 형태로 구성된 객체정보를 출력한다.In addition, the object recognizer 312 recognizes a specific region of the received multimedia content such as an object, a face, a background, a voice, a text, an action, an image tracking, and compares the preset data with object information configured in a text form. Outputs

이러한 기능을 수행하는 객체 인식부(312)는 사물 인식모듈(11), 얼굴 인식모듈(12), 배경 인식모듈(13), 음성 인식모듈(14), 문자 인식모듈(15), 행동 인식모듈(16), 인식DB(17)를 포함한다.The object recognition unit 312 performing this function includes the object recognition module 11, the face recognition module 12, the background recognition module 13, the voice recognition module 14, the character recognition module 15, and the behavior recognition module. (16), the recognition DB (17).

사물 인식모듈(11)은 수신한 멀티미디어 콘텐츠 중, 사물영역을 인식하고 인식DB(17)에 기설정된 데이터와 비교하여, 그 해당 사물의 일반 명칭을 텍스트 형태로 구성된 객체정보를 출력한다.The object recognition module 11 recognizes the object area among the received multimedia contents and compares the object area with data preset in the recognition DB 17, and outputs object information having the general name of the object in text form.

얼굴 인식모듈(12)은 수신한 멀티미디어 콘텐츠 중, 얼굴영역을 인식하고, 인식DB(17)에 기설정된 데이터와 비교하여, 그 해당자의 성명을 텍스트 형태로 구성된 객체정보를 출력한다.The face recognition module 12 recognizes a face region among the received multimedia contents, and compares the face region with the data set in the recognition DB 17, and outputs object information having the name of the person in text form.

배경 인식모듈(13)은 수신한 멀티미디어 콘텐츠 중, 배경영역을 인식하고, 인식DB(17)에 기설정된 데이터와 비교하여, 그 해당 배경의 명칭을 텍스트 형태로 구성된 객체정보를 출력한다.The background recognition module 13 recognizes a background area among the received multimedia contents, compares the background area with data preset in the recognition DB 17, and outputs object information having the name of the corresponding background in text form.

음성 인식모듈(14)은 수신한 멀티미디어 콘텐츠 중, 음성영역을 인식하고 인식DB(17)에 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력한다. 본 실시예에 따른 음성 인식모듈은 수신한 멀티미디어 콘텐츠 중, 음성영역 외에, 멜로디, 박자, 음악장르 인식을 할 수 있음은 물론이다.The speech recognition module 14 recognizes a speech region among the received multimedia contents and compares the speech region with the data set in the recognition DB 17 to output object information configured in a corresponding text form. The voice recognition module according to the present embodiment can recognize melody, beat, and music genre in addition to the voice region of the received multimedia content.

문자 인식모듈(15)은 수신한 멀티미디어 콘텐츠 중 문자영역을 인식하고, 인식DB(17)에 기설정된 사전이나 용어목록 등의 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력한다.The text recognition module 15 recognizes a text area among the received multimedia contents, and outputs object information configured in a corresponding text form by comparing with a data such as a dictionary or a term list preset in the recognition DB 17.

행동 인식모듈(16)은 수신한 멀티미디어 콘텐츠 중 행동영역을 인식하고, 인식DB(17)에 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력한다.The behavior recognition module 16 recognizes a behavior area among the received multimedia contents, and outputs object information configured in a corresponding text form by comparing with the data preset in the recognition DB 17.

인식DB(17)는 사물 인식모듈(11), 얼굴 인식모듈(12), 배경 인식모듈(13), 음성 인식모듈(14), 문자 인식모듈(15), 행동 인식모듈(16)의 각 인식결과물에 대한 데이터를 비교하기 위하여, 수신한 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹 등에 대한 특정정보와 그 특정정보에 대한 텍스트 명칭을 데이터베이스로 저장하여 미리 설정하는 기능을 수행한다. 여기서, 인식DB(17)는 인식 결과를 높이기 위하여 사전이나 자주 나타나는 용어 목록 등을 데이터베이스화한다.The recognition DB 17 recognizes each of the object recognition module 11, the face recognition module 12, the background recognition module 13, the voice recognition module 14, the character recognition module 15, and the behavior recognition module 16. In order to compare the data on the result, among the received multimedia contents, a function of storing and presetting specific information about an object, a face, a background, a voice, a text, an action, a video tracking, and a text name of the specific information as a database Do this. Here, the recognition DB 17 makes a dictionary or a list of frequently appearing terms, etc. in order to increase the recognition result.

그리고, 기술자 생성부(313)는 헤더 인식부로부터 멀티미디어 콘텐츠의 헤더정보를 수신하여 물리적 기술자(descriptor)로 추출하고, 객체 인식부로부터 멀티 미디어 콘텐츠의 객체정보를 수신하여 객체적 기술자로 추출하며, 추출된 객체적 기술자에서 의미적 기술자를 추론하기 위해 해당 텍스트 형태로 구성된 객체정보로부터, 어휘, 구문, 의미, 문법 등을 분석하여 해당 객체정보의 의미 언어를 생성하는 기능을 수행한다.The descriptor generator 313 receives the header information of the multimedia content from the header recognizer, extracts the header information into a physical descriptor, receives the object information of the multimedia content from the object recognizer, and extracts the object information into the object descriptor. To infer the semantic descriptor from the extracted object descriptor, it analyzes the vocabulary, syntax, meaning, grammar, etc. from the object information composed of the corresponding text form to generate the semantic language of the object information.

이러한 기능을 수행하는 기술자 생성부는 물리적 기술자 모듈(21), 객체적 기술자 모듈(22), 의미적 기술자 모듈(23)을 포함하여 구성된다.The descriptor generation unit performing this function is configured to include a physical descriptor module 21, an object descriptor module 22, a semantic descriptor module 23.

물리적 기술자 모듈(21)은 헤더 인식부로부터 멀티미디어 콘텐츠의 헤더정보를 수신하여 물리적 기술자(descriptor)로 추출한다.The physical descriptor module 21 receives the header information of the multimedia content from the header recognition unit and extracts the header information into a physical descriptor.

객체적 기술자 모듈(22)은 객체 인식부로부터 멀티미디어 콘텐츠의 객체정보를 수신하여 객체적 기술자로 추출한다.The object descriptor module 22 receives the object information of the multimedia content from the object recognition unit and extracts the object information into the object descriptor.

의미적 기술자 모듈(23)은 추출된 객체적 기술자에서 의미적 기술자를 추론하기 위해 해당 텍스트 형태로 구성된 객체정보로부터, 어휘, 구문, 의미, 문법 등을 분석하여 해당 객체정보의 의미 언어를 생성하고 이를 의미적 기술자로 추출하는 기능을 수행한다. The semantic descriptor module 23 generates a semantic language of the object information by analyzing the vocabulary, syntax, meaning, grammar, etc. from object information composed of the corresponding text form to infer the semantic descriptor from the extracted object descriptor. It extracts the semantic descriptor.

여기서, 본 실시예에 따른 의미적 기술자 모듈은 객체적 기술자인 객체정보에서 의미적 기술자를 추론하기 위해 자연어 처리를 사용함을 특징으로 한다. 이때, 자연어 처리라 함은 텍스트 형태로 구성된 객체정보의 어휘, 구문, 의미, 문법 등을 분석하여 객체정보의 해당 의미 언어를 생성하도록 한다.Here, the semantic descriptor module according to the present embodiment is characterized by using natural language processing to infer the semantic descriptor from the object information which is the object descriptor. At this time, natural language processing is to analyze the vocabulary, syntax, meaning, grammar, etc. of the object information in the form of text to generate the corresponding semantic language of the object information.

또한, 멀티미디어 사전(320)은 수신한 멀티미디어 콘텐츠를 저장하고, 기술자 생성수단(310)으로부터 생성 추출된 각 기술자를 해당 멀티미디어 콘텐츠에 추 가입력하여 매칭시켜 데이터베이스로 저장하는 기능을 수행한다.In addition, the multimedia dictionary 320 stores the received multimedia content, and matches each descriptor generated and extracted from the descriptor generating means 310 with additional subscription force to the corresponding multimedia content, and stores it in a database.

본 발명의 일실시예에 따른 멀티미디어 사전(320)은 수신한 멀티미디어 콘텐츠를 저장하고, 기술자 생성수단으로부터 생성 추출된 각 기술자를 해당 멀티미디어 콘텐츠에 추가입력하여 매칭시키는 것으로 설정하였지만, 본 발명이 이에 한정되는 것은 아니다.Multimedia dictionary 320 according to an embodiment of the present invention is set to store the received multimedia content, and to match each descriptor generated and extracted from the descriptor generating means to the corresponding multimedia content, but the present invention is limited thereto. It doesn't happen.

즉, 사용자로부터 입력수단을 통해 객체적 기술자에 해당하는 객체정보와 의미적 기술자에 해당하는 해당 객체정보의 의미에 대한 설명문을 수신하고, 기술자 생성수단으로 생성 추출된 물리적 기술자와, 사용자로부터 수신한 객체적 기술자와 의미적 기술자를 해당 멀티미디어 콘텐츠에 입력할 수 있음은 물론이다.That is, the user receives the object information corresponding to the object descriptor and the description of the meaning of the object information corresponding to the semantic descriptor from the user through the input means, and the physical descriptor generated and extracted by the descriptor generating means and received from the user. Of course, object descriptors and semantic descriptors can be input to the corresponding multimedia content.

또한, 검색수단(330)은 기술자 생성수단(310)로부터 생성 추출된 각 기술자를 이용하여 멀티미디어 사전에 저장된 멀티미디어 콘텐츠를 검색하는 구성요소이다.In addition, the search means 330 is a component for searching for multimedia content stored in the multimedia dictionary using each descriptor generated and extracted from the descriptor generating means 310.

이러한 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출시스템은 기술자에 해당되는 다수의 멀티미디어 콘텐츠 검색결과를 도출하고, 의미적 기술자로 인해 추상적인 상위개념으로도 이종의 멀티미디어 콘텐츠를 검색, 관리 및 공유할 수 있는 효과가 있다.The multimedia content descriptor extraction system according to an embodiment of the present invention derives a plurality of multimedia content search results corresponding to the descriptor, and searches, manages, and shares heterogeneous multimedia contents with abstract concepts due to the semantic descriptor. It can work.

그리고, 제어수단(340)은 검색수단의 검색결과를 웹 서버를 통해 사용자 단말기로 제공하도록 하는 제어신호를 출력한다.Then, the control means 340 outputs a control signal for providing the search results of the search means to the user terminal through the web server.

-결제서버(400)-Payment server (400)

결제 서버(400)는 웹 서버(200)에서 제공되는 결제처리 사용자 인터페이스를 통해 멀티미디어 사전 서비스비용을 결제처리하는 기능을 수행한다. 이러한 기능을 수행하는 결제 서버(400)는 결제처리부(410), 결제처리DB(420), 출력부(430)를 포함한다.The payment server 400 performs a function of processing a multimedia pre-service fee through a payment processing user interface provided by the web server 200. The payment server 400 performing such a function includes a payment processing unit 410, a payment processing DB 420, and an output unit 430.

결제처리부(410)는 소정의 통신망(유선 또는 무선 통신망)으로 웹 서버(200)와 연계하여, 웹 서버의 해당 사용자에 따른 사용자ID정보에 대한 데이터 및 비용정보에 대한 데이터를 수신하고, 결제수단으로 멀티미디어 사전서비스 비용을 결제처리한다.The payment processing unit 410 receives the data about the user ID information and the data about the cost information in connection with the web server 200 through a predetermined communication network (wired or wireless communication network), the payment means The payment of the multimedia pre-service fee.

참고적으로, 결제 처리는 소정의 금융시스템(미도시)과 연계하여, 기 지정된 계좌로 입금 처리하는 것을 포함하여 이루어질 수 있다.For reference, payment processing may be performed in connection with a predetermined financial system (not shown), including depositing a predetermined account.

결제처리DB(420)는 결제처리부(410)의 해당 사용자ID에 따른 결제처리 결과를 저장한다.The payment processing DB 420 stores the payment processing result according to the corresponding user ID of the payment processing unit 410.

출력부(430)는 결제처리DB(420)에 저장된 해당 사용자ID에 따른 결제처리 결과를 웹 서버(200)를 통해 사용자 단말기(100)로 출력한다.The output unit 430 outputs the payment processing result according to the corresponding user ID stored in the payment processing DB 420 to the user terminal 100 through the web server 200.

한편, 상술한 멀티미디어 콘텐츠 기술자 추출시스템을 이용한 방법(이하, "멀티미디어 콘텐츠 기술자 추출방법"이라 함)에 대하여 도 2를 참조하여 설명하면 다음과 같다.Meanwhile, a method using the above-described multimedia content descriptor extraction system (hereinafter, referred to as "multimedia content descriptor extraction method") will be described with reference to FIG. 2.

도 3은 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출방법의 전체 흐름도이다.3 is a flowchart illustrating a method of extracting a multimedia content descriptor according to an embodiment of the present invention.

도 3에 도시된 바와 같이, 멀티미디어 사전서비스 서버는 유선 또는 무선 통 신망을 통해 사용자 단말기로부터 입력받는 입력정보에 대한 데이터와 사용자 ID정보에 대한 데이터를 웹 서버를 통해 수신한다(S2).As shown in FIG. 3, the multimedia pre-service server receives data on input information and user ID information received from a user terminal through a wired or wireless communication network through a web server (S2).

다음으로, 멀티미디어 사전서비스 서버는 사용자 단말기로부터 수신하는 멀티미디어 콘텐츠를 멀티미디어 사전으로 저장한다(S4).Next, the multimedia dictionary service server stores the multimedia content received from the user terminal as a multimedia dictionary (S4).

다음으로, 멀티미디어 사전서비스 서버는 수신하는 멀티미디어 콘텐츠를 분석하여 내재된 정보를 이용하여 기술자로 추출한다(S6).Next, the multimedia pre-service server analyzes the received multimedia content and extracts it to the technician using the embedded information (S6).

다음으로, 멀티미디어 사전서비스 서버는 제 S6 단계의 기술자를 저장된 해당 멀티미디어 콘텐츠에 추가입력시켜 저장한다(S8).Next, the multimedia pre-service server additionally inputs and stores the descriptor of step S6 into the corresponding multimedia content (S8).

다음으로, 멀티미디어 사전서비스 서버는 수신한 멀티미디어 콘텐츠로부터 추출된 기술자를 이용하여 멀티미디어 사전에 기저장된 멀티미디어 콘텐츠를 검색하여 웹 서버를 통해 사용자 단말기로 제공한다(S10).Next, the multimedia pre-service server searches for the multimedia content pre-stored in the multimedia dictionary using a descriptor extracted from the received multimedia content and provides the same to the user terminal through the web server (S10).

그리고, 멀티미디어 사전서비스 서버는 웹 서버에서 제공되는 결제처리 사용자 인터페이스를 통해 멀티미디어 사전서비스 비용을 결제처리한다(S12).Then, the multimedia pre-service server processes the multimedia pre-service cost through the payment processing user interface provided by the web server (S12).

여기서, 본 실시예에 따른 제 S2 단계를 설명하면 다음과 같다.Here, the step S2 according to the present embodiment will be described.

먼저, 멀티미디어 사전서비스 서버는 제어명령 데이터를 웹 서버로 전송하고, 웹 서버가 웹 운용DB와 연계하여 사용자 인터페이스 제공을 위해 사용자 단말로 제공할 웹페이지에 해당하는 적어도 하나 이상의 HTML호환 웹 문서를 웹페이지 운용부를 통해 생성하도록 한다.First, the multimedia pre-service server transmits control command data to a web server, and webs at least one HTML compatible web document corresponding to a web page to be provided to a user terminal for providing a user interface in connection with a web operation DB. Create it through the page operator.

다음으로, 멀티미디어 사전서비스 서버는 웹 서버로 제어명령 데이터를 전송하여, 웹 서버가 생성한 웹 문서를 웹 인터페이스부를 통해 유선 또는 무선 통신망 으로 사용자 단말기에 전송하도록 한다.Next, the multimedia pre-service server transmits control command data to a web server, so that the web document generated by the web server is transmitted to the user terminal through a web interface unit through a wired or wireless communication network.

그리고 멀티미디어 사전서비스 서버는 상기 웹 서버로 제어명령 데이터를 전송하여, 상기 웹 서버가 사용자 단말기로부터 사용자 인터페이스를 통해 입력받는 입력정보와 해당 사용자에 따른 사용자 ID정보에 대한 데이터를 수신한다.The multimedia pre-service server transmits control command data to the web server to receive input information received by the web server from a user terminal through a user interface and user ID information according to the user.

도 4는 본 발명의 일실시예에 따른 기술자 추출과정의 상세 흐름도이다.4 is a detailed flowchart of a descriptor extraction process according to an embodiment of the present invention.

먼저, 멀티미디어 사전서비스 서버는 멀티미디어 콘텐츠의 파일헤더 정보를 분석하여 이미지, 오디오, 비디오 중 어느 하나인 것으로 판단하고, 멀티미디어 콘텐츠의 헤더정보를 인식한다(S22).First, the multimedia preservice server analyzes the file header information of the multimedia content, determines that the image is one of image, audio, and video, and recognizes header information of the multimedia content (S22).

다음으로, 멀티미디어 사전서비스 서버는 수신한 멀티미디어 콘텐츠를 분석하여 특정영역을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력한다(S24).Next, the multimedia pre-service server analyzes the received multimedia content, recognizes a specific region, and outputs object information configured in a corresponding text form by comparing with preset data (S24).

그리고, 멀티미디어 사전서비스 서버는 헤더정보를 물리적 기술자로 추출하고, 상기 객체정보를 객체적 기술자로 추출하며, 객체정보의 해당 의미 언어를 생성하여 의미적 기술자로 추출한다(S26).The multimedia preservice server extracts the header information into the physical descriptor, extracts the object information into the object descriptor, generates a corresponding semantic language of the object information, and extracts the semantic descriptor into the semantic descriptor (S26).

여기서, 제어수단은 제 (S22) 단계의 판단결과 이미지인 경우, 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 문자 중 어느 하나 이상을 포함하는 특정영역을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하도록 하는 것을 특징으로 한다.Herein, in the case where the determination result of the step S22 is an image, the control unit recognizes a specific region including at least one of an object, a face, a background, and a text among multimedia contents, and compares the predetermined data with a predetermined data form. Characterized in that to output the object information consisting of.

또한 제어수단은 제 (S22) 단계의 판단결과 오디오인 경우, 멀티미디어 콘텐츠의 음성을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객 체정보를 출력하도록 하는 것을 특징으로 한다.In addition, the control means, in the case of the audio as a result of the determination in step S22, recognizes the voice of the multimedia content, and compares the preset data to output object information configured in the form of a corresponding text.

그리고 제어수단은 제 (S22) 단계의 판단결과 비디오인 경우, 멀티미디어 콘텐츠의 사물, 얼굴, 배경, 음성, 문자, 행동 중 어느 하나 이상을 포함하는 특정영역을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하도록 하는 것을 특징으로 한다.In the case where the determination result of the step S22 is a video, the control unit recognizes a specific area including any one or more of an object, a face, a background, a voice, a text, and an action of the multimedia content, and compares the data with preset data. Characterized in that it outputs the object information in the form of a text.

상기와 같은 본 발명에 따르면, 멀티미디어 콘텐츠에 내재되어 있는 정보를 생성 추출하여 기술자로 표현하는 효과가 있다.According to the present invention as described above, there is an effect of generating and extracting the information inherent in the multimedia content to express the descriptor.

또한 멀티미디어 콘텐츠에서 추출한 기술자를 토대로 멀티미디어 데이터베이스를 구축하여 콘텐츠 기반 검색을 하도록 하는 효과가 있다.In addition, there is an effect of making a content-based search by building a multimedia database based on the descriptor extracted from the multimedia content.

또한 멀티미디어 콘텐츠에서 추출한 기술자를 기반으로 하여 추상적인 상위개념으로도 이종의 멀티미디어 콘텐츠를 검색하는 효과가 있다.In addition, based on the descriptor extracted from the multimedia contents, there is an effect of searching for heterogeneous multimedia contents with an abstract higher concept.

또한 콘텐츠 기반 검색으로 관련 멀티미디어 콘텐츠를 쉽게 검색할 수 있으며 이를 네트워크 환경으로 확장하여 추출된 기술자로 검색, 관리 및 공유를 하도록 하는데 효과가 있다.In addition, content-based retrieval makes it easy to search related multimedia contents, and it is effective to extend it to network environment to search, manage and share with extracted technicians.

그리고 이미지 또는 노래 멀티미디어 콘텐츠를 입력으로 그 노래를 부른 가수의 다른 노래라든지, 그 이미지에 존재하는 특정 인물이 들어간 다른 사진을 검색하는 효과가 있다.In addition, there is an effect of searching for another song of a singer who sang the song by inputting an image or song multimedia content or another picture containing a specific person present in the image.

이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것이 아니며, 기술적 사상의 범주를 일탈함이 없이 본 발명 에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서, 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.While the present invention has been particularly shown and described with reference to preferred embodiments thereof, it will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. It will be appreciated by those skilled in the art that numerous changes and modifications may be made without departing from the invention. Accordingly, all such appropriate modifications and changes, and equivalents thereof, should be regarded as within the scope of the present invention.

도 1은 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출시스템의 개략적인 구성도.1 is a schematic diagram of a multimedia content descriptor extraction system according to an embodiment of the present invention;

도 2는 본 발명의 일실시예에 따른 기술자 생성수단을 나타내는 블록도.Figure 2 is a block diagram showing a descriptor generating means according to an embodiment of the present invention.

도 3은 본 발명의 일실시예에 따른 멀티미디어 콘텐츠 기술자 추출방법의 전체 흐름도.3 is an overall flowchart of a method for extracting a multimedia content descriptor according to an embodiment of the present invention;

도 4는 본 발명의 일실시예에 따른 기술자 추출과정의 상세 흐름도.4 is a detailed flowchart of a technician extraction process according to an embodiment of the present invention.

**도면 부호에 대한 설명**** Description of Drawing Symbols **

100 : 사용자 단말기100: user terminal

200 : 웹 서버200: web server

300 : 멀티미디어 사전서비스 서버300: multimedia pre-service server

400 : 결제 서버400: Billing Server

Claims (18)

멀티미디어 콘텐츠 기술자 추출시스템에 있어서,In the multimedia content descriptor extraction system, 웹브라우저를 구비한 적어도 하나 이상의 사용자 단말기;At least one user terminal having a web browser; 상기 사용자 단말기로 사용자 인터페이스를 제공하기 위한 웹사이트를 운용하는 웹 서버;A web server operating a web site for providing a user interface to the user terminal; 상기 사용자 단말기로부터 사용자 인터페이스를 통해 수신하는 멀티미디어 콘텐츠의 헤더정보로부터 얻을 수 있는 물리적 정보인 물리적 기술자, 객체정보로부터 얻을 수 있는 객체적 기술자 및 의미적 기술자를 해당 멀티미디어 콘텐츠에 추가입력하고, 상기 추가입력된 물리적 기술자, 객체적 기술자 및 의미적 기술자에 해당하는 멀티미디어 콘텐츠를 상기 웹 서버를 통해 상기 사용자 단말기로 제공하는 멀티미디어 사전서비스 서버; 및 The physical descriptor obtained from the header information of the multimedia content received from the user terminal through the user interface, the physical descriptor obtained from the object information, the object descriptor obtained from the object information, and the semantic descriptor are additionally inputted to the corresponding multimedia content. A multimedia preservice server providing multimedia contents corresponding to the physical descriptor, the object descriptor, and the semantic descriptor to the user terminal through the web server; And 상기 웹 서버에서 제공되는 결제처리 사용자 인터페이스를 통해 멀티미디어 사전서비스 비용을 결제처리하는 결제서버;를 포함하며,And a payment server for processing a multimedia pre-service fee through a payment processing user interface provided by the web server. 상기 멀티미디어 사전서비스 서버는,The multimedia pre-service server, 입력수단을 통해 수신하는 멀티미디어 콘텐츠의 헤더정보를 헤더 인식부를 통해 분석하여 이미지, 오디오, 비디오 중 어느 하나인 것으로 판단하고, 멀티미디어 콘텐츠의 생성 시간, 크기를 포함하는 파일 헤더로부터 얻을 수 있는 물리적인 정보인 물리적 기술자와, 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역을 객체 인식부를 통해 인식하고, 멀티미디어 사전에 기설정된 데이터와 비교하여, 해당 기설정된 데이터의 텍스트 형태로 구성된 객체정보인 객체적 기술자와, 텍스트 형태로 구성된 객체정보로부터 어휘, 구문, 의미, 문법을 분석한 의미 언어정보를 의미적 기술자로 추출하는 기술자 생성부로 구성되는 기술자 생성수단;The header information of the multimedia content received through the input means is analyzed by the header recognition unit to determine whether the image is one of audio, video, and physical information that can be obtained from the file header including the generation time and size of the multimedia content. A physical descriptor and a multimedia form, the object, the face, the background, the voice, the character, the action, and the area of the image tracking are recognized by the object recognition unit, and compared with the data preset in the multimedia, the text form of the preset data. Descriptor generating means comprising: a descriptor generating unit for extracting semantic language information obtained by analyzing a vocabulary, syntax, meaning, and grammar from an object descriptor composed of object information and an object information composed of text; 상기 사용자 단말기로부터 수신한 상기 사용자에 따른 멀티미디어 콘텐츠를 저장하고, 상기 기술자 생성수단의 각 기술자를 해당 멀티미디어 콘텐츠에 추가입력하여 매칭시켜 데이터베이스로 저장하는 멀티미디어 사전;A multimedia dictionary which stores multimedia contents according to the user received from the user terminal, adds and matches each descriptor of the descriptor generating means to the corresponding multimedia contents, and stores the multimedia contents in a database; 상기 기술자 생성수단의 각 기술자를 이용하여 상기 멀티미디어 사전에 저장된 멀티미디어 콘텐츠를 검색하는 검색수단; 및Retrieving means for retrieving the multimedia contents stored in the multimedia dictionary by using each descriptor of the descriptor generating means; And 상기 각 기술자에 해당하는 다수의 멀티미디어 콘텐츠 검색결과를 도출하고, 상기 객체정보로부터 어휘, 구문, 의미, 문법을 분석한 의미 언어정보를 의미적 기술자인 추상적인 상위개념으로 이종의 멀티미디어 콘텐츠 검색결과를 상기 웹 서버를 통해 상기 사용자 단말기로 제공하도록 하는 제어신호를 출력하는 제어수단; 을 포함하며,Deriving a plurality of multimedia content search results corresponding to each of the descriptors, and analyzing the vocabulary, syntax, meaning, and grammar from the object information. Control means for outputting a control signal for providing to the user terminal through the web server; / RTI > 상기 멀티미디어 사전서비스 서버는,The multimedia pre-service server, 상기 수신한 멀티미디어 콘텐츠 중, 사물영역을 인식하고 인식DB에 기설정된 데이터와 비교하여, 그 해당 사물의 일반 명칭을 텍스트 형태로 구성된 객체정보를 출력하는 사물 인식모듈;A thing recognition module that recognizes an object area among the received multimedia contents and compares the object area with data preset in a recognition DB, and outputs object information having a general name of the object in text form; 상기 수신한 멀티미디어 콘텐츠 중, 배경영역을 인식하고, 인식DB에 기설정된 데이터와 비교하여, 그 해당 배경의 명칭을 텍스트 형태로 구성된 객체정보를 출력하는 배경 인식모듈; A background recognition module for recognizing a background area among the received multimedia contents and comparing the data set in the recognition DB to output object information having the name of the background in text form; 상기 각 인식결과를 비교하기 위하여, 수신한 멀티미디어 콘텐츠 중, 특정정보에 대한 텍스트 정보를 데이터베이스로 저장하여 미리 설정된 인식DB; A recognition DB set in advance by storing text information of specific information in the received multimedia content as a database in order to compare the recognition results; 상기 수신한 멀티미디어 콘텐츠 중, 얼굴영역을 인식하고, 상기 인식DB에 기설정된 데이터와 비교하여, 그 해당자의 성명을 텍스트 형태로 구성된 객체정보를 출력하는 얼굴 인식모듈;A face recognition module that recognizes a face region among the received multimedia contents and compares the name of the person with the data preset in the recognition DB and outputs object information composed of a text form of the corresponding person; 상기 수신한 멀티미디어 콘텐츠 중, 음성영역을 인식하고 인식DB에 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하는 음성 인식모듈;A voice recognition module that recognizes a voice region among the received multimedia contents and outputs object information configured in a corresponding text form by comparing with a data set in a recognition DB; 상기 수신한 멀티미디어 콘텐츠 중 문자영역을 인식하고, 인식DB에 기설정된 사전이나 용어목록 등의 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하는 문자 인식모듈; 및A text recognition module for recognizing a text area of the received multimedia content and outputting object information in a text form by comparing with a data such as a dictionary or a term list preset in a recognition DB; And 상기 수신한 멀티미디어 콘텐츠 중 행동영역을 인식하고, 인식DB에 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하는 행동 인식모듈; 을 더 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출시스템.A behavior recognition module for recognizing a behavior region among the received multimedia contents and outputting object information configured in a corresponding text form by comparing with data preset in a recognition DB; Multimedia content descriptor extraction system further comprises. 삭제delete 제 1 항에 있어서,The method of claim 1, 상기 사용자 단말기는,The user terminal comprises: 상기 웹 서버에 유선 또는 무선 통신망을 통해 접속하여 사용자 인터페이스 제공을 위한 통신채널을 연결하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출시스템.And a communication channel for providing a user interface by accessing the web server through a wired or wireless communication network. 제 1 항에 있어서,The method of claim 1, 상기 결제 서버는,The payment server, 상기 웹 서버와 연계하여, 상기 웹 서버의 해당 사용자에 따른 사용자ID정보에 대한 데이터 및 비용정보에 대한 데이터를 수신하고, 결제수단으로 멀티미디어 사전서비스 비용을 결제처리하는 결제처리부;A payment processing unit which receives the data regarding the user ID information and the cost information according to the corresponding user of the web server, and processes the multimedia pre-service fee as a payment means in connection with the web server; 상기 결제처리부의 해당 사용자ID에 따른 결제처리 결과를 저장하는 결제처리DB; 및A payment processing DB for storing a payment processing result according to the corresponding user ID of the payment processing unit; And 상기 결제처리DB에 저장된 해당 사용자ID에 따른 결제처리 결과를 상기 웹 서버를 통해 사용자 단말기로 출력하도록 하는 출력부; 를 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출시스템.An output unit for outputting a payment processing result according to the corresponding user ID stored in the payment processing DB to a user terminal through the web server; Multimedia content descriptor extraction system comprising a. 제 1 항에 있어서,The method of claim 1, 상기 웹 서버는,The web server, 사용자 인터페이스 제공을 위한 적어도 하나 이상의 웹 문서를 생성하기 위한 적어도 하나 이상의 웹 문서 소스 및 디지털 컨텐츠를 포함하는 웹 운용 데이터를 저장하는 웹 운용DB;A web operation DB for storing web operation data including at least one web document source and digital content for generating at least one web document for providing a user interface; 상기 웹 운용DB와 연계하여 사용자 인터페이스 제공을 위해 상기 사용자 단말기로 제공할 웹페이지에 대응하는 적어도 하나 이상의 HTML 호환 웹 문서를 생성하는 웹페이지 운용부;A web page operation unit generating at least one HTML compatible web document corresponding to a web page to be provided to the user terminal for providing a user interface in connection with the web operation DB; 상기 사용자 단말기와 연결된 통신망에 구비된 HTTP호환 프로토콜에 따라 사용자 인터페이스를 위해 사용자 단말기로 제공할 웹페이지에 대응하는 적어도 하나 이상의 HTML호환 웹문서를 제공하기 위한 통신 채널을 연결 및 유지하는 웹 인터페이스부; 및A web interface unit for connecting and maintaining a communication channel for providing at least one HTML compatible web document corresponding to a web page to be provided to a user terminal for a user interface according to an HTTP compatible protocol provided in a communication network connected to the user terminal; And 상기 사용자 단말기로부터 웹 인터페이스부를 통해 수신한 상기 사용자에 따른 입력정보, 사용자 ID정보 및 비용정보에 대한 데이터를 상기 멀티미디어 사전서비스 서버 또는 결제 서버로 전송하고, 상기 멀티미디어 사전서비스 서버로부터 수신하는 멀티미디어 콘텐츠를 상기 사용자 단말기로 제공하도록 처리하는 정보 처리부; 를 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출시스템.Transmitting data on the input information, user ID information and cost information according to the user received from the user terminal through the web interface to the multimedia pre-service server or payment server, and receives the multimedia content received from the multimedia pre-service server An information processing unit for processing to provide to the user terminal; Multimedia content descriptor extraction system comprising a. 삭제delete 삭제delete 제 1 항에 있어서,The method of claim 1, 상기 멀티미디어 사전서비스 서버는,The multimedia pre-service server, 상기 헤더 인식부로부터 멀티미디어 콘텐츠의 헤더정보를 수신하고, 파일헤더로부터 얻을 수 있는 멀티미디어 콘텐츠의 생성 시간, 크기를 포함하는 물리적인 정보를 물리적 기술자로 추출하는 물리적 기술자 모듈;A physical descriptor module that receives header information of multimedia content from the header recognizer and extracts physical information including a generation time and a size of the multimedia content obtained from a file header as a physical descriptor; 상기 객체 인식부로부터 상기 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역에 대한 텍스트 형태로 기설정된 데이터와 비교하여 인식결과에 해당하는 텍스트 형태로 구성된 객체정보를 객체적 기술자로 추출하는 객체적 기술자 모듈; 및The object recognition unit compares preset data in text form with respect to the area of the object, face, background, voice, text, behavior, and image tracking in the multimedia content, and compares the object information in the form of text corresponding to the recognition result with the object. An object descriptor module for extracting an enemy descriptor; And 상기 객체적 기술자의 객체정보로부터, 해당 텍스트의 어휘, 구문, 의미, 문법을 분석한 의미 언어정보를 의미적 기술자로 추출하는 의미적 기술자 모듈; 을 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출시스템.A semantic descriptor module for extracting semantic language information obtained by analyzing the vocabulary, syntax, meaning, and grammar of the corresponding text from the object information of the object descriptor as a semantic descriptor; Multimedia content descriptor extraction system comprising a. 삭제delete 삭제delete 멀티미디어 콘텐츠 기술자 추출방법에 있어서,In the multimedia content descriptor extraction method, (a) 멀티미디어 사전서비스 서버가 유선 또는 무선 통신망을 통해 사용자 단말기로부터 입력받는 입력정보에 대한 데이터와 사용자 ID정보에 대한 데이터를 웹 서버를 통해 수신하는 단계;(a) receiving, by the multimedia pre-service server, data on input information and user ID information received from a user terminal through a wired or wireless communication network through a web server; (b) 상기 사용자 단말기로부터 수신하는 멀티미디어 콘텐츠를 멀티미디어 사전으로 저장하는 단계;(b) storing the multimedia content received from the user terminal as a multimedia dictionary; (c) 상기 수신하는 멀티미디어 콘텐츠의 헤더정보를 인식하여 멀티미디어 콘텐츠의 생성 시간, 크기를 포함하는 파일 헤더로부터 얻을 수 있는 물리적인 정보를 물리적 기술자로 추출하고, 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역을 인식하고, 인식결과를 비교하기 위하여 상기 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역에 대한 텍스트 형태로 멀티미디어 사전에 기설정된 데이터와 비교하여, 해당 텍스트 형태로 구성된 기설정된 데이터인 객체정보를 객체적 기술자로 추출하며, 해당 텍스트 형태로 구성된 객체정보로부터 어휘, 구문, 의미, 문법을 분석한 해당 객체정보의 의미 언어정보를 의미적 기술자로 추출하는 단계;(c) recognizing the header information of the received multimedia content, extracting physical information obtained from the file header including the generation time and size of the multimedia content as a physical descriptor, and among the multimedia content, objects, faces, backgrounds, In order to recognize the areas of voice, text, behavior, and video tracking, and to compare the recognition results, the multimedia dictionary is pre-written in the form of texts of the objects, faces, background, voice, text, behavior, and video tracking. The object information, which is preset data composed of the corresponding text form, is extracted with the object descriptor by comparing with the set data. Extracting to a semantic descriptor; (d) 사용자 단말기로부터 수신한 상기 사용자에 따른 멀티미디어 콘텐츠를 저장하고, 상기 각 기술자를 상기 저장된 해당 멀티미디어 콘텐츠에 추가입력하여 매칭시켜 데이터베이스로 저장하는 단계; (d) storing the multimedia contents according to the user received from the user terminal, and adding and matching the respective technicians to the stored corresponding multimedia contents and storing them in a database; (e) 상기 각 기술자에 해당하는 다수의 멀티미디어 콘텐츠 검색결과를 도출하고, 상기 객체정보로부터 어휘, 구문, 의미, 문법을 분석한 의미 언어정보를 의미적 기술자인 추상적인 상위개념으로 이종의 멀티미디어 콘텐츠 검색결과를 상기 웹 서버를 통해 상기 사용자 단말기로 제공하는 단계; 및(e) Deriving a plurality of multimedia content search results corresponding to each descriptor, and heterogeneous multimedia contents with abstract higher concepts as semantic descriptors using semantic language information obtained by analyzing vocabulary, syntax, meaning, and grammar from the object information. Providing a search result to the user terminal through the web server; And (f) 상기 웹 서버에서 제공되는 결제처리 사용자 인터페이스를 통해 멀티미디어 사전서비스 비용을 결제처리하는 단계; 를 포함하며,(f) processing a multimedia preservice fee through a payment processing user interface provided by the web server; / RTI > 상기 제 (c) 단계는,In step (c), (c-1) 상기 수신한 멀티미디어 콘텐츠의 파일헤더 정보를 분석하여 이미지, 오디오, 비디오 중 어느 하나인 것으로 판단하는 단계;(c-1) analyzing file header information of the received multimedia content and determining that the file is one of an image, audio, and video; (c-2) 상기 멀티미디어 콘텐츠의 헤더정보를 이용하여 이미지, 오디오, 비디오 중 어느 하나인 것으로 판단하는 단계;(c-2) determining that the image is one of an image, audio, and video using header information of the multimedia content; (c-3) 상기 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역을 인식하고, 상기 기설정된 데이터와 비교하여 상기 멀티미디어 콘텐츠 중, 사물, 얼굴, 배경, 음성, 문자, 행동, 영상 트래킹의 영역에 대한 텍스트 형태로 구성된 기설정된 데이터를 객체정보로 출력하는 단계; 및(c-3) Recognizing the area of the object, the face, the background, the voice, the text, the action, the image tracking among the multimedia content, and comparing the preset data with the object, the face, the background, the voice, Outputting, as object information, predetermined data composed of text, an action, and a text form of an area of image tracking; And (c-4) 상기 헤더정보를 물리적 기술자로 추출하고, 상기 객체정보를 객체적 기술자로 추출하며, 상기 텍스트 형태로 구성된 객체정보로부터, 어휘, 구문, 의미, 문법을 분석한 해당 객체정보의 의미 언어정보를 의미적 기술자로 추출하는 단계; 를 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출방법.(c-4) The header information is extracted as a physical descriptor, the object information is extracted as an object descriptor, and the meaning of the corresponding object information obtained by analyzing the vocabulary, syntax, meaning, and grammar from the object information configured in the text form. Extracting language information into a semantic descriptor; Multimedia content descriptor extraction method comprising a. 삭제delete 삭제delete 제 11 항에 있어서,The method of claim 11, 상기 제 (a) 단계는,Step (a) is, (a-1) 상기 멀티미디어 사전서비스 서버가 제어명령 데이터를 웹 서버로 전송하여, 상기 웹 서버가 웹 운용DB와 연계하여 사용자 인터페이스 제공을 위해 사용자 단말로 제공할 웹페이지에 해당하는 적어도 하나 이상의 HTML호환 웹 문서를 웹페이지 운용부를 통해 생성하도록 하는 단계;(a-1) the multimedia pre-service server transmits control command data to a web server so that the web server provides at least one HTML corresponding to a web page to be provided to a user terminal for providing a user interface in connection with a web operation DB; Generating a compatible web document through a webpage manager; (a-2) 상기 멀티미디어 사전서비스 서버가 상기 웹 서버로 제어명령 데이터를 전송하여, 상기 웹 서버가 생성한 웹 문서를 웹 인터페이스부를 통해 유선 또는 무선 통신망으로 사용자 단말기에 전송하도록 하는 단계; 및(a-2) the multimedia pre-service server transmitting control command data to the web server to transmit the web document generated by the web server to the user terminal through a web interface to a wired or wireless communication network; And (a-3) 상기 멀티미디어 사전서비스 서버가 상기 웹 서버로 제어명령 데이터를 전송하여, 상기 웹 서버가 사용자 단말기로부터 사용자 인터페이스를 통해 입력받는 입력정보와 해당 사용자에 따른 사용자 ID정보에 대한 데이터를 수신하는 단계; 를 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출방법.(a-3) The multimedia pre-service server transmits control command data to the web server so that the web server receives input information received from a user terminal through a user interface and user ID information according to the user. Doing; Multimedia content descriptor extraction method comprising a. 삭제delete 제 11 항에 있어서,The method of claim 11, 상기 제 (c-3) 단계는,The (c-3) step, 상기 제 (c-1) 단계의 판단결과 이미지인 경우, 상기 멀티미디어 콘텐츠의 사물, 얼굴, 배경, 문자 중 어느 하나의 영역을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하는 단계인 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출방법.In the case of the determination result image of the step (c-1), any one of an object, a face, a background, and a character of the multimedia content is recognized, and the object information configured in the text form is output by comparing with the preset data. Multimedia content descriptor extraction method characterized in that the step of. 제 11 항에 있어서,The method of claim 11, 상기 제 (c-3) 단계는,The (c-3) step, 상기 제 (c-1) 단계의 판단결과 오디오인 경우, 상기 멀티미디어 콘텐츠의 음성을 인식하고, 기설정된 데이터와 비교하여 해당 텍스트 형태로 구성된 객체정보를 출력하는 단계인 것을 특징으로 하는 멀티미디어 콘텐츠 기술자 추출방법.In the case of the determination result of the step (c-1), in the case of the audio, the multimedia content descriptor extraction is performed by recognizing the voice of the multimedia content and outputting object information composed of a corresponding text form by comparing with the preset data. Way. 삭제delete
KR1020090075392A 2009-08-14 2009-08-14 System for extracting multimedia contents descriptor and method therefor KR101333064B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090075392A KR101333064B1 (en) 2009-08-14 2009-08-14 System for extracting multimedia contents descriptor and method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090075392A KR101333064B1 (en) 2009-08-14 2009-08-14 System for extracting multimedia contents descriptor and method therefor

Publications (2)

Publication Number Publication Date
KR20110017760A KR20110017760A (en) 2011-02-22
KR101333064B1 true KR101333064B1 (en) 2013-11-27

Family

ID=43775696

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090075392A KR101333064B1 (en) 2009-08-14 2009-08-14 System for extracting multimedia contents descriptor and method therefor

Country Status (1)

Country Link
KR (1) KR101333064B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210083148A (en) 2019-12-26 2021-07-06 한양대학교 에리카산학협력단 System and method for constructing a digital forensics database using video image recognition

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101268452B1 (en) * 2011-03-30 2013-06-04 전자부품연구원 A method for transmitting and receiving data which describe virtual world, and an apparatus thereof
KR20160014463A (en) 2014-07-29 2016-02-11 삼성전자주식회사 Server, providing metheod of server, display apparatus, controlling metheod of display apparatus and informatino providing system
KR102376201B1 (en) * 2017-04-04 2022-03-18 한국전자통신연구원 System and method for generating multimedia knowledge base

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020006970A (en) * 2000-07-14 2002-01-26 구자홍 Simultsneous recording and playback apparatus with indexing/searching/browsing functionality
KR20060077988A (en) * 2004-12-30 2006-07-05 삼성전자주식회사 System and method for information providing service through retrieving of context in multimedia communication system
KR20090026942A (en) * 2007-09-11 2009-03-16 삼성전자주식회사 Method and apparatus for recording multimedia data by automatically generating/updating metadata

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020006970A (en) * 2000-07-14 2002-01-26 구자홍 Simultsneous recording and playback apparatus with indexing/searching/browsing functionality
KR20060077988A (en) * 2004-12-30 2006-07-05 삼성전자주식회사 System and method for information providing service through retrieving of context in multimedia communication system
KR20090026942A (en) * 2007-09-11 2009-03-16 삼성전자주식회사 Method and apparatus for recording multimedia data by automatically generating/updating metadata

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210083148A (en) 2019-12-26 2021-07-06 한양대학교 에리카산학협력단 System and method for constructing a digital forensics database using video image recognition

Also Published As

Publication number Publication date
KR20110017760A (en) 2011-02-22

Similar Documents

Publication Publication Date Title
US10643610B2 (en) Voice interaction based method and apparatus for generating multimedia playlist
US11023505B2 (en) Method and apparatus for pushing information
CN110928994B (en) Similar case retrieval method, similar case retrieval device and electronic equipment
CN111831911B (en) Query information processing method and device, storage medium and electronic device
CN107704453B (en) Character semantic analysis method, character semantic analysis terminal and storage medium
CN109165302B (en) Multimedia file recommendation method and device
US20170337261A1 (en) Decision Making and Planning/Prediction System for Human Intention Resolution
US20200104350A1 (en) Information extraction from open-ended schema-less tables
US10936645B2 (en) Method and apparatus for generating to-be-played multimedia content
CN110298029B (en) Friend recommendation method, device, equipment and medium based on user corpus
CN113377971A (en) Multimedia resource generation method and device, electronic equipment and storage medium
CN111586469B (en) Bullet screen display method and device and electronic equipment
CN110069724A (en) The quick jump method of application program, device, electronic equipment and storage medium
CN110427453B (en) Data similarity calculation method, device, computer equipment and storage medium
US20150012533A1 (en) Method and client device for accessing webpage
KR101333064B1 (en) System for extracting multimedia contents descriptor and method therefor
CN112836057A (en) Knowledge graph generation method, device, terminal and storage medium
US10872108B2 (en) Method and apparatus for updating multimedia playlist
CN113360300B (en) Interface call link generation method, device, equipment and readable storage medium
KR102260396B1 (en) System for hybride translation using general neural machine translation techniques
CN117610539A (en) Intention execution method, device, electronic equipment and storage medium
US20220358293A1 (en) Alignment of values and opinions between two distinct entities
CN115618873A (en) Data processing method and device, computer equipment and storage medium
WO2010038923A1 (en) System and method of auto-complete with query type under guarantee of search results and storage media having program source thereof
CN111930884A (en) Method and equipment for determining reply sentence and man-machine conversation system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
S901 Examination by remand of revocation
E90F Notification of reason for final refusal
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161026

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180208

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190117

Year of fee payment: 6