KR100656954B1 - Method and apparatus for processing multimedia contents in distributed computing environment - Google Patents

Method and apparatus for processing multimedia contents in distributed computing environment Download PDF

Info

Publication number
KR100656954B1
KR100656954B1 KR1020050118019A KR20050118019A KR100656954B1 KR 100656954 B1 KR100656954 B1 KR 100656954B1 KR 1020050118019 A KR1020050118019 A KR 1020050118019A KR 20050118019 A KR20050118019 A KR 20050118019A KR 100656954 B1 KR100656954 B1 KR 100656954B1
Authority
KR
South Korea
Prior art keywords
processing
multimedia content
external device
data
search
Prior art date
Application number
KR1020050118019A
Other languages
Korean (ko)
Inventor
이용
김지연
문영수
김상균
정진국
황의현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020050118019A priority Critical patent/KR100656954B1/en
Application granted granted Critical
Publication of KR100656954B1 publication Critical patent/KR100656954B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting

Abstract

A method and a device for processing multimedia contents in a distributed computing environment are provided to maximally utilize computing and storage resources of each device included in the distributed environment to a function needed for processing the multimedia contents and an effect multimedia content process. A data input part(110) receives the multimedia data or context information. A data manager(120) manages the multimedia data or the context information by determining a state of the computing/storage resources inside the device. A data analyzer(130) analyzes the multimedia data or the context information. A query analyzing/processing part(140) converts the multimedia data or the context information into a database query. A database(150) stores the multimedia data or the context information. A distributed computing manager(160) requests the external device to process a task for the multimedia contents or manages a processing request from the external devices. A user interaction manager(170) manages interaction with a user.

Description

분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법 및 그 장치{METHOD AND APPARATUS FOR PROCESSING MULTIMEDIA CONTENTS IN DISTRIBUTED COMPUTING ENVIRONMENT}METHOD AND APPARATUS FOR PROCESSING MULTIMEDIA CONTENTS IN DISTRIBUTED COMPUTING ENVIRONMENT}

도 1은 본 발명의 일실시예에 따른 멀티미디어 컨텐츠 처리 장치의 구성을 나타내는 도면이다.1 is a diagram showing the configuration of a multimedia content processing apparatus according to an embodiment of the present invention.

도 2는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 데이터 관리부의 일례를 나타내는 도면이다.2 is a diagram illustrating an example of a data management unit in the multimedia content processing apparatus according to the present invention.

도 3은 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 데이터 분석부의 일례를 나타내는 도면이다.3 is a diagram illustrating an example of a data analyzer in the multimedia content processing apparatus according to the present invention.

도 4는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 질의 해석/처리부의 일례를 나타내는 도면이다. 4 is a diagram illustrating an example of a query interpreter / processing unit in the multimedia content processing apparatus according to the present invention.

도 5는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 분산 컴퓨팅 관리부의 일례를 나타내는 도면이다. 5 is a diagram illustrating an example of a distributed computing management unit in a multimedia content processing apparatus according to the present invention.

도 6은 본 발명의 일실시예에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법의 흐름을 나타내는 도면이다.6 is a flowchart illustrating a method of processing multimedia content in a distributed computing environment according to an embodiment of the present invention.

도 7은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 제1 기기와 제2 기기간의 기능 공유 처리 절차의 일례를 나타내는 도 면이다. 7 is a diagram illustrating an example of a function sharing processing procedure between a first device and a second device in a method for processing multimedia content in a distributed computing environment according to the present invention.

도 8은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 음성을 텍스트로 변환하는 기능을 공유하는 절차의 일례를 나타내는 도면이다.8 is a diagram illustrating an example of a procedure of sharing a function of converting a voice into text in a method of processing multimedia content in a distributed computing environment according to the present invention.

도 9는 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 이미지 데이터를 저장하는 기능을 공유하는 절차의 일례를 나타내는 도면이다. 9 is a diagram illustrating an example of a procedure of sharing a function of storing image data in a method of processing multimedia content in a distributed computing environment according to the present invention.

도 10은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 멀티미디어 컨텐츠를 검색하는 기능을 공유하는 절차의 일례를 나타내는 도면이다.FIG. 10 is a diagram illustrating an example of a procedure of sharing a function of searching for multimedia content in a method of processing multimedia content in a distributed computing environment according to the present invention.

도 11은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 검색 전용 기기, 전용 검색 호스트 및 검색 대상 기기간의 연결 상태를 나타내는 도면이다.11 is a diagram illustrating a connection state between a search-only device, a dedicated search host, and a search target device in the multimedia content processing method in a distributed computing environment according to the present invention.

도 12는 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 데이터베이스의 동기화하는 기능을 수행하는 절차의 일례를 나타내는 도면이다.12 is a diagram illustrating an example of a procedure for synchronizing a database in a multimedia content processing method in a distributed computing environment according to the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

100: 멀티미디어 컨텐츠 처리 장치100: multimedia content processing device

110: 데이터 입력부110: data input unit

120: 데이터 관리부120: data management unit

130: 데이터 분석부130: data analysis unit

140: 질의 해석/처리부140: query interpretation / processing unit

150: 데이터베이스150: database

160: 분산 컴퓨팅 관리부160: distributed computing management

170: 사용자 인터렉션 관리부170: user interaction management unit

본 발명은 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리하는 방법 및 그 장치에 관한 것으로, 더욱 상세하게는 분산 컴퓨팅 환경의 멀티미디어 컨텐츠 처리 장치에서 자체적으로 처리 불가능한 기능을 해당 기능이 가능한 외부 기기에게 기능 공유 요청하여 멀티미디어 컨텐츠를 처리하는 방법 및 그 장치에 관한 것이다.The present invention relates to a method and apparatus for processing multimedia content in a distributed computing environment, and more particularly, a function sharing request to an external device capable of performing a function that cannot be processed in a multimedia content processing device in a distributed computing environment. The present invention relates to a method and apparatus for processing multimedia content.

종래 분산 환경에서는 컨텐츠 생성 기기와 컨텐츠 저장 기기, 컨텐츠 검색 기기, 컨텐츠 출력 기기 등과 같이 각기 정해진 일정한 스펙의 작업만을 수행하고, 온/오프라인으로 접속하여 상호 연결된 경우 멀티미디어 데이터를 주고 받는다.In a conventional distributed environment, only a predetermined specific work such as a content generating device, a content storage device, a content retrieval device, a content output device, and the like is performed, and when connected and connected on / offline, multimedia data is exchanged.

종래 이미지 관리 시스템으로 미국 등록특허 US6,886,056호는 디지털 카메라의 사진을 관리하는 이미지 파일 저장 시스템 및 전체 시스템 아키텍쳐에 관한 것으로 카메라, 파일 시스템, 디스플레이 등을 오프라인 연결하여 사진을 관리한다.As a conventional image management system, US Patent No. 6,886,056 relates to an image file storage system and a whole system architecture for managing a picture of a digital camera, and manages a picture by connecting a camera, a file system, a display, and the like offline.

종래 분산 스토리지 시스템으로 미국 등록특허 US6,336,143호는 분산 네트워 크 환경에서 멀티미디어 데이터가 저장된 스테이션과 이를 이용하는 머신 사이의 네트워크 큐 관리에 관한 것으로 단순히 스토리지를 분산하여 처리하는 기능을 수행한다.US Patent No. 6,336, 143, which relates to a conventional distributed storage system, relates to network queue management between a station storing multimedia data and a machine using the same in a distributed network environment, and performs a function of simply distributing and processing storage.

종래 분산 이미지 검색 시스템으로 미국 공개특허 US2005-0162523호는 건물과 같은 실제 오브젝트를 사진으로 찍어 데이터베이스에서 유사 사진을 찾아 관련 정보를 검색하는 방법을 제안한다.As a conventional distributed image retrieval system, US Patent Publication No. US2005-0162523 proposes a method of searching for related information by finding similar pictures in a database by photographing a real object such as a building.

종래 분산 프린팅 시스템으로 미국 등록특허 US5,287,194호는 분산 네트워크 환경에서 복수의 프린터가 네트워크로 연결되어 있고, 이들을 이용가능성을 판단하여 프린팅 작업을 수행함으로써 프린팅 작업을 분산한다. US Patent No. 5,287, 194 is a conventional distributed printing system, in which a plurality of printers are connected to a network in a distributed network environment, and the printing job is distributed by determining the availability and performing the printing operation.

이와 같이, 종래 분산 환경에서는 다른 컴퓨팅/스토리지 리소스를 활용할 수 있으나 서로 기능을 연동하여 처리할 수 없는 구조이기 때문에 사용자가 컨텐츠의 저장 위치, 형식, 처리 방법 및 처리 기기의 컴퓨팅/스토리지 리소스의 한계 등을 이해하고 직접 개입해야 하므로 멀티미디어 컨텐츠에 대한 분류/분석 처리 등이 필요한 경우 이를 처리할 수 있는 데이터를 직접 이동시켜 처리해야 하는 번거로움이 있다.As described above, in the conventional distributed environment, other computing / storage resources may be utilized, but since the structure cannot be processed by interworking with each other, the user may store content, format, processing method, and limitations of computing / storage resources of the processing device. If you need to understand and directly intervene, there is a hassle of having to move the data that can be processed if you need to classify / analyze multimedia contents.

종래 분산 환경에서의 멀티미디어 컨텐츠 처리 방법은 예를 들어 카메라가 내장된 이동통신단말기를 통해 사용자가 사진을 촬영한 경우, 이동통신단말기가 자체적으로 사진 분류 기능을 가지고 있지 않기 때문에 사진 분류 기능을 수행하기 위해서 사용자가 직접 멀티미디어 셋탑 박스로 이미지 파일을 복사시키는 동작을 수행시켜야 한다. 또한, 멀티미디어 셋탑 박스에서 사진 분류 기능이 수행된 후 사용자가 그 결과물을 자신의 이동통신단말기로 다시 복사해야 하는 번거로움이 있다.In the conventional distributed environment, the multimedia content processing method performs a photo classification function because the mobile communication terminal does not have a photo classification function when the user takes a picture through a mobile communication terminal with a built-in camera. To do this, the user must copy the image file directly to the multimedia set-top box. In addition, after the photo classification function is performed in the multimedia set-top box, the user may have to copy the result back to his mobile communication terminal.

한편, 종래 분산 환경에서의 멀티미디어 컨텐츠 처리 방법은 스토리지 레벨에서의 공유는 쉽게 이루어지나 각 분산 기기들의 데이터 처리 기능에 대한 공유가 불가능한 문제점이 있다.Meanwhile, the multimedia content processing method in the conventional distributed environment is easily shared at the storage level, but there is a problem in that data sharing functions of respective distributed devices cannot be shared.

본 발명은 상기와 같은 종래기술을 개선하기 위해 안출된 것으로서, 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리함에 있어 필요한 처리 기능 및 그에 대한 효과적인 처리에 분산 환경의 기기들이 가지고 있는 컴퓨팅/스토리지 리소스를 최대한 활용하는 멀티미디어 컨텐츠 처리 방법 및 그 장치를 제공하는 것을 목적으로 한다. SUMMARY OF THE INVENTION The present invention has been made to improve the prior art as described above, and utilizes the computing / storage resources of devices in a distributed environment to effectively process and efficiently process multimedia contents in a distributed computing environment. An object of the present invention is to provide a method and apparatus for processing multimedia content.

본 발명의 다른 목적은 분산 컴퓨팅 환경에서의 기능적 제약 또는 현재 수행중인 다른 작업 때문에 일정 시간 동안 처리가 불가능한 상태인 경우, 처리 작업을 자동적으로 다른 외부 기기에 위탁하여 처리하는 멀티미디어 컨텐츠 처리 방법 및 그 장치를 제공하는 것이다.It is another object of the present invention to provide a multimedia content processing method and apparatus for automatically entrusting a processing task to another external device when processing is impossible for a predetermined time due to functional limitations in a distributed computing environment or other tasks currently being performed. To provide.

본 발명의 또 다른 목적은 분산 컴퓨팅 환경에서의 외부 기기와 멀티미디어 컨텐츠를 분류/분석하는 작업을 분할하는 멀티미디어 컨텐츠 처리 방법 및 그 장치를 제공하는 것이다.Another object of the present invention is to provide a multimedia content processing method and apparatus for dividing a task of classifying / analyzing multimedia content with external devices in a distributed computing environment.

상기의 목적을 이루고 종래기술의 문제점을 해결하기 위하여, 본 발명은 사 용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 단계와, 상기 입력된 처리 요청에 따른 처리 작업이 자체적으로 가능한지 여부를 판단하는 단계와, 상기 처리 작업이 자체적으로 불가능한 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하는 단계 및 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 단계를 포함하고, 상기 외부 기기에서는, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 수행한 후 상기 처리 작업 결과를 상기 처리 작업을 요청한 기기로 반환하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법을 제공한다.In order to achieve the above object and solve the problems of the prior art, the present invention comprises the steps of receiving a processing request for the multimedia content from a user, and determines whether the processing operation according to the input processing request itself is possible. And if the processing task is not possible by itself, requesting a processing operation for the multimedia content to a predetermined external device, and receiving a result of the processing operation for the multimedia content from the external device. The external device provides a method for processing multimedia content in a distributed computing environment, wherein after performing a processing operation on the multimedia content, the processing operation result is returned to the device requesting the processing operation.

본 발명의 일측에 따르는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리하는 장치는 멀티미디어 데이터 또는 컨텍스트 정보를 입력 받는 데이터 입력부와, 장치 내부의 컴퓨팅/스토리지 리소스의 상태를 판단하여 상기 멀티미디어 데이터 또는 컨텍스트 정보를 관리하는 데이터 관리부와, 상기 멀티미디어 데이터 또는 컨텍스트 정보를 분석하는 데이터 분석부와, 상기 멀티미디어 데이터 또는 컨텍스트 정보를 데이터베이스 질의로 변환하는 질의 해석/처리부와, 상기 멀티미디어 데이터 또는 컨텍스트 정보를 저장하는 데이터베이스와, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하거나 또는 상기 외부 기기로부터의 처리 요청을 관리하는 분산 컴퓨팅 관리부 및 상기 사용자와의 인터렉션(interaction)을 관리하는 사용자 인터렉션 관리부를 포함한다.In accordance with an aspect of the present invention, an apparatus for processing multimedia content in a distributed computing environment includes a data input unit configured to receive multimedia data or context information, and determine a state of computing / storage resources within the device to manage the multimedia data or context information. A data management unit for analyzing the multimedia data or context information, a query analysis / processing unit for converting the multimedia data or context information into a database query, a database for storing the multimedia data or context information, and A user who manages interaction with the user and a distributed computing management unit that requests a processing operation for multimedia content to a predetermined external device or manages a processing request from the external device It includes an interaction management unit.

이하에서는 첨부된 도면들을 참조하여 본 발명의 실시예에 따른 멀티미디어 컨텐츠 처리 방법 및 그 장치를 상세히 설명한다.Hereinafter, a method and apparatus for processing multimedia content according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 멀티미디어 컨텐츠 처리 장치의 구성을 나타내는 도면이다.1 is a diagram showing the configuration of a multimedia content processing apparatus according to an embodiment of the present invention.

도 1을 참조하면, 멀티미디어 컨텐츠 처리 장치(100)는 데이터 입력부(110), 데이터 관리부(120), 데이터 분석부(130), 질의 해석/처리부(140), 데이터베이스(150), 분산 컴퓨팅 관리부(160) 및 사용자 인터렉션 관리부(170)를 포함한다.Referring to FIG. 1, the multimedia content processing apparatus 100 may include a data input unit 110, a data manager 120, a data analyzer 130, a query interpreter / processor 140, a database 150, and a distributed computing manager ( 160 and the user interaction manager 170.

데이터 입력부(110)는 멀티미디어 데이터 또는 컨텍스트 정보를 입력 받는다. 상기 컨텍스트 정보는 상기 멀티미디어 데이터의 생성 또는 수집 시의 주변 환경에 관련된 정보로서 시간, 위치, 온도, 습도 및 사용자 입력 항목 등을 포함할 수 있다. 이하에서는 데이터 입력부(110)와 연동되는 기기 종류에 따른 데이터 입력부(110)의 동작 변형예에 대해서 설명한다.The data input unit 110 receives multimedia data or context information. The context information may include time, location, temperature, humidity, and a user input item as information related to a surrounding environment when generating or collecting the multimedia data. Hereinafter, an operation modification example of the data input unit 110 according to the type of device interoperating with the data input unit 110 will be described.

데이터 입력부(110)는 소정의 카메라와 연결되는 경우, 상기 카메라에 촬영된 이미지 데이터 또는 동영상 데이터를 상기 카메라로부터 입력 받을 수 있다. When the data input unit 110 is connected to a predetermined camera, the data input unit 110 may receive image data or video data captured by the camera from the camera.

데이터 입력부(110)는 소정의 마이크와 연동되는 경우, 상기 마이크를 통해 오디오 데이터를 입력 받을 수 있다. When the data input unit 110 is linked with a predetermined microphone, the data input unit 110 may receive audio data through the microphone.

데이터 입력부(110)는 소정의 외부 메모리와 연동되는 경우, 상기 외부 메모리에 저장된 멀티미디어 데이터 또는 컨텍스트 정보를 입력 받을 수 있다. When interlocked with a predetermined external memory, the data input unit 110 may receive multimedia data or context information stored in the external memory.

데이터 입력부(110)는 소정의 컨텍스트 수집 센서와 연동되는 경우, 상기 컨텐츠 수집 센서를 통해 수집된 컨텍스트 정보를 입력 받을 수 있다. 상기 컨텍스트 수집 센서는 시간, 위치, 온도, 습도 등과 같은 정보를 수집할 수 있다. When the data input unit 110 is linked with a predetermined context collection sensor, the data input unit 110 may receive context information collected through the content collection sensor. The context collection sensor may collect information such as time, location, temperature, humidity, and the like.

데이터 관리부(120)는 멀티미디어 컨텐츠 처리 장치(100) 내부의 컴퓨팅/스 토리지 리소스의 상태를 판단하여 상기 멀티미디어 데이터 또는 컨텍스트 정보 등과 같은 멀티미디어 컨텐츠 처리 장치(100)에서의 모든 데이터 흐름을 관리한다. The data manager 120 determines a state of the computing / storage resource inside the multimedia content processing apparatus 100 and manages all data flows in the multimedia content processing apparatus 100 such as the multimedia data or context information.

데이터 관리부(120)는 상기 입력된 멀티미디어 데이터 또는 컨텍스트 정보를 질의 해석/처리부(140)를 통해 데이터베이스(150)에 저장하고, 사용자 인터렉션 관리부(170)로부터의 질의를 질의 해석/처리부(140)로 중계한다. The data manager 120 stores the input multimedia data or context information in the database 150 through the query interpreter / processor 140, and transmits a query from the user interaction manager 170 to the query interpreter / processor 140. Relay.

데이터 관리부(120)는 데이터 분석부(130)의 기능 리스트 및 기능의 이용 가능 정보를 파악하고, 내부에서 처리할 수 없는 처리 작업을 분산 컴퓨팅 관리부(160)를 통해 소정의 외부 기기로 요청한다. The data manager 120 grasps the function list of the data analyzer 130 and available information of the functions, and requests a predetermined external device through the distributed computing manager 160 to process a task that cannot be processed internally.

데이터 관리부(120)는 상기 외부 기기의 데이터베이스에 저장된 데이터와의 동기를 관리할 수도 있다. The data manager 120 may manage synchronization with data stored in a database of the external device.

도 2는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 데이터 관리부의 일례를 나타내는 도면이다.2 is a diagram illustrating an example of a data management unit in the multimedia content processing apparatus according to the present invention.

도 2를 참조하면, 데이터 관리부(120)는 데이터 입력 관리부(210), 데이터 관리 요청부(220), 동기화 관리부(230), 외부 프로세스 처리부(240), 프로세스 처리 관리부(250) 및 데이터 분석 요청부(260)를 포함한다. 2, the data manager 120 may include a data input manager 210, a data management requester 220, a synchronization manager 230, an external process processor 240, a process process manager 250, and a data analysis request. The unit 260 is included.

데이터 입력 관리부(210)는 데이터 입력부(110)를 통해 입력되는 멀티미디어 데이터 및 컨텍스트 정보를 관리한다. The data input management unit 210 manages multimedia data and context information input through the data input unit 110.

데이터 관리 요청부(220)는 상기 멀티미디어 데이터 및 컨텍스트 정보를 데이터베이스(150)에 저장하도록 질의 해석/처리부(140)로 요청하거나 사용자 인터렉션 관리부(170)로부터의 질의를 질의 해석/처리부(140)로 중계한다. The data management requester 220 requests the query interpreter / processor 140 to store the multimedia data and context information in the database 150, or requests a query from the user interaction manager 170 to the query interpreter / processor 140. Relay.

데이터 관리 요청부(220)는 동기화 관리부(230), 외부 프로세스 처리부(240), 프로세스 처리 관리부(250) 및 데이터 분석 요청부(260)의 데이터 흐름을 관리한다. The data management requester 220 manages data flows of the synchronization manager 230, the external process processor 240, the process process manager 250, and the data analysis requester 260.

동기화 관리부(230)는 데이터 관리 요청부(220)의 요청에 따라 상기 외부 기기의 데이터베이스와의 동기 관리를 수행한다. The synchronization manager 230 performs synchronization management with the database of the external device at the request of the data management requester 220.

외부 프로세스 처리부(240)는 내부적으로 처리할 수 없는 처리 작업을 분산 컴퓨팅 관리부(160)를 통해 외부 기기로 요청한다. The external process processor 240 requests the external device through the distributed computing manager 160 for processing tasks that cannot be processed internally.

프로세스 처리 관리부(250)는 데이터 분석부(130)의 기능 리스트 및 상기 기능의 이용 가능 정도를 파악하여 내부 프로세싱 리소스를 관리한다. The process processing manager 250 manages an internal processing resource by grasping a function list of the data analyzer 130 and an available level of the function.

데이터 분석 요청부(260)는 상기 멀티미디어 데이터 또는 컨텍스트 정보에 대한 분석을 데이터 분석부(130)로 요청한다. The data analysis requester 260 requests the data analyzer 130 to analyze the multimedia data or context information.

데이터 분석부(130)는 상기 멀티미디어 데이터 또는 컨텍스트 정보를 분석 또는 분류하고, 상기 분석 또는 분류 동작에 필요한 데이터를 질의 해석/처리부(140)를 통해 가져오고, 상기 분석 또는 분류 결과를 질의 해석/처리부(140)를 통해 데이터베이스(150)에 저장한다. The data analyzing unit 130 analyzes or classifies the multimedia data or context information, brings the data necessary for the analyzing or classifying operation through the query analyzing / processing unit 140, and outputs the analysis or classification result to the query analyzing / processing unit. The data is stored in the database 150 through the 140.

도 3은 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 데이터 분석부의 일례를 나타내는 도면이다.3 is a diagram illustrating an example of a data analyzer in the multimedia content processing apparatus according to the present invention.

도 3을 참조하면, 데이터 분석부(130)는 비디오 분석부(310), 이미지 분석부(320), 오디오 분석부(330) 및 컨텍스트 분석부(340)를 포함한다. Referring to FIG. 3, the data analyzer 130 includes a video analyzer 310, an image analyzer 320, an audio analyzer 330, and a context analyzer 340.

비디오 분석부(310)는 상기 입력된 멀티미디어 데이터 중 비디오 데이터를 분석한다. 비디오 분석부(310)는 샷 검출부(311), 자막 검출부(312), 요약 생성부(313) 또는 자막 인식부(314)를 통해 상기 비디오 데이터를 분석할 수 있다. The video analyzer 310 analyzes video data among the input multimedia data. The video analyzer 310 may analyze the video data through the shot detector 311, the caption detector 312, the summary generator 313, or the caption recognizer 314.

이미지 분석부(320)는 상기 입력된 멀티미디어 데이터 중에서 이미지 데이터를 분석한다. 이미지 분석부(320)는 특징 추출부(321), 카테고리 분석부(322), 얼굴 분석부(323) 또는 이벤트 분석부(324)를 통해 상기 이미지 데이터를 분석할 수 있다.The image analyzer 320 analyzes image data among the input multimedia data. The image analyzer 320 may analyze the image data through the feature extractor 321, the category analyzer 322, the face analyzer 323, or the event analyzer 324.

오디오 분석부(330)는 상기 입력된 멀티미디어 데이터 중에서 오디오 데이터를 분석한다. 오디오 분석부(330)는 문자 변환부(331), 음성 인식부(332) 또는 무드 분류부(333)를 통해 상기 오디오 데이터를 분석할 수 있다. The audio analyzer 330 analyzes audio data among the input multimedia data. The audio analyzer 330 may analyze the audio data through the text converter 331, the voice recognizer 332, or the mood classifier 333.

컨텍스트 분석부(340)는 상기 입력된 컨텍스트 정보를 분석한다. 컨텍스트 분석부(340)는 EXIF 분석부(341), 위치 분석부(342), 기상 분석부(343) 또는 방송 메타데이터 분석부(344)를 통해 상기 컨텍스트 정보를 분석할 수 있다. The context analyzer 340 analyzes the input context information. The context analyzer 340 may analyze the context information through the EXIF analyzer 341, the location analyzer 342, the weather analyzer 343, or the broadcast metadata analyzer 344.

본 발명에 따른 멀티미디어 컨텐츠 처리 장치(100)는 그 종류에 따라 데이터 분석부(130)에서 수행될 수 있는 처리 작업이 상이하므로 상기 처리 작업의 수행 능력에 따라 비디오 분석부(310), 이미지 분석부(320), 오디오 분석부(330) 또는 컨텍스트 분석부(340)와 연관된 구성 요소가 포함되거나 포함되지 않을 수 있다. In the multimedia content processing apparatus 100 according to the present invention, since a processing task that may be performed by the data analyzer 130 is different according to the type thereof, the video analysis unit 310 and the image analysis unit may be selected according to the performance of the processing task. The component associated with the 320, the audio analyzer 330, or the context analyzer 340 may or may not be included.

질의 해석/처리부(140)는 데이터 관리부(120)로부터 받아들인 시스템 질의를 데이터베이스에서 처리할 수 있는 데이터베이스 질의를 예를 들어 SQL(Structured Query Language)로 변환한다. The query interpreter / processer 140 converts a system query that can be processed in a database into a system query, for example, SQL (Structured Query Language).

도 4는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 질의 해석/ 처리부의 일례를 나타내는 도면이다. 4 is a diagram illustrating an example of a query analyzing / processing unit in the multimedia content processing apparatus according to the present invention.

도 4를 참조하면, 질의 해석/처리부(140)는 멀티모달 질의 변환 처리부(410), 데이터베이스 질의 처리부(420) 및 인덱스 생성/관리부(430)를 포함한다.Referring to FIG. 4, the query interpreter / processor 140 includes a multi-modal query transform processor 410, a database query processor 420, and an index generator / manger 430.

멀티모달 질의 변환 처리부(410)는 데이터 분석부(130)를 이용하여 음성, 이미지, 비디오와 같은 멀티미디어 모달 및 컨텍스트 데이터를 데이터베이스(150)에서 처리할 수 있는 텍스트 또는 수치 데이터로 변환하기 위한 동작을 처리한다. 즉, 멀티모달 질의 변환 처리부(410)는 데이터 분석부(130)를 이용하여 음성 데이터를 텍스트 데이터로 변환하거나 이미지 데이터를 텍스트 데이터로 변환하거나 지도 데이터를 텍스트 데이터로 변환하는 동작을 수행할 수 있다. The multi-modal query conversion processing unit 410 converts multimedia modal and context data such as voice, image, and video into text or numerical data that can be processed in the database 150 using the data analysis unit 130. Process. That is, the multi-modal query conversion processing unit 410 may perform an operation of converting voice data into text data, image data into text data, or map data into text data using the data analyzer 130. .

데이터베이스 질의 처리부(420)는 데이터 분석부(130)로부터 전달된 데이터를 데이터베이스(150)에 저장하고, 상기 변환된 데이터베이스 질의에 따라 데이터베이스(150)를 관리한다.The database query processor 420 stores the data transmitted from the data analyzer 130 in the database 150 and manages the database 150 according to the converted database query.

인덱스 생성/관리부(430)는 데이터베이스(150)에 저장된 데이터에 대한 인덱스를 생성하고, 상기 생성된 인덱스를 관리한다. The index generation / management unit 430 generates an index for data stored in the database 150 and manages the generated index.

데이터베이스(150)는 상기 멀티미디어 데이터 또는 컨텍스트 데이터를 저장한다. The database 150 stores the multimedia data or context data.

분산 컴퓨팅 관리부(160)는 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하거나 또는 상기 외부 기기로부터의 처리 요청을 관리한다. The distributed computing manager 160 requests a predetermined external device for processing the multimedia content or manages a processing request from the external device.

도 5는 본 발명에 따른 멀티미디어 컨텐츠 처리 장치에 있어서, 분산 컴퓨팅 관리부의 일례를 나타내는 도면이다.5 is a diagram illustrating an example of a distributed computing management unit in a multimedia content processing apparatus according to the present invention.

도 5를 참조하면, 분산 컴퓨팅 관리부(160)는 내부 요청 처리부(510), 외부 요청 처리부(520), 유/무선 연결 관리부(530) 및 외부 기기 등록 관리부(540)를 포함한다. Referring to FIG. 5, the distributed computing manager 160 includes an internal request processor 510, an external request processor 520, a wired / wireless connection manager 530, and an external device registration manager 540.

내부 요청 처리부(510)는 내부로부터 요청된 작업을 외부 기기(500)로 처리 요청한다. 즉, 내부 요청 처리부(510)는 멀티미디어 컨텐츠 처리 장치가 내부적으로 처리할 수 없는 작업을 외부 기기(500)에서 처리하도록 요청할 수 있다. The internal request processor 510 requests the external device 500 to process a job requested from the inside. That is, the internal request processor 510 may request the external device 500 to process a task that the multimedia content processing apparatus cannot process internally.

외부 요청 처리부(520)는 외부 기기(500)로부터 요청된 작업을 상기 내부로 처리 요청한다. 즉, 외부 요청 처리부(520)는 외부 기기(500)에서 수행될 수 없는 기능을 상기 멀티미디어 컨텐츠 처리 장치가 수행할 수 있는 경우, 외부 기기(500)로부터의 상기 요청된 작업이 처리되도록 한다. The external request processing unit 520 processes a job requested from the external device 500 to the inside. That is, the external request processing unit 520 causes the requested operation from the external device 500 to be processed when the multimedia content processing device can perform a function that cannot be performed by the external device 500.

유/무선 연결 관리부(530)는 유/무선으로 연결된 외부 기기(500)와 연결 상태를 관리한다. The wired / wireless connection manager 530 manages a connection state with the external device 500 connected by wired / wireless.

외부 기기 등록 관리부(540)는 유/무선으로 연결된 외부 기기(500)의 등록을 관리한다. 외부 기기 등록 관리부(540)는 현재 연결중인 외부 기기(500)의 리스트 및 접속 상황을 관리한다. 상기 리스트에는 외부 기기(500)의 종류 또는 외부 기기(500)에서 수행 가능한 기능이 포함될 수 있다.The external device registration manager 540 manages the registration of the external device 500 connected by wire / wireless. The external device registration manager 540 manages a list of currently connected external devices 500 and a connection status. The list may include a type of the external device 500 or a function that may be performed by the external device 500.

도 6은 본 발명의 일실시예에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법의 흐름을 나타내는 도면이다.6 is a flowchart illustrating a method of processing multimedia content in a distributed computing environment according to an embodiment of the present invention.

도 6을 참조하면, 단계(610)에서 멀티미디어 컨텐츠 처리 장치는 사용자로부터 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는다. Referring to FIG. 6, in operation 610, the multimedia content processing apparatus receives a processing request for multimedia content from a user.

단계(620)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 입력된 처리 요청에 따른 처리 작업이 자체적으로 가능한지 여부를 판단한다. In operation 620, the apparatus for processing multimedia contents determines whether a processing task according to the input processing request is possible by itself.

처리 작업이 자체적으로 가능한 경우, 단계(630)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 입력된 처리 요청에 따른 처리 작업을 자체적으로 수행한다. 상기 처리 작업은 상기 멀티미디어 컨텐츠를 데이터베이스에 저장하거나 상기 데이터베이스에 저장된 멀티미디어 컨텐츠를 검색하거나 상기 멀티미디어 컨텐츠를 분석할 수 있다. If a processing task is possible by itself, in step 630, the multimedia content processing apparatus performs a processing task according to the input processing request by itself. The processing operation may store the multimedia content in a database, search for multimedia content stored in the database, or analyze the multimedia content.

상기 처리 작업이 자체적으로 불가능한 경우, 단계(640)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청한다. 상기 외부 기기는 상기 멀티미디어 컨텐츠에 대한 처리 작업을 수행한 후 상기 처리 작업 결과를 상기 처리 작업을 요청한 상기 멀티미디어 컨텐츠 처리 장치로 반환할 수 있다. If the processing task is not possible by itself, in step 640, the multimedia content processing apparatus requests a predetermined external device to process the multimedia contents. The external device may return a result of the processing operation to the multimedia content processing apparatus that has requested the processing after performing the processing on the multimedia content.

단계(640)에서 상기 멀티미디어 컨텐츠 처리 장치는 소정의 처리 작업에 대한 처리 가능 여부를 나타내는 처리 가능 리스트를 상기 외부 기기로 요청하고, 상기 외부 기기로부터 상기 처리 가능 리스트를 수신한 후 상기 수신된 처리 가능 리스트에 의해 상기 외부 기기에서 상기 처리 작업이 가능한 것으로 판단되는 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 상기 외부 기기로 요청할 수 있다. In operation 640, the apparatus for processing multimedia content requests the external device for a processable list indicating whether the multimedia content can be processed for a predetermined processing task, receives the processable list from the external device, and then receives the processable list. If it is determined by the list that the processing operation is possible in the external device, the processing operation for the multimedia content may be requested to the external device.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 멀티미디어 컨텐츠 처리 장치가 유선 또는 무선으로 연결된 외부 기기의 처리 가능 리스트를 사전에 수신한 후 수신된 처리 가능 리스트를 이용하여 원하는 작업을 수행할 수 있는 외부 기기를 검색할 수 있다. As described above, the method for processing multimedia contents in a distributed computing environment according to the present invention may be performed by a multimedia content processing apparatus after receiving a processing list of an external device connected by wire or wirelessly in advance and then using the received processing list. Search for external devices that can be performed.

단계(640)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 멀티미디어 컨텐츠에 대한 처리 작업의 기능 공유를 상기 외부 기기로 요청하고, 상기 외부 기기로부터 상기 처리 작업의 기능 공유가 허가된 경우, 처리 작업을 수행하고자 하는 상기 멀티미디어 컨텐츠를 상기 외부 기기로 전송하고, 상기 멀티미디어 컨텐츠에 대한 처리 작업 시작을 상기 외부 기기로 요청할 수 있다. 상기 외부 기기는 상기 전송된 멀티미디어 컨텐츠를 소정의 데이터베이스에 임시 저장하고, 상기 처리 작업 시작 요청에 따라 상기 멀티미디어 컨텐츠에 대한 처리 작업을 수행할 수 있다. In operation 640, the multimedia content processing apparatus requests the external device to share a function of a processing job for the multimedia content, and if the function sharing of the processing job is permitted from the external device, the multimedia content processing device is to perform a processing job. The multimedia content may be transmitted to the external device, and the external device may be requested to start processing of the multimedia content. The external device may temporarily store the transmitted multimedia content in a predetermined database and perform processing on the multimedia content according to the processing task start request.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 유선 또는 무선으로 연결된 외부 기기에 대해 소정 기능의 공유를 요청할 수 있고, 내부적으로 수행할 수 없는 기능을 외부 기기를 통해 수행시킬 수 있다. As described above, the method for processing multimedia content in a distributed computing environment according to the present invention may request sharing of a predetermined function to an external device connected by wire or wirelessly, and perform a function that cannot be performed internally through an external device. have.

단계(650)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는다. In operation 650, the multimedia content processing apparatus receives a result of processing the multimedia content from the external device.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 내부적으로 멀티미디어 컨텐츠에 대한 처리 작업을 수행하는 기능이 없거나 상기 기능이 있더라도 현재 다른 기능에 의해 수행이 불가능한 경우, 사용자가 별도로 데이터를 다른 기기로 전송 또는 복사하지 않더라도 자동으로 유/무선으로 연결된 외부 기기를 통해 상기 멀티미디어 컨텐츠에 대한 처리 작업을 수행한 후 수행된 처리 작업 결과를 반환 받을 수 있다. As described above, the method for processing multimedia content in a distributed computing environment according to the present invention does not have a function for internally processing multimedia content or even if the function is not currently performed by another function. Even without transmitting or copying to another device, the processing result of the multimedia content may be returned through an external device connected via wired / wireless connection automatically.

단계(660)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 반환된 처리 작업 결과를 소정의 데이터베이스에 저장한다.In operation 660, the multimedia content processing apparatus stores the returned processing result in a predetermined database.

따라서, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 외부 기기로부터 사용자가 원하는 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받고, 상기 반환된 처리 작업 결과를 자동으로 저장하여 필요한 경우 언제든지 사용할 수 있다. Accordingly, the method for processing multimedia content in a distributed computing environment according to the present invention may receive a processing result of a multimedia content desired by a user from an external device, and automatically store the returned processing result and use it whenever necessary. .

단계(670)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 반환된 처리 작업 결과를 소정의 사용자 인터렉션 관리부를 통해 디스플레이한다. In operation 670, the multimedia content processing apparatus displays the returned processing result through a predetermined user interaction manager.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 외부 기기로부터 사용자가 원하는 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받고, 반환된 처리 작업 결과를 디스플레이함으로써 사용자가 자신이 원하는 작업이 제대로 수행되었는지를 확인할 수 있다. As described above, the method for processing multimedia content in a distributed computing environment according to the present invention receives a processing result of a multimedia content desired by a user from an external device, and displays the returned processing result so that the user's desired work is properly performed. You can check that it was done.

도 7은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 제1 기기와 제2 기기간의 기능 공유 처리 절차의 일례를 나타내는 도면이다. 7 is a diagram illustrating an example of a function sharing processing procedure between a first device and a second device in a method for processing multimedia content in a distributed computing environment according to the present invention.

도 7을 참조하면, 제1 기기 및 제2 기기는 도 1에 도시된 것과 같은 멀티미디어 컨텐츠 처리 장치로 구현될 수 있다. 본 발명에 따른 실시예에서는 상기 제1 기기가 수행할 수 없는 기능을 상기 제1 기기와 유/무선으로 연결된 외부 기기인 상기 제2 기기가 수행할 수 있다는 가정에서 하기 동작을 설명한다. Referring to FIG. 7, the first device and the second device may be implemented as a multimedia content processing device as shown in FIG. 1. According to an embodiment of the present invention, the following operation will be described on the assumption that the second device, which is an external device connected to the first device via a wired or wireless connection, may perform a function that the first device cannot perform.

단계(710)에서 상기 제1 기기는 사용자로부터 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는다. 상기 처리 요청은 상기 멀티미디어 컨텐츠에 대한 저장, 분석, 검색 또는 동기화 등과 같은 다양한 처리 작업에 대한 요청을 포함할 수 있다. In operation 710, the first device receives a processing request for multimedia content from a user. The processing request may include a request for various processing tasks such as storing, analyzing, searching, or synchronizing the multimedia content.

단계(720)에서 상기 제1 기기는 상기 입력된 멀티미디어 컨텐츠에 대한 처리 요청에 대한 기능을 자체적으로 수행하기 불가능한 경우, 상기 기능에 대한 공유를 상기 제2 기기로 요청한다.In operation 720, when the first device cannot perform a function for a processing request for the input multimedia content by itself, the first device requests sharing of the function to the second device.

단계(730)에서 상기 제2 기기는 상기 제1 기기로부터의 기능 공유 요청에 따라 상기 제1 기기에 대한 기능 공유를 허가한다. In step 730, the second device authorizes the function sharing for the first device according to the function sharing request from the first device.

단계(740)에서 상기 제1 기기는 상기 제2 기기로부터의 기능 공유 허가에 따라 처리 대상 데이터인 멀티미디어 컨텐츠를 상기 제2 기기로 전송한다. In step 740, the first device transmits the multimedia content, which is the data to be processed, to the second device according to the permission to share the function from the second device.

단계(750)에서 상기 제2 기기는 상기 제1 기기로부터 전송되는 상기 처리 대상 데이터를 소정의 데이터베이스에 임시 저장한다. In step 750, the second device temporarily stores the processing target data transmitted from the first device in a predetermined database.

단계(760)에서 상기 제1 기기는 상기 기능 공유에 따른 기능의 처리가 시작되도록 처리 시작을 상기 제2 기기로 요청한다. In step 760, the first device requests the second device to start processing so that processing of a function according to the function sharing starts.

단계(770)에서 상기 제2 기기는 상기 제1 기기로부터의 처리 시작 요청에 따라 상기 멀티미디어 컨텐츠에 대한 처리 동작을 수행하고, 상기 수행된 처리 결과를 상기 제1 기기로 반환한다. In step 770, the second device performs a processing operation on the multimedia content according to a processing start request from the first device, and returns the performed processing result to the first device.

단계(780)에서 상기 제1 기기는 상기 제2 기기로부터 반환된 상기 처리 결과를 소정의 데이터베이스에 저장한다. In step 780, the first device stores the processing result returned from the second device in a predetermined database.

단계(790)에서 상기 제1 기기는 상기 반환된 처리 결과를 소정의 사용자 인터렉션 관리부를 통해 디스플레이한다. In step 790, the first device displays the returned processing result through a predetermined user interaction manager.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 제1 기기에서 멀티미디어 컨텐츠에 대한 처리 기능 수행할 수 없는 경우, 상기 제1 기기와 유선 또는 무선으로 연결된 제2 기기로 상기 멀티미디어 컨텐츠에 대한 처리 기능에 대한 공유를 요청하여 상기 제2 기기에서 상기 멀티미디어 컨텐츠에 대한 처리 기능을 수행한 후 상기 제1 기기로 상기 수행된 처리 결과를 반환함으로써 자체적으로 해당 기능이 없더라도 연결된 외부 기기를 통해 원하는 기능을 얼마든지 수행할 수 있다.As described above, in the method for processing multimedia content in a distributed computing environment according to the present invention, when the first device cannot perform a processing function for the multimedia content, the multimedia content is transmitted to a second device that is wired or wirelessly connected to the first device. Requesting sharing of the processing function for the to perform the processing function for the multimedia content in the second device and then return the processing result to the first device through the connected external device even if there is no corresponding function itself You can perform as many functions as you want.

도 8은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 음성을 텍스트로 변환하는 기능을 공유하는 절차의 일례를 나타내는 도면이다.8 is a diagram illustrating an example of a procedure of sharing a function of converting a voice into text in a method of processing multimedia content in a distributed computing environment according to the present invention.

단계(810)에서 멀티미디어 컨텐츠 처리 장치는 사용자로부터 멀티미디어 컨텐츠에 대한 음성 검색 요청을 입력 받는다. 즉, 상기 제1 기기는 멀티모달 기반 검색 사용자 인터렉션 관리부를 통해 예를 들어 사용자가 검색하고자 하는 사진을 촬영한 계절이 가을인 경우, '가을'이라는 단어를 음성으로 입력 받을 수 있다. In operation 810, the multimedia content processing apparatus receives a voice search request for multimedia content from a user. That is, the first device may receive a word “autumn” as a voice when the season in which the user takes a picture to be searched is autumn, for example, through the multi-modal based search user interaction manager.

단계(820)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 입력된 음성 데이터를 텍스트로 변환하는 작업이 자체적으로 가능한지 여부를 판단한다. In operation 820, the apparatus for processing multimedia content determines whether the operation of converting the input voice data into text is possible.

단계(820)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 입력된 음성 데이터를 음성 질의로 데이터 관리부로 보내고, 상기 데이터 관리부에서 상기 음성 데이터를 질의 해석/처리부로 보내 상기 질의 해석/처리부가 데이터 분석부로 보내 상기 음성 데이터를 텍스트로 변환하는 작업이 상기 데이터 분석부에서 가능한지 여부를 판단할 수 있다. In step 820, the multimedia content processing apparatus sends the input voice data to the data manager as a voice query, and sends the voice data to the query interpreter / processing unit from the data manager to the data analyzer. The data analyzing unit may determine whether a task of converting voice data into text is possible.

상기 음성을 텍스트로 변환하는 작업이 자체적으로 가능한 경우, 단계(825)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 입력된 음성 데이터를 텍스트로 변환한다. 상기 멀티미디어 컨텐츠 처리 장치는 데이터 분석부에 요청하여 상기 입력된 음성 데이터가 변환된 문자 데이터를 얻는다. If the operation of converting the voice into text is possible by itself, the multimedia content processing apparatus converts the input voice data into text in step 825. The multimedia content processing apparatus requests a data analyzer to obtain text data obtained by converting the input voice data.

상기 음성을 텍스트로 변환하는 작업이 자체적으로 불가능한 경우, 단계(830)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 음성을 텍스트로 변환하는 작업이 가능한 외부 기기를 검색한다. 상기 음성을 텍스트로 변환하는 작업이 자체적으로 불가능한 경우는 상기 음성을 텍스트로 변환하는 기능이 없는 경우 또는 상기 음성을 텍스트로 변환하는 기능이 있으나 현재 장치의 리소스 부족으로 작업을 진행할 수 없는 경우를 포함할 수 있다. If the task of converting the voice into text is not possible by itself, in step 830, the multimedia content processing apparatus searches for an external device capable of converting the voice into text. The case where the operation of converting the voice into text is impossible by itself may include the case in which there is no function of converting the voice into text or the function of converting the voice into text, but the operation cannot be performed due to insufficient resources of the current device. can do.

상기 멀티미디어 컨텐츠 처리 장치는 유선 또는 무선으로 연결된 외부 기기로부터 상기 외부 기기가 수행할 수 있는 기능에 대한 기능 정보 리스트를 제공 받고, 상기 제공된 기능 정보 리스트를 참조하여 상기 음성을 텍스트로 변환하는 작업이 가능한 외부 기기를 검색할 수 있다. The multimedia content processing apparatus may receive a function information list of a function that the external device can perform from a wired or wirelessly connected external device, and convert the voice into text with reference to the provided function information list. You can search for external devices.

상기 멀티미디어 컨텐츠 처리 장치는 유선 또는 무선으로 연결된 외부 기기로 음성을 텍스트로 변환하는 기능이 있는지를 질의할 수 있다. 상기 외부 기기는 상기 멀티미디어 컨텐츠 처리 장치의 질의에 따라 상기 음성을 텍스트로 변환하는 기능이 있는 경우 상기 멀티미디어 컨텐츠 처리 장치로 이를 알리고, 상기 음성을 텍스트로 변환하는 기능에 대한 공유를 시작할 수 있다. The multimedia content processing apparatus may inquire whether an external device connected by wire or wireless has a function of converting voice into text. When the external device has a function of converting the voice into text according to a query of the multimedia content processing device, the external device may notify the multimedia content processing device and start sharing the function of converting the voice into text.

단계(840)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 음성에 대한 텍스트 변환을 상기 검색된 외부 기기로 요청한다. In operation 840, the apparatus for processing multimedia content requests the searched external device for text conversion of the voice.

상기 멀티미디어 컨텐츠 처리 장치가 예를 들어 음성을 텍스트로 변환하는 기능이 없는 PDA(Personal Digital Assistant)인 경우, 블루투스(bluetooth) 또는 무선 랜(W-LAN) 방식으로 연동되는 외부 기기인 비디오 레코더가 음성을 텍스트로 변환화는 기능이 있으면, 상기 음성 데이터를 텍스트로 변환하도록 상기 외부 기기인 비디오 레코더로 요청할 수 있다. For example, when the multimedia content processing apparatus is a PDA (Personal Digital Assistant) without a function of converting a voice into a text, the video recorder, which is an external device that is linked with a Bluetooth or a wireless LAN (W-LAN) method, is a voice. If the function of converting the text to text may be requested to the video recorder, which is the external device, to convert the voice data into text.

상기 멀티미디어 컨텐츠 처리 장치는 상기 외부 기기로부터 상기 변환 기능의 공유가 시작되면, 상기 음성 데이터를 상기 외부 기기로 전송하여 텍스트로의 변환을 요청할 수 있다. When sharing of the conversion function is started from the external device, the multimedia content processing device may transmit the voice data to the external device and request the conversion to text.

상기 외부 기기는 상기 음성에 대한 텍스트 변환 요청에 따라 상기 멀티미디어 컨텐츠 처리 장치로부터 전송되는 음성 데이터를 텍스트로 변환한 후 상기 음성에 대한 텍스트 변환 작업 결과를 상기 멀티미디어 컨텐츠 처리 장치로 반환한다. The external device converts the voice data transmitted from the multimedia content processing apparatus into text according to the text conversion request for the voice and returns a text conversion result of the voice to the multimedia content processing apparatus.

단계(850)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 외부 기기로부터 상기 음성에 대한 텍스트 변환 작업 결과를 반환 받는다. In operation 850, the multimedia content processing apparatus receives a text conversion result of the voice from the external device.

단계(860)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 반환된 음성에 대한 텍스 변환 작업 결과에 따라 상기 변환된 텍스트를 검색 조건으로 하는 멀티미디어 컨텐츠를 검색한다. In operation 860, the multimedia content processing apparatus searches for multimedia content having the converted text as a search condition according to a text conversion operation result of the returned speech.

즉, 상기 멀티미디어 컨텐츠 처리 장치는 상기 변환된 텍스트인 문자 데이터를 숫자 데이터 '9, 10, 11'로 변환하여 데이터베이스에서 요청할 수 있는 데이터 베이스 질의로 변환하여 상기 숫자 데이터에 대응하는 멀티미디어 컨텐츠를 검색할 수 있다. 상기 데이터베이스 질의는 예를 들어 "SELECT photo_file from photo_table where data>='2005/9/01'&&'data<=2005/11/30'와 같이 2005년 9월 1일부터 2005년 11월 30일의 기간 내에 촬영된 사진 데이터에 대한 검색을 요청하는 SQL의 검색 질의일 수 있다. That is, the multimedia content processing apparatus may convert multimedia data corresponding to the converted text into numeric data '9, 10, 11' into database queries that can be requested from a database, and search for multimedia content corresponding to the numeric data. Can be. The database query can be entered from September 1, 2005 to November 30, 2005, for example, "SELECT photo_file from photo_table where data> = '2005/9/01' && 'data <= 2005/11/30'. It may be a search query of SQL requesting a search for photographic data photographed within a period.

단계(870)에서 상기 멀티미디어 컨텐츠 처리 장치는 상기 검색된 멀티미디어 컨텐츠를 소정의 사용자 인터렉션 관리부를 통해 디스플레이할 수 있다. 즉, 상기 멀티미디어 컨텐츠 처리 장치는 상기 검색된 멀티미디어 컨텐츠의 검색 결과가 예를 들어 사진의 ID 리스트인 경우, 각 ID의 사진 리스트를 데이터베이스로부터 가져와서 사용자 인터렉션 관리부를 통해 상기 사진 리스트를 디스플레이할 수 있다. In operation 870, the apparatus for processing multimedia content may display the retrieved multimedia content through a predetermined user interaction manager. That is, when the search result of the searched multimedia content is, for example, an ID list of pictures, the multimedia content processing apparatus may display the picture list through a user interaction manager by taking a picture list of each ID from a database.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 자체적으로 음성을 텍스트로 변환하는 기능을 수행하지 못하더라도 음성을 텍스트로 변환할 수 있는 외부 기기로 음성을 텍스트로 변환하도록 요청하여 변환된 결과를 반환 받아 멀티미디어 컨텐츠를 검색할 수 있다. As described above, the method for processing multimedia content in a distributed computing environment according to the present invention requires a device to convert voice to text from an external device capable of converting voice to text even if it does not perform a function of converting voice to text. The multimedia data can be retrieved by receiving the converted result.

도 9는 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 이미지 데이터를 저장하는 기능을 공유하는 절차의 일례를 나타내는 도면이다.9 is a diagram illustrating an example of a procedure of sharing a function of storing image data in a method of processing multimedia content in a distributed computing environment according to the present invention.

도 9를 참조하면, 단계(910)에서 상기 제1 기기는 카메라를 통해 촬영된 이미지 데이터를 입력 받는다.Referring to FIG. 9, in step 910, the first device receives image data captured by a camera.

단계(920)에서 상기 제1 기기는 사용자로부터 상기 이미지 데이터에 대한 저 장 요청을 입력 받는다.In operation 920, the first device receives a request for storing the image data from the user.

단계(930)에서 상기 제1 기기는 상기 저장 요청에 따라 상기 이미지 데이터에 대한 저장 작업이 자체적으로 가능한지 여부를 판단한다. In operation 930, the first device determines whether a storage operation of the image data is possible according to the storage request.

상기 저장 작업이 자체적으로 가능한 경우, 단계(940)에서 상기 제1 기기는 상기 이미지 데이터를 자체적으로 저장한다. If the storage operation is possible by itself, then at step 940 the first device stores the image data itself.

상기 저장 작업이 자체적으로 불가능한 경우, 단계(950)에서 상기 제1 기기는 상기 이미지 데이터에 대한 저장 처리를 제2 기기로 요청한다. 상기 저장 작업이 자체적으로 불가능한 경우는 상기 제1 기기의 저장 공간이 부족하여 상기 이미지 데이터를 저장할 수 없는 경우가 대표적이다. If the storage operation is not possible by itself, in step 950 the first device requests the second device to process the storage of the image data. In the case where the storage operation is impossible by itself, it is typical that the image data cannot be stored due to insufficient storage space of the first device.

상기 제2 기기는 데이터를 저장하는 저장 기능을 유/무선으로 연결된 제1 기기에게 공유시킬 수 있고, 데이터를 저장하기 위한 충분한 저장 공간을 가진다.The second device can share a storage function for storing data to the first device connected via wired / wireless, and has sufficient storage space for storing data.

단계(960)에서 상기 제2 기기는 상기 저장 처리 요청에 따라 상기 이미지 데이터를 상기 저장 공간에 저장한다. 즉, 상기 제2 기기는 상기 저장 처리 요청에 따라 저장 기능을 공유하여 상기 제1 기기로부터 전송되는 이미지 데이터를 상기 저장 공간에 저장할 수 있다. In step 960, the second device stores the image data in the storage space according to the storage processing request. That is, the second device may share a storage function according to the storage processing request and store image data transmitted from the first device in the storage space.

단계(970)에서 상기 제2 기기는 상기 저장된 이미지 데이터에 대한 인덱스 정보를 생성하고, 상기 생성된 인덱스 정보를 상기 제1 기기로 반환한다. In operation 970, the second device generates index information of the stored image data and returns the generated index information to the first device.

단계(980)에서 상기 제1 기기는 상기 제2 기기로부터 상기 저장된 이미지 데이터에 대한 인덱스 정보를 반환 받고, 상기 반환된 인덱스 정보를 저장한다. In operation 980, the first device receives index information of the stored image data from the second device and stores the returned index information.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 입력된 멀티미디어 컨텐츠에 대한 저장 공간이 부족한 경우, 저장 공간이 충분한 외부 기기의 저장 기능을 공유하여 외부 기기에 멀티미디어 컨텐츠를 저장할 수 있다. As described above, the method for processing multimedia content in a distributed computing environment according to the present invention may store multimedia content in an external device by sharing a storage function of an external device with sufficient storage space when the storage space for the input multimedia content is insufficient. .

도 10은 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 멀티미디어 컨텐츠를 검색하는 기능을 공유하는 절차의 일례를 나타내는 도면이다.FIG. 10 is a diagram illustrating an example of a procedure of sharing a function of searching for multimedia content in a method of processing multimedia content in a distributed computing environment according to the present invention.

도 10을 참조하면, 단계(1010)에서 제1 기기는 사용자로부터 멀티미디어 컨텐츠를 검색하기 위한 검색 질의에 대한 검색 요청을 입력 받는다. 상기 제1 기기는 멀티미디어 컨텐츠 처리 장치로서 멀티모달 기반 검색 사용자 인터렉션을 통해 상기 검색 질의를 입력 받을 수 있다. Referring to FIG. 10, in operation 1010, the first device receives a search request for a search query for searching for multimedia content from a user. The first device may be a multimedia content processing device that receives the search query through a multi-modal based search user interaction.

단계(1020)에서 상기 제1 기기는 상기 입력된 검색 질의에 대한 검색 요청에 따라 내부 데이터베이스를 검색한다. In operation 1020, the first device searches an internal database according to a search request for the input search query.

단계(1030)에서 상기 제1 기기는 상기 내부 데이터베이스를 검색한 결과로 상기 검색 질의에 대한 검색 결과가 존재하는지 여부를 판단한다. In operation 1030, the first device determines whether a search result for the search query exists as a result of searching the internal database.

상기 검색 결과가 존재하지 않는 경우, 단계(1040)에서 상기 제1 기기는 상기 검색 질의에 대한 검색 작업을 유선 또는 무선으로 연결된 외부 기기인 제2 기기로 요청한다. If the search result does not exist, in step 1040, the first device requests a search operation for the search query to a second device, which is an external device connected by wire or wirelessly.

단계(1050)에서 상기 제2 기기는 상기 검색 작업 요청에 따라 소정의 데이터베이스를 검색한다. 상기 제2 기기는 도 11에 도시된 것과 같이 소정의 전용 검색 호스트(1120)인 경우, 복수 개의 검색 대상 기기(1130)에 대한 로컬 인덱싱을 각각 수집하고, 상기 수집된 로컬 인덱싱을 통합 관리한다. In step 1050, the second device searches a predetermined database according to the search task request. When the second device is a predetermined dedicated search host 1120 as illustrated in FIG. 11, the second device collects local indexing of the plurality of search target devices 1130, respectively, and manages the collected local indexing.

단계(1060)에서 상기 제2 기기는 상기 검색된 결과를 상기 제1 기기로 반환한다. 상기 제2 기기는 검색 요청 기기(1110)인 상기 제1 기기로부터 상기 검색 작업 요청에 따라 상기 통합 관리되는 로컬 인덱싱을 참조하여 상기 검색 질의에 대한 검색 작업을 수행하고, 상기 수행된 검색 작업 결과를 상기 제1 기기로 반환한다. In step 1060, the second device returns the searched result to the first device. The second device performs a search operation on the search query by referring to the locally managed indexing according to the search job request from the first device, which is a search request device 1110, and displays the result of the performed search job. Return to the first device.

단계(1070)에서 상기 제1 기기는 상기 제2 기기로부터 상기 검색 결과를 반환 받고, 소정의 사용자 인터렉션 관리부를 통해 디스플레이한다. In operation 1070, the first device receives the search result from the second device and displays the search result through a predetermined user interaction manager.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 인덱스 서버의 역할을 수행하는 전용 검색 호스트에서 외부 기기들의 인덱스를 통합하여 관리함으로써 검색 요청 기기에서 전용 검색 호스트에 대해서만 검색 요청을 하더라도 모든 외부 기기에 대한 검색 결과를 제공 받을 수 있다. As described above, the multimedia content processing method in a distributed computing environment according to the present invention integrates and manages indexes of external devices in a dedicated search host serving as an index server, so that a search request device may search only a dedicated search host. Search results for all external devices can be provided.

따라서, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 인덱스 서버로 전용 검색 호스트만을 검색하더라도 복수 개의 외부 기기를 직접 검색한 결과와 동일한 결과를 얻을 수 있기 때문에 복수 개의 외부 기기를 직접 검색하는 것에 비해 통신/전력 리소스에 대한 소모를 크게 줄일 수 있다. Therefore, the multimedia content processing method in a distributed computing environment according to the present invention can obtain the same result as a result of directly searching a plurality of external devices even if only a search host is searched with an index server. Compared to this, the consumption of communication / power resources can be greatly reduced.

도 12는 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법에 있어서, 데이터베이스의 동기화하는 기능을 수행하는 절차의 일례를 나타내는 도면이다.12 is a diagram illustrating an example of a procedure for synchronizing a database in a multimedia content processing method in a distributed computing environment according to the present invention.

도 12를 참조하면, 단계(1210)에서 제1 기기는 사용자로부터 멀티미디어 컨 텐츠에 대한 백업 요청을 입력 받는다. 상기 사용자는 각각의 스토리지를 갖는 상기 제1 기기 및 제2 기기에 대해 서로 데이터베이스의 데이터를 동기화해야 하는 경우 예를 들어 주기적으로 데이터를 백업하고자 하는 경우 상기 백업 요청을 상기 제1 기기를 통해 입력할 수 있다. Referring to FIG. 12, in step 1210, the first device receives a backup request for multimedia content from a user. The user may input the backup request through the first device when the data of the database needs to be synchronized with each other for the first device and the second device having the respective storage, for example, when the data is to be periodically backed up. Can be.

단계(1220)에서 상기 제1 기기는 상기 멀티미디어 컨텐츠에 대한 백업 요청에 따라 변경된 멀티미디어 컨텐츠에 대한 검색을 유선 또는 무선으로 연결된 외부 기기인 상기 제2 기기로 요청한다. In operation 1220, the first device requests the second device, which is an external device connected by wire or wirelessly, to search for the changed multimedia content according to the backup request for the multimedia content.

단계(1230)에서 상기 제2 기기는 상기 변경된 멀티미디어 컨텐츠를 검색한다. 즉, 상기 제2 기기는 상기 제1 기기에 저장된 멀티미디어 컨텐츠와 상기 제2 기기에 저장된 멀티미디어 컨텐츠를 비교하여 추가, 수정 또는 삭제된 멀티미디어 컨텐츠를 검색한다. In operation 1230, the second device searches for the changed multimedia content. That is, the second device compares the multimedia content stored in the first device with the multimedia content stored in the second device and searches for the added, modified or deleted multimedia content.

단계(1240)에서 상기 제2 기기는 상기 검색 결과에 따라 상기 검색된 멀티미디어 컨텐츠를 상기 제1 기기로 전송하여 반환한다. 따라서, 상기 제1 기기는 상기 제2 기기로부터 상기 변경된 멀티미디어 컨텐츠에 대한 검색 결과를 반환 받는다. In operation 1240, the second device transmits and returns the found multimedia content to the first device according to the search result. Therefore, the first device receives a search result for the changed multimedia content from the second device.

단계(1250)에서 상기 제1 기기는 상기 제2 기기로부터 반환된 멀티미디어 컨텐츠를 데이터베이스에 저장한다. In operation 1250, the first device stores the multimedia content returned from the second device in a database.

이와 같이, 본 발명에 따른 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법은 각각의 스토리지를 갖는 제1 기기와 제2 기기의 데이터베이스에 정의된 동기 데이터의 범위 내에서 데이터를 동일하게 유지할 수 있다. As described above, the multimedia content processing method in the distributed computing environment according to the present invention may maintain the same data within the range of the synchronization data defined in the database of the first device and the second device having each storage.

또한 본 발명에 따른 멀티미디어 컨텐츠 처리 방법은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체를 포함한다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.In addition, the method for processing multimedia content according to the present invention includes a computer readable medium including program instructions for performing operations implemented by various computers. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The medium or program instructions may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. The medium may be a transmission medium such as an optical or metal wire, a waveguide, or the like including a carrier wave for transmitting a signal specifying a program command, a data structure, or the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above-described embodiments, which can be variously modified and modified by those skilled in the art to which the present invention pertains. Modifications are possible. Accordingly, the spirit of the present invention should be understood only by the claims set forth below, and all equivalent or equivalent modifications thereof will belong to the scope of the present invention.

본 발명에 따르면, 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리함에 있어 필요한 처리 기능 및 그에 대한 효과적인 처리에 분산 환경의 외부 기기들이 가지고 있는 컴퓨팅/스토리지 리소스를 최대한 활용할 수 있다. According to the present invention, it is possible to make the most of the computing / storage resources of external devices in a distributed environment for processing functions required for processing multimedia content in a distributed computing environment and effective processing thereof.

또한 본 발명에 따르면, 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 장치가 그 기능적 제약 또는 현재 수행중인 다른 작업 때문에 일정 시간 동안 처리가 불가능한 상태인 경우, 그 처리를 자동적으로 다른 외부 기기에 위탁하여 처리함으로써 사용자가 필요한 처리 기능을 갖는 기기를 찾고 데이터를 이동시켜 처리하여 그 결과를 다시 옮겨와야 하는 사용자의 개입을 크게 줄일 수 있는 이점이 있다. In addition, according to the present invention, if the multimedia content processing device in a distributed computing environment is unable to process for a certain period of time due to its functional constraints or other work currently being performed, the user is automatically entrusted to another external device for processing Finds devices that have the processing power that they need, and can move and process data to significantly reduce the user's involvement in moving the results back.

또한 본 발명에 따르면, 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 분류/분석함에 있어 분산 컴퓨팅의 다른 기기와 그 처리 작업을 분할하여 처리함으로써 처리 시간을 줄일 수 있고 해당 기기의 컴퓨팅/스토리지 리소스 사용을 최대화할 수 있다.In addition, according to the present invention, in classifying / analyzing multimedia contents in a distributed computing environment, processing is performed by dividing the processing tasks with other devices of distributed computing to reduce processing time and maximize the use of computing / storage resources of the corresponding devices. Can be.

또한 본 발명에 따르면, 분산 컴퓨팅 환경에서의 종래 단순한 스토리지 중심의 공유 시스템과 달리 처리 기능을 공유함으로써 자체적으로 처리 불가능한 기능을 외부의 다른 기기를 통해 수행할 수 있도록 할 수 있다.In addition, according to the present invention, unlike the conventional simple storage-oriented sharing system in a distributed computing environment, by sharing the processing function it is possible to perform a function that can not process itself through other external devices.

Claims (28)

분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리하는 방법에 있어서,In the method for processing multimedia content in a distributed computing environment, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 단계;Receiving a processing request for the multimedia content from a user; 상기 입력된 처리 요청에 따른 처리 작업이 자체적으로 가능한지 여부를 판단하는 단계;Determining whether a processing task according to the input processing request is possible by itself; 상기 처리 작업이 자체적으로 불가능한 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하는 단계; 및Requesting a processing operation for the multimedia content from a predetermined external device when the processing operation is not possible by itself; And 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 단계를 포함하고,Receiving a result of processing the multimedia content from the external device; 상기 외부 기기에서는, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 수행한 후 상기 처리 작업 결과를 상기 처리 작업을 요청한 기기로 반환하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And processing the multimedia content by the external device, and then returning the result of the processing to the device requesting the processing. 제1항에 있어서,The method of claim 1, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하는 상기 단계는,The step of requesting a predetermined external device to process the multimedia content, 소정의 처리 작업에 대한 처리 가능 여부를 나타내는 처리 가능 리스트를 상기 외부 기기로 요청하는 단계; Requesting the external device for a processable list indicating whether a process can be performed for a predetermined processing task; 상기 외부 기기로부터 상기 처리 가능 리스트를 수신하는 단계; 및Receiving the processable list from the external device; And 상기 수신된 처리 가능 리스트에 의해 상기 외부 기기에서 상기 처리 작업이 가능한 것으로 판단되는 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 상기 외부 기기로 요청하는 단계Requesting processing of the multimedia content from the external device when the processing is possible in the external device based on the received processing list; 를 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.Multimedia content processing method in a distributed computing environment comprising a. 제1항에 있어서,The method of claim 1, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하는 상기 단계는,The step of requesting a predetermined external device to process the multimedia content, 상기 멀티미디어 컨텐츠에 대한 처리 작업의 기능 공유를 상기 외부 기기로 요청하는 단계;Requesting to the external device to share a function of a processing task for the multimedia content; 상기 외부 기기로부터 상기 처리 작업의 기능 공유가 허가된 경우, 처리 작업을 수행하고자 하는 상기 멀티미디어 컨텐츠를 상기 외부 기기로 전송하는 단계; 및If the function sharing of the processing task is permitted from the external device, transmitting the multimedia content to perform the processing task to the external device; And 상기 멀티미디어 컨텐츠에 대한 처리 작업 시작을 상기 외부 기기로 요청하는 단계를 포함하고,Requesting the external device to start processing of the multimedia content; 상기 외부 기기에서는, 상기 전송된 멀티미디어 컨텐츠를 소정의 데이터베이스에 임시 저장하고, 상기 처리 작업 시작 요청에 따라 상기 멀티미디 컨텐츠에 대한 처리 작업을 수행하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.The external device may temporarily store the transmitted multimedia content in a predetermined database, and process the multimedia content according to the processing task start request. . 제1항에 있어서,The method of claim 1, 상기 반환된 처리 작업 결과를 소정의 데이터베이스에 저장하는 단계를 더 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And storing the returned processing result in a predetermined database. 제1항에 있어서,The method of claim 1, 상기 반환된 처리 작업 결과를 소정의 사용자 인터렉션 관리부를 통해 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And displaying the returned processing operation result through a predetermined user interaction manager. 제1항에 있어서,The method of claim 1, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 상기 단계는,The step of receiving a processing request for the multimedia content from a user, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 음성 검색 요청을 입력 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And a voice search request for the multimedia contents from a user. 제6항에 있어서,The method of claim 6, 상기 입력된 처리 요청에 따른 처리 작업이 자체적으로 가능한지 여부를 판단하는 상기 단계는, The determining of whether the processing operation according to the input processing request is possible by itself, 상기 입력된 음성 검색 요청에 따른 음성을 텍스트로 변환하는 작업이 자체적으로 가능한지 여부를 판단하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And determining whether a task of converting a voice into text according to the input voice search request is possible by itself. 제7항에 있어서,The method of claim 7, wherein 상기 처리 작업이 자체적으로 불가능한 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 외부 기기로 요청하는 상기 단계는,If the processing is not possible by itself, the step of requesting a processing operation for the multimedia content to an external device, 음성을 텍스트로 변환하는 작업이 자체적으로 불가능한 경우, 상기 음성을 텍스트로 변환하는 작업이 가능한 외부 기기를 검색하는 단계; 및Searching for an external device capable of converting the voice into the text, when the operation of converting the voice into text is not possible; And 상기 음성에 대한 텍스트 변환을 상기 검색된 외부 기기로 요청하는 단계Requesting the searched external device for text conversion of the voice; 를 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.Multimedia content processing method in a distributed computing environment comprising a. 제8항에 있어서,The method of claim 8, 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 상기 단계는,The step of receiving a result of the processing operation for the multimedia content from the external device, 상기 외부 기기로부터 상기 음성에 대한 텍스트 변환 작업 결과를 반환 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And receiving a text conversion result of the voice from the external device. 제1항에 있어서,The method of claim 1, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 상기 단계는,The step of receiving a processing request for the multimedia content from a user, 사용자로부터 촬영된 이미지 데이터에 대한 저장 요청을 입력 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.A method for processing multimedia content in a distributed computing environment, characterized in that a user receives a request for storing image data captured by a user. 제10항에 있어서,The method of claim 10, 상기 입력된 처리 요청에 따른 처리 작업이 가능한지 여부를 판단하는 상기 단계는, The step of determining whether the processing operation according to the input processing request is possible, 상기 입력된 이미지 데이터에 대한 저장 작업이 가능한지 여부를 판단하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And determining whether a storage operation of the input image data is possible. 제11항에 있어서,The method of claim 11, 상기 처리 작업이 자체적으로 불가능한 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 외부 기기로 요청하는 상기 단계는,If the processing is not possible by itself, the step of requesting a processing operation for the multimedia content to an external device, 상기 이미지 데이터에 대한 저장 작업이 자체적으로 불가능한 경우, 상기 저장 작업이 가능한 외부 기기를 검색하는 단계; 및Searching for an external device capable of storing the image when the storing operation of the image data is not possible by itself; And 상기 이미지 데이터에 대한 저장을 상기 검색된 외부 기기로 요청하는 단계를 포함하고,Requesting the searched external device to store the image data; 상기 외부 기기에서는, 상기 이미지 데이터에 대한 저장 요청에 따라 상기 이미지 데이터를 저장하고, 상기 저장된 이미지 데이터에 대한 인덱스를 생성하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.The external device may store the image data according to a request for storing the image data and generate an index for the stored image data. 제12항에 있어서,The method of claim 12, 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 상기 단계는,The step of receiving a result of the processing operation for the multimedia content from the external device, 상기 외부 기기로부터 상기 저장된 이미지 데이터에 대한 인덱스를 반환 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And receiving an index for the stored image data from the external device. 제1항에 있어서,The method of claim 1, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 상기 단계는,The step of receiving a processing request for the multimedia content from a user, 사용자로부터 검색 질의에 대한 검색 요청을 입력 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.A method for processing multimedia content in a distributed computing environment, comprising receiving a search request for a search query from a user. 제14항에 있어서,The method of claim 14, 상기 입력된 처리 요청에 따른 처리 작업이 가능한지 여부를 판단하는 상기 단계는, The step of determining whether the processing operation according to the input processing request is possible, 상기 입력된 검색 질의에 대한 처리 요청에 따라 데이터베이스를 검색하는 단계; 및Searching a database according to a processing request for the input search query; And 상기 검색 질의에 대한 검색 결과가 존재하는지 여부를 판단하는 단계Determining whether a search result for the search query exists; 를 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.Multimedia content processing method in a distributed computing environment comprising a. 제15항에 있어서,The method of claim 15, 상기 처리 작업이 자체적으로 불가능한 경우, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 외부 기기로 요청하는 상기 단계는,If the processing is not possible by itself, the step of requesting a processing operation for the multimedia content to an external device, 상기 검색 결과가 존재하지 않는 경우, 상기 검색 질의에 대한 검색 작업을 상기 외부 기기로 요청하는 단계를 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And requesting a search operation for the search query from the external device if the search result does not exist. 제16항에 있어서,The method of claim 16, 상기 검색 질의에 대한 검색 작업을 상기 외부 기기로 요청하는 상기 단계는,The step of requesting a search operation for the search query to the external device, 상기 검색 질의에 대한 검색 작업을 소정의 전용 검색 호스트로 요청하는 단계를 포함하고,Requesting a search operation for the search query to a predetermined dedicated search host; 상기 전용 검색 호스트에서는, 복수 개의 검색 대상 외부 기기에 대한 로컬 인덱싱을 각각 수집하고, 상기 수집된 로컬 인덱싱을 통합하여 관리하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.The dedicated search host collects local indexing of a plurality of external devices to be searched and integrates and manages the collected local indexing. 제17항에 있어서,The method of claim 17, 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 상기 단계는,The step of receiving a result of the processing operation for the multimedia content from the external device, 상기 전용 검색 호스트로부터 상기 검색 질의에 대한 검색 작업 결과를 반환 받는 단계를 포함하고,Receiving a search result of the search query from the dedicated search host; 상기 전용 검색 호스트에서는, 상기 통합 관리되는 로컬 인덱싱을 참조하여 상기 검색 질의에 대한 검색 작업을 수행하고, 상기 수행된 검색 작업 결과를 반환하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.The dedicated search host performs a search operation on the search query with reference to the integrated managed local indexing, and returns a result of the performed search operation, multimedia content processing method in a distributed computing environment. 제1항에 있어서,The method of claim 1, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 처리 요청을 입력 받는 상기 단계는,The step of receiving a processing request for the multimedia content from a user, 사용자로부터 상기 멀티미디어 컨텐츠에 대한 백업 요청을 입력 받는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.Multimedia content processing method in a distributed computing environment, characterized in that receiving a backup request for the multimedia content from a user. 제19항에 있어서,The method of claim 19, 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하는 상기 단계는,The step of requesting a predetermined external device to process the multimedia content, 변경된 멀티미디어 컨텐츠에 대한 검색을 상기 외부 기기로 요청하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.And requesting a search for the changed multimedia content from the external device. 제20항에 있어서,The method of claim 20, 상기 외부 기기로부터 상기 멀티미디어 컨텐츠에 대한 처리 작업 결과를 반환 받는 상기 단계는,The step of receiving a result of the processing operation for the multimedia content from the external device, 상기 외부 기기로부터 상기 변경된 멀티미디어 컨텐츠에 대한 검색 결과를 반환 받는 단계; 및Receiving a search result for the changed multimedia content from the external device; And 상기 검색 결과에 따라 변경된 멀티미디어 컨텐츠를 데이터베이스에 저장하는 단계Storing the changed multimedia content in a database according to the search result 를 포함하는 것을 특징으로 하는 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠 처리 방법.Multimedia content processing method in a distributed computing environment comprising a. 제1항 내지 제21항 중 어느 한 항의 방법을 컴퓨터에서 실행하기 위한 프로그램을 기록하는 컴퓨터 판독 가능한 기록매체.A computer-readable recording medium for recording a program for executing the method of any one of claims 1 to 21 on a computer. 분산 컴퓨팅 환경에서의 멀티미디어 컨텐츠를 처리하는 장치에 있어서,An apparatus for processing multimedia content in a distributed computing environment, 멀티미디어 데이터 또는 컨텍스트 정보를 입력 받는 데이터 입력부;A data input unit for receiving multimedia data or context information; 장치 내부의 컴퓨팅/스토리지 리소스의 상태를 판단하여 상기 멀티미디어 데이터 또는 컨텍스트 정보를 관리하는 데이터 관리부;A data manager configured to determine a state of a computing / storage resource inside a device and manage the multimedia data or context information; 상기 멀티미디어 데이터 또는 컨텍스트 정보를 분석하는 데이터 분석부;A data analyzer analyzing the multimedia data or context information; 상기 멀티미디어 데이터 또는 컨텍스트 정보를 데이터베이스 질의로 변환하는 질의 해석/처리부;A query interpreter / processing unit converting the multimedia data or context information into a database query; 상기 멀티미디어 데이터 또는 컨텍스트 정보를 저장하는 데이터베이스;A database for storing the multimedia data or context information; 상기 멀티미디어 컨텐츠에 대한 처리 작업을 소정의 외부 기기로 요청하거나 또는 상기 외부 기기로부터의 처리 요청을 관리하는 분산 컴퓨팅 관리부; 및A distributed computing management unit for requesting a processing task for the multimedia content to a predetermined external device or managing a processing request from the external device; And 상기 사용자와의 인터렉션(interaction)을 관리하는 사용자 인터렉션 관리부User interaction management unit for managing the interaction (interaction) with the user 를 포함하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.Multimedia content processing apparatus comprising a. 제23항에 있어서,The method of claim 23, wherein 상기 데이터 관리부는,The data management unit, 상기 입력된 멀티미디어 데이터 또는 컨텍스트 정보를 상기 질의 해석/처리부를 통해 상기 데이터베이스에 저장하고, 상기 사용자 인터렉션 관리부로부터 입력되는 질의를 상기 질의 해석/처리부로 중계하고, 상기 데이터 분석부의 기능 리스트 및 기능의 이용 가능 정도를 파악하고, 상기 내부에서 처리할 수 없는 처리 작업을 소정의 외부 프로세스 처리부를 통해 상기 분산 컴퓨팅 관리부에 요청하고, 지정된 외부 기기와의 데이터 동기를 관리하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.Store the input multimedia data or context information in the database through the query interpreter / processer, relay the query input from the user interaction manager to the query interpreter / processor, and use the function list and functions of the data analyzer. And determining a possible degree, requesting to the distributed computing management unit a processing task that cannot be processed internally through a predetermined external process processing unit, and managing data synchronization with a designated external device. 제23항에 있어서,The method of claim 23, wherein 상기 데이터 분석부는,The data analysis unit, 분석 또는 분류 동작에 필요한 데이터를 상기 질의 해석/처리부를 통해 상 기 데이터베이스로부터 가져오고, 상기 질의 해석/처리부를 통해 상기 분석 또는 분류 결과를 상기 데이터베이스에 저장하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.And a data necessary for an analysis or classification operation from the database through the query analysis / processing unit, and storing the analysis or classification result in the database through the query analysis / processing unit. 제23항에 있어서,The method of claim 23, wherein 상기 질의 해석/처리부는, The query interpreter / processing unit, 상기 데이터 관리부로부터 수신된 시스템 질의를 상기 데이터베이스에서 처리할 수 있는 경우, 상기 시스템 질의를 데이터베이스 질의로 변환하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.And converting the system query into a database query when the system query received from the data manager can be processed in the database. 제23항에 있어서,The method of claim 23, wherein 상기 분산 컴퓨팅 관리부는,The distributed computing management unit, 내부로부터 요청된 작업을 상기 외부 기기로 처리 요청하는 내부 요청 처리부;An internal request processing unit which requests processing of a job requested from the inside to the external device; 상기 외부 기기로부터 요청된 작업을 상기 내부로 처리 요청하는 외부 요청 처리부;An external request processing unit which requests processing of a job requested from the external device into the internal device; 유/무선으로 연결된 상기 외부 기기와의 연결 상태를 관리하는 유/무선 연결 관리부; 및A wired / wireless connection management unit managing a connection state with the external device connected via wired / wireless; And 유/무선으로 연결된 상기 외부 기기의 등록을 관리하는 외부 기기 등록 관리부External device registration management unit for managing the registration of the external device connected via wired / wireless 를 포함하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.Multimedia content processing apparatus comprising a. 제27항에 있어서,The method of claim 27, 상기 외부 기기 등록 관리부는,The external device registration management unit, 현재 연결중인 상기 외부 기기의 리스트 및 접속 상황을 관리하는 것을 특징으로 하는 멀티미디어 컨텐츠 처리 장치.And a list of the external devices that are currently connected and a connection state of the external device.
KR1020050118019A 2005-12-06 2005-12-06 Method and apparatus for processing multimedia contents in distributed computing environment KR100656954B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050118019A KR100656954B1 (en) 2005-12-06 2005-12-06 Method and apparatus for processing multimedia contents in distributed computing environment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050118019A KR100656954B1 (en) 2005-12-06 2005-12-06 Method and apparatus for processing multimedia contents in distributed computing environment

Publications (1)

Publication Number Publication Date
KR100656954B1 true KR100656954B1 (en) 2006-12-14

Family

ID=37733147

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050118019A KR100656954B1 (en) 2005-12-06 2005-12-06 Method and apparatus for processing multimedia contents in distributed computing environment

Country Status (1)

Country Link
KR (1) KR100656954B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101127451B1 (en) 2009-10-08 2012-03-22 장길훈 Method of providing and accessing resource remotely
KR20220062673A (en) * 2013-10-23 2022-05-17 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 Pervasive search architecture
WO2023017975A1 (en) * 2021-08-10 2023-02-16 삼성전자주식회사 Electronic device for outputting voice command processing result in response to state change, and operation method for same

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101127451B1 (en) 2009-10-08 2012-03-22 장길훈 Method of providing and accessing resource remotely
KR20220062673A (en) * 2013-10-23 2022-05-17 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 Pervasive search architecture
KR102506120B1 (en) 2013-10-23 2023-03-03 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 Pervasive search architecture
WO2023017975A1 (en) * 2021-08-10 2023-02-16 삼성전자주식회사 Electronic device for outputting voice command processing result in response to state change, and operation method for same

Similar Documents

Publication Publication Date Title
US20150339324A1 (en) System and Method for Imagery Warehousing and Collaborative Search Processing
US8626739B2 (en) Methods and systems for processing media files
US8224772B2 (en) Data management apparatus, method and program
US9633015B2 (en) Apparatus and methods for user generated content indexing
US9270950B2 (en) Identifying a locale for controlling capture of data by a digital life recorder based on location
JP2004062868A (en) Digital camera and method for identifying figure in image
JP2008500622A (en) Method, system, computer program and device for management of media items
US10380267B2 (en) System and method for tagging multimedia content elements
EP2985707A1 (en) Method and apparatus for finding file in storage device and router and medium
US20090204581A1 (en) Method and apparatus for information processing based on context, and computer readable medium thereof
CN109299040B (en) A kind of file storage smart allocation method based on big data
KR100788605B1 (en) Apparatus and method for serving contents
JP2007527575A (en) Method and apparatus for synchronizing and identifying content
US20120030664A1 (en) Processing of software objects moved into a dropzone region of an application
JP2006285526A (en) Information retrieval according to image data
KR100656954B1 (en) Method and apparatus for processing multimedia contents in distributed computing environment
JP2011010171A (en) Image retrieval system, image retrieval program, and server device
US20130110768A1 (en) Method for managing data, medium, and apparatus for managing data
US20050052535A1 (en) Context sensitive camera
KR100898757B1 (en) The system and method for Image searching on the basis of location information
JP6376124B2 (en) Information processing apparatus, information processing method, and program
JP6140835B2 (en) Information search system and information search method
JP2006099268A (en) Image retrieval device, image retrieval support device, image retrieval system, image retrieval method, and image retrieval program
KR100934499B1 (en) Guidance information provision method and device
Kuo et al. MPEG-7 based dozen dimensional digital content architecture for semantic image retrieval services

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121115

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131122

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141119

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee