KR20100117814A - System and method for searching a mulitmedia data using capability of user terminal - Google Patents

System and method for searching a mulitmedia data using capability of user terminal Download PDF

Info

Publication number
KR20100117814A
KR20100117814A KR1020090036467A KR20090036467A KR20100117814A KR 20100117814 A KR20100117814 A KR 20100117814A KR 1020090036467 A KR1020090036467 A KR 1020090036467A KR 20090036467 A KR20090036467 A KR 20090036467A KR 20100117814 A KR20100117814 A KR 20100117814A
Authority
KR
South Korea
Prior art keywords
content
multimedia
search
user terminal
server
Prior art date
Application number
KR1020090036467A
Other languages
Korean (ko)
Other versions
KR101435478B1 (en
Inventor
배태면
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020090036467A priority Critical patent/KR101435478B1/en
Publication of KR20100117814A publication Critical patent/KR20100117814A/en
Application granted granted Critical
Publication of KR101435478B1 publication Critical patent/KR101435478B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions

Abstract

PURPOSE: A system and a method for searching multimedia data by using capability of a user terminal are provided to enable a user to watch or select optimized multimedia contents by recommending the multimedia contents of most high quality. CONSTITUTION: A web searcher(320) outputs a web address of multimedia contents associated with a keyword, and a content collector(330) collects the multimedia contents based on the web address. A bit stream analyzer(340) analyzes the bit stream of the collected multimedia contents, and an identical content searcher(350) searches and groups the identical contents in the collected multimedia contents. A content recommender(360) recommends the multimedia contents based on the analysis result and the search result.

Description

사용자 단말기 환경을 이용한 멀티미디어 검색 방법 및 시스템{System and method for searching a mulitmedia data using capability of user terminal}System and method for searching a mulitmedia data using capability of user terminal}

본 발명은 멀티미디어 검색 방법 및 시스템에 관한 것으로서, 더욱 상세하게는 사용자가 인터넷을 통하여 멀티미디어 컨텐츠를 검색할 경우에, 서버가 사용자 단말기로부터 검색어(keyword)를 입력받아서 검색어에 해당하는 많은 멀티미디어 컨텐츠들을 검색하고, 검색된 멀티미디어 컨텐츠 중에 사용자 단말기의 네트워크 환경에 적합한 멀티미디어 컨텐츠를 사용자 단말기로 추천해 주도록 된, 사용자 단말기 환경을 이용한 멀티미디어 검색 방법 및 시스템에 관한 것이다.The present invention relates to a multimedia search method and system, and more particularly, when a user searches for multimedia content through the Internet, the server receives a keyword from a user terminal and searches for a plurality of multimedia contents corresponding to the search word. The present invention relates to a multimedia retrieval method and system using a user terminal environment, which recommends a multimedia content suitable for a network environment of a user terminal to the user terminal.

일반적으로 인터넷 통신 네트워크는 사용자가 이용가능한 멀티미디어 파일이나 스트리밍 프로그램과 같은 여러 미디어 서비스를 제공하고 있다. 그러나, 사용자는 인터넷을 통해 이용가능한 수백만의 프로그래밍 서비스 및 파일 중에 묻혀있는 특정 유형의 프로그래밍을 검색하는 미디어 서비스를 찾을 때 곤란을 겪을 수 있다. In general, Internet communication networks provide a variety of media services such as multimedia files and streaming programs available to users. However, a user may have a hard time finding a media service that searches for a particular type of programming embedded in the millions of programming services available over the Internet.

한편, 더 많은 사용자와 컨텐츠 제공자가 협대역 접속에서 광대역 접속으로 이동함에 따라 이용가능한 미디어 서비스의 볼륨과 다양성은 계속 증가할 것으로 보인다. 이러한 성장은 인터넷의 고도의 분산 특성과 결합하여 특정 미디어 서비스를 찾는 것에 상당한 곤란선이 야기되고 있다.On the other hand, as more users and content providers move from narrowband access to broadband access, the volume and diversity of available media services will continue to increase. This growth, combined with the highly distributed nature of the Internet, creates significant difficulties in finding specific media services.

사용자는 통신 네트워크를 통해 이용가능한 미디어 서비스를 찾는데 검색 엔진으로 알려진 프로그램을 사용할 수 있다. 검색 엔진은 통신 네트워크, 예를 들어 근거리 네트워크(LAN) 또는 월드와이드 웹 사이트를 갖는 인터넷 내에 네트워크 사이트에 액세스 가능한 프로그램 세트를 포함한다. "로봇(robot)"이나 "스파이더(spider)"라고 불리우는 하나의 프로그램은 웹 페이지, FTP 사이트 등에 위치된 미디어 서비스를 찾아서 네트워크를 미리 횡단하며 그러한 미디어 서비스에 관련된 메타데이터의 소스에서 발견된 키워드의 많은 인덱스 파일을 형성한다. A user can use a program known as a search engine to find media services available over a communications network. Search engines include a set of programs that are accessible to network sites within a communication network, such as a local area network (LAN) or the Internet having a worldwide website. One program, called a "robot" or "spider," finds media services located on web pages, FTP sites, etc., and traverses the network ahead of time, searching for keywords found in the source of metadata related to those media services. Form many index files.

사용자는 하나 이상의 검색 용어를 포함하는 질의를 정형화(formulate)하고, 검색 엔진의 다른 프로그램에 이 질의를 제출(submit)한다. 이에, 응답하여 검색 엔진은 자기 자신의 인덱스 파일을 검사하며, 검색 질의와 일치하는 미디어 서비스의 리스트를 일반적으로 이 미디어 서비스에 대한 하이퍼링크로서 디스플레이한다. 사용자는 이후 나열된 미디어 서비스를 탐색하기 위해 이 하이퍼링크를 활성화한다.The user formulates a query that includes one or more search terms and submits the query to another program in the search engine. In response, the search engine examines its own index file and displays a list of media services that match the search query, generally as a hyperlink to the media service. The user then activates this hyperlink to browse the listed media services.

그런데, 이와 같이 검색 용어를 포함하는 질의에 따라 검색 엔진이 인터넷에서 동영상 등의 컨텐츠를 검색하는 경우, 동일한 키워드에 대해 많은 동영상 컨텐츠들이 검색된다.However, when a search engine searches for content such as a video on the Internet according to a query including a search term, many video contents are searched for the same keyword.

이렇게 검색된 동영상 컨텐츠들 중에는 그 내용이 완전히 동일한 동영상 컨텐츠들도 있고, 사용자 단말기의 환경에서 재생이 불가능한 동영상 컨텐츠들도 있다. 또한, 높은 화질의 동영상 컨텐츠들도 존재하며, 반대로 낮은 화질의 동영상 컨텐츠들도 존재하고 있다.Some of the searched video contents are video contents that are exactly the same, and some video contents cannot be reproduced in an environment of a user terminal. In addition, high quality video contents exist, and conversely, low quality video contents exist.

그러나, 이렇게 검색된 동영상 컨텐츠들 중에 사용자가 재생하기 원하는 동영상 컨텐츠가 사용자 단말기의 재생 능력이나 네트워크 환경에 적합하지 않은 경우에 사용자는 원하는 동영상 컨텐츠를 얻지 못하거나 단말기의 재생 환경에 적합하지 않아 낮은 품질의 상태로 동영상 컨텐츠를 재생해야 하는 문제점이 있다.However, if the video contents that the user wants to play among the searched video contents are not suitable for the playback capability or network environment of the user terminal, the user may not obtain the desired video contents or may not be suitable for the playback environment of the terminal. There is a problem that the video content must be played in the state.

전술한 문제점을 해결하기 위한 본 발명의 목적은, 사용자가 인터넷을 통하여 멀티미디어 컨텐츠를 검색할 경우에, 서버가 사용자 단말기로부터 검색어(keyword)를 입력받아서 검색어에 해당하는 많은 멀티미디어 컨텐츠들을 검색하고, 검색된 멀티미디어 컨텐츠 중에 사용자 단말기의 네트워크 환경에 적합한 멀티미디어 컨텐츠를 사용자 단말기로 추천해 주도록 된, 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템 및 방법, 컨텐츠 제공 서버, 서버의 멀티미디어 검색 제공 방법을 제공함에 있다.An object of the present invention for solving the above-described problems, when a user searches for multimedia content through the Internet, the server receives a keyword from the user terminal to search for a lot of multimedia content corresponding to the search word, The present invention provides a multimedia retrieval system and method using a user terminal environment, a content providing server, and a method for providing a multimedia retrieval of a server to recommend multimedia contents suitable for a network environment of a user terminal as a user terminal.

전술한 목적을 달성하기 위한 본 발명에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템은, 서버에 접속하여 키워드를 입력해 멀티미디어 데이터의 검색을 요청하고, 서버로부터 단말기 환경에 적합한 멀티미디어 컨텐츠를 리스트로 제공받아 하나를 선택하는 사용자 단말기; 및 상기 사용자 단말기로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장하고, 상기 사용자 단말기로부터 키워드를 입력받아 멀티미디어 컨텐츠의 검색 요청이 있으면, 상기 키워드에 관련된 웹주소들을 추출하고 상기 웹주소들로부터 멀티미디어 컨텐츠들을 수집하며, 수집된 멀티미디어 컨텐츠들에 대해 비트스트림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑한 후 상기 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티 미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 상기 사용자 단말기로 추천하는 컨텐츠 서버를 포함한다.In order to achieve the above object, a multimedia search system using a user terminal environment according to the present invention is connected to a server, requests a search for multimedia data by inputting a keyword, and receives a multimedia content suitable for a terminal environment from a server as a list. A user terminal for selecting one; And collect and store information related to playing multimedia content from the user terminal, and receives a keyword from the user terminal, extracts web addresses related to the keyword, and collects multimedia contents from the web addresses. After analyzing the bitstream with respect to the collected multimedia contents and grouping the same multimedia contents, the non-playable multimedia contents are excluded based on the multimedia content reproduction related information, and the playable multimedia contents are arranged in order of high bit rate. And a content server recommended to the user terminal as a search result.

한편, 전술한 목적을 달성하기 위한 본 발명에 따른 컨텐츠 제공 서버는, 사용자 단말기의 검색 요청에 따라 멀티미디어 컨텐츠를 검색하여 검색된 결과를 상기 사용자 단말기로 제공하는 컨텐츠 제공 서버에 있어서, 상기 사용자 단말기로부터 검색 요청이 있는 경우에 상기 사용자 단말기로부터 검색 키워드 및 단말기 정보를 입력받는 사용자 입력부; 상기 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹주소를 출력하는 웹 검색부; 상기 멀티미디어 컨텐츠의 웹 주소를 근거로 멀티미디어 컨텐츠들을 수집하는 컨텐츠 수집부; 상기 수집된 멀티미디어 컨텐츠의 비트스트림을 분석하는 비트스트림 분석부; 상기 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑하는 동일 컨텐츠 검색부; 및 상기 비트스트림 분석부의 분석 결과와 상기 동일 컨텐츠 검색부의 검색 결과를 근거로 멀티미디어 컨텐츠를 추천하는 컨텐츠 추천부를 포함한다.On the other hand, the content providing server according to the present invention for achieving the above object, in the content providing server for searching the multimedia content in response to a search request from the user terminal to provide the search results to the user terminal, the search from the user terminal A user input unit for receiving a search keyword and terminal information from the user terminal when a request is made; A web searcher for outputting a web address of multimedia content related to the search keyword; A content collector configured to collect multimedia contents based on a web address of the multimedia contents; A bitstream analyzer for analyzing a bitstream of the collected multimedia content; An identical content searching unit searching for and searching for the same contents in the collected multimedia contents; And a content recommending unit recommending multimedia content based on an analysis result of the bitstream analyzer and a search result of the same content search unit.

또한, 상기 비트스트림 분석부는, 상기 멀티미디어 컨텐츠의 비트스트림을 분석하여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율을 추출한다.The bitstream analyzer extracts a type, a file format, a resolution of a video, a frame rate, and a bit rate of a compressed codec by analyzing a bitstream of the multimedia content.

또한, 상기 사용자 입력부는, 상기 사용자 단말기로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도를 포함하는 단말기 정보를 입력받는다.The user input unit may receive terminal information including a playable codec, a supported format, a resolution, a frame rate, a storage space, and a transmission speed of a network.

또한, 상기 동일 컨텐츠 검색부는, 상기 멀티미디어 컨텐츠에서 컬러 히스토그램, 엣지, 모양 정보를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색한다.The same content search unit may search for whether the multimedia content is the same multimedia content using feature information including color histogram, edge, and shape information.

또한, 상기 동일 컨텐츠 검색부는, 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR)를 계산한 PSNR 값을 이용하여 영상의 화질을 평가해 동일한 컨텐츠를 검색한다.In addition, the same content searcher searches for the same content by evaluating the image quality of the image using a PSNR value obtained by calculating a signal-to-noise ratio (SNR) using peak power without using average power.

그리고, 상기 동일 컨텐츠 검색부는, 상기 멀티미디어 컨텐츠를 셧(shot) 단위로 세그멘테이션 한 후 각 세그먼트의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍 방법을 통해 비교하여 일정 임계값 이상인 경우에 동일한 영상으로 검색한다.The same content search unit segments the multimedia content by a shot unit, extracts and prepares a representative image of each segment, and compares the extracted representative image strings of the two contents by a dynamic programming method. In case of abnormality, the same video is searched.

한편, 전술한 목적을 달성하기 위한 본 발명에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 방법은, 사용자 단말기 및 컨텐츠 서버를 포함하는 시스템의 멀티미디어 검색 방법에 있어서, (a) 상기 컨텐츠 서버가 상기 사용자 단말기로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장하는 단계; (b) 상기 사용자 단말기가 상기 컨텐츠 서버에 접속해 멀티미디어 컨텐츠의 검색을 요청하는 단계; (c) 상기 컨텐츠 서버가 상기 사용자 단말기로부터 검색 키워드를 입력받는 단계; (d) 상기 컨텐츠 서버가 상기 검색 키워드에 관련된 웹주소들을 추출하는 단계; (e) 상기 컨텐츠 서버가 상기 웹주소들로부터 멀티미디어 컨텐츠들을 수집하는 단계; (f) 상기 컨텐츠 서버가 상기 수집된 멀티미디어 컨텐츠들에 대해 비트스트 림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑하는 단계; 및 (g) 상기 컨텐츠 서버가 상기 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 상기 사용자 단말기로 추천하는 단계를 포함한다.On the other hand, the multimedia search method using a user terminal environment according to the present invention for achieving the above object, in the multimedia search method of a system comprising a user terminal and a content server, (a) the content server from the user terminal Collecting and storing multimedia content reproduction related information; (b) the user terminal accessing the content server and requesting a search for multimedia contents; (c) the content server receiving a search keyword from the user terminal; (d) the content server extracting web addresses related to the search keyword; (e) the content server collecting multimedia contents from the web addresses; (f) the content server analyzing a bitstream of the collected multimedia contents and grouping identical multimedia contents together; And (g) the content server excluding the non-playable multimedia content based on the multimedia content play related information and sorting the playable multimedia contents in order of high bit rate and recommending the search result to the user terminal.

한편, 전술한 목적을 달성하기 위한 본 발명에 따른 서버의 멀티미디어 검색 제공 방법은, 사용자 단말기의 검색 요청에 따라 멀티미디어 컨텐츠를 검색하여 검색된 결과를 상기 사용자 단말기로 제공하는 서버의 멀티미디어 검색 제공 방법에 있어서, (a) 상기 사용자 단말기로부터 멀티미디어 검색 요청이 있으면, 상기 사용자 단말기로부터 검색 키워드 및 단말기 정보를 입력받는 단계; (b) 상기 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹주소를 추출하는 단계; (c) 상기 멀티미디어 컨텐츠의 웹 주소를 근거로 멀티미디어 컨텐츠들을 수집하는 단계; (d) 상기 수집된 멀티미디어 컨텐츠의 비트스트림을 분석하는 단계; (e) 상기 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑하는 단계; 및 (f) 상기 수집된 멀티미디어 컨텐츠 중에서 상기 비트스트림의 분석 결과와 상기 동일한 컨텐츠의 검색 결과를 근거로 멀티미디어 컨텐츠를 상기 사용자 단말기로 추천하는 단계를 포함한다.On the other hand, the method for providing a multimedia search of the server according to the present invention for achieving the above object, in the method for providing a multimedia search of the server to search the multimedia content in response to a search request of the user terminal to provide the search results to the user terminal; (a) receiving a search keyword and terminal information from the user terminal when a multimedia search request is received from the user terminal; (b) extracting a web address of multimedia content related to the search keyword; (c) collecting multimedia contents based on the web address of the multimedia contents; (d) analyzing a bitstream of the collected multimedia content; (e) searching for and grouping the same contents in the collected multimedia contents; And (f) recommending the multimedia content to the user terminal based on an analysis result of the bitstream and a search result of the same content among the collected multimedia content.

또한, 상기 (a) 단계는, 상기 사용자 단말기로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도를 포함하는 단말기 정보를 입력받는다.Also, in the step (a), the terminal receives information from the user terminal, including a playable codec, a supported format, a resolution, a frame rate, a storage space, and a transmission speed of a network.

또한, 상기 (d) 단계는, 상기 멀티미디어 컨텐츠의 비트스트림을 분석하여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율을 추출한다.In the step (d), the bitstream of the multimedia content is analyzed to extract a type of compression codec, a file format, a resolution of a video, a frame rate, and a bit rate.

또한, 상기 (e) 단계는, 상기 멀티미디어 컨텐츠에서 컬러 히스토그램, 엣지, 모양 정보를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색한다.In the step (e), the multimedia information is searched for whether the multimedia content is the same by using feature information including color histogram, edge, and shape information.

또한, 상기 (e) 단계는, 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR)를 계산한 PSNR 값을 이용하여 상기 멀티미디어 컨텐츠의 영상 화질을 평가해 동일한 컨텐츠를 검색한다.In the step (e), the same content is searched by evaluating the image quality of the multimedia content using a PSNR value obtained by calculating a signal-to-noise ratio (SNR) using peak power instead of using average power. do.

또한, 상기 (e) 단계는, 상기 멀티미디어 컨텐츠를 셧(shot) 단위로 세그멘테이션 한 후 각 세그먼트의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍 방법을 통해 비교하여 일정 임계값 이상인 경우에 동일한 영상으로 검색한다.In addition, in the step (e), after segmenting the multimedia content by a shot unit, a representative image of each segment is extracted and prepared, and the extracted representative image strings of the two contents are compared by using a dynamic programming method. If more than the value, the same image is searched.

그리고, 상기 (f) 단계는, 상기 비트스트림의 분석 정보와 상기 동일한 컨텐츠의 검색 정보를 비교하여 상기 사용자 단말기에서 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 남은 멀티미디어 컨텐츠에 대해 동일한 컨텐츠별로 높은 비트율 순으로 정렬하여 상기 사용자 단말기로 추천한다.In the step (f), the analysis information of the bitstream is compared with the search information of the same content to exclude multimedia contents that cannot be played on the user terminal, and the remaining multimedia contents are arranged in the order of the highest bit rate for the same contents. Recommended for the user terminal.

한편, 본 발명에 따른 서버의 멀티미디어 검색 제공 방법을 프로그램으로서 컴퓨터로 읽을 수 있는 매체에 기록할 수 있다.On the other hand, the method for providing a multimedia search of a server according to the present invention can be recorded as a program in a computer-readable medium.

본 발명에 의하면, 인터넷에서 사용자 환경에 맞는 멀티미디어 컨텐츠를 검색하여 추천할 수 있다.According to the present invention, it is possible to search and recommend multimedia contents suitable for a user environment on the Internet.

따라서, 사용자 단말기에서 재생 가능하며, 가장 높은 화질의 멀티미디어 컨텐츠를 추천함으로써, 사용자는 가장 최상의 멀티미디어 컨텐츠를 선택하여 시청할 수 있다.Therefore, by recommending the multimedia content of the highest quality that can be played on the user terminal, the user can select and watch the best multimedia content.

본 발명의 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the preferred embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템의 구성을 개략적으로 나타낸 구성도이다.1 is a block diagram schematically showing the configuration of a multimedia search system using a user terminal environment according to an embodiment of the present invention.

도 1을 참조하면, 본 발명에 따른 멀티미디어 검색 시스템(100)은, 사용자 단말기(110), 통신망(120) 및 컨텐츠 서버(130)를 포함한다.Referring to FIG. 1, the multimedia search system 100 according to the present invention includes a user terminal 110, a communication network 120, and a content server 130.

사용자 단말기(110)는 컨텐츠 서버(130)에 접속하여 키워드를 입력해 멀티미디어 컨텐츠의 검색을 요청하고, 컨텐츠 서버(130)로부터 단말기 환경에 적합한 멀티미디어 컨텐츠를 리스트로 제공받아 하나를 선택한다.The user terminal 110 connects to the content server 130 and requests a search for multimedia content by inputting a keyword. The user terminal 110 receives a multimedia content suitable for the terminal environment from the content server 130 and selects one.

통신망(120)은 인터넷과 같은 유선 통신망일 수 있고, 이동 통신망이나 근거 리 통신망 등과 같은 무선 통신망일 수 있다.The communication network 120 may be a wired communication network such as the Internet, or a wireless communication network such as a mobile communication network or a local area network.

컨텐츠 서버(130)는 사용자 단말기(110)로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장하고, 사용자 단말기(110)로부터 검색 키워드를 입력받아 멀티미디어 컨텐츠의 검색 요청이 있으면, 검색 키워드에 관련된 웹 주소들을 추출하고 웹 주소들로부터 멀티미디어 컨텐츠들을 수집한다.The content server 130 collects and stores information related to playing multimedia content from the user terminal 110, receives a search keyword from the user terminal 110, and extracts web addresses related to the search keyword when a search request for multimedia content is received. And collect multimedia content from web addresses.

이어, 컨텐츠 서버(130)는 수집된 멀티미디어 컨텐츠들에 대해 비트스트림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑한다.Next, the content server 130 analyzes the bitstream with respect to the collected multimedia contents and groups the same multimedia contents.

그리고, 컨텐츠 서버(130)는 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 사용자 단말기(110)로 추천한다.The content server 130 excludes the non-playable multimedia content based on the multimedia content play related information and sorts the playable multimedia contents in order of high bit rate and recommends the search result to the user terminal 110.

도 2는 본 발명의 실시예에 따른 사용자 단말기의 블럭 구성을 개략적으로 나타낸 구성도이다.2 is a block diagram schematically illustrating a block configuration of a user terminal according to an exemplary embodiment of the present invention.

도 2를 참조하면, 본 발명에 따른 사용자 단말기(110)는, 통신부(210), 입력부(220), 표시부(230), 저장부(240) 및 제어부(250)를 포함한다.2, the user terminal 110 according to the present invention includes a communication unit 210, an input unit 220, a display unit 230, a storage unit 240, and a control unit 250.

통신부(210)는 컨텐츠 서버(130)와 통신망(120)을 통해 통신한다.The communication unit 210 communicates with the content server 130 through the communication network 120.

입력부(220)는 컨텐츠 서버(130)로 멀티미디어 컨텐츠의 검색을 요청하거나, 그에 관련된 키워드를 입력할 때 사용된다. 또한, 입력부(220)는 컨텐츠 서버(130)로부터 제공받은 단말기 환경에 적합한 멀티미디어 컨텐츠 리스트 중 하나를 선택할 때 이용된다.The input unit 220 is used to request a search for multimedia content from the content server 130 or to input a keyword related thereto. In addition, the input unit 220 is used to select one of the multimedia content list suitable for the terminal environment provided from the content server 130.

표시부(230)는 장치의 동작에 관한 결과를 표시하는 것으로, 컨텐츠 서버(130)로부터 제공받은 멀티미디어 컨텐츠 리스트 또는 멀티미디어 컨텐츠 등을 디스플레이한다.The display unit 230 displays a result related to the operation of the device, and displays a list of multimedia contents or multimedia contents provided from the content server 130.

저장부(240)는 컨텐츠 서버(130)로부터 제공받은 멀티미디어 컨텐츠를 저장하거나, 입력부(220)를 통해 사용자로부터 입력받은 데이터 등을 저장한다.The storage unit 240 stores the multimedia content provided from the content server 130 or stores data received from the user through the input unit 220.

제어부(250)는 컨텐츠 서버(130)에 접속하여 멀티미디어 컨텐츠를 검색하는 동작을 제어하고, 컨텐츠 서버(130)로부터 단말기 환경에 적합한 멀티미디어 컨텐츠를 제공받는 것을 제어하며, 제공받은 멀티미디어 컨텐츠를 재생하는 것을 제어한다.The controller 250 controls an operation of searching for multimedia content by accessing the content server 130, controlling receiving multimedia content suitable for a terminal environment from the content server 130, and playing the received multimedia content. To control.

도 3은 본 발명의 실시예에 따른 컨텐츠 제공 서버의 내부 구성을 개략적으로 나타낸 구성도이다.3 is a configuration diagram schematically showing an internal configuration of a content providing server according to an embodiment of the present invention.

도 3을 참조하면, 본 발명에 따른 컨텐츠 제공 서버(130)는, 사용자 입력부(310), 웹 검색부(320), 컨텐츠 수집부(330), 비트스트림 분석부(340), 컨텐츠 검색부(350), 및 컨텐츠 추천부(360)를 포함한다.Referring to FIG. 3, the content providing server 130 according to the present invention may include a user input unit 310, a web search unit 320, a content collector 330, a bitstream analyzer 340, and a content search unit ( 350, and a content recommendation unit 360.

사용자 입력부(310)는 사용자 단말기(110)로부터 검색 요청이 있는 경우에 사용자 단말기(110)로부터 검색 키워드 및 단말기 정보를 입력받는다.The user input unit 310 receives a search keyword and terminal information from the user terminal 110 when a search request is received from the user terminal 110.

여기서, 단말기 정보는 사용자 단말기(110)로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도 등을 포함한다.Here, the terminal information includes a codec that can be reproduced from the user terminal 110, a support format, a resolution, a frame rate, a storage space, a transmission speed of a network, and the like.

웹 검색부(320)는 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹 주소를 출 력한다.The web search unit 320 outputs the web address of the multimedia content related to the search keyword.

컨텐츠 수집부(330)는 멀티미디어 컨텐츠의 웹 주소를 근거로 멀티미디어 컨텐츠들을 수집한다.The content collector 330 collects multimedia contents based on the web address of the multimedia contents.

비트스트림 분석부(340)는 수집된 멀티미디어 컨텐츠의 비트스트림을 분석한다.The bitstream analyzer 340 analyzes the bitstream of the collected multimedia content.

동일 컨텐츠 검색부(350)는 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑한다.The same content search unit 350 searches and groups the same content in the collected multimedia content.

또한, 동일 컨텐츠 검색부(360)는, 멀티미디어 컨텐츠에서 컬러 히스토그램, 엣지, 모양 정보를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색한다.In addition, the same content search unit 360 searches whether the multimedia content is the same multimedia content using feature information including color histogram, edge, and shape information.

또한, 동일 컨텐츠 검색부(360)는, 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR)를 계산한 PSNR 값을 이용하여 영상의 화질을 평가해 동일한 컨텐츠를 검색한다.In addition, the same content search unit 360 searches for the same content by evaluating the image quality of the image using a PSNR value obtained by calculating a signal-to-noise ratio (SNR) using peak power instead of using average power. .

그리고, 동일 컨텐츠 검색부(370)는, 멀티미디어 컨텐츠를 셧(shot) 단위로 세그멘테이션 한 후 각 세그먼트의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍 방법을 통해 비교하여 일정 임계값 이상인 경우에 동일한 영상으로 검색한다.In addition, the same content search unit 370 segments the multimedia content in a shot unit, extracts and prepares a representative image of each segment, and compares the extracted representative image strings of the two contents through a dynamic programming method. If the threshold value is greater than or equal to, the same image is searched.

컨텐츠 분석부(380)는 비트스트림 분석부(340)의 분석 결과와 동일 컨텐츠 검색부(360)의 검색 결과를 근거로 멀티미디어 컨텐츠를 추천한다.The content analyzer 380 recommends the multimedia content based on the search result of the same content search unit 360 as the analysis result of the bitstream analyzer 340.

또한, 비트스트림 분석부(340)는, 멀티미디어 컨텐츠의 비트스트림을 분석하 여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율 등을 추출한다.In addition, the bitstream analyzer 340 analyzes the bitstream of the multimedia content and extracts the type of the compression codec, the file format, the resolution of the image, the frame rate, the bit rate, and the like.

도 4는 본 발명의 실시예에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 방법을 설명하기 위한 흐름도이다.4 is a flowchart illustrating a multimedia search method using a user terminal environment according to an embodiment of the present invention.

도 4를 참조하면, 컨텐츠 서버(130)는 먼저, 사용자 단말기(110)로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장한다(S410).Referring to FIG. 4, the content server 130 first collects and stores multimedia content reproduction related information from the user terminal 110 (S410).

사용자 단말기(110)는 통신망(120)을 통해 컨텐츠 서버(130)에 접속해 멀티미디어 컨텐츠의 검색을 요청한다(S420).The user terminal 110 accesses the content server 130 through the communication network 120 and requests a search for the multimedia content (S420).

컨텐츠 서버(130)는 사용자 단말기(110)로부터 검색 키워드를 입력받는다(S430).The content server 130 receives a search keyword from the user terminal 110 (S430).

컨텐츠 서버는(130)는 검색 키워드에 관련된 웹 주소들을 추출한다(S440).The content server 130 extracts web addresses related to the search keyword (S440).

컨텐츠 서버(130)는 웹 주소들로부터 멀티미디어 컨텐츠들을 수집한다(S450).The content server 130 collects multimedia contents from web addresses (S450).

컨텐츠 서버(130)는 수집된 멀티미디어 컨텐츠들에 대해 비트스트림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑한다(S460).The content server 130 analyzes the bitstream with respect to the collected multimedia contents and groups the same multimedia contents (S460).

컨텐츠 서버(130)는 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 사용자 단말기로 추천한다(S470).The content server 130 excludes the non-playable multimedia content based on the multimedia content play related information and sorts the playable multimedia contents in order of high bit rate and recommends the search result to the user terminal (S470).

도 5는 본 발명의 실시예에 따른 컨텐츠 서버의 멀티미디어 검색 제공 방법 을 설명하기 위한 흐름도이다.5 is a flowchart illustrating a multimedia search providing method of a content server according to an embodiment of the present invention.

도 5를 참조하면, 본 발명에 따른 컨텐츠 서버(130)는 사용자 단말기(110)로부터 멀티미디어 검색 요청이 있으면(S502), 사용자 입력부(310)를 통해 사용자 단말기(110)로부터 검색 키워드 및 단말기 정보를 입력받는다(S504).Referring to FIG. 5, when the content server 130 receives a multimedia search request from the user terminal 110 (S502), the content server 130 receives the search keyword and the terminal information from the user terminal 110 through the user input unit 310. It receives an input (S504).

이때, 컨텐츠 서버(130)는, 사용자 단말기(110)로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도 등을 포함하는 단말기 정보를 입력받는다.In this case, the content server 130 receives terminal information including a playable codec, a supported format, a resolution, a frame rate, a storage space, a transmission speed of a network, and the like from the user terminal 110.

이어, 컨텐츠 서버(130)는 사용자 단말기(110)로부터 입력받은 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹 주소를 웹 검색부(320)를 통해 추출한다(S506).Next, the content server 130 extracts the web address of the multimedia content related to the search keyword received from the user terminal 110 through the web search unit 320 (S506).

이어, 컨텐츠 서버(130)는 멀티미디어 컨텐츠의 웹 주소를 근거로 컨텐츠 수집부(330)를 통해 멀티미디어 컨텐츠들을 수집한다(S508).Next, the content server 130 collects multimedia contents through the content collector 330 based on the web address of the multimedia contents (S508).

이어, 컨텐츠 서버(130)는 수집된 멀티미디어 컨텐츠의 비트스트림을 비트스트림 분석부(340)를 통해 분석한다(S510).Next, the content server 130 analyzes the bitstream of the collected multimedia content through the bitstream analyzer 340 (S510).

이때, 컨텐츠 서버(130)는 멀티미디어 컨텐츠의 비트스트림을 분석하여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율 등을 추출한다.At this time, the content server 130 analyzes the bitstream of the multimedia content and extracts the type of compression codec, the file format, the resolution of the image, the frame rate, the bit rate, and the like.

이어, 컨텐츠 서버(130)는 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑한다(S512).Subsequently, the content server 130 searches for the same content in the collected multimedia content and groups the same content (S512).

즉, 컨텐츠 서버(130)는 멀티미디어 컨텐츠에서 컬러 히스토그램(color histogram), 엣지(edge), 모양 정보(shape information)를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색할 수 있다.That is, the content server 130 may search whether the multimedia content is the same multimedia content using feature information including color histogram, edge, and shape information in the multimedia content.

또한, 컨텐츠 서버(130)는 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR:Signal to Noise Ratio)를 계산한 PSNR(Peak Signal to Noise Rate) 값을 이용하여 멀티미디어 컨텐츠의 영상 화질을 평가해 동일한 컨텐츠를 검색할 수 있다.In addition, the content server 130 uses the peak signal power to calculate the signal-to-noise ratio (SNR) using the peak power, rather than using the average power. The same content can be retrieved by evaluating the image quality of the.

또한, 컨텐츠 서버(130)는 멀티미디어 컨텐츠를 셧(shot) 단위로 세그멘테이션 한 후 각 세그먼트의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍 방법을 통해 비교하여 일정 임계값 이상인 경우에 동일한 영상으로 검색할 수 있다.In addition, the content server 130 segments the multimedia content in a shot unit, extracts and prepares a representative image of each segment, and compares the extracted representative image strings of the two contents by using a dynamic programming method. In this case, the same image can be searched.

이후, 컨텐츠 서버(130)는 수집된 멀티미디어 컨텐츠 중에서 비트스트림 분석부(340)의 비트스트림 분석 결과와 컨텐츠 검색부(350)의 동일한 컨텐츠의 검색 결과를 근거로 멀티미디어 컨텐츠를 사용자 단말기로 추천한다(S514).Thereafter, the content server 130 recommends the multimedia content to the user terminal based on the bitstream analysis result of the bitstream analyzer 340 and the search result of the same content of the content search unit 350 among the collected multimedia content ( S514).

즉, 컨텐츠 서버(130)는 비트스트림의 분석 정보와 동일한 컨텐츠의 검색 정보를 비교하여 사용자 단말기(110)에서 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 남은 멀티미디어 컨텐츠에 대해 동일한 컨텐츠별로 높은 비트율 순으로 정렬하여 사용자 단말기로 추천한다.That is, the content server 130 compares the search information of the same content with the analysis information of the bitstream to exclude the multimedia content that cannot be played on the user terminal 110 and sorts the remaining multimedia content in the order of the highest bit rate for the same content for the user. Recommended as a terminal.

한편, 본 발명에 따른 컨텐츠 서버의 멀티미디어 검색 제공 방법을 프로그램으로서 CD나 USB 메모리 등의 컴퓨터로 읽을 수 있는 매체에 기록할 수 있다.Meanwhile, the method for providing a multimedia search of a content server according to the present invention can be recorded as a program on a computer readable medium such as a CD or a USB memory.

전술한 바와 같이 본 발명에 의하면, 사용자가 인터넷을 통하여 멀티미디어 컨텐츠를 검색할 경우에, 서버가 사용자 단말기로부터 검색어(keyword)를 입력받아서 검색어에 해당하는 많은 멀티미디어 컨텐츠들을 검색하고, 검색된 멀티미디어 컨텐츠 중에 사용자 단말기의 네트워크 환경에 적합한 멀티미디어 컨텐츠를 사용자 단말기로 추천해 주도록 된, 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템 및 방법, 컨텐츠 제공 서버, 서버의 멀티미디어 검색 제공 방법을 실현할 수 있다.As described above, according to the present invention, when a user searches for multimedia content through the Internet, the server receives a keyword from the user terminal and searches for a plurality of multimedia contents corresponding to the search word, and the user among the searched multimedia contents. A multimedia retrieval system and method using a user terminal environment, a content providing server, and a method for providing multimedia retrieval by a server, which can recommend multimedia contents suitable for a network environment of a terminal to a user terminal, can be realized.

본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As those skilled in the art to which the present invention pertains may implement the present invention in other specific forms without changing the technical spirit or essential features, the embodiments described above should be understood as illustrative and not restrictive in all aspects. Should be. The scope of the present invention is shown by the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention. do.

본 발명은, 서버에서 단말기로 동영상 등의 멀티미디어 컨텐츠를 제공해 주는 서비스 및 시스템에 적용할 수 있다.The present invention can be applied to a service and a system for providing multimedia contents such as moving images from a server to a terminal.

또한, 사용자가 자신 단말기의 네트워크 환경에 적합한 멀티미디어 컨텐츠를 수신하여 최적의 상태로 디스플레이 할 수 있도록 사용자 단말기의 성능에 알맞는 멀티미디어 컨텐츠를 제공해 줄 수 있는 시스템 및 단말기에 적용할 수 있다.In addition, the present invention can be applied to a system and a terminal capable of providing multimedia contents suitable for the performance of the user terminal so that the user can receive the multimedia contents suitable for the network environment of his terminal and display them in an optimal state.

그리고, 사용자의 검색에 따라 사용자가 입력한 검색 키워드에 해당하면서 단말기의 성능에도 최적인 동영상을 제공할 수 있는 서비스 및 시스템에 적용할 수 있다.In addition, the present invention can be applied to a service and a system that can provide a video that is optimal for the performance of a terminal while corresponding to a search keyword input by the user according to the user's search.

도 1은 본 발명의 실시예에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템의 구성을 개략적으로 나타낸 구성도이다.1 is a block diagram schematically showing the configuration of a multimedia search system using a user terminal environment according to an embodiment of the present invention.

도 2는 본 발명의 실시예에 따른 사용자 단말기의 블럭 구성을 개략적으로 나타낸 구성도이다.2 is a block diagram schematically illustrating a block configuration of a user terminal according to an exemplary embodiment of the present invention.

도 3은 본 발명의 실시예에 따른 컨텐츠 제공 서버의 내부 구성을 개략적으로 나타낸 구성도이다.3 is a configuration diagram schematically showing an internal configuration of a content providing server according to an embodiment of the present invention.

도 4는 본 발명의 실시예에 따른 사용자 단말기 환경을 이용한 멀티미디어 검색 방법을 설명하기 위한 흐름도이다.4 is a flowchart illustrating a multimedia search method using a user terminal environment according to an embodiment of the present invention.

도 5는 본 발명의 실시예에 따른 컨텐츠 서버의 멀티미디어 검색 제공 방법을 설명하기 위한 흐름도이다.5 is a flowchart illustrating a method of providing a multimedia search of a content server according to an embodiment of the present invention.

< 도면의 주요 부분에 대한 부호의 설명 ><Description of Symbols for Main Parts of Drawings>

100 : 멀티미디어 검색 시스템 110 : 사용자 단말기100: multimedia search system 110: user terminal

120 : 통신망 130 : 컨텐츠 서버120: communication network 130: content server

210 : 통신부 220 : 입력부210: communication unit 220: input unit

230 : 표시부 240 : 저장부230: display unit 240: storage unit

250 : 제어부 310 : 사용자 입력부250: control unit 310: user input unit

320 : 웹 검색부 330 : 컨텐츠 수집부320: Web search unit 330: Content collection unit

340 : 비트스트림 분석부 350 : 컨텐츠 검색부340: bitstream analysis unit 350: content search unit

360 : 컨텐츠 추천부360: content recommendation

Claims (16)

서버에 접속하여 키워드를 입력해 멀티미디어 데이터의 검색을 요청하고, 서버로부터 단말기 환경에 적합한 멀티미디어 컨텐츠를 리스트로 제공받아 하나를 선택하는 사용자 단말기; 및A user terminal which accesses a server, requests a search for multimedia data by inputting a keyword, receives a multimedia content suitable for a terminal environment from a server, and selects one from the server; And 상기 사용자 단말기로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장하고, 상기 사용자 단말기로부터 키워드를 입력받아 멀티미디어 컨텐츠의 검색 요청이 있으면, 상기 키워드에 관련된 웹주소들을 추출하고 상기 웹주소들로부터 멀티미디어 컨텐츠들을 수집하며, 수집된 멀티미디어 컨텐츠들에 대해 비트스트림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑한 후 상기 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 상기 사용자 단말기로 추천하는 컨텐츠 서버;Collecting and storing information related to playing multimedia content from the user terminal, and receiving a keyword from the user terminal, extracting the multimedia content, extracting web addresses related to the keyword, and collecting multimedia contents from the web addresses; After analyzing the bitstream with respect to the collected multimedia contents and grouping the same multimedia contents, the non-playable multimedia contents are excluded based on the multimedia contents play related information, and the playable multimedia contents are sorted in order of high bit rate. A content server recommended to the user terminal; 를 포함하는 사용자 단말기 환경을 이용한 멀티미디어 검색 시스템.Multimedia search system using a user terminal environment comprising a. 사용자 단말기의 검색 요청에 따라 멀티미디어 컨텐츠를 검색하여 검색된 결과를 상기 사용자 단말기로 제공하는 컨텐츠 제공 서버에 있어서,A content providing server for searching for multimedia content according to a search request of a user terminal and providing the searched result to the user terminal. 상기 사용자 단말기로부터 검색 요청이 있는 경우에 상기 사용자 단말기로부터 검색 키워드 및 단말기 정보를 입력받는 사용자 입력부;A user input unit which receives a search keyword and terminal information from the user terminal when a search request is received from the user terminal; 상기 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹주소를 출력하는 웹 검색부;A web searcher for outputting a web address of multimedia content related to the search keyword; 상기 멀티미디어 컨텐츠의 웹 주소를 근거로 멀티미디어 컨텐츠들을 수집하는 컨텐츠 수집부;A content collector configured to collect multimedia contents based on a web address of the multimedia contents; 상기 수집된 멀티미디어 컨텐츠의 비트스트림을 분석하는 비트스트림 분석부;A bitstream analyzer for analyzing a bitstream of the collected multimedia content; 상기 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑하는 동일 컨텐츠 검색부; 및An identical content searching unit searching for and searching for the same contents in the collected multimedia contents; And 상기 비트스트림 분석부의 분석 결과와 상기 동일 컨텐츠 검색부의 검색 결과를 근거로 멀티미디어 컨텐츠를 추천하는 컨텐츠 추천부;A content recommending unit recommending multimedia content based on an analysis result of the bitstream analyzer and a search result of the same content search unit; 를 포함하는 컨텐츠 제공 서버.Content providing server comprising a. 제 2 항에 있어서,The method of claim 2, 상기 비트스트림 분석부는, 상기 멀티미디어 컨텐츠의 비트스트림을 분석하여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율을 추출하는 것을 특징으로 하는 컨텐츠 제공 서버.And the bitstream analyzer extracts a type, a file format, a resolution of a video, a frame rate, and a bit rate of a compressed codec by analyzing a bitstream of the multimedia content. 제 2 항에 있어서,The method of claim 2, 상기 사용자 입력부는, 상기 사용자 단말기로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도를 포함하는 단말기 정보를 입력받는 것을 특징으로 하는 컨텐츠 제공 서버.The user input unit, the content providing server, characterized in that for receiving the terminal information including the playable codec, support format, resolution, frame rate, storage space, network transmission speed. 제 2 항에 있어서,The method of claim 2, 상기 동일 컨텐츠 검색부는, 상기 멀티미디어 컨텐츠에서 컬러 히스토그램(color histogram), 엣지(edge), 모양 정보(shape information)를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색하는 것을 특징으로 하는 컨텐츠 제공 서버.The same content search unit searches for whether the multimedia content is identical in terms of content using feature information including color histogram, edge, and shape information in the multimedia content. . 제 2 항에 있어서,The method of claim 2, 상기 동일 컨텐츠 검색부는, 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR)를 계산한 PSNR(Peak Signal to Noise Rate) 값을 이용하여 영상의 화질을 평가해 동일한 컨텐츠를 검색하는 것을 특징으로 하는 컨텐츠 제공 서버.The same content retrieval unit evaluates the image quality by using a peak signal to noise rate (PSNR) value that calculates a signal-to-noise ratio (SNR) using peak power instead of using average power to obtain the same content. Content providing server, characterized in that for searching. 제 2 항에 있어서,The method of claim 2, 상기 동일 컨텐츠 검색부는, 상기 멀티미디어 컨텐츠를 특정 단위로 세그멘테이션(segmentation) 한 후 각 세그먼트(segment)의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍(dynamic programing) 방법을 통해 비교하여 일정 임계값(threshold) 이상인 경우에 동일한 영상으로 검색하는 것을 특징으로 하는 컨텐츠 제공 서버.The same content search unit, after segmenting the multimedia content in a specific unit, extracts and prepares a representative image of each segment, and then extracts the representative image strings of the two contents through a dynamic programming method. The content providing server, characterized in that the search for the same image when the comparison is greater than a certain threshold. 사용자 단말기 및 컨텐츠 서버를 포함하는 시스템의 멀티미디어 검색 방법에 있어서,In the multimedia search method of a system comprising a user terminal and a content server, (a) 상기 컨텐츠 서버가 상기 사용자 단말기로부터 멀티미디어 컨텐츠 재생 관련 정보를 수집하여 저장하는 단계;(a) collecting and storing multimedia content reproduction related information from the user terminal by the content server; (b) 상기 사용자 단말기가 상기 컨텐츠 서버에 접속해 멀티미디어 컨텐츠의 검색을 요청하는 단계;(b) the user terminal accessing the content server and requesting a search for multimedia contents; (c) 상기 컨텐츠 서버가 상기 사용자 단말기로부터 검색 키워드를 입력받는 단계;(c) the content server receiving a search keyword from the user terminal; (d) 상기 컨텐츠 서버가 상기 검색 키워드에 관련된 웹주소들을 추출하는 단계;(d) the content server extracting web addresses related to the search keyword; (e) 상기 컨텐츠 서버가 상기 웹주소들로부터 멀티미디어 컨텐츠들을 수집하는 단계;(e) the content server collecting multimedia contents from the web addresses; (f) 상기 컨텐츠 서버가 상기 수집된 멀티미디어 컨텐츠들에 대해 비트스트 림을 분석하고 동일한 멀티미디어 컨텐츠들끼리 그룹핑하는 단계; 및(f) the content server analyzing a bitstream of the collected multimedia contents and grouping identical multimedia contents together; And (g) 상기 컨텐츠 서버가 상기 멀티미디어 컨텐츠 재생 관련 정보를 근거로 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 재생 가능한 멀티미디어 컨텐츠들을 높은 비트율 순으로 정렬하여 검색 결과로 상기 사용자 단말기로 추천하는 단계;(g) the content server excluding the non-playable multimedia content based on the multimedia content play related information and sorting the playable multimedia contents in ascending bit rate order and recommending the search result to the user terminal; 를 포함하는 사용자 단말기 환경을 이용한 멀티미디어 검색 방법.Multimedia search method using a user terminal environment comprising a. 사용자 단말기의 검색 요청에 따라 멀티미디어 컨텐츠를 검색하여 검색된 결과를 상기 사용자 단말기로 제공하는 서버의 멀티미디어 검색 제공 방법에 있어서,In the multimedia search providing method of the server for searching the multimedia content in response to a search request of the user terminal to provide the search results to the user terminal, (a) 상기 사용자 단말기로부터 멀티미디어 검색 요청이 있으면, 상기 사용자 단말기로부터 검색 키워드 및 단말기 정보를 입력받는 단계;(a) receiving a search keyword and terminal information from the user terminal when a multimedia search request is received from the user terminal; (b) 상기 검색 키워드에 관련된 멀티미디어 컨텐츠의 웹주소를 추출하는 단계;(b) extracting a web address of multimedia content related to the search keyword; (c) 상기 멀티미디어 컨텐츠의 웹 주소를 근거로 멀티미디어 컨텐츠들을 수집하는 단계;(c) collecting multimedia contents based on the web address of the multimedia contents; (d) 상기 수집된 멀티미디어 컨텐츠의 비트스트림을 분석하는 단계;(d) analyzing a bitstream of the collected multimedia content; (e) 상기 수집된 멀티미디어 컨텐츠에서 동일한 컨텐츠를 검색하여 그룹핑하는 단계; 및(e) searching for and grouping the same contents in the collected multimedia contents; And (f) 상기 수집된 멀티미디어 컨텐츠 중에서 상기 비트스트림의 분석 결과와 상기 동일한 컨텐츠의 검색 결과를 근거로 멀티미디어 컨텐츠를 상기 사용자 단말기로 추천하는 단계;(f) recommending multimedia content to the user terminal based on a result of analyzing the bitstream and a search result of the same content among the collected multimedia content; 를 포함하는 서버의 멀티미디어 검색 제공 방법.Multimedia search providing method of the server comprising a. 제 9 항에 있어서,The method of claim 9, 상기 (a) 단계는, 상기 사용자 단말기로부터 재생 가능한 코덱, 지원포맷, 해상도, 프레임율, 저장공간, 네트워크의 전송속도를 포함하는 단말기 정보를 입력받는 것을 특징으로 하는 서버의 멀티미디어 검색 제공 방법.In the step (a), the method for providing multimedia search of a server, comprising receiving terminal information including a playable codec, a supported format, a resolution, a frame rate, a storage space, and a transmission speed of a network. 제 9 항에 있어서,The method of claim 9, 상기 (d) 단계는, 상기 멀티미디어 컨텐츠의 비트스트림을 분석하여 압축 코덱의 종류, 파일포맷, 영상의 해상도, 프레임율, 비트율을 추출하는 것을 특징으로 하는 서버의 멀티미디어 검색 제공 방법.In the step (d), the method of providing a multimedia search of a server, characterized in that it extracts the type of compression codec, file format, video resolution, frame rate, bit rate by analyzing the bitstream of the multimedia content. 제 9 항에 있어서,The method of claim 9, 상기 (e) 단계는, 상기 멀티미디어 컨텐츠에서 컬러 히스토그램(color histogram), 엣지(edge), 모양 정보(shape information)를 포함하는 특징 정보를 이용해 내용상 동일한 멀티미디어 컨텐츠인지를 검색하는 것을 특징으로 하는 서버의 멀티미디어 검색 제공 방법.In the step (e), it is determined whether the multimedia content is identical in content by using feature information including color histogram, edge, and shape information in the multimedia content. How to provide multimedia search. 제 9 항에 있어서,The method of claim 9, 상기 (e) 단계는, 평균전력을 이용하지 않고 피크(peak) 전력을 이용하여 신호 대 잡음비(SNR)를 계산한 PSNR(Peak Signal to Noise Rate) 값을 이용하여 상기 멀티미디어 컨텐츠의 영상 화질을 평가해 동일한 컨텐츠를 검색하는 것을 특징으로 하는 서버의 멀티미디어 검색 제공 방법.In the step (e), the image quality of the multimedia content is evaluated by using a Peak Signal to Noise Rate (PSNR) value obtained by calculating a signal-to-noise ratio (SNR) using peak power instead of average power. And searching for the same content. 제 9 항에 있어서,The method of claim 9, 상기 (e) 단계는, 상기 멀티미디어 컨텐츠를 특정 단위로 세그멘테이션(segmentation) 한 후 각 세그먼트(segment)의 대표 영상을 추출하여 준비한 후 두 컨텐츠의 추출된 대표 영상열을 다이나믹 프로그래밍(dynamic programing) 방법을 통해 비교하여 일정 임계값(threshold) 이상인 경우에 동일한 영상으로 검색하는 것을 특징으로 하는 서버의 멀티미디어 검색 제공 방법.In the step (e), the multimedia content is segmented in a specific unit, and then a representative image of each segment is extracted and prepared, followed by a dynamic programming method of extracting the representative image strings of the two contents. The method of providing a multimedia search of a server, characterized in that searching through the same image when the comparison is over a predetermined threshold. 제 9 항에 있어서,The method of claim 9, 상기 (f) 단계는, 상기 비트스트림의 분석 정보와 상기 동일한 컨텐츠의 검색 정보를 비교하여 상기 사용자 단말기에서 재생 불가능한 멀티미디어 컨텐츠를 제외시키고 남은 멀티미디어 컨텐츠에 대해 동일한 컨텐츠별로 높은 비트율 순으로 정렬하여 상기 사용자 단말기로 추천하는 In the step (f), the analysis information of the bitstream is compared with the search information of the same content to exclude multimedia contents that cannot be played in the user terminal, and the remaining multimedia contents are arranged in the order of the highest bit rate for the same contents for the user. Recommended by terminal 제 9 항 내지 제 15 항 중 어느 한 항의 방법을 프로그램으로 기록한 컴퓨터로 읽을 수 있는 매체.A non-transitory computer-readable medium having recorded thereon a method according to any one of claims 9 to 15.
KR1020090036467A 2009-04-27 2009-04-27 System and method for searching a mulitmedia data using capability of user terminal KR101435478B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090036467A KR101435478B1 (en) 2009-04-27 2009-04-27 System and method for searching a mulitmedia data using capability of user terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090036467A KR101435478B1 (en) 2009-04-27 2009-04-27 System and method for searching a mulitmedia data using capability of user terminal

Publications (2)

Publication Number Publication Date
KR20100117814A true KR20100117814A (en) 2010-11-04
KR101435478B1 KR101435478B1 (en) 2014-08-28

Family

ID=43404266

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090036467A KR101435478B1 (en) 2009-04-27 2009-04-27 System and method for searching a mulitmedia data using capability of user terminal

Country Status (1)

Country Link
KR (1) KR101435478B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150033668A (en) * 2012-12-12 2015-04-01 후아웨이 디바이스 컴퍼니 리미티드 Method and terminal for sharing media stream

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004047108A2 (en) * 2002-11-20 2004-06-03 Koninklijke Philips Electronics N.V. User interface system for presenting to a user the contents of an information carrier
KR100604032B1 (en) * 2003-01-08 2006-07-24 엘지전자 주식회사 Apparatus for supporting plural codec and Method thereof
KR20090034604A (en) * 2007-10-04 2009-04-08 (주) 엘지텔레콤 System and method for converting multimedia contents via mobile communication network

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150033668A (en) * 2012-12-12 2015-04-01 후아웨이 디바이스 컴퍼니 리미티드 Method and terminal for sharing media stream
US9906692B2 (en) 2012-12-12 2018-02-27 Huawei Device Co., Ltd. Media stream sharing method and terminal

Also Published As

Publication number Publication date
KR101435478B1 (en) 2014-08-28

Similar Documents

Publication Publication Date Title
RU2577189C2 (en) Profile based content retrieval for recommender systems
US8346801B2 (en) Context based video finder
US8750681B2 (en) Electronic apparatus, content recommendation method, and program therefor
WO2017096877A1 (en) Recommendation method and device
US8843467B2 (en) Method and system for providing relevant information to a user of a device in a local network
JP4538757B2 (en) Information processing apparatus, information processing method, and program
US11734289B2 (en) Methods, systems, and media for providing a media search engine
WO2015101155A1 (en) Method for recommending information to user
CN104423621A (en) Pinyin string processing method and device
JP2015531102A (en) Dynamic media segment pricing
US9305215B2 (en) Apparatus, method and computer readable recording medium for analyzing video using image captured from video
US20220107978A1 (en) Method for recommending video content
WO2016115943A1 (en) Music recommendation method and apparatus
JP5286732B2 (en) Information processing apparatus and method, program, and recording medium
JP2011145742A (en) Apparatus and method for processing information, and program
Liu et al. Query sensitive dynamic web video thumbnail generation
CN103268345A (en) Method and device for retrieving film and television data
KR20090013828A (en) Apparatus and method for content item annotation
JP5250381B2 (en) Index video generation device, moving image search device, and moving image search system
KR20200049193A (en) Method for providing contents and service device supporting the same
KR20090020005A (en) System and method for recommendation of moving video based on visual content
US20140032537A1 (en) Apparatus, system, and method for music identification
CN110569447B (en) Network resource recommendation method and device and storage medium
KR100916310B1 (en) System and Method for recommendation of music and moving video based on audio signal processing
KR20100117814A (en) System and method for searching a mulitmedia data using capability of user terminal

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
E902 Notification of reason for refusal
B601 Maintenance of original decision after re-examination before a trial
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20130215

Effective date: 20140731

Free format text: TRIAL NUMBER: 2013101001100; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20130215

Effective date: 20140731

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170802

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180802

Year of fee payment: 5