KR101896177B1

KR101896177B1 - An Image Searching System Providing Multiplex Result

Info

Publication number: KR101896177B1
Application number: KR1020170029658A
Authority: KR
Inventors: 김동훈
Original assignee: 김동훈
Priority date: 2017-03-08
Filing date: 2017-03-08
Publication date: 2018-09-06

Abstract

The present invention relates to an image search system with a multiple result providing function. The image search system with a multiple result providing function according to the present invention comprises: an index server receiving a reference index which is a base for search to store the reference index in an index database; an image input module receiving image information to be searched from a user; a search word recognition module analyzing the image information based on the reference index to recognize at least two search word information from the image information; and a search result calculation module calculating search result information which is a search engine search result for each search word information to display the search result information to the user.

Description

[0001] The present invention relates to an image retrieval system,

본 발명은 다중 결과 제공 기능을 구비한 이미지 검색 시스템에 관한 것으로서, 보다 상세하게 설명하면 유저가 입력한 이미지정보로부터 여러 가지 검색어정보를 산출함으로써 다양한 검색 결과를 제공하는 다중 결과 제공 기능을 구비한 이미지 검색 시스템에 관한 것이다.The present invention relates to an image retrieval system having a multiple result providing function, and more particularly, to an image retrieval system having a multiple result providing function for providing various retrieval results by calculating various retrieval term information from image information inputted by a user Retrieval system.

최근 디지털 카메라, 카메라를 내장한 스마트폰 등의 대중화로 인해 대용량의 이미지 데이터가 발생하고 있으며, SNS(Social Network Service)를 통해 제공되는 이미지의 수도 급격히 증가하고 있다. 이에 따라 이미지 데이터베이스에서 질의 이미지와 유사한 이미지들을 검색하고, 관련된 추가 정보를 제공하는 이미지 검색 기술이 많은 관심을 받고 있다.Recently, large-scale image data is generated due to popularization of digital cameras and smart phones incorporating cameras, and the number of images provided through SNS (Social Network Service) is rapidly increasing. Accordingly, an image retrieval technique for retrieving images similar to a query image in the image database and providing related additional information has attracted much attention.

기존의 키워드 기반 검색은 사용자가 정확한 키워드를 입력해야만 검색이 가능하기 때문에 불명확한 키워드 또는 오타가 발생한 경우에는 검색을 할 수 없다. 그러나 이미지 기반의 검색은 키워드 없이 이미지를 통해 검색 서비스를 제공할 수 있다.The existing keyword-based search can not be performed when an unambiguous keyword or typo occurs because the user can search only by inputting the correct keyword. However, image-based searches can provide search services through images without keywords.

일 예로 한국공개특허번호 특2003-0005908호(공개일 2003년 1월 23일) "영상의 객체 특징 추출과 이를 이용한 내용 기반 영상검색 장치 및 방법"에는 한 영상의 내용을 적절하게 표현하는 대표 객체 특성을 추출하고 이를 영상검색에 이용함으로써 내용 기반의 영상 검색이 가능한 장치 및 방법이 게시되어 있다.For example, Korean Patent Publication No. 2003-0005908 (published on January 23, 2003) entitled " Object-feature extraction and content-based image retrieval apparatus and method using the image object " A device and a method capable of performing content-based image search by extracting characteristics and using it for image search are disclosed.

또다른 예로 한국공개특허번호 10-2016-0081231(공개일 2016년 7월 8일) “이미지 기반 검색을 위한 맵리듀스 기반의 이미지 특징 추출 방법 및 시스템”에는 이미지의 특징점이 속하는 비주얼 워드 할당과 차이 벡터 계산을 위한 태스크를 분산 처리함으로써 기존의 단일 컴퓨팅으로는 불가능했던 대용량의 이미지 데이터 처리를 분산을 통해 효율적으로 수행할 수 있도록 하는 이미지 특징 추출 방법 및 시스템이 게시되어 있다.As another example, Korean Patent Laid-Open No. 10-2016-0081231 (published on July 8, 2016) entitled " Method and System for Extracting Image Features Based on MapReduce for Image-Based Retrieval " An image feature extraction method and system for distributing a large amount of image data processing that can not be performed by a single single computation efficiently by distributing tasks for vector calculation are disclosed.

그러나 상기와 같은 이미지 검색은 주로 이미지 자체를 이용한 검색으로서, 해당 이미지가 포함되는 웹 사이트에 대한 검색이나 해당 이미지를 포함하는 사진 검색 등에 지나지 않아, 이미지에 포함된 복수개의 키워드를 분석하고, 분석된 키워드를 기반으로 검색을 수행하는 수준에는 미치지 못하였다.However, the above-mentioned image search is mainly a search using the image itself, and a plurality of keywords included in the image are analyzed, and a search for a web site including the image or a search for a photograph including the image is performed. But it does not reach the level of searching based on the keyword.

따라서 상술한 바와 같은 문제점을 해결하기 위해 이미지 검색 시스템으로서, 유저가 입력한 이미지정보로부터 여러 가지 검색어정보를 산출함으로써 다양한 검색 결과를 제공하는, 신규하고 진보한 다중 결과 제공 기능을 구비한 이미지 검색 시스템을 개발할 필요성이 대두되는 실정이다.Therefore, in order to solve the above-mentioned problems, an image search system, which provides various search results by calculating various search word information from image information input by a user, The need for the development of new technologies.

본 발명은 상기 기술의 문제점을 극복하기 위해 안출된 것으로, 유저가 입력한 이미지정보로부터 여러 가지 검색어정보를 산출함으로써 다양한 검색 결과를 제공하는 다중 결과 제공 기능을 구비한 이미지 검색 시스템을 제공하는 것을 주요 목적으로 한다.SUMMARY OF THE INVENTION It is an object of the present invention to provide an image search system having a multiple result providing function for providing various search results by calculating various search word information from image information inputted by a user, The purpose.

본 발명의 다른 목적은, 유저 개개인에 커스터마이징된 검색 결과 뿐 아니라, 복수의 유저로부터의 검색빈도수를 기반으로 한 검색 결과 정보를 제공하는 것이다.Another object of the present invention is to provide search result information based on not only a search result customized to each user but also a search frequency from a plurality of users.

본 발명의 또 다른 목적은, 상호 연관된 2장 이상의 이미지정보로부터 통합검색어정보를 산출하여 그를 기반으로 다양한 검색 결과를 제공할 수 있도록 하는 것이다.It is still another object of the present invention to provide a method and a system for calculating integrated query information from two or more related image information and providing various search results based on the information.

상기 목적을 달성하기 위하여, 본 발명에 따른 다중 결과 제공 기능을 구비한 이미지 검색 시스템은, 검색의 기반이 되는 기준인덱스를 입력받아 인덱스데이터베이스에 저장하는 인덱스서버; 유저로부터 검색하고자 하는 이미지정보를 입력받는 이미지입력모듈; 상기 기준인덱스를 기반으로 상기 이미지정보를 분석하여 상기 이미지정보로부터 적어도 두 개 이상의 검색어정보를 파악하는 검색어파악모듈; 상기 검색어정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하여 상기 유저에게 디스플레이하는 검색결과산출모듈;을 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an image retrieval system having a multi-result providing function, the index retrieval system including: An image input module for receiving image information to be searched from a user; A query recognition module for analyzing the image information based on the reference index and grasping at least two query word information from the image information; And a search result calculating module for calculating search result information that is a search engine search result for each of the search word information and displaying the search result information to the user.

더불어, 상기 인덱스서버는, 복수의 상기 유저로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 과거검색정보를 상기 인덱스데이터베이스에 더 저장하고, 상기 시스템은, 복수개의 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보에 대한 연관검색어정보를 산출하는 연관검색어산출부 및, 상기 검색어정보 및 각각의 상기 검색어정보에 대응되는 상기 연관검색어정보를 합성 처리한 통합검색정보를 생성하여 저장하는 통합검색정보산출부를 포함하는 통합검색어산출모듈;을 더 포함하고, 상기 검색결과산출모듈은, 상기 통합검색정보 각각에 대한 검색엔진 검색 결과인 통합검색결과정보를 더 산출하여 상기 유저에게 디스플레이하는 것을 특징으로 한다.In addition, the index server may further store past search information including the search word information and the search result information previously generated from a plurality of users, in the index database, and the system may further include: An integrated search word calculation unit for calculating related search word information for the search word information based on a search frequency for the search word information and integrated search information for synthesizing the search word information and the associated search word information corresponding to each of the search word information, The integrated search result calculating module may further calculate the integrated search result information that is a search engine search result for each of the integrated search information and display the integrated search result information to the user .

덧붙여, 상기 검색어파악모듈은, 상기 이미지정보의 외곽선을 스캐닝하여 외곽선정보로 저장하는 외곽선스캐닝부와, 상기 외곽선을 이루는 외곽선픽셀 및, 상기 외곽선 내에 위치한 이미지픽셀에 대한 색상정보와 상기 외곽선정보를 포함하는 이미지인덱스를 산출하는 이미지인덱스산출부 및, 상기 이미지인덱스를 상기 기준인덱스와 비교 처리하여 상기 이미지인덱스로부터 적어도 두 개 이상의 상기 검색어정보를 산출하는 검색어산출부를 더 포함하는 것을 특징으로 한다.The search word identification module may include an outline scanning unit scanning the outline of the image information and storing the outline as the outline information, the outline pixel forming the outline, and the color information and the outline information of the image pixel located in the outline And a search word calculation unit for calculating at least two pieces of the keyword information from the image index by comparing the image index with the reference index.

또한, 상기 인덱스서버는, 상기 유저로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 기검색정보를 상기 인덱스데이터베이스에 더 저장하며, 상기 검색어파악모듈은, 상기 기준인덱스 및 상기 기검색정보를 기반으로 상기 이미지정보를 분석하여 상기 이미지정보로부터 적어도 두 개 이상의 검색어정보를 파악하는 것을 특징으로 한다.In addition, the index server may further store, in the index database, basic search information including the search word information and the search result information generated from the user, the search word identification module including: And analyzing the image information to grasp at least two pieces of search word information from the image information.

본 발명에 따른 다중 결과 제공 기능을 구비한 이미지 검색 시스템은,According to an embodiment of the present invention, there is provided an image search system having a multi-

1) 유저가 입력한 이미지정보로부터 여러 가지 검색어정보를 산출함으로써 다양한 검색 결과를 제공하는 다중 결과 제공 기능을 구비한 이미지 검색 시스템을 제공하고,1) An image search system having a multiple result providing function for providing various search results by calculating various search word information from image information inputted by a user,

2) 유저 개개인에 커스터마이징된 검색 결과 뿐 아니라, 복수의 유저로부터의 검색빈도수를 기반으로 한 검색 결과 정보를 제공하며,2) Provide not only search results customized to individual users but also search result information based on the frequency of searches from a plurality of users,

3) 상호 연관된 2장 이상의 이미지정보로부터 통합검색어정보를 산출하여 그를 기반으로 다양한 검색 결과를 제공할 수 있는 효과가 있다.3) The integrated query information is calculated from two or more pieces of image information related to each other, and various search results can be provided based on the information.

삭제delete

도 1은 본 발명의 시스템 이용 사례에 대한 개략적인 구성을 나타낸 개념도.
도 2는 본 발명의 시스템의 기본 구성을 도시한 블록도.
도 3은 본 발명의 시스템의 세부 구성을 도시한 블록도.
도 4는 본 발명의 외곽선 스캐닝 예시를 나타낸 개념도.
도 5는 복수개의 이미지를 이용한 이미지 검색 예시를 나타낸 개념도.1 is a conceptual diagram showing a schematic configuration of a system use case of the present invention.
2 is a block diagram showing a basic configuration of a system according to the present invention;
3 is a block diagram showing a detailed configuration of a system of the present invention;
4 is a conceptual diagram illustrating an example of an outline scanning of the present invention.
5 is a conceptual diagram illustrating an example of image retrieval using a plurality of images.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하도록 한다. 첨부된 도면은 축척에 의하여 도시되지 않았으며, 각 도면의 동일한 참조 번호는 동일한 구성 요소를 지칭한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The accompanying drawings are not drawn to scale and wherein like reference numerals in the various drawings refer to like elements.

도 1은 본 발명의 시스템(10) 이용 사례에 대한 개략적인 구성을 나타낸 개념도.1 is a conceptual diagram illustrating a schematic configuration of a system 10 embodiment of the present invention.

도 1을 참조하여 본 발명의 시스템(10)을 이용한 이미지 검색의 기초적인 예시를 설명하면 다음과 같다.A basic example of image retrieval using the system 10 of the present invention will be described with reference to FIG.

먼저, 유저(20)는 본 발명에서 검색의 주체가 되는 대상으로서, 유저(20)는 정보를 얻고자 하는 이미지정보를 본 발명의 시스템(10)에 업로드함으로써 이미지 검색을 수행하며, 이미지정보를 기반으로 산출된 검색결과정보를 제공받는다.First, the user 20 performs an image search by uploading the image information to be obtained as the subject of the present invention to the system 10 of the present invention, Based search result information.

다음으로, 본 발명의 시스템(10)은 유저(20)로부터 이미지정보를 업로드받아 업로드된 이미지정보에 대한 검색결과정보를 도출하여 유저(20)에게 제공하는 기능을 수행한다. 이 때 이미지정보로부터 검색어정보를 추출하고, 추출된 검색어정보에 대한 검색 엔진 결과값인 검색결과정보를 유저(20)에게 디스플레이하는 방식으로 정보를 제공하는 것이다.Next, the system 10 of the present invention uploads image information from the user 20, derives search result information on the uploaded image information, and provides the search result information to the user 20. At this time, the information is provided by extracting the search word information from the image information and displaying the search result information, which is a search engine result value, to the user 20.

이 때 하나의 이미지정보로부터도 다양한 검색어정보가 도출될 수 있다. 가령, 파블로 피카소의 작품인 “게르니카(Guernica)”의 이미지정보를 입력하여 검색을 수행할 시, 게르니카에 대한 이미지정보로부터는 그 작가인 파블로 피카소, 혹은 작품명인 게르니카, 또는 게르니카의 최근 경매 낙찰 가격, 게르니카의 배경이 되는 에스파냐(스페인) 내란, 게르니카가 소장된 소피아왕비 미술센터 등 하나의 이미지를 가지고도 다양한 검색어정보를 도출할 수 있는 것이다.At this time, various search word information can be derived from one image information. For example, when you search for images of Pablo Picasso's "Guernica", you can get information from the image information of Guernica by the artist Pablo Picasso, or the work of Guernica or Guernica's latest auction price , Spain (Spain), which is the background of Guernica, and the Queen Sofia Art Center, which is owned by Guernica.

따라서 본 발명의 시스템(10)은 이미지정보의 분석을 통해 복수개의 검색어정보를 도출하고, 해당 검색어정보 각각에 대한 검색 엔진 결과값인 검색결과정보를 도출하여 유저(20)에게 디스플레이함으로써 유저(20)가 입력한 이미지정보로부터 다양한 검색 결과를 얻도록 하여, 다중 결과 도출을 가능케 하는 것이다.Therefore, the system 10 of the present invention derives a plurality of search word information through analysis of image information, derives search result information which is a search engine result value for each of the search word information, and displays it to the user 20, ) To obtain various search results from the input image information, thereby enabling to derive multiple results.

더불어 검색 결과를 도출하는 검색 엔진은 웹 검색 엔진 뿐 아니라 앱 검색 엔진을 포함할 수 있으며, 혹은 검색 엔진이 구비된 다양한 프로그램 등에서 이용될 수 있음은 물론이다.In addition, a search engine for deriving a search result may include an application search engine as well as a web search engine, or may be used in various programs provided with a search engine.

이와 같은 본 발명의 다중 결과 제공 기능을 구비한 이미지 검색 시스템(10)의 기본 구성 및 세부 구성을 도면과 함께 설명하면 다음과 같다.The basic configuration and detailed configuration of the image search system 10 having the multiple result providing function of the present invention will be described with reference to the drawings.

도 2는 본 발명의 시스템(10)의 기본 구성을 도시한 블록도이다.2 is a block diagram showing the basic configuration of the system 10 of the present invention.

도 2를 참조하여 설명하면, 본 발명의 다중 결과 제공 기능을 구비한 이미지 검색 시스템(10)은, 기본적으로 검색의 기반이 되는 기준인덱스를 입력받아 인덱스데이터베이스에 저장하는 인덱스서버(100);와, 유저(20)로부터 검색하고자 하는 이미지정보를 입력받는 이미지입력모듈(200); 및, 상기 기준인덱스를 기반으로 상기 이미지정보를 분석하여 상기 이미지정보로부터 적어도 두 개 이상의 검색어정보를 파악하는 검색어파악모듈(300);과, 상기 검색어정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하여 상기 유저(20)에게 디스플레이하는 검색결과산출모듈(400);을 기본적으로 포함하는 것을 특징으로 한다.2, an image search system 10 having a multi-result providing function according to the present invention basically includes an index server 100 receiving a reference index serving as a basis of a search and storing the received reference index in an index database, An image input module 200 receiving image information to be searched from the user 20; And a search term identification module (300) for analyzing the image information based on the reference index and grasping at least two search term information from the image information; and a search term identification module And a search result calculation module 400 for displaying the calculated search result to the user 20.

인덱스서버(100)는 검색의 기반이 되는 기준인덱스를 입력받아 인덱스데이터베이스에 저장하는 기능을 하는 것으로서, 이 때 기준인덱스라 함은 검색의 기반이 되는 것으로서, 검색을 위한 일반적인 텍스트키워드를 포함할 수 있으며, 보다 바람직하게는 다양한 기준이미지와 기준이미지에 대응되는 텍스트키워드를 함께 연동하여 저장한 것을 기준인덱스로 저장할 수도 있다.The index server 100 receives a reference index serving as a basis for the search and stores the index in the index database. The reference index refers to a base of the search, and may include a general text keyword for searching. More preferably, a plurality of reference images and a text keyword corresponding to the reference image may be stored together as a reference index.

본 발명에서는 이미지정보 업로드 기반의 이미지 검색이 수행되므로, 보다 바람직하게는 키워드 검색의 기준이 되는 기준이미지와 함께, 기준이미지와 연관된 텍스트키워드를 기준이미지와 연동 처리하여 그룹화한 키워드 그룹 등을 기준인덱스로 지정하여, 하나의 기준이미지 당 다양한 텍스트키워드 검색을 가능케 하는 것이 보다 바람직할 것이다.In the present invention, since the image search based on the image information upload is performed, it is more preferable that a group of keywords obtained by linking the text keywords associated with the reference image with the reference image, , It is more preferable to enable various text keyword searches per one reference image.

이미지입력모듈(200)은 유저(20)로부터 검색하고자 하는 이미지정보를 입력받는 기능을 수행하는 것으로서, 유저(20)는 검색을 통해 정보를 얻고자 하는 이미지인 이미지정보를 이미지입력모듈(200)을 이용하여 시스템(10)에 입력 처리한다.The image input module 200 functions to receive image information to be searched from the user 20. The user 20 transmits image information, which is an image to be searched through the search, to the image input module 200, And inputs it to the system 10.

이 때 이미지정보 입력을 위해서는 기본적으로 유저(20)가 가진 이미지파일 업로드 방식이 이용되는데, 이 때 업로드를 위한 이미지정보의 종류에는 제한을 두지 않으므로, bmp, jpg, jpeg, gif, tiff 등의 다양한 이미지 확장자를 지닌 이미지정보가 이미지입력모듈(200)을 통해 입력될 수 있음은 물론이다. 혹은 기 입력된 이미지정보에 대한 url 입력 방식 등을 통해 이미지입력모듈(200)에 이미지정보를 입력하는 것 역시 가능하다.At this time, in order to input image information, an image file uploading method of the user 20 is basically used. At this time, since there is no limitation on the type of image information for uploading, various types of image data such as bmp, jpg, jpeg, gif, It is needless to say that the image information having the image extension can be inputted through the image input module 200. Alternatively, it is also possible to input image information to the image input module 200 through a url input method for previously input image information.

검색어파악모듈(300)은 상기 기준인덱스를 기반으로 상기 이미지정보를 분석하여 상기 이미지정보로부터 적어도 두 개 이상의 검색어정보를 파악하는 기능을 수행하는 것으로서, 상술한 인덱스서버(100)에 저장된 기준인덱스를 기반으로 이미지정보를 분석하는 것이다. 이 때 상술한 설명에서와 같이 기준인덱스는 검색의 기준이 되는 기준이미지 및 기준이미지로부터 도출될 수 있는 텍스트키워드가 연동 처리되어 저장될 수 있다고 하였으므로, 검색어파악모듈(300)은 유저(20)로부터 입력받은 이미지정보를 상술한 기준인덱스를 기준으로 하여 분석 처리함으로써 도출된 텍스트키워드를 검색어정보로 파악하는 것이다.The search word identification module 300 analyzes the image information based on the reference index and grasps at least two pieces of search word information from the image information. The search word identification module 300 searches the reference index stored in the index server 100 And analyze the image information based on the image information. As described above, since the reference index, which is a reference of the search, and the text keyword that can be derived from the reference image can be interrelated and stored, the query recognition module 300 can acquire the keyword from the user 20 And analyzing the input image information based on the reference index as described above to grasp the derived text keyword as the search word information.

이는 상술한 예에서와 같이, 파블로 피카소의 “게르니카”에 대한 이미지정보를 유저(20)가 입력하였다고 할 시, 이미지정보의 작품명인 “게르니카”, 그리고 그 작가인 “파블로 피카소”, 게르니카가 소장된 곳인 “소피아왕비 미술센터” 등이 검색어정보가 되는 것이다. 이 때 하나의 이미지로부터 두 개 이상의 검색어정보를 파악함으로써 다양한 검색 결과를 도출할 수 있도록 함은 물론이다.This is because, as in the above-mentioned example, when the user 20 inputs image information of "Guernica" of Pablo Picasso, "Guernica" as the title of image information and "Pablo Picasso" And the "Queen Sofia Art Center", which became the site of the search. In this case, it is of course possible to derive various search results by grasping two or more search word information from one image.

검색결과산출모듈(400)은 상기 검색어정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하여 상기 유저(20)에게 디스플레이하는 기능을 수행하는 것으로서, 검색어파악모듈(300)로부터 파악된 검색어정보 각각에 대한 검색엔진 검색을 수행하고, 산출된 검색 결과인 검색결과정보를 유저(20)에게 디스플레이한다. 이 때 유저(20)는 스마트폰, PC, 태블릿PC 등의 기기를 통해 디스플레이된 검색결과정보를 제공받을 수 있다.The search result calculation module 400 calculates search result information, which is a search engine search result for each of the search word information, and displays the search result information to the user 20. The search result calculation module 400 searches the search word information Performs search engine search for each of the search results, and displays the search result information, which is the calculated search result, At this time, the user 20 can receive search result information displayed through a device such as a smart phone, a PC, and a tablet PC.

더불어 이와 같은 검색결과정보 산출 시, 복수의 유저(20)로부터 다양한 이미지정보를 제공한 뒤 그에 대한 답변정보를 입력받고, 해당 답변정보를 또 하나의 검색결과정보로서 유저(20)에게 디스플레이할 수도 있음은 물론이다. 이는 유저(20) 간의 정보 공유를 가능케 하는 구성으로서, 이를 통해 복수의 유저(20) 간의 상호 정보 공유 역시 가능할 수 있음은 물론이다.In addition, at the time of calculating the search result information, it is possible to provide various image information from a plurality of users 20, receive answer information therefrom, and display the answer information as another search result information to the user 20 Of course it is. It is a matter of course that it is possible to share information among users 20, and it is also possible to share mutual information among a plurality of users 20 through this.

도 3은 본 발명의 시스템(10)의 세부 구성을 도시한 블록도이다.3 is a block diagram showing a detailed configuration of the system 10 of the present invention.

도 3을 기본적으로 참조하여 본 발명의 다중 결과 제공 기능을 구비한 이미지 검색 시스템(10)에 포함되는 각 모듈의 세부 구성 및, 시스템(10)에 포함될 수 있는 추가 구성에 대해 설명하면 다음과 같다.3, the detailed configuration of each module included in the image search system 10 having the multiple result providing function of the present invention and the additional configuration that can be included in the system 10 will be described as follows .

먼저, 상기 인덱스서버(100)는, 복수의 상기 유저(20)로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 과거검색정보를 상기 인덱스데이터베이스에 더 저장할 수 있으며, 상기 시스템(10)은, 복수개의 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보에 대한 연관검색어정보를 산출하는 연관검색어산출부(510) 및, 상기 검색어정보 및 각각의 상기 검색어정보에 대응되는 상기 연관검색어정보를 합성 처리한 통합검색정보를 생성하여 저장하는 통합검색정보산출부(520)를 포함하는 통합검색어산출모듈(500);을 더 포함할 수 있고, 상기 검색결과산출모듈(400)은, 상기 통합검색정보 각각에 대한 검색엔진 검색 결과인 통합검색결과정보를 더 산출하여 상기 유저(20)에게 디스플레이할 수 있다.The index server 100 may further store past search information including the search word information and the search result information generated from a plurality of the users 20 in the index database, (510) for calculating related query information for the search term information based on a search frequency for each of a plurality of the past search information, and an association term calculation unit And an integrated search information calculation module 520 for generating and storing integrated search information obtained by synthesizing search word information, and the integrated search word calculation module 500 may include a search result calculation module 500, The integrated search result information, which is a search engine search result for each of the integrated search information, can further be calculated and displayed to the user 20.

인덱스서버(100)에 저장될 수 있는 과거검색정보에 대해 설명하면, 상기 인덱스서버(100)는 복수의 상기 유저(20)로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 과거검색정보를 상기 인덱스데이터베이스에 더 저장할 수 있다. 이는 검색 로그 저장에 관련한 것으로서, 복수의 상기 유저(20)가 본 발명의 이미지 검색 시스템(10)을 이용하여 검색을 수행한 정보, 즉 이미지정보로부터 산출된 검색어정보 및 그로부터 도출된 검색결과정보를 과거검색정보로서 인덱스데이터베이스에 저장하여 차후 검색에 이용할 수 있도록 한 것이다.The past search information that can be stored in the index server 100 will now be described. The index server 100 searches past search information including the search word information and the search result information generated from a plurality of the users 20, May be further stored in the index database. This is related to storing a search log, in which a plurality of the users 20 search for information using the image search system 10 of the present invention, that is, search word information calculated from image information and search result information derived therefrom It is stored in the index database as past search information so that it can be used for future search.

더불어 이 때 검색결과정보를 함께 저장하므로, 복수의 유저(20)들이 어떠한 검색결과정보에 대해 관심을 가졌는지에 대한 여부도 함께 파악할 수 있는데, 이를 위해서는 도출된 검색결과정보 중에서 유저(20)들이 선택한(클릭한) 검색결과정보에 대한 로그 등을 파악하여 함께 저장하는 것 역시 가능하다.In addition, since the search result information is stored together at this time, it is also possible to grasp whether or not the plurality of users 20 are interested in the search result information. To this end, It is also possible to grasp the log of the search result information (clicked) and store it together.

통합검색어산출모듈(500)은 복수개의 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보에 대한 연관검색어정보를 산출하고, 기 검색어정보 및 각각의 상기 검색어정보에 대응되는 상기 연관검색어정보를 합성 처리한 통합검색정보를 생성하여 저장하는 기능을 수행하는 것으로서, 이를 위해 연관검색어산출부(510)와 통합검색정보산출부(520)를 포함하여 구성된다.The integrated search word calculation module 500 calculates the related search word information for the search word information based on the search frequency for each of the plurality of past search information, and searches for the related search word information corresponding to each of the search word information The integrated search information calculating unit 510 and the integrated search information calculating unit 520 are configured to generate and store the integrated search information.

연관검색어산출부(510)는 복수개의 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보에 대한 연관검색어정보를 산출하는 기능을 수행하는 것으로서, 상술한 예시를 이어 설명하면, 파블로 피카소의 작품 “게르니카”에 대한 이미지정보 입력 시 검색어정보로서 “게르니카”, “파블로 피카소”가 산출되었다고 하였을 때, 상기 검색어정보와 관련된 검색어로서 검색빈도수가 높은 텍스트키워드가 “경매가격”일 경우, 경매가격이라는 텍스트키워드를 연관검색어정보로 산출한다.The related term search unit 510 calculates the related term information of the search term information based on the search frequency of each of the plurality of past search information. When a text keyword having a high search frequency as a search word related to the search word information is " auction price ", it is determined that auction price " auction price " As the related keyword information.

통합검색정보산출부(520)는 기 검색어정보 및 각각의 상기 검색어정보에 대응되는 상기 연관검색어정보를 합성 처리한 통합검색정보를 생성하여 저장하는 것으로서, 검색어정보 및 연관검색어정보를 합성 처리하여 통합검색정보를 생성하는 예시에 대해 설명하면 다음과 같다. 예를 들어 상술한 바와 같이 “게르니카”에 대한 연관검색어정보로서 “경매가격”이 산출되었을 경우, 이를 합성한 “게르니카 경매가격”을 통합검색정보로서 생성하여 저장하는 것이다.The integrated search information calculation unit 520 generates and stores integrated search information obtained by synthesizing the related keyword information corresponding to the keyword information and the keyword information. The integrated search information calculation unit 520 synthesizes the search word information and the associated keyword information, An example of generating search information will now be described. For example, when the "auction price" is calculated as the related search word information for "Guernica" as described above, the "Guernica auction price" synthesized with the "auction price" is generated and stored as integrated search information.

이와 같은 연관검색어정보 파악 및 이를 통한 통합검색정보 생성 및 저장 구성 시, 상기 검색결과산출모듈(400)은, 상기 통합검색정보 각각에 대한 검색엔진 검색 결과인 통합검색결과정보를 더 산출하여 상기 유저(20)에게 디스플레이할 수 있게 된다. 따라서 산출된 검색어정보를 기반으로 기본적으로 검색되는 검색결과정보 뿐 아니라, 생성된 통합검색정보에 대한 검색 결과인 통합검색결과정보를 산출하여 유저(20)에게 디스플레이함으로써 기본적인 검색 기능 뿐 아니라, 다른 유저(20)들의 검색빈도가 높은 연관검색어를 함께 검색하여 그 정보를 유저(20)에게 제공할 수 있게 된다. 따라서 유저(20)로 하여금 보다 다양한 검색 결과를 제공받을 수 있도록 함과 동시에, 연관검색어는 복수의 유저(20)의 과거검색정보를 기반으로 생성되는 것이므로, 유저(20)가 입력한 이미지정보와 관련된 키워드검색 중 다른 유저(20)들로부터 많이 검색된 결과를 함께 제공받을 수 있게 되는 것이다.In the configuration of generating and storing the integrated search information through the identification of the related keyword information, the search result calculation module 400 further calculates the integrated search result information, which is a search engine search result for each of the integrated search information, (20). Therefore, not only the basic search result information that is searched based on the calculated search word information but also the integrated search result information, which is the search result of the generated integrated search information, is displayed to the user 20, It is possible to retrieve the related search terms having a high search frequency of the search results 20 and provide the information to the user 20. Accordingly, the user 20 can be provided with various search results and the related search words are generated based on the past search information of the plurality of users 20. Therefore, It is possible to receive a result of a lot of searches from other users 20 during the related keyword search.

도 4는 본 발명의 외곽선 스캐닝 예시를 나타낸 개념도이다.4 is a conceptual diagram illustrating an example of the outline scanning of the present invention.

다음으로 검색어파악모듈(300)을 통해 수행되는 이미지정보 스캐닝 및 그에 따른 검색어정보 산출에 대한 상세 구성을 상술한 도 3 및 도 4와 함께 설명하면, 본 발명의 이미지 검색 시스템(10)에 포함되는 검색어파악모듈(300)은, 상기 이미지정보의 외곽선을 스캐닝하는 외곽선스캐닝부(310)와, 상기 외곽선을 이루는 외곽선픽셀 및, 상기 외곽선 내에 위치한 이미지픽셀에 대한 색상정보와 상기 외곽선정보를 포함하는 이미지인덱스를 산출하는 이미지인덱스산출부(320) 및, 상기 이미지인덱스를 상기 기준인덱스와 비교 처리하여 상기 이미지인덱스로부터 적어도 두 개 이상의 상기 검색어정보를 산출하는 검색어산출부(330)를 포함하여 구성될 수 있다.Next, the detailed configuration of the image information scanning performed according to the search word grasp module 300 and the calculation of the search term information according to the present invention will be described with reference to FIGS. 3 and 4, which are included in the image search system 10 of the present invention. The search word identification module 300 includes an outline scanning unit 310 for scanning an outline of the image information, an outline pixel forming the outline, an image including the outline information, An image index calculating unit 320 for calculating an index and a search word calculating unit 330 for calculating at least two pieces of the keyword information from the image index by comparing the image index with the reference index, have.

외곽선스캐닝부(310)는 상기 이미지정보의 외곽선을 스캐닝하는 것으로서, 이를 위해서는 이미지정보의 픽셀 크기를 적절하게 조절하거나, 그레이 스케일(gray scale) 이미지로 변환하여 별도로 저장할 수 있다. 이 때 그레이 스케일 이미지에 관련해서는 통상의 기술자가 용이하게 이용할 수 있는 것이므로 자세한 설명을 생략한다. 혹은 외곽선 스캐닝을 위해 비트맵 이미지에 대한 벡터화를 수행하여 외곽선을 보다 용이하게 스캐닝할 수도 있는데, 이를 위해서는 기존의 일러스트 변환 프로그램, 예를 들어 포토샵이나 일러스트레이터 등이 이용될 수 있다. 따라서 이러한 외곽선 스캐닝을 이용하여 이미지정보에 포함된 검색을 위한 이미지의 형태를 파악할 수 있는 것이다.The outline scanning unit 310 scans the outline of the image information. For this purpose, the outline scanning unit 310 may appropriately adjust the pixel size of the image information, convert the image information into a gray scale image, and separately store the gray scale image. In this case, since the gray scale image can be easily used by an ordinary technician, detailed description will be omitted. Alternatively, the outline may be scanned more easily by performing vectorization on the bitmap image for the outline scanning. For this purpose, an existing illustration conversion program, for example, Photoshop or Illustrator, can be used. Therefore, it is possible to grasp the shape of the image for the search included in the image information by using the outline scanning.

이미지인덱스산출부(320)는 상기 외곽선을 이루는 외곽선픽셀 및, 상기 외곽선 내에 위치한 이미지픽셀에 대한 색상정보와 상기 외곽선정보를 포함하는 이미지인덱스를 산출하는 기능을 수행하는 것으로서, 외곽선픽셀 및 이미지픽셀에 대한 색상정보를 기반으로 이미지정보에 대한 색상을 파악함과 동시에, 외곽선정보를 통해 이미지정보에 포함된 형태를 함께 저장하여 형태와 색상을 포함하는 이미지인덱스를 산출하는 것이다.The image index calculation unit 320 calculates the image index including the color information and the outline information about the outline pixels forming the outline and the image pixels located within the outline, The color of the image information is determined based on the color information of the color information, and the shape included in the image information is stored together with the outline information to calculate the image index including the shape and the color.

검색어산출부(330)는 상기 이미지인덱스를 상기 기준인덱스와 비교 처리하여 상기 이미지인덱스로부터 적어도 두 개 이상의 상기 검색어정보를 산출하는 기능을 수행하는 것으로서, 상술한 바와 같이 다양한 기준이미지와 기준이미지에 대응되는 텍스트키워드를 함께 연동하여 저장한 기준인덱스와 이미지인덱스의 비교 처리를 통해 이미지인덱스로부터 검색어정보를 산출하게 되는 것이다.The search word calculation unit 330 performs a function of calculating the at least two pieces of the keyword information from the image index by comparing the image index with the reference index. As described above, The search keyword information is calculated from the image index through comparison processing between the reference index and the image index stored together with the text keyword.

예를 들어 설명하면, 기준인덱스로서 축구공 형태의 이미지 및, “축구공”, “축구”, “공”이라는 텍스트키워드가 연동되어 있을 경우, 유저(20)가 업로드한 이미지정보로부터 추출된 이미지인덱스가 축구공과 유사한 형태 및 색상정보를 나타내는 경우 기준인덱스와의 비교 처리를 통해 “축구공”, “축구”, “공”이라는 검색어정보가 산출되게 된다.For example, when a soccer ball image and a text keyword "soccer ball", "soccer", and "ball" are interlocked with each other as a reference index, the image extracted from the image information uploaded by the user 20 When the index indicates the form and color information similar to the soccer ball, the keyword information such as "soccer ball", "soccer", and "ball" is calculated through comparison processing with the reference index.

다시 도 3으로 돌아가 본 발명의 이미지 검색 시스템(10)의 추가 구성에 대한 설명을 이어가도록 한다. 또 다른 추가 구성으로서, 상기 인덱스서버(100)는, 상기 유저(20)로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 기검색정보를 상기 인덱스데이터베이스에 더 저장할 수 있으며, 상기 검색어파악모듈(300)은, 상기 기준인덱스 및 상기 기검색정보를 기반으로 상기 이미지정보를 분석하여 상기 이미지정보로부터 적어도 두 개 이상의 검색어정보를 파악하도록 구성할 수 있다.Returning to FIG. 3, the description of the additional configuration of the image search system 10 of the present invention will be continued. In yet another embodiment, the index server 100 may further store in the index database the search information including the search word information and the search result information generated from the user 20, The module 300 may be configured to analyze the image information based on the reference index and the basic search information, and to grasp at least two or more search word information from the image information.

이는 개별 유저(20) 각각의 기검색정보를 기반으로 최적화된 검색 결과를 제공해주기 위한 구성으로서, 각각의 상기 유저(20)가 기존에 검색한 검색어정보 및 검색결과정보를 기검색정보로서 인덱스데이터베이스에 저장한 뒤, 이를 통해 검색어정보 파악에 이용할 수 있도록 한 것이다.This is a configuration for providing optimized search results based on the initial search information of each of the individual users 20, in which each of the users 20 searches the search word information and the search result information, And then used to grasp the search word information.

이는 이미지정보로부터 검색어정보를 파악하는데 유저(20)의 기 검색이력을 이용할 수 있도록 한 것이며, 이는 그동안 입력한 이미지정보로부터 도출된 검색어정보를 통해 유저(20)의 검색 성향이나 유저(20)의 관심 분야를 파악할 수 있으며, 특정 주제에 대해 반복적으로 이미지정보를 입력하고 검색을 수행하는 경우 검색어정보 추출 속도를 보다 빠르게 하는 것 역시 가능함은 물론이다.This is because it is possible to use the initial search history of the user 20 in order to grasp the search word information from the image information. This is because the search tendency of the user 20 through the search word information derived from the inputted image information, Of course, it is also possible to speed up the retrieval of the retrieval information when the retrieval of image information is repeatedly performed on a specific topic and the retrieval of interest can be performed.

더불어 이러한 경우 유저(20)의 기검색정보를 저장하여 파악할 수 있으므로, 특정 검색어정보에 대한 유저(20)의 검색빈도수 역시 파악할 수 있음은 물론이다. 따라서 이를 이용하여 검색빈도수가 높은 검색어정보에 대해서만 검색 결과가 산출되도록 상기 기검색정보 관련 구성을 보다 특화할 수 있는데, 이에 대해 설명하면 다음과 같다.In addition, in this case, since the initial search information of the user 20 can be stored and grasped, it is of course also possible to grasp the frequency of searches of the user 20 with respect to the specific query information. Therefore, the configuration related to the basic search information can be more specialized so that the search result is calculated only for the search term information having a high search frequency by using it.

상기 이미지 검색 시스템(10)은, 검색빈도수 기반의 레벨 설정 및 그에 따른 검색 결과 도출을 위해 상기 기검색정보의 검색빈도수를 기반으로 산출된 복수개의 상기 검색어정보 각각에 검색레벨을 부여하는 검색레벨부여부(610)와, 상기 검색레벨의 고저에 따라 상기 검색어정보를 검색대상정보와 비검색대상정보로 분류하는 검색대상분류부(620)를 포함하는 검색레벨설정모듈(600);을 더 포함할 수 있으며, 그에 따라 상기 검색결과산출모듈(400)은, 상기 검색대상정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하여 상기 유저(20)에게 디스플레이할 수 있다.The image search system (10) includes a search level unit (10) for assigning a search level to each of a plurality of the search word information calculated on the basis of the search frequency of the basic search information for level setting based on the search frequency, And a search target classifying unit 620 for classifying the search word information into search target information and non-search target information according to the search level of the search level (610) Accordingly, the search result calculation module 400 can calculate search result information, which is a search engine search result for each of the search target information, and display the search result information to the user 20.

검색레벨설정모듈(600)은 상기 기검색정보의 검색빈도수를 기반으로 산출된 복수개의 상기 검색어정보 각각에 검색레벨을 부여하고, 상기 검색레벨의 고저에 따라 상기 검색어정보를 검색대상정보와 비검색대상정보로 분류하는 기능을 수행하는 것으로서, 이를 위해 기본적으로 검색레벨부여부(610) 및 검색대상분류부(620)를 포함하여 구성된다.The search level setting module 600 assigns a search level to each of a plurality of the search word information calculated based on the search frequency of the pre-search information, and searches the search word information for search target information and non- And a search target classifying unit 620. The search target classifying unit 620 includes a search level assigning unit 610 and a search target classifying unit 620. [

검색레벨부여부(610)는 상기 기검색정보의 검색빈도수를 기반으로 산출된 복수개의 상기 검색어정보 각각에 검색레벨을 부여하는 기능을 수행하는 것으로서, 상술한 바와 같이 기검색정보에 포함된 것으로서 유저(20)로부터 기 검색된 검색어정보 각각에 대한 검색빈도수를 기반으로 복수개의 상기 검색어정보 각각에 검색레벨을 부여하게 된다. 이와 같은 구성시 검색빈도수 파악을 위해 검색 로그정보나 검색 로그에 따른 각각의 상기 검색어정보에 대한 검색빈도수가 집계되어 상술한 인덱스서버(100)에 저장될 수 있음은 물론이며, 집계된 검색빈도수를 기반으로 검색어정보 각각에 검색레벨이 부여되는 것이다.The search level assigning unit 610 functions to assign a search level to each of the plurality of search word information calculated based on the search frequency of the basic search information. As described above, The search level is given to each of the plurality of search word information based on the search frequency for each of the search word information searched for from the search server 20. In order to grasp the frequency of the search in such a configuration, the search frequency for each of the search word information according to the search log information or the search log may be aggregated and stored in the above-described index server 100, A search level is assigned to each of the search word information.

상술한 예시와 같이 축구공 형상의 이미지정보를 입력한 경우 “축구공”, “축구”, “공”이라는 검색어정보가 산출될 수 있음은 물론이며, 축구공에 포함된 색상인 “흰색”, “검은색”, 또는 “원형” 등의 형태 역시 검색어정보로서 산출될 수 있다. 이 때 기검색정보를 기반으로 이러한 “축구공”, “축구”, “공”, “흰색”, “검은색”, “원형” 등의 검색어정보 각각에 검색레벨을 부여할 수 있는 것이다.Quot; soccer ball " and " ball " can be calculated when image information of the soccer ball shape is input as in the above example, A form such as " black " or " circle " can also be calculated as keyword information. At this time, a search level can be assigned to each of the search word information such as "soccer ball", "football", "ball", "white", "black", "circular"

검색대상분류부(620)는 상기 검색레벨의 고저에 따라 상기 검색어정보를 검색대상정보와 비검색대상정보로 분류하는 기능을 수행하는 것이다. 상술한 예시를 이용하여 설명하면 부여된 검색레벨을 기반으로 상기 “축구공”, “축구”, “공”, “흰색”, “검은색”, “원형” 등의 검색어정보에 부여된 검색레벨의 고저에 따라 상술한 검색어정보를 검색대상정보와 비검색대상정보로 분류한다. 만약 “축구공”, “축구”, 의 검색레벨이 나머지 “공”, “흰색”, “검은색”, “원형”의 검색레벨보다 높은 경우, 기 설정된 기준에 따라 “축구공”과 “축구”를 검색대상정보로, 나머지를 비검색대상정보로 분류할 수 있다.The search target classification unit 620 performs a function of classifying the search word information into search target information and non-search target information according to the level of the search level. Description will be made with reference to the above-described example, and a description will be given of a retrieval level given to the retrieval word information such as "soccer ball", "soccer", "ball", "white", "black" The search word information is classified into search target information and non-search target information. If the retrieval level of " soccer ball ", " soccer ", is higher than the retrieval level of the remaining " ball ", " white ", "Quot; as search target information and the rest as non-search target information.

이러한 경우 상기 검색결과산출모듈(400)은 상기 검색대상정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하여 상기 유저(20)에게 디스플레이하게 되므로, 비검색대상정보로 분류된 검색어정보에 대한 검색결과정보는 유저(20)에게 디스플레이되지 않는다. 즉, 유저(20)가 기존에 검색한 빈도수가 많은 검색어정보에 대한 검색결과정보만을 차등적으로 제공할 수 있어, 유저(20)에게 맞도록 커스터마이징된 검색 결과를 제공할 수 있도록 하는 것이다.In this case, the search result calculation module 400 calculates the search result information, which is a search engine search result for each of the search object information, and displays the search result information to the user 20, The search result information is not displayed to the user 20. That is, the user 20 can differentially provide only the search result information about the search word information that has been searched for frequently, and can provide the customized search result to the user 20.

이에 더불어 이와 같은 검색레벨 설정 시 유저(20) 개인에 대한 과거 검색 이력 뿐 아니라, 본 발명의 시스템(10)을 이용하는 복수의 유저(20)의 검색 이력을 기반으로 검색레벨을 설정하도록 구성하는 것 역시 가능하다. 이를 위해, 상기 인덱스서버(100)는, 복수의 상기 유저(20)로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 과거검색정보를 상기 인덱스데이터베이스에 더 저장할 수 있으며, 상기 검색레벨부여부(610)는, 복수의 상기 기검색정보 및 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보 각각에 검색레벨을 차등 부여할 수 있다.In addition to this, it is possible to configure the retrieval level based on the retrieval history of the plurality of users 20 using the system 10 of the present invention, as well as the past retrieval history of the user 20 in setting the retrieval level It is also possible. To this end, the index server 100 may further store, in the index database, past search information including the search word information and the search result information generated from a plurality of the users 20, The determination unit 610 may differentially assign the search levels to the search word information based on the search frequency for each of the plurality of the previous search information and the past search information.

인덱스서버(100)에 저장될 수 있는 과거검색정보에 대해 설명하면, 상기 인덱스서버(100)는 복수의 상기 유저(20)로부터 기 생성된 상기 검색어정보 및 상기 검색결과정보를 포함하는 과거검색정보를 상기 인덱스데이터베이스에 더 저장할 수 있다. 이는 검색 로그 저장에 관련한 것으로서 상술한 인덱스서버(100)의 과거검색정보 저장 구성과 그 기능이 동일하므로 보다 상세한 설명을 생략하기로 한다.The past search information that can be stored in the index server 100 will now be described. The index server 100 searches past search information including the search word information and the search result information generated from a plurality of the users 20, May be further stored in the index database. This is related to the storage of the search log, and is the same as that of the above-described past search information storage configuration of the index server 100, and thus a detailed description thereof will be omitted.

이와 같은 과거검색정보 저장 구성 시, 검색레벨부여부(610)는 복수의 상기 기검색정보 및 상기 과거검색정보 각각에 대한 검색빈도수를 기반으로 상기 검색어정보 각각에 검색레벨을 차등 부여할 수 있는데, 이는 검색레벨 부여 시 기검색정보에 대한 검색빈도수 뿐 아니라 과거검색정보에 대한 검색빈도수를 참조할 수 있도록 한 것이다.In the past search information storage configuration, the search level assigning unit 610 can assign a search level to each of the search word information based on the search frequency for each of the plurality of the previous search information and the past search information, This makes it possible to refer to the frequency of search for the past search information as well as the search frequency for the search information when the search level is given.

따라서 이와 같은 구성을 통해 유저(20) 개인에 대한 과거 검색 이력 뿐 아니라, 본 발명의 시스템(10)을 이용하는 복수의 유저(20)의 검색 이력을 기반으로 검색레벨을 설정할 수 있게 되는 것이다.Accordingly, the search level can be set based on the search history of the plurality of users 20 using the system 10 of the present invention, as well as the past search history of the user 20 through the above-described configuration.

검색레벨에 대한 또 다른 추가 구성을 설명하면, 상기 검색레벨설정모듈(600)은, 상기 검색레벨의 고저에 따라 복수의 상기 검색대상정보에 대한 검색우선순위를 설정하는 검색우선순위설정부(630)를 더 포함할 수 있으며, 상기 검색결과산출모듈(400)은, 상기 검색대상정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하는 검색결과도출부(410) 및, 상기 검색우선순위에 따라 산출된 복수개의 상기 검색결과정보에 대한 노출레벨을 설정하는 노출레벨설정부(420)와, 상기 노출레벨에 따라 상기 검색결과정보를 순차적으로 상기 유저(20)에게 디스플레이하는 순차디스플레이부(430)를 더 포함할 수 있다.The search level setting module 600 may further include a search priority setting unit 630 for setting a search priority for a plurality of search target information according to the search level, The search result calculating module 400 may further include a search result deriving unit 410 for calculating search result information that is a search engine search result for each of the search target information, An exposure level setting unit 420 for setting an exposure level for a plurality of the search result information calculated according to the exposure level and a sequential display unit 430 for sequentially displaying the search result information according to the exposure level to the user 20 ).

검색레벨설정모듈(600)에 더 포함될 수 있는 검색우선순위설정부(630)는 상기 검색레벨의 고저에 따라 복수의 상기 검색대상정보에 대한 검색우선순위를 설정하는 것으로서, 비검색대상정보가 필터링되고 남은 검색대상정보에 대한 검색우선순위를 설정하여 검색대상정보에 대한 검색결과 차등 노출을 가능케할 뿐 아니라, 검색우선순위에 따라 복수개의 검색대상정보의 검색 순서를 지정할 수 있도록 한 구성이다.The search priority setting unit 630, which may be further included in the search level setting module 600, sets a search priority for a plurality of search target information according to the search level, A search priority for the remaining search target information is set to enable differential exposure of the search result to the search target information, and a search order of a plurality of search target information can be designated according to the search priority.

검색결과산출모듈(400)에 더 포함될 수 있는 검색결과도출부(410)는 상기 검색대상정보 각각에 대한 검색엔진 검색 결과인 검색결과정보를 산출하는 기능을 수행하는 것으로서, 이는 검색결과산출모듈(400)의 기본 구성과 유사하여 그를 참조하면 되나 검색대상정보에 대한 검색결과를 산출한다는 차이가 있다. 이 때 검색우선순위가 지정되어 있으므로, 검색우선순위를 기반으로 복수개의 검색대상정보에 대한 검색 결과를 순차적으로 도출할 수 있음은 물론이다.The search result derivation unit 410, which may be further included in the search result calculation module 400, calculates the search result information, which is a search engine search result for each of the search target information, 400), and the search result of the search target information is calculated. In this case, since the search priority is specified, the search results for a plurality of search target information can be derived sequentially based on the search priority.

노출레벨설정부(420)는 상기 검색우선순위에 따라 산출된 복수개의 상기 검색결과정보에 대한 노출레벨을 설정하는 기능을 수행하는 것으로서, 산출된 검색결과정보를 동시에 노출하는 것이 아닌 지정된 노출레벨에 따른 차등 노출을 가능케 하는 것이다.The exposure level setting unit 420 functions to set an exposure level for a plurality of the search result information calculated according to the search priority. The exposure level setting unit 420 sets the exposure level to a predetermined exposure level Thereby allowing for differential exposure.

순차디스플레이부(430)는 상기 노출레벨에 따라 상기 검색결과정보를 순차적으로 상기 유저(20)에게 디스플레이하는 것으로서, 순차적으로 디스플레이한다는 것은 예를 들어 노출레벨이 가장 높은 검색결과정보를 가장 먼저 노출시킴과 더불어 유저(20)에게 디스플레이되는 검색 결과 페이지의 최상단에 위치시키는 것이며, 그 후 노출레벨이 점점 낮아지는 순서로 검색결과정보를 노출시킴과 더불어 상기 검색 결과 페이지의 하단에 노출시키는 것이다.The sequential display unit 430 displays the search result information sequentially to the user 20 according to the exposure level. The sequential display means that the search result information having the highest exposure level is exposed first And exposes the search result information to the lower end of the search result page in the order of decreasing exposure level.

따라서 노출레벨에 따라 검색 결과 페이지에 노출되는 시간 및 배치되는 위치가 달라질 수 있어, 노출레벨이 높은 순서부터 유저(20)에게 가장 먼저 전달되는데, 이 때 노출레벨은 기검색정보 및 과거검색정보를 기반으로 하므로 유저(20) 개인에게 보다 커스터마이징된 검색어정보로부터 산출된 검색결과정보 및 복수의 유저(20)로부터의 검색빈도수가 높았던 검색어정보로부터 산출된 검색결과정보가 상단, 상위에 노출될 수 있다.Therefore, the exposure time and the location of the search result page may be different according to the exposure level, so that the exposure level is firstly transmitted to the user 20 from the highest exposure level. At this time, The search result information calculated from the more customized search word information and the search result information calculated from the search word information having a higher search frequency from the plurality of users 20 can be exposed to the top and the top .

도 5는 복수개의 이미지를 이용한 이미지 검색 예시를 나타낸 개념도이다.5 is a conceptual diagram illustrating an example of image retrieval using a plurality of images.

상술한 도 3과 함께 도 5를 참조하여 본 발명의 시스템(10)에 구비될 수 있는 또 다른 추가 구성에 대한 설명을 이어가도록 한다. 본 발명의 이미지 검색 시스템(10)은 기본적으로 단일 이미지정보를 입력하여 그에 대한 검색을 수행하는 것을 기본으로 하나, 유저(20)가 단일 이미지정보가 아닌 복수개의 이미지정보를 기반으로 검색을 수행하고자 할 수도 있다. 이 때 복수개의 이미지정보는 상호 연관이 있다는 것을 기본으로 하며, 예를 들어 특정 건물의 전면도 및 측면도가 그러한 예시가 된다.5, a description will be made of another additional configuration that may be provided in the system 10 of the present invention with reference to FIG. The image search system 10 of the present invention is basically based on a single image information input and performing a search on the single image information. However, when the user 20 performs a search based on a plurality of image information rather than a single image information You may. At this time, a plurality of pieces of image information are related to each other, for example, a front view and a side view of a specific building are examples.

이러한 복수개의 이미지정보에 대한 검색을 가능케 하는 구성으로서, 상기 이미지입력모듈(200)은, 상기 유저(20)로부터 검색의 대상이 되는 것으로서 기본이미지정보 및 상기 기본이미지정보에 관련된 적어도 하나 이상의 연관이미지정보를 포함하는 이미지정보를 입력받을 수 있고, 상기 검색어파악모듈(300)은, 상기 기준인덱스를 기반으로 상기 기본이미지정보를 분석하여 상기 기본이미지정보로부터 기본검색어정보를 파악하는 기본검색어파악부(340)와, 상기 기준인덱스를 기반으로 상기 연관이미지정보를 분석하여 상기 연관이미지정보로부터 관련검색어정보를 파악하는 관련검색어파악부(350) 및, 상기 기본검색어정보 및 상기 관련검색어정보를 비교 처리하여 최종검색어정보를 산출하는 최종검색어파악부(360)를 더 포함할 수 있으며, 상기 검색결과산출모듈(400)은, 상기 최종검색어정보에 대한 검색 결과인 검색결과정보를 산출하여 상기 유저(20)에게 디스플레이할 수 있다.The image input module 200 is configured to allow the user 20 to search for a plurality of pieces of image information, such as basic image information and at least one associated image related to the basic image information, The retrieval word recognition module 300 may include a basic keyword retrieval unit 300 for retrieving basic image information from the basic image information by analyzing the basic image information based on the reference index, (350) for analyzing the related image information based on the reference index and obtaining related query information from the related image information, and a comparing unit (350) for comparing the basic query information and the related query information And a final search word recognition unit 360 for calculating final search word information, The result calculation module 400 may calculate search result information, which is a search result for the final search word information, and display the search result information to the user 20.

복수개의 이미지정보로부터 이미지 검색을 가능케 하기 위하여 상기이미지입력모듈(200)은, 상기 유저(20)로부터 검색의 대상이 되는 것으로서 기본이미지정보 및 상기 기본이미지정보에 관련된 적어도 하나 이상의 연관이미지정보를 포함하는 이미지정보를 입력받을 수 있는데, 이 때 기본이미지정보와 연관이미지정보는 상호 연관이 있는 이미지로서, 상술한 바와 같이 특정 건물의 전면도와 측면도, 혹은 특정 인물의 정면 사진 및 측면 사진 등이 기본이미지정보와 연관이미지정보가 될 수 있다. 더불어 기본이미지정보가 하나의 이미지이라고 가정하였을 때, 연관이미지정보는 단일 이미지일 수도 있으며, 혹은 연관이미지정보로서 2개 이상의 이미지파일이 이용될 수도 있음은 물론이다.The image input module 200 includes basic image information and at least one associated image information related to the basic image information as a search target from the user 20 in order to enable image search from a plurality of pieces of image information In this case, the basic image information and the associated image information are related to each other. As described above, the front and side views of a specific building, or the front and side photographs of a specific person are included in the basic image Information and associated image information. In addition, when the basic image information is assumed to be one image, the associated image information may be a single image, or two or more image files may be used as associated image information.

검색어파악모듈(300)에 추가로 포함될 수 있는 기본검색어파악부(340)는 상기 기준인덱스를 기반으로 상기 기본이미지정보를 분석하여 상기 기본이미지정보로부터 기본검색어정보를 파악하는 기능을 수행하는 것으로서, 이 때 기본이미지정보의 분석에 대해서는 검색어파악모듈(300)의 기본 구성과 그 구조 및 기능이 유사하므로 기본 기능에 대한 상세한 설명을 생략하도록 한다.The basic keyword recognition unit 340, which may be additionally included in the keyword recognition module 300, performs a function of analyzing the basic image information based on the reference index and grasping basic keyword information from the basic image information, At this time, since the basic structure of the query recognition module 300 is similar to that of the basic image information, the detailed description of the basic functions will be omitted.

또한 이 때 기본이미지정보로부터 다수의 기본검색어정보가 추출될 수 있는 바, 상기 기준인덱스를 기반으로 상기 기본이미지정보로부터 기본검색어정보를 파악하여 이를 리스트화한 기본검색어리스트를 생성하는 것도 가능하다. 이는 특히 다양한 기본검색어정보가 산출될 수 있는 경우, 즉 한 이미지정보 안에 다양한 키워드를 내포하는 경우 후술할 비교 처리를 위해 보다 유용하게 이용될 수 있다.Also, since a plurality of basic query information can be extracted from the basic image information at this time, it is also possible to generate a basic query word list obtained by recognizing basic query information from the basic image information based on the reference index and listing the basic query information. This can be more advantageously used for comparison processing, which will be described later, particularly when various basic keyword information can be calculated, i.e., when various keywords are included in one image information.

검색어파악모듈(300)에 추가로 포함될 수 있는 관련검색어파악부(350)는 상기 기준인덱스를 기반으로 상기 연관이미지정보를 분석하여 상기 연관이미지정보로부터 관련검색어정보를 파악하는 기능을 수행하는 것으로서, 이 역시 상술한 검색어파악모듈(300)의 기본 구성 및 기본검색어파악부(340)의 구성과 그 구조 및 기능이 유사하다.The related keyword recognition unit 350, which may be additionally included in the keyword recognition module 300, performs a function of analyzing the related image information based on the reference index and recognizing related query information from the associated image information, The basic structure of the keyword query module 300 and the structure and functions of the basic query term grasping part 340 are similar to those of the keyword query module 300 described above.

더불어 관련검색어파악부(350)의 경우에도 연관이미지정보로부터 다수의 관련검색어정보가 추출될 수 있는 바, 상기 기준인덱스를 기반으로 상기 연관이미지정보로부터 관련검색어정보를 파악하여 관련검색어리스트를 생성하여 후술할 비교 처리를 위해 보다 용이하게 이용할 수 있도록 구성할 수 있는 것이다.In addition, in the case of the related term retrieving unit 350, a plurality of related retrieval information can be extracted from the related image information. Based on the reference index, related retrieval information is grasped from the related image information to generate a related retrieval list It can be configured to be more easily used for comparison processing to be described later.

최종검색어파악부(360)는 상기 기본검색어정보 및 상기 관련검색어정보를 비교 처리하여 최종검색어정보를 산출하는 기능을 수행하는 것으로서, 이 때 기본검색어정보 및 관련검색어정보는 각각 기본이미지정보와 연관이미지정보로부터 산출된 검색어정보이다. 이 때 기본이미지정보와 연관이미지정보가 다수의 정보, 즉 다수의 키워드를 포함하여 산출된 기본이미지정보 및 관련이미지정보 역시 그 수가 다양할 경우, 상술한 기본검색어리스트와 관련검색어리스트를 생성한 뒤 이를 비교 처리하는 것이 보다 데이터 처리 속도를 높일 뿐 아니라 데이터 처리 효율 역시 높일 수 있다.The final search word recognition unit 360 performs a function of calculating the final search word information by comparing the basic search word information and the related search word information. In this case, the basic search word information and the related search word information are respectively associated with basic image information and associated image information Is the search word information calculated from the information. If the basic image information and related image information include a plurality of pieces of information, that is, basic image information and related image information calculated by including a plurality of keywords, the basic keyword list and the related keyword list are generated Comparing these can not only increase data processing speed but also increase data processing efficiency.

이 때 생성된 기본검색어리스트 및 관련검색어리스트의 비교 처리 방식에는 제한을 두지 않으므로 다양한 비교 처리 방식을 통해 최종검색어정보를 산출할 수 있으나, 바람직하게는 상기 기본검색어리스트와 상기 관련검색어리스트를 비교 처리하여 유사도를 산출한 뒤, 상기 유사도의 고저에 따라 상기 최종검색어정보를 산출할 수 있다.Since there is no restriction on the comparison processing method of the basic query word list and the related query word list generated at this time, the final query word information can be calculated through various comparison processing methods. Preferably, the basic query word list and the related query word list are compared And the final search word information can be calculated according to the degree of similarity.

만약 이 때 상술한 바와 같이 기본검색어리스트와 관련검색어리스트에 포함된 기본검색어정보 및 관련검색어정보의 수가 방대한 경우 이러한 유사도 산출을 위해 서버 상에서 많은 시간을 소요하게 되는데, 이러한 문제를 해결하기 위해 본 발명의 시스템(10)은 유사도 산출을 위해 최소 가중치가 적용된 다음의 수학식 1을 적용하였다. 따라서 다음의 수학식 1을 통해 산출된 유사도의 고저에 따라 상기 기본검색어리스트에 포함된 기본검색어정보 및 상기 관련검색어리스트에 포함된 관련검색어정보로부터 최종검색어정보가 산출된다.If the number of basic query information and related query information included in the basic query word list and related query word list is large as described above, it takes a lot of time on the server to calculate the similarity. In order to solve this problem, The system 10 of the present invention applies the following Equation 1 to which the minimum weight is applied for calculating the degree of similarity. Therefore, the final search word information is calculated from the basic search word information included in the basic search word list and the related search word information included in the related search word list according to the degree of similarity calculated by the following equation (1).

수학식 1,

Equation 1,

(여기서,

는 기본검색어리스트에 포함된 전체 기본검색어정보의 수,

은 관련검색어리스트에 포함된 전체 관련검색어정보의 수,

는 기본검색어리스트에 포함된 기본검색어정보 중 관련검색어정보와 중복되는 중복검색어정보의 수,

은 관련검색어리스트에 포함된 관련검색어정보 중 기본검색어정보와 중복되는 중복검색어정보의 수이다.)(here,

The number of all basic search word information included in the basic search word list,

The number of all related query information included in the related query list,

The number of duplicate search word information that is duplicated with the related search word information among the basic search word information included in the basic search word list,

Is the number of duplicate search word information that is duplicated with the basic search word information among related search word information included in the related search word list.)

이 때 수학식 1에서는 최소 가중치를 적용한 뒤 그 값에 log를 취하여 나타내게 되므로, 방대한 양의 기본검색어정보 및 관련검색어정보로 인해 산출된 유사도 값이 과도하게 크게 나오는 것을 방지할 수 있으며, 전체 기본검색어정보 및 관련검색어의 수 대비 중복검색어의 수를 각각 구하므로 유사도 산출의 정확성을 보다 높일 수 있음은 물론이다.In this case, since the minimum weight is applied in Equation (1) and the value is represented by taking log, it is possible to prevent an excessive increase in the similarity value calculated by the vast amount of basic query information and related query information, It is needless to say that the accuracy of the similarity calculation can be further improved by obtaining the number of duplicate search terms relative to the number of information and related search terms.

삭제delete

지금까지 설명한 바와 같이, 본 발명에 따른 다중 결과 제공 기능을 구비한 이미지 검색 시스템(10)의 구성 및 작용을 상기 설명 및 도면에 표현하였지만 이는 예를 들어 설명한 것에 불과하여 본 발명의 사상이 상기 설명 및 도면에 한정되지 않으며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능함은 물론이다.As described above, the configuration and operation of the image retrieval system 10 having a multiple result providing function according to the present invention are described in the above description and drawings, but the present invention is not limited thereto. It is to be understood that the invention is not limited to those precise embodiments and that various changes and modifications may be made therein without departing from the spirit of the invention.

10 : 시스템 20 : 유저
100 : 인덱스서버 200 : 이미지입력모듈
300 : 검색어파악모듈 310 : 외곽선스캐닝부
320 : 이미지인덱스산출부 330 : 검색어산출부
340 : 기본검색어파악부 350 : 관련검색어파악부
360 : 최종검색어파악부 400 : 검색결과산출모듈
410 : 검색결과도출부 420 : 노출레벨설정부
430 : 순차디스플레이부 440 : 기본검색결과산출부
450 : 변조검색결과산출부 500 : 통합검색어산출모듈
510 : 연관검색어산출부 520 : 통합검색정보산출부
600 : 검색레벨설정모듈 610 : 검색레벨부여부
620 : 검색대상분류부 630 : 검색우선순위설정부10: System 20: User
100: index server 200: image input module
300: query term identification module 310: outline scanning section
320: image index calculation unit 330: search word calculation unit
340: basic search word recognition unit 350: related search word recognition unit
360: final search word recognition unit 400: search result calculation module
410: Search result derivation unit 420: Exposure level setting unit
430: sequential display unit 440: basic search result calculation unit
450: Modulation Search Result Calculation Unit 500: Integrated Query Calculation Module
510: Associated keyword search unit 520: Integrated search information calculation unit
600: Search level setting module 610:
620: Search target classification unit 630: Search priority setting unit

Claims

An image retrieval system having a multiple result providing function,
An index server for receiving a reference index serving as a basis of the search and storing the index in an index database;
An image input module for receiving image information to be searched from a user;
A query recognition module for analyzing the image information based on the reference index and grasping at least two query word information from the image information;
And a search result calculation module for calculating search result information that is a search engine search result for each of the search word information and displaying the search result information to the user,
The index server comprises:
Storing the search information including the search word information and the search result information generated by the user in the index database,
The search word identification module,
Analyzing the image information based on the reference index and the basic search information to grasp at least two search word information from the image information,
The system comprises:
A search level assigning unit that assigns a search level to each of a plurality of the search word information calculated based on the search frequency of the basic search information, and a search level assigning unit that selects the search word information as search target information and non- And a search level setting module including a search target classifying section to classify the search target classifying section,
Wherein the search result calculation module comprises:
The search result information being a search engine search result for each of the search target information is calculated and displayed to the user.

The method according to claim 1,
The index server comprises:
Further storing, in the index database, past search information including the search word information and the search result information generated from a plurality of users,
The system comprises:
An associated search word calculation unit for calculating the related search word information for the search word information based on the search frequency for each of the plurality of past search information,
And an integrated search information calculation module for generating and storing integrated search information obtained by synthesizing the search word information and the associated search word information corresponding to each of the search word information,
Wherein the search result calculation module comprises:
Wherein the integrated search result information, which is a search engine search result for each of the integrated search information, is further calculated and displayed to the user.

The method according to claim 1,
The search word identification module,
An outline scanning unit scanning the outline of the image information and storing the outline information as outline information,
An image index calculating unit for calculating an image index including the color information and the outline information for the outline pixel forming the outline and the image pixel located within the outline,
Further comprising: a query term calculation unit for comparing the image index with the reference index and calculating at least two query word information from the image index.

delete

The method according to claim 1,
The index server comprises:
Further storing, in the index database, past search information including the search word information and the search result information generated from a plurality of users,
The retrieval level assigning unit,
Wherein a search level is differentially assigned to each of the search word information based on a search frequency for each of a plurality of the previous search information and the past search information.

The method according to claim 1,
Wherein the search level setting module comprises:
Further comprising a search priority setting unit configured to set a search priority for a plurality of pieces of the search target information according to the level of the search level,
Wherein the search result calculation module comprises:
A search result deriving unit for calculating search result information that is a search engine search result for each of the search target information,
An exposure level setting unit for setting an exposure level for a plurality of the search result information calculated according to the search priority;
And a sequential display unit sequentially displaying the search result information according to the exposure level to the user.

The method according to claim 1,
The image input module includes:
Receiving image information including basic image information and at least one associated image information related to the basic image information as a search target from the user,
The search word identification module,
A basic keyword retrieving unit for retrieving basic keyword information from the basic image information by analyzing the basic image information based on the reference index;
An associated keyword retrieving unit for retrieving related keyword information from the related image information by analyzing the related image information based on the reference index;
Further comprising a final search word recognition unit for comparing the basic search word information and the related search word information to calculate final search word information,
Wherein the search result calculation module comprises:
Wherein the search result information, which is a search result of the final search word information, is calculated and displayed to the user.

9. The method of claim 8,
The basic-term-
Generating a basic query list by grasping basic query information from the basic image information based on the reference index,
The related-
Acquiring related query information from the related image information based on the reference index, and generating a related query list,
The final search word recognition unit,
The similarity degree is calculated by comparing the basic query word list and the related query word list, and then, based on the basic query word information included in the basic query word list and the related query word information included in the related query word list, And the final search term information is calculated by the final search term information.

10. The method of claim 9,
The final search word recognition unit,
Wherein the degree of similarity is calculated through the following Equation (1) to which the minimum weight is applied.
Equation 1,

(here,

The number of all related query information included in the related query list,

delete