KR20200024539A

KR20200024539A - Providing Method of information related to an image searching and service device thereof

Info

Publication number: KR20200024539A
Application number: KR1020180101346A
Authority: KR
Inventors: 김기현; 김하윤
Original assignee: 십일번가 주식회사
Priority date: 2018-08-28
Filing date: 2018-08-28
Publication date: 2020-03-09

Abstract

Disclosed are an image search-related information recommendation method, and a service device supporting the same. The service device comprises: a server communication circuit; and a server processor functionally connected to the server communication circuit. The server processor can be set to form a communication channel with a user terminal based on the server communication circuit, receive a query image related to an image search from the user terminal, collect first product information corresponding to a search object included in the query image and at least a part of contents, as additional information, from second product information which is the same types as the first product information and has the at least a part of contents different from the first product information, and transmit at least one of the first product information and the additional information to the user terminal.

Description

Providing method of information related to an image searching and service device

본 발명은 이미지 검색과 관련하여, 다양한 정보 제공 장치들의 정보들 중 동일 상품에 대한 정보를 그룹핑하여 사용자에게 제공할 수 있는 이미지 검색과 관련한 정보 제공 방법 및 이를 지원하는 서비스 장치에 관한 것이다.The present invention relates to an image providing method for providing an image search related to an image search that can be provided to a user by grouping information on the same product among information of various information providing apparatuses, and a service device supporting the same.

인터넷 사용이 보편화되면서 사용자들은 인터넷 검색을 통하여 다양한 정보를 획득할 수 있게 되었다. 즉, 사용자들은 인터넷에의 접속이 가능한 개인용 컴퓨터 등의 단말 장치를 통해 인터넷 검색 사이트에 접속한 후, 뉴스, 지식, 게임, 커뮤니티 등과 관련된 각종 컨텐츠를 검색할 수 있게 되었다. As the use of the Internet has become more common, users can obtain various information through Internet searches. That is, after accessing an Internet search site through a terminal device such as a personal computer capable of accessing the Internet, users can search for various contents related to news, knowledge, games, communities, and the like.

한편, 통신 기술의 발달 및 저장 장치의 대용량화에 따라, 인터넷 상에는 텍스트 형식의 문서뿐만 아니라, 사진, 동영상 등과 같은 이미지를 포함하는 문서들의 검색 비율이 급격히 증가하게 되었는데, 근래에 급격히 확산되고 있는 개인 블로그 문화의 영향으로 이미지 이용의 증가 속도가 더욱 심화되고 있다. 이에 따라, 인터넷 상에 다양한 형태로 저장된 이미지에 대한 검색 수요가 급증하고 있다. On the other hand, with the development of communication technology and the increase in the capacity of storage devices, the search rate of documents including images such as photographs and videos as well as text-type documents on the Internet has been rapidly increased. Due to the influence of culture, the increase in the use of image is intensifying. Accordingly, the search demand for images stored in various forms on the Internet is rapidly increasing.

한편, 온라인을 통하여 상품을 판매하기 위하여 포털 서비스 장치에 상품 정보를 제공하는 다양한 정보 제공 장치들은 서로 다른 종류의 상품을 판매하기도 하지만, 종류가 동일한 상품을 판매하기도 한다. 이때, 각 정보 제공 장치들마다 종류가 동일한 상품임에도 불구하고 서로 다른 상품 관련 이미지들 또는 서로 다른 설명 정보 등을 서비스 장치에 등록할 수 있기 때문에, 사용자 입장에서는 동일 상품이라 하더라도 검색된 상품 정보 확인 과정에서 종류가 다른 상품으로 오인하는 문제가 있었다. 또한, 정보 제공 장치마다 등록한 상품 정보 중에 어떤 상품 정보는 상품의 이해를 쉽게 하지만, 어떠한 상품 정보는 상품 이해를 어렵게 하기 때문에, 사용자 입장에서 상품에 대한 이해를 위해 많은 양의 검색을 수행해야 하는 번거로움이 있었다.Meanwhile, various information providing apparatuses that provide product information to a portal service apparatus for selling products online may sell different kinds of products, but may also sell products of the same kind. In this case, even though the information is the same type for each information providing device, different product-related images or different description information can be registered in the service device. There was a problem of misunderstanding the product as a different kind. In addition, since some product information among the product information registered for each information providing device makes it easier to understand the product, and some product information makes the product difficult to understand, it is a hassle that a user needs to perform a large amount of searches to understand the product. There was a feeling.

미국 등록 특허 8,832,096호 (명칭: Query-dependent image similarity)US registered patent 8,832,096 (name: Query-dependent image similarity)

본 발명은 이미지 검색과 관련한 정보 제공 과정에서, 동일한 종류의 상품 정보를 그룹핑하여 제공함으로써, 상품의 종류에 대한 오인식을 줄일 수 있고, 상품 정보 검색을 보다 용이하고 신속하게 할 수 있도록 하는 이미지 검색과 관련한 정보 제공 방법 및 이를 지원하는 서비스 장치를 제공하고자 한다.According to the present invention, in the process of providing information related to image search, by providing the same kind of product information by grouping, it is possible to reduce misperception about the kind of the product, and to search the product information more easily and quickly. It is intended to provide a related information providing method and a service device supporting the same.

본 발명의 실시 예에 따른 서비스 장치는 서버 통신 회로 및 상기 서버 통신 회로와 기능적으로 연결되는 서버 프로세서를 포함할 수 있다. 상기 서버 프로세서는 상기 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하고, 상기 사용자 단말로부터 이미지 검색과 관련한 쿼리 이미지를 수신하고, 상기 쿼리 이미지에 포함된 검색용 객체에 대응하는 제1 상품 정보 및 상기 제1 상품 정보와 동일 종류이며 적어도 일부 내용이 다른 제2 상품 정보로부터 상기 적어도 일부 내용을 추가 정보로 수집하고, 상기 제1 상품 정보 및 상기 추가 정보 중 적어도 하나를 상기 사용자 단말에 전송하도록 설정될 수 있다.The service apparatus according to an exemplary embodiment of the present invention may include a server communication circuit and a server processor operatively connected to the server communication circuit. The server processor forms a communication channel with a user terminal based on the server communication circuit, receives a query image related to an image search from the user terminal, and first product information corresponding to a search object included in the query image. And collecting the at least some content as additional information from second commodity information of the same kind as the first product information and having at least some contents different from each other and transmitting at least one of the first product information and the additional information to the user terminal. Can be set.

여기서, 상기 서버 프로세서는 동일 종류의 상품 정보들 중 가장 낮은 가격 정보를 포함한 상품 정보를 상기 제1 상품 정보로 검출하도록 설정될 수 있다.Here, the server processor may be configured to detect, as the first product information, product information including the lowest price information among product information of the same type.

특히, 상기 서버 프로세서는 동일 종류의 상품 정보들 중 상기 제1 상품 정보의 가격 정보보다 차순위로 낮은 가격 정보를 포함한 상품 정보를 상기 제2 상품 정보로 검출하도록 설정될 수 있다.In particular, the server processor may be configured to detect, as the second commodity information, commodity information including price information which is lower than the price information of the first commodity information among the same kind of commodity information.

또한, 상기 추가 정보는 상기 제1 상품 정보에 포함된 상품 관련 이미지들과 다른 적어도 하나의 다른 상품 관련 이미지 및 상기 제1 상품 정보에 포함된 텍스트 정보들과 다른 적어도 하나의 다른 텍스트 정보 중 적어도 하나를 포함할 수 있다.The additional information may be at least one of at least one other product related image different from the product related images included in the first product information and at least one other text information different from the text information included in the first product information. It may include.

한편, 상기 서버 프로세서는 상기 제1 상품 정보를 상기 사용자 단말에 제공하고, 상기 사용자 단말로부터 상기 추가 정보 요청을 수신하는 경우, 상기 추가 정보를 상기 사용자 단말에 전송하도록 설정될 수 있다.The server processor may be configured to provide the first product information to the user terminal and to transmit the additional information to the user terminal when receiving the request for the additional information from the user terminal.

본 발명의 실시 예에 따른 서비스 장치는 서버 통신 회로 및 상기 서버 통신 회로와 기능적으로 연결되는 서버 프로세서를 포함하고, 여기서, 상기 서버 프로세서는 상기 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하고, 상기 사용자 단말로부터 이미지 검색과 관련한 쿼리 이미지를 수신하고, 상기 쿼리 이미지에 포함된 검색용 객체에 대응하는 제1 상품 정보 및 상기 제1 상품 정보와 동일 종류이며 적어도 일부 내용이 다른 제2 상품 정보를 통합한 통합 상품 정보를 생성하고, 상기 통합 상품 정보를 상기 사용자 단말에 전송하도록 설정될 수 있다.The service apparatus according to an embodiment of the present invention includes a server communication circuit and a server processor operatively connected to the server communication circuit, wherein the server processor forms a communication channel with a user terminal based on the server communication circuit. And receiving, from the user terminal, a query image related to image search, first product information corresponding to a search object included in the query image, and second product information of the same kind and at least some different contents from the first product information. May be configured to generate integrated product information incorporating the integrated product information and transmit the integrated product information to the user terminal.

상기 서버 프로세서는 상기 제1 상품 정보에 포함된 상품 관련 이미지들과 상기 제2 상품 정보에 포함된 상품 관련 이미지들 중 중복된 이미지들을 제외시킨 통합 상품 관련 이미지들을 생성하도록 설정될 수 있다.The server processor may be configured to generate integrated product related images excluding duplicate images among the product related images included in the first product information and the product related images included in the second product information.

또한, 상기 서버 프로세서는 상기 제1 상품 정보에 포함된 텍스트 정보와 상기 제2 상품 정보에 포함된 텍스트 정보 중 중복된 정보를 제외시킨 통합 텍스트 정보를 생성하도록 설정될 수 있다.The server processor may be configured to generate the integrated text information excluding duplicate information among the text information included in the first product information and the text information included in the second product information.

본 발명의 실시 예에 따른 이미지 검색과 관련한 정보 제공 방법은 서비스 장치가, 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하는 단계, 상기 사용자 단말로부터 이미지 검색과 관련한 쿼리 이미지를 수신하는 단계, 상기 쿼리 이미지에 포함된 검색용 객체에 대응하는 제1 상품 정보 및 상기 제1 상품 정보와 동일 종류이며 적어도 일부 내용이 다른 제2 상품 정보로부터 상기 적어도 일부 내용을 추가 정보로 수집하는 단계, 상기 제1 상품 정보 및 상기 추가 정보 중 적어도 하나를 상기 사용자 단말에 전송하는 단계를 포함할 수 있다.In accordance with another aspect of the present invention, there is provided a method of providing information related to an image search, the method including: establishing, by a service apparatus, a communication channel with a user terminal based on a server communication circuit; Collecting the at least some content as additional information from first commodity information corresponding to the search object included in the query image and second commodity information of the same kind as the first commodity information, and at least part of which is different from each other. The method may include transmitting at least one of the product information and the additional information to the user terminal.

본 발명의 실시 예에 따른 이미지 검색과 관련한 정보 제공 방법은 서비스 장치가, 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하는 단계, 상기 사용자 단말로부터 이미지 검색과 관련한 쿼리 이미지를 수신하는 단계, 상기 쿼리 이미지에 포함된 검색용 객체에 대응하는 제1 상품 정보 및 상기 제1 상품 정보와 동일 종류이며 적어도 일부 내용이 다른 제2 상품 정보를 통합한 통합 상품 정보를 생성하는 단계, 상기 통합 상품 정보를 상기 사용자 단말에 전송하는 단계를 포함할 수 있다.In accordance with another aspect of the present invention, there is provided a method of providing information related to an image search, the method including: establishing, by a service apparatus, a communication channel with a user terminal based on a server communication circuit; Generating integrated product information incorporating first product information corresponding to the search object included in the query image and second product information of the same kind and at least partially different from each other, the integrated product information It may include the step of transmitting to the user terminal.

본 발명은 이미지 검색과 관련한 정보 제공 기능과 관련하여, 동일 종류의 상품 정보들을 그룹핑하여 제공함으로써, 상품 정보 검색을 보다 용이하게 함과 아울러, 검색 시간을 단축하고 상품 정보들 간의 상호 비교를 간단하게 수행할 수 있도록 지원한다. According to the present invention, in relation to the information providing function related to image search, by grouping the same kind of product information, the product information can be easily searched, the search time can be shortened, and the mutual comparison between product information can be simplified. Support to do it.

기타, 본 발명의 다른 효과들은 후술하는 다양한 실시 예들에 의해 제공될 수 있다.In addition, other effects of the present invention may be provided by various embodiments described below.

도 1은 본 발명의 실시 예에 따른 이미지 검색 시스템이 적용된 환경의 일 예를 나타낸 도면이다.
도 2는 본 발명의 실시 예에 따른 사용자 단말 구성의 일 예를 나타낸 도면이다.
도 3은 본 발명의 실시 예에 따른 서비스 장치 구성의 일 예를 나타낸 도면이다.
도 4는 본 발명의 실시 예에 따른 이미지 검색 시스템의 구성 간 신호 흐름의 한 예를 나타낸 도면이다.
도 5는 본 발명의 실시 예에 따른 상품 관련 이미지 DB의 갱신과 관련한 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.
도 6은 본 발명의 실시 예에 따른 사용자 단말의 이미지 검색을 지원하는 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.
도 7은 본 발명의 실시 예에 따른 정보 제공 기능과 관련한 사용자 인터페이스의 일 예를 나타낸 도면이다.1 is a diagram illustrating an example of an environment to which an image search system according to an exemplary embodiment of the present invention is applied.
2 is a diagram illustrating an example of a user terminal configuration according to an exemplary embodiment of the present invention.
3 is a diagram illustrating an example of a configuration of a service device according to an exemplary embodiment of the present invention.
4 is a diagram illustrating an example of a signal flow between components of an image retrieval system according to an exemplary embodiment of the present invention.
5 is a diagram illustrating an example of an operation method of a service apparatus associated with updating of a product-related image DB according to an exemplary embodiment of the present invention.
6 is a diagram illustrating an example of an operating method of a service apparatus that supports image search of a user terminal according to an exemplary embodiment of the present invention.
7 is a diagram illustrating an example of a user interface associated with an information providing function according to an exemplary embodiment of the present invention.

이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Hereinafter, various embodiments of the present invention will be described with reference to the accompanying drawings. It is to be understood, however, that the intention is not to limit the invention to particular embodiments, but to cover various modifications, equivalents, and / or alternatives to the embodiments of the invention. In connection with the description of the drawings, similar reference numerals may be used for similar components.

도 1은 본 발명의 실시 예에 따른 이미지 검색 시스템이 적용된 환경의 일 예를 나타낸 도면이다.1 is a diagram illustrating an example of an environment to which an image search system according to an exemplary embodiment of the present invention is applied.

도 1을 참조하면, 본 발명의 실시 예에 따른 서비스 시스템(10)은 적어도 하나의 단말을 포함하는 사용자 단말(100), 서비스 장치(200), 적어도 하나의 정보 제공 장치(300) 및 네트워크(50)를 포함할 수 있다.1, a service system 10 according to an exemplary embodiment of the present invention may include a user terminal 100 including at least one terminal, a service device 200, at least one information providing device 300, and a network ( 50).

상기 본 발명이 적용되는 네트워크(50)는, 인터넷 망과 같은 IP 기반의 유선 통신망뿐만 아니라, LTE(Long term evolution) 망, WCDMA 망과 같은 이동통신망, Wi-Fi망과 같은 다양한 종류의 무선망, 및 이들의 조합으로 이루어질 수 있다. 즉, 본 발명에 따른 이미지 검색 기능 제공 시스템은, 유무선 통신망에 구별 없이 모두 적용될 수 있다. 구체적으로 상기 네트워크(50)는 서비스 장치(200)와 사용자 단말(100) 간의 통신 채널, 서비스 장치(200)와 적어도 하나의 정보 제공 장치(300) 간의 통신 채널을 형성할 수 있다. 예를 들어, 상기 네트워크(50)는 서비스 장치(200) 또는 사용자 단말(100), 또는 적어도 하나의 정보 제공 장치(300)가 운용할 수 있는 3G, 4G, 5G 무선 이동 통신 방식 중 적어도 하나의 방식을 지원할 수 있다. 또는, 상기 네트워크(50)는 유선 기반으로 상기 사용자 단말(100)과 상기 서비스 장치(200) 간의 통신 채널 또는 서비스 장치(200)와 적어도 하나의 정보 제공 장치(300) 간의 통신 채널을 형성할 수 있다. 이러한 네트워크(50)는 현재 개발되어 상용화되었거나 향후 개발되어 상용화될 각종 유선망, 무선망 및 이들의 결합망을 포함하는 개념으로 해석되어야 한다.The network 50 to which the present invention is applied includes not only an IP-based wired communication network such as the Internet network, but also a long term evolution (LTE) network, a mobile communication network such as a WCDMA network, and various types of wireless networks such as a Wi-Fi network. , And combinations thereof. That is, the image search function providing system according to the present invention can be applied to both wired and wireless communication networks without distinction. In more detail, the network 50 may form a communication channel between the service device 200 and the user terminal 100 and a communication channel between the service device 200 and the at least one information providing device 300. For example, the network 50 may include at least one of 3G, 4G, and 5G wireless mobile communication methods that may be operated by the service device 200, the user terminal 100, or the at least one information providing device 300. It can support the method. Alternatively, the network 50 may form a communication channel between a radio based the user terminal 100 and the service device 200, a communication channel or service device 200 and the at least one information providing unit (300) between the have. Such a network 50 should be interpreted as a concept including various wired networks, wireless networks, and combination networks thereof that are currently developed and commercialized, or may be developed and commercialized in the future.

상기 적어도 하나의 정보 제공 장치(300)는 서비스 장치(200)와 통신 채널을 형성하고, 서비스 장치(200) 요청에 따라 또는 정보 제공 업자(예: Seller 또는 상품 판매 업자)의 조작에 따라 상품 정보를 서비스 장치(200)에 제공할 수 있다. 정보 제공 장치(300)들은 동일한 종류의 상품에 대하여 적어도 일부 내용이 다른 상품 정보를 서비스 장치(200)에 제공할 수 있다. 예를 들어, 특정 정보 제공 장치가 모자에 대한 제1 상품 관련 이미지를 포함하는 상품 정보를 서비스 장치(200)에 제공할 때, 다른 정보 제공 장치는 동일한 모자에 대해 제2 상품 관련 이미지를 포함하는 상품 정보를 서비스 장치(200)에 제공할 수 있다. 이와 관련하여, 상기 정보 제공 장치(300)는 통신 회로, 메모리, 카메라, 입력 장치, 디스플레이 및 프로세서를 포함하고, 각 구성들을 기반으로 상품 피사체에 대한 이미지를 획득하고, 획득된 이미지를 서비스 장치(200)에 제공할 수 있다. 추가적으로 상기 정보 제공 장치(300)는 입력 장치 등을 통해 입력된 텍스트 정보를 상기 상품 관련 이미지와 함께 상품 정보로서 상기 서비스 장치(200)에 제공할 수 있다. 한편, 상술한 설명에서는 정보 제공 장치(300)와 사용자 단말(100)은 구분하여 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 상기 정보 제공 장치(300)와 사용자 단말(100)은 역할에 따라 구분한 것으로, 상기 정보 제공 장치(300)를 운용하는 관리자가 서비스 장치(200)에서 상품을 구매하거나 검색할 경우 사용자 단말 역할을 수행할 수 있다. The at least one information providing device 300 establishes a communication channel with the service device 200, and provides the product information according to the request of the service device 200 or the operation of an information provider (eg, a seller or a product seller). May be provided to the service apparatus 200. The information providing apparatuses 300 may provide, to the service apparatus 200, commodity information having at least some different contents with respect to the same kind of commodities. For example, when a specific information providing device provides product information including the first product related image for a hat to the service device 200, the other information providing device includes a second product related image for the same hat. The product information may be provided to the service device 200. In this regard, the information providing device 300 includes a communication circuit, a memory, a camera, an input device, a display, and a processor, and acquires an image of a merchandise subject based on each component, and obtains the acquired image from the service device. 200). In addition, the information providing apparatus 300 may provide text information input through an input device to the service apparatus 200 together with the product related image as product information. Meanwhile, in the above description, the information providing apparatus 300 and the user terminal 100 are described separately, but the present invention is not limited thereto. The information providing apparatus 300 and the user terminal 100 are classified according to their roles. When the administrator who operates the information providing apparatus 300 purchases or searches for a product in the service apparatus 200, the information providing apparatus 300 and the user terminal 100 serve as the user terminal. Can be done.

상기 사용자 단말(100)은 네트워크(50)를 통하여 서비스 장치(200)와 통신 채널을 형성할 수 있다. 예를 들어, 상기 사용자 단말(100)은 이미지 검색 기능과 관련하여 서비스 장치(200)와 통신 채널을 형성할 수 있다. 이와 관련하여, 상기 사용자 단말(100)은 이미지 검색 기능과 관련한 어플리케이션 또는 이미지 검색 기능을 제공할 수 있는 웹 브라우저를 저장 및 설치할 수 있다. 사용자 단말(100)은 서비스 장치(200)로부터 이미지 검색 기능과 관련한 데이터 예컨대, 이미지 검색 관련 가상 페이지 또는 웹 페이지를 서비스 장치(200)로부터 수신하고, 출력할 수 있다. 또는, 사용자 단말(100)은 이미지 검색 기능과 관련한 어플리케이션 실행 화면을 출력할 수 있다. 사용자 단말(100)은 이미지 검색과 관련한 쿼리 이미지(예: 카메라를 이용하여 촬영한 이미지 또는 메모리에 기 저장된 이미지 등)를 서비스 장치(200)에 전송하고, 서비스 장치(200)로부터 검색 결과를 수신하여 저장 및 표시할 수 있다. 특히, 본 발명의 사용자 단말(100)은 서비스 장치(200)로부터 정보 제공 장치(300)들이 제공한 동일한 종류의 상품 정보를 그룹핑한 그룹핑 정보를 수신할 수 있다. 또는, 상기 사용자 단말(100)은 특정 정보 제공 장치가 제공한 상품 정보를 디스플레이에 출력하고, 이후 사용자의 추가 요청에 따라 동일한 종류의 상품에 대해 다른 정보 제공 장치(300)가 제공한 상품 정보를 서비스 장치(200)로부터 수신하여 출력할 수 있다. 또는, 사용자 단말(100)은 동일 종류의 상품에 대해 복수의 정보 제공 장치(300)들이 제공한 상품 정보들 중 중복되지 않은 상품 정보들을 그룹핑한 그룹핑 정보를 수신하여 출력할 수 있다. 상기 그룹핑 정보는 예컨대, 상품 관련 이미지 정보 및 상품을 설명하는 텍스트 정보를 포함할 수 있다. 상술한 사용자 단말(100)은 이미지 검색이 가능한 전자 장치로서, 스마트폰이나 태블릿 PC, 데스크탑 PC, 통신 회로가 장착된 카메라 등 다양한 장치들이 될 수 있다. The user terminal 100 may establish a communication channel with the service apparatus 200 through the network 50. For example, the user terminal 100 may establish a communication channel with the service device 200 in relation to the image search function. In this regard, the user terminal 100 may store and install a web browser capable of providing an application or an image search function related to an image search function. The user terminal 100 may receive and output data related to an image search function from the service apparatus 200, for example, an image search related virtual page or a web page, from the service apparatus 200. Alternatively, the user terminal 100 may output an application execution screen related to the image search function. The user terminal 100 transmits a query image (eg, an image photographed using a camera or an image previously stored in a memory) related to the image search to the service apparatus 200 and receives a search result from the service apparatus 200. Can be stored and displayed. In particular, the user terminal 100 of the present invention may receive grouping information in which the same type of product information provided by the information providing apparatus 300 is grouped from the service apparatus 200. Alternatively, the user terminal 100 outputs the product information provided by a specific information providing apparatus on a display, and then displays the product information provided by the other information providing apparatus 300 for the same kind of product according to a user's additional request. It may be received from the service device 200 and output. Alternatively, the user terminal 100 may receive and output grouping information grouping non-overlapping product information among the product information provided by the plurality of information providing apparatuses 300 for the same kind of product. The grouping information may include, for example, product related image information and text information describing a product. The user terminal 100 is an electronic device capable of searching for an image and may be various devices such as a smartphone, a tablet PC, a desktop PC, and a camera equipped with a communication circuit.

상기 서비스 장치(200)는 상기 네트워크(50)를 통하여 사용자 단말(100)과 통신 채널을 형성하고, 사용자 단말(100)의 이미지 검색 기능을 지원할 수 있다. 예를 들어, 서비스 장치(200)는 연결된 사용자 단말(100)에 이미지 검색 관련 가상 페이지를 제공하고, 사용자 단말(100)로부터 적어도 하나의 객체를 포함하는 쿼리 이미지를 수신할 수 있다. 상기 서비스 장치(200)는 수신된 쿼리 이미지를 기반으로 이미지 검색을 수행하고, 검색 결과를 사용자 단말(100)에 제공할 수 있다. 특히, 상기 서비스 장치(200)는 적어도 하나의 정보 제공 장치(300)로부터 다양한 상품 정보를 제공받고, 이를 기반으로 상품 관련 이미지 DB(Database)를 갱신할 수 있다. 이 과정에서, 상기 서비스 장치(200)는 복수의 정보 제공 장치(300)들로부터 동일한 종류의 상품에 대하여 내용의 적어도 일부가 다른 상품 정보들을 수신할 수 있다. 상기 서비스 장치(200)는 수신된 상품 정보들을 기반으로 그룹핑 정보를 생성할 수 있다. 상기 서비스 장치(200)는 사용자 단말(100)의 이미지 검색 요청에 대응하여 상기 그룹핑 정보를 검색 결과로서 사용자 단말(100)에 제공할 수 있다. The service device 200 may establish a communication channel with the user terminal 100 through the network 50, and support an image search function of the user terminal 100. For example, the service device 200 may provide an image search related virtual page to the connected user terminal 100 and receive a query image including at least one object from the user terminal 100. The service device 200 may perform an image search based on the received query image and provide the search result to the user terminal 100. In particular, the service device 200 may receive various product information from at least one information providing device 300 and update a product related image DB based thereon. In this process, the service device 200 may receive product information that differs in at least a part of the content of the same kind of goods from the plurality of information providing devices 300. The service device 200 may generate grouping information based on the received product information. The service device 200 may provide the grouping information to the user terminal 100 as a search result in response to an image search request of the user terminal 100.

상술한 바와 같이, 본 발명의 실시 예에 따른 이미지 검색과 관련한 정보 제공 시스템은 정보 제공 장치(300)들이 제공한 상품 정보들을 종류에 따라 분류하고, 동일 종류의 상품 정보들을 그룹핑하여 저장 관리하며, 사용자 단말(100)의 이미지 검색 요청에 대응하여 그룹핑된 상품 정보들을 사용자 단말(100)에 제공함으로써, 동일 종류의 상품 정보 검색을 용이하게 할 수 있도록 지원한다. 또한, 본 발명의 정보 제공 시스템은 정보 제공 장치(300)들이 등록한 상품 가격들을 그룹핑 정보를 기반으로 손쉽게 비교 분석할 수 있도록 함으로써, 사용자가 합리적 가격에 상품을 구매할 수 있도록 지원할 수 있다. As described above, the information providing system related to image search according to an embodiment of the present invention classifies the product information provided by the information providing apparatus 300 according to the type, stores and manages the same type of product information, By providing the product information grouped in response to the image search request of the user terminal 100 to the user terminal 100, it is possible to facilitate the search for the same kind of product information. In addition, the information providing system of the present invention can support the user to purchase a product at a reasonable price by allowing the information providing apparatus 300 to easily compare and analyze the product prices registered based on the grouping information.

이하, 상술한 사용자 단말(100) 및 서비스 장치(200)의 세부 구성과 운용에 대하여 다양한 예를 설명하기로 한다.Hereinafter, various examples of the detailed configuration and operation of the user terminal 100 and the service device 200 described above will be described.

도 2는 본 발명의 실시 예에 따른 사용자 단말 구성의 일 예를 나타낸 도면이다.2 is a diagram illustrating an example of a user terminal configuration according to an exemplary embodiment of the present invention.

도 2를 참조하면, 본 발명의 실시 예에 따른 사용자 단말(100)은 통신 회로(110), 입력 장치(120), 메모리(130), 디스플레이(140) 및 프로세서(150)를 포함할 수 있다. 또한, 상기 사용자 단말(100)은 카메라(190)를 더 포함할 수 도 있다.Referring to FIG. 2, a user terminal 100 according to an embodiment of the present invention may include a communication circuit 110, an input device 120, a memory 130, a display 140, and a processor 150. . In addition, the user terminal 100 may further include a camera 190.

상기 통신 회로(110)는 네트워크(50)와 통신 채널을 형성하고, 네트워크(50)를 기반으로 이미지 검색 기능과 관련한 데이터를 서비스 장치(200)와 송수신할 수 있다. 예컨대, 통신 회로(110)는 이미지 검색 기능과 관련한 가상 페이지를 서비스 장치(200)로부터 수신하고, 획득된 쿼리 이미지를 서비스 장치(200)에 전송하고, 검색 결과를 서비스 장치(200)로부터 수신할 수 있는 통신 기능을 지원할 수 있다. 상술한 동작에서, 상기 통신 회로(110)는 프로세서(150) 제어에 대응하여 서비스 장치(200)로부터 그룹핑된 상품 정보들을 검색 결과로서 수신할 수 있다. 상기 통신 회로(110)는 3G, 4G, 5G 등의 원거리 무선 통신 네트워크 기반의 통신 채널을 형성하거나, 와이파이 등의 근거리 통신 네트워크 기반의 통신 채널을 형성할 수 있다. The communication circuit 110 may establish a communication channel with the network 50, and transmit / receive data related to an image search function with the service device 200 based on the network 50. For example, the communication circuit 110 may receive a virtual page related to an image search function from the service device 200, transmit the obtained query image to the service device 200, and receive a search result from the service device 200. Can support the communication function. In the above-described operation, the communication circuit 110 may receive product information grouped from the service device 200 as a search result in response to the control of the processor 150. The communication circuit 110 may form a communication channel based on a long distance wireless communication network such as 3G, 4G, 5G, or may form a communication channel based on a short range communication network such as Wi-Fi.

상기 입력 장치(120)는 사용자 단말(100) 조작과 관련한 사용자 입력을 수신할 수 있다. 예를 들어, 상기 입력 장치(120)는 서비스 장치(200) 접속을 위해 필요한 텍스트 입력(예: 주소 정보) 또는 어플리케이션 실행 아이콘 등을 선택할 수 있는 버튼 키 또는 가상 버튼 키, 음성 입력 기능 등을 지원할 수 있다. 상기 입력 장치(120)는 쿼리 이미지 선택과 관련한 사용자 입력, 쿼리 이미지 전송을 위한 사용자 입력 등을 수신하여, 프로세서(150)에 전달할 수 있다. 또는, 상기 입력 장치(120)는 쿼리 이미지에 포함된 적어도 하나의 객체를 선택하는 사용자 입력을 수신하여, 프로세서(150)에 전달할 수 있다. 터치 기능의 디스플레이(140)는 입력 장치(120)로서 기능할 수 있다. 또한, 상기 입력 장치(110)는 서비스 장치(200)로부터 수신된 검색 결과를 확인하기 위한 입력 신호를 사용자 조작에 대응하여 생성할 수 있다. 또한, 상기 입력 장치(120)는 추가 정보 요청을 위한 입력 신호를 사용자 조작에 대응하여 생성할 수 있다.The input device 120 may receive a user input related to the operation of the user terminal 100. For example, the input device 120 may support a button key or a virtual button key or a voice input function for selecting text input (eg, address information) or an application execution icon required to access the service device 200. Can be. The input device 120 may receive a user input related to query image selection, a user input for transmitting a query image, and transmit the same to the processor 150. Alternatively, the input device 120 may receive a user input for selecting at least one object included in the query image, and transmit the received user input to the processor 150. The touch function display 140 may function as the input device 120. In addition, the input device 110 may generate an input signal for confirming a search result received from the service device 200 in response to a user operation. In addition, the input device 120 may generate an input signal for requesting additional information in response to a user operation.

상기 메모리(130)는 사용자 단말(100) 운용과 관련한 데이터 또는 응용 프로그램 등을 저장할 수 있다. 예를 들면, 상기 메모리(130)는 이미지 검색 프로그램(또는 어플리케이션) 또는 이미지 검색 기능을 지원하는 웹 브라우저를 저장할 수 있다. 메모리(130)는 카메라(190)가 획득하고 서비스 장치(200)에 전송할 적어도 하나의 쿼리 이미지를 저장할 수 있다. 또는, 메모리(130)는 외부 전자 장치 예컨대, 특정 이미지 검색이 가능한 웹 서버 장치로부터 다운로드하여 검색을 위해 서비스 장치(200)에 제공될 수 있는 쿼리 이미지를 저장할 수 있다. 또는, 메모리(130)는 서비스 장치(200)로부터 수신된 검색 결과를 저장(예: 임시 또는 반영구 저장)할 수 있다. 또한, 메모리(130)는 서비스 장치(200)로부터 수신한 추가 정보를 저장할 수 있다. 상기 메모리(130)에 저장된 검색 결과 또는 추가 정보는 사용자 요청에 따라 디스플레이(140)에 출력될 수 있다. The memory 130 may store data or application programs related to the operation of the user terminal 100. For example, the memory 130 may store an image search program (or application) or a web browser supporting an image search function. The memory 130 may store at least one query image acquired by the camera 190 and transmitted to the service device 200. Alternatively, the memory 130 may store a query image that may be downloaded from an external electronic device, for example, a web server device capable of searching for a specific image, and provided to the service device 200 for searching. Alternatively, the memory 130 may store a search result received from the service device 200 (eg, temporary or semi-permanent storage). In addition, the memory 130 may store additional information received from the service device 200. The search result or additional information stored in the memory 130 may be output to the display 140 according to a user request.

상기 디스플레이(140)는 사용자 단말(100) 운용과 관련한 적어도 하나의 화면을 출력할 수 있다. 예를 들어, 상기 디스플레이(140)는 이미지 검색 기능 실행에 따른 실행 화면, 서비스 장치(200) 접속 화면(예: 가상 페이지 표시 화면), 쿼리 이미지 선택 화면, 검색 결과 수신 화면, 추가 정보 수신 화면 등을 출력할 수 있다. 상기 검색 결과 수신 화면은 예컨대 그룹핑된 상품 정보들을 정보 제공 장치별로 구분하여 표시한 화면을 포함할 수 있다. 상기 추가 정보 수신 화면은 쿼리 이미지가 표시된 영역, 검색 결과가 표시된 영역 및 추가 정보가 표시된 영역을 포함할 수 있다. The display 140 may output at least one screen related to the operation of the user terminal 100. For example, the display 140 may include an execution screen according to the execution of an image search function, a service device 200 connection screen (for example, a virtual page display screen), a query image selection screen, a search result reception screen, an additional information reception screen, and the like. You can output The search result reception screen may include, for example, a screen in which grouped product information is divided and displayed for each information providing device. The additional information receiving screen may include an area where a query image is displayed, an area where a search result is displayed, and an area where additional information is displayed.

상기 프로세서(150)는 사용자 단말(100) 운용과 관련한 데이터의 처리 또는 전달을 수행할 수 있다. 예를 들어, 프로세서(150)는 입력 장치(120)를 통해 입력되는 사용자 입력에 대응하여 이미지 검색 프로그램(예: 또는 특정 상품 검색 어플리케이션 또는 웹 브라우저)을 실행할 수 있다. 이와 관련하여, 프로세서(150)는 상기 통신 회로(110)를 이용하여 서비스 장치(200)와 통신 채널을 형성하고, 상기 서비스 장치(200)로부터 이미지 검색 관련 가상 페이지를 수신할 수 있다. The processor 150 may process or transmit data related to the operation of the user terminal 100. For example, the processor 150 may execute an image search program (eg, a specific product search application or a web browser) in response to a user input input through the input device 120. In this regard, the processor 150 may establish a communication channel with the service device 200 using the communication circuit 110 and receive an image search related virtual page from the service device 200.

상기 프로세서(150)는 사용자 입력에 의해 선택된 적어도 하나의 쿼리 이미지를 서비스 장치(200)에 전송할 수 있다. 예를 들어, 사용자 단말(100)이 카메라(190)를 더 포함하는 경우, 상기 프로세서(150)는 사용자 입력에 대응하여 카메라(190)를 활성하고, 지정된 객체를 포함하는 쿼리 이미지 획득을 수행할 수 있다. 또는, 프로세서(150)는 메모리(130)에 저장된 복수의 이미지들 중 쿼리 이미지로 사용할 이미지를 선택하는 선택 화면을 제공할 수 있다. 이 동작에서 프로세서(150)는 복수의 쿼리 이미지들을 썸네일 형태로 출력할 수 있다. 상기 프로세서(150)는 특정 썸네일을 선택하는 사용자 입력이 발생하는 경우, 선택된 썸네일을 전체 화면을 출력하면서, 쿼리 이미지 선택 완료 여부를 확인할 수 있다. 상기 프로세서(150)는 쿼리 이미지 선택을 위한 사용자 입력이 발생하면, 선택된 쿼리 이미지를 통신 회로(110)를 기반으로 서비스 장치(200)에 전송할 수 있다.The processor 150 may transmit at least one query image selected by the user input to the service device 200. For example, when the user terminal 100 further includes a camera 190, the processor 150 activates the camera 190 in response to a user input and performs a query image acquisition including a specified object. Can be. Alternatively, the processor 150 may provide a selection screen for selecting an image to be used as a query image among a plurality of images stored in the memory 130. In this operation, the processor 150 may output a plurality of query images in thumbnail form. When a user input for selecting a particular thumbnail occurs, the processor 150 may check whether the query image selection is completed while outputting the selected thumbnail in full screen. When a user input for selecting a query image occurs, the processor 150 may transmit the selected query image to the service device 200 based on the communication circuit 110.

상기 쿼리 이미지는 복수의 상품 관련 객체를 포함할 수 있다. 상기 프로세서(150)는 사용자 입력에 따라 복수의 상품 관련 객체 중 어느 하나를 선택할 수 있다. 또는, 상기 프로세서(150)는 복수의 상품 관련 객체 중 ROI(region of interest) 객체를 자동으로 선택할 수 있다. 상기 ROI 객체는 예컨대, 쿼리 이미지의 중심부에 위치한 객체를 포함할 수 있다. 또는, 상기 ROI 객체는 쿼리 이미지에 포함된 복수의 객체들 중 일정 이상의 크기를 가지는 객체를 포함할 수 있다. 또는, ROI 객체는 가장 큰 크기를 가지는 객체를 포함할 수 있다. 또는, ROI 객체는 촬영 이미지에서 포커싱된 객체를 포함할 수 있다. 또는, ROI 객체는 검출된 복수의 객체들 중 사용자 입력에 의해 선택된 적어도 하나의 객체를 포함할 수 있다. The query image may include a plurality of product related objects. The processor 150 may select any one of a plurality of product-related objects according to a user input. Alternatively, the processor 150 may automatically select a region of interest (ROI) object among a plurality of product-related objects. The ROI object may include, for example, an object located at the center of the query image. Alternatively, the ROI object may include an object having a predetermined size or more among a plurality of objects included in the query image. Alternatively, the ROI object may include the object having the largest size. Alternatively, the ROI object may include an object focused in the captured image. Alternatively, the ROI object may include at least one object selected by user input among the plurality of detected objects.

상기 프로세서(150)는 서비스 장치(200)로부터 검색 결과의 적어도 일부를 수신할 수 있다. 프로세서(150)는 수신된 검색 결과의 적어도 일부를 출력할 수 있다. 상기 검색 결과는 예컨대, 복수의 정보 제공 장치(300)들이 제공한 상품 정보들을 그룹핑한 정보를 포함할 수 있다. 상기 프로세서(150)는 사용자 입력에 따라 그룹핑한 상품 정보들을 디스플레이(160)에 출력할 수 있다. 이 동작에서, 상기 프로세서(150)는 일부 상품 정보들을 디스플레이(160)에 출력하고, 사용자 입력(예: 스크롤 입력 등)에 대응하여 나머지 상품 정보들을 디스플레이(160)에 출력할 수 있다. 상기 프로세서(150)는 사용자 입력에 따라 그룹핑된 상품 정보들을 재정렬할 수 있다. 이와 관련하여, 프로세서(150)는 그룹핑된 상품 정보들을 재정렬하기 위한 사용자 입력이 발생하면, 사용자 입력에 따른 재정렬 조건을 서비스 장치(200)에 전송하고, 서비스 장치(200)로부터 재정렬된 그룹핑된 상품 정보를 수신하여 출력할 수 있다. 예를 들어, 프로세서(150)는 서비스 장치(200)에 가격 순 정렬을 요청하는 메시지를 사용자 입력에 대응하여 전송하고, 서비스 장치(200)로부터 가격 순으로 정렬된 그룹핑된 상품 정보를 수신하여 디스플레이(160)에 출력할 수 있다. The processor 150 may receive at least a portion of a search result from the service device 200. The processor 150 may output at least a portion of the received search result. The search result may include, for example, information grouping product information provided by the plurality of information providing apparatuses 300. The processor 150 may output product information grouped according to a user input to the display 160. In this operation, the processor 150 may output some product information to the display 160 and output the remaining product information to the display 160 in response to a user input (eg, a scroll input). The processor 150 may rearrange grouped product information according to a user input. In this regard, when a user input for reordering grouped product information occurs, the processor 150 transmits a reordering condition according to the user input to the service device 200, and the grouped goods reordered from the service device 200. The information can be received and output. For example, the processor 150 transmits a message for requesting price order to the service device 200 in response to a user input, and receives and displays grouped product information sorted by price from the service device 200. And output to 160.

다른 예시로서, 상기 프로세서(150)는 정보 제공 장치(300)들이 등록한 상품 정보들을 부분적으로 합성한 합성 정보를 서비스 장치(200)로부터 수신할 수 있다. 상기 합성 정보는 상품 관련 이미지 정보 및 텍스트 정보를 포함할 수 있다. 상기 상품 관련 이미지 정보는 동일 종류에 속하는 복수의 상품 정보들로부터 추출된 이미지들을 포함할 수 있다. 상기 상품 관련 이미지 정보는 상기 복수의 상품 정보들 중 중복된 이미지들이 제거된 형태를 가질 수 있다. 상기 텍스트 정보는 동일 종류에 속하는 복수의 상품 설명 정보들로부터 추출된 텍스트를 포함할 수 있다. 상기 텍스트 정보는 중복된 내용은 제거된 형태를 가질 수 있다. 상기 프로세서(150)는 합성 정보 수신 후, 일부 정보만을 디스플레이(160)에 출력하고, 사용자 입력에 대응하여 나머지 정보들을 출력할 수 있다. 또한, 프로세서(150)는 합성 정보 중 사용자 입력에 따라 상품 관련 이미지들을 디스플레이(160)에 표시하거나 또는 텍스트 정보를 디스플레이(160)에 출력할 수 있다. As another example, the processor 150 may receive, from the service device 200, composite information obtained by partially composing product information registered by the information providing apparatus 300. The synthesis information may include product related image information and text information. The product related image information may include images extracted from a plurality of product information belonging to the same type. The product related image information may have a form in which duplicate images of the plurality of product information are removed. The text information may include text extracted from a plurality of product description information belonging to the same type. The text information may have a form in which duplicated content is removed. After receiving the synthesis information, the processor 150 may output only some information to the display 160 and output the remaining information in response to a user input. In addition, the processor 150 may display product-related images on the display 160 or output text information on the display 160 according to a user input of the synthesis information.

한편, 상술한 설명에서는, 사용자 단말(100)이 서비스 장치(200)에 접속하여 상품 관련 이미지 검색을 수행하고, 서비스 장치(200)로부터 그룹핑된 상품 정보를 수신하는 것으로 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 상기 사용자 단말(100)은 사용자의 목적에 따라 정보 제공 장치가 될 수도 있다. 예컨대, 사용자 단말(100)은 사용자 조작에 대응하여 카메라(190)를 이용하여 상품 관련 이미지를 수집하고, 입력 장치(120)를 통하여 텍스트 정보를 수집한 후, 상품 정보로서 서비스 장치(200)에 등록할 수도 있다. Meanwhile, in the above description, it has been described that the user terminal 100 accesses the service apparatus 200 to perform product related image search, and receives grouped product information from the service apparatus 200. It is not limited. The user terminal 100 may be an information providing device according to a user's purpose. For example, the user terminal 100 collects a product-related image by using the camera 190 in response to a user operation, collects text information through the input device 120, and then sends the product information to the service device 200 as product information. You can also register.

도 3은 본 발명의 실시 예에 따른 서비스 장치 구성의 일 예를 나타낸 도면이다.3 is a diagram illustrating an example of a configuration of a service device according to an exemplary embodiment of the present invention.

도 3을 참조하면, 본 발명의 실시 예에 따른 서비스 장치(200)(또는 서버 장치)는 서버 통신 회로(210), 서버 메모리(230) 및 서버 프로세서(250)를 포함할 수 있다. 상기 서버 메모리(230)는 상기 서비스 장치(200)와 독립된 구성으로 마련될 수 있다. 이 경우, 서버 프로세서(250)는 별도로 구성된 서버 메모리(230) 장치 또는 서버와 통신 채널을 형성하고, 검색 동작을 수행하도록 제어할 수도 있다.Referring to FIG. 3, the service device 200 (or server device) according to an embodiment of the present invention may include a server communication circuit 210, a server memory 230, and a server processor 250. The server memory 230 may be provided in an independent configuration from the service device 200. In this case, the server processor 250 may establish a communication channel with a server memory 230 device or a server configured separately, and perform a search operation.

상기 서버 통신 회로(210)는 서비스 장치(200)의 통신 기능을 담당할 수 있다. 즉, 서버 통신 회로(210)는 네트워크(50)를 통해 적어도 하나의 사용자 단말(100)과 통신 채널 또는 정보 제공 장치(300)와의 통신 채널을 형성할 수 있다. 예를 들어, 서버 통신 회로(210)는 서버 프로세서(250) 제어에 대응하여 적어도 하나의 정보 제공 장치(300)로부터 상품 정보를 수신할 수 있다. 또한, 상기 서버 통신 회로(210)는 서버 프로세서(250) 제어에 대응하여 이미지 검색과 관련한 가상 페이지의 전송, 사용자 단말(100)로부터 쿼리 이미지의 수신, 사용자 단말(100)에 쿼리 이미지 기반으로 검색된 검색 결과 페이지의 전송 등을 수행할 수 있다. 또한, 상기 서버 통신 회로(210)는 사용자 단말(100)로부터 수신된 추가 정보 요청에 대응하여 추가 정보를 사용자 단말(100)에 제공할 수 있다. The server communication circuit 210 may be in charge of a communication function of the service device 200. That is, the server communication circuit 210 may form a communication channel with at least one user terminal 100 and a communication channel or the information providing apparatus 300 through the network 50. For example, the server communication circuit 210 may receive product information from the at least one information providing apparatus 300 in response to the control of the server processor 250. In addition, the server communication circuit 210 may transmit the virtual page related to the image search, receive the query image from the user terminal 100, and search the user terminal 100 based on the query image in response to the control of the server processor 250. You can send the search result page. In addition, the server communication circuit 210 may provide additional information to the user terminal 100 in response to the request for additional information received from the user terminal 100.

상기 서버 메모리(230)는 서비스 장치(200) 운용과 관련한 데이터 또는 프로그램을 저장할 수 있다. 예컨대, 상기 서버 메모리(230)는 이미지 검색과 관련한 정보 제공과 관련하여, 상품 관련 이미지 DB(231), 그룹핑 정보(233) 및 추가 정보(235)를 저장할 수 있다. The server memory 230 may store data or a program related to the operation of the service device 200. For example, the server memory 230 may store a product related image DB 231, grouping information 233, and additional information 235 in connection with providing information related to image search.

상기 상품 관련 이미지 DB(231)는 적어도 하나의 상품 관련 이미지를 저장할 수 있다. 상기 적어도 하나의 상품 관련 이미지는 사용자 단말(100)이 제공한 쿼리 이미지를 기반으로 검색될 수 있는 이미지들을 포함할 수 있다. 예를 들어, 상품 관련 이미지들은 구두, 가방, 옷, 모자, 전자 기기, 액세서리 등 다양한 상품들의 이미지들을 포함할 수 있다. 상기 서버 메모리(230)는 상품 관련 이미지들에 포함된 상품 객체들의 특징점들을 저장 관리할 수 있다. 이에 따라, 쿼리 이미지가 사용자 단말(100)로부터 제공되면, 상기 서버 메모리(230)에 저장된 다양한 상품 관련 이미지들 중 상기 쿼리 이미지에 포함된 객체의 특징점에 대응되는 상품 객체를 포함한 상품 관련 이미지가 추출되고, 추출된 상품 관련 이미지가 검색 결과로서 서버 프로세서(250)에 제공될 수 있다. 상기 상품 관련 이미지 DB(231)는 그룹핑 정보(233)를 포함할 수 있다.The product related image DB 231 may store at least one product related image. The at least one product related image may include images that may be searched based on a query image provided by the user terminal 100. For example, product-related images may include images of various goods, such as shoes, bags, clothes, hats, electronic devices, and accessories. The server memory 230 may store and manage the feature points of the merchandise objects included in the merchandise related images. Accordingly, when a query image is provided from the user terminal 100, a product related image including a product object corresponding to a feature point of an object included in the query image is extracted from various product related images stored in the server memory 230. The extracted product related image may be provided to the server processor 250 as a search result. The product related image DB 231 may include grouping information 233.

상기 그룹핑 정보(233)는 복수의 정보 제공 장치(300)들이 제공한 동일 종류의 상품 정보들을 서로 연계하여 저장한 정보를 포함할 수 있다. 예컨대, 제1 정보 제공 장치가 제공한 제1 상품에 대한 제1 상품 정보와, 제2 정보 제공 장치가 제공한 제1 상품에 대한 제2 상품 정보를 매핑한 정보를 포함할 수 있다. 여기서, 상기 제1 상품 정보와 제2 상품 정보는 적어도 일부가 동일한 정보를 포함할 수 있다. 예컨대, 제1 상품 정보에 포함된 제1 설명 정보와 제2 상품 정보에 포함된 제2 설명 정보는 부분적으로 또는 전체적으로 동일할 수 있다. 또는, 제1 상품 정보에 포함된 제1 상품 관련 이미지들과 제2 상품 정보에 포함된 제2 상품 관련 이미지들 중 적어도 일부는 동일한 이미지를 포함할 수 있다. 상기 제1 상품 정보와 상기 제2 상품 정보는 상품명이 동일하거나 또는 카테고리가 동일할 수 있다. 상기 그룹핑 정보(233)는 정보 제공 장치들이 제공한 상품 정보들이 동일 종류인 경우에 있을 수 있기 때문에, 특정 상품의 경우에는 그룹핑 정보가 없을 수도 있다. 예컨대, 특정 종류의 상품 정보를 하나의 정보 제공 장치가 제공하는 경우 해당 종류의 상품에 대한 그룹핑 정보는 상품 관련 이미지 DB(231)에 포함되지 않을 수 있다. 상기 그룹핑 정보(233)는 추가 정보(235)를 포함할 수 있다.The grouping information 233 may include information stored in association with product information of the same kind provided by the plurality of information providing apparatuses 300. For example, the first product information of the first product provided by the first information providing apparatus and the second product information of the first product provided by the second information providing apparatus may be included. Here, the first product information and the second product information may include at least a part of the same information. For example, the first description information included in the first product information and the second description information included in the second product information may be partially or wholly the same. Alternatively, at least some of the first product-related images included in the first product information and the second product-related images included in the second product information may include the same image. The first product information and the second product information may have the same brand name or the same category. Since the grouping information 233 may be the same kind of product information provided by the information providing apparatuses, the grouping information 233 may not have grouping information. For example, when a single information providing apparatus provides a specific kind of product information, grouping information about the corresponding kind of product may not be included in the product related image DB 231. The grouping information 233 may include additional information 235.

상기 추가 정보(235)는 상품 정보들을 통합한 통합 상품 정보의 일부 정보를 포함할 수 있다. 예를 들어, 제1 정보 제공 장치가 제공한 제1 종류의 상품에 대한 제1 상품 정보는 제1 상품 관련 이미지들과 제1 텍스트 정보를 포함할 수 있고, 제2 정보 제공 장치가 제공한 제1 종류의 상품에 대한 제2 상품 정보 역시 제2 상품 관련 이미지들과 제2 텍스트 정보를 포함할 수 있다. 여기서, 상기 추가 정보(235)는 제1 상품 관련 이미지들 및 제2 상품 관련 이미지들 중 중복된 이미지들을 제외한 나머지 이미지들을 통합한 통합 이미지들 중 일부 정보들을 포함할 수 있다. 예를 들어, 제1 상품 관련 이미지들을 기준으로 추가된 제2 상품 관련 이미지들의 일부 이미지들이 추가 정보(235)가 될 수 있다. 또한, 상기 추가 정보(235)는 제1 텍스트 정보 및 제2 텍스트 정보 중 중복되는 텍스트 내용을 제외하고 나머지 내용들을 통합한 통합 텍스트 정보의 일부를 포함할 수 있다. 예를 들어, 제1 텍스트 정보를 기준으로 볼 때, 추가된 제2 텍스트 정보의 일부 내용이 추가 정보가 될 수 있다. The additional information 235 may include some information of the integrated product information incorporating the product information. For example, the first product information on the first type of product provided by the first information providing apparatus may include first product related images and first text information, and the first information provided by the second information providing apparatus. The second product information on one kind of goods may also include second product related images and second text information. Here, the additional information 235 may include some information of integrated images in which the remaining images other than the overlapped images among the first product-related images and the second product-related images are integrated. For example, some images of the second product-related images added based on the first product-related images may be additional information 235. In addition, the additional information 235 may include a part of the integrated text information in which the remaining contents are integrated except for the overlapping text contents among the first text information and the second text information. For example, based on the first text information, some content of the added second text information may be additional information.

상기 서버 프로세서(250)는 서비스 장치(200)의 운용과 관련한 데이터의 처리 또는 프로그램 운용을 수행할 수 있다. 예를 들어, 서버 프로세서(250)는 사용자 단말(100)의 접속을 지원하고, 사용자 단말(100)로부터 쿼리 이미지를 획득하고, 획득된 쿼리 이미지를 기반으로 검색 결과를 수집하여 사용자 단말(100)에 제공할 수 있다. 특히, 상기 서버 프로세서(250)는 정보 제공 장치(300)로부터 상품 정보를 수집하고, 수집된 상품 정보를 기반으로 동일 종류의 상품에 대한 그룹핑 정보(233)를 생성할 수 있다. 또한, 상기 서버 프로세서(250)는 동일 종류의 상품에 대한 추가 정보(235)를 생성할 수 있다. 이를 기반으로, 서버 프로세서(250)는 사용자 단말(100)의 이미지 검색 요청에 대응하여 그룹핑된 상품 정보를 검색 결과로서 수집하고, 상기 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이와 관련하여, 상기 서버 프로세서(250)는 정보 수집부(251), 정보 분류부(253) 및 검색 지원부(255)를 포함할 수 있다.The server processor 250 may perform data processing or program operation related to the operation of the service device 200. For example, the server processor 250 supports the access of the user terminal 100, obtains a query image from the user terminal 100, collects a search result based on the obtained query image, and then uses the user terminal 100. Can be provided to In particular, the server processor 250 may collect product information from the information providing apparatus 300 and generate grouping information 233 for the same kind of product based on the collected product information. In addition, the server processor 250 may generate additional information 235 for the same kind of goods. Based on this, the server processor 250 may collect the product information grouped according to the image search request of the user terminal 100 as a search result and provide the search result to the user terminal 100. In this regard, the server processor 250 may include an information collector 251, an information classifier 253, and a search support unit 255.

상기 정보 수집부(251)는 지정된 주기에 따라 또는 정보 제공 장치(300)의 접속 요청에 따라 정보 제공 장치(300)와 통신 채널을 형성할 수 있다. 상기 정보 수집부(251)는 정보 제공 장치(300)가 접속하면, 정보 제공 장치(300)로부터 관리자 인증 정보(예: 로그인 ID 및 패스워드)를 수신하고, 관리자 인증 확인을 수행할 수 있다. 상기 정보 제공 장치(300)가 정상적인 관리자의 장치인 경우, 상기 정보 수집부(251)는 상기 정보 제공 장치(300)에 상품 정보를 등록할 수 있는 가상 페이지를 제공할 수 있다. 상기 상품 정보 등록과 관련한 가상 페이지는 예컨대, 상품과 관련한 상품 관련 이미지들 및 상품을 설명하는 설명 정보들을 포함하는 텍스트 정보를 등록할 수 있는 영역들을 포함할 수 있다. 상기 정보 수집부(251)는 정보 제공 장치(300)들이 상품 정보를 등록하면, 이를 정보 분류부(253)에 전달할 수 있다. The information collecting unit 251 may establish a communication channel with the information providing apparatus 300 according to a specified cycle or according to a connection request of the information providing apparatus 300. When the information providing apparatus 300 is connected, the information collecting unit 251 may receive administrator authentication information (eg, login ID and password) from the information providing apparatus 300 and perform administrator authentication confirmation. When the information providing device 300 is a device of a normal manager, the information collecting unit 251 may provide a virtual page for registering product information to the information providing device 300. The virtual page related to the product information registration may include, for example, regions capable of registering text information including product related images related to the product and descriptive information describing the product. When the information providing apparatus 300 registers the product information, the information collecting unit 251 may transmit the information to the information classifying unit 253.

상기 정보 분류부(253)는 상기 정보 수집부(251)로부터 상품 정보들이 수신되면, 해당 정보들의 내용 확인을 수행할 수 있다. 예컨대, 정보 분류부(253)는 수집된 상품 정보들의 상품 종류를 확인할 수 있다. 그리고 정보 분류부(253)는 상품 정보들을 상품 종류별로 분류할 수 있다. 특정 종류에 복수의 상품 정보들이 등록된 경우, 정보 분류부(253)는 등록된 복수의 상품 정보들을 기반으로 그룹핑 정보(233) 및 추가 정보(235) 중 적어도 하나를 생성할 수 있다. 이를 위하여, 상기 정보 분류부(253)는 특정 종류에 등록된 복수의 상품 정보들을 연계한 연계 정보를 상품 관련 이미지 DB(231)에 기입할 수 있다. 또한, 상기 정보 분류부(253)는 특정 종류에 등록된 상품 정보들의 내용 확인을 수행하고, 상품 관련 이미지들의 적어도 일부를 통합한 통합 이미지 정보를 생성하거나, 텍스트 정보들의 적어도 일부를 통합한 통합 텍스트 정보의 생성하거나, 또는 상기 통합 이미지 정보 및 통합 텍스트 정보를 포함하는 통합 상품 정보를 생성할 수 있다. 여기서, 상기 정보 분류부(253)는 통합 상품 정보 생성 시, 수량이 존재하면서, 가장 낮은 상품 가격을 통합 상품 정보의 가격 및 수량 정보로 기입할 수 있다. 또한, 상기 정보 분류부(253)는 특정 종류에 등록된 상품 정보들의 내용 확인을 수행하고, 상품 관련 이미지들의 적어도 일부를 통합한 통합 이미지의 적어도 일부를 추가 정보(235)로 생성하거나, 텍스트 정보들의 적어도 일부를 통합한 통합 텍스트 정보의 일부를 추가 정보(235)로 생성할 수 있다. 여기서, 상기 정보 분류부(253)는 특정 종류의 상품에 대하여 상대적으로 가장 낮은 가격으로 등록된 상품 정보를 메인 정보로 하고, 상기 특정 종류의 상품에 대한 다른 상품 정보에 더 포함된 정보들(상기 메인 정보와 중복되지 않은 정보들)을 추가 정보(235)로 생성할 수 있다.When the product information is received from the information collecting unit 251, the information classifying unit 253 may check the contents of the corresponding information. For example, the information classification unit 253 may check the product type of the collected product information. The information classifying unit 253 may classify the product information by the product type. When a plurality of product information is registered in a specific type, the information classifier 253 may generate at least one of the grouping information 233 and the additional information 235 based on the registered plurality of product information. To this end, the information classifying unit 253 may write linkage information in association with a plurality of product information registered in a specific type in the product related image DB 231. In addition, the information classification unit 253 performs contents verification of product information registered in a specific type, generates integrated image information incorporating at least a portion of product-related images, or integrates text incorporating at least a portion of text information. Information may be generated or integrated product information including the integrated image information and the integrated text information may be generated. Here, the information classifying unit 253 may write the lowest commodity price as the price and quantity information of the unified commodity information while there is a quantity when generating the commodity information. In addition, the information classifying unit 253 performs the verification of the contents of the product information registered in a specific type, and generates at least a part of the integrated image incorporating at least a part of the product-related images as additional information 235 or text information. Some of the unified text information incorporating at least some of the data may be generated as additional information 235. Here, the information classification unit 253 uses the product information registered at the lowest price with respect to a specific type of product as the main information, and further includes information included in other product information for the specific type of product (the Information not duplicated with the main information) may be generated as the additional information 235.

예를 들어, 정보 분류부(253)는 정보 제공 장치(300)들로부터 제1 종류 상품의 제1 상품 정보 및 제1 종류 상품의 제2 상품 정보를 수신할 수 있다. 상기 제1 상품 정보는 제1 종류 상품과 관련한 제1 상품 관련 이미지들 및 제1 종류 상품을 설명하기 위해 제1 정보 제공 장치가 기입한 제1 텍스트 정보를 포함할 수 있다. 상기 제2 상품 정보는 제1 종류 상품과 관련한 제2 상품 관련 이미지들 및 제2 종류 상품을 설명하기 위해 제2 정보 제공 장치가 기입한 제2 텍스트 정보를 포함할 수 있다. 정보 분류부(253)는 제1 상품 관련 이미지들에 포함된 각 이미지들과 제2 상품 관련 이미지들에 포함된 각 이미지들을 상호 비교하여 중복된 이미지들을 제거하고, 나머지 이미지들을 통하여 통합 이미지를 생성할 수 있다. 또한, 정보 분류부(253)는 제1 텍스트 정보의 내용과 제2 텍스트 정보의 내용을 상호 비교하여 동일한 부분을 검출하고, 중복된 내용을 제거하여 통합 텍스트 정보를 생성할 수 있다. 상기 정보 분류부(253)는 상기 통합 이미지 및 상기 통합 텍스트 정보 중 적어도 일부를 추가 정보(235)로 배치할 수 있다. 예를 들어, 제1 상품 정보를 기준으로 볼 때, 제1 상품 정보에 중복되지 않으면서 제2 상품 정보에 포함된 상품 관련 이미지들 및 텍스트 정보가 추가 정보(235)로 배치될 수 있다. For example, the information classifying unit 253 may receive the first product information of the first type goods and the second product information of the first type goods from the information providing apparatuses 300. The first commodity information may include first commodity related images related to the first kind commodity and first text information written by the first information providing apparatus to describe the first kind commodity. The second commodity information may include second commodity related images related to the first kind commodity and second text information written by the second information providing apparatus to describe the second kind commodity. The information classifier 253 compares each image included in the first product-related images with each image included in the second product-related images, removes duplicate images, and generates an integrated image through the remaining images. can do. In addition, the information classifier 253 may compare the contents of the first text information and the contents of the second text information to detect the same part, and remove the duplicated content to generate the integrated text information. The information classifier 253 may arrange at least some of the integrated image and the integrated text information as additional information 235. For example, based on the first product information, product related images and text information included in the second product information may be disposed as the additional information 235 without being duplicated in the first product information.

상기 검색 지원부(255)는 사용자 단말(100) 연결 시 이미지 검색과 관련한 가상 페이지를 사용자 단말(100)에 제공할 수 있다. 상기 검색 지원부(255)는 사용자 단말(100)에 이미지 검색과 관련한 쿼리 이미지 전송을 요청할 수 있다. 상기 사용자 단말(100)로부터 쿼리 이미지를 수신하면, 상기 검색 지원부(255)는 쿼리 이미지로부터 적어도 하나의 검색용 객체를 추출할 수 있다. 예를 들어, 상기 쿼리 이미지에 복수개의 검색용 객체가 검출되면, 상기 검색 지원부(255)는 지정된 조건을 만족하는 검색용 객체를 선택할 수 있다. 예를 들어, 상기 검색 지원부(255)는 복수개의 검색용 객체가 검출되면, 검출된 복수개의 검색용 객체 중 어느 하나를 선택할 수 있는 선택 화면을 사용자 단말(100)에 제공하고, 사용자 단말(100)에 의해 선택된 객체를 검색용 객체로 결정할 수 있다. 또는, 검색 지원부(255)는 복수개의 객체들 중 일정 크기 이상의 객체를 검색용 객체로 결정할 수 있다. 또는, 검색 지원부(255)는 상대적으로 가장 큰 크기를 가지를 객체를 검색용 객체로 결정할 수 있다. 또는, 상기 검색 지원부(255)는 이미지의 중심부에 배치된 객체를 검색용 객체로 결정할 수 있다. 상기 검색 지원부(255)는 검색용 객체가 복수개인 경우, 각각의 검색용 객체들에 대응하는 상품 정보를 상품 관련 이미지 DB(231)에서 검색할 수도 있다.The search support unit 255 may provide a virtual page related to image search to the user terminal 100 when the user terminal 100 is connected. The search support unit 255 may request the user terminal 100 to transmit a query image related to image search. When the query image is received from the user terminal 100, the search support unit 255 may extract at least one search object from the query image. For example, when a plurality of search objects are detected in the query image, the search support unit 255 may select a search object that satisfies a specified condition. For example, when a plurality of search objects are detected, the search support unit 255 provides the user terminal 100 with a selection screen for selecting any one of the detected plurality of search objects, and the user terminal 100. The object selected by) can be determined as the search object. Alternatively, the search support unit 255 may determine an object of a predetermined size or more among the plurality of objects as the search object. Alternatively, the search support unit 255 may determine an object having a relatively largest size as an object for searching. Alternatively, the search support unit 255 may determine an object disposed in the center of the image as a search object. When there are a plurality of search objects, the search support unit 255 may search for product information corresponding to each search object in the product related image DB 231.

상기 검색 지원부(255)는 검색용 객체가 결정되면, 검색용 객체의 특징점을 추출할 수 있다. 상기 검색 지원부(255)는 추출된 특징점과 일정 크기 이상 유사한 유사도를 가진 상품 객체를 상품 관련 이미지 DB(231)에서 검출할 수 있다. 이때, 검색 지원부(255)는 상기 검색용 객체의 특징점과 상기 상품 객체의 특징점 비교를 통하여 상품 정보를 검출할 수 있다. 상기 검색 지원부(255)는 적어도 하나의 상품 정보가 검출되면, 해당 상품 정보들이 그룹핑 정보(233)를 포함하는지 확인할 수 있다. 특정 상품 정보가 그룹핑 정보(233)를 포함하는 경우, 상기 검색 지원부(255)는 그룹핑 정보(233)에 포함된 상품 정보들을 함께 수집할 수 있다. 상기 검색 지원부(255)는 그룹핑 정보(233)에 포함된 상품 정보들을 상기 사용자 단말(100)에 제공할 수 있다. 이때, 상기 사용자 단말(100)에 제공된 상품 정보들은 예컨대, 1 종류의 상품에 대하여 복수개의 정보 제공 장치가 제공한 상품 정보들을 포함할 수도 있다. 이에 따라, 동일 종류이지만, 가격 정보와 수량 정보가 다르게 기입된 상품 정보들이 포함된 화면이 사용자 단말(100)에 제공될 수 있다.When the search object is determined, the search support unit 255 may extract feature points of the search object. The search support unit 255 may detect a product object having a similarity similar to the extracted feature point by a predetermined size or more in the product related image DB 231. In this case, the search support unit 255 may detect the product information by comparing the feature point of the search object with the feature point of the product object. When at least one product information is detected, the search support unit 255 may check whether the corresponding product information includes the grouping information 233. When the specific product information includes the grouping information 233, the search support unit 255 may collect the product information included in the grouping information 233 together. The search support unit 255 may provide product information included in the grouping information 233 to the user terminal 100. In this case, the product information provided to the user terminal 100 may include, for example, product information provided by a plurality of information providing apparatuses for one type of product. Accordingly, a screen including commodity information of the same type but written with different price information and quantity information may be provided to the user terminal 100.

다양한 예시로서, 상기 검색 지원부(255)는 설정에 따라 또는 사용자 단말(100)의 요청에 따라 추가 정보(235)가 포함된 그룹핑 정보(233)를 사용자 단말(100)에 제공할 수 있다. 예를 들어, 상기 검색 지원부(255)는 복수의 정보 제공 장치들이 제공한 상품 정보들 중 중복된 정보를 제외한 정보들을 통합한 통합 상품 정보를 생성할 수 있다. 또는, 상기 검색 지원부(255)는 특정 상품 정보를 기반으로 동일 종류의 다른 상품 정보에 포함된 정보들 중 상기 특정 상품 정보와 중복되지 않는 정보들만을 추가 정보(235)로서 추출할 수 있다. 상기 검색 지원부(255)는 상기 통합 상품 정보를 사용자 단말(100)에 제공하거나 또는 특정 정보 제공 장치가 제공한 상품 정보를 사용자 단말(100)에 제공한 후, 사용자 단말(100)의 요청에 따라 추가 정보(235)를 상기 사용자 단말(100)에 제공할 수 있다. 또한, 상기 검색 지원부(255)는 복수의 정보 제공 장치들에 제공한 상품 정보들을 통합한 통합 상품 정보를 생성하여 사용자 단말(100)에 제공할 수 있다. As various examples, the search support unit 255 may provide the user terminal 100 with grouping information 233 including additional information 235 according to a setting or a request of the user terminal 100. For example, the search support unit 255 may generate integrated product information incorporating information excluding duplicate information among product information provided by a plurality of information providing devices. Alternatively, the search support unit 255 may extract, as additional information 235, only information that is not duplicated with the specific product information among the information included in other product information of the same type based on the specific product information. The search support unit 255 provides the integrated product information to the user terminal 100 or provides the product information provided by a specific information providing device to the user terminal 100, and then at the request of the user terminal 100. Additional information 235 may be provided to the user terminal 100. In addition, the search support unit 255 may generate integrated product information incorporating product information provided to a plurality of information providing apparatuses and provide the integrated product information to the user terminal 100.

상술한 바와 같이, 본 발명의 서비스 장치는 통합 상품 정보를 제공하거나 또는 상품 정보들 간에 중복되지 않은 추가 정보(235)를 사용자 요청에 따라 특정 상품 정보 제공 후 별도로 제공함으로써, 사용자가 특정 상품에 대한 이해를 보다 다양하고 쉽게 할 수 있도록 지원하며, 상품 구매에 있어서 가격 비교를 손쉽게 할 수 있도록 지원한다. 이와 관련하여, 서비스 장치(200)는 그룹핑 정보(233), 통합 상품 정보 및 추가 정보(235) 제공 시 각 정보 제공 장치들이 기입한 가격 정보를 정보 제공 장치별로 구분하여 제공할 수 있다. As described above, the service apparatus of the present invention provides the integrated product information or separately provides additional information 235 which is not duplicated between the product information after providing the specific product information according to the user's request, so that the user can It makes the understanding more diverse and easier, and makes it easier to compare prices in purchasing products. In this regard, the service device 200 may provide price information written by each information providing device by providing the grouping information 233, the integrated product information, and the additional information 235 by information.

도 4는 본 발명의 실시 예에 따른 이미지 검색 시스템의 구성 간 신호 흐름의 한 예를 나타낸 도면이다.4 is a diagram illustrating an example of a signal flow between components of an image retrieval system according to an exemplary embodiment of the present invention.

도 4를 참조하면, 이미지 검색 시스템의 신호 흐름에 있어서, 401 단계에서, 서비스 장치(200)는 적어도 하나의 정보 제공 장치(300)와 통신 채널을 형성할 수 있다. 예컨대, 지정된 스케줄이 도래할 경우, 서비스 장치(200)는 적어도 하나의 정보 제공 장치(300)와 통신 채널을 형성할 수 있다. 또는, 서비스 장치(200)는 적어도 하나의 정보 제공 장치(300)의 요청에 대응하여 통신 채널을 형성할 수 있다. Referring to FIG. 4, in the signal flow of the image retrieval system, in operation 401, the service device 200 may establish a communication channel with the at least one information providing device 300. For example, when a designated schedule arrives, the service device 200 may establish a communication channel with the at least one information providing device 300. Alternatively, the service device 200 may establish a communication channel in response to a request of the at least one information providing device 300.

403 단계에서, 상기 서비스 장치(200)는 적어도 하나의 정보 제공 장치(300)로부터 상품 정보를 수신할 수 있다. 예컨대, 서비스 장치(200)는 제1 정보 제공 장치 내지 제N 정보 제공 장치들로부터 각각 상품 정보를 수신할 수 있다. 이때, 수신된 상품 정보는 동일 종류의 상품 정보를 포함할 수도 있다. In operation 403, the service device 200 may receive product information from at least one information providing device 300. For example, the service device 200 may receive product information from the first to N-th information providing devices, respectively. In this case, the received product information may include the same kind of product information.

405 단계에서, 상기 서비스 장치(200)는 수신된 상품 정보들에 대한 분류 및 그룹핑 작업을 수행하고, 추가 정보 생성을 수행할 수 있다. 예컨대, 상기 서비스 장치(200)는 상품의 종류별로 상품 정보들을 분류할 수 있다. 상기 서비스 장치(200)는 동일 종류의 상품 정보들을 하나의 그룹으로 처리하여 그룹핑 정보(233)를 생성할 수 있다. 이에 따라, 그룹핑 정보(233)는 동일 종류의 상품 정보를 포함하는 정보들을 기록한 연계 정보를 포함할 수 있다. 또한, 상기 서비스 장치(200)는 동일 종류의 상품 정보들에서 중복된 정보들을 제외하고, 나머지 정보를 기준으로 추가 정보(235)를 생성할 수 있다. 예컨대, 상기 서비스 장치(200)는 제1 정보 제공 장치가 제공한 제1 상품 정보를 기준으로, 제2 정보 제공 장치가 제공한 제2 상품 정보에서 제1 상품 정보와 중복되지 않은 정보들을 추출하여 추가 정보(235)로 배치할 수 있다. 또는, 상기 서비스 장치(200)는 동일 종류의 상품 정보들에서 중복된 정보들을 제외시키고, 나머지 정보들을 통합하여 통합 상품 정보를 생성할 수 있다. In operation 405, the service device 200 may perform classification and grouping on the received product information and generate additional information. For example, the service device 200 may classify product information according to types of goods. The service device 200 may generate the grouping information 233 by processing the same kind of product information into one group. Accordingly, the grouping information 233 may include linkage information that records information including product information of the same type. In addition, the service device 200 may generate additional information 235 based on the remaining information, except for duplicated information in the same kind of product information. For example, the service device 200 extracts information that is not overlapped with the first product information from the second product information provided by the second information providing apparatus based on the first product information provided by the first information providing apparatus. May be placed with additional information 235. Alternatively, the service device 200 may generate duplicated product information by excluding duplicated information from the same type of product information and integrating the remaining information.

411 단계에서, 사용자 단말(100)과 서비스 장치(200)는 통신 채널을 형성할 수 있다. 이와 관련하여, 상기 사용자 단말(100)은 서비스 장치(200) 접속을 위한 웹 브라우저를 활성화하거나, 서비스 장치(200) 접속과 관련한 프로그램 또는 어플리케이션을 실행할 수 있다. 상기 사용자 단말(100)은 웹 브라우저 실행 요청이 발생하거나 또는 관련 프로그램이나 어플리케이션 실행이 요청되면, 통신 회로(110)를 기반으로 서비스 장치(200)에 접속을 요청하고 통신 채널을 형성할 수 있다. In operation 411, the user terminal 100 and the service apparatus 200 may form a communication channel. In this regard, the user terminal 100 may activate a web browser for accessing the service device 200 or execute a program or application related to the service device 200 connection. When a web browser execution request or a related program or application execution is requested, the user terminal 100 may request access to the service device 200 based on the communication circuit 110 and form a communication channel.

413 단계에서, 사용자 단말(100)은 서비스 장치(200)에 쿼리 이미지를 전송할 수 있다. 상기 쿼리 이미지는 사용자 단말(100)에 포함된 카메라(190)를 통해 획득되거나 또는 메모리(130)에 저장된 이미지들 중 사용자 입력에 의해 선택될 수 있다. In operation 413, the user terminal 100 may transmit a query image to the service device 200. The query image may be obtained through a camera 190 included in the user terminal 100 or may be selected by a user input among images stored in the memory 130.

415 단계에서, 서비스 장치(200)는 쿼리 이미지에 대응하는 검색을 수행하여 검색 결과를 수집할 수 있다. 상기 서비스 장치(200)는 쿼리 이미지에 포함된 적어도 하나의 검색용 객체를 추출하고, 추출된 검색용 객체와 지정된 크기 이상의 유사도를 가지는 상품 객체를 검색할 수 있다. 또한, 서비스 장치(200)는 검색 결과 수집 시, 쿼리 이미지에 대응하는 추가 정보도 수집할 수 있다. 예컨대, 서비스 장치(200)는 검색된 상품 객체와 관련한 특정 정보 제공 장치가 등록한 제1 상품 정보를 수집하고, 다른 정보 제공 장치가 등록한 상품 정보들 중 상기 제1 상품 정보와 중복되지 않은 정보들을 추가 정보로 수집할 수 있다. In operation 415, the service apparatus 200 may collect a search result by performing a search corresponding to the query image. The service device 200 may extract at least one search object included in the query image, and search for a commodity object having a similarity or more than a predetermined size with the extracted search object. In addition, the service device 200 may collect additional information corresponding to the query image when collecting the search result. For example, the service device 200 collects first product information registered by a specific information providing apparatus related to the searched product object, and additional information includes information that is not duplicated with the first product information among product information registered by another information providing apparatus. Can be collected.

417 단계에서, 서비스 장치(200)는 수집된 검색 결과 및 추가 정보를 사용자 단말(100)에 제공할 수 있다. 또는, 서비스 장치(200)는 수집된 검색 결과를 사용자 단말(100)에 우선 제공하고, 사용자 단말(100)로부터 추가 정보 요청이 발생하는 경우, 상기 추가 정보를 사용자 단말(100)에 제공할 수도 있다. In operation 417, the service device 200 may provide the collected search results and additional information to the user terminal 100. Alternatively, the service apparatus 200 may first provide the collected search results to the user terminal 100, and provide the additional information to the user terminal 100 when a request for additional information is generated from the user terminal 100. have.

419 단계에서, 사용자 단말(100)은 수신된 검색 결과 및 추가 정보 중 적어도 일부를 디스플레이(160)에 출력할 수 있다. 또는, 상기 사용자 단말(100)은 검색 결과를 디스플레이(160)에 출력한 이후, 추가 정보를 요청하여, 추가 정보를 더 출력할 수도 있다.In operation 419, the user terminal 100 may output at least a portion of the received search result and additional information to the display 160. Alternatively, the user terminal 100 may output additional information by requesting additional information after outputting a search result on the display 160.

다른 예시로, 415 단계에서, 검색된 상품 정보가 동일 종류의 다른 상품 정보를 가진 연계 정보를 가지는 경우, 서비스 장치(200)는 그룹핑 정보(233)를 수집할 수 있다. 즉, 동일 종류의 상품에 대해 복수의 정보 제공 장치가 제공한 상품 정보들을 그룹핑 정보(233)로 수집할 수 있다. 이에 따라, 상기 서비스 장치(200)는 그룹핑 정보(233)로 기록된 복수의 정보 제공 장치들이 등록한 상품 정보들을 검색 결과로서 사용자 단말(100)에 제공할 수 도 있다. 또는, 상기 서비스 장치(200)는 그룹핑 정보(233)에 포함된 복수의 상품 정보들 중 상대적으로 가장 가격을 낮게 책정한 정보 제공 장치가 등록한 상품 정보를 사용자 단말(100)에 우선 제공하고, 추가 요청에 따라 다른 가격의 상품 정보들을 사용자 단말(100)에 제공할 수도 있다. 상기 서비스 장치(200)는 상품 가격이 상대적으로 가장 낮은 상품 정보의 상품 수량이 0인 경우, 다음으로 낮은 상품의 상품 정보를 사용자 단말(100)에 제공할 수 있다. 또는, 상기 서비스 장치(200)는 추가 정보(235) 생성 시, 상품 수량이 존재하면서 상대적으로 가장 낮은 상품 가격이 할당된 상품 정보를 기준으로, 다른 상품 정보들에 더 포함된 정보들을 추가 정보로 수집할 수 있다.As another example, in operation 415, when the searched product information has linkage information having other product information of the same type, the service device 200 may collect grouping information 233. That is, product information provided by the plurality of information providing apparatuses for the same kind of goods may be collected as the grouping information 233. Accordingly, the service device 200 may provide product information registered by the plurality of information providing devices recorded as the grouping information 233 to the user terminal 100 as a search result. Alternatively, the service apparatus 200 may first provide product information registered by the information providing apparatus, which is the lowest price among the plurality of product information included in the grouping information 233, to the user terminal 100, and then add it. According to the request, product information of different prices may be provided to the user terminal 100. When the product quantity of the product information having the lowest product price is 0, the service apparatus 200 may provide the user terminal 100 with product information of the next lowest product. Alternatively, when the additional information 235 is generated, the service apparatus 200 may further include information, which is further included in other product information, as additional information based on the product information to which the product quantity exists and the lowest product price is allocated. Can be collected.

도 5는 본 발명의 실시 예에 따른 상품 관련 이미지 DB의 갱신과 관련한 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.5 is a diagram illustrating an example of an operation method of a service apparatus associated with updating of a product-related image DB according to an exemplary embodiment of the present invention.

도 5를 참조하면, 서비스 장치 운용 방법과 관련하여, 501 단계에서, 서비스 장치(200)의 서버 프로세서(250)는 적어도 하나의 정보 제공 장치(300)가 연결되는지 확인할 수 있다. 예컨대, 서버 프로세서(250)는 지정된 스케줄 도래에 따라 상기 정보 제공 장치(300)의 연결 여부를 확인할 수 있다. 또는, 서버 프로세서(250)는 통신 대기 상태를 유지하고, 접속되는 단말들 중 사용자 인증을 통하여 정보 제공 장치(300)에 해당하는 관리자의 연결이 요청되는지 확인할 수 있다. 정보 제공 장치(300)의 연결이 없는 경우, 서버 프로세서(250)는 503 단계에서 지정된 기능을 수행할 수 있다. 예컨대, 상기 서버 프로세서(250)는 사용자 단말(100)의 연결을 지원하고, 사용자 단말(100)이 연결에 따른 상품 정보를 포함한 검색 결과 제공을 처리할 수 있다. Referring to FIG. 5, in operation 501, the server processor 250 of the service apparatus 200 may determine whether at least one information providing apparatus 300 is connected. For example, the server processor 250 may check whether the information providing apparatus 300 is connected according to a specified schedule arrival. Alternatively, the server processor 250 may maintain a communication standby state and check whether a connection of an administrator corresponding to the information providing apparatus 300 is requested through user authentication among the connected terminals. If there is no connection of the information providing apparatus 300, the server processor 250 may perform a function designated in operation 503. For example, the server processor 250 may support the connection of the user terminal 100, and the user terminal 100 may process providing a search result including product information according to the connection.

정보 제공 장치(300)가 연결된 경우, 서버 프로세서(250)는 505 단계에서, 정보 제공 장치(300)로부터 상품 정보를 수신할 수 있다. 이와 관련하여, 상기 서버 프로세서(250)는 상기 정보 제공 장치(300)는 상품 등록과 관련한 가상 페이지를 제공할 수 있다. When the information providing apparatus 300 is connected, the server processor 250 may receive product information from the information providing apparatus 300 in step 505. In relation to this, the server processor 250 may provide the virtual page related to product registration.

507 단계에서, 서비스 장치(200)의 서버 프로세서(250)는 상품 정보 분류 및 그룹핑을 수행할 수 있다. 예컨대, 서버 프로세서(250)는 상품의 종류에 따라 상품 정보들을 분류하고, 동일 종류에 복수개의 상품 정보들이 존재하는 경우, 해당 상품 정보들을 그룹핑하여 그룹핑 정보를 생성할 수 있다. In operation 507, the server processor 250 of the service apparatus 200 may perform product information classification and grouping. For example, the server processor 250 may classify the commodity information according to the type of commodity, and when there is a plurality of commodity information in the same kind, group the corresponding commodity information to generate grouping information.

509 단계에서, 서버 프로세서(250)는 추가 정보 생성을 수행할 수 있다. 예컨대, 서버 프로세서(250)는 특정 상품 정보를 기준으로, 다른 상품 정보에 더 포함된 정보들을 추가 정보를 수집할 수 있다. 예를 들어, 상기 서버 프로세서(250)는 상대적으로 가장 낮은 가격으로 등록된 제1 상품 정보를 기준으로, 동일 종류이며 다른 정보 제공 장치가 등록한 제2 상품 정보 중에 상기 제1 상품 정보와 중복되지 않은 정보들을 추가 정보로 수집할 수 있다. In operation 509, the server processor 250 may perform additional information generation. For example, the server processor 250 may collect additional information on information further included in other product information based on the specific product information. For example, the server processor 250 is based on the first product information registered at the lowest price, and is not identical to the first product information among the second product information registered by the other information providing apparatus. Information can be collected as additional information.

511 단계에서, 서버 프로세서(250)는 데이터베이스를 갱신할 수 있다. 예컨대, 서버 프로세서(250)는 상품 관련 이미지 DB(231)의 갱신을 수행할 수 있다. 이를 보다 상세히 하면, 상기 서버 프로세서(250)는 상품 관련 이미지 DB(231)에 정보 제공 장치들이 등록한 상품 정보들을 기록할 수 있다. 또한, 상기 서버 프로세서(250)는 상품 정보들을 연계 정보들을 기록한 그룹핑 정보(233)를 상품 관련 이미지 DB(231)에 저장할 수 있다. 또한, 상기 서버 프로세서(250)는 그룹핑 정보(233)에 추가 정보(235)를 기입할 수 있다. 또는, 상기 서버 프로세서(250)는 상품 관련 이미지 DB(231), 그룹핑 정보(233) 및 추가 정보(235)를 각각 별도로 저장 관리할 수도 있다.In operation 511, the server processor 250 may update a database. For example, the server processor 250 may update the product related image DB 231. In more detail, the server processor 250 may record product information registered by the information providing apparatuses in the product related image DB 231. In addition, the server processor 250 may store the grouping information 233 in which product information is linked to the product related image DB 231. In addition, the server processor 250 may write the additional information 235 in the grouping information 233. Alternatively, the server processor 250 may separately store and manage a product related image DB 231, grouping information 233, and additional information 235.

513 단계에서, 상기 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 예컨대, 상기 서버 프로세서(250)는 정보 제공 장치들로부터 상품 정보 등록 종료를 알리는 메시지를 수신할 수 있다. 또는, 상기 서버 프로세서(250)는 추가 상품 정보 수신이 없는 시간이 지정된 시간 동안 유지되는 경우 기능 종료와 관련한 이벤트 도래로 판단할 수 있다. 기능 종료와 관련한 이벤트가 발생하면, 상기 서버 프로세서(250)는 정보 제공 장치(300)와의 통신 채널을 해제하고 대기 상태로 진입할 수 있다. 상기 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 없는 경우, 501 단계 이전으로 분기하여 이하 동작을 재수행할 수 있다.In operation 513, the server processor 250 may check whether there is an event related to the termination of the function. For example, the server processor 250 may receive a message indicating that the product information registration is terminated from the information providing devices. Alternatively, the server processor 250 may determine the arrival of an event related to the termination of a function when a time without receiving additional product information is maintained for a specified time. When an event related to the termination of the function occurs, the server processor 250 may release a communication channel with the information providing apparatus 300 and enter a standby state. If there is no event related to the termination of the function, the server processor 250 branches to step 501 and may perform the following operation again.

도 6은 본 발명의 실시 예에 따른 사용자 단말의 이미지 검색을 지원하는 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.6 is a diagram illustrating an example of an operating method of a service apparatus that supports image search of a user terminal according to an exemplary embodiment of the present invention.

도 6을 참조하면, 601 단계에서, 서비스 장치(200)의 서버 프로세서(250)는 사용자 단말(100)이 연결되는지 확인할 수 있다. 상기 사용자 단말(100)이 연결되지 않는 경우, 서버 프로세서(250)는 603 단계에서 지정된 기능 수행을 처리할 수 있다. 예컨대, 서버 프로세서(250)는 사용자 정보(233)를 토대로 성향 정보 산출을 수행할 수 있다. 또는, 서버 프로세서(250)는 새로운 상품 정보를 상품 관련 이미지 DB(231)에 등록할 수 있다.Referring to FIG. 6, in operation 601, the server processor 250 of the service apparatus 200 may determine whether the user terminal 100 is connected. If the user terminal 100 is not connected, the server processor 250 may process the performance of the function specified in step 603. For example, the server processor 250 may calculate propensity information based on the user information 233. Alternatively, the server processor 250 may register new product information in the product related image DB 231.

사용자 단말(100)이 연결된 경우, 서버 프로세서(250)는 605 단계에서 가상 페이지를 사용자 단말(100)에 제공할 수 있다. 이 과정에서, 상기 서버 프로세서(250)는 사용자 인증을 수행할 수 있다. 사용자 인증과 관련하여, 상기 서버 프로세서(250)는 사용자 인증을 위한 로그인 정보 및 패스워드를 입력할 수 있는 화면 인터페이스를 사용자 단말(100)에 제공할 수 있다.When the user terminal 100 is connected, the server processor 250 may provide a virtual page to the user terminal 100 in step 605. In this process, the server processor 250 may perform user authentication. In relation to user authentication, the server processor 250 may provide the user terminal 100 with a screen interface for inputting login information and a password for user authentication.

다음으로, 상기 서버 프로세서(250)는 쿼리 이미지가 수신되는지 확인할 수 있다. 쿼리 이미지 수신이 없는 경우, 상기 서버 프로세서(250)는 615 단계 이전으로 분기하여 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. Next, the server processor 250 may check whether a query image is received. If there is no query image reception, the server processor 250 branches to step 615 to check whether there is an event related to the termination of the function.

쿼리 이미지가 수신되면, 상기 서버 프로세서(250)는 609 단계에서 검색 결과 수집 및 제공을 수행할 수 있다. 예컨대, 서버 프로세서(250)는 쿼리 이미지에 포함된 적어도 하나의 검색용 객체를 추출하고, 검색용 객체와 일정 크기 이상 유사한 유사도를 가지는 상품 객체와 관련한 상품 정보를 검색 결과로서 수집하고, 수집된 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이 동작에서, 상기 서버 프로세서(250)는 상대적으로 가장 낮은 가격으로 등록한 상품 정보를 검색 결과로서 사용자 단말(100)에 제공할 수 있다.When the query image is received, the server processor 250 may collect and provide a search result in operation 609. For example, the server processor 250 extracts at least one search object included in the query image, collects product information related to a product object having a similarity or more similar to the search object by a predetermined size or more, as a search result, and collects the search. The result may be provided to the user terminal 100. In this operation, the server processor 250 may provide the user terminal 100 with the product information registered at the lowest price as a search result.

611 단계에서, 상기 서버 프로세서(250)는 사용자 단말(100)로부터 추가 정보 요청이 발생하는지 확인할 수 있다. 추가 정보 요청이 없는 경우, 상기 서버 프로세서(250)는 613 단계 스킵하고 615 단계로 분기하여 기능 종료 관련 이벤트가 발생하는지 확인할 수 있다. 추가 정보 요청을 사용자 단말(100)로부터 수신한 경우, 상기 서버 프로세서(250)는 613 단계에서 추가 정보 수집 및 제공을 수행할 수 있다. 예컨대, 상기 서버 프로세서(250)는 상기 검색 결과에 포함된 상품 정보와 동일 종류이며 다른 정보 제공 장치가 등록한 상품 정보를 검출하고, 검출된 상품 정보 중 상기 사용자 단말에 제공한 상품 정보와 중복되지 않는 정보(예: 중복되지 않은 상품 관련 이미지들 또는 중복되지 않은 텍스트 정보)를 추가 정보로 추출할 수 있다. 상기 추가 정보(235)를 추출한 상품 정보는 예컨대, 차순위로 낮은 가격 정보를 포함한 상품 정보가 될 수도 있다. In operation 611, the server processor 250 may determine whether an additional information request is generated from the user terminal 100. If there is no request for additional information, the server processor 250 may skip step 613 and branch to step 615 to check whether a function termination related event occurs. When the additional information request is received from the user terminal 100, the server processor 250 may collect and provide additional information in step 613. For example, the server processor 250 detects product information of the same kind as the product information included in the search result and registered by another information providing apparatus, and does not overlap with the product information provided to the user terminal among the detected product information. Information (for example, non-overlapping product related images or non-overlapping text information) may be extracted as additional information. The commodity information from which the additional information 235 is extracted may be commodity information including, for example, lower price information.

다음으로, 615 단계에서, 상기 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 예를 들면, 상기 서버 프로세서(250)는 사용자 단말(100)로부터 이미지 검색 종료를 요청하는 메시지를 수신하는 경우 기능 종료 관련 이벤트 발생으로 판단할 수 있다. 또는, 서버 프로세서(250)는 사용자 단말(100)로부터 유의미한 입력 신호 수신이 지정된 시간 동안 발생하지 않는 경우 기능 종료와 관련한 이벤트 발생으로 판단할 수 있다. 기능 종료와 관련한 이벤트 발생이 없으면, 상기 서버 프로세서(250)는 601 단계 이전으로 분기하여 이하 과정을 재수행할 수 있다. 기능 종료와 관련한 이벤트가 발생하면, 상기 서버 프로세서(250)는 사용자 단말(100)과의 통신 채널을 해제하고, 다른 사용자 단말 또는 상기 사용자 단말이 접속할 수 있도록 통신 대기 상태로 진입할 수 있다.Next, in step 615, the server processor 250 may check whether there is an event related to the termination of the function. For example, the server processor 250 may determine that a function termination related event occurs when receiving a message for requesting termination of an image search from the user terminal 100. Alternatively, the server processor 250 may determine that an event related to function termination occurs when a meaningful input signal reception from the user terminal 100 does not occur for a specified time. If there is no event related to the termination of the function, the server processor 250 may branch to step 601 and perform the following process again. When an event related to termination of a function occurs, the server processor 250 may release a communication channel with the user terminal 100 and enter a communication standby state so that another user terminal or the user terminal can access the same.

도 7은 본 발명의 실시 예에 따른 정보 제공 기능과 관련한 사용자 인터페이스의 일 예를 나타낸 도면이다.7 is a diagram illustrating an example of a user interface associated with an information providing function according to an exemplary embodiment of the present invention.

도 7을 참조하면, 710 화면에서와 같이, 사용자 단말(100)은 쿼리 이미지(701)를 획득할 수 있다. 또는, 상기 710 화면은 서비스 장치(200)로부터 수신한 이미지 검색과 관련한 가상 페이지를 기반으로 쿼리 이미지(701)를 획득할 수 있는 기능을 포함한 화면이 될 수 있다. 사용자는 카메라(190)를 이용하여 쿼리 이미지를 획득하거나 또는 메모리(130)에 저장된 이미지를 쿼리 이미지로서 선택할 수 있다. 상기 710 화면은 쿼리 이미지(701)를 기반으로 이미지 검색(또는 상품 검색)을 요청할 수 있는 검색 요청 항목(711)을 포함할 수 있다. 상기 검색 요청 항목(711)이 선택되면, 상기 사용자 단말(100)은 서비스 장치(200)는 쿼리 이미지(701)를 전송하면서, 이미지 검색을 요청할 수 있다. Referring to FIG. 7, as in screen 710, the user terminal 100 may obtain a query image 701. Alternatively, the screen 710 may be a screen including a function for acquiring the query image 701 based on the virtual page related to the image search received from the service device 200. The user may acquire a query image by using the camera 190 or select an image stored in the memory 130 as the query image. The screen 710 may include a search request item 711 that may request an image search (or a product search) based on the query image 701. When the search request item 711 is selected, the user terminal 100 may request an image search while transmitting the query image 701.

서비스 장치(200)는 사용자 단말(100)로부터 쿼리 이미지(701)를 수신하면, 수신된 쿼리 이미지(701)에서 검색용 객체(702)를 추출하고, 추출된 검색용 객체(702)에 대응하는 검색 결과를 수집하여 사용자 단말(100)에 제공할 수 있다. 이에 따라, 사용자 단말(100)은 720 화면에서와 같이 검색 결과를 출력할 수 있다. 상기 720 화면은 도시된 바와 같이, 검색용 객체(702)가 배치된 영역, 검색 결과로서 제1 상품 정보(721)(또는 제1 상품 관련 이미지)가 표시된 영역을 포함할 수 있다. 상기 제1 상품 정보(721)는 예컨대, 상기 신발과 관련하여 검색된 상품 정보들 중 가장 낮은 상품 가격으로 등록된 상품 정보일 수 있다. 상기 720 화면은 추가 정보(235)를 요청할 수 있도록 추가 정보 항목(712)을 포함할 수 있다. When the service device 200 receives the query image 701 from the user terminal 100, the service apparatus 200 extracts the search object 702 from the received query image 701 and corresponds to the extracted search object 702. The search results may be collected and provided to the user terminal 100. Accordingly, the user terminal 100 may output a search result as shown in the 720 screen. As illustrated, the 720 screen may include an area in which the search object 702 is disposed and an area in which the first product information 721 (or the first product related image) is displayed as a search result. The first commodity information 721 may be, for example, commodity information registered at the lowest commodity price among commodity information searched for the shoe. The 720 screen may include an additional information item 712 to request additional information 235.

상기 추가 정보 항목(712)이 선택되면, 사용자 단말(100)은 서비스 장치(200)에 추가 정보를 요청하는 메시지를 전송할 수 있다. 상기 서비스 장치(200)는 제1 상품 정보(721)에 포함되지 않은 다른 정보를 포함한 상품 정보들을 검색하고, 사용자 단말(100)에 제공할 수 있다. 이에 따라, 사용자 단말(100)은 730 화면에서와 같이 제2 상품 정보(722)(또는 제2 상품 관련 이미지) 및 제3 상품 정보(723)(또는 제3 상품 관련 이미지)를 더 출력할 수 있다. 상기 제2 상품 정보(722)는 예컨대, 상기 제1 상품 정보(721)를 제공한 정보 제공 장치와 다른 정보 제공 장치가 등록한 상품 정보일 수 있다. 상기 제3 상품 정보(723)는 상기 제1 상품 정보(721)를 제공한 정보 제공 장치 및 상기 제2 상품 정보(722)를 제공한 정보 제공 장치와 다른 정보 제공 장치가 등록한 상품 정보일 수 있다. 상기 제2 상품 정보(722)는 상기 제1 상품 정보(721)와 동일한 가격 또는 상대적으로 제1 상품 정보(721)에 매겨진 상품 가격보다 높은 가격 정보를 포함할 수 있다. 상기 제3 상품 정보(723)는 상기 제2 상품 정보(722)와 동일한 가격 또는 상대적으로 제2 상품 정보(722)에 매겨진 상품 가격보다 높은 가격 정보를 포함할 수 있다.When the additional information item 712 is selected, the user terminal 100 may transmit a message for requesting additional information to the service device 200. The service device 200 may search for product information including other information not included in the first product information 721 and provide the same to the user terminal 100. Accordingly, the user terminal 100 may further output the second product information 722 (or the second product related image) and the third product information 723 (or the third product related image) as shown on the screen 730. have. The second commodity information 722 may be, for example, commodity information registered by an information providing device other than the information providing device providing the first product information 721. The third product information 723 may be product information registered by an information providing device providing the first product information 721 and an information providing device different from the information providing device providing the second product information 722. . The second commodity information 722 may include price information that is the same as the first commodity information 721 or relatively higher than commodity prices assigned to the first commodity information 721. The third commodity information 723 may include price information equal to the second commodity information 722 or higher than commodity prices charged in the second commodity information 722.

다른 예시로서, 추가 정보(235) 요청 시, 서비스 장치(200)는 제1 상품 정보(721)에 등록되지 않은 텍스트 정보를 수집하고, 이를 사용자 단말(100)에 제공할 수 있다. 예컨대, 상기 서비스 장치(200)는 제1 상품 정보(721)와 다른 제2 상품 정보에 포함된 텍스트 정보 중 상기 제1 상품 정보에 포함된 텍스트 정보와 중복되지 않은 정보를 수집하여 사용자 단말(100)에 제공할 수 있다. 이에 따라, 상기 사용자 단말(100)은 740 화면에서와 같이, 별도의 텍스트 정보(741)를 출력할 수 있다. 이에 따라, 740 화면은 예컨대, 검색용 객체(702), 제1 상품 정보(721)(예: 상품 관련 이미지) 및 텍스트 정보(741)로 구성될 수 있다. As another example, when the additional information 235 is requested, the service device 200 may collect text information not registered in the first product information 721 and provide it to the user terminal 100. For example, the service device 200 collects information that is not duplicated with text information included in the first product information among text information included in the first product information 721 and other second product information, and thus the user terminal 100. ) Can be provided. Accordingly, the user terminal 100 may output additional text information 741 as shown in screen 740. Accordingly, the screen 740 may include, for example, a search object 702, first product information 721 (eg, a product related image), and text information 741.

한편, 상술한 설명에서는 사용자 입력에 따라 별도의 추가 정보(235)를 서비스 장치(200)가 제공하는 것으로 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 예컨대, 상기 서비스 장치(200)는 쿼리 이미지(701) 수신 시, 추가 정보까지 포함된 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이 경우, 사용자 단말(100)이 디스플레이(160)는 710 화면 상태에서, 730 화면 상태로 화면이 변경되거나 740 화면 상태로 화면이 변경될 수도 있다. Meanwhile, in the above description, the service device 200 provides additional additional information 235 according to a user input, but the present invention is not limited thereto. For example, when receiving the query image 701, the service device 200 may provide a search result including additional information to the user terminal 100. In this case, the display 160 of the user terminal 100 may change the screen to the 730 screen state or to the 740 screen state in the 710 screen state.

본 발명은 이미지 검색 분야에 적용되는 것으로서, 특히, 이미지 검색과 관련한 정보 제공 방법과 관련된다.The present invention applies to the field of image retrieval, and more particularly, to a method of providing information related to image retrieval.

이러한, 본 발명은 동일 종류의 상품 정보들을 그룹핑하여 사용자 단말에 제공하거나, 제공된 상품 정보와는 다른 추가 정보들만을 제공함으로써, 사용자는 특정 상품에 대한 다양한 정보를 신속 및 용이하게 확인할 수 있다. In the present invention, by grouping the same type of product information to provide to the user terminal, or by providing only additional information different from the provided product information, the user can quickly and easily identify a variety of information about the specific product.

10: 서비스 시스템
50: 네트워크
100: 사용자 단말
110: 통신 회로
120: 입력 장치
130: 메모리
140: 디스플레이
150: 프로세서
200: 서비스 장치
210: 서버 통신 회로
230: 서버 메모리
250: 서버 프로세서
251: 정보 수집부
253: 정보 분류부
255: 검색 지원부
300: 정보 제공 장치10: service system
50: network
100: user terminal
110: communication circuit
120: input device
130: memory
140: display
150: processor
200: service device
210: server communication circuit
230: server memory
250: server processor
251: information collector
253: information classification unit
255: search support
300: information providing device

Claims

Server communication circuitry;
A server processor operatively connected to the server communication circuitry;
The server processor
Establish a communication channel with a user terminal based on the server communication circuit,
Receiving a query image related to an image search from the user terminal,
Collecting the at least some content as additional information from the first product information corresponding to the search object included in the query image and second product information of the same kind as the first product information and at least partially different from each other;
And at least one of the first product information and the additional information is transmitted to the user terminal.

The method of claim 1,
The server processor
And the product information including the lowest price information of the same kind of product information is detected as the first product information.

The method of claim 2,
The server processor
And a product information including price information which is lower than the price information of the first product information among the same kind of product information as the second product information.

The method of claim 1,
The additional information above
At least one other product related image different from the product related images included in the first product information; And
And at least one of text information included in the first product information and at least one other text information.

The method of claim 1,
The server processor
Providing the first product information to the user terminal,
And when the additional information request is received from the user terminal, transmitting the additional information to the user terminal.

Server communication circuitry;
A server processor operatively connected to the server communication circuitry;
The server processor
Establish a communication channel with a user terminal based on the server communication circuit,
Receiving a query image related to an image search from the user terminal,
Generating integrated product information incorporating first product information corresponding to the search object included in the query image and second product information of the same kind and at least partially different from each other,
And the integrated product information is transmitted to the user terminal.

The method of claim 6,
The server processor
And generating integrated product related images excluding duplicate images among the product related images included in the first product information and the product related images included in the second product information.

The method of claim 6,
The server processor
And generating integrated text information excluding duplicate information among text information included in the first product information and text information included in the second product information.

The method of claim 6,
The server processor
And the product information including the lowest price information of the same kind of product information is selected as the first product information.

The method of claim 9,
The server processor
And the product information including price information which is lower than the price information of the first product information among the same kind of product information as the second product information.

Service unit,
Establishing a communication channel with the user terminal based on the server communication circuit;
Receiving a query image related to an image search from the user terminal;
Collecting the at least some content as additional information from first commodity information corresponding to the search object included in the query image and second commodity information of the same kind as at least some of the first commodity information and different from each other;
And transmitting at least one of the first product information and the additional information to the user terminal.

The method of claim 11,
The collecting step
Selecting the product information including the lowest price information of the same kind of product information as the first product information.

Service unit,
Establishing a communication channel with the user terminal based on the server communication circuit;
Receiving a query image related to an image search from the user terminal;
Generating integrated product information incorporating first product information corresponding to a search object included in the query image and second product information of the same kind and at least partially different from each other;
And transmitting the integrated product information to the user terminal.

The method of claim 13,
The generating step
Generating integrated product related images excluding overlapping images among the product related images included in the first product information and the product related images included in the second product information; image searching comprising: How to provide information in relation to