KR102536057B1 - Providing Method of summary information for an image searching and service device thereof - Google Patents

Providing Method of summary information for an image searching and service device thereof Download PDF

Info

Publication number
KR102536057B1
KR102536057B1 KR1020180101347A KR20180101347A KR102536057B1 KR 102536057 B1 KR102536057 B1 KR 102536057B1 KR 1020180101347 A KR1020180101347 A KR 1020180101347A KR 20180101347 A KR20180101347 A KR 20180101347A KR 102536057 B1 KR102536057 B1 KR 102536057B1
Authority
KR
South Korea
Prior art keywords
information
product
product information
summary information
user terminal
Prior art date
Application number
KR1020180101347A
Other languages
Korean (ko)
Other versions
KR20200024540A (en
Inventor
김기현
김하윤
Original Assignee
십일번가 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 십일번가 주식회사 filed Critical 십일번가 주식회사
Priority to KR1020180101347A priority Critical patent/KR102536057B1/en
Publication of KR20200024540A publication Critical patent/KR20200024540A/en
Application granted granted Critical
Publication of KR102536057B1 publication Critical patent/KR102536057B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 이미지 검색과 요약 정보 제공 방법 및 이를 지원하는 서비스 장치를 개시한다. 상기 서비스 장치는 서버 통신 회로 및 상기 서버 통신 회로와 기능적으로 연결되는 서버 프로세서를 포함할 수 있다. 상기 서버 프로세서는 상기 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하고, 상기 사용자 단말로부터 쿼리 이미지를 수신하고, 상기 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 복수의 상품 정보들을 검출하고, 상기 상품 정보들에 대한 요약 정보를 수집하되, 지정된 조건에 따라 포함된 정보량이 다른 요약 정보들을 수집하고, 상기 수집된 요약 정보들을 상기 사용자 단말에 제공하도록 설정될 수 있다.The present invention discloses an image search and summary information providing method and a service device supporting the same. The service device may include a server communication circuit and a server processor functionally connected to the server communication circuit. The server processor forms a communication channel with a user terminal based on the server communication circuit, receives a query image from the user terminal, and provides a plurality of product information corresponding to at least one search object included in the query image. Detect and collect summary information on the product information, collect summary information with different amounts of information included according to specified conditions, and provide the collected summary information to the user terminal.

Description

이미지 검색을 위한 요약 정보 제공 방법 및 이를 지원하는 서비스 장치{Providing Method of summary information for an image searching and service device thereof}Method of providing summary information for image search and service device supporting the same

본 발명은 이미지 검색과 관련하여 다양한 타입의 요약 정보를 제공할 수 있는 이미지 검색과 관련한 정보 제공 방법 및 이를 지원하는 서비스 장치에 관한 것이다.The present invention relates to a method for providing information related to image search capable of providing various types of summary information related to image search, and a service device supporting the same.

인터넷 사용이 보편화되면서 사용자들은 인터넷 검색을 통하여 다양한 정보를 획득할 수 있게 되었다. 즉, 사용자들은 인터넷에의 접속이 가능한 개인용 컴퓨터 등의 단말 장치를 통해 인터넷 검색 사이트에 접속한 후, 뉴스, 지식, 게임, 커뮤니티 등과 관련된 각종 컨텐츠를 검색할 수 있게 되었다. As the use of the Internet has become common, users have been able to obtain various information through Internet searches. That is, after accessing an Internet search site through a terminal device such as a personal computer capable of accessing the Internet, users can search for various contents related to news, knowledge, games, and communities.

한편, 통신 기술의 발달 및 저장 장치의 대용량화에 따라, 인터넷 상에는 텍스트 형식의 문서뿐만 아니라, 사진, 동영상 등과 같은 이미지를 포함하는 문서들의 검색 비율이 급격히 증가하게 되었는데, 근래에 급격히 확산되고 있는 개인 블로그 문화의 영향으로 이미지 이용의 증가 속도가 더욱 심화되고 있다. 이에 따라, 인터넷 상에 다양한 형태로 저장된 이미지에 대한 검색 수요가 급증하고 있다. On the other hand, with the development of communication technology and the increase in the capacity of storage devices, the search rate for documents containing images such as photos and videos as well as text-type documents on the Internet has rapidly increased. Due to the influence of culture, the rate of increase in the use of images is intensifying. Accordingly, a search demand for images stored in various forms on the Internet is rapidly increasing.

한편, 사용자 단말의 이미지 검색 요청에 대응하여 서비스 장치가 다양한 이미지 검색 결과를 제공하고 있다. 이때 상기 서비스 장치가 제공하는 이미지 검색 결과에는 많은 양의 이미지가 포함되어 있기 때문에 이미지 검색과 관련하여 많은 양의 데이터 송수신이 요구된다. 이에 따라, 종래 이미지 검색 서비스는 많은 양의 데이터 송수신으로 인하여 서비스 운용 비용을 크게 요구하는 문제가 있었다. Meanwhile, a service device provides various image search results in response to a user terminal's image search request. At this time, since the image search result provided by the service device includes a large amount of images, transmission and reception of a large amount of data is required in relation to the image search. Accordingly, the conventional image search service has a problem of requiring a high service operation cost due to transmission and reception of a large amount of data.

미국 등록 특허 9877056호 (명칭: Compressed media with still images selected from a video stream)US Patent No. 9877056 (Title: Compressed media with still images selected from a video stream)

본 발명은 이미지 검색과 관련하여, 검색 결과로서 다양한 타입의 요약 정보를 상황에 따라 적응적으로 운용함으로써, 정보 전달 시 데이터 양을 최적화하고, 그에 따라 정보 전달 속도를 개선할 수 있도록 하는 이미지 검색을 위한 요약 정보 제공 방법 및 이를 지원하는 서비스 장치를 제공하고자 한다.In relation to image retrieval, the present invention adaptively operates various types of summary information as a search result according to circumstances, thereby optimizing the amount of data during information transfer and thereby improving the speed of information transfer. It is intended to provide a summary information providing method and a service device supporting the same.

본 발명의 실시 예에 따른 서비스 장치는 서버 통신 회로 및 상기 서버 통신 회로와 기능적으로 연결되는 서버 프로세서를 포함할 수 있다. 상기 서버 프로세서는 상기 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하고, 상기 사용자 단말로부터 쿼리 이미지를 수신하고, 상기 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 적어도 하나의 상품 정보를 검출하고, 상기 적어도 하나의 상품 정보에 대한 요약 정보를 수집하되, 지정된 조건에 따라 포함된 정보량이 다른 적어도 하나의 요약 정보를 수집하고, 상기 수집된 적어도 하나의 요약 정보를 상기 사용자 단말에 제공하도록 설정될 수 있다.A service device according to an embodiment of the present invention may include a server communication circuit and a server processor functionally connected to the server communication circuit. The server processor forms a communication channel with a user terminal based on the server communication circuit, receives a query image from the user terminal, and at least one product information corresponding to at least one search object included in the query image. Detects, collects summary information about the at least one product information, collects at least one summary information with a different amount of information included according to a specified condition, and provides the collected at least one summary information to the user terminal. can be set to

예를 들어, 상기 서버 프로세서는 상기 검출된 상품 정보들의 개수를 확인하고, 상기 상품 정보들의 개수가 지정된 개수 이상이면 상기 상품 정보들에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집하고, 상기 상품 정보들의 개수가 지정된 개수 미만이면 상기 상품 정보들에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하도록 설정될 수 있다.For example, the server processor checks the number of pieces of product information detected, and if the number of pieces of product information is greater than or equal to a specified number, collects abbreviated summary information with a relatively small amount of information about the pieces of product information, and collects the product information. If the number of items is less than the specified number, it may be set to collect detailed summary information with a relatively large amount of information about the product information.

또는, 상기 서버 프로세서는 상기 적어도 하나의 상품 정보와 상기 검색용 객체와의 유사도를 확인하고, 상기 유사도의 크기에 따라 정보량이 다른 요약 정보를 수집하도록 설정될 수 있다.Alternatively, the server processor may be configured to check the similarity between the at least one product information and the object for search, and to collect summary information having a different amount of information according to the magnitude of the similarity.

여기서, 상기 서버 프로세서는 상기 상품 정보와 상기 검색용 객체 간의 유사도가 클수록 해당 상품 정보에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 상기 상품 정보와 상기 검색용 객체 간의 유사도가 작을수록 해당 상품 정보에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집하도록 설정될 수 있다.Here, the server processor collects detailed summary information with a relatively large amount of information about the corresponding product information as the similarity between the product information and the search object increases, and as the similarity between the product information and the search object decreases, the corresponding product It can be set to collect abbreviated summary information with a relatively small amount of information about information.

또는, 상기 서버 프로세서는 상기 상품 정보와 상기 검색용 객체 간의 유사도가 지정된 값 이상인 상품 정보에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 상기 상품 정보와 상기 검색용 객체 간의 유사도가 지정된 값 미만인 상품 정보에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집하도록 설정될 수 있다.Alternatively, the server processor collects detailed summary information with a relatively large amount of information for product information in which the similarity between the product information and the object for search is greater than or equal to a specified value, and the similarity between the product information and the object for search is less than the specified value It may be set to collect abbreviated summary information with a relatively small amount of information about product information.

한편, 상기 서버 프로세서는 상기 상품 정보들의 가격 정보를 확인하고, 상기 가격이 클수록 상품 정보들에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집하고, 상기 가격이 작을수록 상품 정보들에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하도록 설정될 수 있다.Meanwhile, the server processor checks price information of the product information, collects abbreviated summary information with a relatively small amount of information on the product information as the price increases, and collects abbreviated summary information with a relatively small amount of information on the product information as the price decreases. It can be set to collect this much detailed summary information.

다른 예시로, 상기 서버 프로세서는 상기 상품 정보들의 수량 정보를 확인하고, 지정된 개수 이상의 수량을 가진 상품 정보들에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 지정된 개수 미만의 수량을 가진 상품 정보들에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집하도록 설정될 수 있다.As another example, the server processor checks quantity information of the product information, collects detailed summary information having a relatively large amount of information for product information having a quantity equal to or greater than the specified number, and product information having a quantity less than the specified number. It can be set to collect abbreviated summary information with a relatively small amount of information about .

한편, 상기 서버 프로세서는 특정 요약 정보를 선택하는 입력 신호를 상기 사용자 단말로부터 수신하면, 상기 선택된 요약 정보에 대응하는 상품 정보를 상세 정보로서 상기 사용자 단말에 전송하도록 설정될 수 있다.Meanwhile, when receiving an input signal for selecting specific summary information from the user terminal, the server processor may be configured to transmit product information corresponding to the selected summary information as detailed information to the user terminal.

본 발명의 실시 예에 따른 이미지 검색과 관련한 요약 정보 제공 방법은, 서비스 장치가, 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하는 단계, 상기 사용자 단말로부터 쿼리 이미지를 수신하는 단계, 상기 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 적어도 하나의 상품 정보를 검출하는 단계, 상기 적어도 하나의 상품 정보에 대한 요약 정보를 수집하되, 지정된 조건에 따라 포함된 정보량이 다른 적어도 하나의 요약 정보를 수집하는 단계, 상기 수집된 적어도 하나의 요약 정보를 상기 사용자 단말에 제공하는 단계를 포함할 수 있다.A method for providing summary information related to image search according to an embodiment of the present invention includes forming a communication channel with a user terminal based on a server communication circuit by a service device, receiving a query image from the user terminal, and the query Detecting at least one product information corresponding to at least one search object included in the image, collecting summary information about the at least one product information, and collecting at least one summary information with a different amount of information according to a specified condition. The method may include collecting information and providing the collected at least one piece of summary information to the user terminal.

본 발명은 이미지 검색을 위한 요약 정보 제공 기능과 관련하여, 검색 결과로서 다양한 타입의 요약 정보를 제공함으로써, 정보 제공 시, 데이터 양을 저감할 수 있고, 또한 상대적으로 적은 양의 데이터 송수신을 기반으로 데이터 속도 개선을 지원할 수 있다.In relation to the function of providing summary information for image search, the present invention provides various types of summary information as a search result, thereby reducing the amount of data when providing information, and based on a relatively small amount of data transmission and reception. It can support data rate improvement.

또한, 본 발명은 요약 정보 조건에 따라 차등적으로 운용함으로써 정보 인식률을 높이고, 사용자가 필요로 하는 정보 습득을 보다 용이하게 할 수 있도록 지원한다. In addition, the present invention increases the information recognition rate by operating differentially according to summary information conditions, and supports the user to more easily acquire information required.

기타, 본 발명의 다른 효과들은 후술하는 다양한 실시 예들에 의해 제공될 수 있다.Other effects of the present invention may be provided by various embodiments to be described later.

도 1은 본 발명의 실시 예에 따른 이미지 검색 시스템이 적용된 환경의 일 예를 나타낸 도면이다.
도 2는 본 발명의 실시 예에 따른 사용자 단말 구성의 일 예를 나타낸 도면이다.
도 3은 본 발명의 실시 예에 따른 서비스 장치 구성의 일 예를 나타낸 도면이다.
도 4는 본 발명의 실시 예에 따른 요약 정보 생성과 관련한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.
도 5는 본 발명의 실시 예에 따른 유사도에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.
도 6은 본 발명의 실시 예에 따른 검색 결과에 따른 차등적 요약 정보 제공을 위한 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.
도 7은 본 발명의 실시 예에 따른 검색 결과 내용에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.
1 is a diagram showing an example of an environment to which an image retrieval system according to an embodiment of the present invention is applied.
2 is a diagram showing an example of a configuration of a user terminal according to an embodiment of the present invention.
3 is a diagram illustrating an example of a configuration of a service device according to an embodiment of the present invention.
4 is a diagram illustrating an example of a method of operating a service device related to generation of summary information according to an embodiment of the present invention.
5 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to similarity according to an embodiment of the present invention.
6 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to a search result according to an embodiment of the present invention.
7 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to search result contents according to an embodiment of the present invention.

이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.Hereinafter, various embodiments of the present invention will be described with reference to the accompanying drawings. However, it should be understood that this is not intended to limit the present invention to specific embodiments, and includes various modifications, equivalents, and/or alternatives of the embodiments of the present invention. In connection with the description of the drawings, like reference numerals may be used for like elements.

도 1은 본 발명의 실시 예에 따른 이미지 검색 시스템이 적용된 환경의 일 예를 나타낸 도면이다.1 is a diagram showing an example of an environment to which an image retrieval system according to an embodiment of the present invention is applied.

도 1을 참조하면, 본 발명의 실시 예에 따른 서비스 시스템(10)은 적어도 하나의 단말을 포함하는 사용자 단말(100), 서비스 장치(200), 사업자 단말(300) 및 네트워크(50)를 포함할 수 있다. 여기서, 상기 사업자 단말(300)은 하나의 단말로 도시하였으나, 본 발명이 이에 한정되는 것은 아니다. 상기 사업자 단말(300)은 상기 서비스 장치(200)에 상품 정보를 등록하는 복수개의 단말을 포함할 수도 있다. 또한, 상기 사업자 단말(300) 및 상기 사용자 단말(100)은 역할에 따라 각각 구분한 것으로 본 발명이 이에 한정되는 것은 아니다. 예컨대, 상기 사업자 단말(300)은 상기 서비스 장치(200)에 상품 정보를 등록하는 입장에서 사업자 단말이고, 상기 서비스 장치(200)에서 이미지 검색을 기반으로 상품 정보를 검색하는 경우 사용자 단말이 될 수 있다. 이와 동일하게, 상기 사용자 단말(100)은 사용자 조작에 따라 메모리에 저장된 상품 정보를 서비스 장치(200)에 등록하는 경우 사업자 단말로서 동작할 수 있다. Referring to FIG. 1 , a service system 10 according to an embodiment of the present invention includes a user terminal 100 including at least one terminal, a service device 200, an operator terminal 300, and a network 50. can do. Here, the operator terminal 300 is illustrated as one terminal, but the present invention is not limited thereto. The operator terminal 300 may include a plurality of terminals registering product information in the service device 200 . In addition, the operator terminal 300 and the user terminal 100 are classified according to roles, and the present invention is not limited thereto. For example, the operator terminal 300 is an operator terminal from the point of view of registering product information in the service device 200, and may be a user terminal when product information is retrieved based on image search in the service device 200. there is. Similarly, the user terminal 100 may operate as an operator terminal when registering product information stored in a memory in the service device 200 according to a user manipulation.

상기 본 발명이 적용되는 네트워크(50)는, 인터넷 망과 같은 IP 기반의 유선 통신망뿐만 아니라, LTE(Long term evolution) 망, WCDMA 망과 같은 이동통신망, Wi-Fi망과 같은 다양한 종류의 무선망, 및 이들의 조합으로 이루어질 수 있다. 즉, 본 발명에 따른 이미지 검색 기능 제공 시스템은, 유무선 통신망에 구별 없이 모두 적용될 수 있다. 구체적으로 상기 네트워크(50)는 서비스 장치(200)와 사용자 단말(100) 간의 통신 채널, 서비스 장치(200)와 사업자 단말(300) 간의 통신 채널을 형성할 수 있다. 예를 들어, 상기 네트워크(50)는 서비스 장치(200) 또는 사용자 단말(100), 또는 사업자 단말(300)가 운용할 수 있는 3G, 4G, 5G 무선 이동 통신 방식 중 적어도 하나의 방식을 지원할 수 있다. 또는, 상기 네트워크(50)는 유선 기반으로 상기 사용자 단말(100)과 상기 서비스 장치(200) 간의 통신 채널 또는 서비스 장치(200)와 사업자 단말(300) 간의 통신 채널을 형성할 수 있다. 이러한 네트워크(50)는 현재 개발되어 상용화되었거나 향후 개발되어 상용화될 각종 유선망, 무선망 및 이들의 결합망을 포함하는 개념으로 해석되어야 한다.The network 50 to which the present invention is applied is not only an IP-based wired communication network such as an Internet network, but also a mobile communication network such as a long term evolution (LTE) network and a WCDMA network, and various types of wireless networks such as a Wi-Fi network , and combinations thereof. That is, the system for providing an image search function according to the present invention can be applied to both wired and wireless communication networks without distinction. Specifically, the network 50 may form a communication channel between the service device 200 and the user terminal 100 and a communication channel between the service device 200 and the operator terminal 300 . For example, the network 50 can support at least one of 3G, 4G, and 5G wireless mobile communication schemes that can be operated by the service device 200, the user terminal 100, or the operator terminal 300. there is. Alternatively, the network 50 may form a communication channel between the user terminal 100 and the service device 200 or a communication channel between the service device 200 and the operator terminal 300 on a wired basis. Such a network 50 should be interpreted as a concept including various wired networks, wireless networks, and combinations thereof that are currently developed and commercialized or will be developed and commercialized in the future.

상기 사업자 단말(300)은 서비스 장치(200)와 통신 채널을 형성하고, 서비스 장치(200) 요청에 따라 또는 사업자 단말의 관리자(예: Seller 또는 상품 판매 업자)의 조작에 따라 상품 정보를 서비스 장치(200)에 제공할 수 있다. 사업자 단말(300)은 다양한 종류의 상품들에 대한 상품 정보를 서비스 장치(200)에 제공할 수 있다. 또는, 복수의 사업자 단말(300)은 동일 종류의 상품에 대해 적어도 일부가 다른 상품 정보를 서비스 장치(200)에 제공할 수도 있다. 상기 사업자 단말(300)이 서비스 장치(200)에 제공하는 상품 정보는 예컨대, 적어도 하나의 상품 관련 이미지 및 상품 관련 설명을 포함하는 텍스트 정보를 포함할 수 있다. 상기 상품 관련 이미지는 예컨대, 상품 피사체를 다양한 각도에서 촬영한 촬영 이미지들을 포함할 수 있다. 예컨대, 상기 상품 관련 이미지는 상품 피사체의 전면 이미지, 후면 이미지, 배면 이미지, 측면 이미지 등을 포함하며, 또한 다양한 각도에서 촬영한 사시도를 포함할 수 있다. 상기 텍스트 정보는 예컨대, 상품 용도나 이용 설명, 상품의 제원, 상품의 가격 정보, 상품의 수량 정보 등을 포함할 수 있다. 또한, 상기 텍스트 정보는 상기 상품의 인기도 또는 인지도(예: 특정 값 이상의 방송 시청률을 기록한 방송 컨텐츠에 등장한 횟수나 등장한 시간 등을 통해 계산된 값) 등을 포함할 수도 있다.The operator terminal 300 forms a communication channel with the service device 200, and provides product information according to a request of the service device 200 or an operation of a manager of the operator terminal (eg, a seller or a product seller). (200) can be provided. The operator terminal 300 may provide product information on various types of products to the service device 200 . Alternatively, the plurality of service provider terminals 300 may provide the service device 200 with at least partially different product information for the same type of product. The product information provided by the operator terminal 300 to the service device 200 may include, for example, text information including at least one product-related image and product-related description. The product-related image may include, for example, photographed images of a product subject at various angles. For example, the product-related image includes a front image, a rear image, a rear image, a side image, and the like of a product subject, and may also include perspective views taken from various angles. The text information may include, for example, product purpose or usage description, product specifications, product price information, product quantity information, and the like. In addition, the text information may include popularity or awareness of the product (eg, a value calculated through the number of appearances or the time of appearance in broadcast contents recorded with broadcast ratings higher than a specific value), and the like.

상기 사용자 단말(100)은 네트워크(50)를 통하여 서비스 장치(200)와 통신 채널을 형성할 수 있다. 예를 들어, 상기 사용자 단말(100)은 이미지 검색 기능과 관련하여 서비스 장치(200)와 통신 채널을 형성할 수 있다. 이와 관련하여, 상기 사용자 단말(100)은 이미지 검색 기능과 관련한 어플리케이션 또는 이미지 검색 기능을 제공할 수 있는 웹 브라우저를 저장 및 설치할 수 있다. 사용자 단말(100)은 서비스 장치(200)로부터 이미지 검색 기능과 관련한 데이터 예컨대, 이미지 검색 관련 가상 페이지 또는 웹 페이지를 서비스 장치(200)로부터 수신하고, 출력할 수 있다. 또는, 사용자 단말(100)은 이미지 검색 기능과 관련한 어플리케이션 실행 화면을 출력할 수 있다. 사용자 단말(100)은 이미지 검색과 관련한 쿼리 이미지(예: 카메라를 이용하여 촬영한 이미지 또는 메모리에 기 저장된 이미지 등)를 서비스 장치(200)에 전송하고, 서비스 장치(200)로부터 검색 결과를 수신하여 저장 및 표시할 수 있다. 특히, 본 발명의 사용자 단말(100)은 서비스 장치(200)로부터 쿼리 이미지에 대응하는 특정 타입의 요약 정보를 수신하고, 출력할 수 있다. 또한, 상기 사용자 단말(100)은 출력된 요약 정보 중 특정 상품 정보에 대한 상세 정보 요청을 사용자 조작에 따라 서비스 장치(200)에 요청하고, 서비스 장치(200)로부터 상품에 대한 상세 정보를 수신하여 출력할 수 있다. 상기 사용자 단말(100)에 출력되는 요약 정보는 예컨대, 상품 관련 이미지 및 텍스트가 출력되는 화면을 캡쳐한 캡쳐 이미지이거나 또는, 상기 상품 정보의 적어도 일부로부터 추출된 이미지 및 텍스트 정보 중 적어도 하나를 포함할 수 있다. 상술한 사용자 단말(100)은 이미지 검색이 가능한 전자 장치로서, 스마트폰이나 태블릿 PC, 데스크탑 PC, 통신 회로가 장착된 카메라 등 다양한 장치들이 될 수 있다. The user terminal 100 may form a communication channel with the service device 200 through the network 50 . For example, the user terminal 100 may form a communication channel with the service device 200 in relation to an image search function. In this regard, the user terminal 100 may store and install an application related to an image search function or a web browser capable of providing an image search function. The user terminal 100 may receive data related to an image search function from the service device 200, for example, a virtual page or a web page related to image search from the service device 200, and output the data. Alternatively, the user terminal 100 may output an application execution screen related to an image search function. The user terminal 100 transmits a query image related to image search (eg, an image taken using a camera or an image pre-stored in a memory) to the service device 200 and receives a search result from the service device 200. can be saved and displayed. In particular, the user terminal 100 of the present invention may receive and output a specific type of summary information corresponding to a query image from the service device 200 . In addition, the user terminal 100 requests detailed information on specific product information from among the output summary information to the service device 200 according to user manipulation, receives detailed information on the product from the service device 200, and can be printed out. The summary information output to the user terminal 100 may include, for example, a captured image obtained by capturing a screen on which a product-related image and text are output, or at least one of image and text information extracted from at least a portion of the product information. can The above-described user terminal 100 is an electronic device capable of image search, and may be various devices such as a smart phone, a tablet PC, a desktop PC, and a camera equipped with a communication circuit.

상기 서비스 장치(200)는 상기 네트워크(50)를 통하여 사용자 단말(100)과 통신 채널을 형성하고, 사용자 단말(100)의 이미지 검색 기능을 지원할 수 있다. 예를 들어, 서비스 장치(200)는 연결된 사용자 단말(100)에 이미지 검색 관련 가상 페이지를 제공하고, 사용자 단말(100)로부터 적어도 하나의 객체를 포함하는 쿼리 이미지를 수신할 수 있다. 상기 서비스 장치(200)는 수신된 쿼리 이미지를 기반으로 이미지 검색을 수행하고, 검색 결과를 사용자 단말(100)에 제공할 수 있다. 특히, 상기 서비스 장치(200)는 사업자 단말(300)로부터 다양한 상품 정보를 제공받고, 수신된 상품 정보에 대한 적어도 하나의 타입의 요약 정보를 생성한 후, 이를 기반으로 상품 관련 이미지 DB(Database)를 갱신할 수 있다. 이 과정에서, 상기 서비스 장치(200)는 상품 정보에 포함된 상품 관련 이미지들 및 텍스트 정보의 양을 조절하여 요약 정보의 상세도를 다르게 할 수 있다. 예컨대, 서비스 장치(200)는 상대적으로 가장 적은 상품 정보를 기반으로 하는 약식 요약 정보, 상기 약식 요약 정보보다는 많은 상품 정보를 기반으로 하는 중간 요약 정보, 상대적으로 가장 많은 상품 정보를 기반으로 하는 상세 요약 정보를 생성할 수 있다. 상기 서비스 장치(200)는 상기 사용자 단말(100)의 이미지 검색 요청 시, 다양한 조건에 따라 특정 타입의 요약 정보를 사용자 단말(100)에 제공할 수 있다. The service device 200 may form a communication channel with the user terminal 100 through the network 50 and support an image search function of the user terminal 100 . For example, the service device 200 may provide a virtual page related to image search to the connected user terminal 100 and receive a query image including at least one object from the user terminal 100 . The service device 200 may perform an image search based on the received query image and provide the search result to the user terminal 100 . In particular, the service device 200 receives various product information from the operator terminal 300, generates at least one type of summary information for the received product information, and creates a product-related image DB (Database) based on this. can be updated. In this process, the service device 200 may adjust the amount of product-related images and text information included in the product information to make the summary information different in detail. For example, the service device 200 provides abbreviated summary information based on relatively little product information, intermediate summary information based on more product information than the short summary information, and detailed summary information based on relatively most product information. information can be generated. The service device 200 may provide summary information of a specific type to the user terminal 100 according to various conditions when the user terminal 100 requests an image search.

상술한 바와 같이, 본 발명의 실시 예에 따른 이미지 검색과 관련한 요약 정보 제공 시스템은 사업자 단말(300)들이 제공한 상품 정보들을 기반으로 정보량이 다른 요약 정보들을 생성하고, 이미지 검색 조건이나 상황에 따라 특정 타입의 요약 정보를 사용자 단말(100)에 제공함으로써, 정보 전달 기능은 유지하면서, 정보 전달 속도를 높이거나 또는 사용자의 정보 인식 속도를 개선할 수 있다.As described above, the system for providing summary information related to image search according to an embodiment of the present invention generates summary information with different amounts of information based on product information provided by service provider terminals 300, and depending on image search conditions or circumstances. By providing a specific type of summary information to the user terminal 100, it is possible to increase the information transfer speed or improve the user's information recognition speed while maintaining the information transfer function.

이하, 상술한 사용자 단말(100) 및 서비스 장치(200)의 세부 구성과 운용에 대하여 다양한 예를 설명하기로 한다.Hereinafter, various examples will be described with respect to the detailed configuration and operation of the user terminal 100 and the service device 200 described above.

도 2는 본 발명의 실시 예에 따른 사용자 단말 구성의 일 예를 나타낸 도면이다.2 is a diagram showing an example of a configuration of a user terminal according to an embodiment of the present invention.

도 2를 참조하면, 본 발명의 실시 예에 따른 사용자 단말(100)은 통신 회로(110), 입력 장치(120), 메모리(130), 디스플레이(140) 및 프로세서(150)를 포함할 수 있다. 또한, 상기 사용자 단말(100)은 카메라(190)를 더 포함할 수 도 있다.Referring to FIG. 2 , a user terminal 100 according to an embodiment of the present invention may include a communication circuit 110, an input device 120, a memory 130, a display 140, and a processor 150. . In addition, the user terminal 100 may further include a camera 190 .

상기 통신 회로(110)는 네트워크(50)와 통신 채널을 형성하고, 네트워크(50)를 기반으로 이미지 검색 기능과 관련한 데이터를 서비스 장치(200)와 송수신할 수 있다. 예컨대, 통신 회로(110)는 이미지 검색 기능과 관련한 가상 페이지를 서비스 장치(200)로부터 수신하고, 획득된 쿼리 이미지를 서비스 장치(200)에 전송하고, 적어도 하나의 요약 정보를 포함하는 검색 결과를 서비스 장치(200)로부터 수신할 수 있는 통신 기능을 지원할 수 있다. 상기 통신 회로(110)는 3G, 4G, 5G 등의 원거리 무선 통신 네트워크 기반의 통신 채널을 형성하거나, 와이파이 등의 근거리 통신 네트워크 기반의 통신 채널을 형성할 수 있다. The communication circuit 110 may form a communication channel with the network 50 and transmit and receive data related to an image search function to and from the service device 200 based on the network 50 . For example, the communication circuit 110 receives a virtual page related to the image search function from the service device 200, transmits the obtained query image to the service device 200, and returns a search result including at least one piece of summary information. A communication function that can be received from the service device 200 may be supported. The communication circuit 110 may form a communication channel based on a long-distance wireless communication network such as 3G, 4G, and 5G, or a communication channel based on a short-distance communication network such as Wi-Fi.

상기 입력 장치(120)는 사용자 단말(100) 조작과 관련한 사용자 입력을 수신할 수 있다. 예를 들어, 상기 입력 장치(120)는 서비스 장치(200) 접속을 위해 필요한 텍스트 입력(예: 주소 정보) 또는 어플리케이션 실행 아이콘 등을 선택할 수 있는 버튼 키 또는 가상 버튼 키를 포함하거나, 음성 기반의 입력 기능 등을 지원할 수 있다. 상기 입력 장치(120)는 쿼리 이미지 선택과 관련한 사용자 입력, 쿼리 이미지 전송을 위한 사용자 입력 등을 수신하여, 프로세서(150)에 전달할 수 있다. 또는, 상기 입력 장치(120)는 쿼리 이미지에 포함된 적어도 하나의 객체를 선택하는 사용자 입력을 수신하여, 프로세서(150)에 전달할 수 있다. 터치 기능의 디스플레이(140)는 입력 장치(120)로서 기능할 수 있다. 또한, 상기 입력 장치(110)는 서비스 장치(200)로부터 수신된 검색 결과에 포함된 적어도 하나의 요약 정보를 확인하기 위한 입력 신호를 사용자 조작에 대응하여 생성할 수 있다. 또한, 상기 입력 장치(120)는 특정 요약 정보에 대응하는 상세 정보 요청을 위한 입력 신호를 사용자 조작에 대응하여 생성하고, 생성된 상세 정보 요청에 대응하는 입력 신호를 프로세서(150)에 전달할 수 있다.The input device 120 may receive a user input related to manipulating the user terminal 100 . For example, the input device 120 includes a button key or virtual button key capable of selecting text input (eg, address information) or an application execution icon required for access to the service device 200, or a voice-based Input function, etc. can be supported. The input device 120 may receive a user input related to query image selection, a user input for transmitting a query image, and the like, and transmit the received user input to the processor 150 . Alternatively, the input device 120 may receive a user input for selecting at least one object included in the query image and transmit it to the processor 150 . The display 140 with touch function may function as the input device 120 . In addition, the input device 110 may generate an input signal for checking at least one piece of summary information included in the search result received from the service device 200 in response to a user manipulation. In addition, the input device 120 may generate an input signal for requesting detailed information corresponding to specific summary information in response to user manipulation, and transmit the input signal corresponding to the generated detailed information request to the processor 150. .

상기 메모리(130)는 사용자 단말(100) 운용과 관련한 데이터 또는 응용 프로그램 등을 저장할 수 있다. 예를 들면, 상기 메모리(130)는 이미지 검색 프로그램(또는 어플리케이션) 또는 이미지 검색 기능을 지원하는 웹 브라우저를 저장할 수 있다. 메모리(130)는 카메라(190)가 획득하고 서비스 장치(200)에 전송할 적어도 하나의 쿼리 이미지를 저장할 수 있다. 또는, 메모리(130)는 외부 전자 장치 예컨대, 특정 이미지 검색이 가능한 웹 서버 장치로부터 다운로드하여 검색을 위해 서비스 장치(200)에 제공될 수 있는 쿼리 이미지를 저장할 수 있다. 또는, 메모리(130)는 서비스 장치(200)로부터 수신된 검색 결과를 저장(예: 임시 또는 반영구 저장)할 수 있다. 또한, 메모리(130)는 서비스 장치(200)로부터 수신한 상세 정보를 저장할 수 있다. 상기 메모리(130)에 저장된 검색 결과 또는 상세 정보는 사용자 요청에 따라 디스플레이(140)에 출력될 수 있다. The memory 130 may store data or application programs related to the operation of the user terminal 100 . For example, the memory 130 may store an image search program (or application) or a web browser supporting an image search function. The memory 130 may store at least one query image acquired by the camera 190 and transmitted to the service device 200 . Alternatively, the memory 130 may store a query image that may be downloaded from an external electronic device, for example, a web server capable of searching for a specific image, and provided to the service device 200 for search. Alternatively, the memory 130 may store (eg, temporarily or semi-permanently) the search result received from the service device 200 . Also, the memory 130 may store detailed information received from the service device 200 . Search results or detailed information stored in the memory 130 may be output on the display 140 according to a user's request.

상기 디스플레이(140)는 사용자 단말(100) 운용과 관련한 적어도 하나의 화면을 출력할 수 있다. 예를 들어, 상기 디스플레이(140)는 이미지 검색 기능 실행에 따른 실행 화면, 서비스 장치(200) 접속 화면(예: 가상 페이지 표시 화면), 쿼리 이미지 선택 화면, 적어도 하나의 요약 정보를 포함하는 검색 결과 수신 화면, 상세 정보 수신 화면 등을 출력할 수 있다. 상기 검색 결과 수신 화면은 예컨대 약식 요약 정보, 중간 요약 정보 및 상세 요약 정보 중 적어도 하나를 포함할 수 있다. 상기 상세 정보 수신 화면은 쿼리 이미지가 표시된 영역, 검색 결과가 표시된 영역 및 상세 정보가 표시된 영역을 포함할 수 있다. The display 140 may output at least one screen related to the operation of the user terminal 100 . For example, the display 140 may include an execution screen according to execution of the image search function, a service device 200 access screen (eg, a virtual page display screen), a query image selection screen, and a search result including at least one piece of summary information. A reception screen, a detailed information reception screen, and the like can be output. The search result receiving screen may include, for example, at least one of summary summary information, intermediate summary information, and detailed summary information. The detailed information reception screen may include an area where a query image is displayed, an area where a search result is displayed, and an area where detailed information is displayed.

상기 프로세서(150)는 사용자 단말(100) 운용과 관련한 데이터의 처리 또는 전달을 수행할 수 있다. 예를 들어, 프로세서(150)는 입력 장치(120)를 통해 입력되는 사용자 입력에 대응하여 이미지 검색 프로그램(예: 또는 특정 상품 검색 어플리케이션 또는 웹 브라우저)을 실행할 수 있다. 이와 관련하여, 프로세서(150)는 상기 통신 회로(110)를 이용하여 서비스 장치(200)와 통신 채널을 형성하고, 상기 서비스 장치(200)로부터 이미지 검색 관련 가상 페이지를 수신할 수 있다. The processor 150 may process or transmit data related to the operation of the user terminal 100 . For example, the processor 150 may execute an image search program (eg, a specific product search application or a web browser) in response to a user input through the input device 120 . In this regard, the processor 150 may establish a communication channel with the service device 200 using the communication circuit 110 and receive a virtual page related to image search from the service device 200 .

상기 프로세서(150)는 사용자 입력에 의해 선택된 적어도 하나의 쿼리 이미지를 서비스 장치(200)에 전송할 수 있다. 예를 들어, 사용자 단말(100)이 카메라(190)를 더 포함하는 경우, 상기 프로세서(150)는 사용자 입력에 대응하여 카메라(190)를 활성하고, 지정된 객체를 포함하는 쿼리 이미지 획득을 수행할 수 있다. 또는, 프로세서(150)는 메모리(130)에 저장된 복수의 이미지들 중 쿼리 이미지로 사용할 이미지를 선택하는 선택 화면을 제공할 수 있다. 이 동작에서 프로세서(150)는 복수의 쿼리 이미지들을 썸네일 형태로 출력할 수 있다. 상기 프로세서(150)는 특정 썸네일을 선택하는 사용자 입력이 발생하는 경우, 선택된 썸네일을 전체 화면을 출력하면서, 쿼리 이미지 선택 완료 여부를 확인할 수 있다. 상기 프로세서(150)는 쿼리 이미지 선택을 위한 사용자 입력이 발생하면, 선택된 쿼리 이미지를 통신 회로(110)를 기반으로 서비스 장치(200)에 전송할 수 있다.The processor 150 may transmit at least one query image selected by a user input to the service device 200 . For example, when the user terminal 100 further includes a camera 190, the processor 150 activates the camera 190 in response to a user input and obtains a query image including a designated object. can Alternatively, the processor 150 may provide a selection screen for selecting an image to be used as a query image among a plurality of images stored in the memory 130 . In this operation, the processor 150 may output a plurality of query images in the form of thumbnails. When a user input for selecting a specific thumbnail occurs, the processor 150 may check whether the selection of the query image is completed while outputting the entire screen of the selected thumbnail. When a user input for selecting a query image occurs, the processor 150 may transmit the selected query image to the service device 200 based on the communication circuit 110 .

상기 쿼리 이미지는 복수의 상품 관련 객체를 포함할 수 있다. 상기 프로세서(150)는 사용자 입력에 따라 복수의 상품 관련 객체 중 어느 하나를 선택할 수 있다. 또는, 상기 프로세서(150)는 복수의 상품 관련 객체 중 ROI(region of interest) 객체를 자동으로 선택할 수 있다. 상기 ROI 객체는 예컨대, 쿼리 이미지의 중심부에 위치한 객체를 포함할 수 있다. 또는, 상기 ROI 객체는 쿼리 이미지에 포함된 복수의 객체들 중 일정 이상의 크기를 가지는 객체를 포함할 수 있다. 또는, ROI 객체는 가장 큰 크기를 가지는 객체를 포함할 수 있다. 또는, ROI 객체는 촬영 이미지에서 포커싱된 객체를 포함할 수 있다. 또는, ROI 객체는 검출된 복수의 객체들 중 사용자 입력에 의해 선택된 적어도 하나의 객체를 포함할 수 있다. The query image may include a plurality of product-related objects. The processor 150 may select one of a plurality of product-related objects according to a user input. Alternatively, the processor 150 may automatically select a region of interest (ROI) object from among a plurality of product-related objects. The ROI object may include, for example, an object located in the center of a query image. Alternatively, the ROI object may include an object having a size greater than or equal to a predetermined size among a plurality of objects included in the query image. Alternatively, the ROI object may include an object having the largest size. Alternatively, the ROI object may include an object focused in the captured image. Alternatively, the ROI object may include at least one object selected by a user input from among a plurality of detected objects.

상기 프로세서(150)는 서비스 장치(200)로부터 적어도 하나의 요약 정보를 포함하는 검색 결과의 적어도 일부를 수신하고, 출력할 수 있다. 상기 검색 결과는 예컨대, 서비스 장치(200)의 서버 메모리(230)에 저장된 특정 타입의 요약 정보들을 포함할 수 있다. 예컨대, 상기 검색 결과는 복수의 상품 정보들 각각에 대응하는 약식 요약 정보들을 포함할 수 있다. 또는, 상기 검색 결과는 복수의 상품 정보들 중 상대적으로 유사도가 높은 상품 객체에 대응하는 상세 요약 정보와 나머지 상품 정보들에 대응하는 약식 요약 정보(또는 중간 요약 정보)를 포함할 수 있다. 또는, 상기 검색 결과는 검색된 상품 정보의 개수가 지정된 개수 이하인 경우 상품 정보들에 대한 상세 요약 정보들로 구성될 수 있다.The processor 150 may receive at least a part of a search result including at least one piece of summary information from the service device 200 and output it. The search result may include, for example, summary information of a specific type stored in the server memory 230 of the service device 200 . For example, the search result may include brief summary information corresponding to each of a plurality of product information items. Alternatively, the search result may include detailed summary information corresponding to a product object having a relatively high similarity among a plurality of product information items and short summary information (or intermediate summary information) corresponding to the remaining product information items. Alternatively, the search result may include detailed summary information on product information when the number of product information retrieved is less than or equal to a specified number.

상기 프로세서(150)는 적어도 하나의 요약 정보를 디스플레이에 출력하고, 사용자 입력에 따라 특정 요약 정보가 선택되면, 선택된 요약 정보에 대응하는 상세 정보 요청 메시지를 서비스 장치(200)에 전송할 수 있다. 상기 프로세서(150)는 상기 서비스 장치(200)로부터 상세 정보를 수신하면, 수신된 상세 정보를 디스플레이(140)에 출력할 수 있다.The processor 150 may output at least one piece of summary information on a display, and when specific summary information is selected according to a user input, a detailed information request message corresponding to the selected summary information may be transmitted to the service device 200 . When receiving detailed information from the service device 200, the processor 150 may output the received detailed information to the display 140.

상기 프로세서(150)는 조건 변경과 관련한 사용자 입력을 수신할 수 있다. 이와 관련하여, 상기 검색 결과에 대응하는 화면은 조건 변경 메뉴 항목을 포함할 수 있다. 상기 프로세서(150)는 조건 변경을 요청하는 사용자 입력이 발생하면, 선택된 조건 변경 항목을 포함하는 메시지를 서비스 장치(200)에 전송할 수 있다. 상기 서비스 장치(200)는 수신된 조건 변경 항목에 대응하여 다른 종류의 요약 정보들을 수집하고, 수집된 요약 정보들로 구성된 검색 결과를 사용자 단말(100)에 전송할 수 있다. 이에 따라, 프로세서(150)는 이전 검색 결과에 포함된 요약 정보들과 다른 타입의 요약 정보들을 포함하는 검색 결과를 서비스 장치(200)로부터 수신하고, 수신된 검색 결과를 디스플레이(140)에 출력할 수 있다. 상기 조건 변경 메뉴 항목은 예컨대, 상품의 가격, 상품의 수량, 상품의 제원(예: 무게, 크기, 색상 등) 중 적어도 하나를 포함할 수 있다. The processor 150 may receive a user input related to condition change. In this regard, the screen corresponding to the search result may include a condition change menu item. When a user input requesting a condition change occurs, the processor 150 may transmit a message including a selected condition change item to the service device 200 . The service device 200 may collect different types of summary information corresponding to the received condition change item, and transmit a search result composed of the collected summary information to the user terminal 100 . Accordingly, the processor 150 receives a search result including summary information of a different type from the summary information included in the previous search result from the service device 200, and outputs the received search result to the display 140. can The condition change menu item may include, for example, at least one of product price, product quantity, and product specifications (eg, weight, size, color, etc.).

도 3은 본 발명의 실시 예에 따른 서비스 장치 구성의 일 예를 나타낸 도면이다.3 is a diagram illustrating an example of a configuration of a service device according to an embodiment of the present invention.

도 3을 참조하면, 본 발명의 실시 예에 따른 서비스 장치(200)(또는 서버 장치)는 서버 통신 회로(210), 서버 메모리(230) 및 서버 프로세서(250)를 포함할 수 있다. 상기 서버 메모리(230)는 상기 서비스 장치(200)와 독립된 구성으로 마련될 수 있다. 이 경우, 서버 프로세서(250)는 별도로 구성된 서버 메모리(230) 장치 또는 서버와 통신 채널을 형성하고, 검색 동작을 수행하도록 제어할 수도 있다.Referring to FIG. 3 , a service device 200 (or server device) according to an embodiment of the present invention may include a server communication circuit 210 , a server memory 230 and a server processor 250 . The server memory 230 may be provided in an independent configuration from the service device 200 . In this case, the server processor 250 may establish a communication channel with a separately configured server memory 230 device or a server, and perform a search operation.

상기 서버 통신 회로(210)는 서비스 장치(200)의 통신 기능을 담당할 수 있다. 즉, 서버 통신 회로(210)는 네트워크(50)를 통해 적어도 하나의 사용자 단말(100)과 통신 채널 또는 사업자 단말(300)와의 통신 채널을 형성할 수 있다. 예를 들어, 서버 통신 회로(210)는 서버 프로세서(250) 제어에 대응하여 사업자 단말(300)로부터 상품 정보를 수신할 수 있다. 또한, 상기 서버 통신 회로(210)는 서버 프로세서(250) 제어에 대응하여 이미지 검색과 관련한 가상 페이지의 전송, 사용자 단말(100)로부터 쿼리 이미지의 수신, 사용자 단말(100)에 쿼리 이미지 기반으로 검색된 검색 결과 페이지의 전송 등을 수행할 수 있다. 또한, 상기 서버 통신 회로(210)는 사용자 단말(100)로부터 수신된 상세 정보 요청에 대응하여 상세 정보를 사용자 단말(100)에 제공할 수 있다. The server communication circuit 210 may be in charge of a communication function of the service device 200 . That is, the server communication circuit 210 may form a communication channel with at least one user terminal 100 or a communication channel with the operator terminal 300 through the network 50 . For example, the server communication circuit 210 may receive product information from the operator terminal 300 in response to control of the server processor 250 . In addition, the server communication circuit 210 transmits a virtual page related to image search in response to the control of the server processor 250, receives a query image from the user terminal 100, and searches the user terminal 100 based on the query image. Sending a search result page, etc., can be performed. In addition, the server communication circuit 210 may provide detailed information to the user terminal 100 in response to a request for detailed information received from the user terminal 100 .

상기 서버 메모리(230)는 서비스 장치(200) 운용과 관련한 데이터 또는 프로그램을 저장할 수 있다. 예컨대, 상기 서버 메모리(230)는 이미지 검색과 관련한 정보 제공과 관련하여, 상품 관련 이미지 DB(231) 및 요약 정보(233)를 저장할 수 있다. The server memory 230 may store data or programs related to the operation of the service device 200 . For example, the server memory 230 may store a product-related image DB 231 and summary information 233 in relation to providing information related to image search.

상기 상품 관련 이미지 DB(231)는 적어도 하나의 상품 정보를 저장할 수 있다. 상기 적어도 하나의 상품 정보는 상품 관련 이미지 및 텍스트 정보를 포함할 수 있다. 상기 상품 관련 이미지는 사용자 단말(100)이 제공한 쿼리 이미지를 기반으로 검색될 수 있는 이미지들을 포함할 수 있다. 예를 들어, 상품 관련 이미지들은 구두, 가방, 옷, 모자, 전자 기기, 액세서리 등 다양한 상품들의 이미지들을 포함할 수 있다. 상기 서버 메모리(230)는 상품 관련 이미지들에 포함된 상품 객체들의 특징점들을 저장 관리할 수 있다. 이에 따라, 쿼리 이미지가 사용자 단말(100)로부터 제공되면, 상기 서버 메모리(230)에 저장된 다양한 상품 관련 이미지들 중 상기 쿼리 이미지에 포함된 객체의 특징점에 대응되는 상품 객체를 포함한 상품 관련 이미지가 추출되고, 추출된 상품 관련 이미지가 검색 결과로서 서버 프로세서(250)에 제공될 수 있다. The product-related image DB 231 may store at least one piece of product information. The at least one piece of product information may include product-related image and text information. The product-related images may include images that can be searched for based on a query image provided by the user terminal 100 . For example, product-related images may include images of various products such as shoes, bags, clothes, hats, electronic devices, and accessories. The server memory 230 may store and manage feature points of product objects included in product-related images. Accordingly, when a query image is provided from the user terminal 100, a product-related image including a product object corresponding to a characteristic point of an object included in the query image is extracted from among various product-related images stored in the server memory 230. and the extracted product-related image may be provided to the server processor 250 as a search result.

상기 요약 정보(233)는 상품 관련 이미지 DB(231)에 저장된 상품 정보들로부터 생성될 수 있다. 앞서 언급한 바와 같이, 상기 상품 정보들은 각각 상품 관련 이미지들 및 텍스트 정보(예: 상품 설명 정보, 상품 제원, 상품 가격, 상품 수량 정보 등)를 포함할 수 있다. 상기 요약 정보(233)는 상기 상품 관련 이미지들 및 텍스트 정보의 적어도 일부를 기반으로 생성될 수 있다. 예를 들어, 상기 요약 정보(233)는 상품 관련 이미지들 중 하나의 대표 이미지와 상품명 및 상품 가격만을 포함하는 제1 타입 요약 정보(예: 약식 요약 정보), 상기 상품 관련 이미지들 중 복수의 일부 이미지들과 텍스트 정보 중 일부 내용을 기반으로 생성된 제2 타입 요약 정보(예: 중간 요약 정보), 상기 상품 관련 이미지들 및 상기 텍스트 정보 전체로 구성된 화면을 캡쳐하고 축소시킨 상세 요약 정보를 포함할 수 있다. 또는, 상기 상세 요약 정보는 상기 중간 요약 정보보다는 많은 수의 상품 관련 이미지들과 텍스트 정보를 포함하는 형태로 마련될 수 있다. 상기 약식 요약 정보 및 중간 요약 정보는 상품 정보의 일부 정보들로 구성된 정보들이거나, 상품 정보의 일부 정보들이 표시된 화면을 캡쳐한 후, 지정된 크기로 축소한 정보일 수 있다.The summary information 233 may be generated from product information stored in the product related image DB 231 . As mentioned above, the product information may include product-related images and text information (eg, product description information, product specifications, product price, product quantity information, etc.). The summary information 233 may be generated based on at least a part of the product-related images and text information. For example, the summary information 233 includes first-type summary information (eg, short summary information) including only one representative image, product name, and product price among product-related images, and a plurality of parts of the product-related images. Second type summary information (eg, intermediate summary information) generated based on some of the images and text information, and detailed summary information obtained by capturing and reducing a screen consisting of the product-related images and the entire text information. can Alternatively, the detailed summary information may include a larger number of product-related images and text information than the intermediate summary information. The summary summary information and the intermediate summary information may be information composed of partial information of product information, or may be information reduced to a specified size after capturing a screen displaying partial information of product information.

상기 서버 프로세서(250)는 서비스 장치(200)의 운용과 관련한 데이터의 처리 또는 프로그램 운용을 수행할 수 있다. 예를 들어, 서버 프로세서(250)는 사용자 단말(100)의 접속을 지원하고, 사용자 단말(100)로부터 쿼리 이미지를 획득하고, 획득된 쿼리 이미지를 기반으로 적어도 하나의 요약 정보를 포함하는 검색 결과를 수집하여 사용자 단말(100)에 제공할 수 있다. 특히, 상기 서버 프로세서(250)는 사업자 단말(300)로부터 상품 정보를 수집하고, 수집된 상품 정보를 기반으로 요약 정보(233)를 생성할 수 있다. 이를 기반으로, 서버 프로세서(250)는 사용자 단말(100)의 이미지 검색 요청에 대응하여 요약 정보(233)의 적어도 일부를 검색 결과로서 수집하고, 상기 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이와 관련하여, 상기 서버 프로세서(250)는 요약 정보 생성부(251) 및 검색 지원부(253)를 포함할 수 있다.The server processor 250 may process data related to the operation of the service device 200 or operate a program. For example, the server processor 250 supports access of the user terminal 100, obtains a query image from the user terminal 100, and provides search results including at least one piece of summary information based on the obtained query image. may be collected and provided to the user terminal 100 . In particular, the server processor 250 may collect product information from the operator terminal 300 and generate summary information 233 based on the collected product information. Based on this, the server processor 250 may collect at least a part of the summary information 233 as a search result in response to the image search request of the user terminal 100 and provide the search result to the user terminal 100. there is. In this regard, the server processor 250 may include a summary information generating unit 251 and a search support unit 253 .

상기 요약 정보 생성부(251)는 지정된 시간이 도래하거나 또는 사업자 단말(300)의 연결 요청에 따라 사업자 단말(300)과 통신 채널을 형성할 수 있다. 상기 요약 정보 생성부(251)는 사업자 단말(300)이 제공하는 적어도 하나의 상품 정보를 수신하면, 수신된 상품 정보에 대응하는 적어도 하나의 요약 정보를 생성할 수 있다. 이 동작에서, 상기 요약 정보 생성부(251)는 하나의 상품 정보에 대하여 서로 다른 타입의 요약 정보들을 생성할 수 있다. 상기 서로 다른 타입의 요약 정보들을 구성된 상품 정보의 양이 다를 수 있다. 예컨대, 앞서 설명한 바와 같이, 상기 요약 정보 생성부(251)는 하나의 상품 정보에 대응하여 약식 요약 정보, 중간 요약 정보 및 상세 요약 정보를 생성할 수 있다. 상기 요약 정보 생성부(251)는 사업자 단말(300)로부터 수신된 상품 정보를 상품 관련 이미지 DB(231)에 저장하면서, 생성된 요약 정보들을 상품 관련 이미지 DB(231)에 저장할 수 있다. The summary information generating unit 251 may establish a communication channel with the operator terminal 300 when a designated time arrives or according to a connection request of the operator terminal 300 . When receiving at least one product information provided by the operator terminal 300, the summary information generation unit 251 may generate at least one piece of summary information corresponding to the received product information. In this operation, the summary information generation unit 251 may generate different types of summary information for one product information. The amount of product information composed of the different types of summary information may be different. For example, as described above, the summary information generation unit 251 may generate summary summary information, intermediate summary information, and detailed summary information corresponding to one product information. The summary information generating unit 251 may store the generated summary information in the product related image DB 231 while storing the product information received from the operator terminal 300 in the product related image DB 231 .

요약 정보 생성과 관련하여, 상기 요약 정보 생성부(251)는 복수의 상품 관련 이미지들 중 지정된 조건을 만족하는 대표 이미지를 추출할 수 있다. 예컨대, 요약 정보 생성부(251)는 이미지 분석을 통하여, 복수의 상품 관련 이미지들 중 상품의 부분을 나타내는 이미지들을 제외하고, 해당 상품 전체를 나타내는 적어도 하나의 상품 관련 이미지를 대표 이미지로 추출할 수 있다. 또는, 상기 요약 정보 생성부(251)는 상대적으로 많은 상품 부분을 나타내는 상품 관련 이미지를 대표 이미지로 추출할 수 있다. 또한, 상기 요약 정보 생성부(251)는 텍스트 정보 중 주요 내용에 해당하는 정보들 예컨대, 핵심 키워드를 산출할 수 있다. 핵심 키워드 산출과 관련하여, 상기 요약 정보 생성부(251)는 텍스트에 포함된 내용들 중 단어 빈도수가 가장 많은 단어를 핵심 키워드로 산출할 수 있다. 또는, 요약 정보 생성부(251)는 특정 키워드에 대응하는 단어(예: 상품명)를 핵심 키워드로 산출할 수 있다. 상기 요약 정보 생성부(251)는 산출된 대표 이미지 및 핵심 키워드를 기반으로 약식 요약 정보를 생성할 수 있다. 또한, 상기 요약 정보 생성부(251)는 상기 약식 요약 정보에 추가로 동일 상품에 대한 다른 상품 관련 이미지들을 지정된 개수만큼 더 추가하여 중간 요약 정보를 생성할 수 있다. 또는, 상기 요약 정보 생성부(251)는 대표 이미지 및 텍스트 정보 전체를 포함하는 중간 요약 정보를 생성할 수 있다. 상기 요약 정보 생성부(251)는 상품 관련 이미지들 전체와 상기 핵심 키워드를 포함하는 상세 요약 정보를 생성할 수 있다. 상술한 바와 같이, 상기 요약 정보 생성부(251)는 포함된 정보의 양이 다른 요약 정보들을 생성할 수 있다. 생성된 요약 정보는 앞서 언급한 바와 같이, 이미지 및 텍스트를 포함한 정보이거나 또는 이미지 및 텍스트를 포함하는 화면을 캡쳐한 이미지를 포함할 수 있다.Regarding generating summary information, the summary information generating unit 251 may extract a representative image that satisfies a specified condition from among a plurality of product-related images. For example, the summary information generation unit 251 may extract at least one product-related image representing the entire product as a representative image, excluding images representing parts of the product among a plurality of product-related images through image analysis. there is. Alternatively, the summary information generation unit 251 may extract a product-related image representing a relatively large number of product parts as a representative image. Also, the summary information generating unit 251 may calculate information corresponding to the main contents of the text information, for example, core keywords. Regarding the calculation of the core keyword, the summary information generation unit 251 may calculate a word having the highest word frequency among contents included in the text as the core keyword. Alternatively, the summary information generating unit 251 may calculate a word (eg, product name) corresponding to a specific keyword as a key keyword. The summary information generating unit 251 may generate abbreviated summary information based on the calculated representative image and key keywords. In addition, the summary information generator 251 may generate intermediate summary information by adding a specified number of other product-related images of the same product in addition to the summary information. Alternatively, the summary information generation unit 251 may generate intermediate summary information including all of the representative image and text information. The summary information generating unit 251 may generate detailed summary information including all of the product-related images and the core keyword. As described above, the summary information generator 251 may generate summary information with different amounts of included information. As mentioned above, the generated summary information may include information including images and text or an image captured from a screen including images and text.

상기 검색 지원부(253)는 사용자 단말(100) 연결 시 이미지 검색과 관련한 가상 페이지를 사용자 단말(100)에 제공할 수 있다. 상기 검색 지원부(253)는 사용자 단말(100)에 이미지 검색과 관련한 쿼리 이미지 전송을 요청할 수 있다. 상기 사용자 단말(100)로부터 쿼리 이미지를 수신하면, 상기 검색 지원부(253)는 쿼리 이미지로부터 적어도 하나의 검색용 객체를 추출할 수 있다. 예를 들어, 상기 쿼리 이미지에 복수개의 검색용 객체가 검출되면, 상기 검색 지원부(253)는 지정된 조건을 만족하는 검색용 객체를 선택할 수 있다. 예를 들어, 상기 검색 지원부(253)는 복수개의 검색용 객체가 검출되면, 검출된 복수개의 검색용 객체 중 어느 하나를 선택할 수 있는 선택 화면을 사용자 단말(100)에 제공하고, 사용자 단말(100)에 의해 선택된 객체를 검색용 객체로 결정할 수 있다. 또는, 검색 지원부(253)는 복수개의 객체들 중 일정 크기 이상의 객체를 검색용 객체로 결정할 수 있다. 또는, 검색 지원부(253)는 상대적으로 가장 큰 크기를 가지를 객체를 검색용 객체로 결정할 수 있다. 또는, 상기 검색 지원부(253)는 이미지의 중심부에 배치된 객체를 검색용 객체로 결정할 수 있다. 상기 검색 지원부(253)는 검색용 객체가 복수개인 경우, 각각의 검색용 객체들에 대응하는 상품 정보를 상품 관련 이미지 DB(231)에서 검색할 수도 있다. The search support unit 253 may provide a virtual page related to image search to the user terminal 100 when the user terminal 100 is connected. The search support unit 253 may request the user terminal 100 to transmit a query image related to image search. Upon receiving a query image from the user terminal 100, the search support unit 253 may extract at least one search object from the query image. For example, if a plurality of search objects are detected in the query image, the search support unit 253 may select a search object that satisfies a specified condition. For example, when a plurality of search objects are detected, the search support unit 253 provides a selection screen for selecting one of the plurality of search objects to the user terminal 100, and the user terminal 100 ) can be determined as an object for search. Alternatively, the search support unit 253 may determine an object of a certain size or larger among a plurality of objects as an object for search. Alternatively, the search support unit 253 may determine an object having a relatively largest size as an object for search. Alternatively, the search support unit 253 may determine an object disposed in the center of the image as an object for search. When there are a plurality of search objects, the search support unit 253 may search the product related image DB 231 for product information corresponding to each of the search objects.

상기 검색 지원부(253)는 검색용 객체가 결정되면, 검색용 객체의 특징점을 추출할 수 있다. 상기 검색 지원부(253)는 추출된 특징점과 일정 크기 이상 유사한 유사도를 가진 상품 객체를 상품 관련 이미지 DB(231)에서 검출할 수 있다. 이때, 검색 지원부(253)는 상기 검색용 객체의 특징점과 상기 상품 객체의 특징점 비교를 통하여 상품 정보를 검출할 수 있다. 상기 검색 지원부(253)는 상품 정보가 검색되면, 검색된 상품 정보에 대응하는 요약 정보를 수집할 수 있다. 상기 검색 지원부(253)는 수집된 요약 정보를 검색 결과로서, 사용자 단말(100)에 제공할 수 있다. 상기 검색 지원부(253)는 사용자 단말(100)로부터 특정 요약 정보에 대한 상세 정보 요청을 수신하면, 해당 요약 정보에 대응하는 상품 정보를 사용자 단말(100)에 제공할 수 있다. When the search object is determined, the search support unit 253 may extract feature points of the search object. The search support unit 253 may detect a product object having a similarity to the extracted feature point by a certain size or more from the product related image DB 231 . At this time, the search support unit 253 may detect product information through comparison of feature points of the search object and feature points of the product object. When product information is searched for, the search support unit 253 may collect summary information corresponding to the searched product information. The search support unit 253 may provide the collected summary information to the user terminal 100 as a search result. When receiving a detailed information request for specific summary information from the user terminal 100, the search support unit 253 may provide product information corresponding to the corresponding summary information to the user terminal 100.

상기 검색 지원부(253)는 요약 정보 수집 시, 다양한 조건에 따라 특정 타입의 요약 정보를 수집할 수 있다. 예컨대, 상기 검색 지원부(253)는 검색용 객체에 대응하여 검출된 상품 정보의 개수에 따라 요약 정보의 타입을 결정할 수 있다. 이를 보다 상세히 설명하면, 상기 검색 지원부(253)는 검색용 객체에 대응하는 상품 정보의 개수가 지정된 개수 이하인 경우 상기 검색 지원부(253)는 검색된 상품 정보들에 대응하는 요약 정보를 중간 요약 정보 또는 상세 요약 정보들로 수집할 수 있다. 또는, 검색 지원부(253)는 검색용 객체에 대응하는 상품 정보의 개수가 지정된 개수를 초과하는 경우, 상기 검색 지원부(253)는 검색된 상품 정보들에 대응하는 요약 정보를 약식 요약 정보들로 수집할 수 있다. 또는, 검색 지원부(253)는 특정 상품 정보에 대한 요약 정보를 상세 요약 정보로 수집하고, 나머지 상품 정보들에 대한 요약 정보는 약식 요약 정보로 수집할 수도 있다. 상기 특정 상품 정보는 예컨대, 상대적으로 검색용 객체와의 유사도가 가장 높은 상품에 관한 상품 정보를 포함할 수 있다. When collecting summary information, the search support unit 253 may collect summary information of a specific type according to various conditions. For example, the search support unit 253 may determine the type of summary information according to the number of detected product information corresponding to the search object. To explain this in more detail, when the number of product information corresponding to the search object is less than or equal to the specified number, the search support unit 253 converts summary information corresponding to the searched product information into intermediate summary information or detailed information. It can be gathered as summary information. Alternatively, the search support unit 253 may collect summary information corresponding to the searched product information as short summary information when the number of product information corresponding to the search object exceeds the specified number. can Alternatively, the search support unit 253 may collect summary information on specific product information as detailed summary information, and summarize information on the remaining product information as short summary information. The specific product information may include, for example, product information about a product having a relatively high similarity with the search object.

상기 검색 지원부(253)는 요약 정보 수집 시, 상품 정보에 포함된 상품의 가격 정보에 따라 요약 정보의 타입을 다르게 결정할 수 있다. 예컨대, 검색 지원부(253)는 상대적으로 가장 낮은 상품 가격 정보를 포함하는 상품 정보에 대해 상세 요약 정보를 수집하고, 나머지 상품 정보들에 대해서는 약식 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 지정된 가격대 이상의 상품 정보에 대해서는 약식 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 지정된 가격대 이하의 상품 정보에 대해서는 상세 요약 정보를 수집할 수 있다. When collecting the summary information, the search support unit 253 may differently determine the type of summary information according to the price information of the product included in the product information. For example, the search support unit 253 may collect detailed summary information for product information including product price information that is relatively lowest, and may collect abbreviated summary information for the remaining product information. Alternatively, the search support unit 253 may collect abbreviated summary information about product information of a specified price range or higher. Alternatively, the search support unit 253 may collect detailed summary information about product information below a designated price range.

상기 검색 지원부(253)는 요약 정보 수집 시, 상품 정보에 포함된 상품의 수량 정보에 따라 요약 정보의 타입을 다르게 결정할 수 있다. 예컨대, 검색 지원부(253)는 상대적으로 가장 많은 수량을 가지는 상품 정보에 대해서 상세 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 지정된 수량 이하인 상품 정보에 대해서는 약식 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 지정된 수량 미만의 상품 정보에 대해서는 약식 요약 정보를 수집할 수 있다. When collecting summary information, the search support unit 253 may differently determine the type of summary information according to product quantity information included in product information. For example, the search support unit 253 may collect detailed summary information about product information having a relatively large quantity. Alternatively, the search support unit 253 may collect abbreviated summary information about product information of a specified quantity or less. Alternatively, the search support unit 253 may collect abbreviated summary information about product information of less than a specified quantity.

상기 검색 지원부(253)는 요약 정보 수집 시, 상품 정보에 포함된 상품 제원 정보에 따라 요약 정보의 타입을 다르게 결정할 수 있다. 예컨대, 검색 지원부(253)는 상품의 크기가 지정된 크기 미만인 경우 해당 상품 정보에 대해서 상세 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 상품의 크기가 지정된 크기 이상인 경우 해당 상품 정보에 대해서는 약식 요약 정보를 수집할 수 있다. 또는, 검색 지원부(253)는 지정된 색상을 가진 상품 정보에 대해서는 상세 요약 정보를 수집하고, 나머지 색상에 대한 상품 정보들에 대해서는 약식 요약 정보를 수집할 수 있다. 상기 상품의 제원에 대한 속성은 사용자 단말(100)로부터 수신할 수 있다. When collecting summary information, the search support unit 253 may differently determine the type of summary information according to product specification information included in product information. For example, when the size of a product is less than a designated size, the search support unit 253 may collect detailed summary information about corresponding product information. Alternatively, the search support unit 253 may collect abbreviated summary information about corresponding product information when the size of the product is greater than or equal to a specified size. Alternatively, the search support unit 253 may collect detailed summary information for product information having a designated color, and collect short summary information for product information for other colors. Attributes of the specifications of the product may be received from the user terminal 100 .

상기 검색 지원부(253)는 사용자 단말(100)의 요청에 따라 요약 정보들의 타입을 다르게 할 수 있다. 예컨대, 상기 검색 지원부(253)는 쿼리 이미지 수신 시, 사용자 단말(100)로부터 요약 정보 타입을 결정하는 결정 정보를 함께 수신할 수 있다. 이와 관련하여, 상기 검색 지원부(253)는 가상 페이지를 사용자 단말(100)에 제공할 때, 요약 정보 타입을 선택할 수 있는 메뉴 항목을 사용자 단말(100)에 제공할 수 있다. 상기 검색 지원부(253)는 상기 사용자 단말(100)의 사용자가 선택한 요약 정보 타입에 따라, 상품 정보들의 요약 정보들을 수집하고, 수집된 요약 정보들을 검색 결과로서 사용자 단말(100)에 제공할 수 있다. The search support unit 253 may change the type of summary information according to a request of the user terminal 100 . For example, when receiving a query image, the search support unit 253 may also receive decision information for determining a summary information type from the user terminal 100 . In this regard, when providing a virtual page to the user terminal 100, the search support unit 253 may provide the user terminal 100 with a menu item for selecting a summary information type. The search support unit 253 may collect summary information of product information according to the summary information type selected by the user of the user terminal 100 and provide the collected summary information to the user terminal 100 as a search result. .

또한, 상기 검색 지원부(253)는 요약 정보를 사용자 단말(100)에 제공하고, 사용자 단말(100)로부터 수신되는 조건 변경 요청에 대응하여 다른 타입의 요약 정보를 수집하여 사용자 단말(100)에 제공할 수도 있다. 예를 들어, 상기 검색 지원부(253)는 특정 상품 정보들에 대해 약식 요약 정보들을 사용자 단말(100)에 제공한 후, 사용자 단말(100)로부터 상세 요약 정보 요청을 수신한 경우, 해당 상품 정보들에 대한 상세 요약 정보들을 수집하여 사용자 단말(100)에 제공할 수 있다. 상기 검색 지원부(253)는 약식 요약 정보 또는 상세 요약 정보를 선택하여 해당 요약 정보에 대응하는 상세 상품 정보를 요청하는 메시지를 수신하면, 대응되는 상세 정보를 사용자 단말(100)에 제공할 수 있다. In addition, the search support unit 253 provides summary information to the user terminal 100, collects other types of summary information in response to a condition change request received from the user terminal 100, and provides it to the user terminal 100. You may. For example, when the search support unit 253 receives a request for detailed summary information from the user terminal 100 after providing abbreviated summary information on specific product information to the user terminal 100, the corresponding product information Detailed summary information about may be collected and provided to the user terminal 100 . When the search support unit 253 selects summary summary information or detailed summary information and receives a message requesting detailed product information corresponding to the corresponding summary information, the corresponding detailed information may be provided to the user terminal 100 .

도 4는 본 발명의 실시 예에 따른 요약 정보 생성과 관련한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.4 is a diagram illustrating an example of a method of operating a service device related to generation of summary information according to an embodiment of the present invention.

도 4를 참조하면, 요약 정보 생성과 관련하여, 401 단계에서, 서비스 장치(200)의 서버 프로세서(250)는 사업자 단말(300) 연결이 있는지 확인할 수 있다. 이와 관련하여, 서버 프로세서(250)는 사업자 단말(300)이 연결될 수 있도록 통신 대기 상태를 유지할 수 있다. 또는, 서버 프로세서(250)는 지정된 시간이 도래하면, 사업자 단말(300) 연결을 위한 준비를 수행하거나, 또는, 사업자 단말(300)과 통신 채널을 형성할 수 있다. Referring to FIG. 4 , in relation to generating summary information, in step 401, the server processor 250 of the service device 200 may check whether the operator terminal 300 is connected. In this regard, the server processor 250 may maintain a communication standby state so that the operator terminal 300 can be connected. Alternatively, when the designated time arrives, the server processor 250 may prepare for connection with the operator terminal 300 or form a communication channel with the operator terminal 300 .

사업자 단말(300) 연결이 없는 경우, 상기 서버 프로세서(250)는 403 단계에서, 지정된 기능 수행을 처리할 수 있다. 예를 들면, 상기 서버 프로세서(250)는 사용자 단말(100) 연결을 지원하고, 사용자 단말(100) 요청에 대응하여 쿼리 이미지 수신에 대한 적어도 하나의 요약 정보를 포함한 검색 결과를 사용자 단말(100)에 제공할 수 있다. When there is no connection to the operator terminal 300, the server processor 250 may process a designated function execution in step 403. For example, the server processor 250 supports connection of the user terminal 100 and transmits a search result including at least one piece of summary information about receiving a query image to the user terminal 100 in response to a request of the user terminal 100. can be provided to

사업자 단말(300)이 연결되면, 서버 프로세서(250)는 405 단계에서 가상 페이지를 사업자 단말(300)에 제공할 수 있다. 예컨대, 상기 서버 프로세서(250)는 상품 정보 등록과 관련한 가상 페이지를 사업자 단말(300)에 제공할 수 있다. 상기 가상 페이지는 예컨대, 상품 정보에 포함된 복수의 상품 관련 이미지들을 등록하는 이미지 등록 영역 및 상품 정보의 설명을 등록하는 텍스트 등록 영역을 포함할 수 있다. 이에 따라, 사업자 단말(300)은 관리자 조작에 따라 복수의 상품 관련 이미지 및 상품 설명과 관련한 텍스트 정보를 포함하는 상품 정보를 서비스 장치(200)에 전송할 수 있다. When the operator terminal 300 is connected, the server processor 250 may provide a virtual page to the operator terminal 300 in step 405 . For example, the server processor 250 may provide the operator terminal 300 with a virtual page related to product information registration. The virtual page may include, for example, an image registration area for registering a plurality of product-related images included in product information and a text registration area for registering descriptions of product information. Accordingly, the operator terminal 300 may transmit product information including a plurality of product-related images and text information related to product descriptions to the service device 200 according to a manager's manipulation.

407 단계에서, 서버 프로세서(250)는 사업자 단말(300)로부터 상품 정보가 수신되는지 확인할 수 있다. 상품 정보 수신이 없는 경우, 서버 프로세서(250)는 413 단계 이전으로 분기하여 기능 종료와 관련한 이벤트가 발생하는지 확인할 수 있다. 예컨대, 서버 프로세서(250)는 지정된 시간이 경과하는 동안 사업자 단말(300)로부터 유의미한 입력 신호 수신이 없는 경우, 기능 종료와 관련한 이벤트 발생으로 판단할 수 있다. In step 407, the server processor 250 may check whether product information is received from the operator terminal 300. When product information is not received, the server processor 250 branches before step 413 and checks whether an event related to function termination occurs. For example, the server processor 250 may determine that an event related to function termination occurs when there is no significant input signal received from the operator terminal 300 for a specified period of time.

상품 정보가 사업자 단말(300)로부터 수신되면, 서버 프로세서(250)는 409 단계에서, 단계별 요약 정보를 생성할 수 있다. 예컨대, 서버 프로세서(250)는 상품 정보에 포함된 다양한 정보들에 대하여 정보들의 양을 단계적으로 줄이면서, 각 단계별 정보량이 다른 요약 정보를 생성할 수 있다. 상기 제1 단계 요약 정보는 예컨대, 상대적으로 상세도가 가장 낮은 타입의 약식 요약 정보를 포함할 수 있다. 상기 제2 단계 요약 정보는 예컨대, 상기 제1 단계 요약 정보 보다 상대적으로 상세도가 높은 타입의 중간 요약 정보를 포함할 수 있다. 상기 제3 단계 요약 정보는 예컨대, 상기 제2 단계 요약 정보 보다 상대적으로 상세도가 높은 타입의 요약 정보 또는 상대적으로 가장 높은 상세도를 가진 상세 요약 정보를 포함할 수 있다. 또는, 서버 프로세서(250)는 상품 관련 이미지들 중 대표 이미지로 사용할 하나의 이미지와 텍스트 정보 중 일부 정보를 포함하는 약식 요약 정보를 생성할 수 있다. 또는, 서버 프로세서(250)는 상품 관련 이미지들 중 복수개의 이미지와 텍스트 정보 중 적어도 가격과 상품 제원을 포함하는 텍스트 정보를 포함하는 상세 요약 정보를 생성할 수 있다.When product information is received from the operator terminal 300, the server processor 250 may generate step-by-step summary information in step 409. For example, the server processor 250 may generate summary information having a different amount of information for each stage while reducing the amount of information in stages with respect to various pieces of information included in product information. The first stage summary information may include, for example, abbreviated summary information of a type with a relatively low level of detail. The second stage summary information may include, for example, intermediate summary information of a relatively higher level of detail than the first stage summary information. The third stage summary information may include, for example, summary information of a type with a relatively higher level of detail than the second level summary information or detailed summary information with a relatively higher level of detail. Alternatively, the server processor 250 may generate abbreviated summary information including one image to be used as a representative image among product-related images and some information among text information. Alternatively, the server processor 250 may generate detailed summary information including a plurality of images among product-related images and text information including at least a price and product specifications among text information.

411 단계에서, 서버 프로세서(250)는 생성된 요약 정보들을 기반으로 데이터베이스 갱신할 수 있다. 예컨대, 서버 프로세서(250)는 사업자 단말(300)이 제공한 상품 정보들을 상품 관련 이미지 DB(231)에 저장하면서, 상기 타입별 요약 정보들을 함께 저장할 수 있다. 또는, 서버 프로세서(250)는 타입별 요약 정보들과 상품 정보를 각각 매칭하여 상기 상품 관련 이미지 DB(231)에 저장할 수 있다. In step 411, the server processor 250 may update the database based on the generated summary information. For example, the server processor 250 may store the product information provided by the operator terminal 300 in the product-related image DB 231 and store summary information for each type together. Alternatively, the server processor 250 may match summary information for each type with product information and store them in the product related image DB 231 .

413 단계에서, 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 상기 서버 프로세서(250)는 기능 종료와 관련한 이벤트가 발생하면, 사업자 단말(300)과의 통신 채널을 해제하고, 통신 대기 상태로 진입할 수 있다. 또는, 상기 서버 프로세서(250)는 지정된 다음 스케줄링 시간까지 슬립 상태를 유지할 수도 있다.In step 413, the server processor 250 may check whether an event related to function termination occurs. When an event related to function termination occurs, the server processor 250 may release the communication channel with the operator terminal 300 and enter a communication standby state. Alternatively, the server processor 250 may maintain a sleep state until a designated next scheduling time.

도 5는 본 발명의 실시 예에 따른 유사도에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.5 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to similarity according to an embodiment of the present invention.

도 5를 참조하면, 서비스 장치 운용 방법과 관련하여, 501 단계에서, 서비스 장치(200)의 서버 프로세서(250)는 적어도 하나의 사용자 단말(100)이 연결되는지 확인할 수 있다. 예컨대, 서버 프로세서(250)는 지정된 스케줄 도래에 따라 상기 사용자 단말(100)의 연결 여부를 확인할 수 있다. 또는, 서버 프로세서(250)는 통신 대기 상태를 유지하고, 접속되는 단말들 중 사용자 인증을 통하여 지정된 사용자 단말(100)이 연결되는지 확인할 수 있다. 사용자 단말(100)의 연결이 없는 경우, 서버 프로세서(250)는 503 단계에서 지정된 기능을 수행할 수 있다. 예컨대, 상기 서버 프로세서(250)는 사업자 단말(300)의 연결을 지원하고, 사업자 단말(300)이 제공하는 상품 정보를 수신하고 적어도 하나의 요약 정보를 생성할 수 있다. Referring to FIG. 5 , in relation to the service device operation method, in step 501, the server processor 250 of the service device 200 may check whether at least one user terminal 100 is connected. For example, the server processor 250 may check whether the user terminal 100 is connected according to the arrival of a designated schedule. Alternatively, the server processor 250 may maintain a communication standby state and check whether a user terminal 100 designated through user authentication among connected terminals is connected. When there is no connection of the user terminal 100, the server processor 250 may perform a designated function in step 503. For example, the server processor 250 may support connection of the operator terminal 300, receive product information provided by the operator terminal 300, and generate at least one piece of summary information.

사용자 단말(100)이 연결된 경우, 서버 프로세서(250)는 505 단계에서, 사용자 단말(100)로부터 쿼리 이미지가 수신되는지 확인할 수 있다. 이 동작 전에 상기 서버 프로세서(250)는 이미지 검색과 관련한 가상 페이지를 사용자 단말(100)에 제공할 수 있다. 이에 대응하여, 사용자 단말(100)은 쿼리 이미지를 획득하고, 획득된 쿼리 이미지를 서비스 장치(200)에 전송할 수 있다. 상기 쿼리 이미지 획득과 관련하여, 상기 사용자 단말(100)은 카메라(190)를 이용하여 상품 관련 피사체의 이미지를 획득할 수 있다. 또는, 사용자 단말(100)은 사용자 입력에 대응하여 메모리(130)에 저장된 적어도 하나의 이미지를 쿼리 이미지로서 선택할 수 있다. When the user terminal 100 is connected, the server processor 250 may check whether a query image is received from the user terminal 100 in step 505 . Before this operation, the server processor 250 may provide a virtual page related to image search to the user terminal 100 . Correspondingly, the user terminal 100 may obtain a query image and transmit the obtained query image to the service device 200 . Regarding obtaining the query image, the user terminal 100 may acquire an image of a product-related subject using the camera 190 . Alternatively, the user terminal 100 may select at least one image stored in the memory 130 as a query image in response to a user input.

쿼리 이미지가 수신되면, 507 단계에서, 서버 프로세서(250)는 수신된 쿼리 이미지를 기반으로 이미지 검색을 수행할 수 있다. 이와 관련하여, 서버 프로세서(250)는 수신된 쿼리 이미지에서 적어도 하나의 검색용 객체를 추출할 수 있다. 상기 서버 프로세서(250)는 쿼리 이미지에 복수개의 객체가 포함된 경우 지정된 조건에 따라 적어도 하나의 검색용 객체를 선택할 수 있다. 또는, 서버 프로세서(250)는 복수개의 객체 중 적어도 하나의 객체를 선택할 수 있는 화면을 사용자 단말(100)에 제공하고, 사용자 입력에 의해 선택된 객체를 검색용 객체로 결정할 수 있다. 상기 서버 프로세서(250)는 검색용 객체의 특징점과 지정된 크기 이상의 유사도를 가지는 특징점을 포함하는 상품 정보를 상품 관련 이미지 DB(231)에서 검출할 수 있다. When a query image is received, in step 507, the server processor 250 may perform an image search based on the received query image. In this regard, the server processor 250 may extract at least one search object from the received query image. When a plurality of objects are included in the query image, the server processor 250 may select at least one search object according to a specified condition. Alternatively, the server processor 250 may provide the user terminal 100 with a screen for selecting at least one object from among a plurality of objects, and determine the object selected by the user input as the search object. The server processor 250 may detect, from the product-related image DB 231, product information including a feature point having a similarity with a feature point of a search object and a specified size or more.

이미지가 검색되면, 509 단계에서, 서버 프로세서(250)는 유사도별 요약 정보 수집을 처리할 수 있다. 예컨대, 서버 프로세서(250)는 검출된 상품 정보들에 대한 유사도를 확인하고, 유사도별로 서로 다른 타입의 요약 정보를 수집할 수 있다. 이를 보다 상세히 설명하면, 서버 프로세서(250)는 검색된 상품 정보들 중 검색용 객체와 가장 높은 유사도를 가지는 상품 정보에 대해 상세 요약 정보를 수집할 수 있다. 상기 서버 프로세서(250)는 검색된 상품 정보들 중 검색용 객체와 상대적으로 가장 낮은 유사도를 가지는 상품 정보에 관한 약식 요약 정보를 수집할 수 있다. 또는, 상기 서버 프로세서(250)는 지정된 크기 이상의 유사도를 가지는 상품 정보들에 대하여 상세 요약 정보를 수집하고, 지정된 크기 미만의 유사도를 가지는 상품 정보들에 대하여 약식 요약 정보를 수집할 수 있다. 또는, 상기 서버 프로세서(250)는 유사도의 크기별로 정보량이 다른 요약 정보들을 수집할 수 있다. 이 동작에서, 상기 서버 프로세서(250)는 유사도가 클수록 보다 많은 정보량을 가진 요약 정보를 수집하고, 유사도가 작을수록 보다 적은 정보량을 가진 요약 정보를 수집할 수 있다. When the image is retrieved, in step 509, the server processor 250 may process summary information collection by similarity. For example, the server processor 250 may check the similarity of detected product information and collect different types of summary information for each similarity. Describing this in more detail, the server processor 250 may collect detailed summary information about product information having the highest similarity with the search object among the retrieved product information. The server processor 250 may collect abbreviated summary information about product information having a relatively lowest similarity with the search object among the searched product information. Alternatively, the server processor 250 may collect detailed summary information for product information having a similarity greater than or equal to a specified size, and abbreviated summary information for product information having a similarity less than a specified size. Alternatively, the server processor 250 may collect summary information having a different amount of information for each degree of similarity. In this operation, the server processor 250 may collect summary information having a larger amount of information as the degree of similarity increases, and may collect summary information having a smaller amount of information as the degree of similarity decreases.

511 단계에서, 서버 프로세서(250)는 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이 동작에서, 서버 프로세서(250)는 상대적으로 정보량이 많은 요약 정보를 사용자의 시선이 머물기 편안한 곳 예컨대, 검색 결과 페이지의 상단 또는 중앙에 배치할 수 있다. In step 511, the server processor 250 may provide the search result to the user terminal 100. In this operation, the server processor 250 may place the summary information having a relatively large amount of information at a place where the user's gaze is comfortable, for example, at the top or center of the search result page.

513 단계에서, 서버 프로세서(250)는 상세 정보 요청을 사용자 단말(100)로부터 수신하는지 확인할 수 있다. 이와 관련하여, 상기 서버 프로세서(250)가 상기 사용자 단말(100)에 제공하는 검색 결과는 상세 정보 요청을 위한 메뉴 항목 또는 가상 키 버튼을 포함한 페이지를 포함할 수 있다. In step 513, the server processor 250 may check whether the detailed information request is received from the user terminal 100. In this regard, the search result provided by the server processor 250 to the user terminal 100 may include a menu item for requesting detailed information or a page including a virtual key button.

상세 정보 요청이 없는 경우, 서버 프로세서(250)는 515 단계를 스킵하고, 517 단계로 진입할 수 있다. 상세 정보 요청을 수신한 경우, 서버 프로세서(250)는 515 단계에서 상세 정보를 제공할 수 있다. 이를 보다 상세히 하면, 상기 서버 프로세서(250)는 상세 정보 요청을 위해 선택된 요약 정보에 대응하는 상품 정보를 수집하고, 상기 상품 정보를 포함하는 화면을 상세 정보로서 사용자 단말(100)에 제공할 수 있다. If there is no detailed information request, the server processor 250 may skip step 515 and proceed to step 517. When receiving the request for detailed information, the server processor 250 may provide detailed information in step 515 . In more detail, the server processor 250 may collect product information corresponding to summary information selected for requesting detailed information, and provide a screen including the product information to the user terminal 100 as detailed information. .

다음으로, 517 단계에서, 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 기능 종료 관련 이벤트 발생이 없으면, 서버 프로세서(250)는 501 단계 이전으로 분기하여 이하 동작을 재수행할 수 있다. 기능 종료 관련 이벤트가 발생하면, 서버 프로세서(250)는 이미지 검색 기능을 종료하고, 사용자 단말(100)과의 통신 채널을 해제할 수 있다.Next, in step 517, the server processor 250 may check whether an event related to function termination occurs. If there is no event related to end of function, the server processor 250 may branch before step 501 and perform the following operation again. When a function termination related event occurs, the server processor 250 may terminate the image search function and release the communication channel with the user terminal 100 .

도 6은 본 발명의 실시 예에 따른 검색 결과에 따른 차등적 요약 정보 제공을 위한 서비스 장치의 운용 방법의 일 예를 나타낸 도면이다.6 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to a search result according to an embodiment of the present invention.

도 6을 참조하면, 검색 결과에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법에서, 601 단계 내지 607 단계는 앞서 설명한 도 5의 501 단계 내지 507 단계의 동작과 동일 또는 유사한 동작이 될 수 있다. 예를 들어, 서버 프로세서(250)는 601 단계에서, 사용자 단말(100) 연결 여부를 확인하고, 사용자 단말(100) 연결이 없는 경우, 603 단계에서, 지정된 기능 수행을 처리할 수 있다. 사용자 단말이 연결된 경우, 서버 프로세서(250)는 605 단계에서, 쿼리 이미지 수신 여부를 확인할 수 있다. 쿼리 이미지 수신이 없는 경우, 서버 프로세서(250)는 603 단계로 분기하여, 지정된 기능을 수행하고, 쿼리 이미지가 수신된 경우, 607 단계에서, 이미지 검색을 수행할 수 있다. 이미지 검색 결과, 서버 프로세서(250)는 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 적어도 하나의 상품 정보를 검출할 수 있다. Referring to FIG. 6 , in the service device operating method for providing differential summary information according to a search result, steps 601 to 607 may be the same as or similar to the operations of steps 501 to 507 of FIG. 5 described above. . For example, in step 601, the server processor 250 may check whether the user terminal 100 is connected, and if there is no connection to the user terminal 100, in step 603, perform a specified function. When the user terminal is connected, the server processor 250 may check whether the query image is received in step 605 . When there is no reception of the query image, the server processor 250 branches to step 603 to perform a designated function. When the query image is received, the server processor 250 may perform image search in step 607 . As a result of the image search, the server processor 250 may detect at least one product information corresponding to at least one search object included in the query image.

609 단계에서, 서버 프로세서(250)는 이미지 검색 결과로서 획득된 상품 정보의 수가 지정된 값 이상인지 확인할 수 있다. 상기 지정된 값은 서비스 장치(200)의 정책에 따라 달라질 수 있다. 또는, 상기 지정된 값은 사용자 단말(100)에 의해 선택될 수도 있다. 이 경우, 서버 프로세서(250)는 사용자 단말(100)에 상품 정보 수를 지정할 수 있는 메뉴를 포함하는 가상 페이지를 제공하고, 사용자 선택에 따라 상품 정보 수를 조정할 수 있다. 사용자 선택이 없는 경우, 서버 프로세서(250)는 기 설정된 값을 지정된 값으로 결정할 수 있다. In step 609, the server processor 250 may check whether the number of product information obtained as an image search result is greater than or equal to a specified value. The designated value may vary according to the policy of the service device 200. Alternatively, the designated value may be selected by the user terminal 100 . In this case, the server processor 250 may provide a virtual page including a menu for specifying the number of product information to the user terminal 100 and adjust the number of product information according to the user's selection. When there is no user selection, the server processor 250 may determine a preset value as a designated value.

획득된 상품 정보의 개수가 지정된 값 이상인 경우, 611 단계에서, 서버 프로세서(250)는 제1 타입 요약 정보 기반으로 제1 검색 결과를 수집할 수 있다. 예컨대, 서버 프로세서(250)는 검색 결과 페이지에 상대적으로 많은 상품 정보들과 관련한 요약 정보를 보여줄 수 있도록 하기 위하여, 상대적으로 정보량이 적은 약식 요약 정보를 제1 검색 결과로 수집할 수 있다. 또는, 상기 서버 프로세서(250)는 상품 정보들 중 일부 상품 정보에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 나머지 일부 상품 정보에 대해서는 상대적으로 정보량이 적은 약식 요약 정보를 수집할 수 있다. 상기 상세 요약 정보는 예컨대, 검색용 객체와 유사도가 상대적으로 높은 상품 정보 또는 지정된 크기 이상의 유사도를 가진 상품 정보와 관련한 획득된 정보가 될 수 있다. 상기 약식 요약 정보는 예컨대, 검색용 객체와 유사도가 상대적으로 낮은 상품 정보 또는 지정된 크기 미만의 유사도를 가진 상품 정보와 관련한 획득된 정보가 될 수 있다.When the number of acquired product information is greater than or equal to the specified value, in step 611, the server processor 250 may collect a first search result based on the first type summary information. For example, the server processor 250 may collect abbreviated summary information with a relatively small amount of information as a first search result in order to display summary information related to a relatively large amount of product information on a search result page. Alternatively, the server processor 250 may collect detailed summary information with a relatively large amount of information for some of the product information, and collect abbreviated summary information with a relatively small amount of information for the remaining part of the product information. The detailed summary information may be, for example, product information having a relatively high similarity with the search object or acquired information related to product information having a similarity of a specified size or more. The abbreviated summary information may be, for example, acquired information related to product information having a relatively low similarity with the search object or product information having a similarity less than a specified size.

획득된 상품 정보의 개수가 지정된 값 미만인 경우, 613 단계에서, 서버 프로세서(250)는 제2 타입 요약 정보 기반으로 제2 검색 결과를 수집할 수 있다. 예컨대, 서버 프로세서(250)는 검색 결과 페이지를 통해 요약 정보들을 보여주되, 사용자가 보다 많은 정보를 확인할 수 있도록, 상대적으로 정보량이 많은 상세 요약 정보를 제2 검색 결과로서 수집할 수 있다. 여기서, 상기 상세 요약 정보는 예컨대, 상품 정보에 포함된 상품 관련 이미지들 및 텍스트 정보를 기반으로 구성된 화면을 캡쳐하고, 캡쳐된 화면을 일정 크기로 축소한 이미지를 포함할 수 있다. When the number of acquired product information is less than the specified value, in step 613, the server processor 250 may collect a second search result based on the second type summary information. For example, while displaying summary information through a search result page, the server processor 250 may collect detailed summary information having a relatively large amount of information as the second search result so that the user can check more information. Here, the detailed summary information may include, for example, an image obtained by capturing a screen configured based on product-related images and text information included in product information and reducing the captured screen to a predetermined size.

615 단계에서, 서버 프로세서(250)는 획득된 검색 결과를 사용자 단말(100)에 제공할 수 있다. 예컨대, 상기 서버 프로세서(250)는 상세 요약 정보를 검색 결과 페이지의 상단 또는 중앙에 배치하고, 약식 요약 정보를 페이지의 하단 또는 중앙을 기준으로 주변부에 배치할 수 있다. In step 615, the server processor 250 may provide the obtained search result to the user terminal 100. For example, the server processor 250 may arrange detailed summary information at the top or center of a search result page, and arrange short summary information at the periphery of the page based on the bottom or center.

617 단계에서, 상기 서버 프로세서(250)는 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 예를 들면, 상기 서버 프로세서(250)는 사용자 단말(100)로부터 이미지 검색 종료를 요청하는 메시지를 수신하는 경우 기능 종료 관련 이벤트 발생으로 판단할 수 있다. 또는, 서버 프로세서(250)는 사용자 단말(100)로부터 유의미한 입력 신호 수신이 지정된 시간 동안 발생하지 않는 경우 기능 종료와 관련한 이벤트 발생으로 판단할 수 있다. 기능 종료와 관련한 이벤트 발생이 없으면, 상기 서버 프로세서(250)는 601 단계 이전으로 분기하여 이하 과정을 재수행할 수 있다. 기능 종료와 관련한 이벤트가 발생하면, 상기 서버 프로세서(250)는 사용자 단말(100)과의 통신 채널을 해제하고, 다른 사용자 단말 또는 상기 사용자 단말이 접속할 수 있도록 통신 대기 상태로 진입할 수 있다.In step 617, the server processor 250 may check whether an event related to function termination occurs. For example, when the server processor 250 receives a message requesting termination of image search from the user terminal 100, it may be determined that an event related to function termination has occurred. Alternatively, the server processor 250 may determine that an event related to function termination has occurred when reception of a meaningful input signal from the user terminal 100 does not occur for a specified period of time. If there is no event related to function termination, the server processor 250 may branch before step 601 and perform the following process again. When an event related to function termination occurs, the server processor 250 may release the communication channel with the user terminal 100 and enter a communication standby state so that another user terminal or the user terminal can access.

도 7은 본 발명의 실시 예에 따른 검색 결과 내용에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법의 일 예를 나타낸 도면이다.7 is a diagram illustrating an example of a method of operating a service device for providing differential summary information according to search result contents according to an embodiment of the present invention.

도 7을 참조하면, 검색 결과 내용에 따른 차등적 요약 정보 제공을 위한 서비스 장치 운용 방법에 있어서, 701 단계 내지 707 단계는 앞서 설명한 도 5의 501 단계 내지 507 단계의 동작과 동일 또는 유사한 동작이 될 수 있다. 예를 들어, 서버 프로세서(250)는 701 단계에서, 사용자 단말(100) 연결 여부를 확인하고, 사용자 단말(100)이 연결되지 않은 경우 703 단계에서, 지정된 기능 수행을 처리할 수 있다. 사용자 단말(100)이 연결되면, 705 단계에서, 서버 프로세서(250)는 쿼리 이미지 수신 여부를 확인하고, 쿼리 이미지가 수신되면, 707 단계에서, 이미지 검색을 수행할 수 있다. 이 동작에서, 서버 프로세서(250)는 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 복수개의 상품 정보들을 상품 관련 이미지 DB(231)에서 검출할 수 있다. Referring to FIG. 7 , in the method for operating a service device for providing differential summary information according to search result content, steps 701 to 707 may be the same as or similar to steps 501 to 507 of FIG. 5 described above. can For example, in step 701, the server processor 250 may check whether the user terminal 100 is connected, and if the user terminal 100 is not connected, in step 703, a designated function may be executed. When the user terminal 100 is connected, in step 705, the server processor 250 may check whether the query image is received, and if the query image is received, in step 707, the image search may be performed. In this operation, the server processor 250 may detect a plurality of pieces of product information corresponding to at least one search object included in the query image from the product related image DB 231 .

709 단계에서, 서버 프로세서(250)는 이미지 검색 결과의 내용을 확인하고, 상품 정보 내용에 따른 타입별 요약 정보를 수집할 수 있다. 예컨대, 서버 프로세서(250)는 각 상품 정보들의 가격 정보를 확인할 수 있다. 상기 서버 프로세서(250)는 상대적으로 가격이 낮은 상품 정보들에 대해 정보량이 상대적으로 많은 요약 정보, 예컨대, 상세 요약 정보를 수집할 수 있다. 또는, 상기 서버 프로세서(250)는 상대적으로 가격이 높은 상품 정보들에 대해 정보량이 상대적으로 적은 요약 정보, 예컨대, 약식 요약 정보를 수집할 수 있다. 다른 예로서, 상기 서버 프로세서(250)는 각 상품 정보들의 수량 정보를 확인할 수 있다. 상기 서버 프로세서(250)는 지정된 개수 이상의 수량을 가진 상품 정보들에 대해 정보량이 상대적으로 많은 요약 정보, 예컨대, 상세 요약 정보를 수집할 수 있다. 또는, 상기 서버 프로세서(250)는 지정된 개수 미만의 수량을 가진 상품 정보들에 대해 정보량이 상대적으로 적은 요약 정보, 예컨대, 약식 요약 정보를 수집할 수 있다. 다른 예시로서, 상품 정보에 인지도 또는 인기도가 포함된 경우, 서버 프로세서(250)는 상대적으로 인지도가 높은 상품 정보들에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 상대적으로 인지도가 낮은 상품 정보들에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집할 수 있다. 또는, 서버 프로세서(250)는 지정된 값 이상의 인지도(예: 방송 시청률이 지정된 값 이상인 방송 컨텐츠에 등장한 상품 정보)를 가진 상품 정보들에 대해 상대적으로 정보량이 많은 상세 요약 정보를 수집하고, 지정된 값 미만의 인지도를 가진 상품 정보들에 대해 상대적으로 정보량이 적은 약식 요약 정보를 수집할 수 있다.In step 709, the server processor 250 may check the content of the image search result and collect summary information for each type according to product information content. For example, the server processor 250 may check price information of each product information. The server processor 250 may collect summary information with a relatively large amount of information, for example, detailed summary information, for product information with a relatively low price. Alternatively, the server processor 250 may collect summary information with a relatively small amount of information, for example, abbreviated summary information, for product information with a relatively high price. As another example, the server processor 250 may check quantity information of each product information. The server processor 250 may collect summary information having a relatively large amount of information, for example, detailed summary information, for product information having a quantity equal to or greater than a specified number. Alternatively, the server processor 250 may collect summary information with a relatively small amount of information, for example, short summary information, for product information having a quantity less than a specified number. As another example, when product information includes awareness or popularity, the server processor 250 collects detailed summary information with a relatively large amount of information for product information with relatively high awareness, and product information with relatively low awareness. A relatively small amount of summary information can be collected for each group. Alternatively, the server processor 250 collects detailed summary information with a relatively large amount of information about product information having awareness of a specified value or more (eg, product information appearing in broadcast content having a broadcast viewership rating of more than a specified value), and collects detailed summary information having a relatively large amount of information. It is possible to collect abbreviated summary information with a relatively small amount of information about product information with awareness of .

711 단계에서, 서버 프로세서(250)는 검색 결과를 사용자 단말(100)에 제공할 수 있다. 이 동작에서, 상기 서버 프로세서(250)는 상기 요약 정보들을 수집한 조건에 대한 정보를 포함한 검색 결과 페이지를 사용자 단말(100)에 제공할 수 있다. 예를 들어, 상기 서버 프로세서(250)는 요약 정보를 수집한 조건으로 상품 가격, 수량, 인지도, 상품 제원 등을 적용함을 나타내는 정보를 검색 결과 페이지에 포함하여 사용자 단말(100)에 제공할 수 있다. In step 711, the server processor 250 may provide the search result to the user terminal 100. In this operation, the server processor 250 may provide the user terminal 100 with a search result page including information on conditions for collecting the summary information. For example, the server processor 250 may provide the user terminal 100 with information indicating that product price, quantity, awareness, product specifications, etc. are applied as conditions for collecting summary information in a search result page. there is.

713 단계에서, 서버 프로세서(250)는 사용자 단말(100)로부터 조건 변경 요청을 수신하는지 확인할 수 있다. 조건 변경 요청이 없는 경우, 서버 프로세서(250)는 715 단계를 스킵하고, 717 단계 이전으로 분기하여 기능 종료 이벤트 발생 여부를 확인할 수 있다. 조건 변경 요청을 수신하는 경우, 서버 프로세서(250)는 717 단계에서 조건 변경에 따른 검색 결과를 제공할 수 있다. 예컨대, 상기 서버 프로세서(250)는 요약 정보 수집의 조건에 대하여 가장 낮은 가격 또는 가장 높은 가격, 가장 많은 수량을 포함한 상품 정보 등을 조건 변경을 사용자 단말(100)로부터 수신할 수 있다. In step 713, the server processor 250 may check whether a condition change request is received from the user terminal 100. If there is no condition change request, the server processor 250 skips step 715 and branches to step 717 before checking whether a function end event has occurred. When receiving a condition change request, the server processor 250 may provide search results according to the condition change in step 717 . For example, the server processor 250 may receive, from the user terminal 100 , a condition change such as the lowest price, the highest price, product information including the largest quantity, and the like with respect to conditions for collecting summary information.

다음으로, 717 단계에서, 서버 프로세서(250)는 기능 종료 이벤트 발생을 확인할 수 있다. 기능 종료 이벤트 발생 시, 서버 프로세서(250)는 사용자 단말(100)과의 통신 채널을 해제할 수 있다. 기능 종료 이벤트 발생이 없는 경우, 예컨대, 701 단계 이전으로 분기하거나, 713 단계 이전으로 분기하여 이하 동작을 재수행할 수 있다. Next, in step 717, the server processor 250 may check the occurrence of a function end event. When a function end event occurs, the server processor 250 may release the communication channel with the user terminal 100 . When there is no function end event, for example, branching before step 701 or before step 713 may be performed again.

상술한 바와 같이, 본 발명의 실시 예에 따른 이미지 검색 기능은 조건과 상황에 따라 다양한 요약 정보를 적응적으로 운용함으로써, 사용자에게 빠른 검색 결과를 제공하면서, 사용자가 필요로 하는 정보를 놓치지 않도록 지원할 수 있다. As described above, the image search function according to an embodiment of the present invention adaptively operates various summary information according to conditions and situations, thereby providing users with fast search results and supporting the user not to miss the information they need. can

본 발명은 이미지 검색 분야에 적용되는 것으로서, 특히, 이미지 검색과 관련한 요약 정보 제공과 관련된다.The present invention is applied to the field of image retrieval, and is particularly related to providing summary information related to image retrieval.

이러한, 본 발명은 상품 정보와 관련한 요약 정보를 수집하여 사용자 단말에 제공함으로써, 이미지 검색과 관련하여 송수신되는 데이터 량을 저감하고, 이를 기반으로 원활한 통신 속도를 달성할 수 있도록 지원한다. 또한, 본 발명의 이미지 검색 조건에 따라 요약 정보에 포함된 정보량을 조절하여, 사용자가 보다 많은 종류의 상품 정보를 보다 쉽게 확인할 수 있도록 하거나, 보다 상세한 상품 정보를 보다 쉽게 확인할 수 있도록 지원할 수 있다. The present invention reduces the amount of data transmitted and received in relation to image search by collecting summary information related to product information and providing it to the user terminal, and supports achieving a smooth communication speed based on this. In addition, by adjusting the amount of information included in the summary information according to the image search conditions of the present invention, it is possible to assist the user to more easily check more types of product information or to more easily check more detailed product information.

10: 서비스 시스템
50: 네트워크
100: 사용자 단말
110: 통신 회로
120: 입력 장치
130: 메모리
140: 디스플레이
150: 프로세서
190: 카메라
200: 서비스 장치
210: 서버 통신 회로
230: 서버 메모리
250: 서버 프로세서
251: 요약 정보 생성부
253: 검색 지원부
300: 사업자 단말
10: service system
50: network
100: user terminal
110: communication circuit
120: input device
130: memory
140: display
150: processor
190: camera
200: service device
210: server communication circuit
230: server memory
250: server processor
251: summary information generating unit
253: search support department
300: operator terminal

Claims (11)

서버 통신 회로;
상기 서버 통신 회로와 기능적으로 연결되는 서버 프로세서;를 포함하고,
상기 서버 프로세서는
상기 서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하고,
상기 사용자 단말로부터 쿼리 이미지를 수신하고,
상기 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 적어도 하나의 상품 정보를 검출하고,
상기 적어도 하나의 상품 정보에 대한 적어도 하나의 요약 정보를 수집하되, 지정된 조건이 상품 정보의 개수이면 상기 검출된 적어도 하나의 상품 정보의 개수를 확인하며,
상기 적어도 하나의 상품 정보의 개수가 지정된 개수 이상이면 상기 적어도 하나의 상품 정보 각각에 대해 상품 정보에 포함되는 단어 빈도수가 가장 많은 단어이거나 특정 키워드에 대응하는 단어인 핵심 키워드 및 대표 이미지를 기초로 생성한 약식 요약 정보를 수집하고, 상기 적어도 하나의 상품 정보의 개수가 지정된 개수 미만이면 상기 적어도 하나의 상품 정보 각각에 대해 상품 정보에 포함되는 상품 관련 이미지들과 텍스트 정보를 기초로 생성하여 상기 약식 요약 정보보다 더 많은 정보량을 포함하도록 생성한 상세 요약 정보를 수집하되,
상기 적어도 하나의 상품 정보 각각에 포함된 상품 가격 정보를 기초로 가장 낮은 상품 가격 정보를 가진 상품 정보에 대해서는 상기 상세 요약 정보를 수집하고,
상기 수집된 적어도 하나의 약식 요약 정보 또는 상기 수집된 적어도 하나의 상세 요약 정보를 포함하는 검색 결과를 상기 사용자 단말에 제공하도록 설정된 것을 특징으로 하는 서비스 장치.
server communication circuitry;
A server processor functionally connected to the server communication circuit;
The server processor
Forming a communication channel with a user terminal based on the server communication circuit;
Receiving a query image from the user terminal;
Detecting at least one product information corresponding to at least one search object included in the query image;
At least one piece of summary information about the at least one product information is collected, and if a specified condition is the number of product information, the number of the detected at least one piece of product information is checked;
If the number of the at least one piece of product information is greater than or equal to the specified number, the word with the highest frequency of words included in the product information for each of the at least one piece of product information is generated based on a key keyword that is a word corresponding to a specific keyword and a representative image. Short summary information is collected, and if the number of the at least one product information is less than a specified number, the summary summary is generated based on product-related images and text information included in the product information for each of the at least one product information. Collect detailed summary information generated to include more information than information,
Collecting the detailed summary information for product information having the lowest product price information based on the product price information included in each of the at least one piece of product information;
The service device, characterized in that configured to provide a search result including the collected at least one summary summary information or the collected at least one detailed summary information to the user terminal.
삭제delete ◈청구항 3은(는) 설정등록료 납부시 포기되었습니다.◈◈Claim 3 was abandoned when the registration fee was paid.◈ 제1항에 있어서,
상기 서버 프로세서는
상기 적어도 하나의 상품 정보와 상기 검색용 객체와의 유사도를 확인하고, 상기 유사도의 크기에 따라 상기 약식 요약 정보 또는 상세 요약 정보를 수집하도록 설정된 것을 특징으로 하는 서비스 장치.
According to claim 1,
The server processor
The service apparatus according to claim 1 , configured to check a similarity between the at least one product information and the search object, and to collect the summary summary information or the detailed summary information according to the magnitude of the similarity.
삭제delete ◈청구항 5은(는) 설정등록료 납부시 포기되었습니다.◈◈Claim 5 was abandoned when the registration fee was paid.◈ 제3항에 있어서,
상기 서버 프로세서는
상기 적어도 하나의 상품 정보와 상기 검색용 객체 간의 유사도가 지정된 값 이상인 상품 정보에 대해 상기 상세 요약 정보를 수집하고,
상기 적어도 하나의 상품 정보와 상기 검색용 객체 간의 유사도가 지정된 값 미만인 상품 정보에 대해 상기 약식 요약 정보를 수집하도록 설정된 것을 특징으로 하는 서비스 장치.
According to claim 3,
The server processor
Collecting the detailed summary information for product information in which the degree of similarity between the at least one product information and the object for search is greater than or equal to a specified value;
The service apparatus according to claim 1 , wherein the summary summary information is collected for product information in which a similarity between the at least one product information and the search object is less than a specified value.
삭제delete 삭제delete 삭제delete 서비스 장치가,
서버 통신 회로를 기반으로 사용자 단말과 통신 채널을 형성하는 단계;
상기 사용자 단말로부터 쿼리 이미지를 수신하는 단계;
상기 쿼리 이미지에 포함된 적어도 하나의 검색용 객체에 대응하는 적어도 하나의 상품 정보를 검출하는 단계;
상기 적어도 하나의 상품 정보에 대한 요약 정보를 수집하되, 지정된 조건이 상품 정보의 개수이면 상기 검출된 적어도 하나의 상품 정보의 개수를 확인하며, 상기 적어도 하나의 상품 정보의 개수가 지정된 개수 이상이면 상기 적어도 하나의 상품 정보 각각에 대해 상품 정보에 포함되는 단어 빈도수가 가장 많은 단어이거나 특정 키워드에 대응하는 단어인 핵심 키워드 및 대표 이미지를 기초로 생성한 약식 요약 정보를 수집하고, 상기 상품 정보들의 개수가 지정된 개수 미만이면 상기 적어도 하나의 상품 정보 각각에 대해 상품 정보에 포함되는 상품 관련 이미지들과 텍스트 정보를 기초로 생성하여 상기 약식 요약 정보보다 더 많은 정보량을 포함하도록 생성한 상세 요약 정보를 수집하되, 상기 적어도 하나의 상품 정보 각각에 포함된 상품 가격 정보를 기초로 가장 낮은 상품 가격 정보를 가진 상품 정보에 대해서는 상기 상세 요약 정보를 수집하는 단계; 및
상기 수집된 적어도 하나의 약식 요약 정보 또는 상기 수집된 적어도 하나의 상세 요약 정보를 포함하는 검색 결과를 상기 사용자 단말에 제공하는 단계;를 포함하는 것을 특징으로 하는 이미지 검색과 관련한 요약 정보 제공 방법.
service device,
Forming a communication channel with a user terminal based on the server communication circuit;
Receiving a query image from the user terminal;
detecting at least one product information corresponding to at least one search object included in the query image;
Summary information on the at least one product information is collected, and if the specified condition is the number of product information, the number of the detected at least one product information is checked, and if the number of the at least one product information is greater than or equal to the specified number, the For each of the at least one product information, abbreviated summary information generated based on a core keyword and a representative image, which is a word with the highest frequency of words included in the product information or a word corresponding to a specific keyword, is collected, and the number of the product information is If it is less than the specified number, collect detailed summary information generated based on product-related images and text information included in product information for each of the at least one product information to include more information than the summary summary information, collecting the detailed summary information for product information having the lowest product price information based on the product price information included in each of the at least one piece of product information; and
and providing a search result including the collected at least one summary summary information or the collected at least one detailed summary information to the user terminal.
삭제delete 삭제delete
KR1020180101347A 2018-08-28 2018-08-28 Providing Method of summary information for an image searching and service device thereof KR102536057B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180101347A KR102536057B1 (en) 2018-08-28 2018-08-28 Providing Method of summary information for an image searching and service device thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180101347A KR102536057B1 (en) 2018-08-28 2018-08-28 Providing Method of summary information for an image searching and service device thereof

Publications (2)

Publication Number Publication Date
KR20200024540A KR20200024540A (en) 2020-03-09
KR102536057B1 true KR102536057B1 (en) 2023-05-26

Family

ID=69801921

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180101347A KR102536057B1 (en) 2018-08-28 2018-08-28 Providing Method of summary information for an image searching and service device thereof

Country Status (1)

Country Link
KR (1) KR102536057B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7317887B2 (en) * 2021-04-20 2023-07-31 ヤフー株式会社 Information processing device, information processing method and information processing program

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010055514A (en) * 2008-08-29 2010-03-11 Casio Comput Co Ltd Image processor and program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101724143B1 (en) * 2014-09-05 2017-04-06 네이버 주식회사 Apparatus, system, method, program for providing searching service
KR102558437B1 (en) * 2015-11-27 2023-07-24 삼성전자주식회사 Method For Processing of Question and answer and electronic device supporting the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010055514A (en) * 2008-08-29 2010-03-11 Casio Comput Co Ltd Image processor and program

Also Published As

Publication number Publication date
KR20200024540A (en) 2020-03-09

Similar Documents

Publication Publication Date Title
US9953356B2 (en) Image-based product marketing systems and methods
CN104823169B (en) For the index configurations that can search for data in network
WO2017000109A1 (en) Search method, search apparatus, user equipment, and computer program product
JP2020504475A (en) Providing related objects during video data playback
CN108073605A (en) A kind of loading of business datum, push, the generation method of interactive information and device
US20180144063A1 (en) Method for associating application service information, and application association platform server and client
KR20160070805A (en) Tv program identification method, apparatus, terminal, server and system
CN109165320B (en) Information collection method and mobile terminal
KR20200003577A (en) Method for Providing of Information of Goods based on image searching and service device supporting the same
US11388561B2 (en) Providing a summary of media content to a communication device
US20170287041A1 (en) Information processing apparatus, information processing method, and information processing program
CN108600780A (en) Method for pushed information
JP4938737B2 (en) Product search system, product search method, and program
KR102536057B1 (en) Providing Method of summary information for an image searching and service device thereof
KR20200024534A (en) Supporting Method for Searching of Goods and service device, and terminal device thereof
KR20200024541A (en) Providing Method of video contents searching and service device thereof
CN111695008A (en) Message integration method and device
KR20200024538A (en) Method of recommending of information related to an image searching and service device thereof
KR20200023095A (en) Method of management of goods information and service device thereof
KR20200024536A (en) Method of providing of image searching result and service device thereof
CN115860869A (en) Shop information recommendation method, equipment and storage medium
CN112702622B (en) Program searching method, apparatus, device and computer readable storage medium
KR20200001887A (en) Supporting Method for Image Searching and service device thereof
KR20200023094A (en) Method of simple image searching and service device thereof
CN109271580B (en) Search method, device, client and search engine

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right