KR20100044669A

KR20100044669A - 이미지 매칭에 기초한 상품 정보 제공 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Info

Publication number: KR20100044669A
Application number: KR1020080103891A
Authority: KR
Inventors: 양병석; 김형태; 성기준
Original assignee: 엔에이치엔비즈니스플랫폼 주식회사
Priority date: 2008-10-22
Filing date: 2008-10-22
Publication date: 2010-04-30
Also published as: KR101017016B1

Abstract

본 발명은 이미지 매칭을 이용한 상품 정보 제공 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다. 본 발명의 일 태양에 따르면, 입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 방법으로서, 이미지 검색 인터페이스에 다수의 상품 식별 정보가 입력되면 상기 상품 식별 정보별로 출력되는 이미지 데이터들을 상기 입력된 상품 식별 정보와 연계하여 적어도 하나의 모델 그룹을 생성하고, 생성된 모델 그룹에 관한 정보를 모델 데이터베이스에 저장하는 단계, 사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 단계, 상기 검색 이미지를 이용하여 적어도 하나의 모델 그룹을 결정하는 단계, 및 상기 결정된 모델 그룹과 연계된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 단계를 포함하는 방법이 제공된다. 본 발명에 의하면, 특정 상품에 관련된 이미지가 입력되면, 사용자들에 의해 축적된 다수의 이미지 데이터를 기초로, 상기 특정 상품과 관련된 정보를 제공하는 신규한 상품 정보 제공 모델이 달성될 수 있다.

이미지 검색, 상품 검색, 쇼핑

Description

이미지 매칭에 기초한 상품 정보 제공 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체{METHOD, SYSTEM AND COMPUTER-READABLE RECORDING MEDIUM FOR PROVIDING INFORMATION ON GOODS BASED ON IMAGE MATCHING}

본 발명은 이미지 매칭에 기초하여 상품 정보를 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다. 보다 상세하게는, 본 발명은 사용자 단말 장치로부터 검색 대상 상품의 이미지에 관한 정보를 수신하고, 수신된 이미지와 유사한 비교 대상 이미지를 검색한 후, 비교 대상 이미지로부터 획득되는 상품 식별 정보를 이용하여 사용자에게 상품 정보를 제공할 수 있도록 하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다.

근래에 들어, 인터넷 사용이 보편화되면서 사용자들은 인터넷 검색을 통하여 다양한 정보를 획득할 수 있게 되었다. 즉, 사용자들은 인터넷에의 접속이 가능한 개인용 컴퓨터 등의 단말 장치를 통해 인터넷 검색 사이트에 접속한 후, 뉴스, 지식, 게임, 커뮤니티 등과 관련된 각종 컨텐츠를 검색할 수 있게 되었다. 이와 같은 검색 사이트는 주로 텍스트 데이터에 기반한 검색 인터페이스를 제공하는데, 보다 구체적으로는, 사용자로부터 검색 키워드를 입력 받고, 입력된 검색 키워드에 부합하는 검색 결과 목록을 사용자에게 제공하는 방식으로 구현된다.

한편, 통신 기술의 발달 및 저장 장치의 대용량화에 따라, 인터넷 상에는 텍스트 형식의 문서뿐만 아니라, 사진, 동영상 등과 같은 이미지 데이터를 포함하는 문서들의 비율이 급격히 증가하게 되었는데, 근래에 급격히 확산되고 있는 개인 블로그 문화의 영향으로 그 증가 속도가 더욱 심화되고 있는 실정이다.

그러나, 이와 같이 인터넷 상에 방대한 양의 이미지 데이터가 축적되고 있는 상황임에도 불구하고, 검색 사이트들이 제공하는 이미지 검색 인터페이스는 아직 텍스트 검색 인터페이스의 범주를 벗어나고 있지 못하고 있는 실정이다. 예를 들면, 현재 대부분의 검색 사이트에서 제공하는 이미지 검색 기능은 사용자로부터 텍스트 형태의 검색 키워드를 입력 받고, 입력된 검색 키워드를 태그 정보로 포함하는 이미지, 또는 입력된 검색 키워드가 포함된 웹 문서에 포함된 이미지들을 검색 결과로서 제공하는 수준에 불과하다. 따라서, 현재의 상황 하에서는, 이미지 데이터와 관련된 상품에 관한 정보를 획득하고자 하는 사용자는, 이미지 데이터로부터 사용자가 시각적으로 획득할 수 있는 여러 단서들을 텍스트 형식으로 입력함으로써 해당 상품에 대한 검색을 수행할 수 밖에 없었다.

이와 같은 문제점을 해결하기 위하여, 형상 인식 기술에 기초하여 상품을 인식하고, 인식된 상품에 관한 정보를 제공하는 기술이 개발된 바 있다. 보다 구체적으로는, 우선, 다수의 상품들에 대한 표본 데이터베이스를 구축한 후, 사용자로부터 이미지 데이터가 입력되면, 해당 이미지 데이터 중 상품이 존재하는 영역 또는 상품이 존재할 것으로 예상되는 영역을 검출하고, 검출된 상품 영역의 이미지를 표본 데이터베이스에 저장되어 있는 표본 데이터와 비교함으로써 해당 영역에 나타난 상품을 인식하는 방식이다.

그러나, 상기의 종래 기술에 따르면, 대부분의 상품은 입체적인 구조를 가지는 반면에, 이미지 데이터로부터 획득되는 상품의 모습은 평면적인 정보에 그칠 수 밖에 없으므로, 종래의 이미지 매칭 기술에 기초한 상품 정보 제공 기술이 실용화되기 위하여는 각각의 상품에 대하여 다양한 각도에서 촬영된 방대한 양의 표본 이미지가 요구된다는 단점이 있었다.

또한, 경우에 따라서는, 특정 상품과 관련된 이미지 데이터임에도 불구하고, 이미지 데이터 자체에는 상품이 나타나 있지 않은 경우도 있는데, 예를 들면, CF 에서 상기 특정 상품이 포함되어 있지 않은 어느 장면이 대중에게 각인되어, 대중들이 해당 장면을 보고 특정 상품을 떠올리게 되는 상황을 가정할 수 있을 것이다. 그러나, 이와 같은 경우에, 앞서 설명한 바와 같은 형상 인식 기술에 기초하여 상품을 인식하는 종래 기술을 이용하려 한다면 적절한 결과를 도출하기 힘들다는 단점이 있었다.

본 발명은 상술한 문제점을 모두 해결하는 것을 그 목적으로 한다.

또한, 본 발명은 사용자들에 의해 축적된 다수의 이미지 데이터를 분석하여 상품의 이미지 모델 데이터를 유지하고, 상기 유지된 이미지 모델 데이터와의 이미지 매칭 작업을 통하여 상품을 인식하는 것을 그 목적으로 한다.

또한, 본 발명은 이미지 데이터로부터 상품 영역을 검출하는 과정을 생략한 채로 이미지 데이터와 관련된 상품을 높은 정확도로 인식하는 것을 그 목적으로 한다.

또한, 본 발명은 이미지 데이터에 부여된 태그 정보로부터 상품의 식별 정보를 추출하고, 추출된 상품 식별 정보를 통하여 상품 정보가 제공될 수 있도록 하는 것을 그 목적으로 한다.

상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.

본 발명의 일 태양에 따르면, 입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 방법으로서, 이미지 검색 인터페이스에 다수의 상품 식별 정보가 입력되면 상기 상품 식별 정보별로 출력되는 이미지 데이터들을 상기 입력된 상품 식별 정보와 연계하여 적어도 하나의 모델 그룹을 생성하고, 생성된 모델 그룹에 관한 정보를 모델 데이터베이스에 저장하는 단계, 사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 단계, 상기 검색 이미지를 이용하여 적어도 하나의 모델 그룹을 결정하는 단계, 및 상기 결정된 모델 그룹과 연계된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 단계를 포함하는 방법이 제공된다.

본 발명의 다른 태양에 따르면, 입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 방법으로서, 사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 단계, 상기 검색 이미지를 이미지 데이터베이스에 저장된 이미지 데이터들과 비교하여 유사도를 산출하는 단계, 상기 산출된 유사도에 기초하여 적어도 하나의 이미지 데이터를 결정하는 단계, 상기 결정된 이미지 데이터와 연계된 적어도 하나의 태그 정보를 획득하고, 상기 획득된 태그 정보를 이용하여 상품 식별 정보를 획득하는 단계, 및 상기 획득된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 단계를 포함하는 방법이 제공된다.

본 발명의 또 다른 태양에 따르면, 입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 시스템으로서, 이미지 검색 인터페이스에 다수의 상품 식별 정보가 입력되면 상기 상품 식별 정보별로 출력되는 이미지 데이터들을 상기 입력된 상품 식별 정보와 연계하여 적어도 하나의 모델 그룹을 생성하는 모델 데이터 관리부, 상기 모델 데이터 관리부에 의해 생성된 모델 그룹에 관한 정보가 저장된 모델 데이터베이스, 사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 이미지 획득부, 상기 검색 이미지를 이용하여 적어도 하나의 모델 그룹을 결정하는 이미지 매칭부, 및 상기 결정된 모델 그룹과 연계된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 상품 정보 제공부를 포함하 는 시스템이 제공된다.

본 발명의 또 다른 태양에 따르면, 입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 시스템으로서, 사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 이미지 획득부, 상기 검색 이미지를 이미지 데이터베이스에 저장된 이미지 데이터들과 비교하여 유사도를 산출하고, 상기 산출된 유사도에 기초하여 적어도 하나의 이미지 데이터를 결정하는 이미지 매칭부, 및 상기 결정된 이미지 데이터와 연계된 적어도 하나의 태그 정보를 획득하고, 상기 획득된 태그 정보를 이용하여 상품 식별 정보를 획득하고, 상기 획득된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 상품 정보 제공부를 포함하는 시스템이 제공된다.

이 외에도, 본 발명을 구현하기 위한 다른 방법, 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하기 위한 컴퓨터 판독 가능한 기록 매체가 더 제공된다.

본 발명에 의하면, 특정 상품에 관련된 이미지가 입력되면, 사용자들에 의해 축적된 다수의 이미지 데이터를 기초로, 상기 특정 상품과 관련된 정보를 제공하는 신규한 상품 정보 제공 모델이 달성될 수 있다.

본 발명에 의하면, 이미지 데이터와 관련된 상품을 인식하는 과정에서, 상품 영역을 검출하는 과정이 생략됨으로써, 상품 인식 과정을 단순화시킬 수 있는 효과를 달성할 수 있다.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.

[본 발명의 바람직한 실시예]

전체 시스템의 구성

도 1은 본 발명의 일 실시예에 따라 상품 정보 제공 시스템에 이미지 데이터가 입력되면 이와 관련된 상품을 판단하여 상품 정보를 제공하기 위한 전체 시스템 의 구성을 개략적으로 나타내는 도면이다.

도 1에 도시되어 있는 바와 같이, 본 발명의 일 실시예에 따른 전체 시스템은, 통신망(100), 이미지 데이터와 관련된 상품을 인식하여 상품 정보를 제공하는 상품 정보 제공 시스템(200), 다수의 이미지 데이터가 저장된 이미지 서버(300), 사용자 단말 장치(400), 및 쇼핑 서버(500)로 구성될 수 있다.

먼저, 통신망(100)은 유선 및 무선과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 근거리 통신망(LAN: Local Area Network), 도시권 통신망(MAN: Metropolitan Area Network), 광역 통신망(WAN: Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 바람직하게는, 본 발명에서 말하는 통신망(100)은 공지의 월드와이드웹(WWW: World Wide Web)일 수 있다.

본 발명의 일 실시예에 따르면, 상품 정보 제공 시스템(200)은 사용자 단말 장치(400) 또는 이미지 서버(300)로부터 이미지 데이터를 수신하고, 수신된 이미지 데이터와 관련된 상품에 관한 정보를 사용자 단말 장치(400)에 제공할 수 있다.

그리고, 본 발명의 일 실시예에 따르면, 상품 정보 제공 시스템(200)은 적어도 하나의 이미지 서버(300)에 저장된 이미지들을 소정의 규칙에 따라 분류하여 상품 모델 데이터 그룹를 생성한다. 이러한 상품 모델 데이터를 이용하면 사용자 단말 장치(400) 또는 이미지 서버(300)로부터 수신된 이미지 데이터와 관련된 상품을 인식할 수 있게 된다.

또한, 본 발명의 일 실시예에 따르면, 상품 정보 제공 시스템(200)은 인식된 상품을 사용자가 구매할 수 있도록 사용자 단말 장치(400)가 쇼핑 서버(500)에 접 속되도록 하는 기능을 수행할 수 있다.

본 발명의 일 실시예에 따르면, 이미지 서버(300)는 다수의 이미지 데이터에 관한 정보를 저장하고, 사용자 단말 장치(400) 또는 상품 정보 제공 시스템(200)에 이미지 데이터를 제공하는 기능을 포함하는 서버일 수 있다. 구체적으로는, 이미지 서버(300)에 저장된 이미지 데이터는 사용자 단말 장치(400)의 사용자 또는 이미지 서버(300)의 관리자에 의해 생성되거나 저장된 이미지 데이터일 수 있다.

본 발명의 일 실시예에 따르면, 이미지 서버(300)는 소정의 검색 인터페이스를 구비하고, 검색 조건이 입력되면, 입력된 검색 조건에 부합하는 이미지 데이터에 관한 정보를 출력할 수 있다. 예를 들면, 검색 조건으로서, "프라다폰"이 입력되는 경우, "프라다폰"을 태그 정보로서 포함하는 이미지 데이터나 "프라다폰"과 관련된 다양한 컨텐츠에 대한 정보를 출력할 수 있을 것이다.

본 발명의 일 실시예에 따르면, 이미지 서버(300)는 인터넷 포털 사이트, 커뮤니티 사이트, 쇼핑 사이트, 또는 상품 리뷰 사이트의 운영 서버일 수 있다.

한편, 도 1에는 이미지 서버(300)가 상품 정보 제공 시스템(200) 및 쇼핑 서버(500)와 별개로 구성되어 있는 것으로 도시되어 있지만, 본 발명을 구현하는 당업자의 필요에 따라 이미지 서버(300)는 상품 정보 제공 시스템(200) 또는 쇼핑 서버(500)에 포함되어 구성될 수도 있을 것이다.

본 발명의 일 실시예에 따른 사용자 단말 장치(400)는 상품 정보 제공 시스템(200), 이미지 서버(300), 및 쇼핑 서버(500) 등과 같은 원격 컴퓨터에 접속한 후 통신할 수 있도록 하는 기능을 포함하는 디지털 기기로서, 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터 등), 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 사용자 단말 장치(400)로서 채택될 수 있다.

본 발명의 일 실시예에 따르면, 쇼핑 서버(500)는 상품 정보 제공 시스템(200) 및/또는 사용자 단말 장치(400)와의 통신을 수행한다. 쇼핑 서버(500)는 상품 정보 제공 시스템(200) 또는 사용자 단말 장치(400)로부터 상품 식별 정보를 수신하고, 수신된 상품 식별 정보에 대응하는 상품을 구매할 수 있도록 하는 인터페이스를 사용자 단말 장치(400)에 제공할 수 있다. 또한, 도 1에는 상품 정보 제공 시스템(200)과 쇼핑 서버(500)가 별개로 구성되어 있는 것으로 도시되어 있지만, 본 발명을 구현하는 당업자의 필요에 따라, 쇼핑 서버(500)는 상품 정보 제공 시스템(200)에 포함되어 구성될 수도 있다.

상품 정보 제공 시스템의 구성

이하에서는, 본 발명에 따른 상품 정보 제공 시스템(200)의 내부 구성 및 각 구성요소의 기능에 대하여 살펴보기로 한다.

도 2는 본 발명의 일 실시예에 따른 상품 정보 제공 시스템(200)의 내부 구성을 상세하게 도시한 도면이다. 도 2를 참조하면, 본 발명의 일 실시예에 따른 상품 정보 제공 시스템(200)은, 이미지 획득부(210), 모델 데이터 관리부(220), 이미지 매칭부(230), 연관 키워드 제공부(240), 상품 정보 제공부(250), 데이터베이스 관리부(260), 통신부(270) 및 제어부(280)를 포함할 수 있다. 본 발명의 일 실 시예에 따르면, 이미지 획득부(210), 모델 데이터 관리부(220), 이미지 매칭부(230), 연관 키워드 제공부(240), 상품 정보 제공부(250), 데이터베이스 관리부(260), 통신부(270) 및 제어부(280)는 그 중 적어도 일부가 이미지 서버(300), 사용자 단말 장치(400), 및/또는 쇼핑 서버(500)와 통신하는 프로그램 모듈들일 수 있다. 이러한 프로그램 모듈들은 운영 시스템, 응용 프로그램 모듈 및 기타 프로그램 모듈의 형태로 상품 정보 제공 시스템(200)에 포함될 수 있으며, 물리적으로는 여러 가지 공지의 기억 장치 상에 저장될 수 있다. 또한, 이러한 프로그램 모듈들은 상품 정보 제공 시스템(200)과 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈들은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.

먼저, 본 발명의 일 실시예에 따른 이미지 획득부(210)는 사용자 단말 장치(400)로부터 이미지 데이터를 수신하거나, 사용자 단말 장치(400)로부터 이미지 데이터에 대한 식별 정보를 획득하고, 이를 이용하여 이미지 서버(300)로부터 이미지 데이터를 획득할 수 있다.

다음으로, 본 발명의 일 실시예에 따른 모델 데이터 관리부(220)는 이미지 서버(300)에 저장된 이미지 데이터들을 소정의 기준에 따라 그룹화하고, 그룹화된 이미지 데이터들과 상품의 식별 정보(예를 들면, 상품의 명칭, 모델명 등)를 연계하여 후술할 모델 데이터베이스(260a)에 저장하는 기능을 수행할 수 있다.

본 발명의 일 실시예에 따른 이미지 매칭부(230)는 이미지 획득부(210)에 의 해 획득된 이미지와 모델 데이터베이스(260a) 및/또는 이미지 서버(300)에 저장된 이미지 데이터 간의 유사도를 산출하고, 산출된 유사도에 기초하여, 이 중, 상위 n 개의 유사도를 가지는 모델 그룹 또는 이미지 데이터를 결정할 수 있다.

본 발명의 일 실시예에 따른 연관 키워드 제공부(240)는 후술할 연관 키워드 데이터베이스(260b)로부터 연관 키워드 정보를 획득하고, 이를 모델 데이터 관리부(220) 및/또는 상품 정보 제공부(250)에 제공하는 기능을 수행할 수 있다.

본 발명의 일 실시예에 따른 상품 정보 제공부(250)는 이미지 매칭부(230)에 의해 결정된 모델 그룹 또는 이미지 데이터들과 관련된 상품의 식별 정보를 획득한다. 이러한 과정에서, 상품 정보 제공부(250c)는 후술할 상품 정보 데이터베이스(260c)를 참조할 수 있다. 상품 정보 제공부(250)는 획득된 상품 식별 정보를 이용하여 상품 정보를 사용자 단말 장치(400)에 제공할 수 있다. 또한, 상품 정보 제공부(250)는 획득된 상품 식별 정보를 쇼핑 서버(500)에 제공함으로써, 사용자가 해당 상품에 대한 구매 페이지에 연결될 수 있도록 하는 기능을 수행할 수도 있다.

본 발명의 일 실시예에 따른 데이터베이스 관리부(260)는, 비교 대상이 되는 모델 데이터가 저장된 모델 데이터베이스(260a), 연관 키워드들에 대한 정보가 저장된 연관 키워드 데이터베이스(260b), 및 상품 정보가 저장된 상품 정보 데이터베이스(260c)를 포함할 수 있다.

본 발명의 일 실시예에 따른 통신부(270)는 본 발명에 따른 상품 정보 제공 시스템(200)이 이미지 서버(300), 사용자 단말 장치(400), 및 쇼핑 서버(500) 등과 같은 외부 장치와 통신할 수 있도록 하는 기능을 수행할 수 있다.

본 발명의 일 실시예에 따른 제어부(280)는 이미지 수신부(210), 모델 데이터 관리부(220), 이미지 매칭부(230), 연관 키워드 제공부(240), 상품 정보 제공부(250), 데이터베이스 관리부(260), 및 통신부(270) 간의 데이터의 흐름을 제어하는 기능을 수행한다.

이상의 설명에서, 본 발명의 구현을 위한 정보를 저장하는 데이터베이스를 모델 데이터베이스(260a), 연관 키워드 데이터베이스(260b) 및 상품 정보 데이터베이스(260c)의 세 가지 데이터베이스로 분류하였지만, 이러한 분류를 포함한 데이터베이스의 구성은 당업자의 필요에 따라 변경될 수 있음은 물론이다.

마지막으로, 본 명세서에 있어서, 데이터베이스란, 협의의 데이터베이스뿐만 아니라, 컴퓨터 파일 시스템에 기반한 데이터 기록 등을 포함하는 넓은 의미의 데이터베이스까지도 포함하는 개념으로서, 단순한 연산 처리 이력의 집합이라도 이를 검색하여 소정의 데이터를 추출할 수 있다면 본 발명에서 말하는 데이터베이스에 포함될 수 있음이 이해되어야 한다.

모델 데이터의 생성

본 발명의 일 실시예에 따르면, 모델 데이터 관리부(220)는 이미지 서버(300)에 저장된 이미지 데이터들을 소정의 기준에 따라 그룹화하고, 그룹화된 이미지 데이터들과 상품의 식별 정보를 연계하여 모델 데이터베이스(260a)에 저장할 수 있다.

본 발명의 일 실시예에 따르면, 이미지 서버(300)에 저장된 이미지 데이터들은 사용자, 컨텐츠 공급자 또는 이미지 서버(300)의 관리자가 생성 또는 저장한 이 미지 데이터일 수 있다. 또한, 본 발명에서 말하는 이미지 데이터란 반드시 이미지 데이터 자체만을 의미하는 것은 아니고, 이미지 데이터를 포함하는 모든 형식의 데이터를 포함하는 개념으로 이해되어야 한다. 예를 들면, 이미지 서버(300)에는 사용자나 이미지 서버(300)의 관리자가 직접 업로드한 이미지 데이터, 개인 블로그에 생성한 포스트에 첨부된 이미지, 뉴스 공급자가 제공한 뉴스 기사에 첨부된 이미지, 제품 리뷰 사이트에 기고된 리뷰 자료에 첨부된 이미지 등에 관한 정보가 저장되어 있을 수 있다.

본 발명의 일 실시예에 따르면, 이미지 서버(300)에 저장되는 이미지 데이터는 해당 이미지와 관련된 태그 정보를 포함할 수 있다.

여기서 태그 정보란, 데이터의 일 속성을 나타내기 위하여 데이터와 연계되어 저장되는 텍스트 형식의 데이터를 의미하는 것으로서, 태그 정보는 사용자, 컨텐츠 공급자, 및 이미지 서버(300)의 관리자 중 적어도 하나에 의해 지정될 수도 있고, 이미지 서버(300)가 소정의 자동 태깅 프로세스를 지원하는 경우, 이미지 서버(300)에 의해 자동적으로 부여될 수도 있을 것이다. 예를 들면, 사용자가 휴대폰에 대한 리뷰 자료를 작성한 경우, 리뷰 자료를 작성한 사용자 또는 리뷰 사이트의 관리자가 해당 휴대폰의 제품명을 리뷰 자료의 태그 정보로서 부여할 수도 있을 것이고, 이미지 서버(300)의 자동 태깅 프로그램이 리뷰 자료의 내용을 분석하여 휴대폰의 제품명과 같이 리뷰 자료 내에서 자주 출현하는 문자열을 태그 정보로서 자동으로 부여할 수도 있을 것이다. 본 발명의 일 실시예에 따르면, 자동 태깅 프로그램은 공지의 검색 엔진에 포함될 수 있다.

본 발명의 일 실시예에 따르면, 모델 데이터 관리부(220)는 주기적 또는 비주기적으로 이미지 서버(300)에 검색 조건을 송신하고, 이에 대한 응답으로서 제공되는 이미지 데이터에 관한 정보를 모델 데이터베이스(260a)에 저장할 수 있다. 이 때, 모델 데이터 관리부(220)가 송신하는 검색 조건은 상품 정보 데이터베이스(260c)에 저장된 상품 명칭일 수 있으나 반드시 이에 한정되는 것은 아니며 적절한 검색 결과를 얻을 수 있다면 상기 검색 조건으로서 기능할 수 있을 것이다.

예를 들면, 모델 데이터 관리부(220)가 검색 조건으로서 "프라다폰"을 이미지 서버(300)에 입력하면, 이미지 서버(300)는 태그 정보 중 "프라다폰"을 포함하고 있는 이미지 데이터들을 모델 데이터 관리부(220)에 제공한다. 모델 데이터 관리부(220)는 이미지 서버(300)로부터 제공 받은 이미지 데이터들에 관한 정보와 이미지 서버(300)에 송신한 검색 조건을 연계하여 모델 그룹을 생성하고 이를 모델 데이터베이스(260a)에 저장할 수 있다.

모델 데이터 관리부(220)는 상기와 같이 수행된 이미지 검색 작업을 기초로 상품 정보 데이터베이스(260c)에 저장된 각각의 상품별로 다수의 이미지 데이터로 구성되는 모델 그룹을 연계시킬 수 있을 것이다.

본 발명의 일 실시예에 따르면, 모델 데이터 관리부(220)는 연관 키워드 데이터베이스(260b)를 참조하여, 복수의 검색 조건에 대한 이미지 데이터들을 하나의 그룹으로 통합할 수 있다. 예를 들면, 연관 키워드 데이터베이스(260b)에 "프라다폰", "LG-SB310", 및 "LG-LB3100"이 연관 키워드로 지정되어 있는 경우, 이들에 대한 각각의 검색 결과를 통합하여 하나의 그룹으로 생성할 수 있다. 이 때, 통합된 이미지 데이터들과 연계되어 저장되는 검색 조건은 "프라다폰", "LG-SB310", 및 "LG-LB3100"를 모두 포함할 수도 있고, 이 중 일부만을 포함할 수도 있을 것이다.

도 3은 모델 데이터베이스(260a)에 저장되는 데이터를 예시적으로 나타내는 도면이다.

도 3을 참조하면, 하나의 모델 그룹에 다수의 이미지 데이터들이 연계되어 있는 것을 확인할 수 있다. 도 3의 예시에서, 이미지 데이터 필드에 저장되는 정보는 이미지 서버(300)로부터 제공 받은 이미지 데이터 자체일 수도 있고, 이미지 데이터를 획득할 수 있는 경로 정보일 수도 있을 것이다.

입력 이미지의 획득

본 발명의 일 실시예에 따르면, 이미지 획득부(210)는 사용자 단말 장치(400)로부터 이미지 데이터를 수신할 수 있다. 예를 들면, 사용자가 상품 정보 제공 시스템(200)에 접속하여, 자신이 검색하고자 하는 상품과 관련된 이미지를 쿼리로서 입력하면, 이미지 획득부(210)는 상기 입력된 이미지를 수신할 수 있다.

본 발명의 다른 실시예에 따르면, 이미지 획득부(210)는 사용자 단말 장치(400)로부터 이미지 데이터에 대한 식별 정보를 수신할 수 있다. 예를 들면, 사용자가 웹 문서를 조회하는 과정에서, 해당 웹 문서에 포함된 특정 이미지 데이터를 마우스로 클릭하면, 해당 이미지 데이터의 식별 정보가 이미지 획득부(210)에 전송되도록 구현할 수도 있을 것이다. 이미지 획득부(210)는 이미지 데이터 식별 정보를 이용하여 상품 정보 제공 시스템(200) 내에서 해당 이미지 데이터를 획득하거나, 또는 외부의 시스템에 접속하여 해당 이미지 데이터를 전송 받을 수 있다. 여기서, 이미지 데이터 식별 정보는 이미지 데이터를 획득할 수 있는 경로 정보를 포함하는 개념일 수 있다.

상품의 인식

본 발명의 제1 실시예에 따르면, 이미지 매칭부(230)는 이미지 획득부(210)에 의해 획득된 입력 이미지를 모델 데이터베이스(260a)에 저장된 각각의 모델 그룹에 대하여 비교 작업을 수행하여, 입력 이미지와 모델 데이터 간에 유사도를 산출할 수 있다.

이미지 간의 유사도를 판단하는 기술은, Clark F. Olson이 저술하고, "IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MATCHING INTELLIGENCE" 24권 6호(2002년 6월)에 게재된 논문인 Maximum-Likelihood Image Matching", 및 Lei Wang 외 2인이 저술하고, 제 18회 패턴 인식에 관한 국제회의(International Conference on Pattern Recognition) 3권에 기재된 논문인 "Video Local Pattern Based Image Matching for Visual Mapping" 등과 같은 공지의 기술 중 적어도 하나를 이용하여 수행될 수 있을 것이다(상기 논문들에 기재된 내용은 그 전체가 본 명세서에 병합되어 있는 것으로 고려되어야 한다). 다만, 상기에서 열거된 공지 기술에 의해 본 발명이 한정되어 해석되는 것은 아님을 밝혀둔다.

본 발명의 일 실시예에 따르면, 이미지 매칭부(230)는 산출된 유사도에 기초하여, 적어도 하나의 모델 그룹을 결정할 수 있다.

본 발명의 일 실시예에 따른 상품 정보 제공부(250)는 이미지 매칭부(230)에 의해 결정된 모델 그룹에 대응되는 상품의 식별 정보를 획득한 후, 해당 상품에 관 한 정보를 사용자 단말 장치(400)에 제공할 수 있다. 해당 상품에 관한 정보는, 상품의 명칭, 상품의 가격, 상품을 구매할 수 있는 사이트 또는 웹 문서 등과 같은 상품 판매처 정보 등을 포함할 수 있다. 또한, 상품 정보 제공부(250)는 사용자 단말 장치(400)가 해당 상품에 대한 구매 페이지에 자동으로 연결될 수 있도록 하는 기능을 수행할 수도 있다.

본 발명의 제2 실시예에 따르면, 이미지 매칭부(230)는 모델 데이터베이스(260a)에 저장된 모델 데이터를 이용하지 않고, 이미지 서버(300)에 저장된 이미지 데이터들을 이용하여 상품을 인식할 수 있다.

보다 구체적으로, 이미지 매칭부(230)는 이미지 획득부(210)에 의해 획득된 이미지를 이미지 서버(300)에 저장된 이미지 데이터들과 비교하여 유사도를 산출하고, 산출된 유사도에 기초하여 적어도 하나의 이미지 데이터를 결정할 수 있다.

본 발명의 일 실시예에 따른 상품 정보 제공부(250)는 이미지 매칭부(230)에 의해 결정된 이미지 데이터의 태그 정보를 획득한 후, 해당 상품에 관한 정보를 사용자 단말 장치(400)에 제공할 수 있다. 해당 상품에 관한 정보는, 상품의 명칭, 상품의 가격, 상품을 구매할 수 있는 사이트 또는 웹 문서 등과 같은 상품 판매처 정보 등을 포함할 수 있다. 또한, 상품 정보 제공부(250)는 사용자 단말 장치(400)가 해당 상품에 대한 구매 페이지에 자동으로 연결될 수 있도록 하는 기능을 수행할 수도 있다.

본 발명의 제2 실시예의 경우, 이미지 서버(300)에 저장된 이미지 데이터와 연계된 태그 정보를 이용하여 상품 식별 정보를 획득하게 되는데, 이미지 데이터와 연계되는 태그 정보는 이미지 데이터를 생성 또는 저장한 사용자, 컨텐츠 제공자 등에 의해 부여되는 정보로서, 상품의 식별 정보와는 무관한 정보가 포함되어 있을 가능성이 존재한다. 예를 들면, 사용자가 새로 구입한 휴대폰 사진이 포함된 포스트를 생성하면서, "생일 선물", "보물 제1호" 등과 같이 휴대폰의 제품명을 식별할 수 있는 정보와는 무관한 정보를 태그 정보로 입력하는 경우를 상정할 수 있다. 따라서, 이와 같은 경우를 방지하기 위하여, 본 발명의 일 실시예에 따른 상품 정보 제공부(250)는 획득된 태그 정보를 상품 정보 데이터베이스(260c)에 저장된 상품 명칭 정보와 비교하여, 일치하는 데이터가 있는 경우에만 획득된 태그 정보를 상품 식별 정보로 간주하는 등의 변형예를 상정할 수 있을 것이다.

이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.

도 1은 본 발명의 일 실시예에 따라 이미지 데이터와 관련된 상품을 인식하여 상품 정보를 제공하기 위한 전체 시스템의 구성을 개략적으로 나타내는 도면이다.

도 2는 본 발명의 일 실시예에 따른 상품 정보 제공 시스템(200)의 내부 구성을 상세하게 도시한 도면이다.

<주요 도면부호에 관한 간단한 설명>

100: 통신망

200: 상품 정보 제공 시스템

210: 이미지 획득부

220: 모델 데이터 관리부

230: 이미지 매칭부

240: 연관 키워드 제공부

250: 상품 정보 제공부

260: 데이터베이스 관리부

260a: 모델 데이터베이스

260b: 연관 키워드 데이터베이스

260c: 상품 정보 데이터베이스

270: 통신부

280: 제어부

300: 이미지 서버

400: 사용자 단말 장치

500: 쇼핑 서버

Claims

입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 방법으로서,

이미지 검색 인터페이스에 다수의 상품 식별 정보가 입력되면 상기 상품 식별 정보별로 출력되는 이미지 데이터들을 상기 입력된 상품 식별 정보와 연계하여 적어도 하나의 모델 그룹을 생성하고, 생성된 모델 그룹에 관한 정보를 모델 데이터베이스에 저장하는 단계,

사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 단계,

상기 검색 이미지를 이용하여 적어도 하나의 모델 그룹을 결정하는 단계, 및

상기 결정된 모델 그룹과 연계된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 단계

를 포함하는 방법.
제1항에 있어서,

상기 이미지 검색 인터페이스는 상기 입력된 상품 식별 정보와 대응되어 저장된 이미지 데이터들을 출력하는 것을 특징으로 하는 방법.
제2항에 있어서,

상기 이미지 데이터는 상기 이미지 데이터의 속성을 나타내는 태그 정보와 연계되어 소정의 이미지 서버에 저장되어 있고,

상기 이미지 검색 인터페이스는 상기 입력된 상품 식별 정보를 태그 정보로서 포함하는 이미지 데이터를 출력하는 것을 특징으로 하는 방법.
제3항에 있어서,

상기 태그 정보는 상기 이미지 데이터의 생성자 또는 상기 이미지 서버의 관리자에 의해 부여되거나,

소정의 태깅 프로그램에 의해 자동으로 부여되는 것을 특징으로 하는 방법.
제4항에 있어서,

상기 태깅 프로그램은 상기 이미지 데이터가 포함된 웹 문서에 포함된 텍스트 데이터를 이용하여 상기 이미지 데이터에 태깅하는 것을 특징으로 하는 방법.
제1항에 있어서,

상기 검색 이미지를 획득하는 단계는,

상기 단말 장치로부터 상기 검색 이미지를 수신함으로써 수행되거나,

상기 단말 장치로부터 검색 이미지 식별 정보를 수신하고, 상기 수신된 검색 이미지 식별 정보를 이용하여 상기 검색 이미지를 획득함으로써 수행되는 것을 특징으로 하는 방법.
제1항에 있어서,

상기 모델 그룹을 결정하는 단계는,

상기 검색 이미지를 상기 모델 데이터베이스에 저장된 적어도 하나의 모델 그룹에 포함된 이미지 데이터들과 비교하여 유사도를 산출하는 단계,

상기 유사도가 높은 상위 n 개에 해당되는 이미지 데이터들을 획득하는 단계, 및

상기 n 개의 이미지 데이터들에 대응되는 모델 그룹 중 적어도 하나를 선택하는 단계

를 포함하는 것을 특징으로 하는 방법.
제1항에 있어서,

상기 상품 정보는 상기 상품의 명칭, 가격, 및 상기 상품의 판매자에 관한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 방법.
제8항에 있어서,

상기 상품 정보를 제공하는 단계는,

상기 사용자 단말 장치가 상기 상품을 구매할 수 있는 사이트 또는 웹 문서에 접속되도록 제어하는 단계를 포함하는 것을 특징으로 하는 방법.
제1항에 있어서,

상기 모델 데이터베이스에 저장하는 단계는,

서로 연관된 상품 식별 정보들에 대응되는 모델 그룹들을 하나의 모델 그룹으로 통합하는 단계를 포함하는 것을 특징으로 하는 방법.
입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 방법으로서,

사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 단계,

상기 검색 이미지를 이미지 데이터베이스에 저장된 이미지 데이터들과 비교하여 유사도를 산출하는 단계,

상기 산출된 유사도에 기초하여 적어도 하나의 이미지 데이터를 결정하는 단계,

상기 결정된 이미지 데이터와 연계된 적어도 하나의 태그 정보를 획득하고, 상기 획득된 태그 정보를 이용하여 상품 식별 정보를 획득하는 단계, 및

상기 획득된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 단계

를 포함하는 방법.
제11항에 있어서,

상기 상품 식별 정보를 획득하는 단계는,

상기 획득된 적어도 하나의 태그 정보를 소정의 상품 식별자 목록과 비교하 고, 상기 상품 식별자 목록에 부합하는 태그 정보의 전부 또는 일부를 상품 식별 정보로서 획득하는 것을 특징으로 하는 방법.
입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 시스템으로서,

이미지 검색 인터페이스에 다수의 상품 식별 정보가 입력되면 상기 상품 식별 정보별로 출력되는 이미지 데이터들을 상기 입력된 상품 식별 정보와 연계하여 적어도 하나의 모델 그룹을 생성하는 모델 데이터 관리부,

상기 모델 데이터 관리부에 의해 생성된 모델 그룹에 관한 정보가 저장된 모델 데이터베이스,

사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 이미지 획득부,

상기 검색 이미지를 이용하여 적어도 하나의 모델 그룹을 결정하는 이미지 매칭부, 및

상기 결정된 모델 그룹과 연계된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 상품 정보 제공부

를 포함하는 시스템.
제13항에 있어서,

상기 이미지 검색 인터페이스는 상기 입력된 상품 식별 정보와 대응되어 저장된 이미지 데이터들을 출력하는 것을 특징으로 하는 시스템.
제14항에 있어서,

상기 이미지 데이터는 상기 이미지 데이터의 속성을 나타내는 태그 정보와 연계되어 소정의 이미지 서버에 저장되어 있고,

상기 이미지 검색 인터페이스는 상기 입력된 상품 식별 정보를 태그 정보로서 포함하는 이미지 데이터를 출력하는 것을 특징으로 하는 시스템.
제15항에 있어서,

상기 태그 정보는 상기 이미지 데이터의 생성자 또는 상기 이미지 서버의 관리자에 의해 부여되거나,

소정의 태깅 프로그램에 의해 자동으로 부여되는 것을 특징으로 하는 시스템.
제16항에 있어서,

상기 태깅 프로그램은 상기 이미지 데이터가 포함된 웹 문서에 포함된 텍스트 데이터를 이용하여 상기 이미지 데이터에 태깅하는 것을 특징으로 하는 시스템.
제13항에 있어서,

상기 이미지 획득부는,

상기 단말 장치로부터 상기 검색 이미지를 수신하거나,

상기 단말 장치로부터 검색 이미지 식별 정보를 수신하고, 상기 수신된 검색 이미지 식별 정보를 이용하여 상기 검색 이미지를 획득하는 것을 특징으로 하는 시스템.
제13항에 있어서,

상기 이미지 매칭부는,

상기 검색 이미지를 상기 모델 데이터베이스에 저장된 적어도 하나의 모델 그룹에 포함된 이미지 데이터들과 비교하여 유사도를 산출하고, 상기 유사도가 높은 상위 n 개에 해당되는 이미지 데이터들을 획득하고, 상기 n 개의 이미지 데이터들에 대응되는 모델 그룹 중 적어도 하나를 선택하는 것을 특징으로 하는 시스템.
제13항에 있어서,

상기 상품 정보는 상기 상품의 명칭, 가격, 및 상기 상품의 판매자에 관한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 시스템.
제20항에 있어서,

상기 상품 정보 제공부는,

상기 사용자 단말 장치가 상기 상품을 구매할 수 있는 사이트 또는 웹 문서에 접속되도록 제어하는 것을 특징으로 하는 시스템.
제13항에 있어서,

상기 시스템은 연관된 상품 식별 정보들에 관한 목록을 유지하고,

상기 모델 데이터 관리부는,

상기 목록을 참조하여 서로 연관된 상품 식별 정보들에 대응되는 모델 그룹들을 하나의 모델 그룹으로 통합하는 것을 특징으로 하는 시스템.
입력 이미지와 관련된 상품에 관한 정보를 제공하기 위한 시스템으로서,

사용자 단말 장치로부터의 입력 정보를 이용하여 검색 이미지를 획득하는 이미지 획득부,

상기 검색 이미지를 이미지 데이터베이스에 저장된 이미지 데이터들과 비교하여 유사도를 산출하고, 상기 산출된 유사도에 기초하여 적어도 하나의 이미지 데이터를 결정하는 이미지 매칭부, 및

상기 결정된 이미지 데이터와 연계된 적어도 하나의 태그 정보를 획득하고, 상기 획득된 태그 정보를 이용하여 상품 식별 정보를 획득하고, 상기 획득된 상품 식별 정보를 이용하여 상기 사용자 단말 장치에 상품 정보를 제공하는 상품 정보 제공부

를 포함하는 시스템.
제23항에 있어서,

상기 시스템은 상품의 식별자들의 목록을 유지하고,

상기 상품 정보 제공부는,

상기 획득된 적어도 하나의 태그 정보를 상기 목록과 비교하고, 상기 목록에 부합하는 태그 정보의 전부 또는 일부를 상품 식별 정보로서 획득하는 것을 특징으로 하는 시스템.
제1항 내지 제12항 중 어느 한 항에 따른 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체.