TW201719518A - 商品圖片搜尋方法及商品圖片搜尋系統 - Google Patents

商品圖片搜尋方法及商品圖片搜尋系統 Download PDF

Info

Publication number
TW201719518A
TW201719518A TW104138067A TW104138067A TW201719518A TW 201719518 A TW201719518 A TW 201719518A TW 104138067 A TW104138067 A TW 104138067A TW 104138067 A TW104138067 A TW 104138067A TW 201719518 A TW201719518 A TW 201719518A
Authority
TW
Taiwan
Prior art keywords
option
search
product
comparison
data
Prior art date
Application number
TW104138067A
Other languages
English (en)
Other versions
TWI651673B (zh
Inventor
王經維
林容暄
王榮陞
周世俊
Original Assignee
財團法人資訊工業策進會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 財團法人資訊工業策進會 filed Critical 財團法人資訊工業策進會
Priority to TW104138067A priority Critical patent/TWI651673B/zh
Priority to CN201610083022.8A priority patent/CN106708916A/zh
Priority to US15/135,718 priority patent/US20170139923A1/en
Publication of TW201719518A publication Critical patent/TW201719518A/zh
Application granted granted Critical
Publication of TWI651673B publication Critical patent/TWI651673B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • G06F16/24578Query processing with adaptation to user needs using ranking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • G06Q30/0625Directed, with specific intent or strategy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Library & Information Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computing Systems (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)

Abstract

一種商品圖片搜尋方法包含提供輸入圖片,由用戶端將輸入圖片傳送至伺服器端並於用戶端選擇一搜尋選項,依據搜尋選項,解析輸入圖片以取得對應搜尋選項的一搜尋資料,再依據輸入圖片及所對應的搜尋資料與伺服器端中的資料庫內之多數個商品圖片及所對應之多數個屬性資料進行比對程序,從這些商品圖片中回傳至少一顯示商品圖片至該用戶端予以顯示。

Description

商品圖片搜尋方法及商品圖片搜尋系統
本揭示文件關於一種搜尋方法及搜尋系統,特別是關於商品圖片的搜尋方法及搜尋系統。
目前的行動商務中,通常使用圖片辨識技術讓使用者可以搜尋到想要的目標商品。現有的圖片辨識技術通常是提供使用者圈選想搜尋的區域以避免搜尋結果有誤差。一般而言,搜尋僅針對單因子比對相似度,例如,圖片、場景或是分類資料等其中之一,多只能尋找出和原圖片、分類資料相似的圖片。但是使用者經常有不同需求,有時想要尋找外型相像的產品,有時想尋找同一品牌的產品,有時則是想尋找同類產品,目前單純的圖片辨識方法,往往只能找到相似圖片,卻不一定能夠讓使用者找到想要的商品。
根據本揭示文件的一實施方式提出一種商品圖片搜尋方法包含提供輸入圖片,由用戶端將輸入圖片傳送至 伺服器端並於用戶端選擇一搜尋選項,依據搜尋選項,解析輸入圖片以取得對應搜尋選項的一搜尋資料,再依據輸入圖片及所對應的搜尋資料與伺服器端中的資料庫內之多數個商品圖片及所對應之多數個屬性資料進行比對程序,從這些商品圖片中回傳至少一顯示商品圖片至該用戶端予以顯示。
本揭示文件的另一實施態樣提出一種商品圖片搜尋系統包含電子裝置及伺服器,其中電子裝置與伺服器無線通訊伺服器。電子裝置包含圖片提供單元、控制單元及輸入介面。圖片提供單元用以提供輸入圖片,輸入介面用以提供搜尋選項以供使用者選擇,控制單元用以將輸入圖片及搜尋選項傳送至伺服器。伺服器包含運算比對單元以及資料庫,其中資料庫包含多個商品圖片,其中每一商品圖片對應有多個屬性資料。運算比對單元依據所接收到的搜尋選項,解析輸入圖片以取得對應搜尋選項的搜尋資料,再依據輸入圖片及其對應的搜尋資料與資料庫內之多個商品圖片及其所對應的多個屬性資料進行比對程序,從多個商品圖片中選擇至少一顯示商品圖片並回傳至該電子裝置予以顯示。
100‧‧‧商品圖片搜尋系統
110‧‧‧電子裝置
112‧‧‧圖片提供單元
114‧‧‧控制單元
116‧‧‧輸入介面
126‧‧‧物件識別選項
136‧‧‧類型選項
146‧‧‧關鍵字選項
120‧‧‧伺服器
122‧‧‧運算比對單元
124‧‧‧資料庫
300‧‧‧場景
500‧‧‧商品圖片搜尋方法
510~560‧‧‧步驟
PIMG‧‧‧輸入圖片
IMG1~IMG6‧‧‧商品圖片
310、611、621、631、641、651、661‧‧‧場景特徵
320、612、622、632、642、652、662‧‧‧物件
330、613、623、633、653‧‧‧文字
643、663‧‧‧品牌圖案
為讓本案能更明顯易懂,所附圖式之說明如下:第1圖繪示本揭示文件之一實施例的商品圖片搜尋系統的方塊圖。
第2圖繪示本揭示文件之一實施例的場景的示意圖。
第3圖繪示本揭示文件之一實施例的輸入影像的示意 圖。
第4圖繪示本揭示文件之一實施例的輸入介面的方塊圖。
第5圖繪示本揭示文件之一實施例的商品圖片搜尋方法的方法流程圖。
第6A~6F圖繪示本揭示文件之一實施例的商品圖片的示意圖。
第1圖繪示本揭示文件之一實施例的商品圖片搜尋系統100的方塊圖,商品圖片搜尋系統100包含電子裝置110以及伺服器120。電子裝置可以是智慧型手機、平板電腦、筆記型電腦或是其他可攜式的智慧型裝置,可經由無線通訊網路和與伺服器120進行無線通訊。於本揭示文件中,電子裝置110就是相對於伺服器120的用戶端,其中電子裝置110包含圖片提供單元112、控制單元114以及輸入介面116。圖片提供單元112可用以來提供輸入圖片,輸入介面116用來提供複數個搜尋選項讓使用者選擇,控制單元114則可將將輸入圖片以及搜尋選項傳送到伺服器120。伺服器120包含運算比對單元122與資料庫124,資料庫124可儲存複數個商品圖片,每一個商品圖片對應有複數個屬資料,運算比對單元122依據所接收到的搜尋選項,解析輸入圖片以取得對應搜尋選項的搜尋資料,再依據輸入圖片和搜尋資料,與資料庫124中的商品圖片、屬性資料來進行比 對,選擇一個或多個商品圖片回傳當電子裝置110來顯示。
請一併參照第2圖以及第3圖,第2圖繪示本揭示文件之一實施例的場景300的示意圖,第3圖繪示本揭示文件之一實施例的輸入影像PIMG的示意圖。於一實施例中,使用者位於場景300中,持電子裝置110進行拍攝,其中電子裝置110中的圖片提供單元112用以提供所拍攝的輸入圖片,如第3圖所示之輸入影像PIMG,輸入影像PIMG涵蓋了場景特徵310、物件320以及物件上的文字330。在此所述之場景可以是室內場所,例如辦公室,會議廳或展覽會場,也可以是戶外的開放場地,例如運動場或公園等。
更進一步的實施例可以再一併參照第4圖,其繪示本揭示文件之一實施例的輸入介面116的方塊圖,輸入介面116用以提供搜尋選項,其中可包含物件識別選項126、類型選項136以及關鍵字選項146,但不以此為限。每一搜尋選項可以具有其對應的權重,而且可讓使用者進行修改,搜尋選項所對應之權重可以是任何數字,例如物件識別選項126的權重為0.25、類型選項136為0.75或關鍵字選項146的權重為1,以上的權重值僅是作為舉例說明使用,並不限定於此。而在其他實施例中,輸入介面116可以包含更多其他形式的搜尋選項,例如樣式選項、品牌選項、產品名稱選項、圖片語意選項、價格選項或產地選項等,雖然在圖中未示,但應該了解本揭示文件所涵蓋之範圍並不受限於上述揭露的實施例。
控制單元114用以將圖片提供單元112所提供 的輸入圖片PIMG以及在輸入介面116中選定的搜尋選項傳送至伺服器120。伺服器內建的資料庫124儲存了多個商品圖片,在此所述的商品圖片可以包含各種不同領域的商品圖片,例如電子產品、日常生活用品、鞋子服飾、食品、書籍等,其中資料庫124所儲存的每個商品圖片具有多個屬性資料。運算比對單元122依據選定的搜尋選項,解析輸入圖片PIMG來取得對應所選定的搜尋選項的搜尋資料,並且將輸入圖片PIMG以及搜尋資料與資料庫124內的多個商品圖片以及所對應之多個屬性資料進行比對程序,屬性資料可以是商品圖片中的關鍵字、品牌、產品類型、風格、其他配件或年份等。在一些特定的實施例中,選定的搜尋選項可以是一個,也可以是多個。當搜尋選項為多個時,更進一步可以利用上述所提的權重來進行比對程序,其具體方式會於下列段落中有詳細的描述。
請一併參照第5圖,其繪示本揭示文件之一實施例的商品圖片搜尋方法500的方法流程圖。首先在步驟510中,使用者藉由電子裝置110內的圖片提供單元112提供輸入圖片並且將輸入圖片傳送至控制單元114,其中圖片提供單元112提供輸入圖片的方式可以是直接擷取儲存於電子裝置110中圖片、由網際網路下載的圖片或是利用相機鏡頭即時所拍攝的圖片。於本揭示文件的一實施例中,使用者持電子裝置110針對場景300進行拍攝並由圖片提供單元112提供所拍攝到的輸入圖片PIMG,如第3圖所繪示,並藉由控制單元114將輸入圖片PIMG傳送至伺服器120內的運算 比對單元122。
另一方面,在接下來的步驟520中,於電子裝置110內的輸入介面116選擇一個搜尋選項並且將所選擇的搜尋選項傳送至伺服器120內的運算比對單元122。於此實施例中,輸入介面116上呈現物件識別選項126、類型選項136以及關鍵字選項146相對應的選擇按鈕或選擇視窗。當使用者在輸入介面116點擊選擇物件識別選項126時,物件識別選項126便會傳送至伺服器120內的運算比對單元122,同樣的當點擊類型選項136或關鍵字選項146時,便傳送類型選項136或關鍵字選項146至伺服器120內的運算比對單元122以進行接下來的比對程序。
於另一實施例中,搜尋選項也可以是由系統自動選擇,也就是說可以根據伺服器120的設定直接替使用者於輸入介面116選擇一搜尋選項,在這種情形下,使用者不需要自行決定搜尋選項。又另一實施例中,搜尋選項由學習模式來決定,也就是說依據使用者過去的搜尋紀錄來判斷使用者的搜尋偏好,進一步替使用者於輸入介面116選擇一搜尋選項。
在運算比對單元122所進行的比對程序之中,可以將所選擇的搜尋選項作為唯一選項(不考慮其他搜尋選項),也可以將所選擇的搜尋選項相對於未選擇的搜尋選項將會具有較高的權重。例如,將物件識別選項126作為搜尋選項,其權重為1,其餘未選中的類型選項136以及關鍵字選項146的權重皆為0.5。同樣的道理也適用在選擇類型選 項136作為搜尋選項或選擇關鍵字選項146作為搜尋選項的時候,但以上的權重數值僅適用於舉例,並不限制於此。
在輸入介面116中選定其中一搜尋選項之後,此時伺服器120內的運算比對單元122接收到輸入圖片PIMG以及所選擇的搜尋選項,進入到步驟530開始進行比對程序。比對程序包含了圖片本身的相似度比對程序以及資料比對程序。相似度比對程序是依據輸入圖片PIMG的整體外觀來比對資料庫124內儲存的多數個圖片所對應的多數個整體外觀,進而算出相似度程度數值,其中這裡所述之整體外觀包含圖案形狀、顏色、大小或材質。另一方面,資料比對程序是藉由解析輸入圖片PIMG取得有關於輸入圖片PIMG所涵蓋的屬性資料作為搜尋資料,並將該搜尋資料比對資料庫124內儲存的多數個圖片所對應的多數個屬性資料進而算出資料比對數值。在此所述的屬性資料可以是圖片中所包含的關鍵字、品牌或類型等。
於本實施例中,物件識別選項126對應到上述的相似度比對程序,也就是將輸入圖片PIMG的整體外觀所包含的場景特徵310、物件320以及文字330的形狀、顏色、大小或材質比對資料庫124內所儲存的商品圖片的整體外觀包含圖案形狀、顏色、大小或材質,進而得到相似程度數值。
請一併參照第6A~6F圖,其繪示本揭示文件之一實施例的商品圖片IMG1~IMG6的示意圖,如上述所說,運算比對單元122將輸入圖片PIMG的整體外觀所包含的場 景特徵310、物件320以及文字330的形狀、顏色、大小或材質逐一地與商品圖片IMG1~IMG6的整體外觀包含圖案形狀、顏色、大小或材質進行相似度比對,此種方式會將與輸入圖片PIMG的整體外觀最為相似的商品圖片給予最高之相似度數值,隨著相似度遞減,相似度數值也會跟著減小。
於此實施例中,以圖片本身進行比對,輸入圖片PIMG的整體外觀為場景中一筆記型電腦擺放於桌面上,比對商品圖片IMG1~IMG6整體外觀。其中包含場景611~661、物件612~662以及文字或品牌圖案613~663。其中以商品圖片IMG1的整體外觀最為相似,因此獲得最高的相似度數值。隨著相似度遞減,相似度數值跟著減小。商品圖片IMG6的整體外觀差異最大,因此獲得最低的相似度數值。依據此理,最後可以獲得商品圖片IMG1~IMG6的相似度數值為[300、220、150、90、50、10]。然而,應該了解以上所述的相似度數值僅是為了舉例說明,本揭示文件所包含的範圍並不限於此。
另一方面,於本實施例中,類型選項136以及關鍵字選項146對應到上述的資料比對程序。類型選項136指的是假設因為輸入影像PIMG中的前景物件較為模糊、沒有特別突出的前景物件、缺乏明顯可辨識的商標或明確的形狀特徵、或者物件識別無法從輸入影像PIMG中擷取出特定的前景物件時,此時採用輸入圖片PIMG的場景特徵作為搜尋資料,此處所謂的場景特徵是依據整張影像的顏色、顏色分布、紋理和邊緣特徵進行辨識。依照場景特徵比對資料庫 124內的多數個商品圖片所涵蓋的多數個場景特徵,也就是比對商品圖片的屬性資料,進而得到資料比對數值。在該實施例中,輸入圖片PIMG涵蓋了場景特徵310、物件320以及文字330,因為前景物件,也就是物件320以及文字330,無法從輸入圖片PIMG中明顯的辨識出來,因此如同上述所說採用場景特徵310比對資料庫124內的多數個商品圖片所涵蓋的多數個場景特徵進而得到資料比對數值。
於該實施例中,運算比對單元122將輸入圖片PIMG整體的場景特徵310作為搜尋資料,其中場景特徵310整體來說為一辦公室場景,逐一地與第6A~6F圖中的商品圖片IMG1~IMG6的場景特徵做比對,其中商品圖片IMG1~IMG3整體來說所包含的場景特徵611、621及631皆為類似的辦公室場景,但又以商品圖片IMG2的場景特徵621與商品圖片IMG1的場景特徵310最為類似,因此商品圖片IMG2獲得最高的資料比對數值,商品圖片IMG1的場景特徵611及商品圖片IMG3的場景特徵631與輸入圖片PIMG的場景特徵310比較,商品圖片IMG1的場景特徵611類似的程度高於商品圖片IMG3的場景,其餘的商品圖片IMG4~IMG6的場景特徵641、651及661皆非類似於辦公室場景,因此所獲得的資料比對數值相對較低。因此最後商品圖片IMG1~IMG6可以得到的資料比對數值為[180、250、150、70、30、5],但是應該了解以上所述的資料比對數值僅是為了舉例說明,本揭示文件所包含的範圍並不限於此。
另一方面,關鍵字選項146是藉由字元辨識的方式於輸入圖片PIMG中辨識出所包含的文字作為搜尋資料,並將該搜尋資料比對資料庫124內的多數個商品圖片所包含的文字,也就是商品圖片的屬性資料,進而得到資料比對數值。例如第3圖所示,關鍵字選項146辨識出輸入圖片PIMG所包含的文字330。在一些實施例中,字元辨識的方法為光學字元辨識(OCR,Optical Character Recognition)或是元數據(Metadata),但是不以此為限。
於該實施例中,運算比對單元122利用字元辨識的方法辨識出輸入圖片PIMG所包含的文字330,並將文字330與第6A~6F圖的商品圖片IMG1~IMG6所包含的文字進行比對。於輸入圖片PIMG所辨識出的文字330為XXX,而商品圖片IMG1~IMG3以及IMG5包含其所對應之文字613、623、633及653,其中於商品圖片IMG3所辨識出的文字633為XXX,與輸入圖片PIMG所辨識出的文字330相同,因此可以獲得最高的資料比對數值,另一方面,於商品圖片IMG4以及IMG6僅包含品牌圖案643以及663,無法辨識出任何的文字,因此所獲得的資料比對數值相對較低。依據上述的辨識方法,最後可以獲得商品圖片IMG1~IMG6的資料比對數值為[150、280、350、15、120、8]。但是應該了解以上所述的資料比對數值僅是為了舉例說明,本揭示文件所包含的範圍並不限於此。
要特別注意的是,當選定一個搜尋選項時,運算比對單元122的比對程序有時不僅只考慮所選定的搜尋 選項,也必須考量到未被選中之搜尋選項,進一步計算出相似程度數值以及資料比對數值,此時在比對程序中要進一步考慮所選定的搜尋選項所對應的權重用以提供最後的商品圖片排序。當選定一搜尋選項時,該搜尋選項會具有最高的權重,也就是說,使用者將該搜尋選項視為進行商品圖片搜尋時最重要的因素,而未選中的搜尋選項相對於選定的搜尋選項具有較低的權重,也就是說,使用者將這些未選中的搜尋選項視為進行商品圖片搜尋時相對較不重要的次要因素。例如,在此實施例中使用者針對輸入圖片進行商品圖片搜尋時,認為關鍵字選項較為重要,便選定該關鍵字選項作為搜尋選項,此時關鍵字選項所對應的資料比對權重為1。而未選擇的搜尋選項,也就是物件識別選項以及類型選項相對為較為次要的因素,因此物件選項以及類型選項所對應之相似度比對權重以及資料比對權重皆小於1,例如0.5或0.25。依據相同的道理,在該實施例中,選擇物件識別選項或是類型選項做為搜尋選項時,物件識別選項或是類型選項也會相對於其他兩個未選擇的搜尋選項具有較高的相似度比對權重或是資料比對權重,其具體的說明如同上述,因此在這裡不另贅述。
當搜尋選項選定時,於步驟530中,運算比對單元122依據選定的搜尋選項進一步將所得到的相似程度數值乘上相似度比對權重,並且加上資料比對數值乘上資料比對權重作為一相似度數值,來決定商品圖片的排序。
例如,於本揭示文件的一實施例,當選定物件 識別選項126作為搜尋選項時,其物件識別選項126的相似度比對權重為1,而未選擇的搜尋選項,也就是類型選項136與關鍵字選項146所對應的資料比對權重皆為0.25。依據物件識別選項126所對應之相似度比對程序,計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6的相似程度數值,例如[300、220、150、90、50、10],乘上相似度比對權重1,再加上依據類型選項136與關鍵字選項146所對應之各別的資料比對程序計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6之各別的資料比對數值,例如[180、250、150、70、30、5]以及[150、280、350、15、120、8]乘上所對應的資料比對權重0.25與0.25,進而算出相似度數值。
綜合以上,商品圖片IMG1相似度數值為300*1+180*0.25+150*0.25=382.5、商品圖片IMG2的相似度數值為220*1+250*0.25+280*0.25=352.5、商品圖片IMG3的相似度數值為150*1+150*0.25+350*0.25=275、商品圖片IMG4的相似度數值為90*1+70*0.25+15*0.25=111.25、商品圖片IMG5的相似度數值為50*1+30*0.25+120*0.25=87.5、以及商品圖片IMG6的相似度數值為10*1+5*0.25+8*0.25=13.25。
於另一實施例中,當選定類型選項136作為搜尋選項時,其類型選項136的資料比對權重為1,而未選擇的搜尋選項,也就是物件識別選項126與關鍵字選項146所 對應的相似度比對權重與資料比對權重皆為0.25。依據類型選項136所對應之資料比對程序,計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6的資料比對數值,例如:[180、250、150、70、30、5],乘上資料比對權重1,再加上依據物件識別選項126與關鍵字選項146所對應之相似度比對程序以及資料比對程序計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6之相似程度數值以及資料比對數值,例如相似程度數值為[300、220、150、90、50、10]以及資料比對數值為[150、280、350、15、120、8]乘上所對應的相似度比對權重0.25與資料比對權重0.25,進而算出相似度數值。
如同上述實施例的計算方式,商品圖片IMG1相似度數值為292.5、商品圖片IMG2的相似度數值為375、商品圖片IMG3的相似度數值為275、商品圖片IMG4的相似度數值為96.25、商品圖片IMG5的相似度數值為72.5、以及商品圖片IMG6的相似度數值為9.5。
於另一實施例中,當選定關鍵字選項146作為搜尋選項時,其關鍵字選項146的資料比對權重為1,而未選擇的搜尋選項,也就是物件識別選項126與類型選項136所對應的相似度比對權重與資料比對權重皆為0.25。依據關鍵字選項146所對應之資料比對程序,計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6的資料比對數值,例如:[150、280、350、15、120、8],乘上資料比對權重1,再加上依據物件識別選項126與類型選項136所對應之相 似度比對程序以及資料比對程序計算出輸入圖片PIMG與每一商品圖片IMG1~IMG6之相似程度數值以及資料比對數值,例如相似程度數值為[300、220、150、90、50、10]以及資料比對數值為[180、250、150、70、30、5]乘上所對應的相似度比對權重0.25與資料比對權重0.25,進而算出相似度數值。
如同上述實施例的計算方式,商品圖片IMG1相似度數值為270、商品圖片IMG2的相似度數值為397.5、商品圖片IMG3的相似度數值為425、商品圖片IMG4的相似度數值為55、商品圖片IMG5的相似度數值為140、以及商品圖片IMG6的相似度數值為11.5。
上述所說的權重1與0.25僅是為了於本揭示文件中舉例說明使用,權重可以是以其他數字來呈現,並不限定於上述該些實施例中。
當在步驟530中計算出相似度數值後,便於步驟540中依據相似度數值由大至小進行排序並且將排序較為前面的商品圖片傳送回用戶端。於上述實施例中,當選擇物件識別選項126為搜尋選項時,可以獲得的商品圖片排序為IMG1、IMG2、IMG3、IMG4、IMG5、IMG6。當選擇類型選項136為搜尋選項時,可以獲得的商品圖片排序為IMG2、IMG1、IMG3、IMG4、IMG5、IMG6。當選擇關鍵字選項146為搜尋選項時,可以獲得的商品圖片排序為IMG3、IMG2、IMG1、IMG5、IMG4、IMG6。最後將排序較為前面的商品圖片傳送回用戶端,於上述實施例中, 取排序中前三個商品圖片,也就是將商品圖片IMG1、IMG2、IMG3或IMG2、IMG1、IMG3或IMG3、IMG2、IMG1傳送回電子裝置110。在此所述將排序較為前面的商品圖片傳送回用戶端,也可以是取排序中的前兩個商品圖片或是取排序中第一個商品圖片傳送回電子裝置110,並不限定於上述實施例中。
在步驟550中,使用者會判斷所接收到的商品圖片排序是否符合預期,若商品圖片排序符合預期,表示使用者已找到合適的商品,在步驟560中結束搜尋的程序。但若商品圖片排序不符合預期,表示於前面步驟520中所選擇的搜尋選項並不適當,此時使用者可以於輸入介面116中重新調整搜尋選項,直到商品圖片排序符合預期。
綜合以上的敘述以及各種實施例的具體說明,本揭示文件所提出的商品圖片搜尋方法及商品圖片搜尋系統提供使用者針對輸入圖片於多個搜尋選項中選擇一個搜尋選項,並且將輸入圖片及所對應的搜尋資料與伺服器的資料庫內所包含的多個商品圖片及所對應的多個屬性資料來進行比對程序,最後使用者依據商品圖片的排序可以獲得至少一個商品圖片。
以上所述,僅為本發明最佳之具體實施例,惟本發明之特徵並不侷限於此,任何熟悉該項技藝者在本發明之領域內,可輕易思及之變化或修飾,皆可涵蓋在以下本案之專利範圍。
500‧‧‧商品圖片搜尋方法
510~560‧‧‧步驟

Claims (10)

  1. 一種商品圖片搜尋方法,包含:提供一輸入圖片,由一用戶端將該輸入圖片傳送至一伺服器端並於該用戶端選擇複數個搜尋選項中一者;以及依據該搜尋選項,解析該輸入圖片以取得對應該搜尋選項的一搜尋資料,再依據該輸入圖片及所對應的該搜尋資料與該伺服器端中之一資料庫內之複數個商品圖片及所對應之複數個屬性資料進行一比對程序,從該些商品圖片中回傳至少一顯示商品圖片至該用戶端予以顯示。
  2. 如請求項1之商品圖片搜尋方法,其中每一搜尋選項分別對應一權重且用以供該用戶端修改該權重。
  3. 如請求項1之商品圖片搜尋方法,其中該些搜尋選項係為一樣式選項、一品牌選項、一產品名稱選項、一類型選項、一圖片語意選項、一物件識別選項、一關鍵字選項、一價格選項和一產地選項等其中任二項以上之選項。
  4. 如請求項1之商品圖片搜尋方法,其中該比對程序包含一相似度比對程序和一資料比對程序,其中 該相似度比對程序係分別將該輸入圖片與該些商品圖片進行比對以得到複數個相似程度數值,而該資料比對程序係分別將該搜尋資料與該些商品圖片的屬性資料進行比對以得到複數個資料比對數值。
  5. 如請求項4之商品圖片搜尋方法,其中每一搜尋選項被選定時對應有一相似度比對權重以及一資料比對權重,該運算比對單元依據所選擇的該搜尋選項相對應的該相似度比對權重以及該資料比對權重,將該輸入圖片和每一商品圖片的相似程度數值乘上該相似度比對權重,加上該輸入圖片和每一商品圖片所對應的該些資料比對數值乘上該資料比對權重,做為一相似度數值,以決定一商品圖片排序,並依據該商品圖片排序將排序在前的商品圖片回傳至該電子裝置予以顯示。
  6. 一種商品圖片搜尋系統,包含:一伺服器,包含:一資料庫,包含複數個商品圖片,其中每一商品圖片對應有複數個屬性資料;以及一運算比對單元;以及一電子裝置,與該伺服器無線通訊,其中該電子裝置包含: 一圖片提供單元,用以提供一輸入圖片;一輸入介面,用以提供複數個搜尋選項以供一使用者選擇;以及一控制單元,用以將該輸入圖片以及該搜尋選項傳送至該伺服器;其中該伺服器之該運算比對單元依據所接收到的該搜尋選項,解析該輸入圖片以取得對應該搜尋選項的一搜尋資料,再依據該輸入圖片及其對應的搜尋資料與該資料庫內之該些商品圖片及其所對應的該些屬性資料進行一比對程序,以從該些商品圖片中選擇至少一顯示商品圖片並回傳至該電子裝置予以顯示。
  7. 如請求項6之商品圖片搜尋系統,其中該輸入介面更提供每一搜尋選項分別對應的一權重且用以供該使用者修改該權重。
  8. 如請求項6之商品圖片搜尋系統,其中該些搜尋選項係為一樣式選項、一品牌選項、一產品名稱選項、一類型選項、一圖片語意選項、一物件識別選項、一關鍵字選項、一價格選項和一產地選項等其中任二項以上之選項。
  9. 如請求項6之商品圖片搜尋系統,其中該比對程序包含一相似度比對程序和一資料比對程序,其中該相似度比對程序係分別將該輸入圖片與該些商品圖片進行比對以得到複數個相似程度數值,而該資料比對程序係分別將該搜尋資料與該些商品圖片所對應的該些屬性資料進行比對以得到複數個資料比對數值。
  10. 如請求項9之商品圖片搜尋系統,其中每一搜尋選項被選定時對應有一相似度比對權重以及一資料比對權重,該運算比對單元依據所選擇的該搜尋選項相對應的該相似度比對權重以及該資料比對權重,將該輸入圖片和每一商品圖片的該些相似程度數值乘上該相似度比對權重,加上該輸入圖片和每一商品圖片所對應的該些資料比對數值乘上該資料比對權重,做為一相似度數值,以決定一商品圖片排序,並依據該商品圖片排序將排序在前的商品圖片回傳至該電子裝置予以顯示。
TW104138067A 2015-11-18 2015-11-18 商品圖片搜尋方法及商品圖片搜尋系統 TWI651673B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW104138067A TWI651673B (zh) 2015-11-18 2015-11-18 商品圖片搜尋方法及商品圖片搜尋系統
CN201610083022.8A CN106708916A (zh) 2015-11-18 2016-02-06 商品图片搜寻方法及商品图片搜寻系统
US15/135,718 US20170139923A1 (en) 2015-11-18 2016-04-22 Searching method for product image and searching system for product image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW104138067A TWI651673B (zh) 2015-11-18 2015-11-18 商品圖片搜尋方法及商品圖片搜尋系統

Publications (2)

Publication Number Publication Date
TW201719518A true TW201719518A (zh) 2017-06-01
TWI651673B TWI651673B (zh) 2019-02-21

Family

ID=58691038

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104138067A TWI651673B (zh) 2015-11-18 2015-11-18 商品圖片搜尋方法及商品圖片搜尋系統

Country Status (3)

Country Link
US (1) US20170139923A1 (zh)
CN (1) CN106708916A (zh)
TW (1) TWI651673B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107729422A (zh) * 2017-09-27 2018-02-23 广州市万表科技股份有限公司 一种基于商品识别的性格测试方法和系统
CN107886412A (zh) * 2017-12-04 2018-04-06 厦门信分红网络科技有限公司 一种大数据下的网上商城中商品过滤展示方法
JP6590329B1 (ja) * 2019-06-26 2019-10-16 株式会社ラディウス・ファイブ 画像表示システム及びプログラム
CN112069348A (zh) * 2020-09-09 2020-12-11 北京沃东天骏信息技术有限公司 对象匹配方法、装置和服务平台
CN112270163B (zh) * 2020-12-07 2021-09-10 北京沃东天骏信息技术有限公司 一种文本生成方法及装置、存储介质
US11593247B2 (en) * 2021-06-03 2023-02-28 Red Hat, Inc. System performance evaluation and enhancement in a software-defined system

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8788529B2 (en) * 2007-02-26 2014-07-22 Microsoft Corp. Information sharing between images
US20110202543A1 (en) * 2010-02-16 2011-08-18 Imprezzeo Pty Limited Optimising content based image retrieval
US8949252B2 (en) * 2010-03-29 2015-02-03 Ebay Inc. Product category optimization for image similarity searching of image-based listings in a network-based publication system
TW201329888A (zh) * 2012-01-13 2013-07-16 Clipick Co Ltd 服飾搭配系統及其方法
TW201342093A (zh) * 2012-04-12 2013-10-16 Jun-Ming Wu 圖像搜尋方法及系統

Also Published As

Publication number Publication date
US20170139923A1 (en) 2017-05-18
TWI651673B (zh) 2019-02-21
CN106708916A (zh) 2017-05-24

Similar Documents

Publication Publication Date Title
TWI651673B (zh) 商品圖片搜尋方法及商品圖片搜尋系統
US10186054B2 (en) Automatic image-based recommendations using a color palette
US10049466B2 (en) Color name generation from images and color palettes
US10242396B2 (en) Automatic color palette based recommendations for affiliated colors
US10824942B1 (en) Visual similarity and attribute manipulation using deep neural networks
US10956784B2 (en) Neural network-based image manipulation
US10402917B2 (en) Color-related social networking recommendations using affiliated colors
US20210182333A1 (en) Correlating image annotations with foreground features
US9542704B2 (en) Automatic image-based recommendations using a color palette
US9679532B2 (en) Automatic image-based recommendations using a color palette
US9135719B1 (en) Color name generation from images and color palettes
US10963939B1 (en) Computer vision based style profiles
US11127074B2 (en) Recommendations based on object detected in an image
US9607010B1 (en) Techniques for shape-based search of content
US20180197220A1 (en) System and method of image-based product genre identification
US20150379006A1 (en) Automatic image-based recommendations using a color palette
US20150379001A1 (en) Automatic color validation of image metadata
US10380461B1 (en) Object recognition
CN106598998B (zh) 信息获取方法和信息获取装置
TWI781554B (zh) 物品名稱確定方法、裝置、電腦設備及儲存媒體
US11055759B1 (en) Color selection for image matching visual search
CN112020709A (zh) 可视菜单
US11403697B1 (en) Three-dimensional object identification using two-dimensional image data