TWI743777B - 具智能圖像辨識的商品搜尋輔助系統 - Google Patents

Abstract

本發明提供一種具智能圖像辨識的商品搜尋輔助系統，其提供消費者透過終端裝置使用，商品搜尋輔助系統包含一智能聊天伺服器以及一影像辨識伺服器。智能聊天伺服器具有一聊天畫面透過終端裝置顯示，消費者能在聊天畫面輸入一商品類別指令，且智能聊天伺服器能接收消費者所上傳之一影像資料，並將影像資料同時同步呈現在聊天畫面；影像辨識伺服器預存有複數種銷售商品圖像，並對銷售商品圖像演算學習以獲得一訓練模型資料，再依據商品類別指令擷取對應訓練模型資料與影像資料進行綜合判斷，而產生一商品搜尋結果，最後將商品搜尋結果直接顯示於原瀏覽的聊天畫面，藉以提供有效搜尋商品的效用。

Description

具智能圖像辨識的商品搜尋輔助系統

本發明為一種商品搜尋技術領域，尤指一種具智能圖像辨識的商品搜尋輔助系統。

按，目前消費者的購物模式，大致可區分是在實體商店以及在網路購物平台進行消費。其中，網路購物平台能提供消費者透過持有電腦或智慧型手機等電子產品網路連結，即能隨時隨地在遠端對網路購物平台中各式商品進行瀏覽及選購；然而，網路購物平台所呈現的商品種類複雜，消費者在搜尋指定商品時，難以透過關鍵字的搜尋方式得到最佳結果，進而降低消費者網路選購的效率。

為解決上述課題，本發明提供一種具智能圖像辨識的商品搜尋輔助系統，有助於消費者方便選購以提高購物效率。

為達到所述目的，本發明提供一種具智能圖像辨識的商品搜尋輔助系統，其提供消費者透過終端裝置使用，商品搜尋輔助系統包含一智能聊天伺服器以及一影像辨識伺服器。智能聊天伺服器網路連接終端裝置，智能聊天伺服器具有一互動顯示模組、一資訊輸入模組以及一圖像上傳模組，互動顯示模組具有一聊天畫面透過終端裝置顯示，資訊輸入模組提供消費者在聊天畫面輸入一商品類別指令，圖像上傳模組能接收消費者所上傳之一影像資料，並將影像資料同時同步呈現在聊天畫面；影像辨識伺服器耦接於智能聊天伺服器，影像辨識伺服器具有一商品資訊資料庫、一學習訓練模組以及一商品辨識模組，商品資訊資料庫預存有複數種銷售商品圖像，學習訓練模組能演算學習銷售商品圖像，並對銷售商品圖像設定一商品類別銷售資訊，以獲得及儲存一訓練模型資料，商品辨識模組依據商品類別指令進入學習訓練模組搜尋相符的商品類別銷售資訊，並擷取對應訓練模型資料與影像資料進行綜合判斷，而產生一商品搜尋結果，且直接顯示於原瀏覽的聊天畫面。

藉此，本發明提供在智能聊天伺服器之聊天畫面輸入商品類別指令以及影像資料，並透過影像辨識伺服器依據商品類別指令辨識影像資料，最後能在原瀏覽的聊天畫面中呈現相關的商品搜尋結果，進而縮短購物的搜尋途徑，有助於消費者方便選購以提高購物效率，而使消費者能以圖片搜尋的方式達到快速找到需要之商品的功效。

請參閱圖1至圖7所示，本發明提供一種具智能圖像辨識的商品搜尋輔助系統，其提供消費者透過終端裝置100使用，商品搜尋輔助系統包含一智能聊天伺服器10以及一影像辨識伺服器20。

智能聊天伺服器10，其係為聊天機器人並網路連接終端裝置100，在一較佳實施例中，智能聊天伺服器10能耦接購物網站的客服系統，提供終端裝置100連結使用；智能聊天伺服器10具有一互動顯示模組11、一資訊輸入模組12以及一圖像上傳模組13，互動顯示模組11具有一聊天畫面111透過終端裝置100顯示，資訊輸入模組12提供消費者在聊天畫面111輸入一商品類別指令30，其中，商品類別指令30可為文字訊息或語音訊息，請參見圖2及圖5所示，圖像上傳模組13能接收消費者所上傳之一影像資料40，並將影像資料40同時同步呈現在聊天畫面111，其中，影像資料40的來源可為網路圖片或拍攝影像。

在一較佳實施例中，智能聊天伺服器10具有一對話資料庫14以及一諮詢處理模組15，對話資料庫14儲存關於客服諮詢之複數筆問答資料，諮詢處理模組15能處理資訊輸入模組12透過網路輸入之商品類別指令30，並根據語音辨識或自然語言處理分析商品類別指令30之意圖決定而取得一諮詢訊息，諮詢處理模組15依據諮詢訊息自對話資料庫14分析相符的問答資料而產生一回覆結果，並顯示在原瀏覽的聊天畫面111。

如圖5所示，回覆結果包含有一服務按鈕選項，服務按鈕選項提供消費者透過終端裝置100選擇，並將所選的服務按鈕選項藉由資訊輸入模組12對應輸入一服務指令，簡單來說，當消費者選擇「以圖搜圖」服務選項時，資訊輸入模組12即能對應輸入「以圖搜圖」之服務指令。

影像辨識伺服器20，其耦接於智能聊天伺服器10，影像辨識伺服器20具有一商品資訊資料庫21、一學習訓練模組22以及一商品辨識模組23，商品資訊資料庫21預存有複數種銷售商品圖像211，銷售商品圖像211係為對應商家販售的生鮮蔬果、服飾、肉品海鮮、保養品等多種商品圖像，學習訓練模組22能演算學習銷售商品圖像211，並對銷售商品圖像211設定一商品類別銷售資訊212，以獲得及儲存一訓練模型資料；進一步說明，請參酌圖3及圖4所示，學習訓練模組22具有一商品標記單元221以及一學習演算單元222，商品標記單元221對銷售商品圖像211標記一學習封閉框2211，且商品標記單元221對應銷售商品圖像211設定商品類別銷售資訊212，其中，商品類別銷售資訊212包含商品種類、商品銷售金額以及商品位置，學習演算單元222依據學習封閉框2211學習銷售商品圖像211，並將商品類別銷售資訊212整合在學習封閉框2211之一側而產生訓練模型資料。

在一較佳實施例中，學習演算單元222以不同大小、花紋、色彩、角度及變型的銷售商品圖像211進行演算學習，並測試銷售商品圖像211的正確率，簡單來說，當銷售商品圖像211測試結果正確時，學習演算單元222能產生訓練模型資料，且學習訓練模組22更具有一分類儲存單元223，分類儲存單元223依據商品類別銷售資訊212各別儲存訓練模型資料；當銷售商品圖像211測試結果錯誤時，學習演算單元222則能自我修正學習，進而達到優化學習銷售商品圖像211特徵之目的。

影像辨識伺服器20之商品辨識模組23依據商品類別指令30進入學習訓練模組22搜尋相符的商品類別銷售資訊212，並擷取對應訓練模型資料與影像資料40進行綜合判斷，而產生一商品搜尋結果50，且直接顯示於原瀏覽的聊天畫面111；具體說明，請配合圖3及圖4所示，商品辨識模組23設有一目標偵測單元231以及一目標演算單元232，目標偵測單元231將影像資料40處理成複數網格模型a，其中，網格模型a係由複數經線及緯線交錯而成，在一較佳實施例中，影像資料40包含一背景特徵影像41以及一商品特徵影像42以及，目標偵測單元231依據網格模型a演算背景特徵影像41與商品特徵影像42的邊界，且於商品特徵影像42之周圍形成一偵測封閉框2311，目標演算單元232對偵測封閉框2311中的商品特徵影像42進行演算而產生一目標模型資料。

此外，商品辨識模組23更設有一類別判斷單元233以及一辨識處理單元234，類別判斷單元233接收及分析商品類別指令30，並進入分類儲存單元223比對相符的商品類別銷售資訊212，再藉由辨識處理單元234依據目標模型資料辨識出相符特徵的訓練模型資料，以獲得商品搜尋結果50。

進一步說明，辨識處理單元234設定有一辨識標準值，辨識處理單元234將目標模型資料之商品特徵影像42與訓練模型資料之銷售商品圖像211進行疊合比對，以獲得一辨識相似值，當辨識處理單元234判斷辨識相似值大於辨識標準值時，即產生商品搜尋結果50，並回傳至智能聊天伺服器10依序顯示於原瀏覽的聊天畫面111，藉以消費者能根據商品搜尋結果50即時獲得商品相關訊息，進而縮短購物的搜尋途徑以達到提高購物效率之目的。

請配合圖5至圖7所示，本發明於實際搜尋時，消費者在聊天畫面111先輸入商品類別指令30，如生鮮食品，接著再上傳所欲搜尋的影像資料40，本實施例以蘋果圖像說明，而影像辨識伺服器20能依據商品類別指令30即時辨識影像資料40，最後在聊天畫面111中呈現相關的商品搜尋結果50，進而縮短購物的搜尋途徑，有助於消費者方便選購以提高購物效率。

藉此，本發明功效在於，提供在智能聊天伺服器10之聊天畫面111輸入商品類別指令30以及影像資料40，並透過影像辨識伺服器20依據商品類別指令30辨識影像資料40，最後能在原瀏覽的聊天畫面111中呈現相關的商品搜尋結果50，進而縮短購物的搜尋途徑，有助於消費者方便選購以提高購物效率，而使消費者能以圖片搜尋的方式達到快速找到需要之商品的功效。

以上所舉實施例僅用以說明本發明而已，非用以限制本發明之範圍。舉凡不違本發明精神所從事的種種修改或變化，俱屬本發明意欲保護之範疇。

100:終端裝置 10:智能聊天伺服器 11:互動顯示模組 111:聊天畫面 12:資訊輸入模組 121:商品類別指令 222:學習演算單元 223:分類儲存單元 23:商品辨識模組 231:目標偵測單元 2311:偵測封閉框 232:目標演算單元 13:圖像上傳模組 14:對話資料庫 15:諮詢處理模組 20:影像辨識伺服器 21:商品資訊資料庫 211:銷售商品圖像 212:商品類別銷售資訊 22:學習訓練模組 221:商品標記單元 2211:學習封閉框 233:類別判斷單元 234:辨識處理單元 30:商品類別指令 40:影像資料 41:背景特徵影像 42:商品特徵影像 50:商品搜尋結果 a:網格模型

圖1係為本發明實施例之系統架構圖。 圖2係為本發明實施例智能聊天伺服器之功能方塊圖。 圖3係為本發明實施例影像辨識伺服器之功能方塊圖。 圖4係為本發明實施例學習訓練模組之學習狀態示意圖。 圖5係為本發明實施例智能聊天伺服器之操作示意圖。 圖6係為本發明實施例商品辨識模組之影像辨識示意圖。 圖7係為本發明實施例聊天畫面顯示商品搜尋結果之實施示意圖。

100:終端裝置

10:智能聊天伺服器

20:影像辨識伺服器

Claims (8)

1. 一種具智能圖像辨識的商品搜尋輔助系統，其提供消費者透過終端裝置使用，該商品搜尋輔助系統包含：一智能聊天伺服器，其網路連接終端裝置，智能聊天伺服器具有一互動顯示模組、一資訊輸入模組以及一圖像上傳模組，該互動顯示模組具有一聊天畫面透過終端裝置顯示，該資訊輸入模組提供消費者在該聊天畫面輸入一商品類別指令，該圖像上傳模組能接收消費者所上傳之一影像資料，並將該影像資料同時同步呈現在該聊天畫面；以及一影像辨識伺服器，其耦接於該智能聊天伺服器，該影像辨識伺服器具有一商品資訊資料庫、一學習訓練模組以及一商品辨識模組，該商品資訊資料庫預存有複數種銷售商品圖像，該學習訓練模組能演算學習所述銷售商品圖像，並對所述銷售商品圖像設定一商品類別銷售資訊，以獲得及儲存一訓練模型資料，該商品辨識模組依據該商品類別指令進入該學習訓練模組搜尋相符的所述商品類別銷售資訊，並擷取對應所述訓練模型資料與該影像資料進行綜合判斷，而產生一商品搜尋結果，且直接顯示於原瀏覽的該聊天畫面，其中，該商品辨識模組設有一目標偵測單元以及一目標演算單元，該目標偵測單元將所述影像資料處理成複數網格模型，該影像資料包含一商品特徵影像以及一背景特徵影像，該目標偵測單元依據所述網格模型演算所述商品特徵影像與所述背景特徵影像的邊界，且於所述商品特徵影像之周圍形成一偵測封閉框，該目標演算單元對該偵測封閉框中的所述商品特徵影像進行演算而產生一目標模型資料。
2. 如請求項1所述之商品搜尋輔助系統，其中，該學習訓練模組 具有一商品標記單元以及一學習演算單元，該商品標記單元對所述銷售商品圖像周圍標記一學習封閉框，且該商品標記單元對應所述銷售商品圖像設定所述商品類別銷售資訊，該學習演算單元依據該學習封閉框學習所述銷售商品圖像，並將所述商品類別銷售資訊整合在所述學習封閉框之一側而產生所述訓練模型資料。
3. 如請求項2所述之商品搜尋輔助系統，其中，該學習演算單元以不同大小、顏色、紋理、角度及變型的所述銷售商品圖像進行演算學習，並測試所述銷售商品圖像的正確率，以產生所述訓練模型資料。
4. 如請求項2或3所述之商品搜尋輔助系統，其中，該學習訓練模組更具有一分類儲存單元，該分類儲存單元依據所述商品類別銷售資訊各別儲存所述訓練模型資料。
5. 如請求項4所述之商品搜尋輔助系統，其中，該商品辨識模組設有一類別判斷單元以及一辨識處理單元，該類別判斷單元接收及分析該商品類別指令，並進入該分類儲存單元比對相符的所述商品類別銷售資訊，再藉由該辨識處理單元依據所述目標模型資料辨識出相符特徵的所述訓練模型資料，以獲得該商品搜尋結果。
6. 如請求項5所述之商品搜尋輔助系統，其中，該辨識處理單元設定有一辨識標準值，該辨識處理單元將所述目標模型資料之商品特徵影像與所述訓練模型資料之銷售商品圖像進行疊合比對，以獲得一辨識相似值，當該辨識處理單元判斷該辨識相似值大於該辨識標準值時，即產生該商品搜尋結果，並回傳至該智能聊天伺服器依序顯示於原瀏覽的該聊天畫面。
7. 如請求項1所述之商品搜尋輔助系統，其中，該智能聊天伺服 器具有一對話資料庫以及一諮詢處理模組，該對話資料庫儲存關於客服諮詢之複數筆問答資料，該諮詢處理模組能處理所述商品類別指令，並根據語音辨識或自然語言處理分析該商品類別指令之意圖決定而取得一諮詢訊息，該諮詢處理模組依據該諮詢訊息自該對話資料庫分析相符的所述問答資料，以產生一回覆結果，並顯示在原瀏覽的該聊天畫面。
8. 如請求項7所述之商品搜尋輔助系統，其中，該回覆結果包含有一服務按鈕選項，該服務按鈕選項提供消費者透過終端裝置選擇，並將所選的所述服務按鈕選項藉由該資訊輸入模組對應輸入一服務指令。

Images