TWI712903B - 商品資訊查詢方法和系統 - Google Patents

Abstract

本說明書實施例提供一種商品資訊查詢方法和系統，基於本說明書提供的系統，可以對線下商品進行拍攝，利用從圖像中提取的商品圖像特徵，查詢獲得與該線下商品相關的商品資訊，從而可以實現在線下場景中，用戶不僅能查看到實物，還能透過本說明書提供的系統查詢到更多元化的商品資訊，提升顧客獲得資訊的效率。

Description

商品資訊查詢方法和系統

本說明書涉及資料處理領域，尤其涉及商品資訊查詢方法和系統。

隨著電子商務交易平臺的不斷完善，以及傳統通訊、行動通訊等技術的快速發展，越來越多的人們透過網上購物的方式來獲取自己所需的商品，商品的種類可以涉及到人們日常生活的各個方面，為人們生活提供了極大的便利。然而，由於線上選購商品過程中，存在無法看到實物、不能即時獲得商品等缺陷，因此，線下選購商品的形式仍然具有其存在意義。 而針對線下場景，顧客僅能透過查看商品的外形和外包裝說明以獲得商品的部分資訊，針對實物無法展示的資訊，顧客無法獲得。

為克服相關技術中存在的問題，本說明書提供了商品資訊查詢方法和系統。 根據本說明書實施例的第一態樣，提供一種商品資訊查詢系統，所述系統包括：攝影模組、距離檢測模組、資訊查詢模組和展示模組；距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域； 距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，向資訊查詢模組發送用於指示啟動查詢的通知訊息； 資訊查詢模組在接收到所述通知訊息後，獲取攝影模組所拍攝的圖像；利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊； 展示模組對所述商品詳情資訊進行展示。 在一個實施例中，所述移動物件包括人體物件；和/或， 所述距離檢測模組包括超音波測距模組；和/或， 所述商品詳情資訊包括待查詢商品的評論資訊；和/或， 所述拍攝區域包括所述檢測區域；和/或， 所述預設距離範圍為所述重疊區域所對應的距離範圍；和/或， 所述展示模組為顯示設備，顯示設備與商品貨架的距離在指定範圍內，所述攝影模組設於顯示設備的頂部，所述距離檢測模組設於顯示設備的底部。 在一個實施例中，距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，向攝影模組發送用於指示啟動拍攝的訊息；距離檢測模組檢測到其與移動物件的距離部不在預設距離範圍內時，向攝影模組發送用於指示關閉拍攝的訊息。 在一個實施例中，資訊查詢模組利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊，包括： 基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域； 從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊； 利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊。 在一個實施例中，所述圖像中至少包括兩個商品對應的圖像資料，同一商品在不同圖像中的圖像資料基於每訊框圖像中所預測的商品位置區域確定，同一商品的商品基本資訊基於該商品在不同圖像中圖像資料所對應商品基本資訊的重複次數確定。 在一個實施例中，資訊查詢模組包括處理模組和查詢模組； 所述處理模組在接收到所述通知訊息後，獲取攝影模組所拍攝的圖像，基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域，將圖像中商品位置區域處的圖像資料發送至查詢模組； 所述查詢模組從所接收的圖像資料中提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊，並將所述商品詳情資訊發送至展示模組進行展示。 根據本說明書實施例的第二態樣，提供一種基於上述任一項系統實現的商品資訊查詢方法，包括： 在距離檢測模組與移動物件的距離在預設距離範圍內時，獲取攝影模組所拍攝的圖像； 利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊； 對所述商品詳情資訊進行展示。 在一個實施例中，所述利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊，包括： 基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域； 從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊； 利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊。 在一個實施例中，所述圖像中至少包括兩個商品對應的圖像資料，同一商品在不同圖像中的圖像資料基於每訊框圖像中所預測的商品位置區域確定，同一商品的商品基本資訊基於該商品在不同圖像中圖像資料所對應商品基本資訊的重複次數確定。 在一個實施例中，所述商品基本資訊至少包括待查詢商品的產品類別以及所屬品牌；和/或，所述商品詳情資訊包括待查詢商品的評論資訊。 本說明書的實施例提供的技術方案可以包括以下有益效果： 本說明書實施例提供一種商品資訊查詢系統，基於本說明書提供的系統，可以對線下商品進行拍攝，利用從圖像中提取的商品圖像特徵，查詢獲得與該線下商品相關的商品資訊，從而可以實現在線下場景中，用戶不僅能查看到實物，還能透過本說明書提供的系統查詢到更多元化的商品資訊，提升顧客獲得資訊的效率，並且在提升購物體驗的同時，也更具有趣味性。 應當理解的是，以上的一般描述和後文的細節描述僅是範例性和解釋性的，並不能限制本說明書。

這裡將詳細地對範例性實施例進行說明，其範例表示在圖式中。下面的描述涉及圖式時，除非另有表示，不同圖式中的相同數字表示相同或相似的要素。以下範例性實施例中所描述的實施方式並不代表與本說明書相一致的所有實施方式。相反，它們僅是與如所附申請專利範圍中所詳述的、本說明書的一些態樣相一致的裝置和方法的例子。 在本說明書使用的術語是僅僅出於描述特定實施例的目的，而非意於限制本說明書。在本說明書和所附申請專利範圍中所使用的單數形式的“一種”、“所述”和“該”也意於包括多數形式，除非上下文清楚地表示其他含義。還應當理解，本文中使用的術語“和/或”是指並包含一個或多個相關聯的列出項目的任何或所有可能組合。 應當理解，儘管在本說明書可能採用術語第一、第二、第三等來描述各種資訊，但這些資訊不應限於這些術語。這些術語僅用來將同一類型的資訊彼此區分開。例如，在不脫離本說明書範圍的情況下，第一資訊也可以被稱為第二資訊，類似地，第二資訊也可以被稱為第一資訊。取決於語境，如在此所使用的詞語“如果”可以被解釋成為“在……時”或“當……時”或“響應於確定”。 顧客在傳統的線下購物場景中選購商品時，往往只能透過商品外形和外包裝說明瞭解到商品的部分資訊；而網上購物時，雖然可以透過詳實的圖文介紹以及用戶評論獲取更豐富、更多元化的商品資訊，但用戶卻看不到實物。可見，線下購物和線上購物在用戶體驗方面各有優劣。 鑒於此，本說明書實施例提供一種商品資訊查詢系統，基於本說明書提供的系統，可以對線下商品進行拍攝，利用從圖像中提取的商品圖像特徵，查詢獲得與該線下商品相關的商品資訊，從而可以實現在線下場景中，用戶不僅能查看到實物，還能透過本說明書提供的系統查詢到更多元化的商品資訊，提升顧客獲得資訊的效率，並且在提升購物體驗的同時，也更具有趣味性。 以下結合圖式對本說明書實施例進行範例說明。 如圖1所示，是本說明書根據一範例性實施例顯示的一種商品資訊查詢系統的結構示意圖，所述系統包括：攝影模組12、距離檢測模組14、資訊查詢模組16和展示模組18。距離檢測模組14的檢測區域與攝影模組12的拍攝區域至少存在重疊區域。距離檢測模組14檢測到其與移動物件的距離在預設距離範圍內時，向資訊查詢模組16發送用於指示啟動查詢的通知訊息。資訊查詢模組16在接收到所述通知訊息後，獲取攝影模組12所拍攝的圖像；利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊。展示模組18對所述商品詳情資訊進行展示。 本實施例系統中各模組，可以是軟體模組，也可以是硬體模組。不同模組可以集成於同一個設備，也可以佈局於不同設備。例如，商品資訊查詢系統可以是一種商品資訊查詢終端，可以將該商品資訊查詢終端佈局在線下場景中，該商品資訊查詢終端可以配置有攝影鏡頭、距離感測器、顯示螢幕等。距離感測器的檢查區域與攝影鏡頭的拍攝區域至少存在重疊區域，以便獲得重疊區域內商品的圖像。為了分擔各部分任務，減輕同一設備的處理壓力，不同模組可以佈局在不同設備。例如，攝影模組可以是獨立的攝影裝置，距離檢測模組可以是獨立的距離檢測裝置，資訊查詢模組可以是資訊查詢設備，展示模組可以是顯示設備等。 相應的，基於上述系統，本說明書還提供一種商品資訊查詢方法，如圖2所示，是本說明書根據一範例性實施例顯示的一種商品資訊查詢方法的流程圖，所述方法包括： 在步驟202中，在距離檢測模組與移動物件的距離在預設距離範圍內時，獲取攝影模組所拍攝的圖像； 在步驟204中，利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊； 在步驟206中，對所述商品詳情資訊進行展示。 接下來對本說明書所提供的商品資訊查詢系統和方法進行範例說明。 其中，為了區分於網際網路平臺上的線上商品，可以將實體店展示和銷售的商品稱為線下商品。本實施例中待查詢商品可以是線下商品。 作為配置攝影模組的目的之一，可以是能夠拍攝待查詢商品，而配置距離檢測模組的目的之一，可以是能夠檢測是否有移動物件進入檢測區域，以便觸發查詢模組能自動啟動查詢功能，鑒於此，距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域，以便對該重疊區域內的商品進行資訊查詢，可以將該重疊區域稱為用於對線下商品進行資訊查詢的查詢區域。為了提高顧客體驗，查詢區域可以為展示模組附近的區域。當顧客攜帶商品進入該查詢區域時，可以將進入查詢區域的商品確定為待查詢商品。例如，可以將查詢區域限定為顯示螢幕前方指定區域，以便顧客在選購商品時，主動將商品靠近顯示螢幕，從而使商品進入查詢區域。 在一個實施例中，距離檢測模組的檢測區域與攝影模組的拍攝區域可以相同，以實現查詢區域的最大化。然而，實際應用中，距離檢測模組的檢測區域是透過調整距離感測器的佈局位置以及配置參數而獲得，攝影模組的拍攝區域也是透過調整攝影鏡頭的佈局位置以及配置參數而獲得，因此，為了降低達到距離檢測模組的檢測區域與攝影模組的拍攝區域完全吻合的難度，在另一個實施例中，可以配置為拍攝區域包括檢測區域，如拍攝區域稍大於檢測區域，以實現以檢測區域作為對線下商品進行資訊查詢的查詢區域。在另一個例子中，也可以配置為檢測區域包括拍攝區域，如檢測區域稍大於拍攝區域，以實現以拍攝區域作為對線下商品進行資訊查詢的查詢區域。 關於距離檢測模組，可以是透過某種物質的發射與接收以判斷物體的距離資料。例如，距離檢測模組可以是超音波測距模組、紅外線測距模組、光學測距模組中的一種或多種。以距離檢測模組為感測器、且為超音波距離感測器為例，超音波距離感測器發射出的超音波在到達物體表面後會發生反射，利用發射聲波和接收回波的時間差來計算物體到感測器的距離。距離檢測模組可以是僅包括一種距離感測器，也可以包括多種距離感測器，結合多種距離感測器檢測的資料確定物體的距離，可以提高判斷準確性。 關於攝影模組，可以是能進行攝影和/或攝影的設備，具體根據需求設置。 資訊查詢模組獲取攝影模組所拍攝圖像的條件，可以是距離檢測模組檢測到其與移動物件的距離在預設距離範圍內，從而避免時刻對攝影模組所拍攝的圖像進行識別以及商品資訊查詢導致的資源浪費。其中，預設距離範圍可以根據距離檢測模組的檢測區域而定，例如，預設距離範圍可以是檢測區域所確定的距離範圍，也可以小於檢測區域所確定的距離範圍。在一個實施例中，預設距離範圍可以根據重疊區域而確定，例如，將預設距離範圍設置為重疊區域所對應的距離範圍，以實現移動物件在重疊區域內時才觸發查詢操作。 所述圖像可以是攝影模組針對拍攝區域內景物進行拍攝獲得的圖像。在一個例子中，攝影模組可以處於攝影模式，例如每間隔預設時間進行拍照，並生成圖像。在另一個例子中，攝影模組可以處於攝影模式，對拍攝範圍內的景物進行攝影，並生成視訊資料。因此，圖像可以是由攝影模組拍攝的單張圖像，也可以是攝影模組拍攝的視訊資料的視訊訊框。 由於距離檢測模組可以透過某種物質的發射與接收以判斷其與物體的距離，特別是與移動物件的距離，因此，可以利用距離檢測模組檢測到其與移動物件的距離是否在預設距離範圍內，以判斷預設距離範圍內是否存在移動物件。而移動物件往往攜帶有線下商品(待查詢商品)，距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域，因此，在線下商品進入重疊區域後，攝影模組所拍攝的物件中可以包括線下商品。 實際應用中，若攝影模組一直處於拍攝狀態，容易導致攝影模組的電量浪費。為了避免攝影模組即時拍攝導致電量浪費、以及所拍攝圖像佔用記憶體資源，可以設置攝影模組拍攝功能的啟動和關閉條件。 在一個實施例中，距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，向攝影模組發送用於指示啟動拍攝的訊息，攝影模組可以根據該訊息開啟拍攝模式。距離檢測模組檢測到其與移動物件的距離部不在預設距離範圍內時，向攝影模組發送用於指示關閉拍攝的訊息，攝影模組可以根據該訊息退出拍攝模式。 可見，距離檢測模組可以用於判斷移動物件是否在預設距離範圍所對應的區域內，移動物件進入該區域時開啟攝影模組的拍攝功能，移動物件離開該區域時關閉攝影模組的拍攝功能，從而實現自動開啟和關閉攝影模組的拍攝功能，節約電量，同時避免所拍攝圖像造成記憶體資源的佔用。 在獲得攝影模組所拍攝的圖像後，可以利用從圖像中提取的商品圖像特徵，查詢獲得與商品圖像特徵對應的商品詳情資訊。本實施例可以透過圖像識別，可以獲得線下商品的更多商品資訊，並進行展示，而無需用戶手動上網查詢。商品詳情資訊可以是重疊區域內待查詢商品的相關資訊，特別是線下商品無法展示的資訊。例如，將與線下商品對應的線上商品的相關資訊作為線下商品的商品詳情資訊。 在一個實施例中，商品詳情資訊可以包括待查詢商品的評論資訊。可見，透過展示待查詢商品的評論資訊，可以輔助顧客在決定是否購買該待查詢商品，給顧客選購提供參考。 可以理解的是，商品詳情資訊還可以是其他類型資訊，例如，商品圖像、介紹商品的視訊等多維度資訊。 關於如何利用從圖像中提取的商品圖像特徵，查詢獲得與該商品圖像特徵對應的商品詳情資訊，在一個實施例中，可以儲存商品圖像特徵與商品詳情資訊的映射關係，進而利用所提取的商品圖像特徵和預設映射關係，從商品資訊資料庫中查詢獲得與該商品圖像特徵對應的商品詳情資訊。 在另一個實施例中，可以透過圖像識別獲得待查詢商品的商品基本資訊，進而利用商品基本資訊查詢獲得商品詳情資訊。商品基本資訊可以是透過圖像識別容易獲得的商品資訊，特別是能標識待查詢商品的商品標識。 商品基本資訊的粗細粒度可以根據所展示商品資訊與實際線下商品的期望相關度而確定。但為了避免所展示商品資訊與實際線下商品的相關度太低，在一個實施例中，商品基本資訊至少包括待查詢商品的產品類別以及所屬品牌，以實現至少保證所展示商品資訊是同品牌同類別的產品的資訊。 例如，作為其中一種策略，期望展示的商品資訊可以是與線下商品屬同品牌同類別的商品的資訊，而針對其他細小區別特徵(如口味)可以忽略，則商品基本資訊包括待查詢商品的產品類別以及所屬品牌。例如，商品基本資訊可以是xx品牌薯片。作為另一種策略，期望展示的商品資訊即為線下商品所對應的商品資訊，則商品基本資訊可以是商品名稱，例如，xx品牌青檸味薯片。 進一步的，為了提高計算效率，還可以先預測圖像中待查詢商品的商品位置區域，接著僅對商品位置區域所對應圖像資料進行圖像識別。 以下以其中一種商品詳情資訊查詢手段進行範例說明。 資訊查詢模組利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊，可以包括： 基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域； 從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊； 利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊。 其中，商品位置區域又可以稱為商品候選區域或商品候選框。商品定位模型可以是用於預測圖像中商品位置區域的模型。在一個實施例中，可以利用已知商品位置區域的樣本圖像構建訓練樣本，利用訓練樣本進行模型訓練，獲得商品定位模型。例如，採用深度卷積神經網路訓練獲得商品定位模型。樣本商品圖像特徵對應有商品基本資訊，因此可以根據相似度比較結果，將相似度滿足要求的樣本商品圖像特徵對應的商品基本資訊，作為待查詢商品的商品基本資訊。 而實際應用中，可能出現重疊區域記憶體在多個線下商品的情況。在一個例子中，待查詢商品可以是拍攝區域內的所有線下商品，即將進入拍攝區域內的線下商品均作為待查詢商品，將查詢獲得的各商品詳情資訊進行展示。 在另一個例子中，待查詢商品可以是對拍攝區域內的線下商品進行篩選獲得的商品。例如，可以結合其他與待查詢商品有關聯的物件，輔助確定待查詢的線下商品。如，由顧客握持或夾子夾持的線下商品往往是顧客期望查詢的線下商品，因此，可以結合手部資訊或夾子資訊對拍攝區域內的線下商品進行篩選。 例如，在構建訓練商品定位模型的訓練樣本時，可以將樣本圖像中的物體劃分為商品類和關聯物件類，其他物件均可作為背景，將物體(如商品和關聯物件)位置區域和其所對應類型作為標籤構建訓練樣本。例如，將圖像中商品的商品位置區域以及該區域為商品類作為標籤、將關聯物件的物件位置區域以及該區域為關聯物件類作為標籤，構建訓練樣本，從而利用構建的訓練樣本對模型進行訓練，獲得商品定位模型。其中，與商品具有關聯的關聯物件可以是手部等可以支援商品的物件。 在基於商品定位模型預測圖像中待識別商品位置區域時，可以根據商品定位模型輸出結果中：歸屬於商品類的商品位置區域與歸屬於關聯物件類的物件位置區域的位置關係，將與關聯物件位置區域的距離在預設範圍內的商品位置區域確定為待識別商品的商品位置區域。例如，與關聯物件位置區域存在重疊或距離最近的商品位置區域，可以判定為待識別商品的商品位置區域。如果圖像中不包括關聯物件，可以將圖像中所有商品判定為待識別商品，或者將指定區域內的商品判定為待識別商品，指定區域可以是預設的中心區域等。 在其他實施例中，也可以訓練一個能直接預測待識別商品的商品位置區域的商品定位模型，在此不一一贅述。 可見，本實施例透過與商品關聯的關聯物件輔助判斷待查詢商品，可以提高獲得待查詢商品的商品位置區域的準確性。 在獲得商品位置區域後，可以從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並計算所提取商品圖像特徵與樣本商品圖像特徵的相似度，將相似度滿足要求的樣本商品圖像特徵所對應商品基本資訊，作為本次相似度比較的結果。該過程中，可以採用深度學習模型實現，在此不一一贅述。 可以理解的是，還可以採用其他手段利用圖像獲得待查詢商品的商品基本資訊。例如，將所述圖像輸入利用預先訓練獲得的商品基本資訊檢測模型，進而獲得待查詢商品的商品基本資訊等，在此不一一贅述。 在實際應用中，利用一訊框圖像進行資訊查詢，獲得的商品詳情資訊可能不準確，因此，在一個實施例中，還可以融合多訊框圖像的查詢結果，以提高傳回結果的穩定性。針對每訊框圖像都進行商品資訊查詢，而待查詢商品的商品詳情資訊根據查詢結果中資訊重複次數確定。特別是分兩步查詢(先獲得商品基本資訊，再獲得商品詳情資訊)中，針對每訊框圖像都提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得比較結果。待查詢商品的商品基本資訊基於預設訊框數圖像所對應比較結果中商品基本資訊的重複次數確定。預設訊框數圖像是相鄰時間拍攝的視訊訊框。例如，預設訊框數可以是5訊框，對最近5訊框視訊訊框分別進行特徵提取和相似度比較獲得比較結果，將比較結果中商品基本資訊出現次數最多的商品基本資訊作為待查詢商品最終的商品基本資訊。 可見，透過融合多訊框圖像的比較結果，可以提高獲得商品基本資訊的準確性，進而提高獲得商品詳情資訊的準確性。 由於拍攝區域內可能存在包括多個商品的情況，從而獲得包括多個商品的圖像，即所述圖像中至少包括兩個商品對應的圖像資料，為此，在一個實施例中，同一商品在不同圖像中的圖像資料基於每訊框圖像中所預測的商品位置區域確定，同一商品的商品基本資訊基於該商品在不同圖像中圖像資料所對應商品基本資訊的重複次數確定。 可見，本實施例提供一種如何判斷不同圖像中同一商品的手段。每個商品在圖像中以圖像資料表現，透過每訊框圖像中所預測的商品位置區域，可以確定同一商品在不同圖像中的圖像資料，進一步的，同一商品的商品基本資訊基於該商品在不同圖像中圖像資料所對應商品基本資訊的重複次數確定。如，重複次數最多、且大於次數臨界值的商品基本資訊，可以作為商品的商品基本資訊，否則，判定未檢測到商品基本資訊。 舉例說明，可以保存對最近5訊框圖像分別進行特徵提取和相似度比較獲得的比較結果，不同訊框之間的比較結果按照商品位置區域進行匹配，位置非常接近的作為同一個商品。對於同一個商品，將出現次數大於3次、且出現次數最多的商品基本資訊作為該商品最終查詢獲得的商品基本資訊。對於商品基本資訊出現次數少於3次的商品，則視作未檢測到該商品。在獲得商品基本資訊後，可以利用商品基本資訊查詢獲得該待查詢商品的商品詳情資訊。 商品詳情資訊的查詢過程，可以是線下查詢，也可以是線上查詢。例如，在提取商品圖像特徵後，可以聯網從伺服端獲取與商品圖像特徵對應的商品詳情資訊，也可以從本地查詢獲得與商品圖像特徵對應的商品詳情資訊。而基於不同的佈局策略，資訊查詢模組可以由一個模組實現，也可以由多個模組實現。 在一個實施例中，資訊查詢模組包括處理模組和查詢模組；所述處理模組在接收到所述通知訊息後，獲取攝影模組所拍攝的圖像，基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域，將圖像中商品位置區域處的圖像資料發送至查詢模組；所述查詢模組從所接收的圖像資料中提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊，並將所述商品詳情資訊發送至展示模組進行展示。 在本實施例中，處理模組可以佈局在本地，查詢模組可以佈局在伺服端。透過將圖像中商品位置區域處的圖像資料發送至查詢模組，實現將圖像中表示商品的圖像資料發送至查詢模組，可以減少傳輸資料的資料量，減少查詢模組的運算開銷。 將所述商品詳情資訊進行展示，可以是靜態顯示、動態顯示、或視訊播放等形式。進一步的，展示模組還可以具有互動功能，例如，展示模組可以是觸控顯示螢幕，以便顧客對展示的資訊進行控制等。 由上述實施例可見，在距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，自動觸發資訊查詢模組進行圖像獲取操作，並由資訊查詢模組利用從圖像中提取的商品圖像特徵，查詢獲得與商品圖像特徵對應的商品詳情資訊，由展示模組對商品詳情資訊進行展示，從而實現自動化展示線下商品的相關資訊，提高顧客獲得商品資訊的效率。 以上實施方式中的各種技術特徵可以任意進行組合，只要特徵之間的組合不存在衝突或矛盾，但是限於篇幅，未進行一一描述，因此上述實施方式中的各種技術特徵的任意進行組合也屬本說明書公開的範圍。 為了方便理解，本說明書還以應用實例對商品資訊查詢方案進行範例說明。 在一個實施例中，商品資訊查詢方案可以由同一個設備完成。例如，在商店或商場等線下場景中，至少設置一個具有拍攝功能、測距功能以及展示功能的查詢終端，並將該查詢終端設置在與貨架的距離為指定距離範圍內。 在另一個實施例中，商品資訊查詢系統可以包括查詢終端、伺服端、攝影裝置和距離檢測裝置。在該實施例中，查詢終端可以是具有處理能力和顯示能力的設備。查詢終端可以設置在貨架上，或者貨架附近，以便於顧客查詢。拍攝裝置和距離檢測裝置可以設置在與查詢終端相關聯的位置，並且距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域，該重疊區域可以是用於進行商品查詢的區域。上述處理模組和展示模組可以設於查詢終端上，查詢模組可以設於伺服端。具體的，查詢終端可以在接收到通知訊息後，獲取攝影模組所拍攝的圖像，基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域，將圖像中商品位置區域處的圖像資料發送至伺服端。伺服端從所接收的圖像資料中提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊，並將所述商品詳情資訊發送至查詢終端進行展示。 實際應用中，在某些大型商場中，需要佈局多個顯示商品資訊的終端，鑒於此，本說明書實施例還提供另一種商品資訊查詢系統，如圖3A所示，是本說明書根據一範例性實施例顯示的一種商品資訊查詢方案的應用場景圖。所述系統包括：伺服端30、資訊處理端32、至少一個攝影設備34、至少一個距離感測器36和至少一個顯示設備38。顯示設備38分別與攝影設備34和距離感測器36存在綁定關係。所謂綁定關係，可以是映射關係，以便將根據攝影設備34和距離感測器36採集的資料獲得的商品詳情資訊，在顯示設備38上進行展示。資訊處理端32、攝影設備34、距離感測器36、顯示設備38均可佈局在本地，攝影設備34、距離感測器36、顯示設備38透過有限或無線的傳輸方式分別與資訊處理端32進行通訊。資訊處理端32可以是佈局在本地的處理中心端，實現本地資訊的總控。顯示設備38可以是至少具有顯示功能的設備。顯示設備38與商品貨架的距離在指定範圍內，以便用戶可以快速進行商品資訊查詢。所述攝影設備34可以設於顯示設備38的頂部，所述距離感測器36可以設於顯示設備34的底部。進一步的，顯示設備還可以具有觸控功能。 相應的，圖3B在圖3A所示場景下，顯示一種商品資訊查詢方法的時序圖。距離感測器檢測到其與移動物件的距離在預設距離範圍內時，向資訊處理端發送用於指示啟動查詢的通知訊息(步驟302)。資訊處理端在接收到所述通知訊息後，獲取攝影設備所拍攝的圖像(步驟304)。資訊處理端基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域，將圖像中商品位置區域處的圖像資料發送至伺服端(步驟306)。伺服端從所接收的圖像資料中提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，根據比較結果以及樣本商品圖像特徵所對應的商品基本資訊，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊(步驟308)。伺服端將所述商品詳情資訊發送至資訊處理端(步驟310)。資訊處理端將商品詳情資訊推送至與攝影設備和距離感測器存在綁定關係的顯示設備進行展示(步驟312)。 圖3B與圖1和圖2中相關技術相同，在此不一一贅述。伺服端可以是具有較強處理能力的雲伺服端。 基於圖3A和圖3B，可以在佈置有商品的貨架旁，設置互動螢幕。互動螢幕配置有攝影裝置和聲波測距裝置。攝影裝置在互動螢幕的上端，聲波測距裝置設置在互動螢幕的下端，互動螢幕的尺寸可以根據人的平均身高而設置。聲波測距裝置的檢測區域與攝影裝置的拍攝區域存在的重疊區域，作為用於查詢商品的查詢區域。聲波測距裝置檢測到顧客進入查詢區域後，攝影設備可以啟動拍攝。為了獲得更清楚的圖像，顧客可以將手上的待查詢商品舉起，攝影設備可以拍攝到待查詢商品，資訊處理端將從攝影設備獲取的圖像發送至伺服端，由伺服端查詢獲得待查詢商品的商品詳細資訊，並在互動螢幕上進行顯示。 由上述實施例可見，透過資訊處理端實現總控，以對顯示設備的硬體要求低，可以佈局多個顯示設備供顧客查詢。由於系統屬一次性部署，無需人工介入，降低人力成本，且無需要求線下商品設置有電子標籤。系統穩定性更好，距離感測器和攝影鏡頭都安裝在固定位置，人為損壞較為困難，又因為是全自動的系統，可以減少人工介入帶來的錯誤風險。 以上所描述的系統實施例僅僅是示意性的，其中所述作為分離部件說明的模組可以是或者也可以不是實體上分開的，作為模組顯示的部件可以是或者也可以不是實體模組，即可以位於一個地方，或者也可以分佈到多個網路模組上。可以根據實際的需要選擇其中的部分或者全部模組來實現本說明書方案的目的。本領域普通技術人員在不付出創造性勞動的情況下，即可以理解並實施。 相應的，提供一種終端設備，包括顯示器、儲存器、處理器及儲存在儲存器上並可在處理器上運行的電腦程式，其中，所述處理器執行所述程式時實現如下方法： 接收到距離檢測模組發送的用於指示啟動查詢的通知訊息後，獲取攝影模組所拍攝的圖像，所述通知訊息由距離檢測模組在檢測到其與移動物件的距離在預設距離範圍內時發送；距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域； 向伺服端設備發送所述圖像，並接收伺服端設備反饋的商品詳情資訊，所述商品詳情資訊由資訊查詢伺服端設備利用從圖像中提取的商品圖像特徵查詢獲得； 控制顯示器對所述商品詳情資訊進行展示。 相應的，提供一種伺服端設備，包括儲存器、處理器及儲存在儲存器上並可在處理器上運行的電腦程式，其中，所述處理器執行所述程式時實現如下方法： 接收終端設備發送的圖像； 利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊； 向所述終端設備發送所述商品詳情資訊。 本說明書中的各個實施例均採用遞進的方式描述，各個實施例之間相同相似的部分互相參見即可，每個實施例重點說明的都是與其他實施例的不同之處。尤其，對於設備實施例而言，由於其基本相似於方法實施例，所以描述的比較簡單，相關之處參見方法實施例的部分說明即可。 相應的，本說明書實施例還提供一種電腦儲存媒體，所述儲存媒體中儲存有程式指令，所述程式指令包括： 在距離檢測模組與移動物件的距離在預設距離範圍內時，獲取攝影模組所拍攝的圖像； 利用從圖像中提取的商品圖像特徵，查詢獲得與所述商品圖像特徵對應的商品詳情資訊； 對所述商品詳情資訊進行展示。 本說明書實施例可採用在一個或多個其中包含有程式代碼的儲存媒體(包括但不限於磁碟儲存器、CD-ROM、光學儲存器等)上實施的電腦程式產品的形式。電腦可用儲存媒體包括永久性和非永久性、可移動和非可移動媒體，可以由任何方法或技術來實現資訊儲存。資訊可以是電腦可讀指令、資料結構、程式的模組或其他資料。電腦的儲存媒體的例子包括但不限於：相變記憶體(PRAM)、靜態隨機存取記憶體(SRAM)、動態隨機存取記憶體(DRAM)、其他類型的隨機存取記憶體(RAM)、唯讀記憶體(ROM)、電可抹除可程式化唯讀記憶體(EEPROM)、快閃記憶體或其他記憶體技術、唯讀光碟唯讀記憶體(CD-ROM)、數位多功能光碟(DVD)或其他光學儲存、磁盒式磁帶，磁帶磁磁碟儲存或其他磁性儲存設備或任何其他非傳輸媒體，可用於儲存可以被計算設備存取的資訊。 本領域技術人員在考慮說明書及實踐這裡申請的發明後，將容易想到本說明書的其它實施方案。本說明書意於涵蓋本說明書的任何變型、用途或者適應性變化，這些變型、用途或者適應性變化遵循本說明書的一般性原理並包括本說明書未申請的本技術領域中的眾所皆知常識或慣用技術手段。說明書和實施例僅被視為範例性的，本說明書的真正範圍和精神由下面的申請專利範圍指出。 應當理解的是，本說明書並不局限於上面已經描述並在圖式中顯示的精確結構，並且可以在不脫離其範圍進行各種修改和改變。本說明書的範圍僅由所附的申請專利範圍來限制。 以上所述僅為本說明書的較佳實施例而已，並不用以限制本說明書，凡在本說明書的精神和原則之內，所做的任何修改、等同替換、改進等，均應包含在本說明書保護的範圍之內。

12‧‧‧攝影模組 14‧‧‧距離檢測模組 16‧‧‧資訊查詢模組 18‧‧‧展示模組 202〜206‧‧‧步驟 30‧‧‧伺服端 32‧‧‧資訊處理端 34‧‧‧攝影設備 36‧‧‧距離感測器 38‧‧‧顯示設備 302〜310‧‧‧步驟

此處的圖式被併入說明書中並構成本說明書的一部分，顯示了符合本說明書的實施例，並與說明書一起用於解釋本說明書的原理。 圖1是本說明書根據一範例性實施例顯示的一種商品資訊查詢系統的結構示意圖。 圖2是本說明書根據一範例性實施例顯示的一種商品資訊查詢方法的流程圖。 圖3A是本說明書根據一範例性實施例顯示的一種商品資訊查詢方案的應用場景圖。 圖3B是本說明書根據一範例性實施例顯示的一種商品資訊查詢方法的時序圖。

12‧‧‧攝影模組

14‧‧‧距離檢測模組

16‧‧‧資訊查詢模組

18‧‧‧展示模組

Claims (8)

1. 一種商品資訊查詢系統，所述系統包括：攝影模組、距離檢測模組、資訊查詢模組和展示模組；距離檢測模組的檢測區域與攝影模組的拍攝區域至少存在重疊區域；距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，向資訊查詢模組發送用於指示啟動查詢的通知訊息；資訊查詢模組在接收到所述通知訊息後，獲取攝影模組所拍攝的圖像；基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域；從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊；展示模組對所述商品詳情資訊進行展示。
2. 根據申請專利範圍第1項所述的系統，所述移動物件包括人體物件；和/或，所述距離檢測模組包括超音波測距模組；和/或，所述商品詳情資訊包括待查詢商品的評論資訊；和/或，所述拍攝區域包括所述檢測區域；和/或，所述預設距離範圍為所述重疊區域所對應的距離範 圍；和/或，所述展示模組為顯示設備，顯示設備與商品貨架的距離在指定範圍內，所述攝影模組設於顯示設備的頂部，所述距離檢測模組設於顯示設備的底部。
3. 根據申請專利範圍第1項所述的系統，距離檢測模組檢測到其與移動物件的距離在預設距離範圍內時，向攝影模組發送用於指示啟動拍攝的訊息；距離檢測模組檢測到其與移動物件的距離部不在預設距離範圍內時，向攝影模組發送用於指示關閉拍攝的訊息。
4. 根據申請專利範圍第3項所述的系統，所述圖像中至少包括兩個商品對應的圖像資料，同一商品在不同圖像中的圖像資料基於每訊框圖像中所預測的商品位置區域確定，同一商品的商品基本資訊基於該商品在不同圖像中圖像資料所對應商品基本資訊的重複次數確定。
5. 根據申請專利範圍第3項所述的系統，資訊查詢模組包括處理模組和查詢模組；所述處理模組在接收到所述通知訊息後，獲取攝影模組所拍攝的圖像，基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域，將圖像中商品位置區域處的圖像資料發送至查詢模組；所述查詢模組從所接收的圖像資料中提取用於表徵商 品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊，並將所述商品詳情資訊發送至展示模組進行展示。
6. 一種基於申請專利範圍第1至5項中任一項系統實現的商品資訊查詢方法，包括：在距離檢測模組與移動物件的距離在預設距離範圍內時，獲取攝影模組所拍攝的圖像；基於預訓練的商品定位模型預測所述圖像中待查詢商品的商品位置區域；從所述圖像中商品位置區域提取用於表徵商品基本資訊的商品圖像特徵，並將所提取商品圖像特徵與樣本商品圖像特徵進行相似度比較，獲得待查詢商品的商品基本資訊；利用所述商品基本資訊查詢獲得待查詢商品的商品詳情資訊；對所述商品詳情資訊進行展示。
7. 根據申請專利範圍第6項所述的方法，所述圖像中至少包括兩個商品對應的圖像資料，同一商品在不同圖像中的圖像資料基於每訊框圖像中所預測的商品位置區域確定，同一商品的商品基本資訊基於該商品在不同圖像中圖 像資料所對應商品基本資訊的重複次數確定。
8. 根據申請專利範圍第6項所述的方法，所述商品基本資訊至少包括待查詢商品的產品類別以及所屬品牌；和/或，所述商品詳情資訊包括待查詢商品的評論資訊。

Images