TW202221628A - 智能貨架管控系統 - Google Patents

智能貨架管控系統 Download PDF

Info

Publication number
TW202221628A
TW202221628A TW109141228A TW109141228A TW202221628A TW 202221628 A TW202221628 A TW 202221628A TW 109141228 A TW109141228 A TW 109141228A TW 109141228 A TW109141228 A TW 109141228A TW 202221628 A TW202221628 A TW 202221628A
Authority
TW
Taiwan
Prior art keywords
image
shelf
processing unit
module
control system
Prior art date
Application number
TW109141228A
Other languages
English (en)
Other versions
TWI787674B (zh
Inventor
吳世光
Original Assignee
國立勤益科技大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立勤益科技大學 filed Critical 國立勤益科技大學
Priority to TW109141228A priority Critical patent/TWI787674B/zh
Publication of TW202221628A publication Critical patent/TW202221628A/zh
Application granted granted Critical
Publication of TWI787674B publication Critical patent/TWI787674B/zh

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本發明提供一種智能貨架管控系統,其包含測距模組、攝影模組、運算模組及通訊模組,測距模組偵測人員與貨架間距離並產生距離值;攝影模組拍攝人員與貨架並產生監控影像;運算模組接收距離值及監控影像,運算模組將距離值與閾值比對,當距離值低於閾值時運算模組產生接近訊號;通訊模組與社群通訊平台耦接,通訊模組透過服務傳播技術,將接近訊號及監控影像一併傳送至社群通訊平台之訊息介面;藉此,透過距離與影像監控技術,即時判斷顧客是否有感興趣貨物,並通知商家人員針對顧客有興趣商品,適時對顧客進行協助,進而有效提高銷售效果。

Description

智能貨架管控系統
本發明係關於一種控管系統,尤指一種物品與消費者間互動關係的智能貨架管控系統。
在實體商店中,若顧客對於某一件商品有興趣時,通常會近距離(離貨架很近)觀看商品或將商品取出觀看,此時除非顧客要進行購買、顧客主動詢問店員或是店員主動發現顧客需求,否則店員不知顧客對於此項商品有興趣,往往錯失服務顧客的機會,可能會導致顧客在對商品抱持疑問的情況下,而放棄購買之意願。
為了改善前述問題,商家因應措施會選擇增加店員人數、增加商品說明告示、控管顧客人數等作法,但是增加店員人數及商品說明告示都會增加成本支出,而控管顧客人數雖然可以更全面性服務每一位顧客,但是可能會導致商品銷售量的限制。
為解決上述課題,本發明提供一種智能貨架管控系統,透過距離與影像監控技術,即時判斷顧客是否有感興趣貨物,並針對顧客有興趣商品,適時對顧客進行協助,以有效提高銷售效果。
本發明之一項實施例提供一種智能貨架管控系統,其架設於一貨架周圍;智能貨架管控系統包含:一測距模組,其偵測該貨架周圍中之人員與貨架間的距離,以產生一距離值;一攝影模組,其拍攝該貨架周圍中之人員、貨架及貨架上的貨物,並產生一監控影像;一運算模組,其與攝影模組及測距模組耦接,運算模組具有一處理單元,處理單元接收由測距模組產生之距離值及攝影模組產生之監控影像,處理單元將距離值與一閾值比對,當距離值低於閾值時,處理單元產生一接近訊號;以及一通訊模組,其與運算模組及社群通訊平台耦接,通訊模組接收由運算模組傳送之接近訊號及對應的監控影像,通訊模組透過一服務傳播技術,將接近訊號及監控影像一併傳送至社群通訊平台之訊息介面。
藉由上述,本發明透過距離與影像監控技術,即時判斷顧客是否有感興趣貨物,並針對顧客有興趣商品,適時對顧客進行協助,以有效提高銷售效果,藉以改善習知以人力控管,無法即時服務顧客,導致銷售效果不佳之問題。
為便於說明本發明於上述發明內容一欄中所表示的中心思想,茲以具體實施例表達。實施例中各種不同物件係按適於說明之比例、尺寸、變形量或位移量而描繪,而非按實際元件的比例予以繪製,合先敘明。
請參閱圖1至圖7所示,本發明提供一種智能貨架管控系統100,其能夠架設於商家之一貨架周圍E或商家的結帳區C,其中,一個貨架周圍E能夠架設一個或複數個智能貨架管控系統100,一個結帳區C能夠架設一個或複數個智能貨架管控系統100;於本發明實施例中,智能貨架管控系統100之數量為複數個,智能貨架管控系統100分別架設於貨架周圍E及商家的結帳區C,本發明不限制智能貨架管控系統100的架設數量。
本發明智能貨架管控系統100包含:
一測距模組10,其偵測貨架周圍E中之人員P與貨架S間的距離,以產生一距離值L,其中,距離值L能夠以公分或公尺為單位;於本發明實施例中,距離值L以公尺為單位,如圖3所示;測距模組10利用超音波偵測貨架周圍E中之人員P與貨架S間的距離。
一攝影模組20,其能夠拍攝貨架周圍E中之人員P、貨架S及貨架上之貨物G,並產生一監控影像SI;或是攝影模組20拍攝結帳區C,以產生一結帳影像CI。
一資料庫30,其存有複數貨架模型及複數條碼資訊,每一貨架模型具有一框架特徵及複數物件特徵,其中,每一貨架模型具有各物件特徵設置於框架特徵的位置關係(例如:A貨物擺放於貨架最上層;B貨物擺放於貨架中間層);各物件特徵具有相匹配之條碼資訊。
一運算模組40,其與測距模組10、攝影模組20、資料庫30及商家設置的銷售時點情報系統1訊號連接,運算模組40具有一處理單元41、一記憶單元42及一統計單元43;處理單元41能夠接收由測距模組10產生之距離值L、攝影模組20產生之監控影像SI或結帳影像CI;處理單元41能將距離值L與一閾值比對,當距離值L低於閾值時,處理單元41產生一接近訊號411;接著,處理單元41依據接近訊號411,將監控影像SI經由影像處理分析出一貨架影像SI1、一貨物影像SI2及一人員影像SI3,處理單元41讀取資料庫30之各貨架模型且與貨架影像及貨物影像進行比對,以取得匹配的其中一貨架模型;其中,閾值能夠依據需求作調整,於本發明實施例中,閾值為0.3公尺,但本發明不以此為限。
舉例說明:請參閱圖1、圖3及圖4所示,當貨架周圍E中有多位人員P,每一人員P與貨架S間的距離皆不相同,測距模組10能夠偵測每位人員P與貨架S間的距離值L(可以理解的是,若貨架周圍E內只有一位人員P,則只會產生一個距離值L),而運算模組40的處理單元41會接收到複數個距離值L,當處理單元41判斷其中一人員P與貨架S間的距離值L小於閾值時,則處理單元41會產生接近訊號411,而處理單元41會依據接近訊號411,將監控影像SI透過影像處理針對靠近貨架S的人員P產生對應的貨架影像SI1、貨物影像SI2及人員影像SI3,也就是說,處理單元41產生的人員影像SI3是對應距離值L小於閾值的人員P。
再者,攝影模組20會連續傳送監控影像SI至運算模組40之處理單元41,處理單元41會持續接收分析監控影像SI,當處理單元41判斷前幀貨物影像SI2’與當前貨物影像SI2有差異,以產生一警示訊號412,如圖6所示;接著,處理單元41依據警示訊號412,由資料庫30取得與有差異貨物影像SI2匹配的條碼資訊,處理單元41將有差異貨物影像SI2及對應之人員影像SI3與條碼資訊紀錄於記憶單元42;於本發明實施例中,當前幀貨物影像SI2’與當前貨物影像SI2有差異,其定義為貨架S上的貨物G有缺少,可以理解為靠近貨架S所對應的人員P由貨架S上取出貨物G,則處理單元41將缺少貨物G所對應的貨物影像SI2、條碼資訊及取貨人員的人員影像SI3紀錄於記憶單元42;需特別說明的是,每個缺少貨物G所對應的貨物影像SI2、條碼資訊及人員影像SI3會整合為一個資料儲存於記憶單元42,若有複數個缺少貨物G,則記憶單元42會儲存有複數個被整合的資料。
處理單元41會將結帳影像CI經由影像處理分析產生一顧客影像F(也就是以臉部辨識技術,由結帳影像中分析出臉部影像),處理單元41將顧客影像F與記憶單元42內之人員影像SI3進行匹配分析(如果記憶單元42內有複數個人員影像SI3,則會將顧客影像F分別與每個人員影像SI3進行分析比對),當顧客影像F有匹配到人員影像SI3時,處理單元41會接收由銷售時點情報系統1傳送之結帳條碼資訊(也就是顧客結帳商品的條碼明細),處理單元41將結帳條碼資訊與記憶單元42內對應此人員影像SI3一併整合資料之條碼資訊進行匹配分析,當結帳條碼資訊與記憶單元42內之所述條碼資訊無法匹配,則處理單元41產生一警告訊號413,其中,警告訊號413用於提醒商家,此人員P(顧客)原先從貨架S上取出的貨物G並未在結帳清單中,可能是被偷竊或是被人員P(顧客)將貨物G放置於其他位置,需要前往關切,如圖7至圖8所示。
統計單元43設有一整合時間,統計單元43將有產生接近訊號411所對應之貨物影像SI2進行累計,統計單元43會依據整合時間,將有產生接近訊號411所對應之貨物影像SI2進行累計數量的統計,並產生對應整合時間之一統計報表,其中,整合時間能夠依據商家需求做調整,能夠以小時、日、月或年為單位,本發明不以此為限;再者,統計報表能夠以任何形態呈現,可能是呈現於終端裝置、應用程式或社群通訊平台,本發明不以此為限。
一通訊模組50,其與運算模組40及社群通訊平台2耦接,通訊模組50接收由運算模組40傳送之接近訊號411及對應的監控影像SI,通訊模組50設有一傳輸時間,通訊模組50每間隔傳輸時間,通訊模組50透過一服務傳播技術,將接近訊號411及監控影像SI一併傳送至社群通訊平台2之訊息介面3,商家人員可以透過接收到的監控影像SI得知人員P(顧客)目前關注貨物G,以前往協助,如圖5所示。
需特別說明的是,通訊模組50在間隔的傳輸時間內,會將接收到的接近訊號411及對應之監控影像SI進行累積,當到達傳輸時間後,通訊模組50會一併將累積的接近訊號411及對應之監控影像SI傳送至社群通訊平台2之訊息介面3,例如:通訊模組50在間隔傳輸時間內,接收到接近訊號411及對應之監控影像SI之數量為1個,則到達傳輸時間後,社群通訊平台2之訊息介面3會接收到1個接近訊號411及對應之監控影像SI;通訊模組50在間隔傳輸時間內,接收到接近訊號411及對應之監控影像SI之數量為5個,則到達傳輸時間後,社群通訊平台2之訊息介面3會接收到5個接近訊號411及對應之監控影像SI,以此類推。於本發明實施例中,社群通訊平台2為LINE;服務傳播技術為LINE Notify;傳輸時間為1分鐘,傳輸時間能夠根據需求調整,本發明不以此為限。
再者,通訊模組50會接收由運算模組40傳送的警示訊號412搭配監控影像SI或是警告訊號413搭配顧客影像F,通訊模組50會透過服務傳播技術,將警示訊號412及監控影像SI一併傳送至社群通訊平台2之訊息介面3,或是將警告訊號413及顧客影像F一併傳送至社群通訊平台2之訊息介面3。
另外,接近訊號411、警示訊號412及警告訊號413能夠以文字訊息呈現於社群通訊平台2之訊息介面3,於本發明實施例中,接近訊號411之文字訊息為「有顧客對商品有興趣!」,如圖4至圖5所示;警示訊號412之文字訊息為「貨物已從貨架取出!」,如圖6所示;警告訊號413之文字訊息為「結帳商品與取出貨物不同,請前往關切!」,如圖8所示;如此一來,商家人員能夠依據不同訊號的文字呈現搭配監控影像SI或顧客影像F,關切人員P(顧客)或是管控貨物G變化。
需特別說明的是,測距模組10、攝影模組20、資料庫30、運算模組40及通訊模組50的整合型態大致分為下列三種可能性,分別為:1. 測距模組10、攝影模組20、資料庫30、運算模組40及通訊模組50能夠整合於同一電路板;2.測距模組10及攝影模組20分別獨立設置,資料庫30、運算模組40及通訊模組50整合於同一電路板;3.測距模組10及攝影模組20整合於同一電路板,資料庫30、運算模組40及通訊模組50整合於同一電路板,但不排除其他整合可能性,本發明不限制於前述整合型態。
綜合上述,本發明能夠達到下列功效:
1.本發明智能貨架管控系統100,能夠透過距離量測技術,判斷人員P(顧客)是否有感興趣貨物G,當偵測到人員P(顧客)有感興趣貨物G時,能透過影像監控技術,快速捕捉人員P(顧客)所在位置的影像,並將接近訊號411及監控影像SI傳送至社群通訊平台2,立即通知商家人員針對人員P(顧客)感興趣貨物G,適時對人員P(顧客)進行協助,以有效提高銷售效果。
2.本發明智能貨架管控系統100,能夠監控貨架S上的貨物G變化,當貨物G已由貨架S取出,但是對應取出貨物G的人員P(顧客)未於結帳時一併結帳,則以警告訊號413通知商家人員,讓商家人員能夠進一步了解判斷貨物G是否被偷竊或其他原因,以達到智能控管貨物的效果。
3. 本發明智能貨架管控系統100,夠依據統計報表了解每樣貨物G被關注的頻率,分析出熱門貨物G,提供行銷策略的擬定,進而有效提高銷售效果。
以上所舉實施例僅用以說明本發明而已,非用以限制本發明之範圍。舉凡不違本發明精神所從事的種種修改或變化,俱屬本發明意欲保護之範疇。
1:銷售時點情報系統 2:社群通訊平台 3:訊息介面 100:智能貨架管控系統 10:測距模組 20:攝影模組 30:資料庫 40:運算模組 41:處理單元 411:接近訊號 412:警示訊號 413:警告訊號 42:記憶單元 43:統計單元 50:通訊模組 E:貨架周圍 C:結帳區 P:人員 S:貨架 G:貨物 L:距離值 SI:監控影像 SI1:貨架影像 SI2:貨物影像 SI2’:貨物影像 SI3:人員影像 CI:結帳影像 F:顧客影像
圖1係本發明系統架構方塊圖。 圖2係本發明架設於貨架周圍實施例示意圖。 圖3係本發明測距模組偵測人員與貨架距離示意圖。 圖4係本發明分析監控影像示意圖,表示分析出貨架影像、貨物影像及人員影像。 圖5係本發明商家人員關切實施例示意圖。 圖6係本發明分析兩貨物影像具有差異示意圖。 圖7係本發明架設於結帳區實施例示意圖。 圖8係本發明由結帳影像分析產生顧客影像實施例示意圖。
1:銷售時點情報系統
2:社群通訊平台
100:智能貨架管控系統
10:測距模組
20:攝影模組
30:資料庫
40:運算模組
41:處理單元
42:記憶單元
43:統計單元
50:通訊模組

Claims (10)

  1. 一種智能貨架管控系統,其架設於一貨架周圍;該智能貨架管控系統包含: 一測距模組,其偵測該貨架周圍中之人員與貨架間的距離,以產生一距離值; 一攝影模組,其拍攝該貨架周圍中之人員、貨架及貨架上的貨物,並產生一監控影像; 一運算模組,其與該攝影模組及該測距模組耦接,該運算模組具有一處理單元,該處理單元接收由該測距模組產生之該距離值及該攝影模組產生之該監控影像,該處理單元將該距離值與一閾值比對,當該距離值低於該閾值時,該處理單元產生一接近訊號;以及 一通訊模組,其與該運算模組及社群通訊平台耦接,該通訊模組接收由該運算模組傳送之該接近訊號及對應的該監控影像,該通訊模組透過一服務傳播技術,將該接近訊號及該監控影像一併傳送至社群通訊平台之訊息介面。
  2. 如請求項1所述之智能貨架管控系統,更具有一資料庫,其存有複數貨架模型,每一貨架模型具有一框架特徵及複數物件特徵,其中,每一貨架模型具有各該物件特徵設置於該框架特徵的位置關係;該處理單元依據該接近訊號,將該監控影像經由影像處理分析出一貨架影像、一貨物影像及一人員影像,該處理單元讀取該資料庫之各該貨架模型,將該貨架影像及該貨物影像與所述框架特徵及所述物件特徵比對,以取得匹配的所述貨架模型。
  3. 如請求項2所述之智能貨架管控系統,其中,該攝影模組連續傳送該監控影像至該運算模組之處理單元,該處理單元持續接收分析該監控影像,該處理單元判斷前幀該貨物影像與當前該貨物影像有差異,以產生一警示訊號,該通訊模組透過該服務傳播技術,將該警示訊號及該監控影像一併傳送至社群通訊平台之訊息介面。
  4. 如請求項3所述之智能貨架管控系統,其中,該資料庫存有與各該物件特徵匹配的一條碼資訊;該運算模組具有一記憶單元,該處理單元依據該警示訊號,由該資料庫取得與有差異的該貨物影像匹配的所述條碼資訊,該處理單元將有差異的該貨物影像及對應之該人員影像與所述條碼資訊紀錄於該記憶單元。
  5. 如請求項4所述之智能貨架管控系統,其中,該攝影模組架設於商家的結帳區,且該攝影模組拍攝結帳區之一結帳影像;該運算模組與商家設置的銷售時點情報系統訊號連接,該處理單元將該結帳影像經由影像處理分析產生一顧客影像,該處理單元判斷該顧客影像與該記憶單元內之所述人員影像是否匹配,當該顧客影像與所述人員影像匹配,則該處理單元接收銷售時點情報系統傳送之結帳條碼資訊,該處理單元將結帳條碼資訊與該記憶單元內之所述條碼資訊匹配,當結帳條碼資訊與該記憶單元內之所述條碼資訊無法匹配,則該處理單元產生一警告訊號。
  6. 如請求項5所述之智能貨架管控系統,其中,該通訊模組透過該服務傳播技術,將該警告訊號及該顧客影像一併傳送至社群通訊平台之訊息介面。
  7. 如請求項1所述之智能貨架管控系統,其中,該通訊模組設有一傳輸時間,該通訊模組每間隔該傳輸時間,將該接近訊號搭配對應之該監控影像傳送至社群通訊平台之訊息介面。
  8. 如請求項2所述之智能貨架管控系統,其中,該運算模組具有一統計單元,該統計單元將有產生該接近訊號所對應之該貨物影像進行累計。
  9. 如請求項8所述之智能貨架管控系統,其中,該統計單元設有一整合時間,該統計單元依據該整合時間統計所述貨物影像的累計數量,並產生對應該整合時間之一統計報表。
  10. 如請求項1所述之智能貨架管控系統,其中,該測距模組利用超音波偵測該貨架周圍中之人員與貨架間的距離。
TW109141228A 2020-11-25 2020-11-25 智能貨架管控系統 TWI787674B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW109141228A TWI787674B (zh) 2020-11-25 2020-11-25 智能貨架管控系統

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW109141228A TWI787674B (zh) 2020-11-25 2020-11-25 智能貨架管控系統

Publications (2)

Publication Number Publication Date
TW202221628A true TW202221628A (zh) 2022-06-01
TWI787674B TWI787674B (zh) 2022-12-21

Family

ID=83062485

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109141228A TWI787674B (zh) 2020-11-25 2020-11-25 智能貨架管控系統

Country Status (1)

Country Link
TW (1) TWI787674B (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2695071A4 (en) * 2011-03-17 2016-09-07 Patrick Campbell LOCATION SYSTEM FOR SHELVES
TW201503006A (zh) * 2013-03-15 2015-01-16 Bit Motion Ltd 庫存管理裝置、庫存管理系統、庫存管理方法及庫存管理程式
JP2018055248A (ja) * 2016-09-27 2018-04-05 ソニー株式会社 情報収集システム、電子棚札、電子pop、文字情報表示装置
US20210027318A1 (en) * 2018-03-20 2021-01-28 Nec Corporation Store management device and store management method
CN110580621A (zh) * 2018-06-07 2019-12-17 阿里巴巴集团控股有限公司 信息处理方法、装置以及货架设备
TW202029078A (zh) * 2019-01-30 2020-08-01 宏碁股份有限公司 智慧商場系統及應用其之控制方法
TW202042151A (zh) * 2019-05-13 2020-11-16 莊連豪 視覺化取像購物系統及其實施方法

Also Published As

Publication number Publication date
TWI787674B (zh) 2022-12-21

Similar Documents

Publication Publication Date Title
US20230394557A1 (en) Self-checkout system, purchased product management method, and purchased product management program
US8267316B2 (en) Systems and methods for merchandise checkout
US20190108551A1 (en) Method and apparatus for customer identification and tracking system
JP5731766B2 (ja) 販売機会損失の分析システム及び分析方法
WO2019062018A1 (zh) 商品自动结算方法、装置、自助收银台
US10372998B2 (en) Object recognition for bottom of basket detection
CN107134083A (zh) 终端附近事件发生的识别和成像
US20180260612A1 (en) Object Recognition for Bottom of Basket Detection Using Neural Network
US10929675B2 (en) Decentralized video tracking
WO2019111501A1 (ja) 画像処理装置
JP7040596B2 (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
WO2017058587A1 (en) Image auditing method and system
US20140002646A1 (en) Bottom of the basket surveillance system for shopping carts
TWI787674B (zh) 智能貨架管控系統
CN112665698A (zh) 一种智能电子秤
JP2023153148A (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
JP2016219065A (ja) 滞留分析システム及び方法
US20230130735A1 (en) Real-time risk tracking
JP2015133131A (ja) 販売機会損失分析用データ出力システム及び方法
TWI765670B (zh) 關注姿態估計方法及其系統
US20170278112A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
JP7315046B2 (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
TWI779567B (zh) 商店人體姿態估計系統及其方法
TWI710968B (zh) 商品影像辨識與數量監控系統
TWI750701B (zh) 推播系統及其操作方法