TW201502999A - 一種行為辨識及追蹤系統 - Google Patents

Abstract

本發明係關於一種行為辨識及追蹤系統，其元件係包含：至少一攝像裝置；至少一處理裝置，係電性連接於該攝像裝置，且具有：一判別模組及一電性連接於該判別模組之辨識模組，並可進行影像辨識、記錄時間點、記錄攝像裝置之網卡號及IP位址，進而產生一辨識分析數據；及一儲存裝置，係電性連接於該處理裝置，以供處理裝置進行該辨識分析數據的傳輸及比對。

Description

一種行為辨識及追蹤系統

本發明係關於一種追蹤系統，尤指一種用來追蹤人流，並對其行為及特徵進行辨識，再加以統計分析使用族群的一種行為辨識及追蹤系統。

隨著時代的演進，科技發展的日新月異，資訊的傳播與取得也變得相當便利，在現代的服務業或商業活動，為了提高客戶的滿意度以及深入解析客戶行為，通常都會有相對應的調查方式來進行產品的市場接受度分析。一般而言，店家為了取得客戶的消費資訊及偏好、滿意度等資料時，會設計問卷提供給客戶進行填寫調查，但由於問卷提供的時間點總在消費行為完成後，所取得的資料不夠即時、客觀程度不足且難以確認真實性，並且整理起來相當困難，也相當佔空間，故很難以系統化之方式進行分類或儲存，故利用問卷來完成市場調查的方法仍有需多必須克服的困難。

為了解決上述之問題，於是有了電子化問卷的設計，藉由將問卷電子化，讓店員使用電腦等用具來協助完成，雖然解決了儲存及歸檔的不便，卻也產生了下列的問 題：

(1)由於進行問卷填寫或由店員進行詢問為一種有意識之行為，會使客戶在回答上經過多方考慮再進行答覆，無法完整體現客戶真實的想法，如此一來便會造成問卷調查不夠精確，另外，客戶在店內的行為包括行進動線、對商品或廣告的觀注及於店內各處的駐留時間等等，皆難以利用問卷方式取得資訊。

(2)對於客戶的身分必須藉由人工的方式進行驗證，必須花費許多時間成本進行歸檔分類，使用起來相當不便。

有鑑於此，本案之創作人依據多年研究之經驗累積，並搭配自身的創意及不斷的嘗試下，進而研發出一種可有效改善上述習知技術中所提及之缺陷的一種行為辨識及追蹤系統。

本發明之第一目的，在於提供一種行為辨識及追蹤系統，係利用攝像裝置進行人流的追蹤，藉由攝像裝置的影像捕捉，可在被攝者無意識的情況進行資訊的收集，例如被攝者的人臉、膚色、年齡、性別、手勢、身形、表情、聲音、服裝顏色、視線追蹤、駐留時間及注視時間等等，對被攝者的行為做一追蹤，以提升被攝者行為分析的精確程度。

本發明之第二目的，在於提供一種行為辨識及追蹤系統，係利用攝像裝置，搭配判別及辨識模組來對人流進行多種智慧影像辨識，可以同時給被攝者一個身分，用來記錄例如消費行為、被拍攝的時間點及攝像裝置的網路卡號及IP位址以建立完整的消費流程來分析其行為，如此一來便可直接透過影像來歸類被攝者的相關資訊，不必再藉由人工的找尋及歸類方法來進行訊息的整理。

本發明揭露之該行為辨識及追蹤系統，其元件係包含：至少一攝像裝置，係可擷取一影像；至少一處理裝置，係電性連接於該攝像裝置，並可對攝像裝置所擷取之該影像進行處理，且具有：一判別模組，係可判別攝像裝置所截取的影像是否為所需之影像；及一辨識模組，係電性連接於該判別模組，並可以對通過該判別模組之影像進行辨識、記錄時間點、記錄攝像裝置之網卡號及IP位址，進而產生一辨識分析數據；一儲存裝置，係電性連接於該處理裝置，以供處理裝置進行該辨識分析數據的傳輸及比對，並可進行資料庫的建立；其中，處理裝置會將辨識分析數據與儲存裝置內之資料進行比對，若有相符的數據則直接進行覆寫及編輯，若沒有相符的數據則直接建立一新的儲存空間儲存該辨識分析數據。

本發明更揭露了一種行為辨識及追蹤系統之運作方法，其步驟係包含： S1：利用一攝像裝置截取至少一影像；S2：利用一判別模組判別偵測影像是否為使用者所需之影像，若是，則繼續進行步驟S3，若否，則重新進行步驟S1；S3：利用一辨識模組對影像進行辨識、可以記錄時間點、記錄攝像裝置之網卡號及IP位址，並取得一辨識分析數據；S4：該處理裝置將該辨識分析數據與一儲存裝置內之資料進行比對，並判斷是否有相對應之一資料，若有，進行步驟S5，若否，進行步驟S6；S5：將辨識分析數據儲存於該資料相同之儲存空間，並執行步驟S7 S6：將該初始端辨識分析數據儲存於一新儲存空間，並執行步驟S7；及S7：結束。

1‧‧‧攝像裝置

2‧‧‧處理裝置

21‧‧‧判別模組

22‧‧‧辨識模組

3‧‧‧儲存裝置

4‧‧‧操作平台

A‧‧‧辨識分析數據

S1~S7‧‧‧步驟編號

第一圖係本發明之一種行為辨識及追蹤系統之一第一較佳實施例之模組示意圖；第二圖係本發明之行為辨識及追蹤系統之一第二較佳實施例之模組示意圖； 第三圖係本發明之行為辨識及追蹤系統之一第三較佳實施例之模組示意圖；及第四圖係本發明之一種行為辨識及追蹤系統之運作方法之步驟示意圖。

為了能夠更清楚地描述本發明所提出之一種行為辨識及追蹤系統，以下將配合圖式，詳盡說明本發明之較佳實施例。請先參閱第一圖，係本發明之行為辨識及追蹤系統之一第一較佳實施例之模組示意圖，其結構係包含：五台攝像裝置1，係用來擷取影像，在本實施例中的攝像裝置1係以五台為例進行說明，其數量可根據使用者的需求進行調整；一處理裝置2，係電性連接於該攝像裝置1，並可對攝像裝置1所擷取之該影像進行處理，且具有：一判別模組21，係可判別攝像裝置1所截取的影像是否為所需之影像，而在本實施例中所需的影像為人臉影像；及一辨識模組22，係電性連接於該判別模組21，並對通過該判別模組21之影像進行辨識、可以記錄時間點、記錄攝像裝置1之網卡號及IP位址，進而產生一辨識分析數據A，除此之外，辨識模組22更可對人臉、膚色、年齡、性別、手勢、身形、表情、聲音、服裝顏色、視線追蹤、駐留時間及注視時間進行辨識；其中，該處理裝置2的數量亦可進 行調整，如第二圖所示，係本發明之行為辨識及追蹤系統之一第二較佳實施例之模組示意圖，與第一較佳實施例不同的是，第二較佳實施例將判別模組21及辨識模組22分別設置於一單獨的處理裝置2上，意即使每一個單獨的處理裝置2來處理一程序，避免資料過多時造成附載過重的情況；及一儲存裝置3，係電性連接於該處理裝置2，以供處理裝置2進行該辨識分析數據A的傳輸及比對，並可進行資料庫的建立，其中，處理裝置2會將辨識分析數據A與儲存裝置3內之資料進行比對，若有相符的數據則直接進行覆寫及編輯，若沒有相符的數據則直接建立一新的儲存空間儲存該辨識分析數據A；同時，請在參閱第三圖，係本發明之行為辨識及追蹤系統之一第三較佳實施例之模組示意圖，與第一較佳實施例不同的地方在於在每個攝像裝置1上更分別連接有一操作平台4，可提供被偵測者一即時的互動操作，該操作平台4可選擇性地使用廣告媒體看板、平板電腦、互動式媒體看板、銷售點情報管理機(POS：point of sales)。

此外，儲存裝置3更可選擇性的連接於客戶關係管理系統(CRM：Customer relationship management)、商業智慧分析(Business Intelligence)、資料探勘(Data Mining)或海量資料運算系統(Big data)上，使儲存裝置3內之資料可做另外的處理或分析。

在對本發明之第一至第三較佳實施例之結構做一清楚描述之後，最後要對本發明之行為辨識及追蹤系統之運作方法做一說明，請同時參閱第四圖，係本發明之一種行為辨識及追蹤系統之運作方法之步驟示意圖，其步驟係包含：步驟S1：利用一攝像裝置1截取至少一影像；步驟S2：將該影像傳輸至一處理裝置2，並利用判別模組21判斷該影像是否為人臉影像，若是，則繼續進行步驟S3，若否，則執行步驟S7；步驟S3：利用一辨識模組22對影像進行影像辨識、可記錄時間點、記錄攝像裝置1之網卡號及IP位址及記錄時間點，並對被偵測者進行人臉、膚色、年齡、性別、手勢、身形、表情、聲音、服裝顏色、視線追蹤、駐留時間及注視時間等辨識，最後再取得一辨識分析數據A；步驟S4：該處理裝置2將該辨識分析數據A與一儲存裝置3內之資料進行比對，並判斷是否有相對應之一資料，若有，則進行步驟S5，若否，則進行步驟S6；步驟S5：將辨識分析數據A儲存於該資料相同之儲存空間，並執行步驟S7； 步驟S6：將該初始端辨識分析數據A儲存於一新儲存空間，並執行步驟S7；及步驟S7：結束。

上述已經對本發明之行為辨識及追蹤系統之運作方法做一大略性的說明，以下會搭配一運作範例進行說明，本發明之行為辨識及追蹤系統之運作方法係可用於賣場，在賣場之出入口、結賬處及使用者所需之地方設置攝像裝置1，當一消費者進入賣場時，會被攝像裝置1擷取影像，並藉由處理裝置2的處理進行影像判別及辨識，產生辨識分析數據A，該辨識分析數據A可以包含有此消費者被攝像時的時間點、攝影機的網路卡號或IP位址，以便建立此消費者在店內瀏覽的時間流程及行走路線，接下來，辨識分析數據A會與儲存裝置3內的資料進行比對，當處理裝置2判斷儲存裝置3內有與辨識分析數據A相符合之數據時，便可判定該消費者為儲存裝置3內已經有歷史資料數據之身分，便可直接儲存該辨識分析數據A，但假若比對後判斷儲存裝置3內有與辨識分析數據A沒有相符合之數據時，處理裝置2便會給予該消費者一個新的身分代號再進行資料儲存。

接下來，當顧客在賣場內瀏覽時，賣場內之攝影機亦會進行影像擷取，在由後端的處理裝置2進行判別及辨識等作業，其中，辨識項目便會增加視線追蹤、駐留時 間及注視時間等辨識，以記錄消費者在各賣場內部攝像點的視線、駐留時間、或對某看板、產品的注視時間，以獲取消費者對何種看板或產品的駐留時間或是注視時間或是其他資訊，此部分為無意識情況下所進行的偵測，便可避免習知技術中藉由有意識調查所產生的缺陷。

此外，賣場內部的攝像裝置1亦可連接有操作平台4，操作平台4可根據使用者的需求選擇性的使用廣告媒體看板、平板電腦、互動式媒體看板、銷售點情報管理機(POS：point of sales)、此些操作平台4亦可保有即時的互動調查方式，其中，若使用廣告看板的操作平台，更可在辨識完消費者後，根據其性別、年齡及視線追蹤的辨識結果，或儲存裝置3內所擁有的歷史紀錄來播放適合該被偵測者觀看之廣告或互動資訊；此外，該儲存裝置3更可選擇性的連接於客戶關係管理系統(CRM：Customer relationship management)、商業智慧分析(Business Intelligence)、資料探勘(Data Mining)或海量資料運算系統(Big data)上，使儲存裝置3內之資料可讓使用者進行處理或分析。

最後，當消費者結帳離開賣場時，結帳處的攝像裝置1亦會進行影像擷取，再由處理裝置2進行判別及辨識的動作，以完成整體的行為辨識及追蹤。

上述已經對本發明作了相當完整之揭露，綜合上 述，可以得知本發明有下列兩優點：

(1)利用攝像裝置進行人流的追蹤，藉由攝像裝置的影像捕捉，可在被攝者無意識的情況進行資訊的收集，例如消費者的人臉、膚色、年齡、性別、手勢、身形、表情、聲音、服裝顏色、視線追蹤、駐留時間及注視時間等等，對被攝者的行為做一追蹤，以提升消費行為分析的精確程度。

(2)同樣係利用攝像裝置，搭配判別及辨識模組來對人流進行攝像辨識，並同時給被攝者一個身分，用來記錄其消費行為、被拍攝的時間點及攝像裝置的網路卡號及IP位址來建立完整的消費流程來分析其消費行為，如此一來，便可直接歸類消費者的相關資訊，不必再藉由人工的找尋及歸類方法來進行訊息的整理。

然而，上述之詳細說明係針對本發明可行實施例之具體說明，惟該實施例並非用以限制本發明之專利範圍，凡未脫離本發明技藝精神所為之等效實施或變更，均應包含於本案之專利範圍中。

1‧‧‧攝像裝置

2‧‧‧處理裝置

21‧‧‧判別模組

22‧‧‧辨識模組

3‧‧‧儲存裝置

A‧‧‧辨識分析數據

Claims (9)

1. 一種行為辨識及追蹤系統，係包括：至少一攝像裝置，係可擷取一影像；至少一處理裝置，係電性連接於該攝像裝置，並可對攝像裝置所擷取之該影像進行處理，且具有：一判別模組，係可判別攝像裝置所截取的影像是否為所需之影像；及一辨識模組，係電性連接於該判別模組，並對通過該判別模組之影像進行辨識、記錄時間點、記錄攝像裝置之網卡號及IP位址，進而產生一辨識分析數據；一儲存裝置，係電性連接於該處理裝置，以供處理裝置進行該辨識分析數據的傳輸及比對，並可進行資料庫的建立；
2. 如申請專利範圍第1項所述之行為辨識及追蹤系統，其中，該判別模組係利用幾何特徵及輪廓外形、特徵不變量法來判別該攝像裝置所截取之影像是否為一人臉影像。
3. 如申請專利範圍第1項所述之行為辨識及追蹤系統，其中，該辨識模組係可對下列組合中之任一種項目以上進行辨識：人臉、膚色、年齡、性別、手勢、身形、表情、聲音、服裝顏色、視線追蹤、駐留時間及注視時間。
4. 如申請專利範圍第1項所述行為辨識及追蹤系統，其中，更具有至少一操作平台，係分別連接於該攝像裝置。
5. 如申請專利範圍第4項所述之行為辨識及追蹤系統，其中，該操作平台可選擇性地使用下列組合中之任一種以上：廣告媒體看板、平板電腦、互動式媒體看板、銷售點情報管理機(POS：point of sales)。
6. 如申請專利範圍第1項所述行為辨識及追蹤系統，其中，該儲存裝置更可選擇性地連接於下列組合中之任一種裝置及系統：客戶關係管理系統(CRM：Customer relationship management)、商業智慧分析(Business Intelligence)、資料探勘(Data Mining)及海量資料運算系統(Big data)。
7. 如申請專利範圍第1項所述行為辨識追蹤系統，其中，該判別模組及該辨識模組可分別設置於不同之辨識裝置上。
8. 一種行為辨識及追蹤系統之運作方法，其步驟係包含：S1：利用一攝像裝置截取至少一影像；S2：將該影像傳輸至一處理裝置，並利用判別模組判斷該影像是否為所需之影像，若是，則繼續進行步驟S3，若否，則執行步驟S7；S3：利用一辨識模組對影像進行辨識及記錄時間點， 並取得一辨識分析數據；S4：該處理裝置將該辨識分析數據與一儲存裝置內之資料進行比對，並判斷是否有相對應之一資料，若有，則進行步驟S5，若否，則進行步驟S6；S5：將辨識分析數據儲存於該資料相同之儲存空間，並執行步驟S7；S6：將該初始端辨識分析數據儲存於一新儲存空間，並執行步驟S7；及S7：結束。
9. 如申請專利範圍第8項所述之一種行為辨識追蹤系統之運作方法，其中，該辨識模組可對下列組合中之任一種項目以上進行辨識：人臉、膚色、年齡、性別、手勢、身形、視線追蹤、停留時間及觀看時間。