TWI770410B

TWI770410B - 影像辨識系統

Info

Publication number: TWI770410B
Application number: TW108128623A
Authority: TW
Inventors: 張芷瑜
Original assignee: 華南商業銀行股份有限公司
Priority date: 2019-08-12
Filing date: 2019-08-12
Publication date: 2022-07-11
Also published as: TW202107341A

Abstract

一種影像辨識系統，包含伺服器、攝像裝置及影像處理裝置。伺服器包含文字資料庫及分析模組。攝像裝置用以擷取信用卡帳單影像。影像處理裝置包含訊號接收單元、文字辨識單元、分析單元、影像處理單元以及運算單元。訊號接收單元接收信用卡帳單影像，文字辨識單元識別消費明細文字，分析單元接收文字資料庫並且將消費明細文字與文字資料庫比對而產生塗色指示。影像處理單元根據塗色指示產生色塊覆蓋對應該消費明細文字的消費金額，且運算單元計算色塊的面積而得到面積數值。分析模組接收面積數值並且根據面積數值得到商品偏好資訊。

Description

影像辨識系統

本發明是關於一種影像辨識系統，特別是一種幫助判斷客戶消費喜好的影像辨識系統。

自動櫃員機(Automated Teller Machine；ATM)，又名自動取款機或自動提款機，是指銀行設置一種小型機器，利用一張磁條卡或晶片卡(通常稱銀行卡，或稱金融卡、提款卡等)來記錄民眾的基本資料，讓民眾可以透過機器自助辦理提款、存款、轉帳等銀行櫃台服務。除此之外，近年來更多民眾喜歡透過網路銀行以及手機應用程式來進行提款、存款或轉帳。因此，對於金融業者來說，如何透過上述的使用者介面來自動化推薦民眾合適的特約商店優惠資訊或其他金融商品廣告，便成為一個重要課題。

對於金融業者來說，客戶的信用消費紀錄是可以用來推測客戶消費喜好以對客戶展開最佳化行銷。然而，在判斷客戶消費喜好的過程中，信用消費紀錄可能會因為在多個裝置之間傳遞而有被駭取的可能。

鑒於以上的問題，本發明揭露一種影像辨識系統，有助於解決客戶的信用消費紀錄在判斷客戶消費喜好的過程中可能被駭取的問題。

本發明所揭露的影像辨識系統包含一伺服器、一攝像裝置以及一影像處理裝置。伺服器包含一文字資料庫以及一分析模組。攝像裝置用以擷取一信用卡帳單影像。影像處理裝置通訊連接於攝像裝置與伺服器。影像處理裝置包含一訊號接收單元、一文字辨識單元、一分析單元、一影像處理單元以及一運算單元。訊號接收單元接收信用卡帳單影像，文字辨識單元識別信用卡帳單影像中的一消費明細文字，分析單元接收文字資料庫並且將消費明細文字與文字資料庫比對而產生一塗色指示。影像處理單元根據塗色指示產生至少一色塊覆蓋對應該消費明細文字的一消費金額，且運算單元計算色塊的面積而得到至少一面積數值。伺服器的分析模組接收來自影像處理裝置的面積數值，並且分析模組根據面積數值得到一商品偏好資訊。

根據本發明所揭露的影像辨識系統，影像處理單元根據塗色指示產生色塊覆蓋消費金額，且運算單元計算色塊的面積而得到面積數值。面積數值被輸出至伺服器的分析模組而能根據面積數值得到商品偏好資訊。藉此，在根據信用卡帳單評估客戶消費喜好的過程中，色塊可以遮蔽消費金額以防止影像辨識系統被駭進時消費金額會直接洩漏的風險。此外，影像處理裝置先計算面積數值後再將面積數值輸出至伺服器以評估客戶消費喜好，有助於避免信用卡帳單影像在傳輸過程中被駭取的風險。

以上之關於本揭露內容之說明及以下之實施方式之說明係用以示範與解釋本發明之精神與原理，並且提供本發明之專利申請範圍更進一步之解釋。

以下在實施方式中詳細敘述本發明之詳細特徵以及優點，其內容足以使任何熟習相關技藝者瞭解本發明之技術內容並據以實施，且根據本說明書所揭露之內容、申請專利範圍及圖式，任何熟習相關技藝者可輕易地理解本發明相關之目的及優點。以下之實施例進一步詳細說明本發明之觀點，但非以任何觀點限制本發明之範疇。

請參照圖1，為根據本發明一實施例之影像辨識系統的示意圖。在本實施例中，影像辨識系統1包含一伺服器10、一攝像裝置20以及一影像處理裝置30。

伺服器10包含一文字資料庫110以及一分析模組120。文字資料庫110例如包含所有欲識別的文字字集，以及根據與輸入文字一樣的特徵抽取方法所得到的特徵群組。文字資料庫110可存儲在伺服器10的硬碟中。分析模組120例如為包含處理器的電子組件。

攝像裝置20例如為網路監視器或是照相機，其用以擷取一信用卡帳單影像。圖2為根據本發明一實施例之塗上色塊前的信用卡帳單影像。信用卡帳單影像包含多個消費明細欄位C1以及多個消費金額欄位C2，並且消費金額欄位C2對應各自的消費明細欄位C1。在圖2中，信用卡帳單影像的多個消費明細欄位C1中所記載的商品資訊具有相同的商品類型。

所謂的商品資訊可以是指商品類型，例如餐飲類、生活用品類、書籍類等等，甚至可以再細分為例如是日式餐飲、美式餐飲、個人衛生用品、廚具用品、運動用品、小說或雜誌等等。一個具體例子是商品資訊為日式餐廳，但本發明並不以此為限。在部分實施例中，商品類型可以比商品資訊涵蓋更廣的範圍，例如根據日式餐廳為基準得到的商品類型可以是「餐飲類商品」。又例如，根據精品名牌包為基準得到的商品類型可以是「精品類商品」。

影像處理裝置30通訊連接於攝像裝置20與伺服器10。影像處理裝置30包含一訊號接收單元310、一文字辨識單元320、一分析單元330、一影像處理單元340以及一運算單元350。

訊號接收單元310例如為無線接收器，其用以接收攝像裝置20向影像處理裝置30輸出的信用卡帳單影像。文字辨識單元320例如為安裝有光學字元識別(OCR)軟體之裝置或處理器，其用以識別信用卡帳單影像中的一消費明細文字。如圖2所示，所述的消費明細文字是指消費明細欄位C1中的文字字元或符號字元。

分析單元330例如為包含處理器的電子組件，其用以接收文字資料庫110並且將消費明細文字與文字資料庫110比對而產生塗色指示。詳細來說，當文字辨識單元320識別出消費明細文字後，分析單元330比對文字資料庫110與消費明細文字，以確認消費明細文字所對應到的商品類型。在文字資料庫110中，進一步包含了每種商品類型所對應的代表顏色，例如日式餐飲以紅色代表，運動用品以藍色代表，但本發明並不以此為限。於分析單元330確認消費明細文字的商品類型，分析單元330產生塗色指示。舉例來說，分析單元330在圖2的消費明細欄位C1中確認日式餐飲的商品資訊，因此產生以紅色塗色的塗色指示。

影像處理單元340例如為安裝有影像處理軟體之裝置或處理器，根據前述的塗色指示產生色塊覆蓋對應消費明細文字的消費金額。請併參照圖3，為圖2之信用卡帳單影像塗上色塊的示意圖。影像處理單元340接收來自於分析單元330的塗色指示後，產生對應塗色指示的色塊覆蓋消費金額欄位C2中的消費金額。舉例來說，影像處理單元340接收前述分析單元330產生的以紅色塗色的塗色指示，隨即產生紅色色塊B1覆蓋消費金額欄位C2中的消費金額。

運算單元350例如為計算器或處理器，其用以計算色塊的面積而得到面積數值。舉例來說，運算單元350計算圖3中所有紅色色塊B1的總面積而得到面積數值。

伺服器10的分析模組120接收來自影像處理裝置30的面積數值，並且分析模組120根據面積數值得到商品偏好資訊。舉例來說，分析模組120接收到運算單元350輸出的面積數值以及色塊顏色而能推估日式餐飲的消費程度較高，因此以「日式餐廳」作為商品偏好資訊，這代表預期客戶偏好消費的商品為日式餐點。

在根據信用卡帳單評估客戶消費喜好的過程中，紅色色塊B1可以遮蔽消費金額欄位C2，有助於防止影像辨識系統被駭進時消費金額會直接洩漏的風險。此外，影像處理裝置先計算面積數值後再將面積數值輸出至伺服器以評估客戶消費喜好，有助於避免信用卡帳單影像在傳輸過程中被駭取的風險。

在另一實施例中，信用卡帳單影像的消費明細欄位C1可能包含不同商品類型的商品資訊。請參照圖4和圖5，為根據本發明另一實施例之信用卡帳單影像塗上色塊的示意圖。消費明細欄位C1中的消費明細文字包含相異的一第一文字訊息L1和一第二文字訊息L2，並且第一文字訊息L1和第二文字訊息L2是不同商品類型的商品資訊。於圖4中，第一文字訊息L1為日式餐飲的商品資訊，且第二文字訊息L2為運動用品的商品資訊。

消費金額欄位C2中的消費金額包含對應第一文字訊息L1的一第一金額M1與對應第二文字訊息L2的一第二金額M2。影像處理裝置30的分析單元330將第一文字訊息L1和第二文字訊息L2與伺服器10的文字資料庫110比對而分別產生顏色相異的一第一塗色指示和一第二塗色指示。舉例來說，分析單元330在圖4的消費明細欄位C1中確認第一文字訊息L1為日式餐飲的商品資訊，因此產生以紅色塗色的第一塗色指示。另外，分析單元330在圖4的消費明細欄位C1中確認第二文字訊息L2為運動用品的商品資訊，因此產生以藍色塗色的第二塗色指示。影像處理單元340根據第一塗色指示和第二塗色指示產生二色塊分別覆蓋第一金額M1與第二金額M2。舉例來說，影像處理單元340接收前述分析單元330產生的以紅色塗色的第一塗色指示，隨即產生紅色色塊B1覆蓋消費金額欄位C2中的第一金額M1。影像處理單元340更接收以藍色塗色的第二塗色指示，隨即產生藍色色塊B2覆蓋消費金額欄位C2中的第二金額M2。

影像處理裝置30的運算單元350計算二色塊的面積而得到分別對應二色塊的二面積數值。舉例來說，運算單元350計算圖5中所有紅色色塊B1的總面積而得到紅色面積數值，並且計算所有藍色色塊B2的總面積而得到藍色面積數值。

伺服器10的分析模組120接收來自影像處理裝置30的面積數值，並且分析模組120根據面積數值得到商品偏好資訊。舉例來說，分析模組120接收到運算單元350輸出的紅色面積數值、藍色面積數值以及色塊顏色的資訊，而能推估信用卡帳單當中日式餐飲和運動用品的消費程度是哪一個較高。由於消費金額較高時消費金額欄位C2中記載的金額理應有較多位數，因此覆蓋該金額的色塊會有較大的面積。分析模組120以較大的面積數值所對應的色塊為根據得到商品偏好資訊。舉例來說，分析模組120比較紅色面積數值與藍色面積數值後得知藍色面積數值較大，因此以「運動用品」作為商品偏好資訊，這代表預期客戶偏好消費的商品為運動用品。

此外，也能綜合紅色色塊B1和藍色色塊B2的出現頻率來得到商品偏好資訊。舉例來說，影像處理裝置30在一個信用卡帳單影像中產生一個大面積紅色色塊B1(如消費金額為4位數)與二個小面積藍色色塊B2(如消費金額為2位數或3位數)。在這樣的情況下，雖然紅色色塊B1和藍色色塊B2的面積相等，但藍色色塊B2出現較高頻率，這可以代表客戶相較於日式餐飲會更頻繁地在運動用品上作消費。因此，於運算單元350計算二色塊的面積時，可以針對出現頻率較高的色塊種類做加權，而讓得到的藍色面積數值大於紅色面積數值。

在前述實施例中，以不同顏色的色塊覆蓋不同商品類型的商品資訊所對應的消費金額欄位，但本發明並不以此為限。圖6為根據本發明又另一實施例之信用卡帳單影像塗上色塊的示意圖。分析單元330可以產生不同花紋的色塊覆蓋消費金額欄位。如圖6所示，分析單元330在消費明細欄位C1中確認第一文字訊息L1的商品資訊，因此產生以網點花紋塗佈的塗色指示。另外，分析單元330在確認第二文字訊息L2的商品資訊，因此產生以斜線花紋塗佈的塗色指示。影像處理單元340根據塗色指示產生網點花紋色塊B3以及斜線花紋色塊B4分別覆蓋第一金額M1與第二金額M2。

一個商品偏好資訊的應用例子為根據商品偏好資訊得到一推薦策略。詳細來說，圖1中的伺服器10可進一步包含一決策模組130與一推薦資料庫140。決策模組130用以比對商品偏好資訊與推薦資料庫140以得到一推薦策略。推薦策略可以是非金融商品的優惠資訊或是金融業者販售的金融商品廣告。在一個例子中，推薦資料庫140包含多個商品廣告，且決策模組130自這些商品廣告中選擇對應商品偏好資訊的其中一個商品廣告作為推薦策略。

此外如圖1所示，影像辨識系統1可進一步包含通訊連接於伺服器10的一使用者介面40，其用於顯示出推薦策略。使用者介面40例如為手機螢幕、自動櫃員機的顯示器或是網路銀行的網頁。當客戶使用自動櫃員機或網路銀行時，可將推薦策略輸出，而使自動櫃員機的顯示器或是網路銀行的網頁部分區域顯示推薦策略。

前述的推薦策略精確對應到商品偏好資訊(商品偏好資訊「日式餐廳」對應推薦策略「日式餐廳優惠活動的廣告」)，但本發明並不以此為限。在部分實施例中，推薦策略可以比商品偏好資訊涵蓋更廣的範圍，例如根據商品偏好資訊「日式餐廳」得到的推薦策略可以是「餐飲類優惠活動的廣告」，並不侷限於一定要跟日式餐廳有關。

在一實施例中，影像辨識系統更包含通訊連接於該影像處理裝置的一顯示裝置。參照圖1，影像辨識系統1進一步包含通訊連接於影像處理裝置30的一顯示裝置50，且顯示裝置50例如為顯示器。當信用卡帳單影像的部分消費明細文字未能被文字辨識單元320識別時，於影像處理單元340產生色塊覆蓋對應消費明細文字的消費金額後，影像處理裝置30輸出含有色塊的信用卡帳單影像至顯示裝置50。顯示裝置50接收並顯示信用卡帳單影像。藉此，業者可以檢閱含有色塊的信用卡帳單影像，而能採用人工方式針對未能被文字辨識單元320識別的消費明細文字所對應的消費金額手動塗上色塊。

在一實施例中，在文字辨識單元識別該消費明細文字之前，影像處理單元將信用卡帳單影像進行二值化處理。在另一實施例中，在影像處理單元產生色塊覆蓋消費金額之前，影像處理單元將信用卡帳單影像進行二值化處理。藉此，可以提高文字辨識單元辨識消費明細文字的成功率。

綜上所述，根據本發明所揭露的影像辨識系統，影像處理單元根據塗色指示產生色塊覆蓋消費金額，且運算單元計算色塊的面積而得到面積數值。面積數值被輸出至伺服器的分析模組而能根據面積數值得到商品偏好資訊。藉此，在根據信用卡帳單評估客戶消費喜好的過程中，色塊可以遮蔽消費金額以防止影像辨識系統被駭進時消費金額會直接洩漏的風險。此外，影像處理裝置先計算面積數值後再將面積數值輸出至伺服器以評估客戶消費喜好，有助於避免信用卡帳單影像在傳輸過程中被駭取的風險。

雖然本發明以前述之實施例揭露如上，然而這些實施例並非用以限定本發明。在不脫離本發明之精神和範圍內，所為之更動與潤飾，均屬本發明之專利保護範圍。關於本發明所界定之保護範圍請參考所附之申請專利範圍。

1:影像辨識系統 10:伺服器 110:文字資料庫 120:分析模組 130:決策模組 140:推薦資料庫 20:攝像裝置 30:影像處理裝置 310:訊號接收單元 320:文字辨識單元 330:分析單元 340:影像處理單元 350:運算單元 40:使用者介面 50:顯示裝置 B1:紅色色塊 B2:藍色色塊 B3:網點花紋色塊 B4:斜線花紋色塊 C1:消費明細欄位 C2:消費金額欄位 L1:第一文字訊息 L2:第二文字訊息 M1:第一金額 M2:第二金額

圖1為根據本發明一實施例之影像辨識系統的示意圖。圖2為根據本發明一實施例之塗上色塊前的信用卡帳單影像。圖3為圖2之信用卡帳單影像塗上色塊的示意圖。圖4和圖5為根據本發明另一實施例之信用卡帳單影像塗上色塊的示意圖。圖6為根據本發明又另一實施例之信用卡帳單影像塗上色塊的示意圖。

B1:紅色色塊

C1:消費明細欄位

C2:消費金額欄位

Claims

一種影像辨識系統，包含：一伺服器，包含一文字資料庫以及一分析模組；一攝像裝置，用以擷取一信用卡帳單影像；以及一影像處理裝置，通訊連接於該攝像裝置與該伺服器，該影像處理裝置包含一訊號接收單元、一文字辨識單元、一分析單元、一影像處理單元以及一運算單元，該訊號接收單元接收該信用卡帳單影像，該文字辨識單元識別該信用卡帳單影像中的一消費明細文字，該分析單元接收該文字資料庫並且將該消費明細文字與該文字資料庫比對而產生一塗色指示，該影像處理單元根據該塗色指示產生至少一色塊覆蓋對應該消費明細文字的一消費金額，該至少一色塊的面積與該消費金額的位數相關，且該運算單元計算該至少一色塊的面積且依該至少一色塊的出現頻率進行加權而得到至少一面積數值；其中，該伺服器的該分析模組接收來自該影像處理裝置的該至少一面積數值，並且該分析模組根據該至少一面積數值得到一商品偏好資訊。
如請求項1所述的影像辨識系統，其中該消費明細文字包含相異的一第一文字訊息和一第二文字訊息，該消費金額包含對應該第一文字訊息的一第一金額與對應該第二文字訊息的一第二金額，該分析單元將該第一文字訊息和該第二文字訊息與該文字資料庫比對而分別產生一第一塗色指示和一第二塗色指示，該影像處理單元根據該第一塗色指示和該第二塗色指示產生二色塊分別覆蓋第一金額與該第二金額，該運算單元計算該二色塊的面積而得到分別對應該二色塊的二面積數值，且該伺服器的該分析模組以較大的面積數值所對應的該色塊為根據得到該商品偏好資訊。
如請求項2所述的影像辨識系統，其中該消費明細文字為關於商品類型的商品資訊。
如請求項2所述的影像辨識系統，其中該二色塊的顏色相異。
如請求項1所述的影像辨識系統，更包含通訊連接於該影像處理裝置的一顯示裝置，其中當該信用卡帳單影像的部分該消費明細文字未能被該文字辨識單元識別時，該顯示裝置接收並顯示來自該影像處理裝置的包含該至少一色塊的該信用卡帳單影像。
如請求項1所述的影像辨識系統，其中在該文字辨識單元識別該消費明細文字之前，該影像處理單元將該信用卡帳單影像進行二值化處理。
如請求項1所述的影像辨識系統，其中在該影像處理單元產生該至少一色塊覆蓋該消費金額之前，該影像處理單元將該信用卡帳單影像進行二值化處理。
如請求項1所述的影像辨識系統，其中該伺服器更包含一決策模組與一推薦資料庫，該決策模組用以比對該商品偏好資訊與該推薦資料庫以得到一推薦策略。
如請求項8所述的影像辨識系統，其中該推薦資料庫包含多個商品廣告，且該決策模組自該些商品廣告中選擇對應該商品偏好資訊的其中一該商品廣告作為該推薦策略。
如請求項8所述的影像辨識系統，更包含通訊連接於該伺服器的一使用者介面，用於顯示出該推薦策略。