TWM649636U - 用於人臉辨識的電子裝置 - Google Patents

Abstract

一種用於人臉辨識的電子裝置。所述電子裝置包括：接收介面，耦接至攝像裝置，以接收攝像裝置所拍攝的人臉影像；儲存器，包括識別模組；以及處理器，耦接至接收介面以及儲存器，經配置以：通過接收介面接收人臉影像；透過識別模組來識別人臉影像的即時狀態；以及基於即時狀態來決定是否發出通知。

Description

用於人臉辨識的電子裝置

本新型創作是有關於一種人工智慧機制，且特別是有關於一種用於人臉辨識的電子裝置。

在各行各業，「看人臉色」是一項重要的能力，人臉富含了很多重要訊息特徵，例如情緒、表情等等。另外，隨著人工智慧(artificial intelligence，AI)演算法日漸成熟，利用深度學習演算法進行學習程序，可建立一種可讓電腦用來從錯誤中學習並持續改善的適應型系統。據此，倘若能夠建立並訓練出一個用以識別人臉狀態的AI模型，藉由AI模型針對人臉特徵進行分析並預測「人臉狀態」，便可達到察「顏」觀色的作用。

本新型創作提供一種用於人臉辨識的電子裝置，可掌握被拍攝者的當下的情緒，以利提供更好的服務。

本新型創作的用於人臉辨識的電子裝置，包括：接收介面， 耦接至攝像裝置，以接收攝像裝置所拍攝的人臉影像；儲存器，包括第一識別模組；以及處理器，耦接至接收介面以及儲存器，經配置以：通過接收介面接收人臉影像；透過第一識別模組來識別人臉影像的即時狀態；以及基於即時狀態來決定是否發出通知。

在本新型創作的一實施例中，所述即時狀態為情緒狀態或專心度，儲存器更包括第二識別模組。第一識別模組與第二識別模組的其中一個用以識別人臉影像的該情緒狀態，其中另一個用以識別人臉影像所對應的被拍攝者的專心度。

在本新型創作的一實施例中，所述儲存器更包括特徵擷取模組。特徵擷取模組用以獲取人臉影像中的指定部位特徵，指定部位特徵包括眼部特徵以及嘴巴特徵至少其中一個。所述處理器經配置以：將指定部位特徵輸入至識別模組，以判斷人臉影像的專心度。

在本新型創作的一實施例中，所述即時狀態為臉部面向方向。所述處理器經配置以：基於臉部面向方向來判斷人臉影像對應的被拍攝者的專心度。

在本新型創作的一實施例中，所述處理器經配置以：將通過接收介面所接收的人臉影像儲存至儲存器的儲存空間。

在本新型創作的一實施例中，所述處理器經配置以：經由無線通訊技術，通過接收介面接收由攝像裝置拍攝的人臉影像。

基於上述，本揭露建置識別模組來對人臉影像進行識別，以獲得被拍攝者的人臉的即時狀態，以達到察「顏」觀色的作用， 提供第一線人員即時掌握客戶的情緒資訊等等，以利提供更好的服務。

100:電子裝置

110:處理器

120:儲存器

121:識別模組

130:接收介面

140:攝像裝置

300U:被拍攝者

310:情緒識別模組

320:特徵擷取模組

330:臉部方向識別模組

340:專心度識別模組

Im:人臉影像

F1:指定部位特徵

F2:臉部面向方向

H1、H2:高度

W1、W2:寬度

R1:情緒狀態

R2:專心度

T1:時間點

圖1是依照本新型創作的一實施例的一種用於人臉辨識的電子裝置的示意圖。

圖2A是依照本新型創作的一實施例的眼睛睜開的示意圖。

圖2B是依照本新型創作的一實施例的眼睛閉合的示意圖。

圖2C是依照本新型創作的一實施例的連續時間下的眼睛縱橫比的曲線圖。

圖3是依照本新型創作的一實施例的用於人臉辨識的架構圖。

圖1是依照本新型創作的一實施例的一種用於人臉辨識的電子裝置的示意圖。請參照圖1，電子裝置100包括處理器110、儲存器120以及接收介面130。處理器110耦接至接收介面130以及儲存器120。儲存器120中包括至少一個識別模組121。接收介面130例如為數據傳輸線。接收介面130耦接至攝像裝置140，以接收攝像裝置140所拍攝的人臉影像。攝像裝置140可以設置為不間斷地擷取被拍攝者的人臉影像，而處理器110將通過接收介面130所接收的人臉影像儲存至儲存器120的儲存空間。

在一實施例中，攝像裝置140可以是設置在電子裝置100所安置位置的附近。在其他實施例中，攝像裝置140也可以設置在遠端使用者所使用的具有運算能力的裝置中，通過無線通訊技術將所擷取的人臉影像傳送給電子裝置100。

處理器110例如為中央處理單元(Central Processing Unit，CPU)、物理處理單元(Physics Processing Unit，PPU)、可程式化之微處理器(Microprocessor)、嵌入式控制晶片、數位訊號處理器(Digital Signal Processor，DSP)、特殊應用積體電路(Application Specific Integrated Circuit，ASIC)或其他類似裝置。

儲存器120例如是任意型式的固定式或可移動式隨機存取記憶體(Random Access Memory，RAM)、唯讀記憶體(Read-Only Memory，ROM)、快閃記憶體(Flash memory)、硬碟或其他類似裝置或這些裝置的組合。識別模組121是由一或多個程式碼片段所組成，上述程式碼片段在被安裝後，會由處理器110來執行。識別模組121例如為經訓練、學習後的神經網路。

在本實施例中，在電子裝置100中建置了識別模組121以利分析人臉影像的情緒狀態及/或專心度，使得櫃檯人員得以更加了解客戶的狀態，有利推廣業務。例如，利用神經網路來建構並訓練識別模組121。在一實施例中，處理器110通過接收介面130接收人臉影像，接著將人臉影像輸入至經訓練後的識別模組121，使得識別模組121直接在所輸入的人臉影像中擷取特徵，並基於這些特徵判斷人臉影像所對應的即時狀態。即時狀態例如為情緒 狀態、專心度或臉部面向方向等，可視識別模組121在建立階段的設定來決定。之後，處理器110基於識別出的即時狀態來決定是否發出通知。

在一實施例中，電子裝置100可應用在金融服務業的情境。在此情境下，在每一個服務櫃台中安置電子裝置100以及攝像裝置140。當客戶於臨櫃辦理業務時，櫃台人員透過電子裝置100所識別的結果即時得知客戶當下的即時狀態，以做出對應的通知。例如，在判定客戶是生氣情緒時，電子裝置100可透過顯示器以文字訊息來提醒櫃台人員，使得櫃台人員可以適時安撫客戶，避免造成客訴案件。又例如，客戶臨櫃辦理大額提款，在透過電子裝置100判定客戶當下的即時狀態為緊張情緒，電子裝置100可透過顯示器來提醒櫃台人員對客戶進行確認身分的程序，藉此來判斷客戶是否遇到詐騙、或者判斷當前的客戶是否有冒認身分。

另外，電子裝置100也可以應用在視訊辦理業務、遠端授課、視訊會議等情境。在此情境下，進行遠端視訊的被拍攝者所使用的電子裝置配備有攝像裝置140，由攝像裝置140來拍攝遠端的被拍攝者的人臉影像，並將人臉影像傳送至電子裝置100，透過電子裝置100所識別的結果即時得知被拍攝者當下的即時狀態(例如專心度)。

另外，在另一實施例中，識別模組121也可以用來識別被拍攝者的臉部面向方向(即時狀態)。處理器110基於臉部面向方向來判斷人臉影像對應的被拍攝者的專心度。

在其他實施例中，儲存器120也可包括兩種不同的識別模組，例如第一識別模組與該第二識別模組。第一識別模組與該第二識別模組中的其中一個用以識別人臉影像的情緒狀態，另一個用以識別人臉影像所對應的被拍攝者的專心度。所述情緒狀態例如為高興、憤怒、悲傷、不耐煩。所述專心度表示被拍攝者是否專注於某一指定方向、被拍攝者是否正在打瞌睡、被拍攝者是否正在恍神、被拍攝者是否處於疲憊狀態等。在其他實施例中，儲存器120也可包括三種或更多識別模組，在此並不限制。

另外，在其他實施例中，儲存器120還可進一步包括特徵擷取模組。特徵擷取模組用以獲取人臉影像中的指定部位特徵。所述指定部位特徵包括眼部特徵以及嘴巴特徵至少其中一個。將指定部位特徵輸入至識別模組121，以判斷人臉影像的專心度。

例如，透過特徵擷取模組在一影像序列(包括連續拍攝的多張人臉影像)中擷取眼睛特徵，並將眼睛特徵輸入至識別模組121，以判斷被拍攝者是否正在打瞌睡。或者，透過特徵擷取模組在影像序列中擷取嘴巴特徵，並將眼睛特徵輸入至識別模組121，以判斷被拍攝者是否正在打瞌睡。

另外，在其他實施例中，也可透過特徵擷取模組在影像序列中擷取眼睛特徵來分析眼睛縱橫比，藉此判斷被拍攝者是否正在打瞌睡。或者，透過特徵擷取模組在影像序列中擷取嘴巴特徵來分析嘴巴縱橫比，藉此判斷被拍攝者是否正在打呵欠。底下舉例來說明如何藉由眼睛縱橫比來判斷被拍攝者是否正在打瞌睡。

圖2A是依照本新型創作的一實施例的眼睛睜開的示意圖。圖2B是依照本新型創作的一實施例的眼睛閉合的示意圖。圖2C是依照本新型創作的一實施例的連續時間下的眼睛縱橫比的曲線圖。特徵擷取模組在人臉影像中找出眼睛區域，並進一步判斷眼睛為睜開狀態或是閉合狀態。

圖2A所示的眼睛為睜開狀態，特徵擷取模組透過擷取眼睛周圍的點來計算出寬度W1與高度H1。之後，計算H1/W1作為睜眼狀態下的眼睛縱橫比。圖2B所示的眼睛為閉合狀態，特徵擷取模組透過擷取眼睛周圍的點來計算出寬度W2與高度H2。之後，計算H2/W2作為閉合狀態下的眼睛縱橫比。圖2C所示為針對連續時間內所拍攝的多個人臉影像所獲得的多個眼睛縱橫比的曲線圖。由圖2C可以看出在時間點T1出現了劇烈的變化，即，被拍攝者可能在時間點T1附近不小心打瞌睡。以上僅為舉例說明，並不以此為限。

圖3是依照本新型創作的一實施例的用於人臉辨識的架構圖。請參照圖1及圖3，在本實施例中，通過攝像裝置140來擷取被拍攝者300U的人臉影像Im。接著，將人臉影像Im分別輸入情緒識別模組310、特徵擷取模組320以及臉部方向識別模組330。

情緒識別模組310用以基於人臉影像Im來識別被拍攝者300U的情緒狀態R1。特徵擷取模組320用以在人臉影像Im中取出指定部位特徵F1(例如眼睛特徵、嘴巴特徵等)。臉部方向識別模組330用以識別被拍攝者300U的臉部面向方向F2。例如，臉 部方向識別模組330透過人臉特徵座標進行分析臉部面向方向F2。藉此，可進一步利用臉部面向方向F2來判斷被拍攝者300U的臉是否有面向著指定方向。例如，在遠端視訊時判斷被拍攝者300U是否面向螢幕、或攝像裝置140的鏡頭。接著，將指定部位特徵F1以及臉部面向方向F2作為專心度識別模組340的輸入，以透過專心度識別模組340來識別被拍攝者300U的專心度R2。

綜上所述，本新型創作透過識別模組來對人臉影像進行識別，以獲得被拍攝者的人臉的即時狀態，以達到察「顏」觀色的作用，提供第一線人員即時掌握客戶的情緒資訊等等，以利提供更好的服務，進而有效推廣業務並降低客訴案件。

100:電子裝置

110:處理器

120:儲存器

121:識別模組

130:接收介面

140:攝像裝置

Claims (6)

1. 一種用於人臉辨識的電子裝置，包括： 一接收介面，耦接至一攝像裝置，以接收該攝像裝置所拍攝的一人臉影像； 一儲存器，包括一第一識別模組；以及 一處理器，耦接至該接收介面以及該儲存器，經配置以： 通過該接收介面接收該人臉影像； 透過該第一識別模組來識別該人臉影像的一即時狀態；以及 基於該即時狀態來決定是否發出通知。
2. 如請求項1所述的用於人臉辨識的電子裝置，其中該即時狀態為一情緒狀態或一專心度，該儲存器更包括一第二識別模組， 該第一識別模組與該第二識別模組的其中一個用以識別該人臉影像的該情緒狀態，其中另一個用以識別該人臉影像所對應的一被拍攝者的該專心度。
3. 如請求項1所述的用於人臉辨識的電子裝置，其中該儲存器更包括一特徵擷取模組， 其中該特徵擷取模組用以獲取該人臉影像中的一指定部位特徵，該指定部位特徵包括一眼部特徵以及一嘴巴特徵至少其中一個， 該處理器經配置以：將該指定部位特徵輸入至該識別模組，以判斷該人臉影像的專心度。
4. 如請求項1所述的用於人臉辨識的電子裝置，其中該即時狀態為一臉部面向方向，該處理器經配置以： 基於該臉部面向方向來判斷該人臉影像對應的一被拍攝者的專心度。
5. 如請求項1所述的用於人臉辨識的電子裝置，其中該處理器經配置以： 將通過該接收介面所接收的該人臉影像儲存至該儲存器的一儲存空間。
6. 如請求項1所述的用於人臉辨識的電子裝置，其中該處理器經配置以： 經由一無線通訊技術，通過該接收介面接收由該攝像裝置拍攝的該人臉影像。

Images