TWM681817U - 身分確認系統及裝置 - Google Patents

Abstract

一種身分確認系統及裝置，其系統包含銀行伺服器與客戶端等裝置，客戶端包含操作偵測模組、與操作偵測模組連接的影像擷取模組、與影像擷取模組連接的特徵擷取模組、與特徵擷取模組連接的活體驗證模組、人臉辨識模組及特徵比對模組、及與活體驗證模組、人臉辨識模組及特徵比對模組連接的密碼檢核模組，透過操作偵測模組偵測使用者進行之目標操作為機敏操作時，由活體驗證模組與人臉辨識模組透過影像擷取模組與特徵擷取模組使用活體驗證與人臉辨識、且由密碼檢核模組使用一次性密碼驗證等機制確認使用者身分，同時在密碼檢核模組進行一次性密碼驗證過程中人臉辨識模組持續辨識使用者的人臉是否發生變化，並在使用者的人臉沒有變化且使用者通過身分確認後執行目標操作之技術手段，可以提供動態臉部監控及身分多重驗證，並達成提升整體資訊安全性與驗證可靠性的技術功效。

Description

身分確認系統及裝置

一種身分確認系統及裝置，特別係指一種在身分驗證時確認驗證者未改變之系統及裝置。

使用者身分驗證，也就是使用者提供自身的身分訊息（如使用者名稱、使用者帳號、身分證號碼等）與個人的專有證明（如密碼、軌跡圖形、生物特徵等）給電腦系統或電腦軟體，藉以通過電腦系統或電腦軟體的認證。

目前，在大多數的電腦系統與電腦軟體中，大多存在使用者身分驗證機制，然而，對於部分能夠存取機敏資料的電腦系統與電腦軟體（如政府或銀行所提供的應用系統或應用程式）而言，僅僅使用使用者的身分訊息與專有證明進行身分驗證的安全性是不足的，當使用者的身分訊息被有心人士惡意使用時，使用者的專有證明往往會被其他的惡意程式不斷嘗試，一旦使用者的專有證明被惡意程式猜中，將導致使用者的機敏資料被盜取，造成使用者的損失。

為了增加身分驗證的可靠性，隨著網路的發展及影像辨識之相關技術的進步，臉部辨識與一次性密碼（OTP）驗證被廣泛應用於使用者的身分驗證流程，這在確實一定程度上增加了身分驗證的可靠性。然而，目前大多數的身分驗證系統在進行臉部辨識時，僅單次擷取人臉影像進行比對，或將臉部辨識與一次性密碼驗證分離處理，並未整合兩種不同的身分驗證機制，如此，並無法在一次性密碼驗證的過程中有效防止畫面置換、中途換人等風險，導致身分驗證系統被有心人士惡意破解。

綜上所述，可知先前技術中長期以來一直存在現有身分驗證機制的安全性仍有不足的問題，因此有必要提出改進的技術手段，來解決此一問題。

有鑒於先前技術存在現有身分驗證機制的安全性仍有不足的問題，本創作遂揭露一種身分確認系統及裝置，其中：

本創作所揭露之身分確認系統，至少包含：銀行伺服器與客戶端，客戶端更包含：操作偵測模組，用以偵測使用者於銀行應用程式中之目標操作是否為機敏操作；影像擷取模組，用以於操作偵測模組判斷目標操作為機敏操作時擷取使用者之第一臉部影像；特徵擷取模組，用以由第一臉部影像中擷取第一影像特徵；身分確認模組，用以依據第一影像特徵透過銀行伺服器進行活體驗證及人臉辨識；密碼檢核模組，用以於活體驗證及人臉辨識通過後進行一次性密碼驗證，使客戶端於一次性密碼驗證通過後執行目標操作；其中，影像擷取模組更用以於一次性密碼驗證過程中，持續擷取第二臉部影像，特徵擷取模組更用以由每第二臉部影像中擷取第二影像特徵，密碼檢核模組更用以於身分確認模組透過銀行伺服器判斷第二影像特徵與第一影像特徵之變化達到臉部差異門檻值時，結束一次性密碼驗證。

本創作所揭露之身分確認裝置，至少包含：操作偵測模組，用以偵測使用者於銀行應用程式中之目標操作是否為機敏操作；影像擷取模組，用以於操作偵測模組判斷目標操作為機敏操作時擷取使用者之第一臉部影像；特徵擷取模組，用以由第一臉部影像中擷取第一影像特徵；活體驗證模組，用以依據第一影像特徵進行活體驗證；人臉辨識模組，用以依據第一影像特徵進行人臉辨識；特徵比對模組；密碼檢核模組，用以於活體驗證及人臉辨識通過後進行一次性密碼驗證，使客戶端於一次性密碼驗證通過後執行目標操作；其中，影像擷取模組更用以於一次性密碼驗證過程中，持續擷取第二臉部影像，特徵擷取模組更用以由每第二臉部影像中擷取第二影像特徵，密碼檢核模組更用以於特徵比對模組判斷第二影像特徵與第一影像特徵之變化達到臉部差異門檻值時，結束一次性密碼驗證。

本創作所揭露之系統及裝置如上，與先前技術之間的差異在於本創作透過偵測使用者進行之目標操作為機敏操作時，使用活體驗證、人臉辨識、一次性密碼驗證等機制確認使用者身分，同時在一次性密碼驗證過程中持續辨識使用者的人臉是否發生變化，並在使用者的人臉沒有變化且使用者通過身分確認後執行目標操作，藉以解決先前技術所存在的問題，並可以達成提升整體資訊安全性與驗證可靠性的技術功效。

以下將配合圖式及實施例來詳細說明本創作之特徵與實施方式，內容足以使任何熟習相關技藝者能夠輕易地充分理解本創作解決技術問題所應用的技術手段並據以實施，藉此實現本創作可達成的功效。

本創作可以在機敏操作被執行前先進行活體驗證、人臉識別、一次性密碼驗證等身分確認機制，並持續進行活體驗證以確認進行驗證的使用者沒有改變，直到一次性密碼驗證成功完成。

本創作所提之活體驗證可以用來驗證拍攝目標（使用者）是否為活體。在部分的實施例中，本創作可以先決定待驗證動作並給予使用者與待驗證動作對應的動作指示，同時持續擷取使用者影像，並判斷使用者影像中之使用者的實際動作是否與待驗證動作相符，若是，則表示使用者通過活體辨識，若否，則表示使用者沒有通過活體辨識。但本創作所提之活體辨識的方式並不以上述為限。

本創作通常需要透過銀行伺服器與客戶端互動來實現，實現本創作之銀行伺服器與客戶端都可以是計算設備。本創作所提之計算設備包含但不限於一個或多個處理模組、一條或多條記憶體模組、以及連接不同硬體元件（包括記憶體模組和處理模組）的匯流排等硬體元件。透過所包含之多個硬體元件，計算設備可以載入並執行作業系統，使作業系統在計算設備上運行，也可以執行軟體或程式。計算設備也包含一個外殼，上述之各個硬體元件設置於外殼內。

本創作所提之計算設備的匯流排可以包含一種或多個類型，例如包含資料匯流排（data bus）、位址匯流排（address bus）、控制匯流排（control bus）、擴充功能匯流排（expansion bus）、及/或局域匯流排（local bus）等類型的匯流排。計算設備的匯流排包括但不限於的工業標準架構（Industry Standard Architecture, ISA）匯流排、周邊元件互連（Peripheral Component Interconnect, PCI）匯流排、視頻電子標準協會（Video Electronics Standards Association, VESA）局域匯流排、以及串列的通用序列匯流排（Universal Serial Bus, USB）、快速周邊元件互連（PCI Express, PCI-E/PCIe）匯流排等。

本創作所提之計算設備的處理模組與匯流排耦接。處理模組包含暫存器（Register）組或暫存器空間，暫存器組或暫存器空間可以完全的被設置在處理模組之處理晶片上，或全部或部分被設置在處理晶片外並經由專用電氣連接及/或經由匯流排耦接至處理晶片。處理模組可為中央處理器、微處理器或任何合適的處理元件。若計算設備為多處理器設備，也就是計算設備包含多個處理模組，則計算設備所包含的處理模組都相同或類似，且透過匯流排耦接與通訊。在部分的實施例中，處理模組可以解釋一個計算機指令或一連串的多個計算機指令以進行特定的運算或操作，例如，數學運算、邏輯運算、資料比對、複製/移動資料等，藉以驅動計算設備中的其他硬體元件或運行作業系統或執行各種程式及/或模組。計算機指令可以是組合語言指令、指令集架構指令、機器指令、機器相關指令、微指令、韌體指令、或者以一種或多種程式語言的任意組合編寫的原始碼或目的碼（Object Code），且計算機指令可以完全地在單一個計算設備上被執行、部分地在單一個計算設備上被執行、部分在一個計算設備上被執行且部分在相連接之另一計算設備上被執行。其中，上述之程式語言包括物件導向（Object-oriented）的程式語言，如Common Lisp、Python、C++、Objective-C、Smalltalk、Delphi、Java、Swift、C#、Perl、Ruby等，及常規的程序式（Procedural）程式語言，如C語言或其他類似的程式語言。

計算設備中通常也包含一個或多個晶片組（Chipset）。計算設備的處理模組可以與晶片組耦接或透過匯流排與晶片組電性連接。晶片組是由一個或多個積體電路（Integrated Circuit, IC）組成，包含記憶體控制器以及周邊輸出入（I/O）控制器等，也就是說，記憶體控制器以及周邊輸出入控制器可以包含在一個積體電路內，也可以使用兩個或更多的積體電路實現。晶片組通常提供了輸出入和記憶體管理功能、以及提供多個通用及/或專用暫存器、計時器等，其中，上述之通用及/或專用暫存器與計時器可以讓耦接或電性連接至晶片組的一個或多個處理模組存取或使用。在部分的實施例中，晶片組也可能屬於處理模組的一部份。

計算設備的處理模組也可以透過記憶體控制器存取安裝於計算設備上的記憶體模組和大容量儲存區中的資料。上述之記憶體模組包含任何類型的揮發性記憶體（volatile memory）及/或非揮發性（non-volatile memory, NVRAM）記憶體，例如靜態隨機存取記憶體（Static Random Access Memory, SRAM）、動態隨機存取記憶體（Dynamic Random Access Memory, DRAM）、唯讀記憶體（Read-Only Memory, ROM）、快閃記憶體（Flash memory）等。上述之大容量儲存區可以包含任何類型的儲存裝置或儲存媒體，例如，硬碟機、光碟（optical disc）、隨身碟（flash drive）、記憶卡（memory card）、固態硬碟（Solid State Disk, SSD）、或任何其他儲存裝置等。也就是說，記憶體控制器可以存取靜態隨機存取記憶體、動態隨機存取記憶體、快閃記憶體、硬碟機、固態硬碟中的資料。

計算設備的處理模組也可以透過周邊輸出入控制器經由周邊輸出入匯流排與周邊輸出裝置、周邊輸入裝置、通訊介面、各種資料或訊號接收裝置等周邊裝置或介面連接並通訊。周邊輸入裝置可以是任何類型的輸入裝置，例如鍵盤、滑鼠、軌跡球、觸控板、搖桿等，周邊輸出裝置可以是任何類型的輸出裝置，例如顯示器、印表機等，周邊輸入裝置與周邊輸出裝置也可以是同一裝置，例如觸控螢幕等。通訊介面可以包含無線通訊介面及/或有線通訊介面，無線通訊介面可以包含支援無線區域網路（如Wi-Fi、Zigbee等）、藍牙、紅外線、近場通訊（Near-field communication, NFC）、3G/4G/5G等行動通訊網路（蜂巢式網路）或其他無線資料傳輸協定的介面，有線通訊介面可為乙太網路裝置、DSL數據機、纜線（Cable）數據機、非同步傳輸模式（Asynchronous Transfer Mode, ATM）裝置、或光纖通訊介面及/或元件等。資料或訊號接收裝置可以包含GPS接收器或生理訊號接收器，生理訊號接收器所接收的生理訊號包含但不限於心跳、血氧等。處理模組可以週期性地輪詢（polling）各種周邊裝置與介面，使得計算設備能夠透過各種周邊裝置與介面進行資料的輸入與輸出，也能夠與具有上面描述之硬體元件的另一個計算設備進行通訊。

以下先以「第1圖」本創作所提之裝置之元件示意圖來說明實現本創作的裝置。如「第1圖」所示，本創作所提之裝置100含有記憶體110、影像擷取單元120、通訊介面130、儲存媒體140、輸出入單元150、處理器170、匯流排190。記憶體110、影像擷取單元120、通訊介面130、儲存媒體140、輸出入單元150、處理器170透過匯流排190相互連接。其中，影像擷取單元120與輸出入單元150為可附加的元件，也就是說，本創作所提之裝置100中可能沒有影像擷取單元120及/或輸出入單元150。

記憶體110可以儲存一組或多組計算機指令。

影像擷取單元120可以包含電路板、鏡頭組件與影像感測元件（圖中均未示），鏡頭組件與影像感測元件透過電路板連接，鏡頭組件可以讓光線通過並讓通過的光線照射於影像感測元件上，影像感測元件可以將照射在感光元件上的光線轉換為影像訊號，如此，影像擷取單元120可以透過鏡頭組件與影像感測元件擷取影像。

通訊介面130可以連線到外部的網路儲存裝置或伺服器等網路裝置，並向所連線的網路裝置請求並下載資料。

儲存媒體140可以儲存儲存通訊介面130所下載的資料或訊號，也可以儲存提供給處理器170或處理器170運作時所需要的資料或訊號，還可以儲存處理器170所產生的資料或訊號。

輸出入單元150可以透過裝置100的周邊輸入裝置提供輸入資料。例如，輸出入單元150可以透過鍵盤、滑鼠、觸控板、觸控螢幕輸入資料。

輸出入單元150也可以透過裝置100的周邊輸出裝置輸出處理器170所產生的資料。例如，輸出入單元150可以透過顯示器或觸控螢幕顯示資料。

處理器170可以執行記憶體110所儲存的計算機指令，並可以在執行計算機指令後產生一個或多個軟體模組；在另一部份的實施例中，處理器170中的各模組可以是由一個或多個電路及/或完整或部分的晶片等硬體元件產生，即處理器170包含一個或多個硬體模組。也就是說，處理器170所包含的各模組可以是軟體模組，也可以是硬體模組，本創作沒有特別的限制。

繼續以「第2圖」本創作所提之身分確認銀行伺服器之模組示意圖及「第3A圖」與「第3B圖」本創作所提之身分確認客戶端之模組示意圖來說明本創作之系統。

在「第2圖」中，銀行伺服器200的處理器170a包含伺服傳輸模組210、活體驗證模組220、人臉辨識模組230、密碼檢核模組240、特徵比對模組250等模組。其中，伺服傳輸模組210與活體驗證模組220、人臉辨識模組230、密碼檢核模組240、特徵比對模組250等模組連接。

伺服傳輸模組210可以透過銀行伺服器200的通訊介面130a與客戶端300連接，並相互傳遞資料與訊號，例如，接收客戶端300所傳送的影像特徵、時間戳、裝置訊息等，又如，傳送活體驗證結果、人臉辨識結果、一次性密碼、驗證權杖（token）給客戶端300。在部分的實施例中，若伺服傳輸模組210也可以將所傳遞的資料或訊號進行壓縮或加密等處理，相對的，若客戶端300所傳送的資料或訊號經過壓縮或加密處理，伺服傳輸模組210也可以將所接收到的資料或訊號解壓縮或解密。

活體驗證模組220可以取得伺服傳輸模組210所接收到的第一影像特徵，並依據取得的第一影像特徵進行活體驗證。例如，活體驗證模組220可以決定驗證動作並取得相對應的動作指示與動作特徵資料，且可以透過伺服傳輸模組210將動作指示傳送給客戶端300，活體驗證模組220也可以透過伺服傳輸模組210接收客戶端300所傳送的第一影像特徵，並可以判斷所接收到的第一影像特徵與所取得之動作特徵資料的相似度以產生活體驗證結果；又如，活體驗證模組220也可以直接透過伺服傳輸模組210接收客戶端300所傳送的第一影像特徵，並依據第一影像特徵所表示之臉部深度及/或紅外線訊息產生活體驗證結果。活體驗證模組220還可以將所產生的活體驗證結果傳回客戶端300。

人臉辨識模組230可以取得伺服傳輸模組210所接收到的第一影像特徵，並依據所取得的第一影像特徵進行人臉辨識，藉以判斷客戶端300之使用者的身分。舉例來說，人臉辨識模組230可以透過伺服傳輸模組210接收客戶端300所傳送的第一影像特徵，並可以計算所接收到的第一影像特徵與預先儲存於銀行伺服器200之儲存媒體140a中的使用者之人臉影像特徵的相似度以產生人臉辨識結果，及可以將人臉辨識結果傳回客戶端300。

需要特別一提的是，在本創作中，活體驗證結果與人臉辨識結果通常是表示通過或未通過的資料，但本創作並不以此為限，例如，活體驗證結果與人臉辨識結果也可能是表示識別可信度的資料。透過表示識別可信度的資料可以將通過或未通過的判斷結果交由客戶端300決定。

密碼檢核模組240也可以透過伺服傳輸模組210接收客戶端300所傳送的時間戳及/或裝置訊息，並可以驗證所接收到的時間戳與裝置訊息。舉例來說，密碼檢核模組240可以判斷所接收到的裝置訊息是否與預先記錄之客戶端300的裝置訊息一致，並可以在所接收到之裝置訊息與預先記錄之裝置訊息不一致時結束本次的身分驗證。

密碼檢核模組240可以取得伺服傳輸模組210所接收到的待驗證資料，並依據所接收到的待驗證資料進行一次性密碼驗證。更詳細的，密碼檢核模組240可以產生一次性密碼，及可以透過伺服傳輸模組210將一次性密碼傳送給客戶端300，並可以比對所接收到的待驗證密碼與所產生的一次性密碼是否相同以產生一次性密碼的驗證結果，及可以將一次性密碼的驗證結果傳回客戶端300。其中，密碼檢核模組240可以在活體驗證模組220所產生之活體驗證結果表示活體驗證通過且人臉辨識模組230所產生之人臉辨識結果表示人臉辨識通過時產生一次性密碼，也可以在接收到客戶端300的一次性密碼的請求時產生一次性密碼。

密碼檢核模組240也可以在活體驗證模組220所產生的活體驗證結果與人臉辨識模組230所產生的人臉辨識結果都表示為通過時，產生驗證權杖，並可以在比對待驗證密碼與一次性密碼前，先比對伺服傳輸模組210所接收到之待驗證資料是否與所產生的驗證權杖一致。其中，待驗證資料與待驗證密碼一同由客戶端300被傳送到銀行伺服器200。

在部分的實施例中，密碼檢核模組240還可以判斷客戶端300的風險，並可以依據所判斷出之風險決定傳送一次性密碼的通道，例如，透過電子郵件、簡訊、即時訊息、推播訊息等通道傳送一次性密碼。其中，密碼檢核模組240可以依據客戶端300的網路位置或裝置訊息判斷客戶端300的風險，例如，依據預先建立之網段風險對應表取得客戶端300之網路位址的風險等級，並在所取得之風險等級較高時，使用安全性較高的通道（如簡訊或推播訊息等）傳送一次性密碼，或在所取得之風險等級較低時，使用如電子郵件或即時訊息等通道傳送一次性密碼。

特徵比對模組250可以取得伺服傳輸模組210所接收到的第一影像特徵與第二影像特徵，並可以比對所取得的第一影像特徵與第二影像特徵，藉以判斷第一影像特徵與第二影像特徵的變化是否達到臉部差異門檻值且產生相對應的變化判斷結果，特徵比對模組250也可以依據接收到第二影像特徵的時序比對連續兩個接收到的第二影像特徵的變化以判斷第二影像特徵的變化是否達到臉部差異門檻值同時產生相對應的變化判斷結果。特徵比對模組250也可以透過伺服傳輸模組210將所產生的變化判斷結果傳回客戶端300。其中，第一影像特徵與第二影像特徵可以是特徵向量，如此，特徵比對模組250可以使用餘弦相似度、時序聚類分析（如 K-means或DBSCAN）、變異度監控等方式產生變化判斷結果，更詳細的，特徵比對模組250可以將第一影像特徵作為基準，計算其與每個第二影像特徵的餘弦相似度，當被計算出之餘弦相似度中低於臉部差異門檻值的數量或比例達到數量預定值時，特徵比對模組250可以產生臉部發生變化的判斷結果；特徵比對模組250也可以對第一影像特徵與第二影像特徵進行聚類，當出現兩個以上的群聚中心時，特徵比對模組250可以產生臉部發生變化（切換或偽冒）的判斷結果；特徵比對模組250也可以計算各影像特徵（包含第一影像特徵與第二影像特徵）間的變異度（如標準差、平均距離等），當變異發生變化的程度（如上升或下降）達到變異預定值時，特徵比對模組250可以產生臉部發生變化的判斷結果。

在部分的實施例中，特徵比對模組250也可以依據接收第二影像特徵的時序由每個第二影像特徵與第一影像特徵計算臉部相似度，並判斷所計算出之各個臉部相似度之變化趨勢是否達到臉部差異門檻值。

在「第3A圖」中，客戶端300的處理器170b包含操作偵測模組310、影像擷取模組320、特徵擷取模組330、應用傳輸模組340、活體驗證模組350、人臉辨識模組360、特徵比對模組370、密碼檢核模組380等模組。其中，操作偵測模組310與影像擷取模組320連接，影像擷取模組320與特徵擷取模組330連接，特徵擷取模組330與活體驗證模組350、人臉辨識模組360及特徵比對模組370連接，活體驗證模組350、人臉辨識模組360及特徵比對模組370也與密碼檢核模組380及應用傳輸模組340連接，密碼檢核模組380也與應用傳輸模組340連接。

操作偵測模組310負責偵測客戶端300之使用者在客戶端300所執行之銀行應用程式中的目標操作是否為機敏操作。舉例來說，操作偵測模組310可以判斷使用者於銀行應用程式中所點選的功能選項是否為機敏功能所對應之功能選項、也可以判斷使用者於銀行應用程式中所點選的功能選項是否為需切換身分之功能或權限所對應的功能選項、或可以依據目標操作前之操作訊息或其他操作分類目標操作是否為機敏操作，但操作偵測模組310偵測目標操作是否為機敏操作的方式並不以上述為限。舉例來說，轉帳、解除裝置綁定、修改身分資訊等功能都屬於機敏功能。

影像擷取模組320負責透過客戶端300的影像擷取單元120擷取客戶端300之使用者的臉部影像。在本創作中，影像擷取模組320可以在操作偵測模組310偵測到使用者之目標操作為機敏操作時擷取臉部影像，也可以在密碼檢核模組驗證一次性密碼之過程中擷取臉部影像，其中，影像擷取模組320在操作偵測模組310偵測到目標操作為機敏操作時所擷取的臉部影像被稱為第一臉部影像，而在密碼檢核模組驗證一次性密碼之過程中所擷取的臉部影像被稱為第二臉部影像。

特徵擷取模組330負責由影像擷取模組320所擷取到之臉部影像中擷取出影像特徵。特徵擷取模組330所擷取出之影像特徵通常為向量的形式，也就是說，影像特徵通常是特徵向量，但本創作並不以此為限。在本創作中，特徵擷取模組330由第一臉部影像所擷取出之影像特徵被稱為第一影像特徵，由第二臉部影像所擷取出之影像特徵被稱為第二影像特徵。

應用傳輸模組340可以透過客戶端300的通訊介面130b與銀行伺服器200連接，並相互傳遞資料與訊號。應用傳輸模組340也可以將所傳遞的資料或訊號進行壓縮或加密等處理，相對的，若銀行伺服器200所傳送的資料或訊號經過壓縮或加密處理，應用傳輸模組340也可以將所接收到的資料或訊號解壓縮或解密。

活體驗證模組350可以透過應用傳輸模組340將特徵擷取模組330所產生的第一影像特徵傳送給銀行伺服器200，並可以透過應用傳輸模組340接收銀行伺服器200所傳回的活體驗證結果。要說明的是，若活體驗證模組350所接收到的活體驗證結果並非表示使用者是否通過活體驗證，而是表示識別可信度的資料，則活體驗證模組350可以依據識別可信度之資料決定使用者是否通過活體驗證。舉例來說，活體驗證模組350可以判斷識別可信度之資料是否達到活體驗證門檻值，若是，則活體驗證模組350可以判斷使用者通過活體驗證，否則判斷使用者沒有通過活體驗證。

活體驗證模組350也可以依據活體驗證結果表示使用者通過或未通過活體驗證產生對應的第一控制訊息，並可以將所產生的第一控制訊息提供給密碼檢核模組380。

人臉辨識模組360同樣可以透過應用傳輸模組340將特徵擷取模組330所產生的第一影像特徵傳送給銀行伺服器200，並可以透過應用傳輸模組340接收銀行伺服器200所傳回的人臉辨識結果。要說明的是，若人臉辨識模組360所接收到的人臉辨識結果並非表示使用者的人臉是否通過人臉識別，而是表示識別可信度的資料，則人臉辨識模組360可以依據識別可信度之資料決定使用者是否通過活體驗證。舉例來說，人臉辨識模組360可以判斷識別可信度之資料是否達到人臉識別門檻值，若是，則人臉辨識模組360可以判斷使用者通過人臉識別，否則判斷使用者沒有通過人臉識別。

人臉辨識模組360也可以依據人臉辨識結果表示使用者通過或未通過人臉辨識（即使用者的人臉與銀行伺服器200所記錄之人臉相符）產生相對應的第二控制訊息，並可以將所產生的第二控制訊息提供給密碼檢核模組380。

特徵比對模組370也可以在密碼檢核模組380驗證一次性密碼的過程中，透過應用傳輸模組340將特徵擷取模組330所擷取到的第二影像特徵傳送到銀行伺服器200，並可以透過應用傳輸模組340接收銀行伺服器200所傳回的變化判斷結果。

特徵比對模組370也可以在所接收到之變化判斷結果表示判斷臉部差異門檻值被達到時，產生終止控制訊息。

密碼檢核模組380可以在活體驗證模組350所產生的第一控制訊息表示活體驗證通過且人臉辨識模組360所產生的第二控制訊息表示人臉辨識通過時，透過應用傳輸模組340向銀行伺服器200請求產生一次性密碼，並可以透過客戶端300的輸出入單元150提供客戶端300之使用者輸入待驗證資料，藉以開始驗證一次性密碼的過程。

但密碼檢核模組380開始驗證一次性密碼之過程的方式並不以上述為限，在部分的實施例中，密碼檢核模組380也可以在活體驗證模組350與人臉辨識模組360透過應用傳輸模組340將第一影像特徵傳送到銀行伺服器200後直接提供客戶端300之使用者輸入待驗證資料。

密碼檢核模組380也可以透過應用傳輸模組340將被輸入的待驗證資料傳送到銀行伺服器200，及可以透過應用傳輸模組340接收銀行伺服器200所傳回之一次性密碼驗證的驗證結果。

密碼檢核模組380也可以在所接收到之一次性密碼驗證的驗證結果表示沒有通過一次性密碼驗證時，或可以在特徵比對模組370產生終止控制訊息時，結束一次性密碼的驗證。

在「第3B圖」中呈現了實現本創作的另一種系統，客戶端300的處理器170b同樣包含操作偵測模組310、影像擷取模組320、特徵擷取模組330、應用傳輸模組340、活體驗證模組350、人臉辨識模組360、特徵比對模組370、密碼檢核模組380等模組。其中，相同的是，操作偵測模組310與影像擷取模組320連接，影像擷取模組320與特徵擷取模組330連接，特徵擷取模組330與活體驗證模組350、人臉辨識模組360及特徵比對模組370連接，活體驗證模組350、人臉辨識模組360及特徵比對模組370也與密碼檢核模組380連接，活體驗證模組350與密碼檢核模組380也與應用傳輸模組340連接；但不同的是，人臉辨識模組360與特徵比對模組370可以不與應用傳輸模組340連接。

操作偵測模組310、影像擷取模組320、特徵擷取模組330與「第3A圖」中相同，活體驗證模組350、人臉辨識模組360、特徵比對模組370、密碼檢核模組380則與「第2圖」中之活體驗證模組220、人臉辨識模組230、特徵比對模組250、密碼檢核模組240的運作方式相似，差別在於應用傳輸模組340不需要將第一影像特徵、第二影像特徵傳送到銀行伺服器200並接收銀行伺服器200所傳回的活體驗證結果與人臉辨識結果，活體驗證模組350不需要透過應用傳輸模組340取得活體驗證結果而可以如銀行伺服器200之活體驗證模組220直接對特徵擷取模組330所產生之第一影像特徵、第二影像特徵進行活體驗證而產生活體驗證結果、人臉辨識模組360不需要透過應用傳輸模組340取得人臉辨識結果而可以如銀行伺服器200之人臉辨識模組230直接對特徵擷取模組330所產生之第一影像特徵、第二影像特徵進行人臉辨識而產生人臉辨識結果、特徵比對模組370不需要透過應用傳輸模組340取得第一影像特徵、第二影像特徵而可以直接取得特徵擷取模組330所產生之第一影像特徵、第二影像特徵。

另外，在部分的實施例中，活體驗證模組350與人臉辨識模組360也可以整合為身分確認模組（圖中未示），由於身分確認模組包含上述活體驗證模組350與人臉辨識模組360的所有功能，故不再多加描述。

接著以一個實施例來解說本創作的系統運作，並請參照「第4A圖」本創作所提之在身分驗證時確認驗證者未改變之流程圖。在本實施例中，假設客戶端300為手機或平板等行動裝置，且客戶端300上安裝有提供網路銀行或行動銀行之服務的銀行應用程式，其中，提供銀行應用程式的銀行也提供銀行伺服器200的服務。

在客戶端300之使用者操作客戶端300執行銀行應用程式後，客戶端300的操作偵測模組310可以偵測使用者在銀行應用程式中的目標操作是否為機敏操作，當操作偵測模組310偵測到目標操作為機敏操作時，客戶端300的影像擷取模組320可以擷取使用者的第一臉部影像（步驟410）。在本實施例中，若透過指定動作的方式進行活體驗證，則在操作偵測模組310偵測到目標操作為機敏操作時，客戶端300的活體驗證模組350可以透過客戶端300的應用傳輸模組340向銀行伺服器200發送活體驗證請求，銀行伺服器200的活體驗證模組220在透過銀行伺服器200的伺服傳輸模組210接收到活體驗證請求後，可以產生指定動作並取得相對應的動作提示與動作特徵資料，且可以透過伺服傳輸模組210將所取得的動作提示傳回客戶端300，使得影像擷取模組320可以透過客戶端300的輸出入單元150顯示動作提示，並擷取第一臉部影像；而若是透過景深或紅外線進行活體驗證，則在操作偵測模組310偵測到目標操作為機敏操作時，影像擷取模組320可以直接擷取第一臉部影像。

在客戶端300的影像擷取模組320擷取使用者的第一臉部影像（步驟410）後，客戶端300的特徵擷取模組330可以由影像擷取模組320所擷取出之第一臉部影像中擷取出第一影像特徵（步驟420），且客戶端300的活體驗證模組350與人臉辨識模組360可以依據特徵擷取模組330所產生的第一影像特徵分別進行活體驗證與人臉辨識（步驟430）。在本實施例中，若活體驗證是在客戶端300上進行，則活體驗證模組350可以依據第一影像特徵與銀行伺服器200所傳送的動作特徵資料的相似度產生活體驗證之驗證結果，而若活體驗證是在銀行伺服器200上進行，則如「第4B圖」之流程所示，活體驗證模組350可以透過客戶端300的應用傳輸模組340將第一影像特徵傳送到銀行伺服器200，銀行伺服器200的活體驗證模組220在透過銀行伺服器200的伺服傳輸模組210接收到客戶端300所傳送的第一影像特徵後，可以依據所接收到之第一影像特徵與所取得之動作特徵資料的相似度產生活體驗證之驗證結果（步驟431），並可以透過伺服傳輸模組210將所產生之活體驗證之驗證結果傳回客戶端300，使得活體驗證模組350可以透過應用傳輸模組340接收到銀行伺服器所產生的活體驗證之驗證結果；另外，若人臉辨識是在客戶端300上進行，則人臉辨識模組360可以依據第一影像特徵與客戶端300之儲存媒體140b所儲存的人臉特徵資料的相似度產人臉辨識的辨識結果，而若人臉辨識是在銀行伺服器200上進行，則如「第4B圖」之流程所示，人臉辨識模組360可以透過客戶端300的應用傳輸模組340將第一影像特徵傳送到銀行伺服器200，銀行伺服器200的人臉辨識模組230在透過銀行伺服器200的伺服傳輸模組210接收到客戶端300所傳送的第一影像特徵後，可以依據所接收到之第一影像特徵與銀行伺服器200中所儲存之使用者的人臉特徵資料的相似度產生人臉辨識之辨識結果（步驟431），並可以透過伺服傳輸模組210將所產生之辨識結果傳回客戶端300，使得活體驗證模組350可以透過應用傳輸模組340接收到銀行伺服器所產生的人臉辨識之辨識結果。

在客戶端300的活體驗證模組350取得活體驗證之驗證結果後，活體驗證模組350可以判斷活體驗證之驗證結果是否表示通過，相似的，在客戶端300的人臉辨識模組360取得人臉辨識之辨識結果後，人臉辨識模組360可以判斷人臉辨識之辨識結果是否表示通過。客戶端300的密碼檢核模組380可以在活體驗證模組350判斷活體驗證之驗證結果表示通過且人臉辨識模組360判斷人臉辨識之辨識結果表示通過時，進行一次性密碼驗證（步驟440）。在本實施例中，假設密碼檢核模組380可以透過客戶端300的應用傳輸模組340向銀行伺服器200發送一次性密碼的請求，並提供客戶端300的使用者輸入待驗證資料，銀行伺服器200的密碼檢核模組240可以在透過銀行伺服器200的伺服傳輸模組210接收到一次性密碼的請求後，可以隨機產生一次性密碼，並可以判斷各種通道的風險，且可以透過伺服傳輸模組210使用風險最低的通道將所產生的一次性密碼傳送給客戶端300，使得客戶端300的使用者在透過客戶端300取得一次性密碼後，將所取得的一次性密碼作為待驗證資料輸入到客戶端300。若一次性密碼的驗證是在客戶端300中進行，則密碼檢核模組380可以判斷被輸入的待驗證資料與銀行伺服器200所傳送的一次性密碼是否相同，並依據判斷結果產生相對應的驗證結果；而若一次性密碼的驗證是在客戶端300中進行，則如「第4B圖」之流程所示，密碼檢核模組380可以透過應用傳輸模組340將待驗證資料傳送到銀行伺服器200（步驟441），密碼檢核模組240在透過伺服傳輸模組210接收到待驗證資料後，可以判斷所接收到的待驗證資料與所產生的一次性密碼是否相同，並依據判斷結果產生相對應的驗證結果，且可以將所產生的驗證結果透過伺服傳輸模組210傳回客戶端300（步驟445）。

在客戶端300的密碼檢核模組380取得一次性密碼的驗證結果後，密碼檢核模組380可以依據所取得的驗證結果判斷一次性密碼驗證是否通過（步驟450），若是，則客戶端300可以執行目標操作（步驟490），若否，表示使用者仍在一次性密碼驗證的過程中，客戶端300的影像擷取模組320可以持續擷取第二臉部影像，客戶端300的特徵擷取模組330可以持續地由影像擷取模組320所取得的第二臉部影像中擷取出第二影像特徵（步驟460），且客戶端300的特徵比對模組370可以判斷影像擷取模組320所取得之第一影像特徵與第二影像特徵的變化是否達到預先設定的臉部差異門檻值，若否，則客戶端300的密碼檢核模組380可以再次判斷一次性密碼驗證是否通過（步驟450），直到使用者完成一次性密碼驗證。

而若客戶端300的特徵比對模組370判斷客戶端300的影像擷取模組320所取得之第一影像特徵與第二影像特徵的變化達到臉部差異門檻值，則客戶端300的密碼檢核模組380可以結束一次性密碼驗證（步驟470）。在本實施例中，假設如「第4C圖」之流程所示，特徵比對模組370可以依據時序由每個第二臉部影像中所擷取之第二影像特徵與第一影像特徵計算臉部相似度（步驟471），並判斷臉部相似度之變化趨勢是否達到臉部差異門檻值（步驟475），若是，則密碼檢核模組380可以結束一次性密碼驗證（步驟479），若否，則密碼檢核模組380可以再次判斷一次性密碼驗證是否通過（步驟450）。

如此，透過本創作，可以在使用者進行機敏操作時，透過活體驗證、人臉識別及一次性密碼驗證來確認使用者的身分。

綜上所述，可知本創作與先前技術之間的差異在於具有偵測使用者進行之目標操作為機敏操作時，使用活體驗證、人臉辨識、一次性密碼驗證等機制確認使用者身分，同時在一次性密碼驗證過程中持續辨識使用者的人臉是否發生變化，並在使用者的人臉沒有變化且使用者通過身分確認後執行目標操作之技術手段，藉由此一技術手段可以來解決先前技術所存在現有身分驗證機制的安全性仍有不足的問題，進而達成提升整體資訊安全性與驗證可靠性的技術功效。

再者，本創作之身分確認裝置，可實現於硬體、韌體或硬體與韌體之組合中，亦可在電腦系統中以集中方式實現或以不同元件散佈於若干互連之電腦系統的分散方式實現。

雖然本創作所揭露之實施方式如上，惟所述之內容並非用以直接限定本創作之專利保護範圍。任何本創作所屬技術領域中具有通常知識者，在不脫離本創作所揭露之精神和範圍的前提下，對本創作之實施的形式上及細節上作些許之更動潤飾，均屬於本創作之專利保護範圍。本創作之專利保護範圍，仍須以所附之申請專利範圍所界定者為準。

100:裝置 110:記憶體 120:影像擷取單元 130:通訊介面 140:儲存媒體 150:輸出入單元 170:處理器 190:匯流排 200:銀行伺服器 210:伺服傳輸模組 220:活體驗證模組 230:人臉辨識模組 240:密碼檢核模組 250:特徵比對模組 300:客戶端 310:操作偵測模組 320:影像擷取模組 330:特徵擷取模組 340:應用傳輸模組 350:活體驗證模組 360:人臉辨識模組 370:特徵比對模組 380:密碼檢核模組 410~470、490:步驟 431、435:步驟 441、445:步驟 471、475、479:步驟

第1圖為本創作所提之裝置之元件示意圖。 第2圖為本創作所提之身分確認銀行伺服器之模組示意圖。 第3A圖為本創作所提之身分確認客戶端之模組示意圖。 第3B圖為本創作所提之另一種身分確認客戶端之模組示意圖。 第4A圖為本創作所提之在身分驗證時確認驗證者未改變之流程圖。 第4B圖為本創作所提之一次性密碼驗證之流程圖。 第4C圖為本創作所提之判斷影像特徵變化之流程圖。

120:影像擷取單元

130b:通訊介面

150:輸出入單元

170b:處理器

200:銀行伺服器

300:客戶端

310:操作偵測模組

320:影像擷取模組

330:特徵擷取模組

340:應用傳輸模組

350:活體驗證模組

360:人臉辨識模組

370:特徵比對模組

380:密碼檢核模組

Claims (10)

1. 一種身分確認系統，該系統至少包含： 一銀行伺服器；及 一客戶端，與該銀行伺服器連接，其中更包含： 一操作偵測模組，用以偵測一使用者於一銀行應用程式中之一目標操作是否為機敏操作； 一影像擷取模組，與該操作偵測模組連接，用以於該操作偵測模組判斷該目標操作為機敏操作時擷取該使用者之一第一臉部影像； 一特徵擷取模組，與該影像擷取模組連接，用以由該第一臉部影像中擷取一第一影像特徵； 一身分確認模組，與該特徵擷取模組連接，用以依據該第一影像特徵透過該銀行伺服器進行一活體驗證及一人臉辨識；及 一密碼檢核模組，與該身分確認模組連接，用以於該活體驗證及該人臉辨識通過後透過該銀行伺服器驗證被輸入之驗證權杖（token）與一次性密碼以進行一一次性密碼驗證，使該客戶端於該一次性密碼驗證通過後執行該目標操作； 其中，該影像擷取模組更用以於該一次性密碼驗證過程中，持續擷取一第二臉部影像，該特徵擷取模組更用以由每一該第二臉部影像中擷取一第二影像特徵，該密碼檢核模組更用以於該身分確認模組透過該銀行伺服器判斷該第二影像特徵與該第一影像特徵之變化達到一臉部差異門檻值時，結束該一次性密碼驗證。
2. 如請求項1所述之身分確認系統，其中該操作偵測模組是判斷該使用者於該銀行應用程式中所點選的功能選項是否為機敏功能所對應之功能選項、判斷該使用者於該銀行應用程式中所點選的功能選項是否為需切換身分之功能或權限所對應之功能選項、及依據該目標操作前之操作訊息或其他操作分類該目標操作是否為機敏操作至少其中之一。
3. 如請求項1所述之身分確認系統，其中該身分確認模組是依據該活體驗證之驗證結果所表示之活體可信度判斷該活體驗證是否通過。
4. 如請求項1所述之身分確認系統，其中該身分確認模組是依據該人臉辨識之識別結果所表示之識別可信度判斷該人臉辨識是否通過。
5. 如請求項1所述之身分確認系統，其中該身分確認模組是依據時序由每一該第二臉部影像中所擷取之該第二影像特徵與該第一影像特徵計算一臉部相似度，並判斷該些臉部相似度之變化趨勢是否達到該臉部差異門檻值。
6. 一種身分確認裝置，提供一使用者執行一銀行應用程式以與一銀行伺服器連接，該裝置至少包含： 一操作偵測模組，用以偵測該使用者於該銀行應用程式中之一目標操作是否為機敏操作； 一影像擷取模組，與該操作偵測模組連接，用以於該操作偵測模組判斷該目標操作為機敏操作時擷取該使用者之一第一臉部影像； 一特徵擷取模組，與該影像擷取模組連接，用以由該第一臉部影像中擷取一第一影像特徵； 一活體驗證模組，與該特徵擷取模組連接，用以依據該第一影像特徵進行一活體驗證； 一人臉辨識模組，與該特徵擷取模組連接，用以依據該第一影像特徵進行一人臉辨識； 一特徵比對模組，與該特徵擷取模組連接；及 一密碼檢核模組，與該活體驗證模組、該人臉辨識模組及該特徵比對模組連接，用以於該活體驗證及該人臉辨識通過後透過該銀行伺服器驗證被輸入之驗證權杖與一次性密碼以進行一一次性密碼驗證，使該裝置於該一次性密碼驗證通過後執行該目標操作； 其中，該影像擷取模組更用以於該一次性密碼驗證過程中，持續擷取一第二臉部影像，該特徵擷取模組更用以由每一該第二臉部影像中擷取一第二影像特徵，該密碼檢核模組更用以於該特徵比對模組判斷該第二影像特徵與該第一影像特徵之變化達到一臉部差異門檻值時，結束該一次性密碼驗證。
7. 如請求項6所述之身分確認裝置，其中該操作偵測模組是判斷該使用者於該銀行應用程式中所點選的功能選項是否為機敏功能所對應之功能選項、判斷該使用者於該銀行應用程式中所點選的功能選項是否為需切換身分之功能或權限所對應之功能選項、及依據該目標操作前之操作訊息或其他操作分類該目標操作是否為機敏操作至少其中之一。
8. 如請求項6所述之身分確認裝置，其中該活體驗證模組是依據該活體驗證之驗證結果所表示之活體可信度判斷該活體驗證是否通過。
9. 如請求項6所述之身分確認裝置，其中該人臉辨識模組是依據該人臉辨識之識別結果所表示之識別可信度判斷該人臉辨識是否通過。
10. 如請求項6所述之身分確認裝置，其中該特徵比對模組是依據時序由每一該第二臉部影像中所擷取之該第二影像特徵與該第一影像特徵計算一臉部相似度，並判斷該些臉部相似度之變化趨勢是否達到該臉部差異門檻值。