TW202137112A

TW202137112A - 擴增實境簽章系統

Info

Publication number: TW202137112A
Application number: TW109110303A
Authority: TW
Inventors: 賴政義
Original assignee: 臺灣土地銀行股份有限公司
Priority date: 2020-03-26
Filing date: 2020-03-26
Publication date: 2021-10-01

Abstract

一種擴增實境簽章系統，包括一伺服主機及至少一行動裝置。伺服主機適於提供一對保簽章文件資料。行動裝置通訊連接至該伺服主機，適於接收該對保簽章文件資料，該行動裝置包括一顯示螢幕、一攝像鏡頭、一擴增實境模組及一錄製模組。攝像鏡頭適於拍攝並產生一紙張影像。擴增實境模組根據該對保簽章文件資料產生一擴增實境影像，並且對應該紙張影像的位置將該擴增實境影像顯示於該顯示螢幕上。錄製模組根據該攝像鏡頭的影像錄製一簽章影音檔案，並傳送至該伺服主機。其中，該伺服主機還包括一對保驗證模組，適於透過影像辨識、文字辨識與聲紋辨識方式辨識該簽章影音檔案。

Description

擴增實境簽章系統

一種簽章系統，特別是一種擴增實境簽章系統。

現今金融機構可提供多種金融服務，其中最大宗為借貸服務。目前主要的服務方式是由申請人配合金融機構的營業時間，到金融機構臨櫃辦理相關金融服務項目，特別是有關各類文件的簽署。以借貸服務來說，金融單位多半還要經過聯徵調查等業務，才能核准借貸與其條件，這個聯徵調查可能也需要數天來執行。而對申請人而言，需要多次前往金融單位才能完成整個申請程序，且金融單位也需要大量的人力處理相關業務。因此，如何改善金融服務的流程，便是本領域具通常知識者值得去思量的。

本創作提供一種擴增實境簽章系統，透過擴增實境的方式簽署文件，並以人工智慧自動辨識，節省辦理相關業務的人力成本。本創作提供一種擴增實境簽章系統，包括一伺服主機及至少一行動裝置。伺服主機適於提供一對保簽章文件資料。行動裝置通訊連接至該伺服主機，適於接收該對保簽章文件資料，該行動裝置包括一顯示螢幕、一攝像鏡頭、一擴增實境模組及一錄製模組。攝像鏡頭適於拍攝並產生一紙張影像。擴增實境模組根據該對保簽章文件資料產生一擴增實境影像，並且對應該紙張影像的位置將該擴增實境影像顯示於該顯示螢幕上。錄製模組根據該攝像鏡頭的影像錄製一簽章影音檔案，並傳送至該伺服主機。其中，該伺服主機還包括一對保驗證模組，適於透過影像辨識、文字辨識與聲紋辨識方式辨識該簽章影音檔案。上述之擴增實境簽章系統，其中，該攝像鏡頭還適於拍攝多個證件影像，該行動裝置還包括一影像識別模組，適於辨識該證件影像的多個文字資訊，並根據該文字資訊產生至少一申請表格。上述之擴增實境簽章系統，其中，還通訊連接至外部的多個驗證伺服器，該伺服主機還包括一聯徵驗證模組，適於該申請表格，並從該驗證伺服器取得多個驗證資料，將該申請表格與該驗證資料相比對。上述之擴增實境簽章系統，其中，若該申請表格與該驗證資料比對相符，該伺服主機產生該對保簽章文件資料。上述之擴增實境簽章系統，其中，該對保驗證模組是判斷該簽章影音檔案中聲紋的情緒反應。上述之擴增實境簽章系統，其中，若該簽章影音檔案經該對保驗證模組辨識後符合一核准標準，該伺服主機產生一簽署文件資料，並傳送至外部的至少一金融服務伺服器。

本創作提供一種擴增實境簽章系統，提供一種以擴增實境簽署文件的方式，並透過人工智慧辨識技術，是別簽署的正確性，讓申請人可線上辦理金融服務。請參閱圖1，圖1所繪示為本創作之擴增實境簽章系統示意圖。本創作之擴增實境簽章系統100包括一伺服主機110與一行動裝置120。行動裝置120為使用者所使用的裝置，較佳實施例中為智慧型手機或平板電腦。並且行動裝置120是通訊連接至伺服主機110。行動裝置120包括一顯示螢幕121、一攝像鏡頭122、一擴增實境模組123、一錄製模組124與一影像識別模組125。顯示螢幕121為行動裝置120的顯示器，可顯示對應的影像，並提供使用者操作介面。攝像鏡頭122則適於拍攝並產生一紙張影像或多個證件影像。擴增實境模組123適於從伺服主機110接收一對保簽章文件資料，並根據對保簽章文件資料產生一擴增實境影像。進一步的，當攝像鏡頭122拍攝的是一紙張，並產生紙張影像時，擴增實境模組123會根據紙張影像中紙張的位置，將對保簽章文件資料設置於對應的位置，並且顯示在顯示螢幕121上。進一步的，擴增實境模組123是動態配置對保簽章文件資料的位置，當使用者移動行動裝置121，擴增實境模組123也會即時調整對保簽章文件資料的位置，讓保簽章文件資料能夠顯適於紙張上。錄製模組124適於透過攝像鏡頭122錄製一簽章影音檔案。進一步的，錄製模組124會啟動行動裝置120的攝像鏡頭122與收音模組（如麥克風），並且可錄製影音檔案。在本實施例中，錄製模組124錄製的影音檔案包括擴增實境模組123所顯示的對保簽章文件資料。影像識別模組125適於識別攝像鏡頭122所產生的證件影像，並根據證件影響產生一申請表格。也就是說，當使用者透過行動裝置120拍攝證件得到證件影像，影像識別模組125可透過文字辨識技術，取得證件影像中的文字，並填入表格中，進而產生一申請表格。這個申請表格將會傳送至伺服主機110。伺服主機110是擴增實境簽章系統100的主要的運算中心，可為單一伺服器，也可為多個伺服器聯合運算。伺服主機110包括一對保驗證模組111與一聯徵驗證模組112。對保驗證模組111適於驗證來自行動裝置120的簽章影音檔案。在本實施例中，對保驗證模組111中具備影像辨識、文字辨識與聲紋辨識的演算法，可透過影像辨識、文字辨識與聲紋辨識方法辨識簽章影音檔案的內容，進一步判斷簽章影音檔案的內容是否正確。聯徵驗證模組112則適於接收自行動裝置120的申請表格。當聯徵驗證模組112收到申請表格，會連接至外部的驗證伺服器10，並從驗證伺服器10取得多個驗證資料，之後比較申請表格與驗證資料是否相符。在本實施例中，驗證伺服器10可為行動身分識別（Mobile ID）伺服器、戶政司伺服器或聯徵伺服器，並取對應的驗證資料，以比對申請人所提供的資料是否正確。若聯徵驗證模組112驗證申請表格資料正確，便會令伺服主機發出對保簽章文件資料，並傳送至行動裝置120。擴增實境簽章系統100個元件運作說明如上，以下說明使用者實際申請金融服務的流程。首先，使用者可透過行動裝置120申請金融服務，申請時則可利用行動裝置120的攝像鏡頭拍攝證件，取得證件影像。此時行動裝置120的影像識別模組125可透過影像辨識與文字辨識技術讀取證件影像中的文字，並自動填入對應的欄位，並產生一申請表格。進一步的，使用者依然可透過行動裝置120的顯示螢幕121修改申請表格的內容。接著，申請表格傳送至伺服主機110，伺服主機110將由聯徵驗證模組112接收申請表格。接下來，聯徵驗證模組112會連接至外部的驗證伺服器10，並且從驗證伺服器10取得對應的驗證資料。例如Mobile ID身分辨識資料、戶政資料與銀行內部金融服務資料等。進一步的，聯徵驗證模組112會比對申請表格與驗證資料的內容，確認申請人提供的申請表格資料是否正確，同時可確認申請人申請金融服務的資格。若申請表格與驗證資料相符，並且符合申請資格，伺服主機110便會產生對保簽章文件資料，並傳送至行動裝置120。因此使用者可透過行動裝置120接收對保簽章文件資料。請參閱圖2A至圖2D，圖2A至圖2D所繪示為擴增實境的示意圖。接下來，使用者可使用行動裝置120拍攝一紙張200（如圖2A），行動裝置120便取得一紙張影像201，紙張影像會顯示在121上（如圖2B）。此時，行動裝置120的擴增實境模組123會根據對保簽章文件資料產生一擴增實境影像，並且根據紙張影像201中紙張200的位置，將擴增實境影像顯示在紙張200的位置上（如圖2C）。接下來，使用者可透過行動裝置120的錄製模組124錄製簽章影音檔案。在本實施例中，需要透過錄製模組124錄下使用者在紙張200上簽章（如圖2D），並且以口說的方式念出擴增實境影像（即對保簽章文件）的內容，並錄製成簽章影音檔案。因此所錄製的簽章影音檔案將會包括使用者簽字的影像與唸出對保簽章文件資料內容的音訊。這個簽章影音檔案將會傳送至伺服主機110。在一實施例中，行動裝置120上會有兩個攝像鏡頭122，分別設置在行動裝置120的兩側，即是前鏡頭與後鏡頭。而錄製模組124則會同時啟動這兩個攝像鏡頭122，一個攝像鏡頭122拍攝紙張，另一攝像鏡頭122則可拍攝使用者的臉部影像。因此，在使用者錄製簽章影音檔案時，所拍攝的簽章影音檔案也會包括使用者宣讀對保簽章文件內容的影音。也就是同時可錄製使用者宣讀對保簽章文件內容的影音與在紙張上簽字的影音。伺服主機110將由對保驗證模組111接收簽章影音檔案。此時對保驗證模組111會透過影像辨識、文字辨識與聲紋辨識方式自動辨識簽章影音檔案的內容。其中，影像辨識可辨識使用者簽章位置是否正確，文字辨識可辨識使用者簽章的文字內容是否正確。聲紋辨識則可辨識使用者在唸出對保簽章文件內容時，使用者的情緒狀態是否正常。聲紋辨識的目的在於，可辨識使用者是否是在非自願的狀態下簽屬文件，若使用者受到脅迫，聲紋則會明顯異於正常狀態，因此可透過識別使用者的情緒狀態來判斷使用者是否為自願簽署。進一步的，對保驗證模組111還能夠透過影像辨識與文字辨識的方式，將使用者簽署文件的字跡取出，並與對保簽章文件資料結合，取得一簽署文件資料。在本實施例中，對保驗證模組111是一種經過深度學習訓練的人工智慧模組，並以對應的演算法執行影像辨識、文字辨識與聲紋辨識。其中，影辨識例如為R-CNN或YOLO技術。文字辨識是透過光學文字辨識（Optical Character Recognition, OCR）進行。聲紋辨識則例如為Speech Analytics或Affective Computing技術。之後，透過對保驗證模組111辨識之後，若使用者所提供的收簽章影音檔案內容正確且符合規範，則可視為正式簽署的文件。接下來，伺服主機110便會將簽署文件資料傳送至外部的金融服務伺服器，由對應的單位執行服務內容，如借貸放款、開戶等業務。經由上述本創作之擴增實境簽章系統100，可透過行動裝置120以擴增實境的方式呈現簽章文件，並讓使用者以錄影的方式簽署該簽章文件。伺服主機110則可透過人工智慧的對保驗證模組111進一步辨識簽署的影音檔案，判斷影音檔案是否正確。若判斷正確，則可視為正式簽約產生簽署文件資料，並將簽署文件資料傳送至外部的金融服務伺服器辦理相關業務。提供自動化的審查與辨識，並且可讓使用者在線上辦理，不須讓使用者親赴現場辦理，可有效減少辦理相關業的人力成本。本創作說明如上，然其並非用以限定本創作所主張之專利權利範圍。其專利保護範圍當視後附之申請專利範圍及其等同領域而定。凡本領域具有通常知識者，在不脫離本專利精神或範圍內，所作之更動或潤飾，均屬於本創作所揭示精神下所完成之等效改變或設計，且應包含在下述之申請專利範圍內。

10:驗證伺服器 100:擴增實境簽章系統 110:伺服主機 111:對保驗證模組 112:聯徵驗證模組 120:行動裝置 121:顯示螢幕 122:攝像鏡頭 123:擴增實境模組 124:錄製模組 125:影像識別模組 200:紙張 201:紙張影像

圖1所繪示為本創作之擴增實境簽章系統示意圖。圖2A至圖2D所繪示為擴增實境的示意圖。

10:驗證伺服器

100:擴增實境簽章系統

110:伺服主機

111:對保驗證模組

112:聯徵驗證模組

120:行動裝置

121:顯示螢幕

122:攝像鏡頭

123:擴增實境模組

124:錄製模組

125:影像識別模組

Claims

一種擴增實境簽章系統，包括：一伺服主機，適於提供一對保簽章文件資料：及至少一行動裝置，通訊連接至該伺服主機，適於接收該對保簽章文件資料，該行動裝置包括：一顯示螢幕；一攝像鏡頭，適於拍攝並產生一紙張影像；一擴增實境模組，根據該對保簽章文件資料產生一擴增實境影像，並且對應該紙張影像的位置將該擴增實境影像顯示於該顯示螢幕上；及一錄製模組，根據該攝像鏡頭的影像錄製一簽章影音檔案，並傳送至該伺服主機；其中，該伺服主機還包括一對保驗證模組，適於透過影像辨識、文字辨識與聲紋辨識方式辨識該簽章影音檔案。
如申請專利範圍第1項所述之擴增實境簽章系統，其中，該攝像鏡頭還適於拍攝多個證件影像，該行動裝置還包括一影像識別模組，適於辨識該證件影像的多個文字資訊，並根據該文字資訊產生至少一申請表格。
如申請專利範圍第2項所述之擴增實境簽章系統，其中，還通訊連接至外部的多個驗證伺服器，該伺服主機還包括一聯徵驗證模組，適於該申請表格，並從該驗證伺服器取得多個驗證資料，將該申請表格與該驗證資料相比對。
如申請專利範圍第3項所述之擴增實境簽章系統，其中，若該申請表格與該驗證資料比對相符，該伺服主機產生該對保簽章文件資料。
如申請專利範圍第1項所述之擴增實境簽章系統，其中，該對保驗證模組是判斷該簽章影音檔案中聲紋的情緒反應。
如申請專利範圍第1項所述之擴增實境簽章系統，其中，若該簽章影音檔案經該對保驗證模組辨識後符合一核准標準，該伺服主機產生一簽署文件資料，並傳送至外部的至少一金融服務伺服器。