TWM556359U - 對話式金融服務裝置及系統 - Google Patents

Abstract

一種對話式金融服務裝置，包含一收發模組、一連接收發模組的控制模組及一連接控制模組的情緒識別模組，收發模組接收一語音訊息，控制模組將該語音訊息傳送至情緒識別模組，且根據情緒識別模組所識別的語音訊息內含之情緒，對應產生一回覆訊息。

Description

對話式金融服務裝置及系統

本新型是有關於一種金融服務裝置及系統，特別是指一種用自然語言對話方式取得金融服務之對話式金融服務裝置及系統。

近年來，由於通訊及網路相關產業的高度發展，人們對各項產業電子化與行動化的要求日益升高。而對於金融業方面，除了提供網路銀行之外，也提供行動銀行的服務，使得使用者可以透過電腦、智慧型手機等各式的電子裝置來登入網路銀行或行動銀行，藉以直接在網路上進行查帳、轉帳、繳費、外匯兌換、匯款等金融交易。

然而，在現有的技術中，網路銀行或行動銀行雖然能帶來許多的便利，但在操作各項金融服務時，仍然需要雙眼與雙手停留在實體鍵盤或螢幕上才能操作，不僅十分麻煩，且對於視障或身障的使用者，現有的點擊操作介面也並不友善。

因此，本新型之目的，即在提供一種利用自然語言對話方式取得金融服務之對話式金融服務裝置。

於是，本新型對話式金融服務裝置，包含一收發模組、一連接收發模組的控制模組、一連接控制模組的自然語言對話模組及一連接控制模組的情緒識別模組，收發模組接收一語音訊息，自然語言對話模組用以識別該語音訊息之內容，情緒識別模組用以識別該語音訊息內含之情緒，控制模組根據情緒識別模組及自然語言對話模組之辨識結果而對應產生一回覆訊息，其中控制模組針對情緒識別模組之辨識結果的判斷權重會高於自然語言對話模組之辨識結果。

在一實施例中，情緒識別模組包括一文字辨識單元及一連接該文字辨識單元的情緒用字資料庫，情緒用字資料庫儲存複數與情緒文字有關的詞彙或句型，文字辨識單元擷取該語音訊息中對應之語音文字，且配合情緒用字資料庫判斷該語音訊息之情緒文字，並產生一情緒機率評分值，而控制模組係根據該情緒機率評分值而判定語音訊息內含之情緒。

此外，情緒識別模組還可包括一聲紋情緒辨識單元及一連接該聲紋情緒辨識單元的情緒特徵資料庫，情緒特徵資料庫儲存複數與情緒有關之聲紋訊號與預測模型，聲紋情緒辨識單元擷取該語音訊息中對應之聲紋訊號，且配合情緒特徵資料庫判斷該語音訊息之情緒，並產生一情緒特徵值，而控制模組係根據情緒機率評分值及情緒特徵值而判定語音訊息內含之情緒。

在一實施例中，自然語言對話模組包括一自然語言理解單元及一對話生成單元，自然語言理解單元用以根據該語音訊息之內容執行對應之金融服務，對話生成單元用以根據該語音訊息產生對應之對話內容。

進一步地，自然語言對話模組還包括一語言轉文字單元及一文字轉語音單元，語言轉文字單元用以比對該語音訊息中的文字是否符合至少一金融詞彙，文字轉語音單元用以將文字轉換為對應之聲音訊號輸出。

此外，本新型之另一目的，即在提供一種利用自然語言對話方式取得金融服務之對話式金融服務系統。

本新型對話式金融服務系統，包含一產生一語音訊息的使用端裝置，以及一與使用端裝置通訊的對話式金融服務裝置，對話式金融服務裝置包括一接收該語音訊息的收發模組、一連接收發模組的控制模組、一連接控制模組的自然語言對話模組及一連接控制模組的情緒識別模組，自然語言對話模組用以識別該語音訊息之內容，情緒識別模組用以識別該語音訊息內含之情緒，控制模組根據情緒識別模組及自然語言對話模組之辨識結果而對應產生一回覆訊息，其中控制模組針對情緒識別模組之辨識結果的判斷權重會高於自然語言對話模組之辨識結果。

在一實施例中，情緒識別模組包括一文字辨識單元及一連接文字辨識單元的情緒用字資料庫，情緒用字資料庫儲存複數與情緒文字有關的詞彙或句型，文字辨識單元擷取該語音訊息中對應之語音文字，且配合情緒用字資料庫判斷該語音訊息之情緒文字，並產生一情緒機率評分值，而控制模組係根據該情緒機率評分值而判定語音訊息內含之情緒。

此外，情緒識別模組還可包括一聲紋情緒辨識單元及一連接聲紋情緒辨識單元的情緒特徵資料庫，情緒特徵資料庫儲存複數與情緒有關之聲紋訊號與預測模型，聲紋情緒辨識單元擷取該語音訊息中對應之聲紋訊號，且配合情緒特徵資料庫判斷該語音訊息之情緒，並產生一情緒特徵值，而控制模組係根據該情緒機率評分值及該情緒特徵值而判定語音訊息內含之情緒。

在一實施例中，自然語言對話模組包括一自然語言理解單元及一對話生成單元，自然語言理解單元用以根據該語音訊息之內容執行對應之金融服務，對話生成單元用以根據該語音訊息產生對應之對話內容。

進一步地，自然語言對話模組還包括一語言轉文字單元及一文字轉語音單元，語言轉文字單元用以比對該語音訊息中的文字是否符合至少一金融詞彙，文字轉語音單元用以將文字轉換為對應之聲音訊號輸出。

本新型之功效在於：利用自然語言互動的方式取得金融服務，在操作上可更為便利，不僅省去使用者必須雙眼與雙手停留在實體鍵盤或螢幕上操作之麻煩，對於身障或視障的使用者，同樣也能輕鬆簡單地完成金融服務。

在本新型被詳細描述之前，應當注意在以下的說明內容中，類似的元件是以相同的編號來表示。

參閱圖1，為本新型對話式金融服務系統100之一實施例，本對話式金融服務系統100可透過自然對話的方式取得金融服務，不僅可提供服務給有特殊需求的客戶，同時也解決現行用戶必須維持雙眼與雙手停留在實體螢幕上操作之麻煩，增加操作及生活的便利性。

對話式金融服務系統100包含一使用端裝置10及一與使用端裝置10通訊的對話式金融服務裝置20。

使用端裝置10可為一行動裝置、個人電腦(PC)、平板電腦、筆記型電腦(NB)等位於使用者端操作的電子裝置，其可透過安裝/開啟應用程式(APP)、社交軟體、網頁等介面執行本新型之對話式金融服務，即使用者可透過上述電子裝置與對話式金融服務裝置20對話，以取得金融服務。使用端裝置10會根據使用者所訴說的言語，產生一對應的語音訊息。

對話式金融服務裝置20為一位於銀行端(或企業端)的後台主機或伺服器，其中包括一收發模組21、一連接收發模組21的控制模組22及一連接控制模組22的情緒識別模組23。

收發模組21為一無線傳輸電路，例如：無線射頻電路(RFID)、或近場通訊(Near Field Communication，NFC)、WiFi、藍芽(Bluetooth)、3G/4G網路等，其用以與使用端裝置10通訊，以相互傳輸訊號。

控制模組22可為一微處理器(MCU)或中央控制器，用以控制各模組間的運作與訊號傳輸，控制模組22將收發模組21所接收到的語音訊息傳送至情緒識別模組23，且根據情緒識別模組23所識別的語音訊息內含之情緒，對應產生一回覆訊息，並透過收發模組21將該回覆訊息回傳至使用端裝置10，以回覆使用者所述說之內容。

在本實施例中，情緒識別模組23包括一文字辨識單元231、一連接文字辨識單元231的情緒用字資料庫232、一聲紋情緒辨識單元233及一連接聲紋情緒辨識單元233的情緒特徵資料庫234。

情緒用字資料庫232儲存有複數個與情緒文字有關的詞彙或句型，例如：憤怒情緒詞彙(如「髒話」、「在搞什麼」等)、疑惑情緒詞彙(如「確定嗎？」、「為什麼？」等)、不耐煩情緒詞彙(如「可以快點嗎？」、「很慢耶」等)、高興情緒詞彙(如「很好」、「好棒」等)等各種情緒詞彙，不以上述為限。文字辨識單元231接收該語音訊息，並擷取出其中對應之語音文字，且配合情緒用字資料庫232，依文法句型與關鍵字之組合產生一情緒機率評分值，並按照預設閥值(threshold)判斷上述各種情緒文字，例如：當句型為否定句或包含辱罵字眼，則組合之憤怒情緒機率高(即高情緒機率評分值)。

情緒特徵資料庫234儲存複數與情緒有關之聲紋訊號與預測模型。聲紋情緒辨識單元233接收該語音訊息，並擷取出其中對應之聲紋訊號，且配合情緒特徵資料庫234所儲存之聲紋訊號與預測模型，判斷上述各種情緒(包括憤怒、疑惑、不耐煩、高興等)，並產生一情緒特徵值。

換言之，文字辨識單元231及情緒用字資料庫232係利用如情緒字彙等文字來判斷語音訊息之情緒，聲紋情緒辨識單元233及情緒特徵資料庫234則係利用如音調起伏等聲紋來判斷語音訊息之情緒，當然，兩種方式可以配合不同應用而選擇其中一種方式判斷(即情緒識別模組23僅包括文字辨識單元231及情緒用字資料庫232，或聲紋情緒辨識單元233及情緒特徵資料庫234)，因此，控制模組22係根據文字辨識單元231產生的情緒機率評分值及/或聲紋情緒辨識單元233產生的情緒特徵值而判定語音訊息內含之情緒，並對應產生回覆訊息。

此外，對話式金融服務裝置20還可包括一連接控制模組22的自然語言對話模組24，用以判斷收發模組21所接收到的語音訊息之內容。

自然語言對話模組24包括一語言轉文字單元241、一自然語言理解單元242、一對話生成單元243及一文字轉語音單元244。

語言轉文字單元241內含一金融詞彙資料庫，其中儲存有複數與金融服務及產品有關的金融詞彙，例如：玉璽卡、LINE PAY卡等，語言轉文字單元241用以從該語音訊息中擷取對應之文字，並配合金融詞彙資料庫比對該些文字中是否有符合至少一相關的金融詞彙，以提高語音轉文字之辨識的正確率。此外，語言轉文字單元241還可內含一中文聲學模型，可針對同一金融字彙蒐集不同使用者之發音方式，以增加對於口音(例如：台灣國語)的適應性，可更優化語音轉文字之正確轉換率。

自然語言理解單元242可內含一意圖與指令資料庫，該意圖與指令資料庫儲存有複數與金融交易關的控制指令，自然語言理解單元242可根據該語音訊息之內容，並配合意圖與指令資料庫中的控制指令執行對應之金融服務，包含個人帳戶餘額查詢、帳單查詢、交易明細查詢、匯款轉帳、帳單繳款、收支紀錄與查詢、股匯價查詢、到價提醒、交易預定、投資交易執行、線上客服問答、保單內容查詢等，但不以上述為限。

對話生成單元243可內含一儲存複數情境與使用者情緒之預設對答內容與角色句型結構的品牌角色個性資料庫，以提供多種助理角色個性並產生對話內容，讓使用者可自行決定服務互動的方式。

文字轉語音單元244用以將任意文字轉換為對應之聲音訊號輸出，且在本實施例中，文字轉語音單元244可針對特定角色之合成聲音所蒐集並建立一品牌識別性聲紋模型，以輸出特定角色之聲音訊號。

再者，對話式金融服務裝置20還可包括一連接控制模組22的身份識別模組25，用以針對使用者的身份進行核對與驗證。身份識別模組25包括一身份辨識單元251、一連接身份辨識單元251的個人資料庫252、一聲紋辨識單元253及一連接聲紋辨識單元253的用戶聲紋資料庫254。

個人資料庫252為一使用者之身分驗認、帳號密碼、數位憑證資料庫，其中儲存複數筆使用者的金融個人資訊；身份辨識單元251根據該語音訊息之內容(例如：使用者說出自己的帳號密碼)並配合個人資料庫252之金融個人資訊而核對使用者之身分。用戶聲紋資料庫254則是儲存使用者每次講話的語音訊息之聲紋；聲紋辨識單元253可利用聲紋提取方式建立個人之可辨識模型，以核對使用者日後使用時之聲音。

補充說明的是，身份識別模組25也可以位於另一主機或伺服器中(例如：現有的身份核對伺服器)，控制模組22可透過收發模組21而與該主機或伺服器通訊，以核對使用者之身份。另外，對話式金融服務裝置20也可包括一連接控制模組22的個人金融資料庫(圖未示)，用以儲存使用者的帳戶、信用、金融交易等資訊與紀錄，或是透過收發模組21的通訊，而將該些資訊與紀錄儲存至另一電子裝置(例如：現有的個人資料伺服器)之資料庫中，故以上皆不以本實施例為限。

因此，當使用者身份核對無誤後，控制模組22會將收發模組21每次接收到的語音訊息傳送至情緒識別模組23及自然語言對話模組24，情緒識別模組23會透過文字與聲紋而識別該語音訊息內含之情緒，自然語言對話模組24則會判斷語音訊息之內容，例如：是否有提到特定金融詞彙，或是否需要執行如匯款轉帳、帳單繳款等金融交易服務，而當情緒識別模組23及自然語言對話模組24會分別將其判斷結果回傳至控制模組22，以供控制模組22進行綜合評估並藉由對話生成單元243對應產生回覆訊息。

特別說明的是，情緒識別模組23的判斷權重會高於自然語言對話模組24，也就是說當情緒辨識結果超過預設之閥值(Threshold)，則優先進行情緒之處理，並以對話生成單元243中之品牌角色個性資料庫內針對情緒之預設對答內容加以回應，舉例來說，當使用者反應「哇！這也太貴了吧」，則對應產生的回覆訊息會為「別擔心」，當情緒回應優先處理完成後，則依照自然語言對話模組24所判斷之使用者意圖，執行對應之金融交易服務。

配合參閱圖2，圖2為本新型對話式金融服務的流程，本流程可應用於對話式金融服務系統100，或是任何可執行以下流程之系統或電子裝置。本對話式金融服務方法之詳細流程如下：

步驟S10，使用者透過安裝/開啟應用程式(APP)、社交軟體、網頁等介面執行對話式金融服務，並開始對話，例如：「您好，我是王小明，請幫我服務」。

步驟S20，使用端裝置10會將該對話之內容轉換成語音訊息，並傳送至對話式金融服務裝置20。

步驟S30，控制模組22先將語音訊息傳送至身份識別模組25，以進行身分之核對。身份辨識單元251可針對「王小明」之個人資訊進行判斷，並配合聲紋辨識單元253針對其對話之聲紋判定，以綜合評估核對使用者之身份，若核對身份無誤，則控制模組22產生回覆訊息，例如：「您好，王先生，很高興為您服務」。

步驟S40，接著使用端裝置10可再將該對話之內容(例如：「我這個月信用卡帳單多少錢？」)轉換成語音訊息，並傳送至對話式金融服務裝置20。

步驟S50，控制模組22根據情緒識別模組23所識別的語音訊息內含之情緒，以及自然語言對話模組24所判斷的語音訊息之內容，進行綜合評估並對應產生回覆訊息，例如：「您本月信用卡帳單費用為50000元」。

步驟S60，透過收發模組21回傳至使用端裝置10，以輸出該回覆訊息。特別說明的是，輸出的方式不僅可以語音的方式，還可以同時透過使用端裝置10的互動介面顯示對應之文字，並不限於何種方式。

綜上所述，本新型對話式金融服務系統100，利用自然語言互動的形式，可更為便利輕鬆獲得金融相關服務，可以解決現行使用者必須維持雙眼與雙手停留在實體螢幕上操作之麻煩，例如在行車的同時，即可以對話方式完成日常金融服務，故確實能達成本新型之目的。

惟以上所述者，僅為本新型之實施例而已，當不能以此限定本新型實施之範圍，凡是依本新型申請專利範圍及專利說明書內容所作之簡單的等效變化與修飾，皆仍屬本新型專利涵蓋之範圍內。

100‧‧‧對話式金融服務系統
10‧‧‧使用端裝置
20‧‧‧對話式金融服務裝置
21‧‧‧收發模組
22‧‧‧控制模組
23‧‧‧情緒識別模組
231‧‧‧文字辨識單元
232‧‧‧情緒用字資料庫
233‧‧‧聲紋情緒辨識單元
234‧‧‧情緒特徵資料庫
24‧‧‧自然語言對話模組
241‧‧‧語言轉文字單元
242‧‧‧自然語言理解單元
243‧‧‧對話生成單元
244‧‧‧文字轉語音單元
25‧‧‧身份識別模組
251‧‧‧身份辨識單元
252‧‧‧個人資料庫
253‧‧‧聲紋辨識單元
254‧‧‧用戶聲紋資料庫
S10～S60‧‧‧步驟

本新型之其他的特徵及功效，將於參照圖式的實施方式中清楚地呈現，其中： 圖1是本新型對話式金融服務系統的一實施例的電路方塊示意圖；及 圖2是本新型對話式金融服務方法的流程圖。

100‧‧‧對話式金融服務系統

10‧‧‧使用端裝置

20‧‧‧對話式金融服務裝置

21‧‧‧收發模組

22‧‧‧控制模組

23‧‧‧情緒識別模組

231‧‧‧文字辨識單元

232‧‧‧情緒用字資料庫

233‧‧‧聲紋情緒辨識單元

234‧‧‧情緒特徵資料庫

24‧‧‧自然語言對話模組

241‧‧‧語言轉文字單元

242‧‧‧自然語言理解單元

243‧‧‧對話生成單元

244‧‧‧文字轉語音單元

25‧‧‧身份識別模組

251‧‧‧身份辨識單元

252‧‧‧個人資料庫

253‧‧‧聲紋辨識單元

254‧‧‧用戶聲紋資料庫

Claims (10)

1. 一種對話式金融服務裝置，包含： 一收發模組，接收一語音訊息； 一控制模組，連接該收發模組； 一自然語言對話模組，連接該控制模組，該自然語言對話模組用以識別該語音訊息之內容；及 一情緒識別模組，連接該控制模組，該情緒識別模組用以識別該語音訊息內含之情緒，該控制模組根據該情緒識別模組及該自然語言對話模組之辨識結果而對應產生一回覆訊息，其中該控制模組針對該情緒識別模組之辨識結果的判斷權重會高於該自然語言對話模組之辨識結果。
2. 如請求項1所述的對話式金融服務裝置，其中，該情緒識別模組包括一文字辨識單元及一連接該文字辨識單元的情緒用字資料庫，該情緒用字資料庫儲存複數與情緒文字有關的詞彙或句型，該文字辨識單元擷取該語音訊息中對應之語音文字，且配合該情緒用字資料庫判斷該語音訊息之情緒文字，並產生一情緒機率評分值，該控制模組係根據該情緒機率評分值而判定語音訊息內含之情緒。
3. 如請求項1所述的對話式金融服務裝置，其中，該情緒識別模組還包括一聲紋情緒辨識單元及一連接該聲紋情緒辨識單元的情緒特徵資料庫，該情緒特徵資料庫儲存複數與情緒有關之聲紋訊號與預測模型，該聲紋情緒辨識單元擷取該語音訊息中對應之聲紋訊號，且配合該情緒特徵資料庫判斷該語音訊息之情緒，並產生一情緒特徵值，該控制模組係根據該情緒機率評分值及該情緒特徵值而判定該語音訊息內含之情緒。
4. 如請求項1所述的對話式金融服務裝置，其中，該自然語言對話模組包括一自然語言理解單元及一對話生成單元，該自然語言理解單元用以根據該語音訊息之內容執行對應之金融服務，該對話生成單元用以根據該語音訊息產生對應之對話內容。
5. 如請求項4所述的對話式金融服務裝置，其中，該自然語言對話模組還包括一語言轉文字單元及一文字轉語音單元，該語言轉文字單元用以比對該語音訊息中的文字是否符合至少一金融詞彙，該文字轉語音單元用以將文字轉換為對應之聲音訊號輸出。
6. 一種對話式金融服務系統，包含： 一使用端裝置，產生一語音訊息；及 一對話式金融服務裝置，與該使用端裝置通訊，該對話式金融服務裝置包括一接收該語音訊息的收發模組、一連接該收發模組的控制模組、一連接該控制模組的自然語言對話模組及一連接該控制模組的情緒識別模組，該自然語言對話模組用以識別該語音訊息之內容，該情緒識別模組用以識別該語音訊息內含之情緒，該控制模組根據該情緒識別模組及該自然語言對話模組之辨識結果而對應產生一回覆訊息，其中該控制模組針對該情緒識別模組之辨識結果的判斷權重會高於該自然語言對話模組之辨識結果。
7. 如請求項6所述的對話式金融服務系統，其中，該情緒識別模組包括一文字辨識單元及一連接該文字辨識單元的情緒用字資料庫，該情緒用字資料庫儲存複數與情緒文字有關的詞彙或句型，該文字辨識單元擷取該語音訊息中對應之語音文字，且配合該情緒用字資料庫判斷該語音訊息之情緒文字，並產生一情緒機率評分值，該控制模組係根據該情緒機率評分值而判定語音訊息內含之情緒。
8. 如請求項7所述的對話式金融服務系統，其中，該情緒識別模組還包括一聲紋情緒辨識單元及一連接該聲紋情緒辨識單元的情緒特徵資料庫，該情緒特徵資料庫儲存複數與情緒有關之聲紋訊號與預測模型，該聲紋情緒辨識單元擷取該語音訊息中對應之聲紋訊號，且配合該情緒特徵資料庫判斷該語音訊息之情緒，並產生一情緒特徵值，該控制模組係根據該情緒機率評分值及該情緒特徵值而判定該語音訊息內含之情緒。
9. 如請求項6所述的對話式金融服務系統，其中，該自然語言對話模組包括一自然語言理解單元及一對話生成單元，該自然語言理解單元用以根據該語音訊息之內容執行對應之金融服務，該對話生成單元用以根據該語音訊息產生對應之對話內容。
10. 如請求項9所述的對話式金融服務系統，其中，該自然語言對話模組還包括一語言轉文字單元及一文字轉語音單元，該語言轉文字單元用以比對該語音訊息中的文字是否符合至少一金融詞彙，該文字轉語音單元用以將文字轉換為對應之聲音訊號輸出。