TWM626929U

TWM626929U - 智慧比對系統

Info

Publication number: TWM626929U
Application number: TW110215210U
Authority: TW
Inventors: 王靜遠; 鄭仁豪; 吳雅娟; 廖勇吉; 林士敬; 錢安瑩; 李坤泉
Original assignee: 台北富邦商業銀行股份有限公司
Priority date: 2021-12-21
Filing date: 2021-12-21
Publication date: 2022-05-11

Abstract

一種智慧比對系統包含一資料識別模組、一資料轉換模組及一資料比對模組。該資料識別模組自一外部來源端伺服系統取得一外部待識別資料及自一內部來源端伺服系統取得一內部待識別資料，且將該外部待識別資料及該內部待識別資料分別輸入分別對應不同的多個產品別的多個機器學習模型，以獲得分別對應的一外部識別後資料及一內部識別後資料。該資料轉換模組對該外部識別後資料及該內部識別後資料分別執行多個轉換程序以獲得分別對應的一外部轉換後資料及一內部轉換後資料。該資料比對模組對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的該等交易紀錄進行比對以產生一比對結果資料。

Description

智慧比對系統

本新型是有關於一種比對系統，特別是指一種針對各種不同來源及不同格式的文件作內容比對的智慧比對系統。

金融市場後台的作業項目經常需核對不同系統間的資料，過往均透過人工的方式執行下載報表、處理信件及使用EXCEL進行資料核對。因為來源的多樣性，通常需要個別採用客製化的單一自動化流程，導致系統的效益很低。以交易核對為例，原以交易對手提供的郵件或是傳真等實體文件，由經辦逐一開起判斷交易類別、產品別、交易條件等資訊後，再與銀行交易系統內的交易資訊進行核對，並將相關檔案交由覆核進行二次確認，且交易對手及產品眾多，文件格式及交易內容描述各不相同，作業時間冗長且容易發生文件傳遞的疏漏。因此，面臨多樣多變的來源資訊，如何實現一種自動化的比對系統便成為一個待解決的問題。

因此，本新型的目的，即在提供一種針對各種不同格式的文件作內容比對的智慧比對系統。

於是，本新型智慧比對系統，適用於一內部來源端伺服系統及一外部來源端伺服系統，並包含一資料識別模組、一資料轉換模組及一資料比對模組。

該資料識別模組包括分別對應不同的多個產品別的多個機器學習模型，並依照一預定排程自該外部來源端伺服系統取得一外部待識別資料，及自該內部來源端伺服系統取得一內部待識別資料，且將該外部待識別資料及該內部待識別資料分別輸入該等機器學習模型，以獲得分別對應的一外部識別後資料及一內部識別後資料。該外部識別後資料及該內部識別後資料分別包含多筆交易紀錄，該等交易紀錄包含格式不完全相同的多種欄位資料。

該資料轉換模組電連接該資料識別模組，以接收該外部識別後資料及該內部識別後資料，並對該外部識別後資料及該內部識別後資料分別執行多個轉換程序，以獲得分別對應的一外部轉換後資料及一內部轉換後資料，且該外部轉換後資料及該內部轉換後資料的該等交易紀錄分別包含格式相同的該等欄位資料。

該資料比對模組電連接該資料轉換模組，並對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的該等交易紀錄進行比對，以產生一比對結果資料。

在一些實施態樣中，該智慧比對系統還適用於一用戶端裝置，電連接該資料比對模組，並接收該比對結果資料，以顯示該比對結果資料。

在另一些實施態樣中，其中，該預定排程是藉由一流程機器人（Robotic Process Automation，RPA）系統來設定。

在另一些實施態樣中，其中，該等轉換程序包括一格式轉換程序、一資料合併程序、一術語轉換程序、一擴充欄位程序，及一輸入程式碼程序。該格式轉換程序相關於日期表示方式的格式轉換。該資料合併程序相關於相同用途的資料作整合。該術語轉換程序相關於術語表示方式的名稱轉換。該擴充欄位程序相關於在資料中增加該等欄位資料之其中至少一者。該輸入程式碼程序相關於執行預定程式碼作資料處理。

在一些實施態樣中，其中，該資料比對模組還儲存一主鍵設定值，當該資料比對模組判斷該主鍵設定值指示屬於一無鍵值比對形式時，該資料比對模組對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生該比對結果資料。

在一些實施態樣中，其中，該資料比對模組還儲存該等欄位資料之其中被設定為強制符合者的一強制對應關係，當該資料比對模組判斷該主鍵設定值指示屬於一主鍵值比對形式時，該資料比對模組還根據該強制對應關係對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生該比對結果資料。

在一些實施態樣中，其中，該資料比對模組還儲存該等欄位資料之其中部分者的多個權重係數，及對應其中一個該產品別的一閾值，該資料比對模組還根據該權重係數及對應的該閾值，對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別且相對應的該等欄位資料作比對，以產生該比對結果資料。

在另一些實施態樣中，其中，在同一個該產品別中該等權重係數之和等於預設的一總和最大值，該資料比對模組計算在該產品別中相對應的該等欄位資料被判斷相符合者所對應的該至少一權重係數之和，以獲得一加總數值，當該資料比對模組判斷該加總數值等於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全相符合，當該資料比對模組判斷該加總數值大於或等於該閾值，且小於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是疑似相符合，當該資料比對模組判斷該加總數值小於該閾值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全不相符。

在另一些實施態樣中，其中，該資料比對模組還儲存一比對排程，該資料比對模組根據該比對排程所指示的時間點，對該外部轉換後資料及該內部轉換後資料中相對應的該等欄位資料作比對，以產生該比對結果資料。

本新型的功效在於：本新型智慧比對系統藉由該資料識別模組獲得資料內容的該外部識別後資料及該內部識別後資料並傳送給該資料轉換模組，用以獲得格式相同的該外部轉換後資料及該內部轉換後資料的該等交易紀錄並傳送給該資料比對模組，該資料比對模組對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的該等交易紀錄進行比對，以產生該比對結果資料，相較於習知技術在多種來源、人工識別、及比對資料等方面，都能夠達到省時省力的效果。

在本新型被詳細描述之前，應當注意在以下的說明內容中，類似的元件是以相同的編號來表示。

參閱圖1，本新型智慧比對系統100的一實施例，適用於一內部來源端伺服系統1、一外部來源端伺服系統2及一用戶端裝置6，並包含一資料識別模組3、一資料轉換模組4及一資料比對模組5。

該外部來源端伺服系統2例如是一證券櫃檯買賣中心伺服系統、一證券商伺服系統、或一中央銀行匯率伺服器統，但不以上述為限。該內部來源端伺服系統1例如是一資料市集（Data Mart）伺服系統、一交易帳務伺服系統(Murex）、一衍生性商品伺服系統（FTS）、一債券伺服系統（FITS），但不以上述為限。該外部來源端伺服系統2及該內部來源端伺服系統1分別提供一外部待識別資料及一內部待識別資料，該外部待識別資料及該內部待識別資料包含各種交易確認書，例如是股票交易單、外匯交易單，但不以上述為限。舉例來說，該外部待識別資料及該內部待識別資料例如是多個電子郵件的多個附件檔案，且每一該附件檔案例如是csv、txt、xlsx、xls、FIX、json、xml、pdf等檔案格式。每一該交易確認書(即該附件檔案)包含一文字內容及一非文字內容之其中至少一者，該非文字內容例如是圖片、表格、或影像。該智慧比對系統100是藉由一郵件規則判斷即該電子郵件的該附件檔案(即該外部待識別資料及該內部待識別資料)是屬於哪一個產品別，該郵件規則例如是依據信件主旨、信件內文的關鍵字、或附件內容的關鍵字進行判斷，以決定該產品別。

該資料識別模組3包括分別對應不同的該等產品別的多個機器學習模型，並依照一預定排程自該外部來源端伺服系統2取得該外部待識別資料，及自該內部來源端伺服系統1取得該內部待識別資料。該等機器學習模型是一種監督式學習（Supervised learning）模型並根據一訓練資料集進行訓練所建立。該訓練資料集包含前述已知的各種交易確認書。屬於同一個該產品別的交易確認書會（如股票交易單）在對應的同一個該機器學習模型中進行訓練。舉例來說，A公司的5份股票交易單及B公司的3份股票交易單會在對應的同一個該機器學習模型中進行訓練，需注意的是，A公司的5份股票交易單及B公司的3份股票交易單因為所屬公司不同，該機器學習模型會將A公司的5份股票交易單分在A群組（group），B公司的3份股票交易單分在B群組，用以作欄位比對。該預定排程是藉由一流程機器人（Robotic Process Automation，RPA）系統來設定。舉例來說，在工作日的下午三點半，該流程機器人系統以之前錄製使用者操作的方式，從該外部來源端伺服系統2取得該外部待識別資料。

該資料識別模組3在接收到該外部待識別資料及該內部待識別資料之後，先藉由光學字元辨識（Optical Character Recognition，OCR）技術對該外部待識別資料及該內部待識別資料之中的該等非文字內容，擷取並轉換為對應的該文字內容。該資料識別模組3再將僅包含該等文字內容的該外部待識別資料及該內部待識別資料分別輸入該等機器學習模型，也就是說，對應同一個該產品別的該至少一附件檔案會被輸入至對應該產品別的該機器學習模型，以獲得分別對應的一外部識別後資料及一內部識別後資料。該外部識別後資料及該內部識別後資料分別包含多筆交易紀錄，該等交易紀錄包含格式不完全相同的多種欄位資料。舉例來說，該外部識別後資料及該內部識別後資料的檔案類型是csv檔案格式，csv檔案中的每一列即相當於其中一筆該交易紀錄。

該資料轉換模組4電連接該資料識別模組3，以接收該外部識別後資料及該內部識別後資料，並對該外部識別後資料及該內部識別後資料分別執行多個轉換程序，以獲得分別對應的一外部轉換後資料及一內部轉換後資料，且該外部轉換後資料及該內部轉換後資料的該等交易紀錄分別包含格式相同的該等欄位資料。

該等轉換程序包括一格式轉換程序、一資料合併程序、一術語轉換程序、一擴充欄位程序，及一輸入程式碼程序。該格式轉換程序相關於日期表示方式的格式轉換。例如，日期表示方式有110/10/7、7.Oct.2021、2021.10.7等多種態樣，皆統一轉換成一種預定格式，如2021/10/7。該格式轉換程序也可相關於文字轉數字或是文字轉日期。例如，大寫數字壹轉為1。例如，西元二零二一年十一月十九日轉為2021/11/19。

該資料合併程序相關於相同用途的資料作整合。舉例來說，該外部識別後資料所對應的該外部待識別資料所包含的其中三個交易確認書是分別對應三家券商所提供的買賣股票交易資訊，則該資料合併程序會依照預先設定的合併規則，將對應這三家券商的買賣股票交易資訊合併成為一筆資料。

該術語轉換程序相關於術語表示方式的名稱轉換。例如在對應買賣股票交易資訊的部分，該外部識別後資料中的買進或賣出欄位(即其中一個該欄位資料)的數字「1」指示為「買進」，數字「2」指示為「賣出」，透過該術語轉換程序將「1」轉換成「B（Buy）」，「2」轉換成「S（Sell）」。該擴充欄位程序相關於在資料中增加該等欄位資料之其中至少一者。同樣例如在對應買賣股票交易資訊的部分，該外部識別後資料包含手續費欄位、交易稅欄位、淨收付額欄位、及股票代號欄位的該等欄位資料，但卻未包含券商名稱欄位的該欄位資料，透過該擴充欄位程序能夠在資料中加入「券商」的該欄位資料，用以使資料更完整。該輸入程式碼程序相關於執行預定程式碼作資料處理。同樣例如在對應買賣股票交易資訊的部分，券商甲的交易額欄位（即其中一個該欄位資料）使用千（k）元作為單位，其他券商的交易額欄位使用一元作為單位，則該預定程式碼用以將對應券商甲的交易額欄位的每一數值分別乘以1000，以轉換成以元為單位。

該資料比對模組5儲存一主鍵設定值且電連接該資料轉換模組4，該主鍵設定值例如是1或0。當該資料比對模組判斷該主鍵設定值(例如等於0)指示屬於一無鍵值比對形式時，該資料比對模組5對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生一比對結果資料。也就是在該無鍵值比對形式時，每一次的比對都是獨立的，與前一次比對並無關聯。

該資料比對模組5還儲存該等欄位資料之其中被設定為強制符合者的一強制對應關係，也就是說，使用者能夠在該智慧比對系統100中設定每一該欄位資料是否具有對應的該強制對應關係。當該資料比對模組5判斷該主鍵設定值(例如等於1)指示屬於一主鍵值比對形式時，該資料比對模組還根據該強制對應關係對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生該比對結果資料。舉例來說，在對應匯兌表單資訊的部分，該外部轉換後資料及該內部轉換後資料中的匯兌金額欄位（即其中一個該欄位資料），分別是10.1元及10.0元，且10.1元應該被判斷為強制符合10.0元，且使用者已儲存對應的該強制對應關係（即匯兌金額欄位的10.1元等於10.0元），則該資料比對模組5在設定為該主鍵值比對形式下，再次判斷匯兌金額欄位分別是10.1元及10.0元時，會強制判斷為兩者相符合（即相等）。

此外，該資料比對模組5還儲存該等欄位資料之其中部分者的多個權重係數，及對應其中一個該產品別的一閾值，該資料比對模組5還根據該權重係數及對應的該閾值，對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別且相對應的該等欄位資料作比對，以產生該比對結果資料。更詳細地說，在同一個該產品別中該等權重係數之和等於預設的一總和最大值，該資料比對模組5計算在該產品別中相對應的該等欄位資料被判斷相符合者所對應的該至少一權重係數之和，以獲得一加總數值。當該資料比對模組5判斷該加總數值等於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全相符合。當該資料比對模組5判斷該加總數值大於或等於該閾值，且小於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是疑似相符合。當該資料比對模組5判斷該加總數值小於該閾值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全不相符。

需注意的是，每一該欄位資料的該權重係數的設定是在該外部轉換後資料及該內部轉換後資料匯入該資料比對模組5前實施。每一該權重係數的範圍例如是0～100，且該總和最大值例如是100，較重要的該欄位資料的該權重係數被設定較高的數值，完全不重要的該欄位資料的該權重係數則例如設定為0。舉例來說，當該交易確認書的該產品別是股票交易單時，該等欄位資料之其中最重要的該欄位資料是股票代號，其他重要性由高至低的該等欄位資料依序是餘額及交割日。而當該交易確認書的該產品別是外匯交易單時，該等欄位資料之其中最重要的該欄位資料是經紀商（Broker）名稱，其他重要性由高至低的該等欄位資料依序是金額、幣別、及匯率。而當該交易確認書的該產品別是債券交易單時，該等欄位資料之其中最重要的該欄位資料是債券代碼（ISIN CODE），對應的該權重係數例如被設定為80，次重要的該欄位資料是庫存餘額，對應的該權重係數被設定為20，其餘的該等欄位資料的該等權重係數被設定為0，該閾值被設定為80。當該外部轉換後資料及該內部轉換後資料的該欄位資料的債券代碼相同，且該欄位資料的庫存餘額不同時，則該資料比對模組5產生的該比對結果資料包含對應的該等欄位資料是疑似相符合。當該外部轉換後資料及該內部轉換後資料的該欄位資料的債券代碼及該欄位資料的庫存餘額都相同時，則該資料比對模組5產生的該比對結果資料包含對應的該等欄位資料是完全相符。

另外要特別補充說明的是：舉例來說，該外部識別後資料的csv檔中有10列(即10筆)交易紀錄，該內部識別後資料的csv檔中也有10列交易紀錄，該資料比對模組5從該外部識別後資料的csv檔中的10列交易紀錄中的1列交易紀錄與該內部識別後資料的csv檔中的10列交易紀錄逐一作比對，並產生分別對應的10筆該加總數值係數，判斷該10筆該加總數值之其中最高分者作為比對的基準。或者，該外部識別後資料的csv檔的該10列交易紀錄與該內部識別後資料的csv檔的該10列交易紀錄具有對應關係，則該資料比對模組5選擇該兩個csv檔中同一列的交易紀錄作比對。

該資料比對模組5還儲存一比對排程，該資料比對模組5根據該比對排程所指示的時間點，對該外部轉換後資料及該內部轉換後資料中相對應的該等欄位資料作比對，以產生該比對結果資料。舉例來說，每一工作日的下午三點半，該內部來源端伺服系統1會產生該內部交易資料，且該外部來源端伺服系統2會產生對應的該外部交易資料，因此，該資料比對模組5可以是根據該比對排程所指示的時間點，設定資料比對執行時間、頻率及重複執行的次數。執行頻率可以是每日、每周及每月。例如是每一工作日的下午四點半，以執行資料的比對。

該用戶端裝置6電連接該資料比對模組5，並接收該比對結果資料，以顯示該比對結果資料。

綜上所述，上述實施例具有以下優點：優點一，本新型智慧比對系統100藉由該資料識別模組3獲得分別對應的該外部識別後資料及該內部識別後資料並傳送給該資料轉換模組4，用以獲得格式相同的該外部轉換後資料及該內部轉換後資料的該等交易紀錄並傳送給該資料比對模組5，該資料比對模組5對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的該等交易紀錄進行比對，以產生該比對結果資料，相較於人工識別、比對資料，能達到省時省力的效果。

優點二，本新型智慧比對系統100採用低度程式碼設計，例如，匯入資料格式調整、轉換、篩選、比對邏輯條件設定、比對功權數調整、自動排程、自動通知，大幅降低使用者在操作上需與資訊管理人員溝通的時間，同時也減少資訊管理人員維護本新型智慧比對系統100的時間。故確實能達成本新型的目的。

惟以上所述者，僅為本新型的實施例而已，當不能以此限定本新型實施的範圍，凡是依本新型申請專利範圍及專利說明書內容所作的簡單的等效變化與修飾，皆仍屬本新型專利涵蓋的範圍內。

1:內部來源端伺服系統 2:外部來源端伺服系統 3:資料識別模組 4:資料轉換模組 5:資料比對模組 6:用戶端裝置 100:智慧比對系統

本新型的其他的特徵及功效，將於參照圖式的實施方式中清楚地呈現，其中：圖1是一方塊圖，說明本新型智慧比對系統的一實施例。

1:內部來源端伺服系統

2:外部來源端伺服系統

3:資料識別模組

4:資料轉換模組

5:資料比對模組

6:用戶端裝置

100:智慧比對系統

Claims

一種智慧比對系統，適用於一內部來源端伺服系統及一外部來源端伺服系統，並包含：一資料識別模組，包括分別對應不同的多個產品別的多個機器學習模型，並依照一預定排程自該外部來源端伺服系統取得一外部待識別資料，及自該內部來源端伺服系統取得一內部待識別資料，且將該外部待識別資料及該內部待識別資料分別輸入該等機器學習模型，以獲得分別對應的一外部識別後資料及一內部識別後資料，該外部識別後資料及該內部識別後資料分別包含多筆交易紀錄，該等交易紀錄包含格式不完全相同的多種欄位資料；一資料轉換模組，電連接該資料識別模組，以接收該外部識別後資料及該內部識別後資料，並對該外部識別後資料及該內部識別後資料分別執行多個轉換程序，以獲得分別對應的一外部轉換後資料及一內部轉換後資料，且該外部轉換後資料及該內部轉換後資料的該等交易紀錄分別包含格式相同的該等欄位資料；及一資料比對模組，電連接該資料轉換模組，並對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的該等交易紀錄進行比對，以產生一比對結果資料。
如請求項1所述的智慧比對系統，還適用於一用戶端裝置，電連接該資料比對模組，並接收該比對結果資料，以顯示該比對結果資料。
如請求項1所述的智慧比對系統，其中，該預定排程是藉由一流程機器人（Robotic Process Automation，RPA）系統來設定。
如請求項1所述的智慧比對系統，其中，該等轉換程序包括一格式轉換程序、一資料合併程序、一術語轉換程序、一擴充欄位程序，及一輸入程式碼程序，該格式轉換程序相關於日期表示方式的格式轉換，該資料合併程序相關於相同用途的資料作整合，該術語轉換程序相關於術語表示方式的名稱轉換，該擴充欄位程序相關於在資料中增加該等欄位資料之其中至少一者，該輸入程式碼程序相關於執行預定程式碼作資料處理。
如請求項4所述的智慧比對系統，其中，該資料比對模組還儲存一主鍵設定值，當該資料比對模組判斷該主鍵設定值指示屬於一無鍵值比對形式時，該資料比對模組對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生該比對結果資料。
如請求項5所述的智慧比對系統，其中，該資料比對模組還儲存該等欄位資料之其中被設定為強制符合者的一強制對應關係，當該資料比對模組判斷該主鍵設定值指示屬於一主鍵值比對形式時，該資料比對模組還根據該強制對應關係對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別的且相對應的該等交易紀錄的該等欄位資料作比對，以產生該比對結果資料。
如請求項6所述的智慧比對系統，其中，該資料比對模組還儲存該等欄位資料之其中部分者的多個權重係數，及對應其中一個該產品別的一閾值，該資料比對模組還根據該權重係數及對應的該閾值，對該外部轉換後資料及該內部轉換後資料中屬於相同的該產品別且相對應的該等欄位資料作比對，以產生該比對結果資料。
如請求項7所述的智慧比對系統，其中，在同一個該產品別中該等權重係數之和等於預設的一總和最大值，該資料比對模組計算在該產品別中相對應的該等欄位資料被判斷相符合者所對應的該至少一權重係數之和，以獲得一加總數值，當該資料比對模組判斷該加總數值等於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全相符合，當該資料比對模組判斷該加總數值大於或等於該閾值，且小於該總和最大值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是疑似相符合，當該資料比對模組判斷該加總數值小於該閾值時，所產生的該比對結果資料包含對應該產品別的該等欄位資料是完全不相符。
如請求項6所述的智慧比對系統，其中，該資料比對模組還儲存一比對排程，該資料比對模組根據該比對排程所指示的時間點，對該外部轉換後資料及該內部轉換後資料中相對應的該等欄位資料作比對，以產生該比對結果資料。