CN113362177A - 交易数据回溯方法及装置 - Google Patents
交易数据回溯方法及装置 Download PDFInfo
- Publication number
- CN113362177A CN113362177A CN202110736158.5A CN202110736158A CN113362177A CN 113362177 A CN113362177 A CN 113362177A CN 202110736158 A CN202110736158 A CN 202110736158A CN 113362177 A CN113362177 A CN 113362177A
- Authority
- CN
- China
- Prior art keywords
- scene
- control
- transaction
- backtracking
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 238000013507 mapping Methods 0.000 claims abstract description 34
- 230000006870 function Effects 0.000 claims description 28
- 238000012545 processing Methods 0.000 claims description 28
- 230000001502 supplementing effect Effects 0.000 claims description 12
- 238000003860 storage Methods 0.000 claims description 11
- 238000004458 analytical method Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 8
- 230000007246 mechanism Effects 0.000 abstract description 15
- 230000008569 process Effects 0.000 description 21
- 238000000605 extraction Methods 0.000 description 8
- 238000013461 design Methods 0.000 description 7
- 238000013500 data storage Methods 0.000 description 6
- 238000003058 natural language processing Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000009826 distribution Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 125000004122 cyclic group Chemical group 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000012552 review Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000009960 carding Methods 0.000 description 2
- 238000010224 classification analysis Methods 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000004900 laundering Methods 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供了一种交易数据回溯方法及装置。包括：通过接收回溯指令；获取待回溯场景关联的控件的属性值；查找获得结构化查询语言数据库中表字段下的业务数据，表字段的命名与控件的属性值之间的文本相似度达到预设阈值；通过查找结构化查询语言的操作类型与业务数据的映射关系，确定表字段下的业务数据对应的操作类型，获得待回溯场景的回溯结果。本申请兼顾了系统源码的安全性和系统的透明度，根据待回溯场景的控件属性值与结构化语言数据库中的表字段的文本相似度，实现了交易界面输入域与后台业务数据的关联关系映射，使得外部机构在不接触源码的前提下，也能通过数据了解实际业务含义，有效解决外部机构对系统交易数据的交易回溯问题。
Description
技术领域
本申请涉及交易回溯领域，尤其涉及一种交易数据回溯方法及装置。
背景技术
在合规检查中，需要银行为反洗钱系统提供高质量的客户、账户、交易数据。在实施过程中，一般由当地独立的外部机构对接口数据进行检查测试。
现有的交易系统中内嵌有交易查看功能，该功能由各交易模块开发人员开发，由于交易开发人员熟知系统源代码，明确知悉交易的数据信息是如何存储在系统后台数据库，同时也明确具体的交易业务要素，因此由交易模块开发人员直接从后台数据库特定数据表中获取交易数据进行展现。也因此该系统内部的交易数据回看功能分布在各个不同的模块，交易系统的模块开发人员只对自己的模块负责，只了解本模块下的数据，也就仅能完成本模块下的交易数据场景回溯。
然而，上述方案中，由于外部机构不熟悉交易业务，同时系统源码需要保密无法公开，使得外部机构无法有效实现交易回溯。
发明内容
本申请提供一种交易数据回溯方法及装置，用以实现便捷地对系统交易数据的交易回溯。
第一方面，本申请提供一种交易数据回溯方法，包括：接收回溯指令，所述回溯指令包括待回溯场景的信息；获取所述待回溯场景关联的第一控件的属性值；查找获得结构化查询语言数据库中第一表字段下的业务数据，所述第一表字段的命名与所述第一控件的属性值之间的文本相似度达到预设阈值；通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
第二方面，本申请提供一种交易数据回溯装置，包括：获取模块，用于接收回溯指令，所述回溯指令包括待回溯场景的信息；处理模块，用于获取所述待回溯场景关联的第一控件的属性值；所述处理模块，还用于查找获得结构化查询语言数据库中第一表字段下的业务数据，所述第一表字段的命名与所述第一控件的属性值之间的文本相似度达到预设阈值；所述处理模块，还用于通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
第三方面，本申请提供一种电子设备，包括：存储器，处理器；存储器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为：根据所述可执行指令执行如第一方面所述的方法。
第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如第一方面所述的方法。
第五方面，本申请提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的方法。
本申请提供的交易数据回溯方法及装置，通过接收回溯指令；获取待回溯场景关联的控件的属性值；查找获得结构化查询语言数据库中表字段下的业务数据，表字段的命名与控件的属性值之间的文本相似度达到预设阈值；通过查找结构化查询语言的操作类型与业务数据的映射关系，确定表字段下的业务数据对应的操作类型，获得待回溯场景的回溯结果。本申请的方案，兼顾了系统源码的安全性和系统的透明度，根据待回溯场景的控件属性值与结构化语言数据库中的表字段的文本相似度，实现了交易界面输入域与后台业务数据的关联关系映射，使得外部机构在不接触源码的前提下，也能通过数据了解实际业务含义，有效解决外部机构对系统交易数据的交易回溯问题。
应当理解，上述发明内容部分中所描述的内容并非旨在限定本申请的实施例的关键或重要特征，亦非用于限制本申请的范围。本申请的其它特征将通过以下的描述变得容易理解。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
图1为本申请提供的一种应用场景示意图；
图2为本申请实施例一提供的交易数据回溯方法的流程图；
图3为本申请实施例一提供的方法中获取各业务场景关联控件属性值的流程图；
图4为本申请实施例一提供的方法中获取类继承关系的流程图；
图5为本申请实施例一提供的方法中获取特定交易中控件属性值的流程图；
图6为本申请实施例一提供的方法中解析数据库SQL的流程图；
图7为本申请实施例一提供的方法中前台交易界面输入域与后台表字段的映射流程图；
图8为本申请实施例二提供的交易数据回溯装置的结构示意图；
图9为本申请实施例三提供的一种电子设备的结构示意图。
通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
首先对本申请所涉及的名词进行解释：
结构化查询语言(Structured Query Language，SQL)：一种对数据库进行操作的程序设计语言，该语言用于存取数据以及查询、更新和管理关系数据库系统。该语言具有高度非过程化的特点，像存取路径选择和具体处理操作等均由系统自动完成。该语言简洁，核心功能只用了9个动词，其语法接近英语口语，容易学习和使用。
交易业务要素：是对交易信息进行抽象分解的结果，指交易过程中需要明确记录的信息，如交易时间、金额、币种等。
交易技术要素：银行IT系统中，用于存储各类交易信息的物理数据项，它是业务要素的物理表示，保存于IT系统后台数据库中。
交易场景回溯：IT系统后台数据库存储了关于交易的各类数据，通过组合分析这些数据，将签订交易时的详细合约信息(如A与B签订了多少金额的转账交易)，进行解释说明。
自然语言处理技术(Natural Language Processing，NLP)：它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言，即人们日常使用的语言。自然语言处理在于研制能有效地实现自然语言通信的计算机系统，特别是其中的软件系统。自然语言处理主要应用于机器翻译、自动摘要、观点提取、文本分类、文本语义对比、语音识别等方面。
Smart Client：一种一个可扩展的能集成不同应用的桌面应用程序。可动态加载，即需即装。
本申请应用在合规检查的场景中。合规检查需要银行为反洗钱系统提供高质量的客户、账户、交易数据。在实施过程中，一般由当地独立的外部机构对接口数据进行检查测试。现有的交易系统中内嵌有交易查看功能，该功能由各交易模块开发人员开发，由于交易开发人员熟知系统源代码，明确知悉交易的数据信息是如何存储在系统后台数据库，同时也明确具体的交易业务要素，因此由交易模块开发人员直接从后台数据库特定数据表中获取交易数据进行展现。也因此该系统内部的交易数据回看功能分布在各个不同的模块，交易系统的模块开发人员只对自己的模块负责，只了解本模块下的数据，也就仅能完成本模块下的交易数据场景回溯。
然而，上述方案中，首先必须具有交易系统的使用权限，其次，需要通过数据分辨交易所属模块，然外部人员不可能具有交易系统的使用权限，同时如果外部人员已经可以通过数据分辨交易模块，说明其已经熟知交易数据，那就不需要再进行交易场景回溯了。由于外部机构不熟悉交易业务，同时系统源码需要保密无法公开，使得外部机构短时间内无法快速熟悉业务与系统，难以理解接口数据代表的实际交易状况。
本申请提供了一种交易数据回溯方法及装置，旨在解决现有技术中如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
实施例一
本申请提供的交易数据回溯方法及装置，可以适用于图1所示的一种应用场景。对于银行而言，柜台人员操作核心系统录入的信息构成了交易合约，要进行交易场景回溯，相当于需要明确交易时的具体场景。具体的，合规人员发出请求交易回溯的指令，交易回溯指令包括回溯场景的信息，比如待回溯交易的类型、交易的金额、交易的时间等。交易数据回溯装置根据待回溯场景，获取相关的控件的属性值。同时，查找结构化查询语言数据库，对待回溯交易的全量SQL语句进行抽取和分析，根据控件属性值与表字段的命名之间的文本相似度，获得结构化查询语言数据库中表字段下的业务数据。通过查找结构化查询语言的操作类型与业务数据的映射关系，确定表字段下的业务数据对应的操作类型。通过以上过程，实现业务要素与技术要素的匹配映射，使得数据消费者可以通过透过数据来了解实际的业务含义，有效解决了外部机构对系统交易数据的交易回顾问题。其中，业务要素本质上可以认为是柜台操作界面的各个输入选项，技术要素则为业务要素在后台数据库中的物理表示。
图2为本申请实施例一提供的交易数据回溯方法的流程图，如图2所示，本申请实施例一提供的交易数据回溯方法包括：
步骤101、接收回溯指令，回溯指令包括待回溯场景的信息；
步骤102、获取待回溯场景关联的第一控件的属性值；
步骤103、查找获得结构化查询语言数据库中第一表字段下的业务数据，第一表字段的命名与第一控件的属性值之间的文本相似度达到预设阈值；
步骤104、通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
通过上述步骤，可实现业务要素与技术要素的关联关系映射，使外部机构通过数据来了解实际的业务含义，实现对交易场景的回溯。其中，业务要素本质上可以认为是柜台操作界面的各个输入选项，比如，交易时间、交易金额、交易币种等。技术要素则为业务要素在后台数据库中的物理表示。交易回溯则通过组合分析这些技术要素，将交易过程及交易数据进行解释说明，比如用户A与用户B签订了多少金额的转账交易。
由于交易过程中涉及的对后台数据库中数据的变动(包括录入、更新等)是借助SQL语言执行的，所以借助类似的方法捕获系统中的全量SQL，并开发对应的SQL解析器，分析系统如何使用SQL对数据库的进行操作，获取数据的具体存储分布，辨明数据存储路径，实现交易业务要素与技术要素的匹配映射，并在第三方平台展现交易场景的具体信息，可解决交易数据场景回溯的问题。
具体的，待回溯场景的信息包括交易类型、交易时间、交易金额、交易用户等各种在合规检查过程中可能涉及需要被检查的项。需要说明的是，银行核心交易系统对于交易进行了类别的两层划分，第一层划分模块大类，例如贷款、债券、衍生品等，在模块大类的基础之上，再进行细分，例如贷款模块下辖循环贷款、银团贷款，债券模块下辖债券买卖、债券回购等。因此，在不同回溯场景下相关联的控件可能存在差异。因此在步骤101之前，需要为控件属性值的获取进行一些准备工作。
一个示例中，在步骤101之前的准备工作如图3所示，图3为本申请实施例一提供的获取各业务场景关联控件属性值的流程图，具体包括以下步骤,：
步骤201、确定各业务场景关联的控件；
步骤202、针对每个业务场景，执行以下处理，获得各业务场景关联的控件的属性值：分析获得业务场景关联的控件的属性设置函数；以属性设置函数为文本特征，对展现层源码中业务场景对应的源码进行文本扫描，获得业务场景关联的控件的属性值。
具体的，首先梳理全部交易模块所使用的控件类型，针对不同的控件类型，分析并获取属性设置函数，将其标记为该控件的文本特征，再对客户端展现层源码进行文本扫描，根据之前获取的控件文本特征值解析该控件在特定交易中的具体属性值。需要说明的是，核心交易系统的客户端是一种采用SmartClient技术开发的Windows桌面应用程序，展现层由window form控件，并且搭配各种其他根据不同交易个性化的扩展控件所组装而成。
在实际应用过程中，对于银行而言，柜台人员的操作界面上的各个输入选项，既可以认为是该交易场景回溯所需要的全部业务要素，因此，梳理过程为借助自然语言处理技术对客户端展现层源码进行特征提取，自动获取代码工程中的界面设计元素，并通过人工智能的方法清洗分离文本数据，获得与交易界面中的业务要素对应的控件属性值。其中，客户端展现层源码包含全部交易的代码，在梳理过程中，分别梳理出每个业务场景相关的控件的属性值，最终获得全部交易的全部业务要素对应的控件属性值。
进一步地，不同交易模块下的不同交易类型之间控件的设置方式不同，比如，在贷款交易模块下，循环贷款与银团贷款所使用的控件有的被设置为可视，有的设置为不可视。不同交易模块会存在公用的控件，因此被设计在基类中，在个特定交易下采用继承的方法进行调用，因此可能存在类继承关系，也就是说可能存在部分控件存在于上层基类中，所以在扫描控件的同时，需要解析类继承关系并据此进行隐藏的控件补充。
在一个示例中，获得类继承关系的步骤如图4所示，图4为本申请实施例一提供的获取类继承关系的流程图，具体包括如下步骤：
步骤301、针对每个业务场景，通过解析展现层源码，确定业务场景的类继承关系；
步骤302、基于业务场景的继承关系，确定业务场景关联的补充控件并分析获得补充控件的属性设置函数；
步骤303、以补充控件的属性设置函数为文本特征，对展现层源码进行文本扫描，获得补充控件的属性值；
步骤304、将业务场景关联的控件的属性值以及补充控件的属性值，作为待回溯场景关联的第一控件的属性值。
以上步骤201至步骤202以及步骤301至步骤304，可将抽取全部控件属性值的过程汇总为如图5所示。根据对核心交易系统客户端代码所用的控件进行分类解析，按照控件类型针对性地抽取全部交易的输入要素，为后续重构交易场景铺垫基础。
图5为本申请实施例一提供的抽取特定交易中控件属性值的流程图。图中交易界面输入域域名抽取是指自客户端展现层源码中提取界面设计元素，其与柜台操作界面输入选项相对应，将抽取结果汇总至输入域域名字典表。图中的交易类继承关系抽取是指自客户端展现层源码中提取类继承关系，判断是够存在父类子类继承关系，若存在继承关系，则对输入域域名字典表进行补全，以上得到特定交易的全部控件属性值。
如图5所示，在完成对控件类型的梳理前提下，确定各类控件的扫描规则(即不同控件的文本特征)，读取交易界面配置文件的内容(即客户端展现层源码中后缀为.designer.cs的文件)，根据扫描规则抽取获得交易界面中输入域控件属性值，同时根据类继承关系，获取隐藏在父类中的相关控件，合并得到完整的交易控件标签。
进一步地，在一个示例中，步骤104中建立操作类型与业务数据之间的映射关系的方法具体包括以下步骤：步骤401、基于结构化查询语言，分析结构化查询语言数据库，获得各结构化查询语言中包含的表字段；步骤402、基于各结构化查询语言的操作类型和各表字段下的业务数据，建立操作类型与业务数据之间的映射关系。
需要说明的是，服务器端程序中，所使用的是嵌入式SQL来实现对数据库的操作，单纯从文本的角度看，SQL具有非常明显的文本特征(以SELECT、UPDATE、INSERT等关键词开头)，通过抽取SQL来分析交易系统对数据的操作，可以得到交易程序处理的表字段清单，理清后台数据的处理范围。
以表1“persons”表为例，对SQL语句进行介绍。表1中包含表字段“LastName”、“FirstName”、“City”。
表1“persons”表
| LastName | FirstName | City |
| Li | John | Beijng |
| Wang | Tom | London |
1、SQL select语句，用于从表格中选取数据，语句执行结果被存储在一个结果表中。对“persons”表执行查询语句“SELECT LastName,FirstName FROM Persons”，结果如表2所示。解析该语句的意思为：从表格“Persons”中选取出表字段LastName和FirstName下的业务数据。其中，SQL语句中包含操作类型“SELECT”、表字段“LastName”和“FirstName”和表格名称“Persons”信息。通过解析SQL语句可以获取业务数据的具体存储分布，辨明数据存储路径。
表2“persons”表
| LastName | FirstName |
| Li | John |
| Wang | Tom |
2、SQL insert语句，用于向表格中插入新的行。对表1“persons”表执行插入语句“INSERT INTO Persons(LastName,FirstName)VALUES('Zhao','Bill')”，结果表3所示。解析该语句的意思为：在表格“Persons”中添加一行，新的一行数据中表字段LastName下为“Zhao”，FirstName下为“Bill”。其中，SQL语句中包含操作类型“INSERT”，表字段“LastName”和“FirstName”，表格名称“Persons”。并且该语句语法接近英语，容易理解。
表3“persons”表
| LastName | FirstName | City |
| Li | John | Beijng |
| Wang | Tom | London |
| Zhao | Bill |
3、SQL update语句，用于修改表中的数据。对表3“persons”表执行update语句“UPDATE Person SET City＝'Beijing'WHERE LastName＝'Zhao'”，为表格中lastname为“Zhao”的人添加city为“Beijing”，结果如表4所示。解析该语句的意思为：在表格“Persons”中，在LastName下数据为“Zhao”的一行中修改City下数据为“Beijing”。
表4“persons”表
| LastName | FirstName | City |
| Li | John | Beijng |
| Wang | Tom | London |
| Zhao | Bill | Beijing |
综上可知，SQL语句中包含表名称、表字段名称，可通过解析SQL语句分析系统如何使用SQL对数据库的进行操作，获取数据的具体存储分布，辨明数据存储路径。
图6为本申请实施例一提供的解析数据库SQL的流程图。接收回溯指令后，读取系统交易配置表中的相关配置，定位交易代码文件，抽取文件中的SQL相关内容，获取源码SQL信息表并通过解析SQL获取交易系统表结构信息中完整字段信息，进而得到交易-字段关系映射表。通过该交易-字段映射表可获得待回溯交易中的业务数据及交易过程中业务数据变化过程。
进一步地，图7为本申请实施例一提供的交易回溯中前台交易界面输入域与后台表字段的映射流程图。通过对命名标准以及实际工程代码的解读，发现后台数据库中表字段的命名与柜台操作界面的交易输入域域名存在极大地相似性，基本是由输入域域名的缩写组成，例如交易输入域facility no对应的后台数据库中的表字段为fac_no，因此，结合后台工程源码SQL解析得到的表字段清单，同时借助计算文本相似度，即可以实现前台交易界面输入域与后台表字段的映射，最终通过少量的人工校验工作来保障实现精准匹配。
本申请实施例一提供的交易数据回溯方法，通过接收回溯指令；获取待回溯场景关联的控件的属性值；查找获得结构化查询语言数据库中表字段下的业务数据，表字段的命名与控件的属性值之间的文本相似度达到预设阈值；通过查找结构化查询语言的操作类型与业务数据的映射关系，确定表字段下的业务数据对应的操作类型，获得待回溯场景的回溯结果。本申请的方法，兼顾了系统源码的安全性和系统的透明度，根据待回溯场景的控件属性值与结构化语言数据库中的表字段的文本相似度，实现了交易界面输入域与后台业务数据的关联关系映射，使得外部机构在不接触源码的前提下，也能通过数据了解实际业务含义，有效解决外部机构对系统交易数据的交易回溯问题。
实施例二
本申请实施例二提供的交易数据回溯装置的结构示意图，如图8所示，包括：获取模块10，用于接收回溯指令，回溯指令包括待回溯场景的信息；处理模块20，用于获取待回溯场景关联的第一控件的属性值；处理模块20，还用于查找获得结构化查询语言数据库中第一表字段下的业务数据，第一表字段的命名与第一控件的属性值之间的文本相似度达到预设阈值；处理模块20，还用于通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
通过上述装置，可实现业务要素与技术要素的关联关系映射，使外部机构通过数据来了解实际的业务含义，实现对交易场景的回溯。其中，业务要素本质上可以认为是柜台操作界面的各个输入选项，比如，交易时间、交易金额、交易币种等。技术要素则为业务要素在后台数据库中的物理表示。交易回溯则通过组合分析这些技术要素，将交易过程及交易数据进行解释说明，比如用户A与用户B签订了多少金额的转账交易。
由于交易过程中涉及的对后台数据库中数据的变动(包括录入、更新等)是借助SQL语言执行的，所以借助类似的方法捕获系统中的全量SQL，并开发对应的SQL解析器，分析系统如何使用SQL对数据库的进行操作，获取数据的具体存储分布，辨明数据存储路径，实现交易业务要素与技术要素的匹配映射，并在第三方平台展现交易场景的具体信息，可解决交易数据场景回溯的问题。
具体的，待回溯场景的信息包括交易类型、交易时间、交易金额、交易用户等各种在合规检查过程中可能涉及需要被检查的项。需要说明的是，银行核心交易系统对于交易进行了类别的两层划分，第一层划分模块大类，例如贷款、债券、衍生品等，在模块大类的基础之上，再进行细分，例如贷款模块下辖循环贷款、银团贷款，债券模块下辖债券买卖、债券回购等。因此，在不同回溯场景下相关联的控件可能存在差异。
进一步地，在一个示例中，处理模块20包括：属性获取单元，用于在处理模块获取待回溯场景关联的第一控件的属性值之前确定各业务场景关联的控件；属性获取单元，还用于针对每个业务场景，执行以下处理，获得各业务场景关联的控件的属性值：分析获得业务场景关联的控件的属性设置函数；以属性设置函数为文本特征，对展现层源码中业务场景对应的源码进行文本扫描，获得业务场景关联的控件的属性值。
具体的，首先梳理全部交易模块所使用的控件类型，针对不同的控件类型，分析并获取属性设置函数，将其标记为该控件的文本特征，再对客户端展现层源码进行文本扫描，根据之前获取的控件文本特征值解析该控件在特定交易中的具体属性值。需要说明的是，核心交易系统的客户端是一种采用SmartClient技术开发的Windows桌面应用程序，展现层由window form控件，并且搭配各种其他根据不同交易个性化的扩展控件所组装而成。
在实际应用过程中，对于银行而言，柜台人员的操作界面上的各个输入选项，既可以认为是该交易场景回溯所需要的全部业务要素，因此，梳理过程为借助自然语言处理技术对客户端展现层源码进行特征提取，自动获取代码工程中的界面设计元素，并通过人工智能的方法清洗分离文本数据，获得与交易界面中的业务要素对应的控件属性值。其中，客户端展现层源码包含全部交易的代码，在梳理过程中，分别梳理出每个业务场景相关的控件的属性值，最终获得全部交易的全部业务要素对应的控件属性值。
进一步地，不同交易模块下的不同交易类型之间控件的设置方式不同，比如，在贷款交易模块下，循环贷款与银团贷款所使用的控件有的被设置为可视，有的设置为不可视。不同交易模块会存在公用的控件，因此被设计在基类中，在个特定交易下采用继承的方法进行调用，因此可能存在类继承关系，也就是说可能存在部分控件存在于上层基类中，所以在扫描控件的同时，需要解析类继承关系并据此进行隐藏的控件补充。
在一个示例中，处理模块20还包括：控件属性补充单元，用于针对每个业务场景，通过解析展现层源码，确定业务场景的类继承关系；控件属性补充单元，还用于基于业务场景的继承关系，确定业务场景关联的补充控件并分析获得补充控件的属性设置函数；控件属性补充单元，还用于以补充控件的属性设置函数为文本特征，对展现层源码进行文本扫描，获得补充控件的属性值；处理模块，具体用于将业务场景关联的控件的属性值以及补充控件的属性值，作为待回溯场景关联的第一控件的属性值。
以上设置实现了对全部控件属性值的抽取。根据对核心交易系统客户端代码所用的控件进行分类解析，按照控件类型针对性地抽取全部交易的输入要素，为后续重构交易场景铺垫基础。参照图5，自客户端展现层源码中提取界面设计元素，其与柜台操作界面输入选项相对应，将抽取结果汇总至输入域域名字典表；自客户端展现层源码中提取类继承关系，判断是够存在父类子类继承关系，若存在继承关系，则对输入域域名字典表进行补全，以上得到特定交易的全部控件属性值。在完成对控件类型的梳理前提下，确定各类控件的扫描规则(即不同控件的文本特征)，读取交易界面配置文件的内容(即客户端展现层源码中后缀为.designer.cs的文件)，根据扫描规则抽取获得交易界面中输入域控件属性值，同时根据类继承关系，获取隐藏在父类中的相关控件，合并得到完整的交易控件标签。
在一个示例中，处理模块还包括：结构化查询语言分析单元，用于基于结构化查询语言，分析结构化查询语言数据库，获得各结构化查询语言中包含的表字段；结构化查询语言分析单元，还用于基于各结构化查询语言的操作类型和各表字段下的业务数据，建立操作类型与业务数据之间的映射关系。
需要说明的是，服务器端程序中，所使用的是嵌入式SQL来实现对数据库的操作，单纯从文本的角度看，SQL具有非常明显的文本特征(以SELECT、UPDATE、INSERT等关键词开头)，通过抽取SQL来分析交易系统对数据的操作，可以得到交易程序处理的表字段清单，理清后台数据的处理范围。SQL语句中包含表名称、表字段名称，可通过解析SQL语句分析系统如何使用SQL对数据库的进行操作，获取数据的具体存储分布，辨明数据存储路径。具体的解析数据库SQL的过程如图6所示，接收回溯指令后，读取系统交易配置表中的相关配置，定位交易代码文件，抽取文件中的SQL相关内容，获取源码SQL信息表并通过解析SQL获取交易系统表结构信息中完整字段信息，进而得到交易-字段关系映射表。通过该交易-字段映射表可获得待回溯交易中的业务数据及交易过程中业务数据变化过程。
进一步地，通过对命名标准以及实际工程代码的解读，发现后台数据库中表字段的命名与柜台操作界面的交易输入域域名存在极大地相似性，基本是由输入域域名的缩写组成，例如交易输入域facility no对应的后台数据库中的表字段为fac_no，因此，结合后台工程源码SQL解析得到的表字段清单，同时借助计算文本相似度，即可以实现前台交易界面输入域与后台表字段的映射，最终通过少量的人工校验工作来保障实现精准匹配。
本申请实施例二提供的交易数据回溯方法及装置，包括获取模块10，用于接收回溯指令，回溯指令包括待回溯场景的信息；处理模块20，用于获取待回溯场景关联的第一控件的属性值；还用于查找获得结构化查询语言数据库中第一表字段下的业务数据，第一表字段的命名与第一控件的属性值之间的文本相似度达到预设阈值；还用于通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。本申请兼顾了系统源码的安全性和系统的透明度，根据待回溯场景的控件属性值与结构化语言数据库中的表字段的文本相似度，实现了交易界面输入域与后台业务数据的关联关系映射，使得外部机构在不接触源码的前提下，也能通过数据了解实际业务含义，有效解决外部机构对系统交易数据的交易回溯问题。
实施例三
图9为本申请实施例三提供的一种电子设备的结构示意图，如图9所示，电子设备包括：
处理器(processor)291，电子设备还包括了存储器(memory)292；还可以包括通信接口(Communication Interface)293和总线294。其中，处理器291、存储器292、通信接口293、可以通过总线294完成相互间的通信。通信接口293可以用于信息传输。处理器291可以调用存储器292中的逻辑指令，以执行上述实施例的方法。
此外，上述的存储器292中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。
存储器292作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本申请实施例中的方法对应的程序指令/模块。处理器291通过运行存储在存储器292中的软件程序、指令以及模块，从而执行功能应用以及数据处理，即实现上述方法实施例中的方法。
存储器292可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端设备的使用所创建的数据等。此外，存储器292可以包括高速随机存取存储器，还可以包括非易失性存储器。
本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质中存储有计算机执行指令，计算机执行指令被处理器执行时用于实现上述实施例提供的方法。
本申请实施例提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述实施例提供的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。
Claims (11)
1.一种交易数据回溯方法，其特征在于，包括：
接收回溯指令，所述回溯指令包括待回溯场景的信息；
获取所述待回溯场景关联的第一控件的属性值；
查找获得结构化查询语言数据库中第一表字段下的业务数据，所述第一表字段的命名与所述第一控件的属性值之间的文本相似度达到预设阈值；
通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
2.根据权利要求1所述的方法，其特征在于，所述获取所述待回溯场景关联的第一控件的属性值之前，还包括：
确定各业务场景关联的控件；
针对每个业务场景，执行以下处理，获得各业务场景关联的控件的属性值：
分析获得所述业务场景关联的控件的属性设置函数；以所述属性设置函数为文本特征，对展现层源码中所述业务场景对应的源码进行文本扫描，获得所述业务场景关联的控件的属性值。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
针对每个业务场景，通过解析展现层源码，确定所述业务场景的类继承关系；
基于所述业务场景的继承关系，确定所述业务场景关联的补充控件并分析获得所述补充控件的属性设置函数；
以所述补充控件的属性设置函数为文本特征，对展现层源码进行文本扫描，获得所述补充控件的属性值；
将所述业务场景关联的控件的属性值以及所述补充控件的属性值，作为所述待回溯场景关联的第一控件的属性值。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
基于结构化查询语言，分析结构化查询语言数据库，获得各结构化查询语言中包含的表字段；
基于各结构化查询语言的操作类型和各表字段下的业务数据，建立操作类型与业务数据之间的映射关系。
5.一种交易数据回溯装置，其特征在于，包括：
获取模块，用于接收回溯指令，所述回溯指令包括待回溯场景的信息；
处理模块，用于获取所述待回溯场景关联的第一控件的属性值；
所述处理模块，还用于查找获得结构化查询语言数据库中第一表字段下的业务数据，所述第一表字段的命名与所述第一控件的属性值之间的文本相似度达到预设阈值；
所述处理模块，还用于通过查找结构化查询语言的操作类型与业务数据的映射关系，确定第一表字段下的业务数据对应的第一操作类型，获得待回溯场景的回溯结果。
6.根据权利要求5所述的装置，其特征在于，所述处理模块包括：属性获取单元，
所述属性获取单元，用于在所述处理模块获取所述待回溯场景关联的第一控件的属性值之前确定各业务场景关联的控件；
所述属性获取单元，还用于针对每个业务场景，执行以下处理，获得各业务场景关联的控件的属性值：分析获得所述业务场景关联的控件的属性设置函数；以所述属性设置函数为文本特征，对展现层源码中所述业务场景对应的源码进行文本扫描，获得所述业务场景关联的控件的属性值。
7.根据权利要求6所述的装置，其特征在于，所述处理模块还包括：
控件属性补充单元，用于针对每个业务场景，通过解析展现层源码，确定所述业务场景的类继承关系；
所述控件属性补充单元，还用于基于所述业务场景的继承关系，确定所述业务场景关联的补充控件并分析获得所述补充控件的属性设置函数；
所述控件属性补充单元，还用于以所述补充控件的属性设置函数为文本特征，对展现层源码进行文本扫描，获得所述补充控件的属性值；
所述处理模块，具体用于将所述业务场景关联的控件的属性值以及所述补充控件的属性值，作为所述待回溯场景关联的第一控件的属性值。
8.根据权利要求5所述的装置，其特征在于，所述处理模块还包括：
结构化查询语言分析单元，用于基于结构化查询语言，分析结构化查询语言数据库，获得各结构化查询语言中包含的表字段；
结构化查询语言分析单元，还用于基于各结构化查询语言的操作类型和各表字段下的业务数据，建立操作类型与业务数据之间的映射关系。
9.一种电子设备，其特征在于，包括：存储器，处理器；
存储器；用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为：根据所述可执行指令执行如权利要求1-4中任一项所述的回溯方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1-4中任一项所述的回溯方法。
11.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-4中任一项所述的回溯方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110736158.5A CN113362177B (zh) | 2021-06-30 | 2021-06-30 | 交易数据回溯方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110736158.5A CN113362177B (zh) | 2021-06-30 | 2021-06-30 | 交易数据回溯方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113362177A true CN113362177A (zh) | 2021-09-07 |
| CN113362177B CN113362177B (zh) | 2024-03-19 |
Family
ID=77537427
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110736158.5A Active CN113362177B (zh) | 2021-06-30 | 2021-06-30 | 交易数据回溯方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113362177B (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103488694A (zh) * | 2013-09-02 | 2014-01-01 | 用友软件股份有限公司 | 业务数据查询装置和业务数据查询方法 |
| US20150149432A1 (en) * | 2013-11-22 | 2015-05-28 | Capital One Financial Corporation | Systems and methods for searching financial data |
| CN109840256A (zh) * | 2019-03-05 | 2019-06-04 | 山东浪潮通软信息科技有限公司 | 一种基于业务实体的查询实现方法 |
| CN110990400A (zh) * | 2019-11-20 | 2020-04-10 | 浙江大搜车软件技术有限公司 | 数据库查询方法、装置、计算机设备和存储介质 |
| CN111078702A (zh) * | 2019-12-17 | 2020-04-28 | 南京南瑞继保工程技术有限公司 | 一种sql语句分类管理及统一查询方法和装置 |
| CN111367899A (zh) * | 2020-02-26 | 2020-07-03 | 中国工商银行股份有限公司 | 金融业务数据展示方法及装置 |
| CN112052242A (zh) * | 2020-09-02 | 2020-12-08 | 平安科技（深圳）有限公司 | 数据查询方法、装置、电子设备及存储介质 |
| CN112506952A (zh) * | 2020-12-11 | 2021-03-16 | 中信银行股份有限公司 | 数据查询装置和数据查询方法 |
-
2021
- 2021-06-30 CN CN202110736158.5A patent/CN113362177B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103488694A (zh) * | 2013-09-02 | 2014-01-01 | 用友软件股份有限公司 | 业务数据查询装置和业务数据查询方法 |
| US20150149432A1 (en) * | 2013-11-22 | 2015-05-28 | Capital One Financial Corporation | Systems and methods for searching financial data |
| CN109840256A (zh) * | 2019-03-05 | 2019-06-04 | 山东浪潮通软信息科技有限公司 | 一种基于业务实体的查询实现方法 |
| CN110990400A (zh) * | 2019-11-20 | 2020-04-10 | 浙江大搜车软件技术有限公司 | 数据库查询方法、装置、计算机设备和存储介质 |
| CN111078702A (zh) * | 2019-12-17 | 2020-04-28 | 南京南瑞继保工程技术有限公司 | 一种sql语句分类管理及统一查询方法和装置 |
| CN111367899A (zh) * | 2020-02-26 | 2020-07-03 | 中国工商银行股份有限公司 | 金融业务数据展示方法及装置 |
| CN112052242A (zh) * | 2020-09-02 | 2020-12-08 | 平安科技（深圳）有限公司 | 数据查询方法、装置、电子设备及存储介质 |
| CN112506952A (zh) * | 2020-12-11 | 2021-03-16 | 中信银行股份有限公司 | 数据查询装置和数据查询方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113362177B (zh) | 2024-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20200151201A1 (en) | Automated Extraction, Inference and Normalization of Structured Attributes for Product Data | |
| CN108089843B (zh) | 一种智能化的银行企业级需求管理系统 | |
| CN111581990B (zh) | 跨境交易撮合匹配方法及装置 | |
| CN105550206B (zh) | 结构化查询语句的版本控制方法及装置 | |
| CN111899829A (zh) | 一种基于icd9/10分词词库的全文检索匹配引擎 | |
| CA3004284C (en) | Methods, systems and computer program products for facilitating user interaction with tax return preparation programs | |
| CN107729549B (zh) | 一种包含要素提取的机器人客服方法及系统 | |
| CN117235220B (zh) | 基于图数据库知识增强的可扩展大语言模型调用装置 | |
| CN110874534B (zh) | 数据处理方法和数据处理装置 | |
| CN106934006B (zh) | 基于多叉树模型的页面推荐方法及装置 | |
| CN114579104A (zh) | 数据分析场景的生成方法、装置、设备及存储介质 | |
| CN112784589A (zh) | 一种训练样本的生成方法、装置及电子设备 | |
| CN114387061A (zh) | 产品推送方法、装置、电子设备及可读存储介质 | |
| CN111191153A (zh) | 一种信息技术咨询服务展示装置 | |
| WO2023272862A1 (zh) | 基于网络行为数据的风控识别方法、装置、电子设备及介质 | |
| CN117420998A (zh) | 一种客户端ui交互组件生成方法、装置、终端及介质 | |
| CN113779176A (zh) | 查询请求补全方法、装置、电子设备和存储介质 | |
| CN116992847A (zh) | 一种财报处理方法、装置、系统和介质 | |
| CN113362177A (zh) | 交易数据回溯方法及装置 | |
| CN116662495A (zh) | 问答处理方法、训练问答处理模型的方法及装置 | |
| CN115757720A (zh) | 基于知识图谱的项目信息搜索方法、装置、设备和介质 | |
| CN114913016A (zh) | 基于大数据的债券交易风险提示方法、装置、设备及介质 | |
| CN114443802A (zh) | 一种接口文档处理方法、装置、电子设备和存储介质 | |
| WO2021136009A1 (zh) | 搜索信息的处理方法、装置及电子设备 | |
| CN115292352A (zh) | 问题查询方法、装置、设备、介质和程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |