数据处理方法、装置、设备及存储介质
技术领域
本发明实施例涉及数据处理技术领域,特别是涉及数据处理方法、装置、设备及存储介质。
背景技术
洗钱(Money Laundering)是一种将非法所得合法化的行为,主要指将违法所得及其产生的收益,通过各种手段掩饰、隐瞒其来源和性质,使其在形式上合法化。
为维护社会稳定及经济健康发展,需要对洗钱行为进行监管,即反洗钱监督管理。
反洗钱监督管理是预防通过各种方式掩饰、隐瞒毒品犯罪、黑社会性质的组织犯罪、恐怖活动犯罪、走私犯罪、贪污贿赂犯罪、破坏金融管理秩序犯罪、金融诈骗犯罪等犯罪所得及其收益的来源和性质的洗钱活动的工作,或说是相关部门、机构的职责。
为了实现反洗钱监督管理,需要各个相关单位对待审核的任务进行审核,从而发现可以任务,生成报文并上报给监管机构。
为了准确识别洗钱风险,需要一种可靠的技术方案确保报文质量。
发明内容
本发明实施例提供了一种数据处理方法、装置、设备及存储介质,以提高审理效率和报文质量。
本发明实施例提供了如下方案:
第一方面,本发明实施例提供一种数据处理方法,该方法包括:
通过预定的多个稽核规则对获取的数据集合进行匹配,查找所述数据集合中的主体数据;所述多个稽核规则中的至少一个稽核规则为团伙主体稽核规则,所述团伙主体稽核规则用于查找团伙类型的多个主体数据,所述主体数据包括单类型的主体数据和团伙类型的主体数据;
生成所述数据集合对应的单主体审查任务,所述单主体审查任务对应所述数据集合的单类型的主体数据,或者,所述单主体审查任务对应所述数据集合的一个团伙类型的主体数据;
判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据;
若所述单主体审查任务对应的主体数据属于团伙类型的主体数据,获取所述单主体审查任务对应的主体数据关联的主体数据;
根据所述单主体审查任务对应的主体数据和关联主体数据确定待上报的主体数据;
生成报文并发送,所述报文中包括所述待上报的主体数据。
第二方面,本发明实施例提供一种数据处理装置,该装置包括:
主体数据查找模块,用于通过预定的多个稽核规则对获取的数据集合进行匹配,查找所述数据集合中的主体数据;所述多个稽核规则中的至少一个稽核规则为团伙主体稽核规则,所述团伙主体稽核规则用于查找团伙类型的多个主体数据,所述主体数据包括单类型的主体数据和团伙类型的主体数据;
审查任务生成模块,用于生成所述数据集合对应的单主体审查任务,所述单主体审查任务对应所述数据集合的单类型的主体数据,或者,所述单主体审查任务对应所述数据集合的一个团伙类型的主体数据;
团伙主题判断模块,用于判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据;
关联主体获取模块,用于若所述单主体审查任务对应的主体数据属于团伙类型的主体数据,获取所述单主体审查任务对应的主体数据关联的主体数据;
待上报主体确定模块,用于根据所述单主体审查任务对应的主体数据和关联主体数据确定待上报的主体数据;
报文上报模块,用于生成报文并发送,所述报文中包括所述待上报的主体数据。
第三方面,本发明实施例提供一种计算机设备,包括:
一个存储器,用于存储计算机程序;
一个处理器,用于执行所述计算机程序时实现上述任意方法实施例所述的方法的步骤。
第四方面,本发明实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时上述任意方法实施例所述的方法的步骤。
本发明实施例提供的数据处理方法、装置、设备及存储介质,至少存在如下技术效果:
无论团伙类型的主体数据还是单类型的主体数据,均生成单主体审查任务,但对于团伙类型的主体数据,不仅上报该任务对应的主体数据,还可以上报该主体数据关联的主体数据。也就是说,针对团伙主体,采用本说明书实施例可以在报文中上报团伙主体,从而提高报文质量。
附图说明
为了更清楚地说明本说明书实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本说明书一个实施例提供的方法流程图;
图2是本说明书另一个实施例提供的方法流程示意图;
图3是本说明书实施例提供的审理方法流程图;
图4是本说明书实施例提供的团伙审理方法流程图;
图5是本说明书实施例提供的装置框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明实施例保护的范围。
反洗钱监督管理机构对上报机构的报文质量要求越来越高,其中包括提高团伙报文从而更好地体现整个作案团伙的风险情况等。采用本发明实施例提供的技术方案,无论团伙类型的主体数据还是单类型的主体数据,均生成单主体审查任务,但对于团伙类型的主体数据,不仅上报该任务对应的主体数据,还可以上报该主体数据关联的主体数据。也就是说,针对团伙主体,采用本说明书实施例可以在报文中上报团伙主体,从而提高报文质量。
另外,针对洗钱风险的审理效率一直是瓶颈,每次审理需要针对可疑主体本身及周围的风险团伙进行整体分析,但是最终上报只能报送一个主体,整体审理和上报效率低,报文质量低。如上所述,本说明书实施例提供的方法可以上报团伙主体,因此提高了审理效率。
如图1所示,本说明书实施例提供一种数据处理方法,包括如下操作:
步骤101、通过预定的多个稽核规则对获取的数据集合进行匹配,查找该数据集合中的主体数据;稽核规则中的至少一个稽核规则为团伙主体稽核规则,团伙主体稽核规则用于查找团伙类型的多个主体数据主体数据包括单类型的主体数据和团伙类型的主体数据。
本说明书实施例中,一个数据集合对应一个疑似洗钱业务,由描述该疑似洗钱业务的多个数据构成,例如描述业务主体的主体数据,描述业务类型的业务类型数据等等。
实际应用中,可采用本说明书实施例提供的方法进行批量处理,即一次输入多个数据集合,对多个数据集合进行处理;也可以逐个处理,即一次仅处理一个数据集合。
本说明书实施例中,单类型的主体数据对应单人作案的疑似洗钱业务,相应的,数据集合中只有一个主体数据;团伙类型的主体数据对应团伙作案的疑似洗钱业务,相应的,数据集合中有多个主体数据。
本说明书实施例中,主体数据可以但不仅限于包括:主体标识、与其他主体的关联关系信息等等。
本说明书实施例中,可选的,团伙主体稽核规则还用于确定团伙类型的各个主体数据的优先级。相应的,若通过团伙主体稽核规则进行匹配,查找到团伙类型的主体数据,则确定该团伙类型的各个主体数据的优先级。
步骤103、生成上述数据集合对应的单主体审查任务,该单主体审查任务对应数据集合的单类型的主体数据,或者该单主体审查任务对应数据集合的一个团伙类型的主体数据。
本说明书实施例中,单主体审查任务是一组特定格式的数据,具体可以包括任务标识,任务对应的主体数据,甚至包括对应的整个数据集合。
本说明书实施例中,若确定团伙类型的主体数据的优先级,单主体审查任务对应数据集合的最高优先级的团伙类型的主体数据。
步骤105、判断上述单主体审查任务对应的主体数据是否属于团伙类型的主体数据。
步骤107、若上述单主体审查任务对应的主体数据属于团伙类型的主体数据,获取该单主体审查任务对应的主体数据关联的主体数据。
本说明书实施例中,若单主体审查任务对应的主体数据属于单类型的主体数据,则按照现有流程处理。
步骤109、根据上述单主体审查任务对应的主体数据和关联主体数据确定待上报的主体数据。
步骤111、生成报文并发送,该报文中包括待上报的主体数据。
本说明书实施例中,团伙类型的主体数据对应团伙作案的疑似洗钱业务,其数据集合中包括多个主体数据,因此,上述步骤105的实现方式可以是查找数据集合中的主体数据数量;根据所述主体数据数量判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据。
具体的,如果数据集合中的主体数据数量大于一,则判断为团伙类型的主体数据,否则,判断为单类型的主体数据。
另外,若通过所述团伙主体稽核规则进行匹配,查找到团伙类型的多个主体数据,还可以为数据集合添加团伙主体标签。相应的,上述步骤107的实现方式可以是:通过查找所述数据集合的团伙主体标签判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据。
具体的,若数据集合标记有团伙主体标签,则属于团伙类型的主体数据。
在上述任意方法实施例的基础上,上述步骤107中获取关联的主体数据的实现方式有多种。一种实现方式中,可以按照预定的规则查找至少一个数据集合,通过规则匹配查找关联的主体数据;另一种实现方式中,预先保存至少一个数据表,数据表中保存主体数据之间的关联关系,从至少一个数据表中获取上述单主体审查任务对应的主体数据关联的主体数据。
通过查表的方式获取关联的主体数据,可以从提高审查的效率。
若通过查找数据表的方式获取关联的主体数据,那么还需要创建和更新数据表,例如以下的第一数据表,第二数据表,第三数据表。
其中,第一数据表的维护采用如下方式:将同一数据集合中团伙类型的各个主体数据中与优先级最高的主体数据的关联关系信息保存到第一数据表中。
第二数据表的维护采用如下方式:比较不同单主体审查任务对应的主体数据所属的数据集合,确定具有至少一个相同主体数据的多个数据集合,将所述多个数据集合中的各个主体数据之间的关联关系信息保存到第二数据表中。
第三数据表的维护采用如下方式:利用预先确定的关联关系匹配规则对多个主体数据进行匹配,将匹配成功的主体数据之间的关联关系信息保存到第三数据表中。
更进一步的,如果跨任务获取了主体数据,即从所述第二数据表中获取所述单主体审查任务对应的主体数据关联的主体数据,那么,还可以将所述单主体审查任务和所述关联的主体数据对应的单主体审查任务合并。
相应的,步骤109中,具体是根据合并后的任务对应的主体数据确定待上报的主体数据。其中,合并后的任务为团伙主体审查任务,其对应的主体数据为合并前的各个任务对应的主体数据。
本说明书实施例提供的方法,上述的关联关系匹配规则可以由用户手动添加,相应的,调用第一人机交互界面,所述第一人机交互界面包括用于配置关联关系匹配规则的显示控件;通过所述显示控件获取规则配置指令,根据所述规则配置指令配置关联关系匹配规则。
本说明书实施例提供的方法,若从多个数据表中获取所述单主体审查任务对应的主体数据关联的相同主体数据,还可以将所述多个数据表中的相同主体数据的对应字段合并;所述待上报的主体数据中包括的所述关联的主体数据为合并后的主体数据。
在上述任意方法实施例的基础上,上述步骤111中,如果确定所述待上报的主体数据的数量为多个,生成团伙报文并发送。
本说明书实施例中,报文分为单主体报文和团伙报文,每种报文的数据结构不同,团伙报文可以更好的表现团伙作案的特性,提高报文质量。
在上述任意方法实施例中,可以自动确定待上报的主体数据,也可以由用户确定待上报的主体数据,本说明书实施例提供的方法自动向用户推荐关联的主体数据,具体的:
调用第二人机交互界面显示所述单主体审查任务对应的主体数据和所述关联的主体数据;通过第二人机交互界面获取主体确认指令,根据所述主体确认指令的指示确定待上报的主体数据。
本说明书实施例中,第一人机交互界面与第二人机交互界面可以是同一个界面,也可以是不同的界面。
下面将结合具体应用场景,对本说明书实施例提供的方法进行详细说明。
如图2所示,在本实施例中,洗钱风险的审查分为风险稽核阶段、智能打标阶段、ALERT(警报)打分阶段、ALERT筛选阶段、任务审理阶段和报文上报阶段。
在风险稽核阶段,利用多个稽核规则对获取的数据集合进行匹配,识别其中的主体数据。具体的,利用单主体规则识别单主体类型的主体数据,利用多主体规则(即团伙稽核规则)识别团伙类型的主体数据,对于团伙类型的主体数据,仍以单主体的形式输出任务。其中,还利用多主体规则对识别出来的主体数据分配优先级,其中优先级最高的主体数据输出给后续流程,用于生成任务,其他主体数据保存到第一数据表中备用。
在智审打标阶段,还对数据集合进行处理,从而为其添加风险类型标签,例如指示赌博风险的赌博标签,指示类罪的类罪标签等等。其中,既可以利用预定的规则识别指示风险类型的数据,从而实现风险类型打标,也可以利用预先训练的风险类型识别模型从数据集合中识别风险类型数据,从而进行风险类型打标。
在ALERT打分阶段,针对识别出的不同主体数据进行打分、排序和高风险主体任务输出。其中,对于团伙类型的主体数据,还允许用户对其分数进行加权,具体通过人机交互界面实现。
在ALERT筛选阶段,针对单主体类型的主体数据,根据分数、预定的特殊规则等进行筛选,针对团伙类型的主体数据,根据预定的规则进行筛选,仅针对筛选出来的主体数据生成审查任务。例如,通过为各个的主体数据打分来判断其对应的业务风险程度,仅对预定数量的主体数据或者分数达到设定阈值的主体数据生成审查任务。
在任务审理阶段,任务分发模块将生成的审理任务分发到不同的终端,接收到任务的终端对审理任务对应的主体数据进行判断,若是单类型的主体数据,按照现有的流程进行审理,若是团伙类型的主体数据,则按照多主体案件的审理方式进行审理。
其中,针对多主体案件,可以通过调用数据表(例如第一数据表、第二数据表、第三数据表)获取关联的主体数据(可以是单个主体数据,也可以是某个数据集合中的全部主体数据),并通过人机交互界面推荐给用户,供用户选择。
其中,可以通过分析工具确定主体数据之间的关联关系,并将分析结果保存到第二数据表中,也可以通过模型推荐确定主体数据之间的关联关系,并将分析结果保存到第三数据表中。
其中,本实施例还支持用户手动添加其他分析方式拓展的风险团伙主体,确保团伙的完整性。
其中,审理方法如图3所示,针对通过TMS稽核生成的单主体任务,该任务包括任务号(即任务标识)和单主体(即该任务对应的主体数据),对于单类型的主体数据对应的任务,仍然按照原有流程审理,即复审、审定、单主体上报;对于团伙类型的主体数据对应的任务,在初审阶段,进行团伙生成和编辑,具体的,可以但不仅限于从在途任务中获取待添加的新主体的主体数据即从上述第二数据表中获取,也可以通过团伙模型推荐获取(即从第三数据表获取),还可以通过智审辅助方式获取(即通过第一数据表获取);添加了新主体的主体数据的任务包括任务号和多主体数据,对该任务进行复审、审定后作为多主体上报。
其中,团伙扩展和审理的具体实现方式如图4所示,通过团队稽核,一方面识别出团伙领袖(即优先级最高的主体数据)并生成单主体任务,另一方面将团伙成员的主体数据加入到团伙领袖的推荐列表中(第一数据表);通过上述任务打分、筛选,删除风险较低的任务,在任务审理阶段,通过团伙推荐、同批次任务有关联推荐等方式完善任务中的团伙主体。
在报文上报阶段,通过单主体/团伙的方式将风险上报到监管。
本说明书实施例提供的方法,通过流程优化和算法模型推荐,实现团伙的快速串并、分析、上报,在效率上和上报监管的报文质量上都有明显提升。针对团伙审理,任务流核心是从单主体任务变成多主体任务的改造,同时涉及到添加在途任务主体时原有任务的自动处理等问题。在途任务是指任务创建到待初审、待复审的任务,复审完以后的任务默认为已完结,不再做处理。当任务主体没有团伙时,仍然按原来的流程完成单主体的初审、复审、审定,表单页展示单主体需要填写的内容,上报时通过主体数自动识别用单主体报文还是多主体报文。当通过分析工具、模型推荐行发现主体相连的团伙时,可以在审理页面手动批量添加和点击添加其他主体,并统一审理、分析和上报。任务要支持灵活添加和删除该任务下的主体。
团伙推荐功能作为本次改造的核心功能点,其推荐逻辑主要分为以下部分:1.团伙规则稽核的团伙推荐。当团伙规则稽核团伙以后,抓取团伙头目(优先级最高的主体)生成单主体任务,并复用现在的TMS、任务打分和任务筛选,在审理平台生成任务。审理平台通过将该团伙其余人员推荐在团伙推荐处,提示运营查看、添加和上报。团伙稽核的推荐会将任务主体ID、团伙本成员ID、推荐理由(团伙稽核等)、推荐分数同步到HBASE表供系统调用。另外的该主体对应的团伙ID list、智审信息通过另外的表同步到HABSE表供系统调用。2.在途任务的关联主体。当1800个任务里面,有任务的主体与当前任务主体存在一定关系时,此处即可推荐运营是否做团伙合并和统一审理。如果两个主体为非团伙则不添加,否则即可添加并统一审理,原任务根据状态供运营选择完结或者不做处理。在途任务推荐中,系统自行计算推荐的主体和被推荐的主体,推荐理由为这两个主体的资金/非资金关系,推荐分数默认为100分,后续通过关系强度在做调整。3.运营经验沉淀的团伙推荐。运营会根据审理经验,不断沉淀判定为团伙的逻辑,比如资金关系、非资金关系、交易模式等。这些经验前期只能通过关系网络等产品人肉排查,后续可以根据沉淀的经验系统直接推荐,进一步提高审理效率。该部分字段信息与1相同。4.被多种推荐命中:当一个主体被多类推荐规则命中(如跟已选择的成员中的某人既被团伙一起稽核,同时又都生成了任务,同时还符合运营经验的团伙推荐逻辑),此时展示时,推荐理由、关系人字段进行合并,推荐分取最高值。
其中,团伙串并可以通过对已经审理完结的上报任务进行自动串并,该方案可以实现自动团伙聚合,但是不能新增团伙中的成员,对团伙的整体分析会比较欠缺。部分团伙推荐的成员也可自动添加到任务中,减少确认团伙成员的添加操作,提高运营操作效率。
通过团伙成员的灵活添加功能,可以支持运营灵活的调整、新增团伙成员,达到上报正真合理团伙的目的。通过团伙成员的模型算法推荐,结合业务经验,实现团伙成员的自动筛选和推荐,提高了团伙分析的效率。
本说明书实施例提供的方法实现了反洗钱风险主体审理从单主体到多主体的突破,对风险识别更加精准,另外,通过产品和算法实现风险同伙的推荐,提高了团伙分析效率。
基于与方法同样的发明构思,本说明书实施例还提供一种数据处理装置,如图5所示,所述装置包括:
主体数据查找模块501,用于通过预定的多个稽核规则对获取的数据集合进行匹配,查找所述数据集合中的主体数据;所述多个稽核规则中的至少一个稽核规则为团伙主体稽核规则,所述团伙主体稽核规则用于查找团伙类型的多个主体数据所述主体数据包括单类型的主体数据和团伙类型的主体数据;
可选的,团伙主体稽核规则还用于确定团伙类型的各个主体数据的优先级。相应的,主体数据查找模块501还用于若通过所述团伙主体稽核规则进行匹配,查找到团伙类型的主体数据,还确定所述团伙类型的各个主体数据的优先级。
审查任务生成模块502,用于生成所述数据集合对应的单主体审查任务,所述单主体审查任务对应所述数据集合的单类型的主体数据,或者所述单主体审查任务对应所述数据集合的一个团伙类型的主体数据。
优选地,单主体审查任务对应数据集合的优先级最高的团伙类型的主体数据。
团伙主题判断模块503,用于判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据;
关联主体获取模块504,用于若所述单主体审查任务对应的主体数据属于团伙类型的主体数据,获取所述单主体审查任务对应的主体数据关联的主体数据;
待上报主体确定模块505,用于根据所述单主体审查任务对应的主体数据和关联主体数据确定待上报的主体数据;
报文上报模块506,用于生成报文并发送,所述报文中包括所述待上报的主体数据。
可选的,所述团伙主题判断模块用于:
查找所述数据集合中的主体数据数量;
根据所述主体数据数量判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据。
可选的,所述装置还包括标签添加模块,用于:
若通过所述团伙主体稽核规则进行匹配,查找到团伙类型的多个主体数据,为所述数据集合添加团伙主体标签;
所述团伙主题判断模块还用于:
通过查找所述数据集合的团伙主体标签判断所述单主体审查任务对应的主体数据是否属于团伙类型的主体数据。
可选的,所述关联主体获取模块用于:
从至少一个数据表中获取所述单主体审查任务对应的主体数据关联的主体数据,所述数据表中保存主体数据之间的关联关系信息。
可选的,所述装置还包括以下至少一个模块:
第一数据表更新模块,用于将同一数据集合中团伙类型的各个主体数据中与优先级最高的主体数据的关联关系信息保存到第一数据表中;
第二数据表更新模块,用于比较不同单主体审查任务对应的主体数据所属的数据集合,确定具有至少一个相同主体数据的多个数据集合,将所述多个数据集合中的各个主体数据之间的关联关系信息保存到第二数据表中;
第三数据表更新模块,用于利用预先确定的关联关系匹配规则对多个主体数据进行匹配,将匹配成功的主体数据之间的关联关系信息保存到第三数据表中。
可选的,若从所述第二数据表中获取所述单主体审查任务对应的主体数据关联的主体数据,所述装置还包括任务合并模块,用于:
将所述单主体审查任务和诉讼关联的主体数据对应的单主体审查任务合并。
可选的,该方法还包括规则配置模块,用于:
调用第一人机交互界面,所述第一人机交互界面包括用于配置关联关系匹配规则的显示控件;
通过所述显示控件获取规则配置指令,根据所述规则配置指令配置关联关系匹配规则。
可选的,若关联主体获取模块从多个数据表中获取所述单主体审查任务对应的主体数据关联的相同主体数据,所述装置还包括主体数据合并模块,用于:
将所述多个数据表中的相同主体数据的对应字段合并;
所述待上报的主体数据中包括的所述关联的主体数据为合并后的主体数据。
可选的,所述报文上报模块用于:
如果确定所述待上报的主体数据的数量为多个,生成团伙报文并发送。
可选的,所述待上报主体确定模块用于:
调用第二人机交互界面显示所述单主体审查任务对应的主体数据和所述关联的主体数据;
通过第二人机交互界面获取主体确认指令,根据所述主体确认指令的指示确定待上报的主体数据。
基于与方法同样的发明构思,本说明书实施例还提供一种计算机设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述实施例的方法的步骤。
基于与方法同样的发明构思,本说明书实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述实施例的方法的步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、磁盘或光盘等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上对本发明所提供的一种计算机设备进行了详细介绍,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。