CN104268173A - 集中式数据监控方法、装置及系统 - Google Patents

Abstract

本发明公开了一种集中式数据监控方法、装置及系统，集中式数据监控方法包括：接收来自于一个或多个数据源的源数据文件，解析源数据文件，得到数据信息及其对应的监控信息；将数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据，并利用待存储数据更新数据库；当接收到监控终端的数据访问请求时，根据数据访问请求从数据库中读取符合条件的数据，生成数据文件，将数据文件发送给监控终端，其中，监控终端根据数据文件进行监控。统一采集监控数据源的数据，转换为统一的存储格式进行存储，并按监控要求将数据分发到各个监控终端，数据集中存储，节省存储空间，提高监控数据处理效率，保证监控处理的全面性、准确性和及时性。

Description

集中式数据监控方法、装置及系统

技术领域

本发明涉及数据监控处理技术领域，尤其涉及一种集中式数据监控方法、装置及系统。

背景技术

近年来，随着电子银行业务的迅猛发展，外部欺诈风险事件呈现上升态势，类型也不断翻新，严重威胁企业的信息安全。受多种因素影响，防范难度较大，一旦风险暴露极易给企业造成重大经济损失。

目前，企业的信息系统在对于该类外部欺诈风险事件的防范都基于各自系统中自行维护的风险账户、黑名单等风险数据进行布控。由于各信息系统风险监控功能的不同，风险数据都独立存放在各个系统中处理，不利于风险信息在各信息系统间的共享，并且，数据处理效率低下，重复处理，冗余存储，不能有效地防范各类外部欺诈风险事件的发生。

图1是现有技术的数据监控系统的结构示意图，由于各监控系统所需的数据结构均不一致，数据来源也各不相同，因此，现有技术中各数据源与监控系统采取一对一的方式进行数据传输，如图1所示，监控系统1需要接收4个不同数据源的数据，而数据源1也分别要向4个不同的监控系统传输数据。

因此，现有的分散的数据监控模式，处理效率低，数据重复处理、冗余存储，信息不能实现共享，不能保证监控的全面性、准确性与及时性。

发明内容

本发明提供了一种集中式数据监控方法、装置及系统，以至少解决现有技术中分散的数据监控模式处理效率低，不能保证监控的全面性与及时性的问题。

根据本发明的一个方面，提供了一种集中式数据监控方法，包括：接收来自于一个或多个数据源的源数据文件，解析所述源数据文件，得到数据信息及其对应的监控信息；将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据，并利用所述待存储数据更新数据库；当接收到监控终端的数据访问请求时，根据所述数据访问请求从所述数据库中读取符合条件的数据，生成数据文件，将所述数据文件发送给所述监控终端，其中，所述监控终端根据所述数据文件进行监控。

在一个实施例中，解析所述源数据文件，得到数据信息及其对应的监控信息包括：根据所述源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；根据所述字段定义信息解析所述源数据文件，得到所述数据信息及其对应的监控信息，其中，所述数据信息是所述数据类型对应的信息内容。

在一个实施例中，将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据包括：按照所述预设的存储格式中的条目类别，从所述数据信息及其对应的监控信息中提取对应的条目信息，得到所述待存储数据。

在一个实施例中，利用所述待存储数据更新数据库包括：将所述待存储数据与所述数据库中已存储的数据进行比对；如果所述数据库中不存在所述待存储数据中的数据类型与数据信息，则新增记录；如果所述数据库中存在所述待存储数据中的数据类型与数据信息，则更新对应的条目信息。

在一个实施例中，所述方法还包括：接收所述监控终端部署监控后数据的命中情况报告，分析所述数据库中与所述命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算，根据计算结果更新所述数据库中的数据。

在一个实施例中，在根据所述数据访问请求从所述数据库中读取符合条件的数据之前，所述方法还包括：根据配置文件判断所述数据访问请求是否属于所述监控终端的部署范围，如果属于所述监控终端的部署范围，则从所述数据库中读取符合条件的数据。

在一个实施例中，所述监控终端根据所述数据文件进行监控包括：所述监控终端读取所述数据文件中的数据信息，使用所述数据信息进行监控。

在一个实施例中，数据类型包括以下一种或几种：账号、卡号、互联网协议IP地址、介质访问控制MAC地址、客户三要素和客户号，其中，所述客户三要素包括：客户姓名、客户证件类型和客户证件号。

根据本发明的另一个方面，提供了一种集中式数据监控装置，包括：数据库；第一接收模块，用于接收来自于一个或多个数据源的源数据文件；解析模块，用于解析所述源数据文件，得到数据信息及其对应的监控信息；格式转换模块，用于将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据；第一更新模块，用于利用所述待存储数据更新所述数据库；第二接收模块，用于接收监控终端的数据访问请求；数据分发模块，用于根据所述数据访问请求从所述数据库中读取符合条件的数据，生成数据文件，将所述数据文件发送给所述监控终端。

在一个实施例中，所述解析模块包括：读取单元，用于根据所述源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；解析单元，用于根据所述字段定义信息解析所述源数据文件，得到所述数据信息及其对应的监控信息，其中，所述数据信息是所述数据类型对应的信息内容。

在一个实施例中，格式转换模块包括：提取单元，用于按照所述预设的存储格式中的条目类别，从所述数据信息及其对应的监控信息中提取对应的条目信息，得到所述待存储数据。

在一个实施例中，所述第一更新模块包括：比对单元，用于将所述待存储数据与所述数据库中已存储的数据进行比对；第一更新单元，用于在所述数据库中不存在所述待存储数据中的数据类型与数据信息的情况下，新增记录；第二更新单元，用于在所述数据库中存在所述待存储数据中的数据类型与数据信息的情况下，更新对应的条目信息。

在一个实施例中，所述装置还包括：第三接收模块，用于接收所述监控终端部署监控后数据的命中情况报告；计算模块，用于分析所述数据库中与所述命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算；第二更新模块，用于根据计算结果更新所述数据库中的数据。

在一个实施例中，所述装置还包括：判断模块，用于根据配置文件判断所述数据访问请求是否属于所述监控终端的部署范围，如果属于所述监控终端的部署范围，则从所述数据库中读取符合条件的数据。

在一个实施例中，数据类型包括以下一种或几种：账号、卡号、互联网协议(InternetProtocol，简称为IP)地址、介质访问控制(Media Access Control，简称为MAC)地址、客户三要素和客户号，其中，所述客户三要素包括：客户姓名、客户证件类型和客户证件号。

根据本发明的再一个方面，提供了一种集中式数据监控系统，包括：一个或多个数据源、集中式数据监控装置以及一个或多个监控终端；其中，所述数据源用于向所述集中式数据监控装置发送源数据文件；所述集中式数据监控装置是上述任一种的集中式数据监控装置；所述监控终端用于向所述集中式数据监控装置发送数据访问请求或数据命中情况报告，以及接收所述集中式数据监控装置返回的数据文件，并根据所述数据文件进行监控。

通过本发明的集中式数据监控方法、装置及系统，采用集中式的数据监控技术，统一采集监控数据源的数据，统一加工处理，转换为统一的存储格式进行存储，并按监控要求将数据分发到各个监控终端，从而实现了信息共享，提高了监控数据处理效率，保证了监控处理的全面性、准确性和及时性，有效防范外部欺诈风险事件的发生；并且数据集中存储，节省了存储空间和CPU处理时间。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的限定。在附图中：

图1是现有技术的数据监控系统的结构示意图；

图2是本发明实施例的集中式数据监控方法的流程图；

图3是本发明实施例的解析源数据文件的详细流程图；

图4是本发明实施例的格式转换以及更新数据库的详细流程图；

图5是本发明另一实施例的集中式数据监控方法的流程图；

图6是本发明又一实施例的集中式数据监控方法的流程图；

图7是本发明实施例的集中式数据监控装置的结构框图一；

图8是本发明实施例的集中式数据监控装置的结构框图二；

图9是本发明实施例的集中式数据监控装置的结构框图三；

图10是本发明实施例的集中式数据监控装置的结构框图四；

图11是本发明实施例的集中式数据监控装置的结构框图五；

图12是本发明实施例的集中式数据监控装置的结构框图六；

图13是本发明实施例的集中式数据监控系统的结构框图；

图14是本发明另一实施例的集中式数据监控装置的示意图；

图15是本发明实施例的统一接收并对数据集中处理的流程图。

具体实施方式

下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明的保护范围。

本发明实施例提供了一种集中式数据监控方法，图2是本发明实施例的集中式数据监控方法的流程图。如图2所示，该方法包括如下步骤：

步骤S201，接收来自于一个或多个数据源的源数据文件，解析源数据文件，得到数据信息及其对应的监控信息。

步骤S202，将数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据，并利用待存储数据更新数据库。

步骤S203，当接收到监控终端的数据访问请求时，根据数据访问请求从数据库中读取符合条件的数据，生成数据文件，将数据文件发送给监控终端，其中，监控终端根据数据文件进行监控。具体的，可以接收一个或多个监控终端发来的数据访问请求，并下发请求的数据给对应的监控终端进行监控，监控终端可以读取数据文件中的数据信息，使用数据信息进行监控。

通过本实施例的集中式数据监控方法，采用集中式的数据监控技术，统一采集监控数据源的数据，统一加工处理，转换为统一的存储格式进行存储，并按监控要求将数据分发到各个监控终端，从而实现了信息共享，提高了监控数据处理效率，保证了监控处理的全面性、准确性和及时性，有效防范外部欺诈风险事件的发生；并且数据集中存储，节省了存储空间和CPU处理时间。即本发明克服了现有的分散的数据监控模式中处理效率低，数据重复处理、冗余存储，信息不能实现共享，不能保证监控的全面性、准确性与及时性的问题。

在一个实施例中，如图3所示，步骤S201中解析源数据文件得到数据信息及其对应的监控信息，可以通过以下步骤实现：

步骤S2011，根据源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；

步骤S2012，根据字段定义信息解析源数据文件，得到数据信息及其对应的监控信息，其中，数据信息是数据类型对应的信息内容。

其中，来源标示指的是源数据文件来自哪个数据源；数据类型包括以下一种或几种：账号、卡号、IP地址、MAC地址、客户三要素和客户号，客户三要素包括：客户姓名、客户证件类型和客户证件号，客户号是开户后系统里的编号。一般地，来自某个数据源的源数据文件对应的数据类型是固定的，例如，来自数据源1的源数据文件对应的数据类型包括：账号、卡号和客户号；来自数据源2的源数据文件对应的数据类型包括：账号和客户三要素。数据信息是数据类型的具体内容，例如具体的卡号、账号、客户名等。

配置文件中的字段定义信息是对各个数据源的源数据文件的字段定义，例如，可以包括：来源标示、部署方式和数据类型。例如，来自数据源1的源数据文件对应的数据类型包括：账号、卡号和客户号，部署方式为柜面交易时预警；来自数据源2的源数据文件对应的数据类型包括：账号、卡号和客户三要素，部署方式为提供各级行招标审批时查询使用。用户可以通过维护配置文件来实现对数据信息的扩展。

从接收的源数据文件对应的字段定义信息中可以提取出其相应的监控信息，例如，数据来源、部署时效、监控内容、监控时效、监控级别、监控渠道等信息。本实施例中，按照字段定义信息解析得到数据信息及监控信息，后续可以按照预设的统一存储格式中的条目类别，从监控信息里提取相应的信息，从而转换为统一的存储格式，方便管理与维护，实现集中存储与信息共享，提高数据处理效率。

在一个实施例中，如图4所示，步骤S202中将数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据可以通过以下步骤实现：

步骤S2021，按照预设的存储格式中的条目类别，从数据信息及其对应的监控信息中提取对应的条目信息，得到待存储数据。

预设的存储格式中的条目类别可以包括：名单内容、名单来源、维护应用、部署时效、监控内容、监控时效、监控渠道、监控级别、数据类型、数据信息、生效时间、失效时间等。按照条目类别提取相应的信息，也可以理解为根据不同要素进行分类。对于接收的源数据文件，可以从解析得到的数据信息和监控信息中提取对应于各个条目类别的具体条目信息，从而可以将接收到的来自于不同数据源的源数据文件转换为统一的存储格式进行存储，方便管理与维护，实现集中存储与信息共享，提高监控效率。

在一个实施例中，如图4所示，步骤S202中利用待存储数据更新数据库可以通过以下步骤实现：

步骤S2022，将待存储数据与数据库中已存储的数据进行比对；

步骤S2023，如果数据库中不存在待存储数据中的数据类型与数据信息，则新增记录；

步骤S2024，如果数据库中存在待存储数据中的数据类型与数据信息，则更新对应的条目信息。

本实施例中，将根据接收到的源数据文件得到的统一存储格式的数据，与数据库中已有的数据进行比较，以实现数据库的及时更新，保证监控的全面性、准确性和及时性。

在一个实施例中，如图5所示，上述方法还可以包括：步骤S204，接收监控终端部署监控后数据的命中情况报告，分析数据库中与命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算，根据计算结果更新数据库中的数据。

例如，对于某个原本设置为低风险的账号(发现该账号后，对应的处理措施可以是进行提示)，根据监控系统的反馈，重新计算后的监控级别为高级，即账号高风险(发现该账号后，对应的处理措施可以是进行拦截)，则对数据库中该账号对应的监控级别等信息进行及时更新，保证监控的全面性、准确性和及时性。

由此可见，可以根据源数据文件更新数据库，还可以根据监控终端的反馈更新数据库，保证数据库的及时更新，以及监控数据的准确性和可靠性。

在一个实施例中，如图6所示，在根据数据访问请求从数据库中读取符合条件的数据之前，上述方法还可以包括以下步骤：

步骤S205，当接收到监控终端的数据访问请求时，根据配置文件判断数据访问请求是否属于监控终端的部署范围，如果是，则执行步骤S203从数据库中读取符合条件的数据；如果否，则执行步骤S206。

步骤S206，拒绝访问。

本实施例中，对于数据访问请求与监控终端的部署范围不符的情况，可能存在潜在风险，可以拒绝访问，提高安全性。

本发明实施例还提供了一种集中式数据监控装置，可以用于实现上述集中式数据监控方法。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的系统较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图7是本发明实施例的集中式数据监控装置的结构框图，如图7所示，该装置包括：数据库70、第一接收模块71、解析模块72、格式转换模块73、第一更新模块74、第二接收模块75和数据分发模块76。下面对其结构进行详细说明。

第一接收模块71，用于接收来自于一个或多个数据源的源数据文件；

解析模块72，连接至第一接收模块71，用于解析源数据文件，得到数据信息及其对应的监控信息；

格式转换模块73，连接至解析模块72，用于将数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据；

第一更新模块74，连接至数据库70和格式转换模块73，用于利用待存储数据更新数据库70；

第二接收模块75，用于接收监控终端的数据访问请求；

数据分发模块76，连接至数据库70和第二接收模块75，用于根据数据访问请求从数据库70中读取符合条件的数据，生成数据文件，将数据文件发送给监控终端。

通过本实施例的集中式数据监控装置，接收不同数据源传输的文件后，对文件进行解析，筛选出所需要的数据，转换成统一格式存入数据库中，并根据监控终端的数据访问请求，下发符合条件的数据给监控终端，从而可以进行监控，实现了信息共享，提高了监控数据处理效率，保证了监控处理的全面性、准确性和及时性，有效防范外部欺诈风险事件的发生；并且数据集中存储，节省了存储空间和CPU处理时间。

在一个实施例中，如图8所示，解析模块72包括：读取单元721，用于根据源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；解析单元722，连接至读取单元721，用于根据字段定义信息解析源数据文件，得到数据信息及其对应的监控信息，其中，数据信息是数据类型对应的信息内容。

其中，配置文件可以存储在集中式数据监控装置中，用户可以通过维护配置文件来实现对数据信息的扩展。数据类型可以包括以下一种或几种：账号、卡号、IP地址、MAC地址、客户三要素和客户号，客户三要素包括：客户姓名、客户证件类型和客户证件号，客户号是开户后系统里的编号。

本实施中，按照字段定义信息解析得到数据信息及监控信息，后续可以按照预设的统一存储格式中的条目类别，从监控信息里提取相应的信息，从而转换为统一的存储格式，方便管理与维护，实现集中存储与信息共享，提高数据处理效率。

在一个实施例中，如图9所示，格式转换模块73包括：提取单元731，用于按照预设的存储格式中的条目类别，从数据信息及其对应的监控信息中提取对应的条目信息，得到待存储数据。

预设的存储格式中的条目类别可以包括：名单内容、名单来源、维护应用、部署时效、监控内容、监控时效、监控渠道、监控级别、数据类型、数据信息、生效时间、失效时间等。按照条目类别提取相应的信息，也可以理解为根据不同要素进行分类。对于接收的源数据文件，可以从解析得到的数据信息和监控信息中提取对应于各个条目类别的具体条目信息，从而可以将接收到的来自于不同数据源的源数据文件转换为统一的存储格式进行存储，方便管理与维护，实现集中存储与信息共享，提高监控效率。

在一个实施例中，如图10所示，第一更新模块74包括：比对单元741，用于将待存储数据与数据库70中已存储的数据进行比对；第一更新单元742，连接至比对单元741，用于在数据库70中不存在待存储数据中的数据类型与数据信息的情况下，新增记录；第二更新单元743，连接至比对单元741，用于在数据库70中存在待存储数据中的数据类型与数据信息的情况下，更新对应的条目信息。

本实施例中，将根据接收到的源数据文件得到的统一存储格式的数据，与数据库70中已有的数据进行比较，以实现数据库70的及时更新，保证监控的全面性、准确性和及时性。

在一个实施例中，如图11所示，上述装置还可以包括：第三接收模块77，用于接收监控终端部署监控后数据的命中情况报告；计算模块78，连接至第三接收模块77，用于分析数据库70中与命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算；第二更新模块79，连接至计算模块78和数据库70，用于根据计算结果更新数据库70中的数据。

由此可见，可以根据源数据文件更新数据库70，还可以根据监控终端的反馈更新数据库70，保证数据库70的及时更新，以及监控数据的准确性和可靠性。

在一个实施例中，如图12所示，上述装置还可以包括：判断模块710，连接至第二接收模块75，用于根据配置文件判断数据访问请求是否属于监控终端的部署范围，如果属于监控终端的部署范围，则从数据库70中读取符合条件的数据。本实施例中，对于数据访问请求与监控终端的部署范围不符的情况，可能存在潜在风险，可以拒绝访问，提高安全性。

当然，上述模块划分只是一种示意划分，本发明并不局限于此。该装置还可以仅包括：接收模块、格式转换模块和数据分发模块，接收模块执行与接收以及解析相关的功能，格式转换模块执行与格式转换以及更新数据库相关的功能，数据分发模块执行与读取数据以及下发数据相关的功能。只要能实现本发明的目的的模块划分，均应属于本发明的保护范围。

本发明实施例还提供了一种集中式数据监控系统，如图13所示，该系统包括：一个或多个数据源1301、集中式数据监控装置1302以及一个或多个监控终端1303。

其中，数据源1301用于向集中式数据监控装置1302发送源数据文件；集中式数据监控装置1302是上述实施例中所描述的集中式数据监控装置(此处不再赘述)；监控终端1303用于向集中式数据监控装置1302发送数据访问请求或数据命中情况报告，以及接收集中式数据监控装置1302返回的数据文件，并根据数据文件进行监控。

通过本实施例的集中式数据监控系统，每个数据源通过集中式数据监控装置将数据转换成统一格式进行集中存储和处理，然后根据监控终端的请求将符合条件的数据分发给对应的监控终端使用，实现了集中存储和统一分发，提高了监控数据处理效率，保证了监控处理的全面性、准确性和及时性，有效防范外部欺诈风险事件的发生；并且数据集中存储，节省了存储空间和CPU处理时间。

为了对上述集中式数据监控方法、装置及系统进行更为清楚的解释，下面结合具体的实施例来进行说明，然而值得注意的是该实施例仅是为了更好地说明本发明，并不构成对本发明不当的限定。

图14是本发明另一实施例的集中式数据监控装置的示意图，实现统一接收并对数据进行集中处理。如图14所示，该集中式数据监控装置包括：数据采集模块11、数据处理模块12、数据分发模块13和数据管理模块14。下面对其结构进行详细说明。

数据采集模块11，与数据管理模块14连接，用于接收各数据源的源数据文件，启动数据处理模块12处理数据。此处，数据采集模块11也可以根据源数据文件的来源标示，对源数据文件进行解析，得到数据信息，即客户三要素、客户号、账号、卡号、IP地址、MAC地址等具体信息。

数据处理模块12，与数据管理模块14连接，用于读取数据采集模块11最新采集的源数据文件(可以直接从数据采集模块11中获取源数据文件，也可以是数据采集模块11将接收的源数据文件存储到数据管理模块14中，数据处理模块12从数据管理模块14中获取源数据文件)，根据源数据文件中的数据信息执行数据分类操作，筛选数据，并进行处理，得到统一格式的数据，以更新数据管理模块14中存储的数据，使用统一格式进行集中存储，提高监控数据处理效率。

数据分发模块13，与数据管理模块14连接，用于接收各监控终端(或称为监控系统)的数据访问请求，并进行授权，即根据不同的查询条件，将数据管理模块14中的数据拆分成不同的数据文件下传给各监控终端使用，以实现数据监控。

数据管理模块14，分别与数据采集模块11、数据处理模块12和数据分发模块13连接，用于以统一的存储格式存储数据采集模块11采集的源数据文件，并支持数据处理模块12、数据分发模块13对其存储的数据进行更新等处理。

具体的，数据处理模块12可以包括：数据解析单元201、数据转换单元202和数据处理单元203。

数据解析单元201，用于接收数据采集模块11传入的数据并进行解析。具体的，数据解析单元201根据源数据文件的来源标示，从配置文件(存储在集中式数据监控装置中)中读取各字段定义信息的描述，用户可通过维护配置文件来实现对数据信息的扩展。根据字段定义信息解析源数据文件，获取数据信息和相关的监控信息，并传输给数据转换单元202。

配置文件中的字段定义信息可以如表1所示：

表1

数据转换单元202，用于从配置文件中读取数据分类规则信息(即表明统一的存储格式中各个条目类别的信息，由此可以获知需要提取哪些信息，进而转换为统一的存储格式)，对解析得到的数据信息和相关的监控信息(即解析结果)进行格式转换，使源数据文件的格式转换为统一的存储格式，并将转换结果传入数据处理单元203。

具体的，根据数据分类规则信息从解析结果中提取基本情况、部署方式、数据类型、数据信息、生命周期等信息并进行分析，上述信息包含了所有外部欺诈风险监控信息，包括信息来源、风险等级、监控方式等。统一存储格式如表2所示：

表2

数据处理单元203，用于读取数据转换单元202传入的处理后的数据，逐条与数据管理模块14(可以是数据库)中的数据进行比对。如果数据转换单元202传入的数据的数据类型与数据信息不存在于数据管理模块14中，则新增一条记录；如果数据管理模块14中存在数据类型与数据信息相同的记录，则更新其基本情况等信息。另外，数据处理单元203还可以接收各监控终端部署监控后数据的命中情况报告，分析数据库中相关的交易信息，通过账号、卡号、IP地址、MAC地址等数据类型定位相关的客户信息，根据业务维护的规则对监控级别进行重新计算，并更新数据管理模块14中的数据。例如，对于某个原本设置为低风险的账号(发现则进行提示)，根据监控终端的反馈，重新计算后的监控级别为高级，即账号高风险(发现则进行拦截)，则对数据管理模块14中相关的监控级别等信息进行及时更新，保证数据监控的准确性。

具体的，数据分发模块13可以包括：数据拆分单元301和数据发送单元302。

其中，数据拆分单元301，用于接收各监控终端的数据访问请求，读取请求内容，根据配置文件审核该数据访问请求是否符合该监控终端的部署范围。对于审核通过的数据访问请求，读取数据管理模块14中符合条件的数据，传入数据发送单元302。对于审核未通过的数据访问请求，可能存在潜在的安全风险，可以拒绝访问，例如，向监控终端返回拒绝访问消息。

数据发送单元302，连接至数据拆分单元301，用于根据数据拆分单元301传输的数据生成数据文件，并发送给监控终端使用。

图15是本发明实施例的统一接收并对数据集中处理的流程图，如图15所示，包括如下步骤：

步骤1501，集中式数据监控装置通过其中的数据采集模块11接收源数据文件，将源数据文件传给数据处理模块12，并启动数据处理模块12处理数据。

步骤1502，数据处理模块12中的数据解析单元201根据源数据文件的来源标示，从配置文件中读取各字段定义信息的描述，用户也可通过维护配置文件来实现对数据信息的扩展。根据该字段定义信息解析源数据文件，获取数据信息和相关的监控信息传输给数据转换单元202。数据转换单元202根据数据解析单元201的解析结果，根据从配置文件中读取的数据分类规则信息，对所需的相关要素进行筛选，得到统一存储格式需要的数据，使源数据文本中的格式转换为目标格式，并将转换格式后的数据传入数据处理单元203。

步骤1503，数据处理单元203读取数据转换单元202传入的数据，逐条与数据管理模块14中的数据进行比对。如果数据库中不存在该条记录的数据类型与数据信息，则新增一条记录；如果数据库中存在数据类型与数据信息相同的记录，则更新其基本情况等信息。

步骤1504，数据处理单元203接收各监控终端部署监控后数据的命中情况报告，分析数据库中相关交易信息，通过账号、卡号、IP地址、MAC地址等数据类型定位相关的客户信息，根据业务维护的规则对监控级别进行重新计算，并更新数据库中的内容。

步骤1505，数据处理单元203将步骤1503和步骤1504中处理完成的数据存入数据管理模块14。

步骤1506，数据拆分单元301根据来自监控终端的数据访问请求，读取数据管理模块14中符合条件的数据，传入数据发送单元302。

步骤1507，数据发送单元302根据传入的数据生成数据文件。

步骤1508，数据发送单元302将生成的数据文件发送给监控终端使用。

步骤1509，监控终端接收集中式数据监控装置发送的数据文件。

步骤1510，监控终端读取数据文件中的数据信息。

步骤1511，监控终端使用数据信息进行监控。

通过本发明实施例的集中式数据监控方法、装置及系统，相比以前数据源与各监控终端一对一的传输方式，显著减少了数据传输成本，大大提高了数据使用效率。并且，对数据进行统一管理和集中控制，节省存储空间和CPU处理时间，也大大提高了数据的安全性和准确性，可有效防范外部欺诈风险事件的发生。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (16)

1.一种集中式数据监控方法，其特征在于，包括：

接收来自于一个或多个数据源的源数据文件，解析所述源数据文件，得到数据信息及其对应的监控信息；

将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据，并利用所述待存储数据更新数据库；

当接收到监控终端的数据访问请求时，根据所述数据访问请求从所述数据库中读取符合条件的数据，生成数据文件，将所述数据文件发送给所述监控终端，其中，所述监控终端根据所述数据文件进行监控。

2.根据权利要求1所述的方法，其特征在于，解析所述源数据文件，得到数据信息及其对应的监控信息包括：

根据所述源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；

根据所述字段定义信息解析所述源数据文件，得到所述数据信息及其对应的监控信息，其中，所述数据信息是所述数据类型对应的信息内容。

3.根据权利要求1所述的方法，其特征在于，将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据包括：

按照所述预设的存储格式中的条目类别，从所述数据信息及其对应的监控信息中提取对应的条目信息，得到所述待存储数据。

4.根据权利要求1所述的方法，其特征在于，利用所述待存储数据更新数据库包括：

将所述待存储数据与所述数据库中已存储的数据进行比对；

如果所述数据库中不存在所述待存储数据中的数据类型与数据信息，则新增记录；

如果所述数据库中存在所述待存储数据中的数据类型与数据信息，则更新对应的条目信息。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收所述监控终端部署监控后数据的命中情况报告，分析所述数据库中与所述命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算，根据计算结果更新所述数据库中的数据。

6.根据权利要求1所述的方法，其特征在于，在根据所述数据访问请求从所述数据库中读取符合条件的数据之前，所述方法还包括：根据配置文件判断所述数据访问请求是否属于所述监控终端的部署范围，如果属于所述监控终端的部署范围，则从所述数据库中读取符合条件的数据。

7.根据权利要求1所述的方法，其特征在于，所述监控终端根据所述数据文件进行监控包括：

所述监控终端读取所述数据文件中的数据信息，使用所述数据信息进行监控。

8.根据权利要求1至7中任一项所述的方法，其特征在于，数据类型包括以下一种或几种：账号、卡号、互联网协议IP地址、介质访问控制MAC地址、客户三要素和客户号，其中，所述客户三要素包括：客户姓名、客户证件类型和客户证件号。

9.一种集中式数据监控装置，其特征在于，包括：

数据库；

第一接收模块，用于接收来自于一个或多个数据源的源数据文件；

解析模块，用于解析所述源数据文件，得到数据信息及其对应的监控信息；

格式转换模块，用于将所述数据信息及其对应的监控信息转换为预设的存储格式，得到待存储数据；

第一更新模块，用于利用所述待存储数据更新所述数据库；

第二接收模块，用于接收监控终端的数据访问请求；

数据分发模块，用于根据所述数据访问请求从所述数据库中读取符合条件的数据，生成数据文件，将所述数据文件发送给所述监控终端。

10.根据权利要求9所述的装置，其特征在于，所述解析模块包括：

读取单元，用于根据所述源数据文件的来源标示和数据类型，从配置文件中读取对应的字段定义信息；

解析单元，用于根据所述字段定义信息解析所述源数据文件，得到所述数据信息及其对应的监控信息，其中，所述数据信息是所述数据类型对应的信息内容。

11.根据权利要求9所述的装置，其特征在于，格式转换模块包括：

提取单元，用于按照所述预设的存储格式中的条目类别，从所述数据信息及其对应的监控信息中提取对应的条目信息，得到所述待存储数据。

12.根据权利要求9所述的装置，其特征在于，所述第一更新模块包括：

比对单元，用于将所述待存储数据与所述数据库中已存储的数据进行比对；

第一更新单元，用于在所述数据库中不存在所述待存储数据中的数据类型与数据信息的情况下，新增记录；

第二更新单元，用于在所述数据库中存在所述待存储数据中的数据类型与数据信息的情况下，更新对应的条目信息。

13.根据权利要求9所述的装置，其特征在于，所述装置还包括：

第三接收模块，用于接收所述监控终端部署监控后数据的命中情况报告；

计算模块，用于分析所述数据库中与所述命中情况报告对应的交易信息，通过数据类型确定对应的客户信息，对监控级别进行重新计算；

第二更新模块，用于根据计算结果更新所述数据库中的数据。

14.根据权利要求9所述的装置，其特征在于，所述装置还包括：

判断模块，用于根据配置文件判断所述数据访问请求是否属于所述监控终端的部署范围，如果属于所述监控终端的部署范围，则从所述数据库中读取符合条件的数据。

15.根据权利要求9至14中任一项所述的装置，其特征在于，数据类型包括以下一种或几种：账号、卡号、互联网协议IP地址、介质访问控制MAC地址、客户三要素和客户号，其中，所述客户三要素包括：客户姓名、客户证件类型和客户证件号。

16.一种集中式数据监控系统，其特征在于，包括：一个或多个数据源、集中式数据监控装置以及一个或多个监控终端；其中，

所述数据源用于向所述集中式数据监控装置发送源数据文件；

所述集中式数据监控装置是权利要求9至15中任一项所述的集中式数据监控装置；

所述监控终端用于向所述集中式数据监控装置发送数据访问请求或数据命中情况报告，以及接收所述集中式数据监控装置返回的数据文件，并根据所述数据文件进行监控。