CN111143350A - 企业数据监控方法、装置、计算机设备及存储介质 - Google Patents
企业数据监控方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN111143350A CN111143350A CN201911182386.1A CN201911182386A CN111143350A CN 111143350 A CN111143350 A CN 111143350A CN 201911182386 A CN201911182386 A CN 201911182386A CN 111143350 A CN111143350 A CN 111143350A
- Authority
- CN
- China
- Prior art keywords
- data
- difference
- data table
- target
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000012544 monitoring process Methods 0.000 title claims abstract description 40
- 238000012216 screening Methods 0.000 claims abstract description 37
- 238000004891 communication Methods 0.000 claims description 39
- 230000009193 crawling Effects 0.000 claims description 34
- 238000013500 data storage Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 15
- 238000012806 monitoring device Methods 0.000 claims description 4
- 238000004321 preservation Methods 0.000 claims description 3
- 230000008520 organization Effects 0.000 description 38
- 230000008569 process Effects 0.000 description 10
- 230000007246 mechanism Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了企业数据监控方法、装置、计算机设备及存储介质。该方法包括将目标数据或共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;将第一数据源各条数据存储至数据表中,得到第一状态数据表;根据历史数据表中的监管状态、负责监管部门的字段数据,在第一状态数据表中对应的各条数据中增加对应的字段数据,得到第二状态数据表;根据目标对象名称将第二状态数据表中的各数据与历史数据表对应的数据进行比对,以得到差异数据集合;若差异数据集合中有差异数据满足预先设置的预警条件,将差异数据集合中对应的差异数据发送至目标终端。实现了集中存储海量的企业数据以供快速查询,且能对满足预警条件的数据进行及时报警提示。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种企业数据监控方法、装置、计算机设备及存储介质。
背景技术
目前,当用户需要查询企业的基础信息(如企业法人、股东基本信息、分支机构等信息)时,存在以下几种方式:
1)需要登录企业信息查询网址(如企查查、启信宝等),并在线查看或下载企业基础信息文件查看;通过上述方式获取的企业基础信息一般仅用于小批量数量的企业信息的查看,未基于上述企业信息导入本地形成统一的企业信息数据库以供他人调用查看,导致企业信息对应的数据获取效率低下,而且无法针对企业信息中指定信息的变更进行快速预警;
2)申请端需要向本公司其他子公司或者部门已存储的企业信息数据库中发出数据共享申请,待审批通过之后由本公司其他子公司或者部门已存储的企业信息数据库将所需企业信息发送至申请端;通过上述方式也导致企业信息对应的数据获取效率低下,而且无法针对企业信息中指定信息的变更进行快速预警。
发明内容
本发明实施例提供了一种企业数据监控方法、装置、计算机设备及存储介质,旨在解决现有技术中用户需要查询企业的基础信息,需要登录企业信息查询网址,或是向已存储的企业信息数据库中发出数据共享申请以待审批通过之后获取企业数据,导致数据获取效率低下,而且无法针对企业信息中指定信息的变更进行快速预警的问题。
第一方面,本发明实施例提供了一种企业数据监控方法,其包括:
若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据;
将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段;
将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息;
根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表;
根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合;以及
若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
第二方面,本发明实施例提供了一种企业数据监控装置,其包括:
数据接收单元,用于若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据;
数据筛选单元,用于将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段;
数据存储单元,用于数据将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息;
数据表格更新单元,用于根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表;
数据比对单元,用于根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合;以及
数据预警单元,用于若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
第三方面,本发明实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的企业数据监控方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的企业数据监控方法。
本发明实施例提供了一种企业数据监控方法、装置、计算机设备及存储介质,包括将目标数据或共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;将第一数据源各条数据存储至数据表中,得到第一状态数据表;根据历史数据表中的监管状态、负责监管部门的字段数据,在第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表;根据目标对象名称将第二状态数据表中的各数据与历史数据表对应的数据进行比对,以得到差异数据集合;若差异数据集合中有差异数据满足预先设置的预警条件,将差异数据集合中对应的差异数据发送至目标终端。实现了集中存储海量的企业数据以供快速查询,而且能对满足预警条件的数据进行及时报警提示。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的企业数据监控方法的应用场景示意图;
图2为本发明实施例提供的企业数据监控方法的流程示意图;
图3为本发明实施例提供的企业数据监控方法的子流程示意图;
图4为本发明实施例提供的企业数据监控装置的示意性框图;
图5为本发明实施例提供的企业数据监控装置的子单元示意性框图;
图6为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
请参阅图1和图2,图1为本发明实施例提供的企业数据监控方法的应用场景示意图;图2为本发明实施例提供的企业数据监控方法的流程示意图,该企业数据监控方法应用于服务器中,该方法通过安装于服务器中的应用软件进行执行。
如图2所示,该方法包括步骤S110~S160。
S110、若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据。
在本实施例中,服务器周期性的获取数据源的方式至少有两种(如设置数据获取周期为7天),一种是从集团企业的企业内网中其他服务器或终端上同步而来,二是从其他外部企业或公司的外部平台接收而得到。
从其他外部企业或公司的外部平台所爬取的数据均是待监管公司对应的公司数据,即服务器中设置的爬虫工具(例如Python爬虫工具)则从目标网址对应的目标服务器中爬取待监管公司对应的公司数据。在设置爬虫的爬取对象时,需要设置从什么网站去爬取数据,而且爬取哪些数据,这就需要预先设置爬虫的目标网址(如企查查、启信宝、或工商局的网站)及目标对象名称(目标对象名称是企业名称)。
其中,所述第一数据源中,每一数据可以包括以下字段内容:
A1)目标对象名称;A2)社会信用代码;A3)机构性质;A4)机构基础信息(具体包括法定代表人信息、股东基本信息、财务基本信息、分支机构基本信息)。
当服务器爬取得到目标数据或是接受发送端发送的共享数据后,可以对所述数据进行进一步的数据处理,从而得到所需数据。
在一实施例中,步骤S110包括:
获取与所述目标网址对应的爬取策略,根据爬取策略及目标对象名称在所述目标网址对应的网页内容中爬取目标数据;其中,所述爬取策略中设置了多个待爬取目标字段。
在本实施例中,为了提高后续的数据处理效率,在通过服务器中的爬虫工具爬取目标网址对应的目标服务器中数据时,可以预先设置爬取策略,该爬取策略用于限定所爬取的数据需包括的字段。例如,在爬取策略中设置所爬取的数据需包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,则通过爬虫工具所爬取的与每一目标对象名称对应的数据均是包括上述4个字段。通过设置爬取策略能更精准的爬取所需目标数据,避免爬取多余不相关的数据。
S120、将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段。
在本实施例中,为了提高后续数据存储或查询的效率,此时可以将每一目标数据或是共享数据进行精简处理,即根据预设的数据筛选策略进行数据筛选,以得到第一数据源。之所以对每一目标数据或是共享数据进行精简处理,是因为目标数据或是共享数据可能并不是标准格式的仅包括目标对象名称、社会信用代码、机构性质、机构基础信息4个字段的数据。此时为了标准化存储,可以将对每一目标数据或是共享数据根据预设的数据筛选策略进行数据筛选,将每一目标数据或是共享数据仅筛选上述4个字段的数据信息,从而得到了经过数据筛选预处理后的第一数据源;其中,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息。
其中,在通过所述数据筛选策略中设置了多个目标字段去筛选所述目标数据或所述共享数据中的目标数据时,具体过程如下:定位所述目标数据或所述共享数据中与目标字段相同的字段,以作为目标字段;将所述目标数据或所述共享数据中的各数据与所述目标字段相同的字段值进行提取,得到第一数据源。通过这一方式,实现了对目标数据的快速筛选和提取。
S130、将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息。
在本实施例中,当获取了所述第一数据源后,为了对所述第一数据源进行缓存,需要新建以当前系统时间为表格名称且初始为空白表格的数据表,该初始为空白表格的数据表中包括四个字段,即分别为目标对象名称、社会信用代码、机构性质、机构基础信息。将初始为空白表格的数据表对应填充所述第一数据源各条数据后,即得到了第一状态数据表。
其中,在将所述第一数据源中的各条数据存储至数据表时,具体过程如下:获取所述第一数据源中的各条数据所包括的字段名称及对应的字段取值;将所述第一数据源中的各条数据所包括的字段取值存储在数据表中对应的字段列中,以得到第一状态数据表。
S140、根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表。
在本实施例中,所得到的第一状态数据表各数据包括的字段均有目标对象名称、社会信用代码、机构性质、机构基础信息。而历史数据表中各条数据包括的字段有目标对象名称、社会信用代码、机构性质、机构基础信息、监管状态、负责监管部门。例如第一状态数据表中某一条数据对应的目标对象名称为A公司,而在历史数据表中存在与A公司对应的数据,而且历史数据表中A公司的数据所包括的字段比第一状态数据表中多了监管状态、负责监管部门这两个字段。此时将历史数据表中A公司对应的字段及字段对应值增加至第一状态数据表,从而得到第二状态数据表。此时第二状态数据表中各条数据的前四个字段(目标对象名称、社会信用代码、机构性质、机构基础信息)的取值与第一状态数据表完全相同,而第二状态数据表中各条数据的后两个字段(监管状态、负责监管部门)的取值与历史表完全相同,也就相当于第二状态数据表中继承了历史表中这两个字段取值。在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表,是为了对历史数据中监管状态、负责监管部门的字段数据进行继承,确保各条数据中监管状态、负责监管部门的字段数据信息不会因重新更新数据而发生数据丢失。
在一实施例中,步骤S140之前还包括:
将所述第一状态数据表的字段与历史数据表中的字段进行比对,以获取所述第一状态数据表与历史数据表之间的差异字段、及差异字段对应取值;其中,所述差异字段为监管状态、负责监管部门,差异字段对应取值为历史数据表中监管状态、负责监管部门的字段数据;所述负责监管部门的字段取值为目标终端的通讯信息。
在本实施例中,将所述第一状态数据表的字段与历史数据表中的字段进行比对时,两者的差异字段即为监管状态、负责监管部门,差异字段对应取值为历史数据表中监管状态、负责监管部门的字段数据。在将所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表之前进行上述差异字段及差异字段具体取值的获取过程,能更加高效的更新所述第一状态数据表。
S150、根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合。
在本实施例中,当获取了所述第二状态数据表后,即获取了与当前系统时间对应的最新状态的数据表。此时,先获取所述第二状态数据表中的各数据在所述历史数据表对应的数据,即若在所述第二状态数据表中一条数据A1的目标对象名称B1与所述历史数据表中一条数据a1的目标对象名称b1相同,则数据a1为数据A1在历史数据表中的对应的数据。此时将第二状态数据表中的每一条数据根据目标对象名称与所述历史数据表中具有相同目标对象名称对应的数据进行比对,从而判断该目标对象名称对应的数据是否发生变化。一旦第二状态数据表有数据与所述历史数据表对应的数据相比较有变化,则该条数据视为差异数据。所述第二状态数据表与所述历史数据表所有的差异数据,则组成差异数据集合。
之所以对第二状态数据表与所述历史数据表所有的数据进行比较,是因为需要进一步判断是否有差异数据满足预警条件。若存在差异数据且满足预警条件,则根据该条差异数据对应的负责监管部门获取联系终端的通讯地址,以将预警的通知信息发送至联系终端。
例如当前时刻爬取的第二状态数据表中A公司的数据为:
目标对象名称:A公司;
社会信用代码:1234567;
机构性质:民营企业;
机构基础信息:法定代表人信息为姓名B、分支机构基本信息包括分支机构11和分支机构12;
而所述历史数据表中A公司的数据为:
目标对象名称:A公司;
社会信用代码:1234567;
机构性质:民营企业;
机构基础信息:法定代表人信息为姓名A、分支机构基本信息包括分支机构13和分支机构12;
进行比对后可知差异数据为法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11。
当获取所述第二状态数据表与所述历史数据表所有的差异数据组成差异数据集合后,即完成了比对过程。
在一实施例中,步骤S150之后还包括:
将所述第一状态数据表、所述第二状态数据表和所述差异数据集合发送至对应划分的数据存储区域以进行存储保存;其中,所述数据存储区域的名称为当前系统时间对应的日期。
在本实施例中,为了便于历史溯源,可以将当前系统时间对应的所述第一状态数据表、所述第二状态数据表和所述差异数据集合发送至对应划分的数据存储区域以进行存储保存,这一个数据存储区域可以是设置于与服务器连接的云端服务器一侧。为了便于区分每一周期所更新的数据,当前时刻在云端服务器划分的数据存储区域以当前系统时间对应的日期(如20190101)来名称。通过这一方式,实现了对各数据获取周期所获取的数据表和差异数据的精准保存。
S160、若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
在本实施例中,例如若上述A公司对应的差异数据:法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11,满足预先设置的预警条件,将对应差异数据发送至目标终端进行显示。
预警条件为用户根据实际的数据监管需求而编辑后预先存储在服务器中,例如上述举例的法定代表人信息的取值以及分支机构基本信息的取值均发生变化,可以为其中一条预设的预警条件。
通过自动判断差异数据是否满足预警条件而进一步判断该数据是否需发送至目标终端进行警示,实现了对数据的自动监控,无需人工参与,对企业信息中指定信息的变更进行快速预警。
在一实施例中,如图3所示,步骤S160包括:
S161、获取所述差异数据集合中各条差异数据,及各条差异数据包括的当前差异字段;
S162、以各条差异数据包括的当前差异字段和目标对象名称为列名称对应创建差异数据表格;其中,对每一差异数据均对应创建一个差异数据表格;
S163、将各条差异数据填充至对应的差异数据表格中对应的列中,得到与各条差异数据一一对应的当前差异数据表;
S164、获取各条差异数据分别对应的负责监管部门的字段取值,以获取各当前差异数据表分别对应的目标终端的通讯信息;
S165、将各当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
在本实施例中,例如,上述A公司对应的差异数据为法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11,即当前差异字段为机构基础信息。之后,以机构基础信息为列名称对应创建差异数据表格,并将法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11对应的差异数据填充至机构基础信息对应的列中,得到与A公司对应的当前差异数据表。
例如A公司对应的当前差异数据表如表1:
表1
之后在第二状态数据表中获取与A公司对应的负责监管部门的字段取值,以获取A公司对应的目标终端的通讯信息,最后将A公司的当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
在一实施例中,步骤S164之后还包括:
合并相同的目标终端的通讯信息对应的当前差异数据表,以得到与各目标终端的通讯信息对应的当前差异数据表。
在本实施例中,当获取了各当前差异数据表分别对应的目标终端的通讯信息之后,可能会有多个当前差异数据表对应同一个目标终端的通讯信息,表示这些对应同一个目标终端的通讯信息的当前差异数据表均会被发送至该目标终端。此时为了避免分开发送这多个当前差异数据表,此时可以在发送之前合并相同的目标终端的通讯信息对应的当前差异数据表(即将具有相同的目标终端的通讯信息对应的当前差异数据表组成一个总表,该总表的每一子表对应一个当前差异数据表),以提高通讯的效率。
该方法实现了集中存储海量的企业数据以供快速查询,而且能对满足预警条件的数据进行及时报警提示。
本发明实施例还提供一种企业数据监控装置,该企业数据监控装置用于执行前述企业数据监控方法的任一实施例。具体地,请参阅图4,图4是本发明实施例提供的企业数据监控装置的示意性框图。该企业数据监控装置100可以配置于服务器中。
如图4所示,企业数据监控装置100包括数据接收单元110、数据筛选单元120、数据存储单元130、数据表格更新单元140、数据比对单元150、数据预警单元160。
数据接收单元110,用于若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据。
在本实施例中,服务器周期性的获取数据源的方式至少有两种(如设置数据获取周期为7天),一种是从集团企业的企业内网中其他服务器或终端上同步而来,二是从其他外部企业或公司的外部平台接收而得到。
从其他外部企业或公司的外部平台所爬取的数据均是待监管公司对应的公司数据,即服务器中设置的爬虫工具则从目标网址对应的目标服务器中爬取待监管公司对应的公司数据。在设置爬虫的爬取对象时,需要设置从什么网站去爬取数据,而且爬取哪些数据,这就需要预先设置爬虫的目标网址(如企查查、启信宝、或工商局的网站)及目标对象名称(目标对象名称是企业名称)。
其中,所述第一数据源中,每一数据可以包括以下字段内容:
A1)目标对象名称;A2)社会信用代码;A3)机构性质;A4)机构基础信息(具体包括法定代表人信息、股东基本信息、财务基本信息、分支机构基本信息)。
当服务器爬取得到目标数据或是接受发送端发送的共享数据后,可以对所述数据进行进一步的数据处理,从而得到所需数据。
在一实施例中,数据接收单元110还用于:
获取与所述目标网址对应的爬取策略,根据爬取策略及目标对象名称在所述目标网址对应的网页内容中爬取目标数据;其中,所述爬取策略中设置了多个待爬取目标字段。
在本实施例中,为了提高后续的数据处理效率,在通过服务器中的爬虫工具爬取目标网址对应的目标服务器中数据时,可以预先设置爬取策略,该爬取策略用于限定所爬取的数据需包括的字段。例如,在爬取策略中设置所爬取的数据需包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,则通过爬虫工具所爬取的与每一目标对象名称对应的数据均是包括上述4个字段。通过设置爬取策略能更精准的爬取所需目标数据,避免爬取多余不相关的数据。
数据筛选单元120,用于将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段。
在本实施例中,为了提高后续数据存储或查询的效率,此时可以将每一目标数据或是共享数据进行精简处理,即根据预设的数据筛选策略进行数据筛选,以得到第一数据源。之所以对每一目标数据或是共享数据进行精简处理,是因为目标数据或是共享数据可能并不是标准格式的仅包括目标对象名称、社会信用代码、机构性质、机构基础信息4个字段的数据。此时为了标准化存储,可以将对每一目标数据或是共享数据根据预设的数据筛选策略进行数据筛选,将每一目标数据或是共享数据仅筛选上述4个字段的数据信息,从而得到了经过数据筛选预处理后的第一数据源;其中,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息。
其中,在通过所述数据筛选策略中设置了多个目标字段去筛选所述目标数据或所述共享数据中的目标数据时,具体过程如下:定位所述目标数据或所述共享数据中与目标字段相同的字段,以作为目标字段;将所述目标数据或所述共享数据中的各数据与所述目标字段相同的字段值进行提取,得到第一数据源。通过这一方式,实现了对目标数据的快速筛选和提取。
数据存储单元130,用于将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息。
在本实施例中,当获取了所述第一数据源后,为了对所述第一数据源进行缓存,需要新建以当前系统时间为表格名称且初始为空白表格的数据表,该初始为空白表格的数据表中包括四个字段,即分别为目标对象名称、社会信用代码、机构性质、机构基础信息。将初始为空白表格的数据表对应填充所述第一数据源各条数据后,即得到了第一状态数据表。
其中,在将所述第一数据源中的各条数据存储至数据表时,具体过程如下:获取所述第一数据源中的各条数据所包括的字段名称及对应的字段取值;将所述第一数据源中的各条数据所包括的字段取值存储在数据表中对应的字段列中,以得到第一状态数据表。
数据表格更新单元140,用于根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表。
在本实施例中,所得到的第一状态数据表各数据包括的字段均有目标对象名称、社会信用代码、机构性质、机构基础信息。而历史数据表中各条数据包括的字段有目标对象名称、社会信用代码、机构性质、机构基础信息、监管状态、负责监管部门。例如第一状态数据表中某一条数据对应的目标对象名称为A公司,而在历史数据表中存在与A公司对应的数据,而且历史数据表中A公司的数据所包括的字段比第一状态数据表中多了监管状态、负责监管部门这两个字段。此时将历史数据表中A公司对应的字段及字段对应值增加至第一状态数据表,从而得到第二状态数据表。此时第二状态数据表中各条数据的前四个字段(目标对象名称、社会信用代码、机构性质、机构基础信息)的取值与第一状态数据表完全相同,而第二状态数据表中各条数据的后两个字段(监管状态、负责监管部门)的取值与历史表完全相同,也就相当于第二状态数据表中继承了历史表中这两个字段取值。在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表,是为了对历史数据中监管状态、负责监管部门的字段数据进行继承,确保各条数据中监管状态、负责监管部门的字段数据信息不会因重新更新数据而发生数据丢失。
在一实施例中,企业数据监控装置100还包括:
差异字段获取单元,用于将所述第一状态数据表的字段与历史数据表中的字段进行比对,以获取所述第一状态数据表与历史数据表之间的差异字段、及差异字段对应取值;其中,所述差异字段为监管状态、负责监管部门,差异字段对应取值为历史数据表中监管状态、负责监管部门的字段数据;所述负责监管部门的字段取值为目标终端的通讯信息。
在本实施例中,将所述第一状态数据表的字段与历史数据表中的字段进行比对时,两者的差异字段即为监管状态、负责监管部门,差异字段对应取值为历史数据表中监管状态、负责监管部门的字段数据。在将所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表之前进行上述差异字段及差异字段具体取值的获取过程,能更加高效的更新所述第一状态数据表。
数据比对单元150,用于根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合。
在本实施例中,当获取了所述第二状态数据表后,即获取了与当前系统时间对应的最新状态的数据表。此时,先获取所述第二状态数据表中的各数据在所述历史数据表对应的数据,即若在所述第二状态数据表中一条数据A1的目标对象名称B1与所述历史数据表中一条数据a1的目标对象名称b1相同,则数据a1为数据A1在历史数据表中的对应的数据。此时将第二状态数据表每一条数据根据目标对象名称与所述历史数据表中具有相同目标对象名称对应的数据进行比对,从而判断该目标对象名称对应的数据是否发生变化。一旦第二状态数据表有数据与所述历史数据表对应的数据相比较有变化,则该条数据视为差异数据。所述第二状态数据表与所述历史数据表所有的差异数据,则组成差异数据集合。
之所以对第二状态数据表与所述历史数据表所有的数据进行比较,是因为需要进一步判断是否有差异数据满足预警条件。若存在差异数据且满足预警条件,则根据该条差异数据对应的负责监管部门获取联系终端的通讯地址,以将预警的通知信息发送至联系终端。
例如当前时刻爬取的第二状态数据表中A公司的数据为:
目标对象名称:A公司;
社会信用代码:1234567;
机构性质:民营企业;
机构基础信息:法定代表人信息为姓名B、分支机构基本信息包括分支机构11和分支机构12;
而所述历史数据表中A公司的数据为:
目标对象名称:A公司;
社会信用代码:1234567;
机构性质:民营企业;
机构基础信息:法定代表人信息为姓名A、分支机构基本信息包括分支机构13和分支机构12;
进行比对后可知差异数据为法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11。
当获取所述第二状态数据表与所述历史数据表所有的差异数据组成差异数据集合后,即完成了比对过程。
在一实施例中,企业数据监控装置100还包括:
云端存储单元,用于将所述第一状态数据表、所述第二状态数据表和所述差异数据集合发送至对应划分的数据存储区域以进行存储保存;其中,所述数据存储区域的名称为当前系统时间对应的日期。
在本实施例中,为了便于历史溯源,可以将当前系统时间对应的所述第一状态数据表、所述第二状态数据表和所述差异数据集合发送至对应划分的数据存储区域以进行存储保存,这一个数据存储区域可以是设置于与服务器连接的云端服务器一侧。为了便于区分每一周期所更新的数据,当前时刻在云端服务器划分的数据存储区域以当前系统时间对应的日期(如20190101)来名称。通过这一方式,实现了对各数据获取周期所获取的数据表和差异数据的精准保存。
数据预警单元160,用于若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
在本实施例中,例如若上述A公司对应的差异数据:法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11,满足预先设置的预警条件,将对应差异数据发送至目标终端进行显示。
预警条件为用户根据实际的数据监管需求而编辑后预先存储在服务器中,例如上述举例的法定代表人信息的取值以及分支机构基本信息的取值均发生变化,可以为其中一条预设的预警条件。
通过自动判断差异数据是否满足预警条件而进一步判断该数据是否需发送至目标终端进行警示,实现了对数据的自动监控,无需人工参与,对企业信息中指定信息的变更进行快速预警。
在一实施例中,如图5所示,数据预警单元160包括:
当前差异字段获取单元161,用于获取所述差异数据集合中各条差异数据,及各条差异数据包括的当前差异字段;
数据表格建立单元162,用于以各条差异数据包括的当前差异字段和目标对象名称为列名称对应创建差异数据表格;其中,对每一差异数据均对应创建一个差异数据表格;
差异数据填充单元163,用于将各条差异数据填充至对应的差异数据表格中对应的列中,得到与各条差异数据一一对应的当前差异数据表;
通讯信息获取单元164,用于获取各条差异数据分别对应的负责监管部门的字段取值,以获取各当前差异数据表分别对应的目标终端的通讯信息;
表格发送单元165,用于将各当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
在本实施例中,例如,上述A公司对应的差异数据为法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11,即当前差异字段为机构基础信息。之后,以机构基础信息为列名称对应创建差异数据表格,并将法定代表人信息为姓名由A变为B,且分支机构基本信息由包括分支机构13变为了包括分支机构11对应的差异数据填充至机构基础信息对应的列中,得到与A公司对应的当前差异数据表。例如,A公司对应的当前差异数据表如表1。
之后在第二状态数据表中获取与A公司对应的负责监管部门的字段取值,以获取A公司对应的目标终端的通讯信息,最后将A公司的当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
在一实施例中,数据预警单元160还包括:
数据表合并单元,用于合并相同的目标终端的通讯信息对应的当前差异数据表,以得到与各目标终端的通讯信息对应的当前差异数据表。
在本实施例中,当获取了各当前差异数据表分别对应的目标终端的通讯信息之后,可能会有多个当前差异数据表对应同一个目标终端的通讯信息,表示这些对应同一个目标终端的通讯信息的当前差异数据表均会被发送至该目标终端。此时为了避免分开发送这多个当前差异数据表,此时可以在发送之前合并相同的目标终端的通讯信息对应的当前差异数据表(即将具有相同的目标终端的通讯信息对应的当前差异数据表组成一个总表,该总表的每一子表对应一个当前差异数据表),以提高通讯的效率。
该装置实现了集中存储海量的企业数据以供快速查询,而且能对满足预警条件的数据进行及时报警提示。
上述企业数据监控装置可以实现为计算机程序的形式,该计算机程序可以在如图6所示的计算机设备上运行。
请参阅图6,图6是本发明实施例提供的计算机设备的示意性框图。该计算机设备500是服务器,服务器可以是独立的服务器,也可以是多个服务器组成的服务器集群。
参阅图6,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时,可使得处理器502执行企业数据监控方法。
该处理器502用于提供计算和控制能力,支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行企业数据监控方法。
该网络接口505用于进行网络通信,如提供数据信息的传输等。本领域技术人员可以理解,图6中示出的结构,仅仅是与本发明方案相关的部分结构的框图,并不构成对本发明方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现本发明实施例公开的企业数据监控方法。
本领域技术人员可以理解,图6中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定,在其他实施例中,计算机设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。例如,在一些实施例中,计算机设备可以仅包括存储器及处理器,在这样的实施例中,存储器及处理器的结构及功能与图6所示实施例一致,在此不再赘述。
应当理解,在本发明实施例中,处理器502可以是中央处理单元(CentralProcessingUnit,CPU),该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignalProcessor,DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit,ASIC)、现成可编程门阵列(Field-ProgrammableGateArray,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序,其中计算机程序被处理器执行时实现本发明实施例公开的企业数据监控方法。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的设备、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中,应该理解到,所揭露的设备、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为逻辑功能划分,实际实现时可以有另外的划分方式,也可以将具有相同功能的单元集合成一个单元,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种企业数据监控方法,其特征在于,包括:
若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据;
将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段;
将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息;
根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表;
根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合;以及
若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
2.根据权利要求1所述的企业数据监控方法,其特征在于,所述根据预先设置的目标网址及目标对象名称爬取对应的目标数据,包括:
获取与所述目标网址对应的爬取策略,根据爬取策略及目标对象名称在所述目标网址对应的网页内容中爬取目标数据;其中,所述爬取策略中设置了多个待爬取目标字段。
3.根据权利要求1所述的企业数据监控方法,其特征在于,所述根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表之前,还包括:
将所述第一状态数据表的字段与历史数据表中的字段进行比对,以获取所述第一状态数据表与历史数据表之间的差异字段、及差异字段对应取值;其中,所述差异字段为监管状态、负责监管部门,差异字段对应取值为历史数据表中监管状态、负责监管部门的字段数据;所述负责监管部门的字段取值为目标终端的通讯信息。
4.根据权利要求1所述的企业数据监控方法,其特征在于,所述将所述差异数据集合中对应的差异数据发送至目标终端,包括:
获取所述差异数据集合中各条差异数据,及各条差异数据包括的当前差异字段;
以各条差异数据包括的当前差异字段和目标对象名称为列名称对应创建差异数据表格;其中,对每一差异数据均对应创建一个差异数据表格;
将各条差异数据填充至对应的差异数据表格中对应的列中,得到与各条差异数据一一对应的当前差异数据表;
获取各条差异数据分别对应的负责监管部门的字段取值,以获取各当前差异数据表分别对应的目标终端的通讯信息;
将各当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
5.根据权利要求4所述的企业数据监控方法,其特征在于,所述获取各条差异数据分别对应的负责监管部门的字段取值,以获取各当前差异数据表分别对应的目标终端的通讯信息之后,还包括:
合并相同的目标终端的通讯信息对应的当前差异数据表,以得到与各目标终端的通讯信息对应的当前差异数据表。
6.根据权利要求1所述的企业数据监控方法,其特征在于,所述根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合之后,还包括:
将所述第一状态数据表、所述第二状态数据表和所述差异数据集合发送至对应划分的数据存储区域以进行存储保存;其中,所述数据存储区域的名称为当前系统时间对应的日期。
7.一种企业数据监控装置,其特征在于,包括:
数据接收单元,用于若当前系统时间与上一数据获取时间之差等于预设的数据获取周期,根据预先设置的目标网址及目标对象名称爬取对应的目标数据,或者是接收发送端发送的共享数据;
数据筛选单元,用于将所述目标数据或所述共享数据根据预设的数据筛选策略进行数据筛选,以得到第一数据源;其中,所述数据筛选策略中设置了多个目标字段;
数据存储单元,用于数据将所述第一数据源中的各条数据存储至数据表中,得到第一状态数据表;其中,所述数据表中初始包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息,所述第一数据源中的各条数据包括的字段为目标对象名称、社会信用代码、机构性质、机构基础信息;
数据表格更新单元,用于根据历史数据表中的监管状态、负责监管部门的字段数据,在所述第一状态数据表中对应的各条数据中增加设置监管状态、负责监管部门的字段数据,得到第二状态数据表;
数据比对单元,用于根据目标对象名称将所述第二状态数据表中的各数据与所述历史数据表对应的数据进行比对,以得到差异数据集合;以及
数据预警单元,用于若所述差异数据集合中有差异数据满足预先设置的预警条件,将所述差异数据集合中对应的差异数据发送至目标终端。
8.根据权利要求7所述的企业数据监控装置,其特征在于,所述数据预警单元,包括:
当前差异字段获取单元,用于获取所述差异数据集合中各条差异数据,及各条差异数据包括的当前差异字段;
数据表格建立单元,用于以各条差异数据包括的当前差异字段和目标对象名称为列名称对应创建差异数据表格;其中,对每一差异数据均对应创建一个差异数据表格;
差异数据填充单元,用于将各条差异数据填充至对应的差异数据表格中对应的列中,得到与各条差异数据一一对应的当前差异数据表;
通讯信息获取单元,用于获取各条差异数据分别对应的负责监管部门的字段取值,以获取各当前差异数据表分别对应的目标终端的通讯信息;
表格发送单元,用于将各当前差异数据表根据对应的目标终端的通讯信息发送至对应的目标终端。
9.一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述的企业数据监控方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行如权利要求1至6任一项所述的企业数据监控方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911182386.1A CN111143350A (zh) | 2019-11-27 | 2019-11-27 | 企业数据监控方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911182386.1A CN111143350A (zh) | 2019-11-27 | 2019-11-27 | 企业数据监控方法、装置、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111143350A true CN111143350A (zh) | 2020-05-12 |
Family
ID=70516710
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911182386.1A Pending CN111143350A (zh) | 2019-11-27 | 2019-11-27 | 企业数据监控方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111143350A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113220549A (zh) * | 2021-04-01 | 2021-08-06 | 深圳市猎芯科技有限公司 | 爬虫数据监控方法、系统、计算机设备及存储介质 |
CN113420657A (zh) * | 2021-06-23 | 2021-09-21 | 平安科技(深圳)有限公司 | 智能核验方法、装置、计算机设备及存储介质 |
CN113792039A (zh) * | 2021-03-15 | 2021-12-14 | 北京京东振世信息技术有限公司 | 数据处理方法及装置、电子设备、存储介质 |
CN114791915A (zh) * | 2022-06-22 | 2022-07-26 | 深圳高灯计算机科技有限公司 | 数据归集方法、装置、计算机设备和存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108022168A (zh) * | 2017-11-23 | 2018-05-11 | 上海宽全智能科技有限公司 | 数据异动监控方法、设备及存储介质 |
CN108511067A (zh) * | 2018-04-02 | 2018-09-07 | 武汉久乐科技有限公司 | 预警方法及电子设备 |
CN109345198A (zh) * | 2018-09-17 | 2019-02-15 | 平安科技(深圳)有限公司 | 简历筛选方法、装置、计算机设备及存储介质 |
CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
WO2019127282A1 (zh) * | 2017-12-28 | 2019-07-04 | 深圳配天智能技术研究院有限公司 | 一种数据库合并的方法以及装置 |
CN110209891A (zh) * | 2019-06-19 | 2019-09-06 | 河南中原消费金融股份有限公司 | 一种拉链表生成方法、装置、设备及介质 |
CN110399362A (zh) * | 2019-06-19 | 2019-11-01 | 平安银行股份有限公司 | 异常考勤数据的筛选方法、装置、计算机设备及存储介质 |
WO2019218465A1 (zh) * | 2018-05-14 | 2019-11-21 | 平安科技(深圳)有限公司 | 一种用户行为提示生成方法、装置、终端设备及介质 |
-
2019
- 2019-11-27 CN CN201911182386.1A patent/CN111143350A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108022168A (zh) * | 2017-11-23 | 2018-05-11 | 上海宽全智能科技有限公司 | 数据异动监控方法、设备及存储介质 |
WO2019127282A1 (zh) * | 2017-12-28 | 2019-07-04 | 深圳配天智能技术研究院有限公司 | 一种数据库合并的方法以及装置 |
CN108511067A (zh) * | 2018-04-02 | 2018-09-07 | 武汉久乐科技有限公司 | 预警方法及电子设备 |
WO2019218465A1 (zh) * | 2018-05-14 | 2019-11-21 | 平安科技(深圳)有限公司 | 一种用户行为提示生成方法、装置、终端设备及介质 |
CN109345198A (zh) * | 2018-09-17 | 2019-02-15 | 平安科技(深圳)有限公司 | 简历筛选方法、装置、计算机设备及存储介质 |
CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
CN110209891A (zh) * | 2019-06-19 | 2019-09-06 | 河南中原消费金融股份有限公司 | 一种拉链表生成方法、装置、设备及介质 |
CN110399362A (zh) * | 2019-06-19 | 2019-11-01 | 平安银行股份有限公司 | 异常考勤数据的筛选方法、装置、计算机设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
姜诣勋;吴健;雷耀麟;: "企业信用信息数据比对和整合的设计与实现", 微型电脑应用, no. 01, 20 January 2011 (2011-01-20), pages 68 - 70 * |
陈欣;覃云川;张绍华;刘古权;郭昀;孙坚;张一申;: "中国公众公司治理大数据平台运用场景介绍", 董事会, no. 12, 15 December 2017 (2017-12-15), pages 114 - 125 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113792039A (zh) * | 2021-03-15 | 2021-12-14 | 北京京东振世信息技术有限公司 | 数据处理方法及装置、电子设备、存储介质 |
CN113792039B (zh) * | 2021-03-15 | 2024-03-01 | 北京京东振世信息技术有限公司 | 数据处理方法及装置、电子设备、存储介质 |
CN113220549A (zh) * | 2021-04-01 | 2021-08-06 | 深圳市猎芯科技有限公司 | 爬虫数据监控方法、系统、计算机设备及存储介质 |
CN113420657A (zh) * | 2021-06-23 | 2021-09-21 | 平安科技(深圳)有限公司 | 智能核验方法、装置、计算机设备及存储介质 |
CN114791915A (zh) * | 2022-06-22 | 2022-07-26 | 深圳高灯计算机科技有限公司 | 数据归集方法、装置、计算机设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111143350A (zh) | 企业数据监控方法、装置、计算机设备及存储介质 | |
AU2016274791B2 (en) | Data quality analysis | |
DE102007038340B4 (de) | Verfahren zur Wartung von Prozesssteuersystemen und maschinenlesbares Medium | |
EP2199904B1 (en) | Flexible multi-tenant support of metadata extensions | |
US9910875B2 (en) | Best-value determination rules for an entity resolution system | |
WO2016141491A1 (en) | Systems and methods for managing data | |
CN111061833A (zh) | 数据处理方法、装置、电子设备和计算机可读存储介质 | |
US10789423B2 (en) | Controlling a collaborative data preparation process | |
US9037525B2 (en) | Correlating data from multiple business processes to a business process scenario | |
CN110532799B (zh) | 数据脱敏控制方法、电子装置及计算机可读存储介质 | |
CN112819631B (zh) | 业务数据处理方法、装置、计算机设备和存储介质 | |
CN110826105B (zh) | 一种分布式银行数据脱敏方法及系统 | |
CN103617381A (zh) | 设备的权限配置方法和权限配置系统 | |
CN112214505A (zh) | 数据同步方法、装置、计算机可读存储介质及电子设备 | |
US8341299B2 (en) | Reusing system configuration information and metadata for related operations | |
CN114185900B (zh) | 业务数据处理方法、装置、计算机设备及存储介质 | |
US20220222415A1 (en) | Automated dynamic document generator | |
Ionescu et al. | A model for monitoring of the 8D and FMEA tools interdependence in the era of Industry 4.0 | |
CN111639053A (zh) | 授权文件到期告警提示方法、装置及计算机设备 | |
CN111563107A (zh) | 信息推荐的方法、装置、电子设备和存储介质 | |
CN109828884B (zh) | 加挂服务数据处理方法、系统、计算机设备及存储介质 | |
CN112769806A (zh) | 终端设备上的操作行为管控方法、装置及电子设备 | |
CN112948381B (zh) | 数据处理方法、系统、计算机设备及可读存储介质 | |
CN113239026B (zh) | 基于云服务器的云数据的处理方法及云服务器 | |
CN116385157B (zh) | 用于征信信用主体识别的数据处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20240920 |