CN110222021B - 一种数据处理方法、设备、服务器及计算机可读存储介质 - Google Patents
一种数据处理方法、设备、服务器及计算机可读存储介质 Download PDFInfo
- Publication number
- CN110222021B CN110222021B CN201910422410.8A CN201910422410A CN110222021B CN 110222021 B CN110222021 B CN 110222021B CN 201910422410 A CN201910422410 A CN 201910422410A CN 110222021 B CN110222021 B CN 110222021B
- Authority
- CN
- China
- Prior art keywords
- target
- bill
- information
- document
- history
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000012545 processing Methods 0.000 claims abstract description 85
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000004590 computer program Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 abstract description 8
- 238000012544 monitoring process Methods 0.000 abstract 1
- 206010012601 diabetes mellitus Diseases 0.000 description 8
- 201000010099 disease Diseases 0.000 description 5
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000002485 combustion reaction Methods 0.000 description 3
- 230000002269 spontaneous effect Effects 0.000 description 3
- 230000037213 diet Effects 0.000 description 2
- 235000005911 diet Nutrition 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 229910005543 GaSe Inorganic materials 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/08—Insurance
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Document Processing Apparatus (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据处理方法、设备、服务器及计算机可读存储介质,应用于服务器,所述服务器中包括分布式文件系统,所述分布式文件系统设置于分布式系统基础架构中,该方法包括:从分布式文件系统中获取目标单据信息;根据预设的单据信息与用户标识的对应关系,确定与目标单据信息对应的目标用户标识;根据历史记录中与目标用户标识对应的历史单据信息,确定出与历史单据信息不一致的目标单据,并对目标单据的单据标记进行更新;将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过预设的搜索服务器查询目标单据信息,并根据单据标记确定目标单据信息的更新状态,以实现快速监控单据信息的变化,提高数据处理效率。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种数据处理方法、设备、服务器及计算机可读存储介质。
背景技术
随着计算机应用技术的发展,人们对各类应用的需求越来越多,各应用系统需要存储的数据也越来越多,如单据应用,目前各个应用系统通常使用oracle、pg、mysql等数据库来统计各应用的数据。然而这种使用oracle、pg、mysql等数据库来统计各应用的数据的统计数据的方式无法进行海量数据的统计,统计效率较低,无法满足用户对各应用的大数据需求。因此如何更有效地提高应用中数据处理的效率成为研究的重点。
发明内容
本发明实施例提供了一种数据处理方法、设备、服务器及计算机可读存储介质,可快速统计大量的数据,提高了数据处理的效率。
第一方面,本发明实施例提供了一种数据处理方法,应用于服务器,所述服务器中包括分布式文件系统,所述分布式文件系统设置于分布式系统基础架构架构中,用于存储用户的单据信息,包括:
从所述分布式文件系统中获取目标单据信息,其中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,所述目标单据信息包括目标生效时间;
根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识;
根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新,所述单据标识用于指示所述目标单据的更新状态,其中,所述历史单据信息的生效时间处于所述目标生效时间之后;
将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
进一步地,所述从所述分布式文件系统中获取目标单据信息,包括:
根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定时间范围内的目标单据信息。
进一步地,所述从所述分布式文件系统中获取目标单据信息,包括:
根据预设的时间点与区域的对应关系,确定与指定时间点对应的指定区域;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定区域的目标单据信息。
进一步地,所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据之前,还包括:
检测所述历史记录中是否存在与所述目标用户标识对应的历史单据信息;
如果检测到所述历史记录中不存在与所述目标用户标识对应的历史单据信息,则为所述目标单据信息添加单据标记,并存储至所述历史记录中;
如果检测到所述历史记录中存在与所述目标用户标识对应的历史单据信息,则执行所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据的步骤。
进一步地,所述单据标记包括更新时间;所述对所述目标单据的单据标记进行更新,包括:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新时间;
利用从所述分布式文件系统中获取到的所述目标单据的更新时间替换所述历史记录中记录的与所述目标单据对应的历史单据的更新时间。
进一步地,所述单据标记包括更新次数;所述对所述目标单据的单据标记进行更新,包括:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新次数;
计算从所述分布式文件系统中获取到的所述目标单据的更新次数与历史单据的更新次数之和;
利用所述目标单据的更新次数与历史单据的更新次数之和,替换所述历史记录中记录的与所述目标单据对应的历史单据的更新次数。
进一步地,所述对所述目标单据的单据标记进行更新之后,还包括:
根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息;
确定与所述区别信息对应的关联单据信息;
向与所述目标用户标识对应的目标终端发送所述关联单据信息。
第二方面,本发明实施例提供了一种数据处理设备,该数据处理设备包括用于执行上述第一方面的数据处理方法的单元。
第三方面,本发明实施例提供了一种服务器,包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,其中,所述存储器用于存储支持数据处理设备执行上述方法的计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述第一方面的方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现上述第一方面的方法。
本发明实施例,数据处理设备根据预设的单据信息与用户标识的对应关系,确定与从所述分布式文件系统中获取的目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,以对所述目标单据的单据标记进行更新。所述数据处理设备通过将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。通过这种实施方式,可以实现快速监控单据信息的变化,提高对单据信息的更新效率。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种数据处理方法的示意流程图;
图2是本发明实施例提供的另一种数据处理方法的示意流程图;
图3是本发明实施例提供的一种数据处理设备的示意框图;
图4是本发明实施例提供的一种服务器的示意框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供的数据处理方法可以由一种数据处理设备执行,其中,所述数据处理设备可以设置在服务器上,在某些实施例中,所述服务器可以包括:手机、电脑、平板、智能手表等智能终端。在某些实施例中,所述数据处理设备可以安装在所述服务器上,在某些实施例中,所述数据处理设备可以在空间上独立于所述服务器,在某些实施例中,所述数据处理设备可以是所述服务器的部件,即所述服务器包括数据处理设备。在某些实施例中,所述服务器中包括分布式文件系统,所述分布式文件系统设置于分布式系统基础架构中,用于存储用户的单据信息。
本发明实施例中,数据处理设备可以从所述分布式文件系统中获取目标单据信息,其中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,所述目标单据信息包括目标生效时间。所述数据处理设备可以根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,从而对所述目标单据的单据标记进行更新,所述单据标识用于指示所述目标单据的更新状态,其中,所述历史单据信息的生效时间处于所述目标生效时间之后。所述数据处理设备可以将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。下面结合附图对本发明实施例的数据处理方法进行示意性说明。
请参见图1,图1是本发明实施例提供的一种数据处理方法的示意流程图,如图1所示,该方法可以由数据处理设备执行,所述数据处理设备的具体解释如前所述,此处不再赘述。具体地,本发明实施例的所述方法包括如下步骤。
S101:从分布式文件系统中获取目标单据信息。
本发明实施例中,数据处理设备可以从分布式文件系统中获取目标单据信息。在某些实施例中,所述分布式文件系统(Hadoop Distributed File System,HDFS)设置于分布式系统基础架构架构中,比如Hadoop,用于存储用户的单据信息。
在某些实施例中,所述单据信息包括但不限于用户标识、单据标识、单据数据等信息,在某些实施例中,所述用户标识包括但不限于用户名称、用户性别、用户年龄、用户身份证号码、用户职业、用户健康状况等信息。在某些实施例中,所述单据标识包括但不限于单据名称、单据编号等信息。在某些实施例中,所述单据数据包括但不限于单据类别、单据金额、单据标的等信息。在某些实施例中,所述单据信息包括但不限于保险信息,本发明实施例不做具体限定。
在某些实施例中,所述HDFS有高容错性的特点,设计用来部署在低廉的硬件上,且提供高吞吐量(high throughput)来访问应用程序的数据,应用于有着超大数据集(largedata set)的应用程序。通过这种分布式文件系统存储单据信息,可以节省成本,提高数据处理效率。
在某些实施例中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,在某些实施例中,所述目标单据信息包括但不限于目标生效时间,在其他实施例中,所述目标单据信息还可以包括目标失效时间、更新时间等信息,本发明实施例不做具体限定。
在一个实施例中,所述数据处理设备从所述分布式文件系统中获取目标单据信息时,可以根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围。当检测到当前时间点为指定时间点时,所述数据处理设备可以从所述分布式文件系统中获取在所述指定时间范围内的单据信息。在某些实施例中,所述指定时间点可以为预设的任意时间点,所述指定时间范围可以为当前时间点之前的任意时间范围,本发明实施例不做具体限定。
S102:根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识。
本发明实施例中,数据处理设备可以根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识。在某些实施例中,所述目标用户标识包括但不限于用户名称、用户性别、用户年龄、用户身份证号码、用户职业、用户健康状况等信息。
S103:根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新。
本发明实施例中,数据处理设备可以根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新。
在一个实施例中,所述数据处理设备在根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据之前,可以检测所述历史记录中是否存在与所述目标用户标识对应的历史单据信息。如果检测到所述历史记录中不存在与所述目标用户标识对应的历史单据信息,则可以为所述目标单据信息添加单据标记,并存储至所述历史记录中。
例如,假设所述单据信息为车险信息,目标用户标识为:姓名为张三以及车牌号码为1234567,如果所述数据处理设备检测到历史记录中不存在与所述姓名为张三以及车牌号码为1234567对应的历史车险信息,则所述数据处理设备可以为所述姓名为张三以及车牌号码为1234567的车险信息添加车险标记,并存储至所述历史记录中。
在某些实施例中,如果所述数据处理设备检测到所述历史记录中存在与所述目标用户标识对应的历史单据信息,则可以根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据。
例如,假设所述单据信息为车险信息,目标用户标识为:姓名为张三以及车牌号码为1234567,如果所述数据处理设备检测到历史记录中存在与所述姓名为张三以及车牌号码为1234567对应的历史车险信息,则所述数据处理设备可以根据历史记录中与所述目标用户标识对应的历史车险信息,确定出与所述历史车险信息不一致的目标车险。如果当前获取到的车险信息的险种包括自燃险,而历史车险信息中的险种不包括自燃险,则所述数据处理设备可以确定出与所述历史车险信息不一致的目标车险为自燃险。
在一个实施例中,所述单据标记包括更新时间,所述数据处理设备对所述目标单据的单据标记进行更新时,可以获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新时间,利用从所述分布式文件系统中获取到的所述目标单据的更新时间替换所述历史记录中记录的与所述目标单据对应的历史单据的更新时间。
例如,假设从所述分布式文件系统中获取到保险信息的更新时间为2018年10月1日10:00,如果检测到历史记录中的历史保险信息的更新时间为2018年9月1日14:00,则所述数据处理设备可以将所述历史保险信息的更新时间2018年9月1日14:00更新为2018年10月1日10:00。
在一个实施例中,所述单据标记包括更新次数,所述数据处理设备对所述目标单据的单据标记进行更新时,可以获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新次数,并计算从所述分布式文件系统中获取到的所述目标单据的更新次数与历史单据的更新次数之和。从而利用所述目标单据的更新次数与历史单据的更新次数之和,替换所述历史记录中记录的与所述目标单据对应的历史单据的更新次数。
例如,假设从所述分布式文件系统中获取到保险信息的更新次数为2次,如果检测到历史记录中的历史保险信息的更新次数为10次,则所述数据处理设备可以将所述历史保险信息的更新10次更新为10+2=12次。
在一个实施例中,所述数据处理设备在对所述目标单据的单据标记进行更新之后,可以根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息。所述数据处理设备可以根据所述区别信息,确定与所述区别信息对应的关联单据信息,并向与所述目标用户标识对应的目标终端发送所述关联单据信息。
例如,假设所述数据处理设备根据更新所述保险标记后的目标保险信息与历史记录中的历史保险信息,确定出所述目标保险信息与所述历史保险信息之间的区别信息为疾病保险。则所述数据处理设备可以根据所述疾病保险,确定与所述疾病保险对应的关联保险信息(如医疗保险、手术保险、特病保险等),并向与所述目标用户标识对应的目标终端发送所述关联保险信息。
在一个实施例中,所述数据处理设备在对所述目标单据的单据标记进行更新之后,还可以根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息,并根据所述区别信息,向与所述目标用户标识对应的目标终端发送与所述区别信息相关联的关联信息。在某些实施例中,所述关联信息包括但不限于医院信息、疾病信息、车辆维护中心信息等与所述区别信息相关的任意一种或多种信息。
例如,假设所述数据处理设备根据更新所述保险标记后的目标保险信息与历史记录中的历史保险信息,确定所述目标保险信息与所述历史保险信息之间的区别信息为糖尿病医疗保险信息,则所述数据处理设备可以根据所述糖尿病医疗保险信息,确定出与所述糖尿病医疗保险相关联的医院信息、糖尿病的饮食信息、糖尿病的并发症信息等关联信息,并向与所述目标用户标识对应的目标终端发送与所述糖尿病医疗保险信息相关联的医院信息、糖尿病的饮食信息、糖尿病的并发症信息等关联信息。
S104:将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
本发明实施例中,数据处理设备可以将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
在某些实施例中,所述预设的搜索服务器包括但不限于ElasticSearch搜索引擎。需要说明的是,ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口,可以与Hadoop架构相结合。
在一个实施例中,用户在通过预设的搜索服务器查询保险信息时,可以通过查看保险信息中是否存在更新标记来判断保险信息是否发生变化,并可以根据保险信息的变化选择其他保险。例如,假设用户A购买了汽车保险,如果查询到用户A在指定时间范围为2017年7月1号到2018年6月30号的更新标记包括:更新次数2次,更新数据为:2017年10月8号报销1次保险金额1000,2018年2月1号报销1次保险金额2000,则该用户A可以根据该更新标记重新选择保险险种、或者更换司机等措施。
本发明实施例,数据处理设备可以根据预设的单据信息与用户标识的对应关系,确定与从所述分布式文件系统中获取的目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,以对所述目标单据的单据标记进行更新。所述数据处理设备通过将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。通过这种实施方式,可以实现快速监控单据信息的变化,以提高数据处理的效率。
请参见图2,图2是本发明实施例提供的另一种数据处理方法的示意流程图,如图2所示,该方法可以由数据处理设备执行,该数据处理设备的具体解释如前所述,此处不再赘述。本发明实施例与上述图1所述实施例的区别在于,本发明实施例是对所述数据处理方法的具体实施过程进行示意性说明。具体地,本发明实施例的所述方法包括如下步骤。
S201:根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围。
本发明实施例中,数据处理设备可以根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围。
S202:当检测到当前时间点为指定时间点时,从分布式文件系统中获取在所述指定时间范围内的目标单据信息。
本发明实施例中,当检测到当前时间点为指定时间点时,数据处理设备可以从分布式文件系统中获取在所述指定时间范围内的目标单据信息。在某些实施例中,所述指定时间点可以为预设的任意时间点,所述指定时间范围可以为当前时间点之前的任意时间范围,本发明实施例不做具体限定。
例如,假设所述单据信息为保险信息,所述指定时间范围为2017年10月1日到2017年12月1日,所述指定时间点为2018年1月2日8:00,则当所述数据处理设备检测到当前时间点为2018年1月2日8:00时,所述数据处理设备可以从所述分布式文件系统中获取在2017年10月1日到2017年12月1日这个时间范围内的保险信息。
S203:根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识。
本发明实施例中,数据处理设备可以根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识。
例如,假设单据信息为保险信息,所述预设时间范围为2017年10月1日到2017年12月1日,则数据处理设备可以从分布式文件系统中查询并获取在2017年10月1日到2017年12月1日时间范围内待处理的保险信息。如果获取到的保险信息为医疗保险和意外保险,且该医疗保险与用户标识A对应,该意外保险与用户标识B对应,则所述数据处理设备可以确定与所述医疗保险对应的目标用户为用户标识A对应的用户A;以及确定与所述意外保险对应的目标用户为用户标识B对应的用户B。
S204:根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新。
本发明实施例中,数据处理设备可以根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新,具体实施例如前所述,此处不再赘述。
S205:根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息。
本发明实施例中,数据处理设备可以根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息,具体实施例如前所述,此处不再赘述。
S206:确定与所述区别信息对应的关联单据信息,并向与所述目标用户标识对应的目标终端发送所述关联单据信息。
本发明实施例中,数据处理设备可以确定与所述区别信息对应的关联单据信息,并向与所述目标用户标识对应的目标终端发送所述关联单据信息。
S207:将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
本发明实施例中,数据处理设备可以将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
本发明实施例中,数据处理设备可以根据根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围,当检测到当前时间点为指定时间点时,从分布式文件系统中获取在所述指定时间范围内的目标单据信息,根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,以对所述目标单据的单据标记进行更新。所述数据处理设备通过将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。通过这种实施方式,可以实现快速监控单据信息的变化,以提高数据处理的效率。
本发明实施例还提供了一种数据处理设备,该数据处理设备用于执行前述任一项所述的方法的单元。具体地,参见图3,图3是本发明实施例提供的一种数据处理设备的示意框图。本实施例的数据处理设备包括:获取单元301、确定单元302、更新单元303以及发送单元304。
获取单元301,用于从分布式文件系统中获取目标单据信息,其中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,所述目标单据信息包括目标生效时间;
确定单元302,用于根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识;
更新单元303,用于根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新,所述单据标识用于指示所述目标单据的更新状态,其中,所述历史单据信息的生效时间处于所述目标生效时间之后;
发送单元304,用于将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
进一步地,所述获取单元301从所述分布式文件系统中获取目标单据信息时,具体用于:
根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定时间范围内的目标单据信息。
进一步地,所述获取单元301从所述分布式文件系统中获取目标单据信息时,具体用于:
根据预设的时间点与区域的对应关系,确定与指定时间点对应的指定区域;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定区域的目标单据信息。
进一步地,所述更新单元303根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据之前,还用于:
检测所述历史记录中是否存在与所述目标用户标识对应的历史单据信息;
如果检测到所述历史记录中不存在与所述目标用户标识对应的历史单据信息,则为所述目标单据信息添加单据标记,并存储至所述历史记录中;
如果检测到所述历史记录中存在与所述目标用户标识对应的历史单据信息,则执行所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据的步骤。
进一步地,所述单据标记包括更新时间;所述更新单元303对所述目标单据的单据标记进行更新时,具体用于:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新时间;
利用从所述分布式文件系统中获取到的所述目标单据的更新时间替换所述历史记录中记录的与所述目标单据对应的历史单据的更新时间。
进一步地,所述单据标记包括更新次数;所述更新单元303对所述目标单据的单据标记进行更新时,具体用于:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新次数;
计算从所述分布式文件系统中获取到的所述目标单据的更新次数与历史单据的更新次数之和;
利用所述目标单据的更新次数与历史单据的更新次数之和,替换所述历史记录中记录的与所述目标单据对应的历史单据的更新次数。
进一步地,所述更新单元303对所述目标单据的单据标记进行更新之后,还用于:
根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息;
确定与所述区别信息对应的关联单据信息;
向与所述目标用户标识对应的目标终端发送所述关联单据信息。
本发明实施例中,数据处理设备可以根据预设的单据信息与用户标识的对应关系,确定与从所述分布式文件系统中获取的目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,以对所述目标单据的单据标记进行更新。所述数据处理设备通过将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。通过这种实施方式,可以实现快速监控单据信息的变化,以提高数据处理的效率。
参见图4,图4是本发明实施例提供的一种服务器的示意框图。如图所示的本实施例中的服务器可以包括:一个或多个处理器401;一个或多个输入设备402,一个或多个输出设备403和存储器404。上述处理器401、输入设备402、输出设备403和存储器404通过总线405连接。存储器404用于存储计算机程序,所述计算机程序包括程序指令,处理器401用于执行存储器404存储的程序指令。其中,处理器401被配置用于调用所述程序指令执行:
从分布式文件系统中获取目标单据信息,其中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,所述目标单据信息包括目标生效时间;
根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识;
根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新,所述单据标识用于指示所述目标单据的更新状态,其中,所述历史单据信息的生效时间处于所述目标生效时间之后;
将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。
进一步地,所述处理器401从所述分布式文件系统中获取目标单据信息时,具体用于:
根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定时间范围内的目标单据信息。
进一步地,所述处理器401从所述分布式文件系统中获取目标单据信息时,具体用于:
根据预设的时间点与区域的对应关系,确定与指定时间点对应的指定区域;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定区域的目标单据信息。
进一步地,所述处理器401根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据之前,还用于:
检测所述历史记录中是否存在与所述目标用户标识对应的历史单据信息;
如果检测到所述历史记录中不存在与所述目标用户标识对应的历史单据信息,则为所述目标单据信息添加单据标记,并存储至所述历史记录中;
如果检测到所述历史记录中存在与所述目标用户标识对应的历史单据信息,则执行所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据的步骤。
进一步地,所述单据标记包括更新时间;所述处理器401对所述目标单据的单据标记进行更新时,具体用于:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新时间;
利用从所述分布式文件系统中获取到的所述目标单据的更新时间替换所述历史记录中记录的与所述目标单据对应的历史单据的更新时间。
进一步地,所述单据标记包括更新次数;所述处理器401对所述目标单据的单据标记进行更新时,具体用于:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新次数;
计算从所述分布式文件系统中获取到的所述目标单据的更新次数与历史单据的更新次数之和;
利用所述目标单据的更新次数与历史单据的更新次数之和,替换所述历史记录中记录的与所述目标单据对应的历史单据的更新次数。
进一步地,所述处理器401对所述目标单据的单据标记进行更新之后,还用于:
根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息;
确定与所述区别信息对应的关联单据信息;
向与所述目标用户标识对应的目标终端发送所述关联单据信息。
本发明实施例中,服务器可以根据预设的单据信息与用户标识的对应关系,确定与从所述分布式文件系统中获取的目标单据信息对应的目标用户标识,并根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,以对所述目标单据的单据标记进行更新。所述数据处理设备通过将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态。通过这种实施方式,可以实现快速监控单据信息的变化,以提高数据处理的效率。
应当理解,在本发明实施例中,所称处理器401可以是中央处理单元(CenSralProcessing UniS,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigiSalSignal Processor,DSP)、专用集成电路(ApplicaSion Specific InSegraSed CircuiS,ASIC)、现成可编程门阵列(Field-Programmable GaSe Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备402可以包括触控板、麦克风等,输出设备403可以包括显示器(LCD等)、扬声器等。
该存储器404可以包括只读存储器和随机存取存储器,并向处理器401提供指令和数据。存储器404的一部分还可以包括非易失性随机存取存储器。例如,存储器404还可以存储设备类型的信息。
具体实现中,本发明实施例中所描述的处理器401、输入设备402、输出设备403可执行本发明实施例提供的数据处理方法的图1或图2所述的方法实施例中所描述的实现方式,也可执行本发明实施例图3所描述的数据处理设备的实现方式,在此不再赘述。
本发明实施例中还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现图1或图2所对应实施例中描述的数据处理方法,也可实现本发明图3所对应实施例的数据处理设备,在此不再赘述。
所述计算机可读存储介质可以是前述任一实施例所述的数据处理设备的内部存储单元,例如数据处理设备的硬盘或内存。所述计算机可读存储介质也可以是所述数据处理设备的外部存储设备,例如所述数据处理设备上配备的插接式硬盘,智能存储卡(SmarSMedia Card,SMC),安全数字(Secure DigiSal,SD)卡,闪存卡(Flash Card)等。进一步地,所述计算机可读存储介质还可以既包括所述数据处理设备的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述数据处理设备所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个可读存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的可读存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的部分实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。
Claims (7)
1.一种数据处理方法,其特征在于,应用于服务器,所述服务器中包括分布式文件系统,所述分布式文件系统设置于分布式系统基础架构中,用于存储用户的单据信息,包括:
从所述分布式文件系统中获取目标单据信息,其中,所述目标单据信息为指定时间范围内的单据信息或指定区域的单据信息,所述目标单据信息包括目标生效时间;
根据预设的单据信息与用户标识的对应关系,确定与所述目标单据信息对应的目标用户标识;
根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据,并对所述目标单据的单据标记进行更新,所述单据标记用于指示所述目标单据的更新状态,其中,所述历史单据信息的生效时间处于所述目标生效时间之后;
将更新单据标记后的目标单据信息发送给预设的搜索服务器,以通过所述预设的搜索服务器查询所述目标单据信息,并根据所述单据标记确定所述目标单据信息的更新状态;
所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据之前,还包括:
检测所述历史记录中是否存在与所述目标用户标识对应的历史单据信息;
如果检测到所述历史记录中不存在与所述目标用户标识对应的历史单据信息,则为所述目标单据信息添加单据标记,并存储至所述历史记录中;
如果检测到所述历史记录中存在与所述目标用户标识对应的历史单据信息,则执行所述根据历史记录中与所述目标用户标识对应的历史单据信息,确定出与所述历史单据信息不一致的目标单据的步骤;
所述单据标记包括更新时间;所述对所述目标单据的单据标记进行更新,包括:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新时间;
利用从所述分布式文件系统中获取到的所述目标单据的更新时间替换所述历史记录中记录的与所述目标单据对应的历史单据的更新时间;
所述单据标记包括更新次数;所述对所述目标单据的单据标记进行更新,包括:
获取从所述分布式文件系统中获取到的与所述历史单据信息不一致的目标单据的更新次数;
计算从所述分布式文件系统中获取到的所述目标单据的更新次数与历史单据的更新次数之和;
利用所述目标单据的更新次数与历史单据的更新次数之和,替换所述历史记录中记录的与所述目标单据对应的历史单据的更新次数。
2.根据权利要求1所述的方法,其特征在于,所述从所述分布式文件系统中获取目标单据信息,包括:
根据预设的时间点与时间范围的对应关系,确定与指定时间点对应的指定时间范围;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定时间范围内的目标单据信息。
3.根据权利要求1所述的方法,其特征在于,所述从所述分布式文件系统中获取目标单据信息,包括:
根据预设的时间点与区域的对应关系,确定与指定时间点对应的指定区域;
当检测到当前时间点为指定时间点时,从所述分布式文件系统中获取在所述指定区域的目标单据信息。
4.根据权利要求1所述的方法,其特征在于,所述对所述目标单据的单据标记进行更新之后,还包括:
根据更新所述单据标记后的目标单据信息与历史记录中的历史单据信息,确定所述目标单据信息与所述历史单据信息之间的区别信息;
确定与所述区别信息对应的关联单据信息;
向与所述目标用户标识对应的目标终端发送所述关联单据信息。
5.一种数据处理设备,其特征在于,包括用于执行如权利要求1-4任一项权利要求所述的方法的单元。
6.一种服务器,其特征在于,包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1-4任一项所述的方法。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现权利要求1-4任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910422410.8A CN110222021B (zh) | 2019-05-20 | 2019-05-20 | 一种数据处理方法、设备、服务器及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910422410.8A CN110222021B (zh) | 2019-05-20 | 2019-05-20 | 一种数据处理方法、设备、服务器及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110222021A CN110222021A (zh) | 2019-09-10 |
CN110222021B true CN110222021B (zh) | 2024-02-09 |
Family
ID=67821602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910422410.8A Active CN110222021B (zh) | 2019-05-20 | 2019-05-20 | 一种数据处理方法、设备、服务器及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110222021B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110865813A (zh) * | 2019-10-15 | 2020-03-06 | 平安科技(深圳)有限公司 | 票据信息采集方法、装置、计算机设备及可读存储介质 |
CN112214495B (zh) * | 2020-10-22 | 2023-08-22 | 上海亿保健康管理有限公司 | 数据执行跟踪方法、装置和设备 |
CN112508712A (zh) * | 2020-11-30 | 2021-03-16 | 泰康保险集团股份有限公司 | 客户数据处理方法、装置、介质及电子设备 |
CN112578772A (zh) * | 2020-12-24 | 2021-03-30 | 潍柴动力股份有限公司 | 电子控制单元的数据处理方法及相关装置 |
CN114663207A (zh) * | 2022-03-24 | 2022-06-24 | 金蝶软件(中国)有限公司 | 单据生成方法、装置、计算机设备和存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104717280A (zh) * | 2014-12-25 | 2015-06-17 | 广州市百果园网络科技有限公司 | 数据同步的标记方法和装置 |
CN107784092A (zh) * | 2017-10-11 | 2018-03-09 | 深圳市金立通信设备有限公司 | 一种推荐热词的方法、服务器及计算机可读介质 |
CN108228879A (zh) * | 2018-01-23 | 2018-06-29 | 平安普惠企业管理有限公司 | 一种数据更新方法、存储介质和智能设备 |
CN108921712A (zh) * | 2018-06-13 | 2018-11-30 | 泰康保险集团股份有限公司 | 数据处理方法、装置、介质及电子设备 |
CN109101381A (zh) * | 2018-08-02 | 2018-12-28 | Oppo(重庆)智能科技有限公司 | 配置文件更新方法、系统、电子设备及存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040230580A1 (en) * | 2003-05-14 | 2004-11-18 | Nai-Chun Li | Method and apparatus for performing batch updates to records over a network |
US10268744B2 (en) * | 2015-09-22 | 2019-04-23 | Walmart Apollo, Llc | System for maintaining consistency across a decentralized database cluster and method therefor |
-
2019
- 2019-05-20 CN CN201910422410.8A patent/CN110222021B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104717280A (zh) * | 2014-12-25 | 2015-06-17 | 广州市百果园网络科技有限公司 | 数据同步的标记方法和装置 |
CN107784092A (zh) * | 2017-10-11 | 2018-03-09 | 深圳市金立通信设备有限公司 | 一种推荐热词的方法、服务器及计算机可读介质 |
CN108228879A (zh) * | 2018-01-23 | 2018-06-29 | 平安普惠企业管理有限公司 | 一种数据更新方法、存储介质和智能设备 |
CN108921712A (zh) * | 2018-06-13 | 2018-11-30 | 泰康保险集团股份有限公司 | 数据处理方法、装置、介质及电子设备 |
CN109101381A (zh) * | 2018-08-02 | 2018-12-28 | Oppo(重庆)智能科技有限公司 | 配置文件更新方法、系统、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110222021A (zh) | 2019-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110222021B (zh) | 一种数据处理方法、设备、服务器及计算机可读存储介质 | |
CN107798617B (zh) | 保险业务处理方法和装置 | |
CN109408262B (zh) | 一种业务数据处理方法及相关设备 | |
CN107944285B (zh) | 一种数据信息的唯一使用权的交易方法、装置、服务器以及可读存储介质 | |
CN108449313B (zh) | 电子装置、互联网服务系统风险预警方法及存储介质 | |
CN109636641A (zh) | 基于大数据分析的医保异常检测方法、装置、设备和介质 | |
CN112015489A (zh) | 一种车载软件的管理方法、装置、存储介质及系统 | |
CN110163559A (zh) | 自动理赔方法、装置、计算机设备及存储介质 | |
CN105574334A (zh) | 医疗信息处理方法和系统 | |
CN109087089B (zh) | 一种支付方法、支付装置及终端设备 | |
CN111541549B (zh) | 基于区块链的信息传递方法、装置、设备及存储介质 | |
CN109656592B (zh) | 卡片管理方法、装置、终端及计算机可读存储介质 | |
CN111181837A (zh) | 一种发送告警信息的方法及装置 | |
CN114760289A (zh) | 车辆数据采集方法、装置、计算机设备和存储介质 | |
US10708713B2 (en) | Systems and methods for beacon location verification | |
CN112148783A (zh) | 一种数据交换方法、装置及设备 | |
CN112597192A (zh) | 数据查询方法、装置、服务器及介质 | |
CN115174346B (zh) | 基于消息队列的延时告警方法 | |
CN109600738B (zh) | 用户信息更新方法、装置、设备和存储介质 | |
CN111858624A (zh) | 一种车辆使用情况更新方法及装置 | |
CN116071123A (zh) | 商品数据处理方法、系统、电子设备及存储介质 | |
CN109544368B (zh) | 骨髓增值性疾病资质认证方法、设备、服务器及可读介质 | |
CN113360375A (zh) | 交易测试方法、装置、电子设备及存储介质 | |
CN113535832A (zh) | 云服务数据的获取方法、装置、电子设备及介质 | |
CN111210649A (zh) | 一种乘车提醒方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |