CN115033617A - 账户明细数据的处理方法、装置、服务器和客户端 - Google Patents
账户明细数据的处理方法、装置、服务器和客户端 Download PDFInfo
- Publication number
- CN115033617A CN115033617A CN202210679113.3A CN202210679113A CN115033617A CN 115033617 A CN115033617 A CN 115033617A CN 202210679113 A CN202210679113 A CN 202210679113A CN 115033617 A CN115033617 A CN 115033617A
- Authority
- CN
- China
- Prior art keywords
- target
- user
- task
- detail
- task state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2471—Distributed queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/02—Banking, e.g. interest calculation or account maintenance
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- Computing Systems (AREA)
- Human Computer Interaction (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Probability & Statistics with Applications (AREA)
- Software Systems (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本说明书提供了账户明细数据的处理方法、装置、服务器和客户端,应用于大数据技术领域,基于该方法,分布式系统中的节点服务器接收并响应目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;并根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件,有效减少了对数据库的频繁操作,提高了处理效率。
Description
技术领域
本说明书属于大数据技术领域,尤其涉及账户明细数据的处理方法、装置、服务器和客户端。
背景技术
在一些涉及大数据的数据处理场景中,系统(例如,银行的后台系统等)常常会在某个较短时间内接收到数量庞大的关于账户明细数据的下载请求。
基于现有方法,大多只能通过调用系统中负责管理数据库的管理服务器通过对数据库(例如,集中库)进行读写操作来完成相应的数据处理。但是,由于系统中的管理服务器的数量相对有限,导致大部分的下载请求需要在数据库的任务池中排队等候,使得整体的处理效率较低,用户等待时长较长。此外,基于上述方法还需要对系统的数据库进行频繁操作,受限于数据库的性能,会进一步影响整体的处理效率,同时还会对系统的整体性能造成影响。
针对上述问题,目前尚未提出有效的解决方案。
发明内容
本说明书提供了一种账户明细数据的处理方法、装置、服务器和客户端,能够有效地减少大数据场景下对数据库的频繁操作,减少对系统的性能影响,提高整体的处理效率,缩短用户的等待时长,使用户获得较好的交互体验。
本说明书提供了一种账户明细数据的处理方法,应用于分布式系统中的节点服务器,包括:
接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
在一个实施例中,所述中转数据缓存服务组件包括NOS;相应的,所述中转文件存储服务平台包括OAAS。
在一个实施例中,根据目标任务状态集,通过进行预设的数据处理,包括:
按照以下方式,进行当前次的预设的数据处理:
通过中转数据缓存服务组件获取目标任务的当前任务状态;
根据当前任务状态,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
在确定在中转文件存储服务平台中未完成目标明细文件的上传和保存的情况下,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件;
将所述中间明细文件上传至中转文件存储服务平台;其中,所述中间明细文件用于在中转文件存储服务平台中生成目标明细文件;
接收并根据中转文件存储服务平台针对中间明细文件所反馈的处理提示信息,更新中转数据缓存服务组件中的目标任务状态集。
在一个实施例中,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件,包括:
根据目标任务状态集,确定当前待获取的账户明细数据的业务类型,作为当前业务类型;
根据当前业务类型,调用相匹配的业务服务器获取并根据与目标用户相关且属于当前业务类型的账户明细数据,得到中间明细文件。
在一个实施例中,在进行预设的数据处理的过程中,所述方法还包括:
接收目标客户端根据预设的轮询规则所发起的针对目标任务的当前任务状态更新请求;
响应所述当前任务状态更新请求,通过查询中转数据缓存服务组件中的目标任务状态集,获取目标任务的当前任务状态;
根据目标任务的当前任务状态,向目标客户端反馈关于目标任务的当前任务进度信息。
在一个实施例中,所述方法还包括:
接收目标客户端发起的关于目标明细文件的目标下载请求;其中,所述目标客户端在根据任务进度信息确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下发起所述目标下载请求;
响应所述目标下载请求,通过中转文件存储服务平台获取目标明细文件;
将所述目标明细文件发送至目标客户端;并更新中转数据缓存服务组件中的目标任务状态集。
在一个实施例中,在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,所述方法还包括:
生成关于目标任务的目标轮询提示;
向目标客户端发送所述目标轮询提示,以触发目标客户端根据预设的轮询规则发起针对目标任务的当前任务状态更新请求。
本说明书还提供了一种账户明细数据的处理方法,应用于目标客户端,包括:
接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
通过节点服务器获取目标明细文件。
在一个实施例中,在向节点服务器发送所述目标任务创建请求之后,所述方法还包括:
接收节点服务器反馈的关于目标任务的目标轮询提示;
响应所述目标轮询提示,根据预设的轮询规则向节点服务器发起针对目标任务的当前任务状态更新请求;
接收节点服务器反馈的关于目标任务的当前任务进度信息。
在一个实施例中,所述方法还包括:
根据当前任务进度信息,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
在确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下,生成关于目标明细文件的目标下载请求;并向节点服务器发送所述目标下载请求;
接收节点服务器发送的目标明细文件。
本说明书还提供了一种账户明细数据的处理装置,应用于分布式系统中的节点服务器,包括:
接收模块,用于接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
查询模块,用于响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
创建模块,用于在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
处理模块,用于根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
本说明书还提供了一种账户明细数据的处理装置,应用于目标客户端,包括:
生成模块,用于接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
发送模块,用于向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
获取模块,用于通过节点服务器获取目标明细文件。
本说明书还提供了一种服务器,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现所述账户明细数据的处理方法的步骤。
本说明书还提供了一种客户端,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现所述账户明细数据的处理方法的步骤。
本说明书还提供了一种计算机可读存储介质,其上存储有计算机指令,所述指令被处理器执行时实现所述账户明细数据的处理方法的步骤。
基于本说明书提供的账户明细数据的处理方法、装置、服务器和客户端,可以通过分布式系统中的节点服务器接收并响应目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,中转数据缓存服务组件中存储有针对多个任务的任务状态集;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,可以在中转数据缓存服务组件中创建目标任务状态集;并根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;进而节点服务器可以通过中转文件存储服务平台获取目标明细文件,并将该目标明细文件发送给目标客户端。由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库完成关于用户的账户明细数据下载的数据处理,能够有效地减少大数据场景下对数据库的频繁操作,减少对分布式系统的性能影响,提高整体的处理效率,缩短用户的等待时长,使用户获得较好的交互体验。又由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库,不需要再依赖分布式系统中数量相对有限的负责管理数据库的管理服务器,而是可以调用分布式系统中任意的节点服务器来响应客户端完成关于用户的账户明细数据下载的数据处理,从而可以充分调用分布式系统中更多的数据处理资源,缩短任务的排队时长,进一步提高了整体的处理效率,缩短了用户的等待时长。还由于通过引入了轮询机制,在下载得到目标明细文件前,客户端可以根据预设的轮询规则自动向节点服务器发送任务状态更新请求;相应的,节点服务器可以响应该任务状态更新请求,及时地通过中转数据存储服务组件获取并向客户端反馈目标任务最新的任务进度信息,以便客户端可以及时向用户反馈目标任务最新的任务进度信息,从而可以减少用户的空白等待时长,进一步提高用户的交互体验。
附图说明
为了更清楚地说明本说明书实施例,下面将对实施例中所需要使用的附图作简单地介绍,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本说明书的一个实施例提供的账户明细数据的处理方法的流程示意图;
图2是在一个场景示例中,应用本说明书实施例提供的账户明细数据的处理方法的一种实施例的示意图;
图3是在一个场景示例中,应用本说明书实施例提供的账户明细数据的处理方法的一种实施例的示意图;
图4是在一个场景示例中,应用本说明书实施例提供的账户明细数据的处理方法的一种实施例的示意图;
图5是在一个场景示例中,应用本说明书实施例提供的账户明细数据的处理方法的一种实施例的示意图;
图6是本说明书的另一个实施例提供的账户明细数据的处理方法的流程示意图;
图7是本说明书的一个实施例提供的服务器的结构组成示意图;
图8是本说明书的一个实施例提供的账户明细数据的处理装置的结构组成示意图;
图9是本说明书的另一个实施例提供的账户明细数据的处理装置的结构组成示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
参阅图1所示,本说明书实施例提供了一种账户明细数据的处理方法,其中,该方法具体应用于分布式系统中的节点服务器一侧。具体实施时,该方法可以包括以下内容:
S101:接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
S102:响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
S103:在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
S104:根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
基于上述实施例,通过分布式系统中的节点服务器组合使用中转数据缓存服务组件和中转文件存储服务平台来代替关系型数据库完成关于用户的账户明细数据下载的数据处理,能够有效地减少大数据场景下对数据库的频繁操作,摆脱数据库性能瓶颈的限制,减少对分布式系统的性能影响;同时,不再依赖相对有限的负责管理数据库的管理服务器,可以通过使用分布式系统中任意的节点服务器来响应客户端完成相应的数据处理,能够充分地调用分布式系统中更多的数据处理资源,缩短任务的排队时长,从而可以有效地提高整体的处理效率,缩短用户的等待时长,使用户获得相对较好的交互体验。
在一些实施例中,上述账户明细数据的处理方法具体可以应用于分布式系统中的任意一个节点服务器一侧,而不用局限于某一两服务器。这样在应对大数据场景下短时间内数据量庞大的任务数据处理时,可以充分利用分布式系统中的数据处理资源,缩短任务的排队时长,提高整体的处理效率。
具体的,参阅图2所示,上述分布式系统具体可以是后台的业务数据处理系统,例如,XX银行的后台系统等。
相应的,上述节点服务器具体可以是XX银行的后台系统中的某个应用服务器。当然,上述节点服务还可以是XX银行的后台系统中的管理服务器,或者其他类型的服务器。
其中,上述节点服务器具体可以包括一种应用于分布式系统一侧,能够实现数据传输、数据处理等功能的后台服务器。具体的,所述节点服务器例如可以为一个具有数据运算、存储功能以及网络交互功能的电子设备。或者,所述节点服务器也可以为运行于该电子设备中,为数据处理、存储和网络交互提供支持的软件程序。在本实施例中,并不具体限定所述节点服务器所包含的服务器的数量。所述节点服务器具体可以为一个服务器,也可以为几个服务器,或者,由若干服务器形成的服务器集群。
上述节点服务器具体可以与用户所持有的客户端对接。
其中,上述客户端具体可以包括一种应用于用户一侧,能够实现数据采集、数据传输等功能的前端。具体的,所述客户端例如可以为台式电脑、平板电脑、笔记本电脑、智能手机等电子设备。或者,所述客户端也可以为能够运行于上述电子设备中的软件应用。例如,可以是在智能手机上运行的XX电子银行APP等。
具体实施时,参阅图2所示,当目标用户想要下载自己的账户明细数据,可以通过登录自己智能手机上的软件应用(即,目标客户端),并在应用界面中点击“下载账户明细”的图标,以发起创建操作。相应的,目标客户端可以响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求。其中,上述目标任务具体可以为下载目标用户的账户明细数据的下载任务。上述目标任务创建请求至少携带有目标用户的用户标识。
具体的,上述目标用户的用户标识可以为能够指示目标用户的标识信息,例如,目标用户的姓名、用户名、注册手机号等等。当然,上述所列举的用户标识只是一种示意性说明。具体实施时,根据具体情况和处理需求,还可以引入和使用其他合适的标识信息作为目标用户的用户标识。对此,本说明书不作限定。
需要说明的是,在本说明书中所涉及到的与用户相关的信息数据,均为在用户知晓且同意的情况下获取和使用的。并且,对于上述信息数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
在目标用户通过应用界面发起创建操作的同时,目标用户还可以通过应用界面进行自定义设置,例如,设置待下载的账户明细数据的起始时间、截止时间、所属的业务类型等自定义参数。相应的,所生成的创建请求还可以携带有上述自定义参数。从而可以满足用户针对账户明细数据的多样化的下载需求,进一步提高用户的交互体验。
参阅图2所示,分布式系统中的任意一个节点服务器可以接收并响应该目标任务创建请求,通过组合使用中转数据缓存服务组件和中转文件存储服务平台,进行与目标任务相关的数据处理,包括:生成得到满足用户需求的关于目标用户的账户明细数据的目标明细文件;以及将上述目标明细文件及时地反馈给目标客户端。
在按照上述方式进行与目标任务相关的数据处理的过程中,可以通过中转数据缓存服务组件,记录并更新目标任务状态集中的任务状态;通过基于中转数据缓存服务组件中的目标任务状态集,调用相匹配的业务服务器生成关于目标用户的账户明细数据的中间明细文件,并上传保存至中转文件存储服务平台;通过中转文件存储服务平台最终生成并保存所需要的目标明细文件。从而可以较为高效地完成与目标任务相关的数据处理,减少目标用户的等待时长,使目标用户可以获得较好的交互体验。
此外,在按照上述方式进行与目标任务相关的数据处理的过程中,还可以基于预设的轮询规则实时与客户端进行交互,以便客户端可以实施获取并向目标用户展示出关于目标任务最新的任务进度信息,减少了目标用户的空白等待时间。同时,还能够使得目标客户端在根据任务进度信息,确定在中转文件存储服务平台中已经完成目标明细文件的上传和保存时,及时地生成并发送关于目标明细文件的目标下载请求,以便能够及时地下载并向目标用户展示出目标明细文件。从而可以进一步提高整体的处理效率,使目标用户可以获得相对更好的交互体验。
在一些实施例中,目标用户的账户明细数据具体可以是包括该目标用户的不同时间段和/或不同业务类型的账户明细数据的集合。相应的,本说明书提供的账户明细数据的处理方法可以支持目标用户对数据量较为庞大的账户明细数据进行汇总后下载。
在一些实施例中,所述中转数据缓存服务组件具体可以包括NOS;相应的,所述中转文件存储服务平台具体可以包括OAAS。
其中,上述NOS具体可以是一种Redis数据缓存服务组件,在分布式系统中的大数据场景中使用该组件能够有效优化数据访问效率,提升访问过程的高可用性和服务连续性,具有轻量化、高速缓存等特性,能够较为高效、稳定支持大数据场景下的查询、访问操作。
上述OAAS具体可以是一种对象存储服务平台,能够以服务化的方式提供对图片、文档、音视频等非结构化对象文件的存储服务。其中,上述OAAS区别于常规的数据库,不需要与专门的管理服务器对接;并且在大数据场景下在对数据量较大的文件数据进行诸如存储、查询、检索等操作时,具有相对更好的效率和可靠性。
基于上述实施例,通过引入并组合使用更适用于大数据场景的NOS和OAAS来代替常规使用的关系型数据库参与与用户的账户明细数据下载相关的数据处理,能够有效地提高整体的处理效率,缩短处理时长。
在一些实施例中,所述中转数据缓存服务组件中存储有多个任务状态集。其中,每个任务状态集以与该任务所针对的账户的持有用户的用户标识作为键值,以区分不同任务状态集。每一个任务状态集中可以记录有涉及该任务的所有任务状态。其中,每一个任务状态集可以以与该任务对应的用户的用户标识作为键值(例如,key值)。
所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。其中,每个明细文件分别与中转数据缓存服务组件中存储的一个任务状态集关联,包含有与该任务状态集对应的明细文件(包括中间明细文件和最终的明细文件等)。其中,每一个明细文件与一个用户的用户标识对应,具体可以理解为所对应用户的账户明细数据的集合。
在一些实施例中,具体实施时,参阅图3所示,节点服务器在接收到目标客户端发起的目标任务创建请求之后,可以先响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集。
具体的,在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,可以在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集。在完成目标任务状态集之后,可以在该目标任务状态集中进行任务状态初始化;初始化成功时,可以向目标客户端反馈关于目标任务状态集创建成功的提示信息。相反,初始化失败时,可以向目标客户端反馈关于目标任务状态集创建失败的提示信息,以提示目标用户自查后通过目标客户端重新发起目标任务创建请求。
在确定中转数据缓存服务组件中已存在目标任务状态集的情况下,可以不需要再在中转数据缓存服务组件中创建目标任务状态集,可以直接使用已有的目标任务状态集,参与后续的数据处理。
具体使用时,根据目标任务状态,在确定中转文件存储服务平台已保存有与该目标任务对应的完整的目标明细文件的情况下,可以直接通过中转文件存储服务平台获取目标明细文件;并将该目标明细文件发送给目标客户端。
具体的,例如,节点服务器可以根据已有的目标任务状态,在确定中转文件存储服务平台中已保存有满足目标用户的目标明细文件的情况下,可以直接向目标客户端反馈用于表征中转文件存储服务平台中已完成目标明细文件的上传和保存的任务进度信息,以便目标客户端发起目标下载请求。相应的,节点服务器可以响应该目标下载请求,直接从中转文件存储服务平台上拉取对应的目标明细文件,并将该目标明细文件发送给目标客户端。
在确定中转文件存储服务平台还未保存有与该目标任务对应的完整的目标明细文件的情况下,可以进行后续的预设的数据处理。
在中转数据缓存服务组件中创建了目标任务状态之后,节点服务器后续可以根据该目标任务状态集,通过与中转缓存服务组件、中转文件存储服务平台的交互,进行预设的数据处理,以实现与目标任务相关的数据处理,使得在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件。
其中,上述预设的数据处理包括:调用相匹配的业务服务器生成并上传与目标用户的账户明细数据相关的中间明细文件;和/或,更新目标任务状态集中的任务状态;和/或,基于预设的轮询规则实时向目标客户端反馈最新的任务进度信息。
在一些实施例中,上述根据目标任务状态集,通过进行预设的数据处理,参阅图4所示,包括:按照以下方式,进行当前次的预设的数据处理:
S1:通过中转数据缓存服务组件获取目标任务的当前任务状态;
S2:根据当前任务状态,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
S3:在确定在中转文件存储服务平台中未完成目标明细文件的上传和保存的情况下,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件;
S4:将所述中间明细文件上传至中转文件存储服务平台;其中,所述中间明细文件用于在中转文件存储服务平台中生成目标明细文件;
S5:接收并根据中转文件存储服务平台针对中间明细文件所反馈的处理提示信息,更新中转数据缓存服务组件中的目标任务状态集。
基于上述实施例,通过按照上述方式进行多次预设的数据处理,可以在中转文件存储服务平台中上传并保存多个所需要的中间明细文件,以便可以组合得到最终目标用户所需要的完整的目标明细文件。
在一些实施例中,上述调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件,具体实施时,可以包括以下内容:
S1:根据目标任务状态集,确定当前待获取的账户明细数据的业务类型,作为当前业务类型;
S2:根据当前业务类型,调用相匹配的业务服务器获取并根据与目标用户相关且属于当前业务类型的账户明细数据,得到中间明细文件。
基于上述实施例,节点服务器可以先根据目标任务状态准确地确定出与当前业务类型相匹配的业务服务器,进而可以调用上述相匹配的业务服务器准确地生成当前次所需要的中间明细文件。
在一些实施例中,上述业务类型具体可以包括:交易渠道类型(例如,线上交易渠道、线下交易渠道等)、交易时间类型(例如,当前月内、一个月以前等)、交易发生地类型(例如,A地区、B地区等)、交易对象类型(例如,购物、转账、投资等)等。
具体的,在分布式系统中不同的节点服务器可以分别负责一种或几种业务类型的数据处理。这样,利用上述分布式系统可以有效地利用分布式系统的性能优势,高效、稳定地完成大数据场景下繁琐、复杂的业务数据处理。
在一些实施例中,参阅图5所示,在进行预设的数据处理的过程中,所述方法具体实施时,还可以包括以下内容:
S1:接收目标客户端根据预设的轮询规则所发起的针对目标任务的当前任务状态更新请求;
S2:响应所述当前任务状态更新请求,通过查询中转数据缓存服务组件中的目标任务状态集,获取目标任务的当前任务状态;
S3:根据目标任务的当前任务状态,向目标客户端反馈关于目标任务的当前任务进度信息。
基于上述实施例,根据预设的轮询规则,节点服务器和目标客户端相互之间可以自动且实时地进行数据交互,以便目标客户端可以实时地接收并利用节点服务器提供的当前任务进度信息,获取目标任务的最新任务状态,并将该最新任务状态及时地展示给目标用户,以减少目标用户的空白等待时长,提高目标用户的交互体验。
在一些实施例中,具体实施时,在节点服务器根据目标任务状态集,确定在中转文件存储服务平台中还没有完成目标明细文件的上传和保存的情况下,生成并向目标客户端发送关于目标任务的目标轮询提示。
相应的,目标客户端在接收到上述目标轮询提示后,可以触发根据预设的轮询规则,定时(例如,每间隔5秒)向节点服务器发起针对目标任务的当前任务状态更新请求,以获取最新的任务状态展示给目标用户。直到目标客户端根据最新的任务状态,确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下,停止继续向节点服务器发起针对目标任务的当前任务状态更新请求。
在一些实施例中,所述目标任务的当前任务进度信息具体可以包括:当前中转文件存储服务平台中所保存的目标明细文件的完整度。
在一些实施例中,上述根据目标任务的当前任务状态,向目标客户端反馈关于目标任务的当前任务进度信息,具体实施时,可以包括以下内容:将目标任务的当前状态直接作为当前任务进度信息,反馈给目标客户端;
或,
根据目标任务的当前任务状态,检测当前中转文件存储服务平台中所保存的目标明细文件的完整度;在确定当前中转文件存储服务平台中所保存的目标明细文件已完整时,可以生成用于指示目标任务完成的提示信息,作为当前任务的进度信息;在确定当前中转文件存储服务平台中所保存的目标明细文件不完整时,可以生成用于指示目标任务未完成的提示信息,作为当前任务的进度信息;再将上述当前任务的进度信息发送至目标客户端。
在一些实施例中,参阅图5所示,所述方法具体实施时,还可以包括以下内容:
S1:接收目标客户端发起的关于目标明细文件的目标下载请求;其中,所述目标客户端在根据任务进度信息确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下发起所述目标下载请求;
S2:响应所述目标下载请求,通过中转文件存储服务平台获取目标明细文件;
S3:将所述目标明细文件发送至目标客户端;并更新中转数据缓存服务组件中的目标任务状态集。
具体实施时,上述目标客户端可以根据最新的任务进度信息,在确定在中转文件存储服务平台中已经完成目标明细文件的上传和保存的情况下,生成并发送上述目标下载请求的。
基于上述实施例,可以使得目标客户端能够在中转文件存储服务平台中完成目标明细文件的上传和保存时,及时地下载得到目标用户所需要的目标明细文件,从而可以进一步缩短目标用户的等待时间。
在一些实施例中,在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,所述方法具体实施时,还可以包括以下内容:
S1:生成关于目标任务的目标轮询提示;
S2:向目标客户端发送所述目标轮询提示,以触发目标客户端根据预设的轮询规则发起针对目标任务的当前任务状态更新请求。
基于上述实施例,节点服务器可以通过生成并发送目标轮询提示,以主动提醒目标客户端根据预设的轮询规则实时发送针对目标任务的当前任务状态更新请求,以保证目标用户可以及时地了解到目标任务的最新任务状态。
其中,预设的轮询规则至少包含有轮询间隔时长,以及轮询结束条件。上述轮询结束条件具体可以为:接收到用于表征中转文件存储服务平台中完成目标明细文件的上传和保存的任务进度信息。
在一些实施例中,为了保护中转文件存储服务平台上用户的明细文件数据安全。具体实施时,在中转文件存储服务平台中只保存有多个明细文件的密文数据。
具体实施前,在中转文件存储服务平台可以预先生成相互对应的加密秘钥和解密秘钥;并且只向分布式系统中经过安全认证的节点服务器下发解密秘钥。
具体实施时,中转文件存储服务平台每次组合中间明细文件,得到一个完整的明细文件之后,可以先利用加密秘钥进行加密,得到该明细文件的密文数据,并将该明细文件的密文数据保存于中转文件服务平台;同时,删除明文形式的明细文件。
相应的,节点服务器通过中转文件存储服务平台只可以下载获取所需要的目标明细文件的密文数据。节点服务器在得到目标明细文件的密文数据之后,可以利用解密秘钥对该目标明细文件的进行解密处理,得到明文形式的目标明细文件;再将明文形式的目标明细文件发送至目标客户端。
从而可以避免保存于中转文件存储服务平台的明细文件遭到泄露,能够较好地保护用户的账户明细数据的数据安全。
由上可见,基于本说明书实施例提供的账户明细数据的处理方法,可以通过分布式系统中的节点服务器接收并响应目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,中转数据缓存服务组件中存储有针对多个任务的任务状态集;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;并根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;进而节点服务器可以通过中转文件存储服务平台获取目标明细文件,并将该目标明细文件发送给目标客户端。由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库完成关于用户的账户明细数据下载的数据处理,能够有效地减少大数据场景下对数据库的频繁操作,减少对分布式系统的性能影响,提高整体的处理效率,缩短用户的等待时长,使用户获得较好的交互体验。又由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库,不需要再依赖分布式系统中数量相对有限的负责管理数据库的管理服务器,而是可以调用分布式系统中任意的节点服务器来响应客户端完成关于用户的账户明细数据下载的数据处理,从而可以充分调用分布式系统更多的数据处理资源,缩短任务的排队时长,进一步提高了整体的处理效率,缩短了用户的等待时长。还由于通过引入了轮询机制,客户端可以根据预设的轮询规则自动向节点服务器发送任务状态更新请求;相应的,节点服务器可以响应该任务状态更新请求,及时地通过中转数据存储服务组件获取并向客户端反馈目标任务最新的任务进度信息,以便客户端可以及时向用户反馈目标任务的最新任务进度,从而可以减少用户的空白等待时长,进一步提高用户的交互体验。
参阅图6所示,本说明书实施例还提供了一种账户明细数据的处理方法,应用于目标客户端。该方法具体实施时,可以包括以下内容:
S601:接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
S602:向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
S603:通过节点服务器获取目标明细文件。
基于上述实施例,目标用户可以使用目标客户端,通过与分布式系统中节点服务器进行交互,高效、准确地下载得到所需要的目标明细文件。
在一些实施例中,在向节点服务器发送所述目标任务创建请求之后,所述方法具体实施时,还可以包括以下内容:
S1:接收节点服务器反馈的关于目标任务的目标轮询提示;
S2:响应所述目标轮询提示,根据预设的轮询规则向节点服务器发起针对目标任务的当前任务状态更新请求;
S3:接收节点服务器反馈的关于目标任务的当前任务进度信息。
基于上述实施例,目标客户端可以根据预设的轮询规则通过实时向节点服务器发起针对目标任务的当前任务状态更新请求,以获取目标任务最新的任务进度信息;并及时向目标用户展示出该任务进度信息,以便目标用户可以及时地了解到该目标任务的最新进度,减少目标用户的空白等待时间。
在一些实施例中,所述方法具体实施时,还可以包括以下内容:
S1:根据当前任务进度信息,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
S2:在确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下,生成关于目标明细文件的目标下载请求;并向节点服务器发送所述目标下载请求;
S3:接收节点服务器发送的目标明细文件。
基于上述实施例,目标客户端可以根据任务进度信息,在确定在中转文件存储服务平台中已经完成目标明细文件的上传和保存时,通过发送目标下载请求,以及时下载得到目标明细文件;并将该目标明细文件展示给目标用户,缩短目标用户的等待时长,使目标用户可以得到较好的交互体验。
本说明书实施例还提供一种服务器,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器具体实施时可以根据指令执行以下步骤:接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
为了能够更加准确地完成上述指令,参阅图7所示,本说明书实施例还提供了另一种具体的服务器,其中,所述服务器包括网络通信端口701、处理器702以及存储器703,上述结构通过内部线缆相连,以便各个结构可以进行具体的数据交互。
其中,所述网络通信端口701,具体可以用于接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识。
所述处理器702,具体可以用于响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
所述存储器703,具体可以用于存储相应的指令程序。
在本实施例中,所述网络通信端口701可以是与不同的通信协议进行绑定,从而可以发送或接收不同数据的虚拟端口。例如,所述网络通信端口可以是负责进行web数据通信的端口,也可以是负责进行FTP数据通信的端口,还可以是负责进行邮件数据通信的端口。此外,所述网络通信端口还可以是实体的通信接口或者通信芯片。例如,其可以为无线移动网络通信芯片,如GSM、CDMA等;其还可以为Wifi芯片;其还可以为蓝牙芯片。
在本实施例中,所述处理器702可以按任何适当的方式实现。例如,处理器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式等等。本说明书并不作限定。
在本实施例中,所述存储器703可以包括多个层次,在数字系统中,只要能保存二进制数据的都可以是存储器;在集成电路中,一个没有实物形式的具有存储功能的电路也叫存储器,如RAM、FIFO等;在系统中,具有实物形式的存储设备也叫存储器,如内存条、TF卡等。
本说明书实施例还提供一种客户端,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器具体实施时可以根据指令执行以下步骤:接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;通过节点服务器获取目标明细文件。
本说明书实施例还提供了一种基于上述账户明细数据的处理方法的计算机存储介质,所述计算机存储介质存储有计算机程序指令,在所述计算机程序指令被执行时实现:接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
本说明书实施例还提供了另一种基于上述账户明细数据的处理方法的计算机存储介质,所述计算机存储介质存储有计算机程序指令,在所述计算机程序指令被执行时实现:接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;通过节点服务器获取目标明细文件。
在本实施例中,上述存储介质包括但不限于随机存取存储器(Random AccessMemory,RAM)、只读存储器(Read-Only Memory,ROM)、缓存(Cache)、硬盘(Hard DiskDrive,HDD)或者存储卡(Memory Card)。所述存储器可以用于存储计算机程序指令。网络通信单元可以是依照通信协议规定的标准设置的,用于进行网络连接通信的接口。
在本实施例中,该计算机存储介质存储的程序指令具体实现的功能和效果,可以与其它实施方式对照解释,在此不再赘述。
本说明书实施例还提供了一种计算机程序产品,包含有计算机程序,所述计算机程序被处理器执行时实现以下步骤:接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
参阅图8所示,在软件层面上,本说明书实施例还提供了一种账户明细数据的处理装置,该装置具体可以包括以下的结构模块:
接收模块801,具体可以用于接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
查询模块802,具体可以用于响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
创建模块803,具体可以用于在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
处理模块804,具体可以用于根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
在一些实施例中,所述中转数据缓存服务组件具体可以包括NOS等;相应的,所述中转文件存储服务平台具体可以包括OAAS等。
在一些实施例中,上述处理模块804具体实施时,可以按照以下方式根据目标任务状态集,通过进行预设的数据处理:按照以下方式,进行当前次的预设的数据处理:通过中转数据缓存服务组件获取目标任务的当前任务状态;根据当前任务状态,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;在确定在中转文件存储服务平台中未完成目标明细文件的上传和保存的情况下,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件;将所述中间明细文件上传至中转文件存储服务平台;其中,所述中间明细文件用于在中转文件存储服务平台中生成目标明细文件;接收并根据中转文件存储服务平台针对中间明细文件所反馈的处理提示信息,更新中转数据缓存服务组件中的目标任务状态集。
在一些实施例中,上述处理模块804具体实施时,可以按照以下方式调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件:根据目标任务状态集,确定当前待获取的账户明细数据的业务类型,作为当前业务类型;根据当前业务类型,调用相匹配的业务服务器获取并根据与目标用户相关且属于当前业务类型的账户明细数据,得到中间明细文件。
在一些实施例中,上述处理模块804在进行预设的数据处理的过程中,还可以用于接收目标客户端根据预设的轮询规则所发起的针对目标任务的当前任务状态更新请求;响应所述当前任务状态更新请求,通过查询中转数据缓存服务组件中的目标任务状态集,获取目标任务的当前任务状态;根据目标任务的当前任务状态,向目标客户端反馈关于目标任务的当前任务进度信息。
在一些实施例中,上述装置具体实施时,还可以用于接收目标客户端发起的关于目标明细文件的目标下载请求;其中,所述目标客户端在根据任务进度信息确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下发起所述目标下载请求;响应所述目标下载请求,通过中转文件存储服务平台获取目标明细文件;将所述目标明细文件发送至目标客户端;并更新中转数据缓存服务组件中的目标任务状态集。
在一些实施例中,在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,所述装置具体实施时,还可以用于生成关于目标任务的目标轮询提示;向目标客户端发送所述目标轮询提示,以触发目标客户端根据预设的轮询规则发起针对目标任务的当前任务状态更新请求。
参阅图9所示,在软件层面上,本说明书实施例还提供了另一种账户明细数据的处理装置,该装置具体可以包括以下的结构模块:
生成模块901,具体可以用于接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
发送模块902,具体可以用于向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
获取模块903,具体可以用于通过节点服务器获取目标明细文件。
在一些实施例中,在向节点服务器发送所述目标任务创建请求之后,所述装置具体实施时,还可以用于接收节点服务器反馈的关于目标任务的目标轮询提示;响应所述目标轮询提示,根据预设的轮询规则向节点服务器发起针对目标任务的当前任务状态更新请求;接收节点服务器反馈的关于目标任务的当前任务进度信息。
在一些实施例中,所述装置具体实施时,还可以用于根据当前任务进度信息,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;在确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下,生成关于目标明细文件的目标下载请求;并向节点服务器发送所述目标下载请求;接收节点服务器发送的目标明细文件。
需要说明的是,上述实施例阐明的单元、装置或模块等,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本说明书时可以把各模块的功能在同一个或多个软件和/或硬件中实现,也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
由上可见,基于本说明书实施例提供的账户明细数据的处理装置,由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库完成关于用户的账户明细数据下载的数据处理,能够有效地减少大数据场景下对数据库的频繁操作,减少对分布式系统的性能影响,提高整体的处理效率,缩短用户的等待时长,使用户获得较好的交互体验。又由于通过组合使用中转数据缓存服务组件和中转文件存储服务平台代替数据库,不需要再依赖分布式系统中数量相对有限的负责管理数据库的管理服务器,而是可以调用分布式系统中任意的节点服务器来响应客户端完成关于用户的账户明细数据下载的数据处理,从而可以充分调用分布式系统更多的数据处理资源,缩短任务的排队时长,进一步提高了整体的处理效率,缩短了用户的等待时长。还由于通过引入了轮询机制,客户端可以根据预设的轮询规则自动向节点服务器发送任务状态更新请求;相应的,节点服务器可以响应该任务状态更新请求,及时地通过中转数据存储服务组件获取并向客户端反馈目标任务最新的任务进度信息,以便客户端可以及时向用户反馈目标任务的最新任务进度,从而可以减少用户的空白等待时长,进一步提高用户的交互体验。
虽然本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的装置或客户端产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境,甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下,并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内部包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构、类等等。也可以在分布式计算环境中实践本说明书,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
通过以上的实施例的描述可知,本领域的技术人员可以清楚地了解到本说明书可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本说明书的技术方案本质上可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,移动终端,服务器,或者网络设备等)执行本说明书各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例采用递进的方式描述,各个实施例之间相同或相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。本说明书可用于众多通用或专用的计算机系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
虽然通过实施例描绘了本说明书,本领域普通技术人员知道,本说明书有许多变形和变化而不脱离本说明书的精神,希望所附的权利要求包括这些变形和变化而不脱离本说明书的精神。
Claims (15)
1.一种账户明细数据的处理方法,其特征在于,应用于分布式系统中的节点服务器,包括:
接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
2.根据权利要求1所述的方法,其特征在于,所述中转数据缓存服务组件包括NOS;相应的,所述中转文件存储服务平台包括OAAS。
3.根据权利要求2所述的方法,其特征在于,进行预设的数据处理,包括:
按照以下方式,进行当前次的预设的数据处理:
通过中转数据缓存服务组件获取目标任务的当前任务状态;
根据当前任务状态,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
在确定在中转文件存储服务平台中未完成目标明细文件的上传和保存的情况下,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件;
将所述中间明细文件上传至中转文件存储服务平台;其中,所述中间明细文件用于在中转文件存储服务平台中生成目标明细文件;
接收并根据中转文件存储服务平台针对中间明细文件所反馈的处理提示信息,更新中转数据缓存服务组件中的目标任务状态集。
4.根据权利要求3所述的方法,其特征在于,调用相匹配的业务服务器获取并根据与目标用户相关的账户明细数据,得到中间明细文件,包括:
根据目标任务状态集,确定当前待获取的账户明细数据的业务类型,作为当前业务类型;
根据当前业务类型,调用相匹配的业务服务器获取并根据与目标用户相关且属于当前业务类型的账户明细数据,得到中间明细文件。
5.根据权利要求3所述的方法,其特征在于,在进行预设的数据处理的过程中,所述方法还包括:
接收目标客户端根据预设的轮询规则所发起的针对目标任务的当前任务状态更新请求;
响应所述当前任务状态更新请求,通过查询中转数据缓存服务组件中的目标任务状态集,获取目标任务的当前任务状态;
根据目标任务的当前任务状态,向目标客户端反馈关于目标任务的当前任务进度信息。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
接收目标客户端发起的关于目标明细文件的目标下载请求;其中,所述目标客户端在根据任务进度信息确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下发起所述目标下载请求;
响应所述目标下载请求,通过中转文件存储服务平台获取目标明细文件;
将所述目标明细文件发送至目标客户端;并更新中转数据缓存服务组件中的目标任务状态集。
7.根据权利要求5所述的方法,其特征在于,在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,所述方法还包括:
生成关于目标任务的目标轮询提示;
向目标客户端发送所述目标轮询提示,以触发目标客户端根据预设的轮询规则发起针对目标任务的当前任务状态更新请求。
8.一种账户明细数据的处理方法,其特征在于,应用于目标客户端,包括:
接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
通过节点服务器获取目标明细文件。
9.根据权利要求8所述的方法,其特征在于,在向节点服务器发送所述目标任务创建请求之后,所述方法还包括:
接收节点服务器反馈的关于目标任务的目标轮询提示;
响应所述目标轮询提示,根据预设的轮询规则向节点服务器发起针对目标任务的当前任务状态更新请求;
接收节点服务器反馈的关于目标任务的当前任务进度信息。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
根据当前任务进度信息,确定在中转文件存储服务平台中是否完成目标明细文件的上传和保存;
在确定在中转文件存储服务平台中完成目标明细文件的上传和保存的情况下,生成关于目标明细文件的目标下载请求;并向节点服务器发送所述目标下载请求;
接收节点服务器发送的目标明细文件。
11.一种账户明细数据的处理装置,其特征在于,应用于分布式系统中的节点服务器,包括:
接收模块,用于接收目标客户端发起的关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
查询模块,用于响应所述目标任务创建请求,根据目标用户的用户标识查询中转数据缓存服务组件,以确定中转数据缓存服务组件中是否存在以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;所述任务状态集用于记录任务状态;
创建模块,用于在确定中转数据缓存服务组件中不存在目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;
处理模块,用于根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件。
12.一种账户明细数据的处理装置,其特征在于,应用于目标客户端,包括:
生成模块,用于接收并响应目标用户的创建操作,生成关于下载目标用户的账户明细数据的目标任务创建请求;其中,所述目标任务创建请求至少携带有目标用户的用户标识;
发送模块,用于向节点服务器发送所述目标任务创建请求;其中,所述节点服务器响应目标任务创建请求,在确定中转数据缓存服务组件中不存在以目标用户的用户标识作为键值的目标任务状态集的情况下,在中转数据缓存服务组件中创建以目标用户的用户标识作为键值的目标任务状态集;其中,所述中转数据缓存服务组件中存储有多个任务状态集;根据目标任务状态集,通过进行预设的数据处理,以在中转文件存储服务平台中上传并保存关于目标用户的账户明细数据的目标明细文件;其中,所述目标明细文件与目标用户的用户标识对应;所述中转文件存储服务平台中保存有与多个用户标识对应的多个明细文件;
获取模块,用于通过节点服务器获取目标明细文件。
13.一种服务器,其特征在于,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现权利要求1至7中任一项所述方法的步骤。
14.一种客户端,其特征在于,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现权利要求8至10中任一项所述方法的步骤。
15.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,所述指令被处理器执行时实现权利要求1至7,或8至10中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210679113.3A CN115033617A (zh) | 2022-06-16 | 2022-06-16 | 账户明细数据的处理方法、装置、服务器和客户端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210679113.3A CN115033617A (zh) | 2022-06-16 | 2022-06-16 | 账户明细数据的处理方法、装置、服务器和客户端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115033617A true CN115033617A (zh) | 2022-09-09 |
Family
ID=83124250
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210679113.3A Pending CN115033617A (zh) | 2022-06-16 | 2022-06-16 | 账户明细数据的处理方法、装置、服务器和客户端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115033617A (zh) |
-
2022
- 2022-06-16 CN CN202210679113.3A patent/CN115033617A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113568884B (zh) | 一种文件管理方法、装置、电子设备及存储介质 | |
EP2682863B1 (en) | Installing applications remotely | |
CN105530175B (zh) | 一种消息处理方法、装置及系统 | |
TWI743405B (zh) | 語音播報方法、智慧型播報裝置、編碼有電腦程式指令的一個或多個非暫時性電腦儲存媒體以及智慧型播報設備 | |
US9667515B1 (en) | Service image notifications | |
CN108376079B (zh) | 自动应用更新 | |
US10129264B2 (en) | Method and apparatus for implementing document sharing between user groups | |
EP2919440B1 (en) | Advertisement processing method and device | |
US20140006225A1 (en) | Automatic device inventory management for different types of devices | |
CN104380261A (zh) | 本地支持的基于云端的存储 | |
WO2013188179A2 (en) | Efficient data transfer for cloud storage by centralized management of access tokens | |
CN103582885A (zh) | 基于网络的数字数据仓库的管理 | |
US10893091B2 (en) | Management of asynchronous content post and media file transmissions | |
CN110290218A (zh) | 文件批注方法和系统、计算机可读介质 | |
EP3506599B1 (en) | Method for synchronizing contact information, apparatus and medium | |
CN106936907B (zh) | 一种文件处理方法、逻辑服务器、接入服务器及系统 | |
US9577967B2 (en) | Method and system for managing an informational site using a social networking application | |
CN115878138B (zh) | 应用预下载方法、装置、计算机、存储介质 | |
CN107948337B (zh) | 电子文件传输方法、装置、系统及计算机可读存储介质 | |
CN115033617A (zh) | 账户明细数据的处理方法、装置、服务器和客户端 | |
CN111917779B (zh) | 基于目标账号的数据处理方法、装置、系统及服务端设备 | |
CN113132928B (zh) | 视频短信业务的计费方法及装置 | |
CN110134530B (zh) | 一种会话内容的处理方法及装置 | |
CN109101253B (zh) | 云计算系统中主机的管理方法和装置 | |
CN111144961A (zh) | 基于云开票设备的开票方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |