CN118035258A - 一种财务影像文件的碎片化存储方法、设备及介质 - Google Patents

一种财务影像文件的碎片化存储方法、设备及介质 Download PDF

Info

Publication number
CN118035258A
CN118035258A CN202410148720.6A CN202410148720A CN118035258A CN 118035258 A CN118035258 A CN 118035258A CN 202410148720 A CN202410148720 A CN 202410148720A CN 118035258 A CN118035258 A CN 118035258A
Authority
CN
China
Prior art keywords
file
image file
image
financial
fragments
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410148720.6A
Other languages
English (en)
Inventor
李志刚
李伟龙
徐同明
王明振
王继东
石磊
胥静
潘雅丽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur General Software Co Ltd
Original Assignee
Inspur General Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur General Software Co Ltd filed Critical Inspur General Software Co Ltd
Priority to CN202410148720.6A priority Critical patent/CN118035258A/zh
Publication of CN118035258A publication Critical patent/CN118035258A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2308Concurrency control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • G06F16/137Hash-based
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • G06F16/1824Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • G06F16/2255Hash tables
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/64Protecting data integrity, e.g. using checksums, certificates or signatures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/062Securing storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Health & Medical Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种财务影像文件的碎片化存储方法、设备及介质,涉及计算机数据处理技术领域。方法包括:基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库。本申请通过上述方法解决了传统的影像存储方式在面对大量并发请求时,由于磁盘I/O的限制,难以保证存储性能和数据的安全性的问题。

Description

一种财务影像文件的碎片化存储方法、设备及介质
技术领域
本申请涉及计算机数据处理技术领域,尤其涉及一种财务影像文件的碎片化存储方法、设备及介质。
背景技术
随着社会的发展和科技的进步,财务管理的方式也在不断演变。传统的纸质凭证和文档管理方式已经逐渐被电子凭证所取代。这不仅提高了财务处理的效率,也为企业节省了大量的纸张和存储空间。其中,增值税发票、电子客票、行程单及银行回单等电子凭证的应用已经越来越广泛。这种趋势使得企业财务共享服务的需求日益增长,对于无纸化办公场景、电子档案场景等提出了更高的要求。
影像管理技术作为财务共享服务的标准辅助功能,已经在很多企业中得到了广泛应用。通过影像管理,企业可以在原始凭证采集、报账审核查看和归档等环节实现财务管理效能的提升。具体来说,这种技术可以将纸质文档或电子文档转化为数字影像,方便存储、传输和处理。这大大提高了财务处理的效率和准确性,减少了人工操作的错误和遗失风险。
然而,随着企业规模的扩大和业务量的增加,高并发下的影像存储性能和安全性问题逐渐凸显出来。传统的影像存储方式在面对大量并发请求时,由于磁盘I/O的限制,难以保证存储性能和数据的安全性。如何解决这一问题,成为当前影像管理技术面临的重要挑战。
发明内容
本申请实施例提供了一种财务影像文件的碎片化存储方法、设备及介质,用以解决如下的技术问题:传统的影像存储方式在面对大量并发请求时,由于磁盘I/O的限制,难以保证存储性能和数据的安全性。
第一方面,本申请实施例提供了一种财务影像文件的碎片化存储方法,其特征在于,方法包括:基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;其中,第二数量不大于第一数量;记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库;其中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
在本申请的一种实现方式中,在将第一数量个影像文件碎片并发写入第二数量个文件服务器之后,方法还包括:在需要下载待存储财务影像文件的情况下,接收用户触发的影像文件获取请求;基于影像文件获取请求中包含的影像信息,在数据库中查找对应的文件信息;基于文件信息,获取待存储财务影像文件。
在本申请的一种实现方式中,基于文件信息,获取待存储财务影像文件,具体包括:基于文件信息中包括的各影像文件碎片所在的文件服务器信息,定位待存储财务影像文件的各影像文件碎片;基于文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,以获取待存储财务影像文件。
在本申请的一种实现方式中,基于文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,具体包括:计算各影像碎片文件的待验证哈希值,并判断待验证哈希值与文件信息中包括的各影像文件碎片的待对比哈希值是否相同;在确定各影像碎片文件的待验证哈希值与待对比哈希值相同的情况下,基于文件信息中包括的各影像文件碎片的编号,对各影像文件碎片进行顺序合并,以获得待存储财务影像文件。
在本申请的一种实现方式中,在基于文件信息,获取待存储财务影像文件之后,方法还包括:对待存储财务影像文件进行完整性校验;在确定待存储财务影像文件通过完整性校验的情况下,将待存储财务影像文件发送给用户。
在本申请的一种实现方式中,将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片,具体包括:根据待存储财务影像文件的文件大小和文件格式,确定拆分规则;基于拆分规则,将待存储财务影像文件拆分为若干个第一数量个影像文件碎片。
在本申请的一种实现方式中,确定空闲的第二数量个文件服务器,具体包括:根据预设的查找规则,遍历所有文件服务器,查找空闲状态的文件服务器;将找到的空闲文件服务器数量记录为第二数量个。
在本申请的一种实现方式中,影像信息包括:影像文件名称、影像文件类型、影像文件大小、影像文件创建时间。
第二方面,本申请实施例还提供了一种财务影像文件的碎片化存储设备,其特征在于,设备包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够:基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;其中,第二数量不大于第一数量;记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库;其中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
第三方面,本申请实施例还提供了一种财务影像文件的碎片化存储的非易失性计算机存储介质,存储有计算机可执行指令,其特征在于,计算机可执行指令设置为:基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;其中,第二数量不大于第一数量;记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库;其中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
本申请实施例提供的一种财务影像文件的碎片化存储方法、设备及介质,通过并发的方式将文件拆分成多个碎片文件,分散上传到不用的文件服务器,提高传输效率。下载可同时实现在多个文件服务器中下载,通过影像碎片哈希值校验碎片文件完整性,全部获取后将碎片文件合并形成完整的文件,再校验整合文件的完整性,解决传统磁盘I/O受限问题,同时文件分散存储,即使拿到文件随便也无法获取到具体的文件内容,提高文件存储的安全性。文件服务器开放,合理利用已有资源,开发程序高,更容易接入。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本申请实施例提供的一种财务影像文件的碎片化存储方法流程图;
图2为本申请实施例提供的一种财务影像文件的碎片化存储设备内部结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供了一种财务影像文件的碎片化存储方法、设备及介质,用以解决如下的技术问题:传统的影像存储方式在面对大量并发请求时,由于磁盘I/O的限制,难以保证存储性能和数据的安全性。
下面通过附图对本申请实施例提出的技术方案进行详细的说明。
图1为本申请实施例提供的一种财务影像文件的碎片化存储方法流程图。如图1所示,本申请实施例提供的一种财务影像文件的碎片化存储方法,具体包括以下步骤:
步骤101、基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片。
在本申请的一个实施例中,为实现基于多源异构的财务影像文件存储,首先基于预设的应用服务器,接收用户上传的待存储财务影像。
进一步地,将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片。
具体地,根据待存储财务影像文件的文件大小和文件格式,确定拆分规则;基于拆分规则,将待存储财务影像文件拆分为若干个第一数量个影像文件碎片。
在一个实施例中,在将待存储财务影像文件拆分为第一数量个影像文件碎片时,可以根据待存储财务影像文件的文件大小和文件格式来确定拆分规则。例如,如果待存储财务影像文件是一个较大的PDF文件,可以将其拆分为多个较小的PDF文件碎片;如果待存储财务影像文件是一个较小的图片文件,可以根据文件格式和大小将其拆分为多个图片碎片。拆分规则可以基于多种因素,如文件大小、文件类型、存储需求等。例如,可以设定一个规则,将大于一定大小的文件拆分为多个较小的文件碎片,或者将特定类型的文件拆分为多个较小尺寸的文件碎片。具体实施时,可以根据实际情况选择适当的拆分规则。例如,如果待存储财务影像文件是一个较大的PDF文件,可以将该文件拆分为多个较小的PDF文件碎片,每个碎片的大小可以设定为一定的大小限制,如10MB。这样可以确保每个文件碎片的大小相对较小,便于存储和传输。如果待存储财务影像文件是一个较小的图片文件,可以根据文件格式和大小将其拆分为多个图片碎片。每个图片碎片的大小可以设定为一定的大小限制,如50KB。这样可以确保每个图片碎片的大小相对较小,便于存储和传输。通过这种拆分方式,可以有效地将待存储财务影像文件拆分为第一数量个影像文件碎片,便于后续的存储和传输。同时,这种拆分方式还可以提高文件的可管理性和可维护性,便于对文件进行统一的管理和维护。
步骤102、对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值。
在本申请的一个实施例中,在将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片之后,对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值。
在一个实施例中,在对第一数量个影像文件碎片进行编号和计算各影像文件碎片的待对比哈希值时,可以采用以下步骤:对每个影像文件碎片进行编号,以便于后续管理和识别。编号可以采用数字或字母组合,例如使用递增的数字或随机生成的唯一标识符。对每个影像文件碎片计算哈希值。哈希值是一种将任意长度的数据映射为固定长度字符串的算法,用于确保数据的唯一性和完整性。常用的哈希算法包括MD5和SHA-1等。将计算出的哈希值与影像文件碎片的编号相关联。
步骤103、确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器。
在本申请的一个实施例中,在第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值之后,首先确定空闲的第二数量个文件服务器。
具体地,根据预设的查找规则,遍历所有文件服务器,查找空闲状态的文件服务器;将找到的空闲文件服务器数量记录为第二数量个。
在一个实施例中,在确定空闲的第二数量个文件服务器时,可以根据预设的查找规则,遍历所有文件服务器,查找空闲状态的文件服务器。查找规则可以根据实际需求来设定,例如可以设定为查找所有空闲状态的文件服务器,或者只查找一定数量的空闲文件服务器。具体实施时,可以首先获取所有文件服务器的状态信息,包括是否空闲、负载情况等。然后根据预设的查找规则,遍历这些文件服务器,查找处于空闲状态的文件服务器。例如,如果预设的查找规则是查找所有空闲状态的文件服务器,那么可以遍历所有的文件服务器,将所有空闲的文件服务器数量记录下来,并将该数量设定为第二数量个。如果预设的查找规则是只查找一定数量的空闲文件服务器,那么可以遍历一定数量的文件服务器,将找到的空闲文件服务器数量记录下来,并将该数量设定为第二数量个。通过这种查找方式,可以有效地确定空闲的第二数量个文件服务器,便于后续的文件存储和传输。同时,这种查找方式还可以提高文件的可用性和可扩展性,便于对文件进行统一的管理和维护。
可以理解的是,第二数量不大于第一数量。
进一步地,将第一数量个影像文件碎片并发写入第二数量个文件服务器。
在一个实施例中,在将第一数量个影像文件碎片并发写入第二数量个文件服务器时,可以采用以下步骤:获取每个空闲文件服务器的地址和端口信息,以及可用的存储空间等。这些信息可以通过与文件服务器进行通信或查询相关配置文件等方式获得。根据编号和哈希值等信息,将每个影像文件碎片写入对应的空闲文件服务器。采用并发的方式进行写入,以提高写入效率和响应速度。可以使用多线程或多进程等技术来实现并发写入。
步骤104、记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库。
在本申请的一个实施例中,在将第一数量个影像文件碎片并发写入第二数量个文件服务器之后,记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库。
在本申请的一个实施例中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息;影像信息包括:影像文件名称、影像文件类型、影像文件大小、影像文件创建时间。
在本申请的一个实施例中,在将第一数量个影像文件碎片并发写入第二数量个文件服务器之后,方法还包括:在需要下载待存储财务影像文件的情况下,接收用户触发的影像文件获取请求;基于影像文件获取请求中包含的影像信息,在数据库中查找对应的文件信息;基于文件信息,获取待存储财务影像文件。
在本申请的一个实施例中,基于文件信息,获取待存储财务影像文件,具体包括:基于文件信息中包括的各影像文件碎片所在的文件服务器信息,定位待存储财务影像文件的各影像文件碎片;基于文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,以获取待存储财务影像文件。
在本申请的一个实施例中,基于文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,具体包括:计算各影像碎片文件的待验证哈希值,并判断待验证哈希值与文件信息中包括的各影像文件碎片的待对比哈希值是否相同;在确定各影像碎片文件的待验证哈希值与待对比哈希值相同的情况下,基于文件信息中包括的各影像文件碎片的编号,对各影像文件碎片进行顺序合并,以获得待存储财务影像文件。
在本申请的一个实施例中,在基于文件信息,获取待存储财务影像文件之后,方法还包括:对待存储财务影像文件进行完整性校验;在确定待存储财务影像文件通过完整性校验的情况下,将待存储财务影像文件发送给用户。
以上为本申请提出的方法实施例。基于同样的发明构思,本申请实施例还提供了一种财务影像文件的碎片化存储设备,其结构如图2所示。
图2为本申请实施例提供的一种财务影像文件的碎片化存储设备内部结构示意图。如图2所示,设备包括:
至少一个处理器201;
以及,与至少一个处理器通信连接的存储器202;
其中,存储器202存储有可被至少一个处理器执行的指令,指令被至少一个处理器201执行,以使至少一个处理器201能够:
基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;
对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;
确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;其中,第二数量不大于第一数量;
记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库;其中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
本申请的一些实施例提供的对应于图1的一种财务影像文件的碎片化存储的非易失性计算机存储介质,存储有计算机可执行指令,计算机可执行指令设置为:
基于预设的应用服务器,接收用户上传的待存储财务影像,并将待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;
对第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;
确定空闲的第二数量个文件服务器,并将第一数量个影像文件碎片并发写入第二数量个文件服务器;其中,第二数量不大于第一数量;
记录各影像文件碎片所在的文件服务器信息,并将待存储财务影像文件的文件信息存储于数据库;其中,文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
本申请中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于物联网设备和介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请实施例提供的系统和介质与方法是一一对应的,因此,系统和介质也具有与其对应的方法类似的有益技术效果,由于上面已经对方法的有益技术效果进行了详细说明,因此,这里不再赘述系统和介质的有益技术效果。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种财务影像文件的碎片化存储方法,其特征在于,所述方法包括:
基于预设的应用服务器,接收用户上传的待存储财务影像,并将所述待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;
对所述第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;
确定空闲的第二数量个文件服务器,并将所述第一数量个影像文件碎片并发写入所述第二数量个文件服务器;其中,所述第二数量不大于第一数量;
记录各影像文件碎片所在的文件服务器信息,并将所述待存储财务影像文件的文件信息存储于数据库;其中,所述文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
2.根据权利要求1所述的一种财务影像文件的碎片化存储方法,其特征在于,在将所述第一数量个影像文件碎片并发写入所述第二数量个文件服务器之后,所述方法还包括:
在需要下载所述待存储财务影像文件的情况下,接收用户触发的影像文件获取请求;
基于所述影像文件获取请求中包含的影像信息,在所述数据库中查找对应的文件信息;
基于所述文件信息,获取所述待存储财务影像文件。
3.根据权利要求2所述的一种财务影像文件的碎片化存储方法,其特征在于,基于所述文件信息,获取所述待存储财务影像文件,具体包括:
基于所述文件信息中包括的各影像文件碎片所在的文件服务器信息,定位所述待存储财务影像文件的各影像文件碎片;
基于所述文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,以获取所述待存储财务影像文件。
4.根据权利要求3所述的一种财务影像文件的碎片化存储方法,其特征在于,基于所述文件信息中包括的各影像文件碎片的编号与待对比哈希值,对各影像文件碎片进行拼接,具体包括:
计算各影像碎片文件的待验证哈希值,并判断所述待验证哈希值与所述文件信息中包括的各影像文件碎片的待对比哈希值是否相同;
在确定各影像碎片文件的待验证哈希值与待对比哈希值相同的情况下,基于所述文件信息中包括的各影像文件碎片的编号,对各影像文件碎片进行顺序合并,以获得所述待存储财务影像文件。
5.根据权利要求2所述的一种财务影像文件的碎片化存储方法,其特征在于,在基于所述文件信息,获取所述待存储财务影像文件之后,所述方法还包括:
对所述待存储财务影像文件进行完整性校验;
在确定所述待存储财务影像文件通过所述完整性校验的情况下,将所述待存储财务影像文件发送给用户。
6.根据权利要求1所述的一种财务影像文件的碎片化存储方法,其特征在于,将所述待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片,具体包括:
根据所述待存储财务影像文件的文件大小和文件格式,确定拆分规则;
基于所述拆分规则,将所述待存储财务影像文件拆分为若干个第一数量个影像文件碎片。
7.根据权利要求1所述的一种财务影像文件的碎片化存储方法,其特征在于,确定空闲的第二数量个文件服务器,具体包括:
根据预设的查找规则,遍历所有文件服务器,查找空闲状态的文件服务器;
将找到的空闲文件服务器数量记录为第二数量个。
8.根据权利要求1所述的一种财务影像文件的碎片化存储方法,其特征在于,
所述影像信息包括:影像文件名称、影像文件类型、影像文件大小、影像文件创建时间。
9.一种财务影像文件的碎片化存储设备,其特征在于,所述设备包括:
至少一个处理器;
以及,与所述至少一个处理器通信连接的存储器;
其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:
基于预设的应用服务器,接收用户上传的待存储财务影像,并将所述待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;
对所述第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;
确定空闲的第二数量个文件服务器,并将所述第一数量个影像文件碎片并发写入所述第二数量个文件服务器;其中,所述第二数量不大于第一数量;
记录各影像文件碎片所在的文件服务器信息,并将所述待存储财务影像文件的文件信息存储于数据库;其中,所述文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
10.一种财务影像文件的碎片化存储的非易失性计算机存储介质,存储有计算机可执行指令,其特征在于,所述计算机可执行指令设置为:
基于预设的应用服务器,接收用户上传的待存储财务影像,并将所述待存储财务影像文件通过预设的拆分规则拆分为第一数量个影像文件碎片;
对所述第一数量个影像文件碎片进行编号,并计算各影像文件碎片的待对比哈希值;
确定空闲的第二数量个文件服务器,并将所述第一数量个影像文件碎片并发写入所述第二数量个文件服务器;其中,所述第二数量不大于第一数量;
记录各影像文件碎片所在的文件服务器信息,并将所述待存储财务影像文件的文件信息存储于数据库;其中,所述文件信息包括:影像信息、各影像文件碎片的编号、待对比哈希值及所在的文件服务器信息。
CN202410148720.6A 2024-01-31 2024-01-31 一种财务影像文件的碎片化存储方法、设备及介质 Pending CN118035258A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410148720.6A CN118035258A (zh) 2024-01-31 2024-01-31 一种财务影像文件的碎片化存储方法、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410148720.6A CN118035258A (zh) 2024-01-31 2024-01-31 一种财务影像文件的碎片化存储方法、设备及介质

Publications (1)

Publication Number Publication Date
CN118035258A true CN118035258A (zh) 2024-05-14

Family

ID=90983467

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410148720.6A Pending CN118035258A (zh) 2024-01-31 2024-01-31 一种财务影像文件的碎片化存储方法、设备及介质

Country Status (1)

Country Link
CN (1) CN118035258A (zh)

Similar Documents

Publication Publication Date Title
US11544623B2 (en) Consistent filtering of machine learning data
US11409703B2 (en) File versions within content addressable storage
US10366053B1 (en) Consistent randomized record-level splitting of machine learning data
US10713589B1 (en) Consistent sort-based record-level shuffling of machine learning data
US11360938B2 (en) Files having unallocated portions within content addressable storage
CN102629247B (zh) 一种数据处理方法、装置和系统
CN110162524B (zh) 配置数据的管理方法、装置、计算机设备及存储介质
US9325633B2 (en) Cache control for web application resources
CN106649676A (zh) 一种基于hdfs存储文件的去重方法及装置
US11494403B2 (en) Method and apparatus for storing off-chain data
US10515055B2 (en) Mapping logical identifiers using multiple identifier spaces
US10671709B2 (en) Data isolation in distributed hash chains
CN111815454B (zh) 数据上链方法及装置、电子设备、存储介质
US10902018B2 (en) Synchronizing in-use source data and an unmodified migrated copy thereof
CN112965939A (zh) 一种文件合并方法、装置和设备
CN110598467A (zh) 一种内存数据块完整性检验方法
CN111563083B (zh) 报表数据查询方法、装置及系统
CN116228229A (zh) 一种基于区块链的数据资产流通方法、设备及介质
CN113590566B (zh) 基于堆结构的SequenceFile存储优化方法、装置、设备及存储介质
CN118035258A (zh) 一种财务影像文件的碎片化存储方法、设备及介质
CN113169978A (zh) 用于在区块链技术中自动管理和存放文件(图像)哈希的系统
CN114089924B (zh) 区块链账本数据存储系统及方法
CN114490514A (zh) 文件系统的元数据管理方法、装置、设备
CN113868249A (zh) 一种数据存储方法、装置、计算机设备以及存储介质
CN115934670B (zh) Hdfs多机房的副本放置策略验证方法与装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination