CN111159138A - 一种异步数据存储方法、装置、设备及可读存储介质 - Google Patents
一种异步数据存储方法、装置、设备及可读存储介质 Download PDFInfo
- Publication number
- CN111159138A CN111159138A CN201911398162.4A CN201911398162A CN111159138A CN 111159138 A CN111159138 A CN 111159138A CN 201911398162 A CN201911398162 A CN 201911398162A CN 111159138 A CN111159138 A CN 111159138A
- Authority
- CN
- China
- Prior art keywords
- sequence number
- stored
- received
- asynchronous data
- cache region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013500 data storage Methods 0.000 title claims abstract description 58
- 238000000034 method Methods 0.000 title claims abstract description 58
- 239000012634 fragment Substances 0.000 claims abstract description 39
- 230000008569 process Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012163 sequencing technique Methods 0.000 claims description 9
- 230000001960 triggered effect Effects 0.000 claims description 8
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 description 10
- 230000001360 synchronised effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000007689 inspection Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
- G06F16/183—Provision of network file services by network file servers, e.g. by using NFS, CIFS
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/1737—Details of further file system functions for reducing power consumption or coping with limited storage space, e.g. in mobile devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种异步数据存储方法,本申请中首先可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,将序号不符合正确顺序的待存储片段加入缓存区,最后再将缓存区中所有待存储片段按照序号由小到大的顺序存储于存储空间,首先能够实现分布式对象存储系统对接NFS时的异步数据存储功能,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量。本发明还公开了一种异步数据存储装置、设备及计算机可读存储介质,具有如上异步数据存储方法相同的有益效果。
Description
技术领域
本发明涉及数据存储领域,特别是涉及一种异步数据存储方法,本发明还涉及一种异步数据存储装置、设备及计算机可读存储介质。
背景技术
用户在具有NFS(Network File System,网络文件系统)的客户端设备上可以通过NFS与分布式对象存储系统实现数据交互,例如通过NFS将数据存储在分布式对象存储系统中,现有技术中的分布式对象存储系统仅仅能够将NFS传输的同步数据(也即顺序排列好的数据)进行存储,这也就限制了客户端设备仅仅能够通过同步传输的方式发送数据,数据传输速度较慢,分布式对象存储系统对接NFS的存储性能较差。
因此,如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。
发明内容
本发明的目的是提供一种异步数据存储方法,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量;本发明的另一目的是提供一种异步数据存储装置、设备及计算机可读存储介质,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量。
为解决上述技术问题,本发明提供了一种异步数据存储方法,应用于分布式对象存储系统,包括:
判断网络文件系统NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同;
若相同,则将所述待存储片段存储于存储空间,并将所述待接收序号加一;
若不同,则将所述待存储片段加入缓存区;
判断所述异步数据的待存储片段是否接收完毕;
若没有接收完毕,则返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
若接收完毕,则将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间;
其中,所述待接收序号的初始值为所述待存储片段的所述序号的最小值。
优选地,所述将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间具体为:
将所述缓存区中所有的所述待存储片段按照所述序号由小到大的顺序进行排序;
判断所述缓存区中最小的所述序号是否与所述待接收序号相同;
若所述缓存区中最小的所述序号与所述待接收序号相同,则将所述缓存区中最小的所述序号对应的所述待存储片段存储于所述存储空间;
释放所述缓存区中最小的所述序号对应的所述待存储片段在所述缓存区中的空间并将所述待接收序号加一;
判断所述缓存区是否已清空;
若所述缓存区未清空,则返回判断所述缓存区中最小的所述序号是否与所述待接收序号相同的步骤。
优选地,所述判断所述缓存区中最小的所述序号是否与所述待接收序号相同之后,所述判断所述缓存区是否已清空之前,该异步数据存储方法还包括:
若所述缓存区中最小的所述序号与所述待接收序号不同,则进行报错。
优选地,所述判断所述缓存区是否已清空之后,该异步数据存储方法还包括:
若所述缓存区已清空,则结束数据存储流程。
优选地,所述若所述缓存区中最小的所述序号与所述待接收序号不同,则进行报错具体为:
若所述缓存区中最小的所述序号与所述待接收序号不同,则控制显示器显示缺失的所述待存储片段的序号。
为解决上述技术问题,本发明还提供了一种异步数据存储装置,应用于分布式对象存储系统,包括:
第一判断模块,用于判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同,若相同,则触发第一存储模块,若不同,则触发缓存模块;
所述第一存储模块,用于将所述待存储片段存储于存储空间,并将所述待接收序号加一;
所述缓存模块,用于将所述待存储片段加入缓存区;
第二判断模块,用于判断所述异步数据的待存储片段是否接收完毕,若没有接收完毕则触发第一返回模块,若接收完毕则触发第二存储模块;
所述第一返回模块,用于返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
所述第二存储模块,用于将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间;
其中,所述待接收序号的初始值为所述待存储片段的所述序号的最小值。
优选地,所述第二存储模块包括:
排序模块,用于将所述缓存区中所有的所述待存储片段按照所述序号由小到大的顺序进行排序;
第三判断模块,用于判断所述缓存区中最小的所述序号是否与所述待接收序号相同,若所述缓存区中最小的所述序号与所述待接收序号相同,则触发存储子模块;
所述存储子模块,用于将所述缓存区中最小的所述序号对应的所述待存储片段存储于所述存储空间;
释放模块,用于释放所述缓存区中最小的所述序号对应的所述待存储片段在所述缓存区中的空间并将所述待接收序号加一;
第四判断模块,用于判断所述缓存区是否已清空,若所述缓存区未清空,则触发第二返回模块;
所述第二返回模块,用于返回判断所述缓存区中最小的所述序号是否与所述待接收序号相同的步骤。
优选地,所述第二判断模块还用于:
若所述缓存区中最小的所述序号与所述待接收序号不同,则触发报错模块;
该异步数据存储装置还包括:
所述报错模块,用于进行报错。
为解决上述技术问题,本发明还提供了一种异步数据存储设备,应用于分布式对象存储系统,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上任一项所述异步数据存储方法的步骤。
为解决上述技术问题,本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上任一项所述异步数据存储方法的步骤。
本发明提供了一种异步数据存储方法,本申请中首先可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,将序号不符合正确顺序的待存储片段加入缓存区,最后再将缓存区中所有待存储片段按照序号由小到大的顺序存储于存储空间,首先能够实现分布式对象存储系统对接NFS时的异步数据存储功能,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量。
本发明还提供了一种异步数据存储装置、设备及计算机可读存储介质,具有如上异步数据存储方法相同的有益效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对现有技术和实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的一种异步数据存储方法的流程示意图;
图2为本发明提供的一种异步数据存储装置的结构示意图;
图3为本发明提供的一种异步数据存储设备的结构示意图。
具体实施方式
本发明的核心是提供一种异步数据存储方法,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量;本发明的另一核心是提供一种异步数据存储装置、设备及计算机可读存储介质,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,图1为本发明提供的一种异步数据存储方法的流程示意图,应用于分布式对象存储系统,包括:
步骤S1:判断网络文件系统NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同;
具体的,NFS客户端为具有NFS系统的客户端,其可以通过NFS系统将异步数据分别多个片段来进行发送,由于是异步发送,分布式对象存储系统接收到的待存储片段的序号很有可能不是按由小到大的正确顺序排列的,因此存储异步数据的关键在于要将乱序的待存储片段按照由小到大的顺序存储至存储空间,以便存储得到正确顺序的完整的异步数据。
具体的,待接收序号的初始值可以为异步数据的待存储片段序号中的最小值,例如异步数据的待存储片段的序号总共包括0到100,那么待接收序号的初始值可以为零。
其中,本发明实施例的判断可以触发后续步骤,以便将待存储片段按照序号由小到大的顺序存储至存储空间。
步骤S2:若相同,则将待存储片段存储于存储空间,并将待接收序号加一;
具体的,本发明实施例判断的时候便要判定NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同,如果相同,那么则代表当前接收到的待存储片段是分布式对象存储系统当前需要进行存储的待存储片段,例如在首次判断的时候可以判断当前接收到的待存储片段的序号是否为零(因为首次判断的时候需要存储的是序号为零的待存储片段),如果两者一致的话,那么便可以直接将待存储片段存储于存储空间,此种情况下按照正确的序号由小到大的顺序存储了数据,有利于最终存储得到正确完整的异步数据。
其中,由于已经将当前需要存储的序号对应的待存储片段存储至存储空间,那么下一个需要存储的待存储片段的序号必然要大一位,因此可以将待接收序号加一,以便进行下一个待存储片段的存储。
步骤S3:若不同,则将待存储片段加入缓存区;
具体的,如果待存储片段的序号与待接收序号不同,那么就说明待存储片段并不是在正确存储顺序下应该存储的片段,此时不应该将待存储片段存储于存储空间,因此本发明实施例可以将其加入缓存区,以便后续步骤中重新进行处理。
步骤S4:判断异步数据的待存储片段是否接收完毕;
具体的,在前述步骤中每进行一个待存储片段的处理之后,都有可能将异步数据的待存储片段全部接收完成,因此本发明实施例中可以进行判断,以便触发后续流程。
步骤S5:若没有接收完毕,则返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
具体的,在前述步骤中每进行一个待存储片段的处理之后,都有可能将异步数据的待存储片段全部接收完成,若接收完成那么便可以结束接收过程,因此本发明实施例中可以进行判断,如果没有接收完毕,那么可以返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤,以便接收到所有的待存储片段。
步骤S6:若接收完毕,则将缓存区中所有待存储片段按照序号由小到大的顺序依次存储于存储空间;
其中,待接收序号的初始值为待存储片段的序号的最小值。
具体的,如果接收完毕之后,除非之前接收到的待存储片段的顺序正好是按照序号由小到大,否则缓存区中肯定缓存有异步数据的一些待存储片段,因此为了存储得到完整的异步数据,需要对缓存区中的待存储片段进行处理,可以将缓存区中的一个或多个待存储片段按照序号由小到大的顺序依次存储于存储空间进行落盘,因此便可以将异步数据的所有待存储片段按照序号由小到大的顺序存储至存储空间,完成了对异步数据的存储过程。
本发明提供了一种异步数据存储方法,本申请中首先可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,将序号不符合正确顺序的待存储片段加入缓存区,最后再将缓存区中所有待存储片段按照序号由小到大的顺序存储于存储空间,首先能够实现分布式对象存储系统对接NFS时的异步数据存储功能,使得客户端设备可以通过发送异步数据(传输速度快于同步数据)的方式存储数据,提高了数据传输速度,而且可以通过序号对比的方法,将符合正确顺序的待存储片段直接存储于存储空间,减小了对于缓存区的占用量。
在上述实施例的基础上:
作为一种优选的实施例,将缓存区中所有待存储片段按照序号由小到大的顺序依次存储于存储空间具体为:
将缓存区中所有的待存储片段按照序号由小到大的顺序进行排序;
具体的,在处理缓存区中的待存储片段的时候,可以先将缓存区中的所有待存储片段按照序号由小到大的顺序进行排序,以便后续步骤进行由小到大的处理。
判断缓存区中最小的序号是否与待接收序号相同;
具体的,在进行待存储片段的存储过程中,依然可以采用与之前相同的序号判断方法,即判断缓存区中最小的序号是否与待接收序号相同,以便触发后续步骤中将缓存区中序号正确的待存储片段进行存储的步骤。
若缓存区中最小的序号与待接收序号相同,则将缓存区中最小的序号对应的待存储片段存储于存储空间;
其中,若缓存区中具有待存储片段,那么异步数据的待存储片段必定没有存储完成,此时的待接收序号(也即需要存储的待存储片段的序号)理论上应该以缓存区中最小的序号相同,若两者相同,那么便可以将缓存区中最小的序号对应的待存储片段存储于存储空间。
释放缓存区中最小的序号对应的待存储片段在缓存区中的空间并将待接收序号加一;
具体的,由于已经将最小序号的待存储片段存储至存储空间,此时可以释放其所占据的缓存空间,而且为了进行下一个序号的待存储片段的存储,可以将待接收信号加一。
判断缓存区是否已清空;
若缓存区未清空,则返回判断缓存区中最小的序号是否与待接收序号相同的步骤。
具体的,在处理完一个缓存区的待存储片段后可以判断缓存区是否已清空,如果未清空,那么可以返回判断缓存区中最小的序号是否与待接收序号相同的步骤,以便完成整个异步数据的存储过程。
作为一种优选的实施例,判断缓存区中最小的序号是否与待接收序号相同之后,判断缓存区是否已清空之前,该异步数据存储方法还包括:
若缓存区中最小的序号与待接收序号不同,则进行报错。
具体的,如果缓存区中最小的序号与待接收序号不同那么表示可能缺失了一个待存储片段,此时可以通过报错的方式告知外界存在片段缺失的问题,以便及时进行检修处理。
作为一种优选的实施例,判断缓存区是否已清空之后,该异步数据存储方法还包括:
若缓存区已清空,则结束数据存储流程。
具体的,在缓存区已清空时,则可以大概率表示异步数据的存储工作已经完成,便可以结束数据存储流程,并将存储空间内的所有待存储片段拼接为完整的异步数据。
作为一种优选的实施例,若缓存区中最小的序号与待接收序号不同,则进行报错具体为:
若缓存区中最小的序号与待接收序号不同,则控制显示器显示缺失的待存储片段的序号。
具体的,通过显示器显示确实的待存储片段的序号可以有利于工作人员快速得知确实的具体片段,以便工作人员进行针对性地检查处理,可以提高工作效率。
当然,除了控制显示器显示缺失的待存储片段的序号外,进行报错还可以为其他多种具体形式,本发明实施例在此不做限定。
请参考图2,图2为本发明提供的一种异步数据存储装置的结构示意图,应用于分布式对象存储系统,包括:
第一判断模块1,用于判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同,若相同,则触发第一存储模块2,若不同,则触发缓存模块3;
第一存储模块2,用于将待存储片段存储于存储空间,并将待接收序号加一;
缓存模块3,用于将待存储片段加入缓存区;
第二判断模块4,用于判断异步数据的待存储片段是否接收完毕,若没有接收完毕则触发第一返回模块5,若接收完毕则触发第二存储模块6;
第一返回模块5,用于返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
第二存储模块6,用于将缓存区中所有待存储片段按照序号由小到大的顺序依次存储于存储空间;
其中,待接收序号的初始值为待存储片段的序号的最小值。
作为一种优选的实施例,第二存储模块6包括:
排序模块,用于将缓存区中所有的待存储片段按照序号由小到大的顺序进行排序;
第三判断模块,用于判断缓存区中最小的序号是否与待接收序号相同,若缓存区中最小的序号与待接收序号相同,则触发存储子模块;
存储子模块,用于将缓存区中最小的序号对应的待存储片段存储于存储空间;
释放模块,用于释放缓存区中最小的序号对应的待存储片段在缓存区中的空间并将待接收序号加一;
第四判断模块,用于判断缓存区是否已清空,若缓存区未清空,则触发第二返回模块;
第二返回模块,用于返回判断缓存区中最小的序号是否与待接收序号相同的步骤。
作为一种优选的实施例,第二判断模块4还用于:
若缓存区中最小的序号与待接收序号不同,则触发报错模块;
该异步数据存储装置还包括:
报错模块,用于进行报错。
对于本发明实施例提供的异步数据存储装置的介绍请参照前述的异步数据存储方法的实施例,本发明实施例在此不再赘述。
请参考图3,图3为本发明提供的一种异步数据存储设备的结构示意图,应用于分布式对象存储系统,包括:
存储器7,用于存储计算机程序;
处理器8,用于执行计算机程序时实现如上任一项异步数据存储方法的步骤。
对于本发明实施例提供的异步数据存储设备的介绍请参照前述的异步数据存储方法的实施例,本发明实施例在此不再赘述。
本发明还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现如上任一项异步数据存储方法的步骤。
对于本发明实施例提供的计算机可读存储介质的介绍请参照前述的异步数据存储方法的实施例,本发明实施例在此不再赘述。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其他实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种异步数据存储方法,应用于分布式对象存储系统,其特征在于,包括:
判断网络文件系统NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同;
若相同,则将所述待存储片段存储于存储空间,并将所述待接收序号加一;
若不同,则将所述待存储片段加入缓存区;
判断所述异步数据的待存储片段是否接收完毕;
若没有接收完毕,则返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
若接收完毕,则将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间;
其中,所述待接收序号的初始值为所述待存储片段的所述序号的最小值。
2.根据权利要求1所述的异步数据存储方法,其特征在于,所述将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间具体为:
将所述缓存区中所有的所述待存储片段按照所述序号由小到大的顺序进行排序;
判断所述缓存区中最小的所述序号是否与所述待接收序号相同;
若所述缓存区中最小的所述序号与所述待接收序号相同,则将所述缓存区中最小的所述序号对应的所述待存储片段存储于所述存储空间;
释放所述缓存区中最小的所述序号对应的所述待存储片段在所述缓存区中的空间并将所述待接收序号加一;
判断所述缓存区是否已清空;
若所述缓存区未清空,则返回判断所述缓存区中最小的所述序号是否与所述待接收序号相同的步骤。
3.根据权利要求2所述的异步数据存储方法,其特征在于,所述判断所述缓存区中最小的所述序号是否与所述待接收序号相同之后,所述判断所述缓存区是否已清空之前,该异步数据存储方法还包括:
若所述缓存区中最小的所述序号与所述待接收序号不同,则进行报错。
4.根据权利要求3所述的异步数据存储方法,其特征在于,所述判断所述缓存区是否已清空之后,该异步数据存储方法还包括:
若所述缓存区已清空,则结束数据存储流程。
5.根据权利要求3所述的异步数据存储方法,其特征在于,所述若所述缓存区中最小的所述序号与所述待接收序号不同,则进行报错具体为:
若所述缓存区中最小的所述序号与所述待接收序号不同,则控制显示器显示缺失的所述待存储片段的序号。
6.一种异步数据存储装置,应用于分布式对象存储系统,其特征在于,包括:
第一判断模块,用于判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同,若相同,则触发第一存储模块,若不同,则触发缓存模块;
所述第一存储模块,用于将所述待存储片段存储于存储空间,并将所述待接收序号加一;
所述缓存模块,用于将所述待存储片段加入缓存区;
第二判断模块,用于判断所述异步数据的待存储片段是否接收完毕,若没有接收完毕则触发第一返回模块,若接收完毕则触发第二存储模块;
所述第一返回模块,用于返回判断NFS客户端设备当前发送的异步数据的待存储片段的序号是否与待接收序号相同的步骤;
所述第二存储模块,用于将所述缓存区中所有待存储片段按照所述序号由小到大的顺序依次存储于所述存储空间;
其中,所述待接收序号的初始值为所述待存储片段的所述序号的最小值。
7.根据权利要求6所述的异步数据存储装置,其特征在于,所述第二存储模块包括:
排序模块,用于将所述缓存区中所有的所述待存储片段按照所述序号由小到大的顺序进行排序;
第三判断模块,用于判断所述缓存区中最小的所述序号是否与所述待接收序号相同,若所述缓存区中最小的所述序号与所述待接收序号相同,则触发存储子模块;
所述存储子模块,用于将所述缓存区中最小的所述序号对应的所述待存储片段存储于所述存储空间;
释放模块,用于释放所述缓存区中最小的所述序号对应的所述待存储片段在所述缓存区中的空间并将所述待接收序号加一;
第四判断模块,用于判断所述缓存区是否已清空,若所述缓存区未清空,则触发第二返回模块;
所述第二返回模块,用于返回判断所述缓存区中最小的所述序号是否与所述待接收序号相同的步骤。
8.根据权利要求7所述的异步数据存储装置,其特征在于,所述第二判断模块还用于:
若所述缓存区中最小的所述序号与所述待接收序号不同,则触发报错模块;
该异步数据存储装置还包括:
所述报错模块,用于进行报错。
9.一种异步数据存储设备,应用于分布式对象存储系统,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至5任一项所述异步数据存储方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述异步数据存储方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911398162.4A CN111159138B (zh) | 2019-12-30 | 2019-12-30 | 一种异步数据存储方法、装置、设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911398162.4A CN111159138B (zh) | 2019-12-30 | 2019-12-30 | 一种异步数据存储方法、装置、设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111159138A true CN111159138A (zh) | 2020-05-15 |
CN111159138B CN111159138B (zh) | 2022-06-10 |
Family
ID=70559269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911398162.4A Active CN111159138B (zh) | 2019-12-30 | 2019-12-30 | 一种异步数据存储方法、装置、设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111159138B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111930675A (zh) * | 2020-08-13 | 2020-11-13 | 山东云海国创云计算装备产业创新中心有限公司 | 一种数据传输管理方法、系统及装置 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120317353A1 (en) * | 2011-06-13 | 2012-12-13 | XtremlO Ltd. | Replication techniques with content addressable storage |
US20150261453A1 (en) * | 2014-03-11 | 2015-09-17 | International Business Machines Corporation | Grouping of tracks for copy source to target destage on global mirror secondary |
CN105406999A (zh) * | 2015-11-20 | 2016-03-16 | 福建星网锐捷安防科技有限公司 | 一对多数据分发方法和分发设备 |
CN105933380A (zh) * | 2016-04-01 | 2016-09-07 | 宇龙计算机通信科技(深圳)有限公司 | 一种数据传输的方法、装置及终端 |
CN106657170A (zh) * | 2015-10-28 | 2017-05-10 | 阿里巴巴集团控股有限公司 | 一种数据同步方法及装置 |
US9846622B1 (en) * | 2015-12-31 | 2017-12-19 | Acronis International Gmbh | Parallel computer system recovery |
CN109309712A (zh) * | 2018-09-07 | 2019-02-05 | 平安科技(深圳)有限公司 | 基于接口异步调用的数据传输方法、服务器及存储介质 |
CN109344164A (zh) * | 2018-10-31 | 2019-02-15 | 迈普通信技术股份有限公司 | 数据存储方法及装置 |
CN110069217A (zh) * | 2019-04-10 | 2019-07-30 | 新华三信息安全技术有限公司 | 一种数据存储方法及装置 |
CN110569748A (zh) * | 2019-08-21 | 2019-12-13 | 杭州指安科技股份有限公司 | 一种指纹识别系统中快速反馈比对结果的电子装置及方法 |
-
2019
- 2019-12-30 CN CN201911398162.4A patent/CN111159138B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120317353A1 (en) * | 2011-06-13 | 2012-12-13 | XtremlO Ltd. | Replication techniques with content addressable storage |
US20150261453A1 (en) * | 2014-03-11 | 2015-09-17 | International Business Machines Corporation | Grouping of tracks for copy source to target destage on global mirror secondary |
CN106657170A (zh) * | 2015-10-28 | 2017-05-10 | 阿里巴巴集团控股有限公司 | 一种数据同步方法及装置 |
CN105406999A (zh) * | 2015-11-20 | 2016-03-16 | 福建星网锐捷安防科技有限公司 | 一对多数据分发方法和分发设备 |
US9846622B1 (en) * | 2015-12-31 | 2017-12-19 | Acronis International Gmbh | Parallel computer system recovery |
CN105933380A (zh) * | 2016-04-01 | 2016-09-07 | 宇龙计算机通信科技(深圳)有限公司 | 一种数据传输的方法、装置及终端 |
CN109309712A (zh) * | 2018-09-07 | 2019-02-05 | 平安科技(深圳)有限公司 | 基于接口异步调用的数据传输方法、服务器及存储介质 |
CN109344164A (zh) * | 2018-10-31 | 2019-02-15 | 迈普通信技术股份有限公司 | 数据存储方法及装置 |
CN110069217A (zh) * | 2019-04-10 | 2019-07-30 | 新华三信息安全技术有限公司 | 一种数据存储方法及装置 |
CN110569748A (zh) * | 2019-08-21 | 2019-12-13 | 杭州指安科技股份有限公司 | 一种指纹识别系统中快速反馈比对结果的电子装置及方法 |
Non-Patent Citations (2)
Title |
---|
MATTEO FAVARO ET AL.: "Development of a farm-oriented benchmark tool for distributed filesystem", 《2014 INTERNATIONAL CONFERENCE ON HIGH PERFORMANCE COMPUTING & SIMULATION (HPCS)》 * |
阳世荣等: "基于实时数据同步交换技术的统一潮流控制器监控系统", 《电网技术》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111930675A (zh) * | 2020-08-13 | 2020-11-13 | 山东云海国创云计算装备产业创新中心有限公司 | 一种数据传输管理方法、系统及装置 |
CN111930675B (zh) * | 2020-08-13 | 2022-07-05 | 山东云海国创云计算装备产业创新中心有限公司 | 一种数据传输管理方法、系统及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111159138B (zh) | 2022-06-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109741060B (zh) | 信息查询系统、方法、装置、电子设备及存储介质 | |
CN110032438B (zh) | 延时任务执行方法、装置及电子设备 | |
CN102479207B (zh) | 一种信息搜索的方法、系统及信息搜索设备 | |
CN104601696B (zh) | 服务处理方法、服务调用系统、装置和系统 | |
CN103051717A (zh) | 一种http请求处理的方法、装置和设备 | |
CN111427859B (zh) | 一种消息处理方法、装置、电子设备及存储介质 | |
CN107992271B (zh) | 数据预读方法、装置、设备及计算机可读存储介质 | |
CN110247736B (zh) | 一种数据传输方法及装置 | |
CN102185740A (zh) | 心跳检测方法及网络设备 | |
CN106570097A (zh) | 序列生成方法及装置 | |
CN111858586B (zh) | 一种数据处理的方法和装置 | |
CN111159138B (zh) | 一种异步数据存储方法、装置、设备及可读存储介质 | |
CN104639646A (zh) | 用于处理用户请求的方法和设备 | |
CN113703715B (zh) | 一种正则表达式匹配方法、装置、fpga及介质 | |
CN111159131A (zh) | 性能优化方法、装置、设备及计算机可读存储介质 | |
CN103051742A (zh) | Ip地址属性确定方法、页面处理方法、相关设备及系统 | |
CN111913815A (zh) | 调用请求的处理方法、装置、电子设备及可读存储介质 | |
CN115858668A (zh) | 分布式事务处理方法、装置、电子装置及存储介质 | |
CN109660589B (zh) | 请求处理方法及装置、电子设备 | |
CN105144099A (zh) | 通信系统 | |
CN116614495A (zh) | 数据上传方法、装置、设备、存储介质及程序产品 | |
CN108829735B (zh) | 并行执行计划的同步方法、装置、服务器及存储介质 | |
CN108062224B (zh) | 基于文件句柄的数据读写方法、装置及计算设备 | |
KR101674294B1 (ko) | 임의 접근 및 상태 접근이 가능한 자료구조 운용장치 및 그 운용 방법 | |
CN115766696A (zh) | 一种文件上传方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |