CN116795537A - 一种数据存储方法、服务器及存储介质 - Google Patents
一种数据存储方法、服务器及存储介质 Download PDFInfo
- Publication number
- CN116795537A CN116795537A CN202310450369.1A CN202310450369A CN116795537A CN 116795537 A CN116795537 A CN 116795537A CN 202310450369 A CN202310450369 A CN 202310450369A CN 116795537 A CN116795537 A CN 116795537A
- Authority
- CN
- China
- Prior art keywords
- server
- data
- proprietary
- partition
- public
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013500 data storage Methods 0.000 title claims abstract description 38
- 238000012545 processing Methods 0.000 claims abstract description 26
- 239000012634 fragment Substances 0.000 claims abstract description 23
- 238000005192 partition Methods 0.000 claims description 116
- 238000004590 computer program Methods 0.000 claims description 17
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
- G06F3/0641—De-duplication techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0644—Management of space entities, e.g. partitions, extents, pools
Abstract
本申请提供了一种数据存储方法、服务器及存储介质,涉及数据存储领域,用于节省备份数据所占用的存储空间,提高存储资源的利用率。方法主要包括:接收用户发送的数据处理请求;确定与业务标识对应的专有服务器,并在专有服务器中对目标数据执行操作指令;并将专有服务器的操作日志记录到日志服务器中;若待存储数据包含专有数据,则将在专有服务器中执行的专有数据执行结果存储到公共服务器对应的分片上,公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;当业务标识对应的专有服务器无法使用时,从日志服务器中获取业务标识对应的专有服务器的操作日志,根据获取的操作日志对公共服务器中对应的存储数据进行操作以得到备份服务器。
Description
技术领域
本申请涉及数据存储技术领域,尤其涉及一种数据存储方法、服务器及存储介质。
背景技术
随着信息时代的发展,网络中的业务量与日俱增,数据缓存已是实现业务处理过程中不可缺少的一部分。在业务处理过程中,通常是需要通过服务器集群,对业务相关的数据进行缓存。
目前,将业务处理过程中涉及的业务数据,实时缓存在同一个机房中的服务器集群中,一般是存储在该服务器集群的数据库中,以便于该业务处理过程中后续读取使用。然而,当该机房内任一用于存储该业务数据的服务器发生崩溃时,则调用该服务器对应的备用服务进行业务处理,而多个备用服务器势必造成存储资源浪费。
发明内容
本申请实施例提供一种数据存储方法、服务器及存储介质,用于节省备份数据所占用的存储空间,提高存储资源的利用率。
本发明实施例提供一种数据存储方法,应用于数据存储服务器,所述方法包括:
接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
本发明实施例提供一种数据存储服务器,所述服务器包括:
接收模块,用于接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定模块,用于确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
存储模块,用于若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
备份模块,用于当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述数据存储方法。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述数据存储方法。
一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时实现上述的数据存储方法。
本发明提供一种数据存储方法、服务器及存储介质,在接收到用户发送的数据处理请求后,首先确定与业务标识对应的专有服务器,并在专有服务器中对目标数据执行操作指令,然后将专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;若待存储数据包含专有数据,则将在专有服务器中执行的专有数据执行结果存储到公共服务器对应的分片上,当业务标识对应的专有服务器无法使用时,从日志服务器中获取业务标识对应的专有服务器的操作日志,根据获取的操作日志对公共服务器中对应的存储数据进行操作以得到备份服务器。与目前每个主服务器都配置对应一个备份服务器相比,本申请无需为每个主服务器配置一个备份服务器,本申请在某一个专有服务器无法正常使用时,基于日志服务器和公共服务器中的内容为专有服务器还原出对应的备份服务器,从而通过本申请可以节省备份数据所占用的存储空间,进而提高存储资源的利用率。
附图说明
图1为本申请提供的一种数据存储方法流程图;
图2为本申请提供的数据存储服务器的结构示意图;
图3为本申请提供的计算机设备的示意图。
具体实施方式
为了更好的理解上述技术方案,下面通过附图以及具体实施例对本申请实施例的技术方案做详细的说明,应当理解本申请实施例以及实施例中的具体特征是对本申请实施例技术方案的详细的说明,而不是对本申请技术方案的限定,在不冲突的情况下,本申请实施例以及实施例中的技术特征可以相互组合。
请参阅图1所示,为本发明实施例提供的一种数据存储方法,所述方法应用于数据存储服务器,用于执行步骤S101-步骤S104:
步骤S101,接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据。
其中,业务标识用于表示对应业务数据,如该业务标识可以用于指示用户处理的为物联网数据、企业数据、网络数据等,本实施对此不做具体限定。操作指令为用户想要对目标数据进行操作的指令,该指令具体可以为存储指令、查询指令、删除指令、添加指令、修改指令、更新指令等一种或多种形式的组合,目标数据包含专有数据和/或公共数据,专有数据也就是仅供对应业务标识使用的数据,公共数据可供多个种类业务标识使用的数据。
需要说明的是,本实施例中的目标数据可以为要进行操作的数据的本身,也可以是对应的数据标识,即根据数据标识找到对应的目标数据,然后对目标数据执行对应的操作指令。例如,目标数据为数据标识A1,通过数据标识A1可以确定对应的数据为公共数据,然后从公共数据对应的服务器中获取对应的目标数据,以此实现对目标数据执行对应的操作指令。
步骤S102,确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中。
其中,不同的业务标识对应有不同的专有服务器。所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志,该操作日志用于记录专有服务器的操作信息。
在本实施例中,若目标数据为专有数据,则直接该目标数据执行对应的操作指令,如将目标数据存储到专有服务器中,或对目标数据进行更新之后存储到专有服务器中;若目标服务器为公共数据,则从公共服务器中获取到对应的数据之后,对该数据执行相应的操作指令后存储到专有服务器中。
需要说明的是,若本实施例中的目标数据为公共数据,对公共数据进行操作并不影响在公共服务器中存储公共数据本身的内容,操作的内容仅影响专有服务器中对应的内容。
步骤S103,若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上。
其中,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果,该专有数据的操作结果为对专有数据的最新操作结果。例如,专有数据表为用户的专有数据,用户在10:00对专有数据表进行增加部分数据操作,在10:02对专有数据表又进行更新数据操作,在11:00对专有数据表进行删除部分数据操作,则当前公共服务器存储的是对专有数据表在11:00的操作结果,即专有数据表最近的操作结果。以此减少公共服务器存储的数据量。
在本实施例中,公共服务器上有多个分片,每个分片的大小可以固定的,也可以是依据专有服务器对应的数据量设置各个分片的大小,还可以依据不同时间各个专有服务器处理的数据量进行浮动设置,本实施例对此不做具体限定。
在本发明提供的一个可选实施例中,所述将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,包括:
步骤S1031,查询所述公共服务器中是否存在所述专有服务器对应分片。
步骤S1032A,若存在,则将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上。
步骤S1032B,若不存在,则在公共服务器上创建所述专有服务器对应的分片,并将专有服务器中执行的专有数据执行结果存储到公共服务器中所述专有服务器对应的分片上。
具体的,将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上,包括:在专有服务器对应的分片上确定是否存在用户对应的分区;若存在,则将专有服务器中执行的专有数据执行结果存储到对应分片中用户对应的分区上;若不存在,则在所述专有服务器对应的分片上创建所述用户对应的分区,并将所述专有服务器中执行的专有数据执行结果存储到对应分片中所述用户对应的分区上。
需要说明的是,本实施例中的分区隶属于分片中位置连续的存储空间,每个分区都对应存储一个用户的数据,该分区的大小可以固定设置,也可以依据不同的用户处理的数据量进行浮动设置。
进一步的,在专有服务器对应的分片上创建所述用户对应的分区之前,本实施例还可以包括:确定所述专有服务器对应的分片是否存在可创建所述分区的存储空间;若存在,则直接在所述专有服务器对应的分片上创建所述用户对应的分区;若不存在,则获取所述分片内各个用户对应的专有数据执行结果,根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间。其中,专有数据执行结果中携带有执行时间,以及专有数据的标识信息,该标识信息由于唯一标识专有数据。
在本发明提供的一个可选实施例中,所述根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间,包括:对各个分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或对当前时间距离所述执行时间超过预置数值各个分区内的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间。
具体的,本实施例可以通过下述公式确定将要删除的数据:
D=del(max(Ai));
Ai=Di+Di+1,i=(1,2,…,n)
其中,D为删除所占有存储空间最大的两个相邻分区内的可删除数据,Di为第i个分区内可删除数据所占用的空间大小,n为分区的数量,Ai为相邻两个分区可删除数据所占用的空间大小。需要说明的是,本实施中的可删除数据可通过上述方式确定,即组合内除了执行时间最新的其他执行时间的专有数据为可删除数据,或当前时间距离执行时间超过预置数值的分区内的专有数据为可删除数据。并且本实施在通过上述公式确定好可删除的数据之后,将第i个和第i+1个分区内可删除数据删除,之后由第i个和第i+1两个分区之间位置连续的存储空间作为创建分区的存储空间。本实施例中的Ai大于专有数据执行结果所占用的空间。
在本发明提供的另一个可选实施例中,根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间,包括:获取已使用存储空间最大的分区或未使用存储空间最大的分区;对已使用存储空间最大的分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或将未使用存储空间最大的分区内未使用的存储空间回收,以获得可在所述分片内创建所述分区的存储空间。
具体的,本实施例可以通过下述公式确定将要删除的数据:
Bi=del(max(Di))orAj=del(min(Dj))
i,j=(1,2,…,n)
其中,Bi用于表示将第i个分区(已使用存储空间最大的分区)组合内除了执行时间最新的其他执行时间的专有数据执行结果删除;Aj用于表示将第i个分区(未使用存储空间最大的分区)内未使用的存储空间回收,n为分区的数量。
步骤S104,当业务标识对应的专有服务器无法使用时,从日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对公共服务器中对应的存储数据进行操作以得到备份服务器。
在本发明提供的一个可选实施例中,所述从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器,包括:从所述公共服务器中获取所述业务标识对应专有服务器对应的专有数据执行结果,以及从所述公共服务器中获取所述业务标识对应专有服务器所涉及的公共数据;基于所述专有服务器的操作日志,对从所述公共服务器中的专有数据执行结果以及公共数据进行操作以得到备份服务器。
所述对从所述公共服务器中的专有数据执行结果以及公共数据进行操作以得到备份服务器之后,所述方法还包括:清空所述业务标识对应的专有服务器内存储的数据,以供该专有服务器被再次使用。
本发明实施例提供一种数据存储方法,在接收到用户发送的数据处理请求后,首先确定与业务标识对应的专有服务器,并在专有服务器中对目标数据执行操作指令,然后将专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;若待存储数据包含专有数据,则将在专有服务器中执行的专有数据执行结果存储到公共服务器对应的分片上,当业务标识对应的专有服务器无法使用时,从日志服务器中获取业务标识对应的专有服务器的操作日志,根据获取的操作日志对公共服务器中对应的存储数据进行操作以得到备份服务器。与目前每个主服务器都配置对应一个备份服务器相比,本申请无需为每个主服务器配置一个备份服务器,本申请在某一个专有服务器无法正常使用时,基于日志服务器和公共服务器中的内容为专有服务器还原出对应的备份服务器,从而通过本申请可以节省备份数据所占用的存储空间,进而提高存储资源的利用率。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种数据存储服务器,该数据存储服务器与上述实施例中数据存储方法一一对应。如图2所示,所述数据存储服务器各功能模块详细说明如下:
接收模块21,用于接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定模块22,用于确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
存储模块23,用于若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
备份模块24,用于当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
在本发明提供的一个可选实施例中,存储模块23,具体用于:
查询所述公共服务器中是否存在所述专有服务器对应分片;
若存在,则将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上;
若不存在,则在所述公共服务器上创建所述专有服务器对应的分片,并将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上。
在本发明提供的一个可选实施例中,存储模块23,具体用于:
在所述专有服务器对应的分片上确定是否存在所述用户对应的分区;
若存在,则将所述专有服务器中执行的专有数据执行结果存储到对应分片中所述用户对应的分区上;
若不存在,则在所述专有服务器对应的分片上创建所述用户对应的分区,并将所述专有服务器中执行的专有数据执行结果存储到对应分片中所述用户对应的分区上。
在本发明提供的一个可选实施例中,确定模块22,还用于确定所述专有服务器对应的分片是否存在可创建所述分区的存储空间;若存在,则直接在所述专有服务器对应的分片上创建所述用户对应的分区;若不存在,则获取所述分片内各个用户对应的专有数据执行结果,根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间。
在本发明提供的一个可选实施例中,确定模块22,具体用于:
对各个分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或
对当前时间距离所述执行时间超过预置数值各个分区内的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间。
在本发明提供的一个可选实施例中,确定模块22,具体用于:
获取已使用存储空间最大的分区或未使用存储空间最大的分区;
对已使用存储空间最大的分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或
将未使用存储空间最大的分区内未使用的存储空间回收,以获得可在所述分片内创建所述分区的存储空间。
在本发明提供的一个可选实施例中,备份模块24,具体用于:
从所述公共服务器中获取所述业务标识对应专有服务器对应的专有数据执行结果,以及从所述公共服务器中获取所述业务标识对应专有服务器所涉及的公共数据;
基于所述专有服务器的操作日志,对从所述公共服务器中的专有数据执行结果以及公共数据进行操作以得到备份服务器。
在本发明提供的一个可选实施例中,清空所述业务标识对应的专有服务器内存储的数据。
关于数据存储服务器的具体限定可以参见上文中对于数据存储方法的限定,在此不再赘述。上述设备中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图3所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据存储方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:
接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
在一个实施例中,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序被处理器执行实现以下步骤:
接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述数据存储服务器的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种数据存储方法,其特征在于,所述方法应用于数据存储服务器,所述方法包括:
接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
2.根据权利要求1所述的数据存储方法,其特征在于,所述将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,包括:
查询所述公共服务器中是否存在所述专有服务器对应分片;
若存在,则将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上;
若不存在,则在所述公共服务器上创建所述专有服务器对应的分片,并将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上。
3.根据权利要求2所述的数据存储方法,其特征在于,所述将所述专有服务器中执行的专有数据执行结果存储到所述公共服务器中所述专有服务器对应的分片上,包括:
在所述专有服务器对应的分片上确定是否存在所述用户对应的分区;
若存在,则将所述专有服务器中执行的专有数据执行结果存储到对应分片中所述用户对应的分区上;
若不存在,则在所述专有服务器对应的分片上创建所述用户对应的分区,并将所述专有服务器中执行的专有数据执行结果存储到对应分片中所述用户对应的分区上。
4.根据权利要求3所述的数据存储方法,其特征在于,所述在所述专有服务器对应的分片上创建所述用户对应的分区之前,所述方法还包括:
确定所述专有服务器对应的分片是否存在可创建所述分区的存储空间;
若存在,则直接在所述专有服务器对应的分片上创建所述用户对应的分区;
若不存在,则获取所述分片内各个用户对应的专有数据执行结果,根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间。
5.根据权利要求4所述的数据存储方法,其特征在于,所述根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间,包括:
对各个分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或
对当前时间距离所述执行时间超过预置数值各个分区内的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间。
6.根据权利要求4所述的数据存储方法,其特征在于,所述根据所述专有数据执行结果的执行时间以及执行的专有数据的标识,对所述分片内的数据进行删除以获得可在所述分片内创建所述分区的存储空间,包括:
获取已使用存储空间最大的分区或未使用存储空间最大的分区;
对已使用存储空间最大的分区内具有同一标识的专有数据进行组合,将所述组合内除了执行时间最新的其他执行时间的专有数据执行结果删除,以获得可在所述分片内创建所述分区的存储空间;或
将未使用存储空间最大的分区内未使用的存储空间回收,以获得可在所述分片内创建所述分区的存储空间。
7.根据权利要求1-6任一项所述的数据存储方法,其特征在于,所述从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器,包括:
从所述公共服务器中获取所述业务标识对应专有服务器对应的专有数据执行结果,以及从所述公共服务器中获取所述业务标识对应专有服务器所涉及的公共数据;
基于所述专有服务器的操作日志,对从所述公共服务器中的专有数据执行结果以及公共数据进行操作以得到备份服务器。
8.根据权利要求6所述的数据存储方法,其特征在于,所述对从所述公共服务器中的专有数据执行结果以及公共数据进行操作以得到备份服务器之后,所述方法还包括:
清空所述业务标识对应的专有服务器内存储的数据。
9.一种数据存储服务器,其特征在于,所述数据存储服务器包括:
接收模块,用于接收用户发送的数据处理请求,所述数据处理请求中包括业务标识、操作指令及其对应的目标数据;所述目标数据包含专有数据和/或公共数据;
确定模块,用于确定与所述业务标识对应的专有服务器,并在所述专有服务器中对所述目标数据执行所述操作指令;并将所述专有服务器的操作日志记录到日志服务器中,所述日志服务器中存储有各个业务标识对应的专有服务器的操作日志;
存储模块,用于若所述待存储数据包含专有数据,则将在所述专有服务器中执行的专有数据执行结果存储到所述公共服务器对应的分片上,所述公共服务器存储有公共数据以及所有用户对其专有数据的操作结果;
备份模块,用于当所述业务标识对应的专有服务器无法使用时,从所述日志服务器中获取所述业务标识对应的专有服务器的操作日志,根据获取的操作日志对所述公共服务器中对应的存储数据进行操作以得到备份服务器。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至8任一项所述的数据存储方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310450369.1A CN116795537A (zh) | 2023-04-24 | 2023-04-24 | 一种数据存储方法、服务器及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310450369.1A CN116795537A (zh) | 2023-04-24 | 2023-04-24 | 一种数据存储方法、服务器及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116795537A true CN116795537A (zh) | 2023-09-22 |
Family
ID=88039211
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310450369.1A Pending CN116795537A (zh) | 2023-04-24 | 2023-04-24 | 一种数据存储方法、服务器及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116795537A (zh) |
-
2023
- 2023-04-24 CN CN202310450369.1A patent/CN116795537A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11327799B2 (en) | Dynamic allocation of worker nodes for distributed replication | |
US11474972B2 (en) | Metadata query method and apparatus | |
US11003625B2 (en) | Method and apparatus for operating on file | |
CN109460252B (zh) | 基于git的配置文件处理方法、装置和计算机设备 | |
CN112632375B (zh) | 会话信息处理方法、服务器及存储介质 | |
CN111475483A (zh) | 数据库迁移方法、装置及计算设备 | |
CN111767297B (zh) | 大数据处理方法、装置、设备及介质 | |
CN114791907B (zh) | 一种多租户共享数据的处理方法和系统 | |
CN112100152A (zh) | 业务数据处理方法、系统、服务器和可读存储介质 | |
CN108984754B (zh) | 客户信息更新方法、装置、计算机设备及存储介质 | |
CN112650729B (zh) | 一种分布式文件系统的权限管理方法、系统以及存储介质 | |
CN111708763B (zh) | 分片集群的数据迁移方法、装置和分片集群系统 | |
CN111382142B (zh) | 数据库的操作方法、服务器和计算机存储介质 | |
CN116795537A (zh) | 一种数据存储方法、服务器及存储介质 | |
CN107422991B (zh) | 一种存储策略管理系统 | |
CN115934354A (zh) | 在线存储方法和装置 | |
CN115357779A (zh) | 一种数据处理方法、装置、系统、电子设备及存储介质 | |
CN108173892B (zh) | 云端镜像操作方法和装置 | |
CN112000648B (zh) | 数据清除方法、装置、计算机设备和存储介质 | |
CN114528260A (zh) | 文件访问请求的处理方法、电子设备及计算机程序产品 | |
CN113656100A (zh) | 接口切换方法、装置、电子装置及计算机程序产品 | |
CN112800123A (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
CN112783866A (zh) | 数据读取方法、装置、计算机设备和存储介质 | |
CN117075823B (zh) | 对象查找方法、系统、电子设备及存储介质 | |
CN112989147A (zh) | 数据信息的推送方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |