CN109933289B - 一种存储副本部署方法、系统及电子设备和存储介质 - Google Patents

一种存储副本部署方法、系统及电子设备和存储介质 Download PDF

Info

Publication number
CN109933289B
CN109933289B CN201910198477.8A CN201910198477A CN109933289B CN 109933289 B CN109933289 B CN 109933289B CN 201910198477 A CN201910198477 A CN 201910198477A CN 109933289 B CN109933289 B CN 109933289B
Authority
CN
China
Prior art keywords
storage
node
pulling
target file
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910198477.8A
Other languages
English (en)
Other versions
CN109933289A (zh
Inventor
王立新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Onething Technology Co Ltd
Original Assignee
Shenzhen Onething Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Onething Technology Co Ltd filed Critical Shenzhen Onething Technology Co Ltd
Priority to CN201910198477.8A priority Critical patent/CN109933289B/zh
Publication of CN109933289A publication Critical patent/CN109933289A/zh
Application granted granted Critical
Publication of CN109933289B publication Critical patent/CN109933289B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本申请公开了一种存储副本部署方法、系统、一种存储副本拉取方法及一种电子设备和计算机可读存储介质,该存储副本部署方法包括:获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过定位技术获得;确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。本申请提供的存储副本部署方法,通过定位技术获取节点的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。

Description

一种存储副本部署方法、系统及电子设备和存储介质
技术领域
本申请涉及存储技术领域,更具体地说,涉及一种存储副本部署方法、系统、一种存储副本拉取方法及一种电子设备和一种计算机可读存储介质。
背景技术
在分布式存储系统中,对于存储副本的区域控制,大部分基于IP地址实现,即根据节点的IP地址(中文全称:互联网协议地址,英文全称:Internet Protocol Address)粗略查询到该节点的地理位置,这样就可以把数据副本部署到指定的区域。例如,需要在山东部署100份存储副本,会根据IP地址查询到100个山东区域的节点,然后部署数据。
基于IP地址区域副本控制方法是从IP数据库查询地理位置,由于IP数据库是长期维护积累的数据库,不够准确,导致区域副本控制的准确度较低。
因此,如何提高区域副本控制的准确度是本领域技术人员需要解决的技术问题。
发明内容
本申请的目的在于提供一种存储副本部署方法、系统、一种存储副本拉取方法及一种电子设备和一种计算机可读存储介质,提高了区域副本控制的准确度。
为实现上述目的,本申请提供了一种存储副本部署方法,包括:
获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过定位技术获得;
确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
其中,所述确定每个所述区域中目标文件的副本数量,包括:
获取每个所述区域内所述目标文件的请求热度,并根据所述请求热度确定每个所述区域中所述目标文件的副本数量;其中,所述副本数量与所述请求热度呈正相关。
其中,将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中,包括:
向每个所述区域中的每个所述存储节点发送拉取指令,以便每个所述存储节点根据拉取位置确定方法确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件;
其中,所述拉取位置确定方法包括:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
其中,将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中,包括:
根据拉取位置确定方法确定每个所述区域中的每个存储节点拉取所述目标文件的拉取位置,以便每个所述存储节点从所述拉取位置拉取所述目标文件;
其中,所述拉取位置确定方法包括:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
其中,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置,包括:
将与所述存储节点的位置距离最近的当前存储位置确定为所述拉取位置。
其中,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置,包括:
判断所述当前存储位置中是否包括节点;
若包括,则判断所述当前存储位置中是否包括与所述存储节点属于同区域的节点;若是,则在所述当前存储位置中与所述存储节点属于同区域的节点中确定所述拉取位置;若否,则在所述当前存储位置中的节点中确定所述拉取位置;
若不包括,则将所述存储服务器确定为所述拉取位置。
其中,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置之后,还包括:
在所述存储节点和对应的拉取位置之间确定中转节点,以便所述所述存储节点通过所述中转节点从所述拉取位置拉取所述目标文件。
为实现上述目的,本申请提供了一种存储副本拉取方法,应用于上述存储副本部署方法中的存储节点,包括:
通过定位技术获取自身的位置信息,并向服务器发送所述位置信息,以便所述服务器根据所述位置信息和预设的划分精度将所述节点划分至对应区域内,并确定所述区域的目标文件的副本数量;
当所述节点被确定为所述目标文件的存储节点时,确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件。
其中,所述确定目标文件的拉取位置,包括:
接收拉取命令,根据所述拉取命令确定拉取所述目标文件的拉取位置。
其中,所述确定目标文件的拉取位置,包括:
获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点自身的位置信息确定拉取所述目标文件的拉取位置。
其中,若所述节点设备具体为手机,则所述通过定位技术获取自身的位置信息,包括:
通过GPS定位技术获取自身的位置信息。
为实现上述目的,本申请提供了一种电子设备,所述电子设备包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的存储副本部署程序,所述存储副本部署程序被所述处理器执行时实现如上述存储副本部署方法的步骤。
为实现上述目的,本申请提供了一种存储副本部署系统,包括:
获取模块,用于获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过定位技术获得;
确定模块,用于确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
部署模块,用于将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
为实现上述目的,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有存储副本部署程序,所述存储副本部署程序被处理器执行时实现如上述存储副本部署方法的步骤。
为实现上述目的,本申请提供了一种计算机程序产品,包括计算机指令,当其在计算机上运行时,使得计算机可以执行上述任一项所述存储副本部署方法。
通过以上方案可知,本申请提供的一种存储副本部署方法,包括:获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过定位技术获得;确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
本申请提供的存储副本部署方法,通过定位技术获取节点的位置信息,在各区域部署对应数量的存储副本。利用定位技术获取的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。本申请还公开了一种存储副本拉取方法、一种存储副本部署系统及一种电子设备和一种计算机可读存储介质,同样能实现上述技术效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种存储副本部署方法的流程图;
图2为区域的副本数量与该区域内目标文件的请求热度的关系示意图;
图3为对于由控制器确定每个区域内每个存储节点的拉取位置的方案图1中S103的步骤的细化流程示意图;
图4为图3中S32的步骤的细化流程示意图;
图5为本申请实施例公开的一种存储副本拉取方法的流程图;
图6为本申请实施例公开的一种存储副本部署系统的结构图;
图7为本申请实施例公开的一种电子设备的结构图;
图8为本申请实施例公开的另一种电子设备的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在本发明中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
在现有技术中,通过IP数据库查询地理位置,进行区域副本控制,由于IP数据库是长期维护积累的数据库,准确度较低。因此,在本申请中,通过定位技术获取节点的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。
本申请实施例公开了一种存储副本部署方法,提高了区域副本控制的准确度。
参见图1,本申请实施例公开的一种存储副本部署方法的流程图,如图1所示,包括:
S101:获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过定位技术获得;
本实施例的执行主体为区域副本控制的控制器,首先获取所有节点设备的位置信息,该位置信息为节点设备通过定位技术获取的,此处不对具体的定位技术进行限定,例如,GPS(中文全称:全球定位系统,英文全称:GlobalPositioning System),是一种具有全方位、全天候、全时段、高精度的卫星导航系统,能提供低成本、高精度的三维位置、速度和精确定时等导航信息。通过GPS技术获取所有节点的位置信息,精度和准确度远远高于通过IP查询获得的位置信息。在本步骤中,按照各节点的位置信息将其划分为不同的区域,划分精度可以由用户进行设定,例如省或市等。
S102:确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
在具体实施中,需要对目标文件进行区域副本控制时,首先确定每个区域中该目标文件需要部署的副本数量,再根据区域内目标文件的副本数量确定该目标文件的存储节点,存储节点需要从其对于的拉取位置拉取目标文件。对于每个区域的副本数量,用户可以直接进行设置,也可以根据影响副本数量的因素设定相应的计算公式,由控制器自动计算。
本实施例不对副本数量的影响因素进行限定,优选的,该影响因素可以为该区域内目标文件的请求热度,即本步骤可以包括获取每个所述区域内所述目标文件的请求热度,并根据所述请求热度确定每个所述区域中所述目标文件的副本数量;其中,所述副本数量与所述请求热度呈正相关。例如,若目标文件为某部电视剧,在河南热播,那么就在河南部署更多的该电视剧的副本。如图2所示,区域A的请求热度大于区域B,因此,区域A的副本数量大于区域B(图中阴影的节点为部署目标文件的节点)。
S103:将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
在本步骤中,在每个区域相应副本数量的节点中部署目标文件。例如,步骤S101中的划分精度为省,山东省对应的副本数量为100,即在属于山东区域的节点中选择100个节点,部署该目标文件。需要说明的是,对于每个节点中目标文件的部署方式本实施例不进行具体限定,即本实施例不对每个节点拉取目标文件的拉取位置进行限定。同样,本实施例也不对该拉取位置的确定方式进行限定,可以由控制器确定每个区域内每个存储节点的拉取位置,也可以由每个存储节点自身确定拉取位置。
对于由控制器确定每个区域内每个存储节点的拉取位置的方案,本步骤包括:根据拉取位置确定方法确定每个所述区域中的每个存储节点拉取所述目标文件的拉取位置,以便每个所述存储节点从所述拉取位置拉取所述目标文件。在具体实施中,由控制器确定每个存储节点对应的拉取位置,并将该拉取位置发送至对应的存储节点,存储节点根据接收到的拉取位置拉取目标文件。
对于由每个存储节点自身确定拉取位置的方案,本步骤可以包括:向每个所述区域中的每个所述存储节点发送拉取指令,以便每个所述存储节点根据拉取位置确定方法确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件。在具体实施中,当步骤S102确定了每个区域的存储节点后,向每个存储节点发送拉取命令,存储节点接收到该拉取命令后,通过拉取位置确定方法确定拉取位置,并从该拉取位置拉取目标文件。
本申请实施例提供的存储副本部署方法,通过定位技术获取节点的位置信息,在各区域部署对应数量的存储副本。利用定位技术获取的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。
优选的,上一实施例的拉取位置确定方法具体为:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
对于由控制器确定每个区域内每个存储节点的拉取位置的方案,控制器依此确定每个区域中的每个需要拉取目标文件的存储节点的拉取位置。即如图3所示,步骤S103可以包括:
S31:确定目标区域,并从所述目标区域的存储节点中选取目标节点;其中,所述存储节点为根据所述副本数量确定的所述目标区域中需要拉取所述目标文件的节点;
S32:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述目标节点的位置信息确定所述拉取位置,以便所述目标节点从所述拉取位置拉取所述目标文件;其中,所述拉取位置包括存储服务器和节点;
S33:判断所述目标区域中的存储节点是否全部拉取完成;若是,则进入S34;若否,则从所述目标区域的存储节点中重新选取目标节点并进入S32;
S34:判断所述区域是否全部部署完成,若否,则进入S31。
在具体实施中,首先根据区域内目标文件的副本数量确定该目标文件的存储节点,存储节点需要从其对于的拉取位置拉取目标文件。对于每个节点拉取目标文件的拉取位置,可以包括存储服务器、同区域的节点和跨区域的节点。在本实施例中,拉取位置根据本存储节点的位置和该目标文件的当前存储位置确定。可以直接选择距离最近的当前存储位置作为拉取位置,即步骤S32可以包括将与所述存储节点的位置距离最近的当前存储位置确定为所述拉取位置。
可以理解的是,对于由每个存储节点自身确定拉取位置的方案,则枝江将存储节点作为目标节点,执行步骤S32即可。
优选的,在确定拉取位置之后,还可以包括:在每个所述存储节点和对应的拉取位置之间确定中转节点,以便所述每个所述存储节点通过所述中转节点从所述拉取位置拉取所述目标文件。在具体实施中,由于远距离传输的错误率较高甚至会出现通信故障的情况,因此对于远距离特别是跨区域的数据传输,可以在拉取位置和存储节点之间选择中转节点,目标文件首先由拉取位置传输至中转节点,再由中转节点传输至存储节点,降低的数据传输的错误率。例如,对于位于沈阳的节点A需要位于深圳的节点B的数据,然而沈阳到深圳存储通信故障,因此可以选择武汉的节点C作为中转节点,数据由节点B传输至节点C再传输至节点A,实现中转的目的。
更为优选的,如图4所示,上一实施例中的步骤S32可以包括:
S321:判断所述当前存储位置中是否包括节点;若是,则进入S322,若否,则进入S325;
S322:判断所述当前存储位置中是否包括与每个所述存储节点属于同区域的节点;若是,则进入S323,若否,则进入S324;
S323:在所述当前存储位置中与每个所述存储节点属于同区域的节点中确定所述拉取位置;
S324:在所述当前存储位置中的节点中确定所述拉取位置;
S325:将所述存储服务器确定为所述拉取位置。
在具体实施中,由于直接选择距离最近的当前存储位置作为拉取位置需要对比所有当前存储位置与存储节点的距离,占用较多的控制器资源。因此在本实施例中,拉取位置的优先级顺序为同区域的节点、跨区域的节点、存储服务器。若同区域的节点中存储有该目标文件,则从同区域存储有该目标文件的节点中随机选择一节点作为拉取位置。若同区域不存在该目标文件的存储副本,则选择跨区域传输。
对于跨区域传输,可以选择与该区域距离较近的区域,在其中任选一存储有目标文件的节点进行拉取。例如,位于沈阳的节点A需要拉取目标文件a的存储副本,而位于沈阳的其他节点都不存在目标文件a的存储副本,因此,可以就近选择存储有该存储副本的区域长春,在位于长春的存储有该存储副本的节点中随机选择一节点进行拉取。
若当前存储位置中不包括节点,即所有的区域中均不存在该目标文件的存储副本,则直接从存储服务器直接拉取。
由此可见,对于相同区域中的当前存储位置,采用随机选取的方式,简化了对比所有当前存储位置与存储节点的距离的步骤,减少了控制器资源的占用。
本申请实施例公开了一种存储副本拉取方法,具体的:
参见图5,本申请实施例公开的一种存储副本拉取方法的流程图,如图5所示,包括:
S201:通过定位技术获取自身的位置信息,并向服务器发送所述位置信息,以便所述服务器根据所述位置信息和预设的划分精度将所述节点划分至对应区域内,并确定所述区域的目标文件的副本数量;
S202:当所述节点被确定为所述目标文件的存储节点时,确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件。
可以理解的是,此处不对确定拉取位置的具体步骤进行限定,可以为获取目标文件的当前存储位置,并根据当前存储位置和自身的位置信息确定拉取目标文件的拉取位置,也可以根据接收到控制器的拉取命令确定拉取所述目标文件的拉取位置。
下面对本申请实施例提供的一种存储副本部署系统进行介绍,下文描述的一种存储副本部署系统与上文描述的一种存储副本部署方法可以相互参照。
参见图6,本申请实施例提供的一种存储副本部署系统的结构图,如图6所示,包括:
获取模块601,用于利用定位技术获取所有节点的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;
确定模块602,用于确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
部署模块603,用于将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
本申请实施例提供的存储副本部署系统,通过定位技术获取节点的位置信息,在各区域部署对应数量的存储副本。利用定位技术获取的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。
在上述实施例的基础上,作为一种优选实施方式,所述确定模块602包括:
第一确定单元,用于获取每个所述区域内所述目标文件的请求热度,并根据所述请求热度确定每个所述区域中所述目标文件的副本数量;其中,所述副本数量与所述请求热度呈正相关;
第一确定单元,用于根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点。
在上述实施例的基础上,作为一种优选实施方式,所述部署模块503具体为向每个所述区域中的每个所述存储节点发送拉取指令,以便每个所述存储节点通过拉取位置确定模块确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件的模块;
其中,所述拉取位置确定模块,用于获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
在上述实施例的基础上,作为一种优选实施方式,所述部署模块603具体为通过拉取位置确定模块确定每个所述区域中的每个存储节点拉取所述目标文件的拉取位置,以便每个所述存储节点从所述拉取位置拉取所述目标文件的模块;
其中,所述拉取位置确定模块,用于获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
在上述实施例的基础上,作为一种优选实施方式,所述拉取位置确定模块具体为获取所述目标文件的当前存储位置,将与所述存储节点的位置距离最近的当前存储位置确定为所述拉取位置的模块。
在上述实施例的基础上,作为一种优选实施方式,所述拉取位置确定模块包括:
获取单元,用于获取所述目标文件的当前存储位置,并判断所述当前存储位置中是否包括节点;若包括,则启动判断单元的工作流程;若不包括,则启动第三确定单元的工作流程;
判断单元,用于判断所述当前存储位置中是否包括与每个所述存储节点属于同区域的节点;若是,则启动第一确定单元的工作流程;若否,则启动第二确定单元的工作流程;
第一确定单元,用于在所述当前存储位置中与所述存储节点属于同区域的节点中确定所述拉取位置;
第二确定单元,用于在所述当前存储位置中的节点中确定所述拉取位置;
第三确定单元,用于将所述存储服务器确定为所述拉取位置。
在上述实施例的基础上,作为一种优选实施方式,所述拉取位置确定模块还包括:
中转单元,用于在所述存储节点和对应的拉取位置之间确定中转节点,以便所述所述存储节点通过所述中转节点从所述拉取位置拉取所述目标文件。
本申请还提供了一种电子设备,该电子设备可以是PC(Personal Computer,个人电脑),也可以是智能手机、平板电脑、掌上电脑、便携计算机等终端设备。
参见图7,本申请实施例提供的一种电子设备的结构图,如图7所示,可以包括存储器11、处理器12和总线13。
其中,存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储器11在一些实施例中可以是电子设备的内部存储单元,例如该电子设备的硬盘。存储器11在另一些实施例中也可以是电子设备的外部存储设备,例如电子设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(FlashCard)等。进一步地,存储器11还可以既包括电子设备的内部存储单元也包括外部存储设备。存储器11不仅可以用于存储安装电子设备的应用软件及各类数据,例如存储副本部署程序01的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。
处理器12在一些实施例中可以是一中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片,用于运行存储器11中存储的程序代码或处理数据,实现上述任一实施例提供的存储副本部署方法,例如执行存储副本部署程序01等。
该总线13可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extended industry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图7中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
本申请实施例通过GPS技术获取节点的位置信息,在各区域部署对应数量的存储副本。利用GPS技术获取的位置信息,精度和准确度远远高于通过IP查询获得的位置信息,进而提高了区域副本控制的准确度。
在上述实施例的基础上,作为优选实施方式,参见图8,所述电子设备还包括:
输入接口14,用于获取外部导入的计算机程序、参数和指令,经处理器12控制保存至存储器11中。该输入接口14可以与输入装置相连,接收用户手动输入的参数或指令。该输入装置可以是显示屏上覆盖的触摸层,也可以是终端外壳上设置的按键、轨迹球或触控板,也可以是键盘(Keyboard)、触控板或鼠标等。
显示单元15,用于显示处理器12处理的数据以及用于显示可视化的用户界面。该显示单元15可以为LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode,有机发光二极管)触摸器等。
网络端口16,用于与外部各终端设备进行通信连接。该通信连接所采用的通信技术可以为有线通信技术或无线通信技术,如移动高清链接技术(MHL)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术等。
图8仅示出了具有组件11-16以及存储副本部署程序01的电子设备,本领域技术人员可以理解的是,图8示出的结构并不构成对电子设备的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (14)

1.一种存储副本部署方法,其特征在于,包括:
获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过GPS定位技术获得;
确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
2.根据权利要求1所述存储副本部署方法,其特征在于,所述确定每个所述区域中目标文件的副本数量,包括:
获取每个所述区域内所述目标文件的请求热度,并根据所述请求热度确定每个所述区域中所述目标文件的副本数量;其中,所述副本数量与所述请求热度呈正相关。
3.根据权利要求1所述存储副本部署方法,其特征在于,将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中,包括:
向每个所述区域中的每个所述存储节点发送拉取指令,以便每个所述存储节点根据拉取位置确定方法确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件;
其中,所述拉取位置确定方法包括:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
4.根据权利要求1所述存储副本部署方法,其特征在于,将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中,包括:
根据拉取位置确定方法确定每个所述区域中的每个存储节点拉取所述目标文件的拉取位置,以便每个所述存储节点从所述拉取位置拉取所述目标文件;
其中,所述拉取位置确定方法包括:获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置。
5.根据权利要求3或4所述存储副本部署方法,其特征在于,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置,包括:
将与所述存储节点的位置距离最近的当前存储位置确定为所述拉取位置。
6.根据权利要求3或4所述存储副本部署方法,其特征在于,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置,包括:
判断所述当前存储位置中是否包括节点;
若包括,则判断所述当前存储位置中是否包括与所述存储节点属于同区域的节点;若是,则在所述当前存储位置中与所述存储节点属于同区域的节点中确定所述拉取位置;若否,则在所述当前存储位置中的节点中确定所述拉取位置;
若不包括,则将所述存储服务器确定为所述拉取位置。
7.根据权利要求3或4所述存储副本部署方法,其特征在于,所述根据所述当前存储位置和所述存储节点的位置信息确定所述拉取位置之后,还包括:
在所述存储节点和对应的拉取位置之间确定中转节点,以便所述存储节点通过所述中转节点从所述拉取位置拉取所述目标文件。
8.一种存储副本拉取方法,其特征在于,应用于节点,包括:
通过GPS定位技术获取自身的位置信息,并向服务器发送所述位置信息,以便所述服务器根据所述位置信息和预设的划分精度将所述节点划分至对应区域内,并确定所述区域的目标文件的副本数量;
当所述节点被确定为所述目标文件的存储节点时,确定拉取所述目标文件的拉取位置,并从所述拉取位置拉取所述目标文件。
9.根据权利要求8所述存储副本拉取方法,其特征在于,所述确定目标文件的拉取位置,包括:
接收拉取命令,根据所述拉取命令确定拉取所述目标文件的拉取位置。
10.根据权利要求8所述存储副本拉取方法,其特征在于,所述确定目标文件的拉取位置,包括:
获取所述目标文件的当前存储位置,并根据所述当前存储位置和所述存储节点自身的位置信息确定拉取所述目标文件的拉取位置。
11.根据权利要求8至10中任一项所述存储副本拉取方法,其特征在于,所述节点设备具体为手机。
12.一种电子设备,其特征在于,所述电子设备包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的存储副本部署程序,所述存储副本部署程序被所述处理器执行时实现如权利要求1至7任一项所述存储副本部署方法的步骤。
13.一种存储副本部署系统,其特征在于,包括:
获取模块,用于获取所有节点设备的位置信息,并根据所述位置信息和预设的划分精度将所有所述节点划分多个区域;其中,所述节点设备的位置信息由所述节点设备通过GPS定位技术获得;
确定模块,用于确定每个所述区域中目标文件的副本数量,并根据所述副本数量确定每个所述区域中需要拉取所述目标文件的存储节点;
部署模块,用于将所述目标文件的存储副本部署于每个所述区域内的每个所述存储节点中。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有存储副本部署程序,所述存储副本部署程序被处理器执行时实现如权利要求1至7任一项所述存储副本部署方法的步骤。
CN201910198477.8A 2019-03-15 2019-03-15 一种存储副本部署方法、系统及电子设备和存储介质 Active CN109933289B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910198477.8A CN109933289B (zh) 2019-03-15 2019-03-15 一种存储副本部署方法、系统及电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910198477.8A CN109933289B (zh) 2019-03-15 2019-03-15 一种存储副本部署方法、系统及电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN109933289A CN109933289A (zh) 2019-06-25
CN109933289B true CN109933289B (zh) 2022-06-10

Family

ID=66987300

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910198477.8A Active CN109933289B (zh) 2019-03-15 2019-03-15 一种存储副本部署方法、系统及电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN109933289B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110365783B (zh) * 2019-07-18 2022-10-21 深圳市网心科技有限公司 文件部署方法及装置、网络节点及存储介质
CN110489279A (zh) * 2019-08-27 2019-11-22 深圳市网心科技有限公司 一种文件副本维护方法及相关装置
CN110569212A (zh) * 2019-09-12 2019-12-13 深圳市网心科技有限公司 一种文件部署方法、系统、存储介质和电子设备
CN110647516A (zh) * 2019-09-29 2020-01-03 重庆紫光华山智安科技有限公司 文件副本存储方法、装置、可读存储介质及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012504807A (ja) * 2008-10-03 2012-02-23 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 分散データベースの監視メカニズム
CN102938784A (zh) * 2012-11-06 2013-02-20 无锡江南计算技术研究所 应用于分布式存储系统中的数据存储方法和系统
CN103813364A (zh) * 2013-11-21 2014-05-21 重庆邮电大学 一种基于区域感知的移动自组织网络中断数据的恢复方法
CN104657459A (zh) * 2015-02-09 2015-05-27 中国科学院信息工程研究所 一种基于文件粒度的海量数据存储方法
CN108462736A (zh) * 2018-01-21 2018-08-28 肖芳 一种面向QoS的云存储数据副本存储方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9043499B2 (en) * 2013-02-05 2015-05-26 Cleversafe, Inc. Modifying a dispersed storage network memory data access response plan

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012504807A (ja) * 2008-10-03 2012-02-23 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 分散データベースの監視メカニズム
CN102938784A (zh) * 2012-11-06 2013-02-20 无锡江南计算技术研究所 应用于分布式存储系统中的数据存储方法和系统
CN103813364A (zh) * 2013-11-21 2014-05-21 重庆邮电大学 一种基于区域感知的移动自组织网络中断数据的恢复方法
CN104657459A (zh) * 2015-02-09 2015-05-27 中国科学院信息工程研究所 一种基于文件粒度的海量数据存储方法
CN108462736A (zh) * 2018-01-21 2018-08-28 肖芳 一种面向QoS的云存储数据副本存储方法

Also Published As

Publication number Publication date
CN109933289A (zh) 2019-06-25

Similar Documents

Publication Publication Date Title
CN109933289B (zh) 一种存储副本部署方法、系统及电子设备和存储介质
CN108388599B (zh) 电子装置、数据迁移及调用方法及存储介质
KR102105636B1 (ko) 원격으로 애플리케이션들을 설치
CN109308284B (zh) 报表菜单生成方法、装置、计算机设备及存储介质
US9258357B2 (en) Method for accessing plural cloud storages, electronic apparatus and non-transitory computer readable medium
CN105468707A (zh) 一种基于缓存的数据处理方法及装置
CN103914568A (zh) 调度http代理的方法和装置
CN107767228A (zh) 应用推荐方法、装置、终端设备及存储介质
CN110222775A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN110635944A (zh) 一种集群网络配置方法、装置及电子设备和存储介质
CN109117153B (zh) 应用程序的处理方法、装置、终端和存储介质
CN103684926A (zh) 一种测试局域网网速的方法及装置
WO2014110009A1 (en) Displaying dynamic content on a map based on user's location and scheduled task
EP2863318A1 (en) Service provision system, service computer, and terminal
CN103548321A (zh) 信息处理系统、访问权限管理方法、信息处理设备及其控制方法和控制程序
CN112214561A (zh) 地图数据处理方法、装置、计算机设备及存储介质
CN109656592B (zh) 卡片管理方法、装置、终端及计算机可读存储介质
CN109271193B (zh) 一种数据处理方法、装置、设备及存储介质
US10209868B2 (en) Display terminal and display method for displaying application images based on display information
US8467990B2 (en) Method for setting the geolocation of a non-GPS enabled device
US20140180574A1 (en) Electronic device and method for updating rendezvous location of communication devices
CN109697166B (zh) 一种测试数据准备方法及相关装置
CN110489598B (zh) 一种用户社团划分方法及装置
CN110955449A (zh) 客户端的灰度发布方法及装置
CN109819025B (zh) 一种区块链扩链方法、系统及电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant