CN114356869B - 一种图片分布式存储方法和系统 - Google Patents

一种图片分布式存储方法和系统 Download PDF

Info

Publication number
CN114356869B
CN114356869B CN202210234692.0A CN202210234692A CN114356869B CN 114356869 B CN114356869 B CN 114356869B CN 202210234692 A CN202210234692 A CN 202210234692A CN 114356869 B CN114356869 B CN 114356869B
Authority
CN
China
Prior art keywords
backup
storage
picture
server
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210234692.0A
Other languages
English (en)
Other versions
CN114356869A (zh
Inventor
周柳阳
蒋林林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Yihao Hulian Technology Co ltd
Original Assignee
Shenzhen Yihao Hulian Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Yihao Hulian Technology Co ltd filed Critical Shenzhen Yihao Hulian Technology Co ltd
Priority to CN202210234692.0A priority Critical patent/CN114356869B/zh
Publication of CN114356869A publication Critical patent/CN114356869A/zh
Application granted granted Critical
Publication of CN114356869B publication Critical patent/CN114356869B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1744Redundancy elimination performed by the file system using compression, e.g. sparse files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1464Management of the backup or restore process for networked environments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/32Indexing scheme for image data processing or generation, in general involving image mosaicing

Abstract

本发明适用于图片存储技术领域,提供了一种图片分布式存储方法和系统,所述方法包括以下步骤:对上传的待存储图片进行备份生成备份图片;将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器;对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中。本发明通过对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行整体压缩生成备份压缩图片,压缩量更大,压缩效果更好。

Description

一种图片分布式存储方法和系统
技术领域
本发明涉及图片存储技术领域,具体是涉及一种图片分布式存储方法和系统。
背景技术
随着互联网的高速发展,各种应用产生的图片文件越来越多,对图片存储的要求也越来越高,分布式存储能够将数据分散存储在多个存储服务器上,避免了传统的集中式存储服务器遭受损坏时,数据全部遭到损坏甚至丢失,另外,分布式存储系统能够利用多台存储服务器分担存储负荷,大幅度提高了系统的可靠性、可用性和存取效率,同时为了避免图片数据遭到损坏和丢失,经常会对原始图片数据进行备份,但是,这样会使得图片的存储量成倍增加,大幅度提高了存储成本,因此,需要提供一种图片分布式存储方法和系统,旨在解决上述问题。
发明内容
针对现有技术存在的不足,本发明的目的在于提供一种图片分布式存储方法和系统,以解决上述背景技术中存在的问题。
本发明是这样实现的,一种图片分布式存储方法,所述方法包括以下步骤:
对上传的待存储图片进行备份生成备份图片;
将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径。
作为本发明进一步的方案:所述将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径的步骤,具体包括:
对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
作为本发明进一步的方案:所述对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径的步骤,具体包括:
对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
作为本发明进一步的方案:所述对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片的步骤,具体包括:
对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片。
作为本发明进一步的方案:所述方法还包括调取备份图片,具体步骤为:
接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
本发明的另一目的在于提供一种图片分布式存储系统,所述系统包括:
存储图片备份模块,用于对上传的待存储图片进行备份生成备份图片;
临时存储模块,用于将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
存储图片转存模块,当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
以及备份图片转存模块,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径。
作为本发明进一步的方案:所述存储图片转存模块包括:
剩余存储空间监控单元,用于对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
存储服务器标记单元,用于对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
以及存储图片转存单元,用于将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
作为本发明进一步的方案:所述备份图片转存模块包括:
图片拼接整合单元,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
备份压缩图片转存单元,用于将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
作为本发明进一步的方案:所述图片拼接整合单元包括:
备份图片分类子单元,用于对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
一级拼接整合子单元,用于对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
以及二级拼接整合子单元,用于将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片。
作为本发明进一步的方案:所述系统还包括备份图片调取模块,备份图片调取模块具体包括:
调取指令接收单元,用于接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
备份压缩图片调取单元,用于根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
以及备份图片调取单元,用于根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
与现有技术相比,本发明的有益效果是:
本发明通过对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行整体压缩生成备份压缩图片,压缩量更大,压缩效果更好,能够有效减少存储空间,另外,本发明并没有对原始图片进行压缩,保证了正常使用时图片的读取速度。
附图说明
图1为一种图片分布式存储方法的流程图。
图2为一种图片分布式存储方法中将临时存储器中所有的待存储图片转存至同一个存储服务器的流程图。
图3为一种图片分布式存储方法中将所述备份压缩图片转存至另一个存储服务器中的流程图。
图4为一种图片分布式存储方法中对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件的流程图。
图5为一种图片分布式存储方法中调取备份图片的流程图。
图6为一种图片分布式存储系统的结构示意图。
图7为一种图片分布式存储系统中存储图片转存模块的结构示意图。
图8为一种图片分布式存储系统中备份图片转存模块的结构示意图。
图9为一种图片分布式存储系统中图片拼接整合单元的结构示意图。
图10为一种图片分布式存储系统中备份图片调取模块的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清晰,以下结合附图及具体实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
以下结合具体实施例对本发明的具体实现进行详细描述。
如图1所示,本发明实施例提供了一种图片分布式存储方法,所述方法包括以下步骤:
S100,对上传的待存储图片进行备份生成备份图片;
S200,将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
S300,当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
S400,对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径。
需要说明的是,随着互联网的高速发展,各种应用产生的图片文件越来越多,对图片存储的要求也越来越高,分布式存储能够将数据分散存储在多个存储服务器上,避免了传统的集中式存储服务器遭受损坏时,数据全部遭到损坏甚至丢失,另外,分布式存储系统能够利用多台存储服务器分担存储负荷,大幅度提高了系统的可靠性、可用性和存取效率,同时为了避免图片数据遭到损坏和丢失,经常会对原始图片数据进行备份,但是,这样会使得图片的存储量成倍增加,大幅度提高了存储成本,本发明实施例旨在解决上述问题。
本发明实施例中,首先对上传的待存储图片进行备份生成备份图片,接着将待存储图片和备份图片存储至临时存储器中,这里临时存储器的数量只有一个,而本发明实施例包含多个存储服务器,对临时存储器中待存储图片的存储量进行监测,只有当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径,所述第一预设值为提前设置完成的定值,同时对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,即将多张图片拼接成为一张图片,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径,需要说明的是,图片可以压缩是因为图像中相邻像素间的相关性引起的空间冗余、图像序列中不同帧之间存在相关性引起的时间冗余以及不同彩色平面或频谱带的相关性引起的频谱冗余,正常情况下,一张图片的像素点越多,越容易产生各种相关的冗余信息,因此,对拼接后的图片进行整体压缩,压缩量更大,压缩效果更好,能够有效减少存储空间,另外,本发明实施例并没有对原始图片进行压缩,保证了正常使用时图片的读取速度。
如图2所示,作为本发明一个优选的实施例,所述将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径的步骤,具体包括:
S301,对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
S302,对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
S303,将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
本发明实施例中,为了避免一个存储服务器被占满而另外的存储服务器仍然剩余大量存储空间情况的发生,本发明实施例会对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值,并自动对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器,那么第一存储服务器就是剩余存储值最大的存储器,将临时存储器中所有的待存储图片转存至第一存储服务器中。
如图3所示,作为本发明一个优选的实施例,所述对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径的步骤,具体包括:
S401,对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
S402,将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
本发明实施例中,在对备份图像文件进行压缩生成备份压缩图片时,采用的是无损压缩算法,压缩后,直接将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,容易理解,备份压缩图片的数据量要小于待存储图片的数据量,因此,将所述备份压缩图片转存至第二存储服务器中即可,另外,待存储图片和其对应的备份压缩图片分别存储在不同的存储服务器中,即使其中一个存储服务器发生损坏,图片数据也能够找回。
如图4所示,作为本发明一个优选的实施例,所述对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片的步骤,具体包括:
S4011,对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
S4012,对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
S4013,将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片。
本发明实施例中,对备份图片进行拼接整合时,首先需要对临时存储器中所有的备份图片进行分类,将图像尺寸相同的备份图片分为一类,就可以对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,由于每一类的备份图片的图像尺寸相同,拼接整合速度更快,接着将所有的一级图片文件进行拼接整合形成一份备份图像文件,并记录下每个一级图片文件的二级拼接位置,方便后期找回,最后对所述备份图像文件进行压缩生成备份压缩图片。
如图5所示,作为本发明一个优选的实施例,所述方法还包括调取备份图片,具体步骤为:
S501,接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
S502,根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
S503,根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
本发明实施例中,当原始图片发生损坏或者丢失时,就需要用户输入备份图片调取指令,容易理解,备份图片调取指令中包括图片基本信息,例如图片名称,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置,所述第二存储路径、二级拼接位置和一级拼接位置中也包含有图片基本信息,接着根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件,根据二级拼接位置调取对应的一级图片文件,最后根据一级拼接位置调取对应的备份图片,如此,就能够成功找到原始图片的备份数据。
如图6所示,本发明实施例还提供了一种图片分布式存储系统,所述系统包括:
存储图片备份模块100,用于对上传的待存储图片进行备份生成备份图片;
临时存储模块200,用于将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
存储图片转存模块300,当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
以及备份图片转存模块400,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径。
本发明实施例中,首先对上传的待存储图片进行备份生成备份图片,接着将待存储图片和备份图片存储至临时存储器中,这里临时存储器的数量只有一个,而本发明实施例包含多个存储服务器,对临时存储器中待存储图片的存储量进行监测,只有当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径,所述第一预设值为提前设置完成的定值,同时对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,即将多张图片拼接成为一张图片,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径,需要说明的是,图片可以压缩是因为图像中相邻像素间的相关性引起的空间冗余、图像序列中不同帧之间存在相关性引起的时间冗余以及不同彩色平面或频谱带的相关性引起的频谱冗余,正常情况下,一张图片的像素点越多,越容易产生各种相关的冗余信息,因此,对拼接后的图片进行整体压缩,压缩量更大,压缩效果更好,能够有效减少存储空间,另外,本发明实施例并没有对原始图片进行压缩,保证了正常使用时图片的读取速度。
如图7所示,作为本发明一个优选的实施例,所述存储图片转存模块300包括:
剩余存储空间监控单元301,用于对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
存储服务器标记单元302,用于对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
以及存储图片转存单元303,用于将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
本发明实施例中,为了避免一个存储服务器被占满而另外的存储服务器仍然剩余大量存储空间情况的发生,本发明实施例会对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值,并自动对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器,那么第一存储服务器就是剩余存储值最大的存储器,将临时存储器中所有的待存储图片转存至第一存储服务器中。
如图8所示,作为本发明一个优选的实施例,所述备份图片转存模块400包括:
图片拼接整合单元401,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
备份压缩图片转存单元402,用于将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
本发明实施例中,在对备份图像文件进行压缩生成备份压缩图片时,采用的是无损压缩算法,压缩后,直接将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,容易理解,备份压缩图片的数据量要小于待存储图片的数据量,因此,将所述备份压缩图片转存至第二存储服务器中即可,另外,待存储图片和其对应的备份压缩图片分别存储在不同的存储服务器中,即使其中一个存储服务器发生损坏,图片数据也能够找回。
如图9所示,作为本发明一个优选的实施例,所述图片拼接整合单元401包括:
备份图片分类子单元4011,用于对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
一级拼接整合子单元4012,用于对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
以及二级拼接整合子单元4013,用于将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片。
本发明实施例中,对备份图片进行拼接整合时,首先需要对临时存储器中所有的备份图片进行分类,将图像尺寸相同的备份图片分为一类,就可以对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,由于每一类的备份图片的图像尺寸相同,拼接整合速度更快,接着将所有的一级图片文件进行拼接整合形成一份备份图像文件,并记录下每个一级图片文件的二级拼接位置,方便后期找回,最后对所述备份图像文件进行压缩生成备份压缩图片。
如图10所示,作为本发明一个优选的实施例,所述系统还包括备份图片调取模块500,备份图片调取模块500具体包括:
调取指令接收单元501,用于接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
备份压缩图片调取单元502,用于根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
以及备份图片调取单元503,用于根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
本发明实施例中,当原始图片发生损坏或者丢失时,就需要用户输入备份图片调取指令,容易理解,备份图片调取指令中包括图片基本信息,例如图片名称,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置,所述第二存储路径、二级拼接位置和一级拼接位置中也包含有图片基本信息,接着根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件,根据二级拼接位置调取对应的一级图片文件,最后根据一级拼接位置调取对应的备份图片,如此,就能够成功找到原始图片的备份数据。
以上仅对本发明的较佳实施例进行了详细叙述,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
应该理解的是,虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实施例处的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。

Claims (6)

1.一种图片分布式存储方法,其特征在于,所述方法包括以下步骤:
对上传的待存储图片进行备份生成备份图片;
将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径;
其中,对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片的步骤,具体包括:
对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片;
所述方法还包括调取备份图片,具体步骤为:
接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
2.根据权利要求1所述一种图片分布式存储方法,其特征在于,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径的步骤,具体包括:
对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
3.根据权利要求2所述一种图片分布式存储方法,其特征在于,对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径的步骤,具体包括:
对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
4.一种图片分布式存储系统,其特征在于,所述系统包括:
存储图片备份模块,用于对上传的待存储图片进行备份生成备份图片;
临时存储模块,用于将待存储图片和备份图片存储至临时存储器中,对临时存储器中待存储图片的存储量进行监测;
存储图片转存模块,当所述存储量到达第一预设值时,将临时存储器中所有的待存储图片转存至同一个存储服务器,记录第一存储路径;
以及备份图片转存模块,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片,将所述备份压缩图片转存至另一个存储服务器中,记录第二存储路径;
以及图片拼接整合单元,其中图片拼接整合单元包括:
备份图片分类子单元,用于对临时存储器中所有的备份图片进行分类,分类规则为将图像尺寸相同的备份图片分为一类;
一级拼接整合子单元,用于对每一类中所有的备份图片进行拼接整合形成一份一级图片文件,记录每个备份图片的一级拼接位置;
以及二级拼接整合子单元,用于将所有的一级图片文件进行拼接整合形成一份备份图像文件,记录每个一级图片文件的二级拼接位置,对所述备份图像文件进行压缩生成备份压缩图片;
所述系统还包括备份图片调取模块,备份图片调取模块具体包括:
调取指令接收单元,用于接收备份图片调取指令,根据备份图片调取指令确定对应的第二存储路径、二级拼接位置和一级拼接位置;
备份压缩图片调取单元,用于根据第二存储路径调取对应的备份压缩图片并进行解压得到备份图像文件;
以及备份图片调取单元,用于根据二级拼接位置调取对应的一级图片文件,根据一级拼接位置调取对应的备份图片。
5.根据权利要求4所述一种图片分布式存储系统,其特征在于,所述存储图片转存模块包括:
剩余存储空间监控单元,用于对所有的存储服务器的剩余存储空间进行读取,得到服务器剩余存储值;
存储服务器标记单元,用于对服务器剩余存储值进行降序排序,将排序前两位的服务器剩余存储值所对应的存储服务器分别标记为第一存储服务器和第二存储服务器;
以及存储图片转存单元,用于将临时存储器中所有的待存储图片转存至第一存储服务器中,记录第一存储路径。
6.根据权利要求5所述一种图片分布式存储系统,其特征在于,所述备份图片转存模块包括:
图片拼接整合单元,用于对临时存储器中所有的备份图片进行拼接整合形成一份备份图像文件,对所述备份图像文件进行压缩生成备份压缩图片;
备份压缩图片转存单元,用于将所述备份压缩图片转存至第二存储服务器中,记录第二存储路径,第一存储服务器的服务器剩余存储值大于或者等于第二存储服务器的服务器剩余存储值。
CN202210234692.0A 2022-03-11 2022-03-11 一种图片分布式存储方法和系统 Active CN114356869B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210234692.0A CN114356869B (zh) 2022-03-11 2022-03-11 一种图片分布式存储方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210234692.0A CN114356869B (zh) 2022-03-11 2022-03-11 一种图片分布式存储方法和系统

Publications (2)

Publication Number Publication Date
CN114356869A CN114356869A (zh) 2022-04-15
CN114356869B true CN114356869B (zh) 2022-09-30

Family

ID=81095099

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210234692.0A Active CN114356869B (zh) 2022-03-11 2022-03-11 一种图片分布式存储方法和系统

Country Status (1)

Country Link
CN (1) CN114356869B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011170707A (ja) * 2010-02-19 2011-09-01 Hitachi Information Systems Ltd バックアップシステム及びバックアップ方法
GB201214854D0 (en) * 2012-08-21 2012-10-03 Ibm Data backup or restore using main memory and non-volitile storage media
CN107680038A (zh) * 2017-09-14 2018-02-09 网易(杭州)网络有限公司 一种图片处理方法、介质和相关装置
CN107957920A (zh) * 2017-10-31 2018-04-24 清远恒成智道信息科技有限公司 数据库备份系统
CN109685714A (zh) * 2018-08-31 2019-04-26 深圳壹账通智能科技有限公司 图片压缩方法、装置、设备及计算机可读存储介质
CN113989119A (zh) * 2021-11-04 2022-01-28 上海呵呵呵文化传播有限公司 图像处理方法、装置、电子设备、介质和程序

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030225824A1 (en) * 2002-05-28 2003-12-04 Vincent Wu System and method for transferring image data to a server
CN102236588A (zh) * 2010-04-23 2011-11-09 阿里巴巴集团控股有限公司 数据远程备份方法、设备及系统
CN104219298B (zh) * 2014-08-27 2018-01-12 深信服科技股份有限公司 集群系统及其数据备份的方法
CN105988896B (zh) * 2015-02-12 2018-01-19 广东欧珀移动通信有限公司 一种移动终端数据的备份方法及装置
CN106445743A (zh) * 2016-09-29 2017-02-22 广东欧珀移动通信有限公司 数据备份传输方法及移动终端
CN110399511A (zh) * 2019-07-23 2019-11-01 中南民族大学 基于Redis的图片缓存方法、设备、存储介质及装置
CN113778339A (zh) * 2021-09-14 2021-12-10 苏州瓦泊特智能科技有限公司 一种数据分散存储方法和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011170707A (ja) * 2010-02-19 2011-09-01 Hitachi Information Systems Ltd バックアップシステム及びバックアップ方法
GB201214854D0 (en) * 2012-08-21 2012-10-03 Ibm Data backup or restore using main memory and non-volitile storage media
CN107680038A (zh) * 2017-09-14 2018-02-09 网易(杭州)网络有限公司 一种图片处理方法、介质和相关装置
CN107957920A (zh) * 2017-10-31 2018-04-24 清远恒成智道信息科技有限公司 数据库备份系统
CN109685714A (zh) * 2018-08-31 2019-04-26 深圳壹账通智能科技有限公司 图片压缩方法、装置、设备及计算机可读存储介质
CN113989119A (zh) * 2021-11-04 2022-01-28 上海呵呵呵文化传播有限公司 图像处理方法、装置、电子设备、介质和程序

Also Published As

Publication number Publication date
CN114356869A (zh) 2022-04-15

Similar Documents

Publication Publication Date Title
WO2021135323A1 (zh) 城市多源异构数据的融合处理方法、装置和计算机设备
US20060066903A1 (en) Image file recording system and method of controlling same
US8171251B2 (en) Data storage management method and device
CN101331480B (zh) 压缩文档中的图像
EP2189894A1 (en) Digital shoebox
US10747621B2 (en) Data management and backup for image and video media
US7836024B2 (en) File generating method and file retrieving method
CN109213817A (zh) 增量数据抽取方法、装置及服务器
US7747574B1 (en) System and method for archiving digital media
CN107391544A (zh) 列式存储数据的处理方法、装置、设备及计算机储存介质
CN114356869B (zh) 一种图片分布式存储方法和系统
CN113448946B (zh) 数据迁移方法及装置、电子设备
CN111966531B (zh) 数据快照方法、装置、计算机设备及存储介质
CN112286457A (zh) 对象重删方法、装置、电子设备及机器可读存储介质
US6266671B1 (en) Data storage apparatus, method, and medium with variable data storage structure
CN113438444B (zh) 一种图片传输存储方法和系统
CN114328497A (zh) 一种冗余数据处理方法、系统、计算机设备和存储介质
KR101260127B1 (ko) 영상 수록 재생 장치
US20130013846A1 (en) Method for storing data and electronic apparatus using the same
US20180189143A1 (en) Simultaneous compression of multiple stored videos
CN114187556A (zh) 一种基于画面特征的高清视频智能分割方法
CN1137206A (zh) 用于多种质量交易卡图像的方法与设备
CN108776578B (zh) 一种快速合并对象的方法和系统
US20020196289A1 (en) Preview picture output system and method for controling operation of the same
JP2000066929A (ja) コアファイル管理システムおよびコアファイル管理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant