CN111258821B - 一种基于云计算的备份数据快速提取方法 - Google Patents

一种基于云计算的备份数据快速提取方法 Download PDF

Info

Publication number
CN111258821B
CN111258821B CN202010208146.0A CN202010208146A CN111258821B CN 111258821 B CN111258821 B CN 111258821B CN 202010208146 A CN202010208146 A CN 202010208146A CN 111258821 B CN111258821 B CN 111258821B
Authority
CN
China
Prior art keywords
data
target
storage space
target data
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010208146.0A
Other languages
English (en)
Other versions
CN111258821A (zh
Inventor
巩书凯
王巧
何荣
李宏
易敏
卢仁谦
江虹锋
徐清华
王成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Humi Network Technology Co Ltd
Original Assignee
Chongqing Humi Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Humi Network Technology Co Ltd filed Critical Chongqing Humi Network Technology Co Ltd
Priority to CN202010208146.0A priority Critical patent/CN111258821B/zh
Publication of CN111258821A publication Critical patent/CN111258821A/zh
Application granted granted Critical
Publication of CN111258821B publication Critical patent/CN111258821B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于云计算的备份数据快速提取方法，目标数据存储在多个存储空间中，每个存储空间中存储有相同的目标数据，所述基于云计算的备份数据快速提取方法包括：接收目标用户的提取指令；基于提取指令查询目标数据的存储空间；分别从存储空间中提取目标数据的不同部分并发送至目标用户直至目标数据完整发送至目标用户。本发明将目标数据多重备份至不同的存储空间中，则目标用户需要提取数据时，可以同时从多个存储空间中提取数据，这样，可以极大的提高数据提取的速度，即使在存储空间繁忙时，由于采用了多线传输，其传输速度仍然高于单线传输。

Description

一种基于云计算的备份数据快速提取方法
技术领域
本发明涉及数据存储技术领域，具体涉及一种基于云计算的备份数据快速提取方法。
背景技术
云计算（Cloud Computing）是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。现阶段的云计算通过不断进步，已经不单单是一种分布式计算，而是分布式计算、效用计算、负载均衡、并行计算、网络存储、热备份冗杂和虚拟化等计算机技术混合演进并跃升的结果。
云盘作为云计算发展过成功的一种成功产品，它通过互联网为企业和个人提供信息的储存，读取，下载等服务。具有安全稳定、海量存储的特点。相对于传统的实体磁盘来说，更方便，用户不需要把储存重要资料的实体磁盘带在身上。因此，云盘成为了数据备份的一种重要手段。然而，现有技术中，各个用户通过云盘备份的数据都存储在同一个集中的数据库中，由于数据库是存储在同一个数据库中，因此，提取数据时是用户端与数据库的单线传输，这样在用户数量较多时，提取速度会受到严重限制。
因此，如何提高备份数据的提取速度，成为了本领域技术人员急需解决的问题。
发明内容
针对上述现有技术的不足，本发明要解决的问题是：如何降低数据备份时对备份设备的硬件要求并提高数据备份的安全性。
本发明采用了如下的技术方案：
一种基于云计算的备份数据快速提取方法，目标数据存储在多个存储空间中，每个存储空间中存储有相同的目标数据，所述基于云计算的备份数据快速提取方法包括：
接收目标用户的提取指令；
基于提取指令查询目标数据的存储空间；
分别从存储空间中提取目标数据的不同部分并发送至目标用户直至目标数据完整发送至目标用户。
优选地，目标数据的存储方法包括：
获取目标数据；
为目标数据分配多个不同的存储空间；
将目标数据分别存储到每个分配的存储空间中。
优选地，为目标数据分配多个不同的存储空间包括：
将目标数据以预设规则划分为多个子数据；
为每个子数据分配不同的存储空间，每个子数据均具有多个不同的存储空间；
将每个子数据存储到分配的存储空间中。
优选地，分配存储空间时，调用存储空间的可用空间大小，若存储空间的可用空间大小大于需要存储的数据的大小，则将所述存储空间分配给所述需要存储的数据。
优选地，当任一存储空间中的数据丢失或损坏时，分配与数据丢失或损坏的存储空间的数量相同的新的存储空间，将丢失或损坏的数据存储至新的存储空间中。
优选地，每个用户的用户端均设有存储空间，目标数据存储在非目标用户的用户端中。
优选地，所述分别从存储空间中提取目标数据的不同部分并发送至目标用户直至所有目标数据均发送至目标用户包括：
S701、判断存储空间所属的用户端是否在线；
S702、分别从在线的存储空间中提取目标数据的不同部分并向目标用户传输；
S703、判断目标数据是否完整发送至目标用户，若是，结束，若不是，返回步骤S701。
优选地，当步骤S701中所有存储空间均不在线时，暂停数据传输，直到任意存储空间上线后，继续数据传输。
优选地，若接收目标用户的提取指令后，目标用户不在线，分别从存储空间中提取未传输至目标用户的目标数据的不同部分并发送至临时存储空间，直至在临时存储空间中存储完所有为传输至目标用户的目标数据；目标用户上线后，分别从临时存储空间和/或存储空间中提取为传输至目标用户的目标数据的不同部分并发送至目标用户，直至目标数据完整发送至目标用户；目标数据完整发送至目标用户后，将临时存储空间中属于目标数据的部分清除。
综上所述，本发明公开了一种基于云计算的备份数据快速提取方法，目标数据存储在多个存储空间中，每个存储空间中存储有相同的目标数据，所述基于云计算的备份数据快速提取方法包括：接收目标用户的提取指令；基于提取指令查询目标数据的存储空间；分别从存储空间中提取目标数据的不同部分并发送至目标用户直至目标数据完整发送至目标用户。本发明将目标数据多重备份至不同的存储空间中，则目标用户需要提取数据时，可以同时从多个存储空间中提取数据，这样，可以极大的提高数据提取的速度，即使在存储空间繁忙时，由于采用了多线传输，其传输速度仍然高于单线传输。
附图说明
为了使发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步的详细描述，其中：
图1是本发明公开的一种基于云计算的备份数据快速提取方法的流程图。
具体实施方式
下面结合附图对本发明作进一步的详细说明。
如图1所示，本发明公开了一种基于云计算的备份数据快速提取方法，目标数据存储在多个存储空间中，每个存储空间中存储有相同的目标数据，所述基于云计算的备份数据快速提取方法包括：
接收目标用户的提取指令；
基于提取指令查询目标数据的存储空间；
分别从存储空间中提取目标数据的不同部分并发送至目标用户直至目标数据完整发送至目标用户。
在本发明中，云服务器接收目标用户端的提取指令，并根据数据备份时存储的备份记录查询存储空间，然后完成备份数据的提取。本发明将目标数据多重备份至不同的存储空间中，则目标用户需要提取数据时，可以同时从多个存储空间中提取数据，这样，可以极大的提高数据提取的速度，即使在存储空间繁忙时，由于采用了多线传输，其传输速度仍然高于单线传输。
具体实施时，目标数据的存储方法包括：
获取目标数据；
为目标数据分配多个不同的存储空间；
将目标数据分别存储到每个分配的存储空间中。
除了可以提高数据提取的速度，由于数据分散的存储在各个存储空间中，因此即使某个存储空间的数据损坏，仍不会影响备份数据的提取。
具体实施时，为目标数据分配多个不同的存储空间包括：
将目标数据以预设规则划分为多个子数据；
为每个子数据分配不同的存储空间，每个子数据均具有多个不同的存储空间；
将每个子数据存储到分配的存储空间中。
为了进一步实现数据的分布备份，因此，可以将数据按照预设规则划分为多个子数据，预设规则由工作人员设定。例如，根据将所有待备份数据都划分为M个子数据，或者将待备份数据根据其大小进行划分，划分的子数据个数与待备份数据的大小正相关。这样，即使某个存储空间的数据泄露，获取泄露数据的一方也只能得到一份子数据，增大了不法分子盗取数据的难度，提高了数据备份的安全性。
具体实施时，分配存储空间时，调用存储空间的可用空间大小，若存储空间的可用空间大小大于需要存储的数据的大小，则将所述存储空间分配给所述需要存储的数据。
这样可以合理的为待备份的数据分配合适的存储空间，避免由于分配的存储空间可利用空间不足而造成的存储错误。
具体实施时，当任一存储空间中的数据丢失或损坏时，分配与数据丢失或损坏的存储空间的数量相同的新的存储空间，将丢失或损坏的数据存储至新的存储空间中。
由于本发明采用了多重备份的方式，因此，为了保证备份数据的稳定性，因此，本发明中将同一目标数据的存储空间数始终维持在一个固定数值上，当某处的数据损坏，则采用其他处的数据在新的存储空间中进行再次备份。
具体实施时，每个用户的用户端均设有存储空间，目标数据存储在非目标用户的用户端中。
由于本发明采用了多重备份的方式，因此，与现有的备份方式相比，需要的存储空间总大小更大，为了降低运营商的硬件成本，所以可以利用用户的用户端的存储空间作为备份数据的存储空间。可以在每个用户的用户端（手机、电脑及其他具有存储和数据传输功能的点子设备）划出一定大小的空间，作为存储空间。
具体实施时，所述分别从存储空间中提取目标数据的不同部分并发送至目标用户直至所有目标数据均发送至目标用户包括：
S701、判断存储空间所属的用户端是否在线；
S702、分别从在线的存储空间中提取目标数据的不同部分并向目标用户传输；
S703、判断目标数据是否完整发送至目标用户，若是，结束，若不是，返回步骤S701。
若采用其他用户的用户端作为目标用户的数据备份载体，则可能会出现其他用户离线的情况，此时，该离线用户的用户端无法再传输数据，所以，在本发明中，需要实施检测每个备份有目标数据的用户端的情况，从在线的用户端上传输数据。
具体实施时，当步骤S701中所有存储空间均不在线时，暂停数据传输，直到任意存储空间上线后，继续数据传输。
由于采用了用户端作为存储空间，因此可能会发生所有存储空间都离线的情况，因此本发明中还可以采用断续传输的方式来保证备份数据提取的成功。
具体实施时，若接收目标用户的提取指令后，目标用户不在线，分别从存储空间中提取未传输至目标用户的目标数据的不同部分并发送至临时存储空间，直至在临时存储空间中存储完所有为传输至目标用户的目标数据；目标用户上线后，分别从临时存储空间和/或存储空间中提取为传输至目标用户的目标数据的不同部分并发送至目标用户，直至目标数据完整发送至目标用户；目标数据完整发送至目标用户后，将临时存储空间中属于目标数据的部分清除。
由于数据传输是一个持续过程，需要一定的持续时间，因此除了被提取数据的一方以外，还可能存在提取数据的一方离线的情况，此时，也无法完成数据的传输。若采用了其他用户端作为存储空间，则传输双方的用户端同时在线的时间可能并不相同，此时若只从其他用户的存储空间中提取数据并直接传送给目标用户，则可能在传输过程中发生多次断续传输，整个传输过程时间极长，因此，还可以设置云存储器作为临时存储空间，当目标用户不在线时，将还未提取的数据先暂存在临时存储空间中，这样，即使目标用户上线后，即使其他用户的用户端不在线，仍然可以保证数据的完整提取。
最后说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管通过参照本发明的优选实施例已经对本发明进行了描述，但本领域的普通技术人员应当理解，可以在形式上和细节上对其作出各种各样的改变，而不偏离所附权利要求书所限定的本发明的精神和范围。

Claims (4)

1.一种基于云计算的备份数据快速提取方法，其特征在于，目标数据多重备份存储在多个存储空间中，每个存储空间中存储有相同的目标数据；
目标数据的存储方法包括：
获取目标数据；
为目标数据分配多个不同的存储空间；
将目标数据分别存储到每个分配的存储空间中；
为目标数据分配多个不同的存储空间包括：
将目标数据以预设规则划分为多个子数据；
为每个子数据分配不同的存储空间，每个子数据均具有多个不同的存储空间；
将每个子数据存储到分配的存储空间中；
所述基于云计算的备份数据快速提取方法包括：
接收目标用户的提取指令；
基于提取指令查询目标数据的存储空间；
采用多线传输的方式，分别从多个存储空间中提取目标数据的不同部分并发送至目标用户直至目标数据完整发送至目标用户，具体包括如下步骤：
S701、判断存储空间所属的用户端是否在线；
S702、分别从在线的存储空间中提取目标数据的不同部分并向目标用户传输；
S703、判断目标数据是否完整发送至目标用户，若是，结束，若不是，返回步骤S701；
当步骤S701中所有存储空间均不在线时，暂停数据传输，直到任意存储空间上线后，继续数据传输；
若接收目标用户的提取指令后，目标用户不在线，分别从存储空间中提取未传输至目标用户的目标数据的不同部分并发送至临时存储空间，直至在临时存储空间中存储完所有为传输至目标用户的目标数据；目标用户上线后，分别从临时存储空间和/或存储空间中提取为传输至目标用户的目标数据的不同部分并发送至目标用户，直至目标数据完整发送至目标用户；目标数据完整发送至目标用户后，将临时存储空间中属于目标数据的部分清除。
2.如权利要求1所述的基于云计算的备份数据快速提取方法，其特征在于，分配存储空间时，调用存储空间的可用空间大小，若存储空间的可用空间大小大于需要存储的数据的大小，则将所述存储空间分配给所述需要存储的数据。
3.如权利要求2所述的基于云计算的备份数据快速提取方法，其特征在于，当任一存储空间中的数据丢失或损坏时，分配与数据丢失或损坏的存储空间的数量相同的新的存储空间，将丢失或损坏的数据存储至新的存储空间中。
4.如权利要求2所述的基于云计算的备份数据快速提取方法，其特征在于，每个用户的用户端均设有存储空间，目标数据存储在非目标用户的用户端中。
CN202010208146.0A 2020-03-23 2020-03-23 一种基于云计算的备份数据快速提取方法 Active CN111258821B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010208146.0A CN111258821B (zh) 2020-03-23 2020-03-23 一种基于云计算的备份数据快速提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010208146.0A CN111258821B (zh) 2020-03-23 2020-03-23 一种基于云计算的备份数据快速提取方法

Publications (2)

Publication Number Publication Date
CN111258821A CN111258821A (zh) 2020-06-09
CN111258821B true CN111258821B (zh) 2023-08-18

Family

ID=70953167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010208146.0A Active CN111258821B (zh) 2020-03-23 2020-03-23 一种基于云计算的备份数据快速提取方法

Country Status (1)

Country Link
CN (1) CN111258821B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527561B (zh) * 2020-12-09 2021-10-01 广州技象科技有限公司 基于物联网云存储的数据备份方法及装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101902498A (zh) * 2010-07-02 2010-12-01 广州鼎甲计算机科技有限公司 一种基于网络技术的存储云备份方法
CN106484562A (zh) * 2016-09-14 2017-03-08 广东欧珀移动通信有限公司 一种数据传输处理方法及终端设备
CN106484326A (zh) * 2016-09-14 2017-03-08 广东欧珀移动通信有限公司 一种数据传输处理方法及移动终端
CN106502826A (zh) * 2016-10-19 2017-03-15 广东欧珀移动通信有限公司 数据备份及传输方法及移动终端
CN106569913A (zh) * 2016-10-27 2017-04-19 广东欧珀移动通信有限公司 终端备份数据的方法及装置
CN106778355A (zh) * 2017-01-19 2017-05-31 深圳市云点科技有限公司 数据的隔离访问方法和装置
CN106815283A (zh) * 2016-12-02 2017-06-09 乐视控股（北京）有限公司 数据处理方法、装置及电子设备
CN110866018A (zh) * 2019-11-27 2020-03-06 重庆忽米网络科技有限公司 一种基于标签及标识解析的汽摩行业数据录入及检索方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI507891B (zh) * 2012-03-23 2015-11-11 Egis Technology Inc 具雲端儲存空間管理功能之電子裝置、雲端儲存系統、其方法及其電腦程式產品
US10380098B1 (en) * 2015-09-30 2019-08-13 EMC IP Holding Company LLC Fine-grained shared multi-tenant de-duplication system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101902498A (zh) * 2010-07-02 2010-12-01 广州鼎甲计算机科技有限公司 一种基于网络技术的存储云备份方法
CN106484562A (zh) * 2016-09-14 2017-03-08 广东欧珀移动通信有限公司 一种数据传输处理方法及终端设备
CN106484326A (zh) * 2016-09-14 2017-03-08 广东欧珀移动通信有限公司 一种数据传输处理方法及移动终端
CN106502826A (zh) * 2016-10-19 2017-03-15 广东欧珀移动通信有限公司 数据备份及传输方法及移动终端
CN106569913A (zh) * 2016-10-27 2017-04-19 广东欧珀移动通信有限公司 终端备份数据的方法及装置
CN106815283A (zh) * 2016-12-02 2017-06-09 乐视控股（北京）有限公司 数据处理方法、装置及电子设备
CN106778355A (zh) * 2017-01-19 2017-05-31 深圳市云点科技有限公司 数据的隔离访问方法和装置
CN110866018A (zh) * 2019-11-27 2020-03-06 重庆忽米网络科技有限公司 一种基于标签及标识解析的汽摩行业数据录入及检索方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"云备份超混沌加密系统设计与实现全文替换";谢蔚 等;《软件导刊》;第18卷(第2期);第178-181页 *

Also Published As

Publication number Publication date
CN111258821A (zh) 2020-06-09

Similar Documents

Publication Publication Date Title
CN107332876B (zh) 区块链状态的同步方法及装置
CN106911780A (zh) 业务id生成方法、装置及系统
CN111090268B (zh) 基于线程划分的数据采集方法、装置及数据采集设备
CN111447248A (zh) 一种文件传输的方法及装置
CN106844558A (zh) 智能问答方法及系统
CN106202416A (zh) 列表数据写方法和装置、列表数据读取方法和装置
CN110727727A (zh) 一种数据库的统计方法及装置
CN111258821B (zh) 一种基于云计算的备份数据快速提取方法
CN109710502B (zh) 日志传输方法、装置及存储介质
CN110798358B (zh) 分布式服务标识方法、装置、计算机可读介质及电子设备
CN112433757A (zh) 一种确定接口调用关系的方法和装置
CN111309528A (zh) 一种基于云计算及分布式存储的数据协同备份系统及方法
CN105871982A (zh) 内容推送的方法、装置以及系统
CN105162837A (zh) 海量数据存储环境下提升i/o吞吐率的方法及系统
CN114760260A (zh) 消息推送系统及方法、存储介质及电子设备
CN110677497B (zh) 一种网络介质分发方法及装置
CN107704557B (zh) 操作互斥数据的处理方法、装置、计算机设备和存储介质
CN115794876A (zh) 针对业务数据包的分片处理方法、装置、设备及存储介质
CN116542668A (zh) 一种基于区块链的数据处理方法、设备及可读存储介质
CN111881086A (zh) 大数据的存储方法、查询方法、电子装置及存储介质
CN111680018A (zh) 响应请求的方法、装置、设备及可读存储介质
CN113449042B (zh) 数据自动分库方法及装置
CN116028444B (zh) 文件指纹生成方法、装置、系统、电子设备及存储介质
CN115665210B (zh) 一种用户问题处理方法、用户问题处理装置及客服系统
CN116614178A (zh) 一种割接状态确定方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant