CN112148791B - 一种分布式数据动态调整存储方法及系统 - Google Patents

一种分布式数据动态调整存储方法及系统 Download PDF

Info

Publication number
CN112148791B
CN112148791B CN202010965726.4A CN202010965726A CN112148791B CN 112148791 B CN112148791 B CN 112148791B CN 202010965726 A CN202010965726 A CN 202010965726A CN 112148791 B CN112148791 B CN 112148791B
Authority
CN
China
Prior art keywords
storage
storage area
data
fixed
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010965726.4A
Other languages
English (en)
Other versions
CN112148791A (zh
Inventor
张立旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202010965726.4A priority Critical patent/CN112148791B/zh
Publication of CN112148791A publication Critical patent/CN112148791A/zh
Application granted granted Critical
Publication of CN112148791B publication Critical patent/CN112148791B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/602—Providing cryptographic facilities or services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Storage Device Security (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种分布式数据动态调整存储方法，包括以下步骤：将存储系统中各存储设备均划分区域大小可动态互调的固定存储区域和活动存储区域，对固定存储区域的存储数据进行加密保护；统计活动存储区域的剩余存储空间发送至管理服务器；管理服务器接收外部存储请求，在各活动存储区域进行分布式存储；重复执行上一步一设定次数后，对各存储设备的固定存储区域解密；将各存储设备的活动存储区域上权重高于设定权重值的数据包对应的存储空间划入固定存储区域内，对固定存储区域重新加密；采用本发明的方式，能够对数据提供额外的保护，提升加密效果，可应用到更多场合。

Description

一种分布式数据动态调整存储方法及系统
技术领域
本发明涉及分布式数据存储技术领域，更具体地说，涉及一种分布式数据动态调整存储方法及系统。
背景技术
分布式数据存储技术，将整个数据进行拆分为多个数据包后分散到多个存储器进行存储，能够大幅提升资源利用率以及存储速率；目前，针对于一些需要对重要数据加密保护的情景，采用现有的分布式存储方式大都仅仅只能针对数据本身进行单重加密，加密强度较弱，适用场合限制性较大。
发明内容
本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种分布式数据动态调整存储方法，还提供了一种分布式数据动态调整存储系统。
本发明解决其技术问题所采用的技术方案是：
构造一种分布式数据动态调整存储方法，其中，包括以下步骤：
第一步：将存储系统中各存储设备均划分区域大小可动态互调的固定存储区域和活动存储区域，对固定存储区域的存储数据进行加密保护；
第二步：统计活动存储区域的剩余存储空间发送至管理服务器；
第三步：管理服务器接收外部存储请求，在各活动存储区域进行分布式存储；
第四步：重复执行第三步一设定次数后，对各存储设备的固定存储区域解密；
第五步：将各存储设备的活动存储区域上权重高于设定权重值的数据包对应的存储空间划入固定存储区域内，对固定存储区域重新加密。
本发明所述的分布式数据动态调整存储方法，其中，还包括方法：重复所述第二步到所述第五步，至所述存储系统无法继续存储，向所述管理服务器发出缺少存储空间反馈。
本发明所述的分布式数据动态调整存储方法，其中，所述第三步中还包括方法：进行分布式存储时对权重高于设定权重值的数据包进行加密。
本发明所述的分布式数据动态调整存储方法，其中，还包括方法：向所述管理服务器发送读取请求，所述管理服务器查询数据存储位置，若数据存储在活动存储区域则可直接访问，若数据存储在固定存储区域则需要额外的动态解密指令对固定存储区域临时解密。
本发明所述的分布式数据动态调整存储方法，其中，所述第三步中还包括方法：所述管理服务器接收外部增加权重指令，增加所述活动存储区域内的指定存储数据的权重值，使其超过设定权重值。
本发明所述的分布式数据动态调整存储方法，其中，还包括方法：设置加密的冗余存储器对固定存储区域的数据进行冗余存储保护。
一种分布式数据动态调整存储系统，根据上述的分布式数据动态调整存储方法，其中，包括管理服务器和存储系统；
所述存储系统包括多个存储设备、加解密单元和动态调节单元；所述存储设备上划分有区域大小可动态互调的固定存储区域和活动存储区域；
所述加解密单元，用于在进行设定次数的数据存储后对所述存储设备上的固定存储区域进行加解密动作；
所述动态调节单元，用于在进行设定次数的数据存储后对所述存储设备上的固定存储区域和活动存储区域的区域大小动态调节；
所述管理服务器，用于接收外部存储请求并对所述存储系统进行分布式存储的管理控制。
本发明所述的分布式数据动态调整存储系统，其中，所述存储系统还包括加密的冗余存储器，所述冗余存储器用于对固定存储区域的数据进行冗余存储保护。
本发明的有益效果在于：采用本发明的方式，开创性的针对存储设备本身设置动态调节的分区，对于权重高的数据可以快速的进行分区动态调节而将数据挪动到固定存储区域，而后对整个区域进行加密保护，能够对数据提供额外的保护，提升加密效果，可应用到更多场合。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将结合附图及实施例对本发明作进一步说明，下面描述中的附图仅仅是本发明的部分实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他附图：
图1是本发明较佳实施例的分布式数据动态调整存储方法流程图；
图2是本发明较佳实施例的分布式数据动态调整存储系统原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的部分实施例，而不是全部实施例。基于本发明的实施例，本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明的保护范围。
本发明较佳实施例的分布式数据动态调整存储方法，如图1所示，包括以下步骤：
S01：将存储系统中各存储设备均划分区域大小可动态互调的固定存储区域和活动存储区域，对固定存储区域的存储数据进行加密保护；
S02：统计活动存储区域的剩余存储空间发送至管理服务器；
S03：管理服务器接收外部存储请求，在各活动存储区域进行分布式存储；
S04：重复执行S03一设定次数后，对各存储设备的固定存储区域解密；
S05：将各存储设备的活动存储区域上权重高于设定权重值的数据包对应的存储空间划入固定存储区域内，对固定存储区域重新加密；
采用本发明的方式，开创性的针对存储设备本身设置动态调节的分区，对于权重高的数据可以快速的进行分区动态调节而将数据挪动到固定存储区域，而后对整个区域进行加密保护，能够对数据提供额外的保护，提升加密效果，可应用到更多场合。
优选的，还包括方法：重复第二步到第五步，至存储系统无法继续存储，向管理服务器发出缺少存储空间反馈；避免出现死循环，同时便于存储不足时进行提醒。
优选的，第三步中还包括方法：进行分布式存储时对权重高于设定权重值的数据包进行加密；便于对数据单独进行加密，保障安全性。
优选的，还包括方法：向管理服务器发送读取请求，管理服务器查询数据存储位置，若数据存储在活动存储区域则可直接访问，若数据存储在固定存储区域则需要额外的动态解密指令对固定存储区域临时解密；便于对普通数据进行快速访问，对重要数据的则访问保密，提高数据管理的便捷性。
优选的，第三步中还包括方法：管理服务器接收外部增加权重指令，增加活动存储区域内的指定存储数据的权重值，使其超过设定权重值；便于快速的将普通数据在存储状态下进行升级为重要数据，提高操作的便捷性。
优选的，还包括方法：设置加密的冗余存储器对全部固定存储区域的数据进行冗余存储保护；进一步对重要数据进行防丢失保护。
一种分布式数据动态调整存储系统，根据上述的分布式数据动态调整存储方法，如图2所示，包括管理服务器1和存储系统2；
存储系统2包括多个存储设备20、加解密单元21和动态调节单元22；存储设备上划分有区域大小可动态互调的固定存储区域和活动存储区域；
加解密单元21，用于在进行设定次数的数据存储后对存储设备上的固定存储区域进行加解密动作；
动态调节单元22，用于在进行设定次数的数据存储后对存储设备上的固定存储区域和活动存储区域的区域大小动态调节；
管理服务器1，用于接收外部存储请求并对存储系统2进行分布式存储的管理控制；
采用本发明的方式，开创性的针对存储设备本身设置动态调节的分区，对于权重高的数据可以快速的进行分区动态调节而将数据挪动到固定存储区域，而后对整个区域进行加密保护，能够对数据提供额外的保护，提升加密效果，可应用到更多场合。
优选的，存储系统2还包括加密的冗余存储器23，冗余存储器23用于对固定存储区域的数据进行冗余存储保护；便于进一步对重要数据进行防丢失保护。
应当理解的是，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (2)

1.一种分布式数据动态调整存储方法，其特征在于，包括以下步骤：
第一步：将存储系统中各存储设备均划分区域大小可动态互调的固定存储区域和活动存储区域，对固定存储区域的存储数据进行加密保护；
第二步：统计活动存储区域的剩余存储空间发送至管理服务器；
第三步：管理服务器接收外部存储请求，在各活动存储区域进行分布式存储；
第四步：重复执行第三步一设定次数后，对各存储设备的固定存储区域解密；
第五步：将各存储设备的活动存储区域上权重高于设定权重值的数据包对应的存储空间划入固定存储区域内，对固定存储区域重新加密；
重复所述第二步到所述第五步，至所述存储系统无法继续存储，向所述管理服务器发出缺少存储空间反馈；
所述第三步中还包括方法：进行分布式存储时对权重高于设定权重值的数据包进行加密；
还包括方法：向所述管理服务器发送读取请求，所述管理服务器查询数据存储位置，若数据存储在活动存储区域则可直接访问，若数据存储在固定存储区域则需要额外的动态解密指令对固定存储区域临时解密；
所述第三步中还包括方法：所述管理服务器接收外部增加权重指令，增加所述活动存储区域内的指定存储数据的权重值，使其超过设定权重值；
还包括方法：设置加密的冗余存储器对固定存储区域的数据进行冗余存储保护。
2.一种分布式数据动态调整存储系统，根据权利要求1所述的分布式数据动态调整存储方法，其特征在于，包括管理服务器和存储系统；
所述存储系统包括多个存储设备、加解密单元和动态调节单元；所述存储设备上划分有区域大小可动态互调的固定存储区域和活动存储区域；
所述加解密单元，用于在进行设定次数的数据存储后对所述存储设备上的固定存储区域进行加解密动作；
所述动态调节单元，用于在进行设定次数的数据存储后对所述存储设备上的固定存储区域和活动存储区域的区域大小动态调节；
所述管理服务器，用于接收外部存储请求并对所述存储系统进行分布式存储的管理控制；
所述存储系统还包括加密的冗余存储器，所述冗余存储器用于对固定存储区域的数据进行冗余存储保护。
CN202010965726.4A 2020-09-15 2020-09-15 一种分布式数据动态调整存储方法及系统 Active CN112148791B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010965726.4A CN112148791B (zh) 2020-09-15 2020-09-15 一种分布式数据动态调整存储方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010965726.4A CN112148791B (zh) 2020-09-15 2020-09-15 一种分布式数据动态调整存储方法及系统

Publications (2)

Publication Number Publication Date
CN112148791A CN112148791A (zh) 2020-12-29
CN112148791B true CN112148791B (zh) 2024-05-24

Family

ID=73893773

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010965726.4A Active CN112148791B (zh) 2020-09-15 2020-09-15 一种分布式数据动态调整存储方法及系统

Country Status (1)

Country Link
CN (1) CN112148791B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201518127U (zh) * 2009-10-13 2010-06-30 航天信息股份有限公司 基于口令认证的加密型移动存储器
CN102521166A (zh) * 2011-12-05 2012-06-27 苏州希图视鼎微电子有限公司 信息安全协处理器及其内部存储空间的管理方法
CN103077121A (zh) * 2013-01-07 2013-05-01 深圳市江波龙电子有限公司 一种闪存存储设备中数据管理的方法及装置
CN103246852A (zh) * 2013-05-07 2013-08-14 珠海全志科技股份有限公司 加密数据的存取方法及装置
CN103793334A (zh) * 2014-01-14 2014-05-14 上海上讯信息技术股份有限公司 基于移动存储设备的数据保护方法及移动存储设备
CN104462999A (zh) * 2014-12-12 2015-03-25 北京航星机器制造有限公司 Fat32文件系统数据加密方法
CN106650499A (zh) * 2016-12-28 2017-05-10 江苏神州信源系统工程有限公司 一种基于安卓系统的外部数据安全保护方法
CN107111450A (zh) * 2014-10-24 2017-08-29 微软技术许可有限责任公司 使用分区表进行的磁盘分区拼接和重新均衡
CN107516051A (zh) * 2017-09-05 2017-12-26 深圳市影踪科技有限公司 一种数据加密存储方法、装置及计算机可读存储介质
CN110300134A (zh) * 2018-03-22 2019-10-01 杭州海康威视系统技术有限公司 云存储资源池的存储空间调整方法、装置及云存储系统
CN110750211A (zh) * 2019-09-05 2020-02-04 华为技术有限公司 一种存储空间的管理方法及装置
CN111557003A (zh) * 2018-12-10 2020-08-18 都市猫有限公司 利用安全终端的存储装置的数据安全管理系统及方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846411B2 (en) * 2015-09-25 2020-11-24 Mongodb, Inc. Distributed database systems and methods with encrypted storage engines
US11171671B2 (en) * 2019-02-25 2021-11-09 Samsung Electronics Co., Ltd. Reducing vulnerability window in key value storage server without sacrificing usable capacity

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201518127U (zh) * 2009-10-13 2010-06-30 航天信息股份有限公司 基于口令认证的加密型移动存储器
CN102521166A (zh) * 2011-12-05 2012-06-27 苏州希图视鼎微电子有限公司 信息安全协处理器及其内部存储空间的管理方法
CN103077121A (zh) * 2013-01-07 2013-05-01 深圳市江波龙电子有限公司 一种闪存存储设备中数据管理的方法及装置
CN103246852A (zh) * 2013-05-07 2013-08-14 珠海全志科技股份有限公司 加密数据的存取方法及装置
CN103793334A (zh) * 2014-01-14 2014-05-14 上海上讯信息技术股份有限公司 基于移动存储设备的数据保护方法及移动存储设备
CN107111450A (zh) * 2014-10-24 2017-08-29 微软技术许可有限责任公司 使用分区表进行的磁盘分区拼接和重新均衡
CN104462999A (zh) * 2014-12-12 2015-03-25 北京航星机器制造有限公司 Fat32文件系统数据加密方法
CN106650499A (zh) * 2016-12-28 2017-05-10 江苏神州信源系统工程有限公司 一种基于安卓系统的外部数据安全保护方法
CN107516051A (zh) * 2017-09-05 2017-12-26 深圳市影踪科技有限公司 一种数据加密存储方法、装置及计算机可读存储介质
CN110300134A (zh) * 2018-03-22 2019-10-01 杭州海康威视系统技术有限公司 云存储资源池的存储空间调整方法、装置及云存储系统
CN111557003A (zh) * 2018-12-10 2020-08-18 都市猫有限公司 利用安全终端的存储装置的数据安全管理系统及方法
CN110750211A (zh) * 2019-09-05 2020-02-04 华为技术有限公司 一种存储空间的管理方法及装置

Also Published As

Publication number Publication date
CN112148791A (zh) 2020-12-29

Similar Documents

Publication Publication Date Title
EP2955900B1 (en) File sharing method and device
US9397834B2 (en) Scrambling an address and encrypting write data for storing in a storage device
US11397820B2 (en) Method and apparatus for processing data, computer device and storage medium
US20030081790A1 (en) System for ensuring data privacy and user differentiation in a distributed file system
US20170163413A1 (en) System and Method for Content Encryption in a Key/Value Store
US20140331061A1 (en) Drive level encryption key management in a distributed storage system
WO2021129557A1 (zh) 一种文件加密方法及相关装置
WO2008068655A2 (en) Privacy enhanced comparison of data sets
US20120166793A1 (en) Apparatus and method for sharing and using comment on content in distributed network system
CN110688666A (zh) 一种分布式存储中数据加密保存方法
KR20080029687A (ko) 암호화 기능이 내장된 메모리를 이용한 고속 대용량의암호화 장치 및 그 구현 방법
US20210312091A1 (en) Multi-master security circuit
US20210232509A1 (en) Storage Controller, And File Processing Method, Apparatus, And System
WO2020027984A1 (en) Dynamic cryptographic key expansion
CN112148791B (zh) 一种分布式数据动态调整存储方法及系统
CN113836553A (zh) 一种密码算法动态重构的分布式存储数据保护方法
KR100594886B1 (ko) 데이터베이스 보안 시스템 및 방법
KR101374594B1 (ko) 클라우드 스토리지를 위한 보안 시스템 및 그 운용 방법
CN113297611A (zh) 数据处理、加密存储、读取方法、设备及存储介质
KR20170081506A (ko) 부분 데이터 암호를 이용한 데이터 저장 장치 및 방법
CN112487445B (zh) 一种文件型门卫式存储加密功能的Hadoop系统及其应用方法
US20220085983A1 (en) Encryption keys from storage systems
US9514315B2 (en) Information processing system and control method of information processing system
CN108616537B (zh) 一种低耦合的通用数据加解密方法及系统
KR101663632B1 (ko) 데이터베이스 암호화를 지원하는 스토리지 서비스 제공 서버 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant