CN117828649B - 一种微数据中心系统 - Google Patents

一种微数据中心系统 Download PDF

Info

Publication number
CN117828649B
CN117828649B CN202410252347.9A CN202410252347A CN117828649B CN 117828649 B CN117828649 B CN 117828649B CN 202410252347 A CN202410252347 A CN 202410252347A CN 117828649 B CN117828649 B CN 117828649B
Authority
CN
China
Prior art keywords
data
encryption
processed
acquisition unit
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202410252347.9A
Other languages
English (en)
Other versions
CN117828649A (zh
Inventor
王海川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Pakenai Technology Co ltd
Original Assignee
Tianjin Pakenai Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Pakenai Technology Co ltd filed Critical Tianjin Pakenai Technology Co ltd
Priority to CN202410252347.9A priority Critical patent/CN117828649B/zh
Publication of CN117828649A publication Critical patent/CN117828649A/zh
Application granted granted Critical
Publication of CN117828649B publication Critical patent/CN117828649B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/64Protecting data integrity, e.g. using checksums, certificates or signatures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Storage Device Security (AREA)

Abstract

本发明涉及数据处理技术领域,公开了一种微数据中心系统,包括:数据加密装置和管理装置,其中数据加密装置包括采集模块、第一加密模块、第二加密模块和存储模块,管理装置包括采集单元、判断单元和处理单元。采集单元采集待处理数据的数据来源确定加密等级。当判定待处理数据为第一加密等级时,验证待处理数据的完整性。当采集单元判定待处理数据的数据完整时,确定待处理数据的使用评分判断是否对待处理数据的加密等级进行调整。判断单元根据加密等级确定加密策略。处理单元将加密后的数据存储至存储模块。本发明提升了微数据中心系统在加密存储实时数据时的安全性和效率,实现了数据安全与高效处理,降低了数据丢失风险。

Description

一种微数据中心系统
技术领域
本发明涉及数据处理技术领域,具体而言,涉及一种微数据中心系统。
背景技术
微数据中心系统(Micro Data Center, MDC)是随着云计算、物联网、边缘计算以及对数据处理需求日益增长的背景下应运而生的技术解决方案。它提供了一种分散的、接近数据源的计算和存储方式,以支持需要低延迟、高带宽和本地数据处理的应用场景。微数据中心可以处理来自生产线上各种传感器和机器的实时数据,如温度、压力、速度等参数,实时监控设备状态和生产过程。
当前,分层加密作为一种高效的数据保护策略被广泛采用。通过对不同敏感级别的数据应用不同强度的加密措施,对于常规数据,采用标准的单一加密方法足以满足基本的安全需求,对于涉密或高敏感性的数据,实施更为严格的二次加密措施。然而,传统的加密方式在处理大量数据时可能面临效率低下的问题。传统加密方法可能导致数据加密时间过长,延迟了数据的存储和后续处理,进而影响到生产决策的及时性,甚至可能造成实时监控数据的缺失,增加生产风险。
因此,有必要提供一种微数据中心系统用以解决当前技术中存在的问题。
发明内容
鉴于此,本发明提出了一种微数据中心系统,旨在解决当前微数据中心系统在对大量数据进行加密时存在的加密存储时间长、效率低下易造成数据缺失的问题。
本发明提出了一种微数据中心系统,包括:
数据加密装置和管理装置,其中所述数据加密装置包括采集模块、第一加密模块、第二加密模块和存储模块,所述第一加密模块和第二加密模块对所述采集模块获取的待处理数据进行加密并将加密后的数据存储至所述存储模块;所述管理装置包括采集单元、判断单元和处理单元,所述管理装置用于对所述数据加密装置加密时进行控制;其中,
所述采集单元,被配置为采集所述采集模块获取的所述待处理数据的数据来源,根据所述数据来源确定加密等级,所述加密等级包括第一等级和第二等级;
所述采集单元还被配置为当判定所述待处理数据为第一加密等级时,验证所述待处理数据的完整性;当所述采集单元判定所述待处理数据的数据完整时,所述采集单元还被配置为确定所述待处理数据的使用评分,根据所述使用评分判断是否对所述待处理数据的加密等级进行调整;
所述判断单元,被配置为当所述采集单元确定所述待处理数据的加密等级后,所述判断单元根据所述加密等级确定加密策略;当所述待处理数据为第一等级时,所述判断单元对所述待处理数据进行分段处理,并进行分段加密;
所述处理单元,被配置为当所述判断单元确定所述加密策略并对所述待处理数据进行加密后,所述处理单元将加密后的数据存储至所述存储模块。
进一步的,所述采集单元根据所述数据来源确定加密等级时,包括:
当所述待处理数据的数据来源为设备运行信息以及财务信息时,所述采集单元将所述待处理数据判定为第一等级;
当所述待处理数据的数据来源非设备运行信息以及财务信息时,所述采集单元将所述待处理数据判定为第二等级。
进一步的,当所述采集单元判定所述待处理数据为第一等级时,所述采集单元验证所述待处理数据的完整性时,包括:
所述采集单元计算所述待处理数据的实时哈希值,将所述实时哈希值与数据产生时的历史哈希值进行比对,根据比对结果判断所述待处理数据的完整性;
当所述实时哈希值与所述历史哈希值相同时,所述采集单元判定所述待处理数据的数据完整;
当所述实时哈希值与所述历史哈希值不同时,所述采集单元判定所述待处理数据的数据不完整。
进一步的,当所述采集单元判定所述待处理数据的数据完整时,所述采集单元确定所述待处理数据的使用评分时,包括:
采集所述待处理数据的存储频率Hz,将所述存储频率Hz与预先设定的第一预设频率Hz1和第二预设频率Hz2进行比对,Hz1<Hz2,根据比对结果确定所述待处理数据的使用评分P;
当Hz≤Hz1时,所述采集单元确定所述待处理数据的使用评分为第一预设使用评分P1;
当Hz1<Hz≤Hz2时,所述采集单元确定所述待处理数据的使用评分为第二预设使用评分P2;
当Hz2<Hz时,所述采集单元确定所述待处理数据的使用评分为第三预设使用评分P3;
其中,P1<P2<P3。
进一步的,当所述采集单元确定所述待处理数据的使用评分为第i预设使用评分Pi后,i=1,2,3,所述采集单元还包括:
预先设定第一预设调整系数A1、第二预设调整系数A2和第三预设调整系数A3,且0<A1<A2<A3<1.2;采集所述待处理数据的使用频率Hs,将所述使用频率Hs与预先设定的第一预设使用频率Hs1和第二预设使用频率Hs2进行比对,Hs1<Hs2,根据比对结果选取调整系数对所述使用评分Pi进行调整,获取调整后的使用评分,并以所述调整后的使用评分继续运行;
当Hs≤Hs1时,所述采集单元选取所述第一预设调整系数A1对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A1;
当Hs1<Hs≤Hs2时,所述采集单元选取所述第二预设调整系数A2对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A2;
当Hs2<Hs时,所述采集单元选取所述第三预设调整系数A3对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A3。
进一步的,当所述采集单元选取第i预设调整系数Ai对所述使用评分Pi进行调整,获取调整后的使用评分Pi*Ai后,i=1,2,3,所述采集单元根据所述使用评分判断是否对所述待处理数据的加密等级进行调整时,包括;
所述采集单元将所述调整后的使用评分Pi*Ai与预先设定的标准评分P0进行比对,根据比对结果对所述待处理数据的加密等级进行调整;
当Pi*Ai≥P0时,所述采集单元将所述加密等级调低一级,即当所述加密等级为第一等级时,将所述第一等级调整为所述第二等级,当所述加密等级为第二等级时维持不变;
当Pi*Ai<P0时,所述采集单元不对所述加密等级进行调整。
进一步的,当所述采集单元确定所述待处理数据的加密等级后,所述判断单元根据所述加密等级确定加密策略时,包括:
当所述加密等级为所述第一等级时,所述判断单元判定使用分段加密对所述待处理数据进行加密,即所述第一加密模块和所述第二加密模块共同对所述待处理数据进行加密;
当所述加密等级为所述第二等级时,所述判断单元判定使用直接加密对所述待处理数据进行加密,即所述第一加密模块对所述待处理数据进行加密。
进一步的,当所述判断单元判定对所述待处理数据进行分段加密时,所述判断单元还包括:
对所述待处理数据进行识别并分段;
将所述待处理数据中表格、数据与图形划分为第二待加密段;
将所述待处理数据中非表格、非数据且非图形划分为第一待加密段;
所述判断单元控制所述第一加密模块对所述第一待加密段进行加密,并控制所述第二加密模块对所述第二待加密段进行加密。
进一步的,当所述判断单元确定所述加密策略并对所述待处理数据进行加密后,所述处理单元将加密后的数据存储至所述存储模块时,包括:
所述处理单元采集所述第一待加密段的第一数据量L1,采集所述第二待加密段的第二数据量L2,获取数据量之比Q0,Q0=L1/L2,将所述数据量之比Q0与第一预设数据量之比与预先设定的第一预设数据量之比Q1和第二预设数据量之比Q2进行比对,Q1<Q2,根据比对结果确定所述第一加密模块和第二加密模块将数据存储至所述存储模块的传输通道占比Z;
当Q0≤Q1时,所述处理单元确定所述传输通道占比Z为第一预设传输通道占比Z1;
当Q1<Q0≤Q2时,所述处理单元确定所述传输通道占比Z为第二预设传输通道占比Z2;
当Q2<Q0时,所述处理单元确定所述传输通道占比Z为第三预设传输通道占比Z3;
其中,Z1<Z2<Z3。
进一步的,当所述处理单元确定所述传输通道占比Z为第i预设传输通道占比Zi后,i=1,2,3,所述处理单元还用于:
预先设定第一预设修正系数B1和第二预设修正系数B2,且0<B1<1<B2<1.2;所述处理单元采集第一加密段的实时存储速度Z1和第二加密段的实时存储速度Z2,获取速度差值ΔZ,ΔZ=Z2-Z1,根据所述速度差值ΔZ对所述传输通道占比Zi进行调整,并以调整后的传输通道占比继续运行;
当ΔZ>0时,选取所述第二预设修正系数B2对所述传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B2;
当ΔZ<0时,选取所述第一预设修正系数B1对所述传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B1;
当ΔZ=0时,不对所述传输通道占比Zi进行调整,并将原传输通道占比Zi作为所述调整后的传输通道占比。
与现有技术相比,本发明的有益效果在于:通过采集单元的智能数据来源识别和完整性验证,结合判断单元的加密等级确定和加密策略制定,以及处理单元的高效数据加密处理,能够针对不同敏感级别的数据实施最适合的加密措施。特别是对于高敏感性数据的分段加密和对常规数据的标准加密,确保了数据的安全性,同时通过对高敏感性数据进行分段处理和分段加密,显著提高了数据处理的效率,减少了加密时间,避免了实时监控数据的缺失,从而保障了生产决策的及时性和降低了生产风险。还能根据数据的使用评分动态调整加密等级,进一步优化了数据处理流程,实现了数据安全与数据高效处理。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本发明实施例提供的微数据中心系统的结构框图;
图2为本发明实施例提供的数据加密装置和管理装置的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整地传达给本领域的技术人员。需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
微数据中心系统在工厂环境中的部署,尤其是在处理与生产线直接相关的实时参数时,对数据安全性的要求极高。这些实时参数包括机器的运行状态、生产质量监控数据、环境监测数据以及企业财务数据等,它们对于保障生产流程的顺畅、及时调整生产策略以及确保工人安全都至关重要。因此,保护这些数据不被未经授权的访问、篡改或泄露是微数据中心管理中的一个核心任务。
然而,传统的加密方式在处理大量数据时可能面临效率低下的问题。工厂生产线生成的数据量巨大,对实时处理和分析的需求更是前所未有。传统加密方式对数据处理的硬件要求较高且对数据加密时间较长,延长了数据存储时长,无法实时完成存储,易造成实时数据缺失。因此,有必要设计一种微数据中心系统用以改变当前困境。
在本申请的一些实施例中,参阅图1-2所示,本实施例提供了一种微数据中心系统,包括:数据加密装置和管理装置,其中数据加密装置包括采集模块、第一加密模块、第二加密模块和存储模块,第一加密模块和第二加密模块对采集模块获取的待处理数据进行加密并将加密后的数据存储至存储模块。管理装置包括采集单元、判断单元和处理单元,管理装置用于对数据加密装置加密时进行控制。其中,
采集单元被配置为采集采集模块获取的待处理数据的数据来源,根据数据来源确定加密等级,加密等级包括第一等级和第二等级。
采集单元还被配置为当判定待处理数据为第一加密等级时,验证待处理数据的完整性。当采集单元判定待处理数据的数据完整时,采集单元还被配置为确定待处理数据的使用评分,根据使用评分判断是否对待处理数据的加密等级进行调整。
判断单元被配置为当采集单元确定待处理数据的加密等级后,判断单元根据加密等级确定加密策略。当待处理数据为第一等级时,判断单元对待处理数据进行分段处理,并进行分段加密。
处理单元被配置为当判断单元确定加密策略并对待处理数据进行加密后,处理单元将加密后的数据存储至存储模块。
在本申请的一些实施例中,采集单元根据数据来源确定加密等级时,包括:当待处理数据的数据来源为设备运行信息以及财务信息时,采集单元将待处理数据判定为第一等级。当待处理数据的数据来源非设备运行信息以及财务信息时,采集单元将待处理数据判定为第二等级。
具体而言,数据加密装置负责处理和加密数据,包含四个主要模块。采集模块:负责获取待处理的数据。第一加密模块:对特定级别的数据(第一等级)执行加密操作。第二加密模块:对另一级别的数据(第二等级)执行加密操作。存储模块:存储经过加密的数据。管理装置控制数据加密及存储过程,包含三个单元。采集单元:识别数据来源和类型,基于此确定数据的加密等级,并进行数据完整性验证及使用评分,以决定是否需要调整加密等级。判断单元:基于采集单元的判断,为待处理数据确定适当的加密策略,并在必要时对数据进行分段处理,以便进行分段加密。处理单元:负责将加密后的数据存储到存储模块。
可以理解的是,通过根据数据的来源敏感性来确定加密等级,为不同类型的数据提供量身定制的保护,确保敏感数据获得足够的安全措施,同时优化处理效率。支持对实时数据进行快速加密和存储,减少了加密和存储的延迟,确保实时监控和生产决策的数据需求得到满足。通过验证数据的完整性,增强了对数据安全的保护,确保数据在加密前未被篡改。根据数据的使用评分和重要性,能够动态调整加密等级,进一步提升了数据处理的灵活性和安全性。
在本申请的一些实施例中,当采集单元判定待处理数据为第一等级时,采集单元验证待处理数据的完整性时,包括:采集单元计算待处理数据的实时哈希值,将实时哈希值与数据产生时的历史哈希值进行比对,根据比对结果判断待处理数据的完整性。
具体而言,当实时哈希值与历史哈希值相同时,采集单元判定待处理数据的数据完整。当实时哈希值与历史哈希值不同时,采集单元判定待处理数据的数据不完整。
可以理解的是,哈希函数能将任意长度的输入数据转换成固定长度的输出串(哈希值),并且这一过程具有高度的敏感性,即输入数据的微小变化都会导致输出的哈希值产生显著不同。因此,通过比较数据的当前哈希值与其在产生时计算得到的历史哈希值,可以有效判断数据自产生以来是否被篡改。当待处理数据被判定为第一等级(即敏感或需要高度保护的数据)时,采集单元首先计算该数据的实时哈希值,然后将这个实时计算出的哈希值与数据产生时计算并存储的历史哈希值进行比较。如果两个哈希值相同,说明待处理数据自产生以来未发生变化,数据完整;如果两个哈希值不同,则说明数据可能在传输或存储过程中被篡改,数据不完整。通过及时发现数据完整性问题,防止受损或篡改的数据被错误地加密存储或使用,从而确保加密策略的有效性和数据使用的安全性。此外,对第一等级数据的严格完整性验证进一步强化了系统对敏感数据的保护,确保只有完整无损的数据才被处理和存储,从而维护了整个微数据中心系统的数据安全和处理效率,支持了高效和安全的数据管理和决策。
在本申请的一些实施例中,当采集单元判定待处理数据的数据完整时,采集单元确定待处理数据的使用评分时,包括:采集待处理数据的存储频率Hz,将存储频率Hz与预先设定的第一预设频率Hz1和第二预设频率Hz2进行比对,Hz1<Hz2,根据比对结果确定待处理数据的使用评分P。
具体而言,当Hz≤Hz1时,采集单元确定待处理数据的使用评分为第一预设使用评分P1。当Hz1<Hz≤Hz2时,采集单元确定待处理数据的使用评分为第二预设使用评分P2。当Hz2<Hz时,采集单元确定待处理数据的使用评分为第三预设使用评分P3。其中,P1<P2<P3。
可以理解的是,待处理数据的存储频率为同一数据来源类型相似数据的存储频率,例如财务报表,设备运行时长等数据。通过基于存储频率的数据使用评分机制,能够动态地识别和优先处理最重要或最频繁使用的数据。有助于优化存储资源的分配,确保关键数据能够快速访问,而且还能提高数据处理效率,减少对不常用数据的不必要操作。此外,还能为数据的备份和恢复策略提供参考,优先保护和恢复评分高的数据,从而提高系统的鲁棒性和业务连续性。基于使用评分的数据处理策略与微数据中心系统的分层加密和管理装置相结合,形成了一个高效、安全且自适应的数据管理框架。通过智能地评估数据的重要性和使用频率,不仅能够提供针对性的数据保护措施,还能确保数据加密和存储过程的高效性。适合于处理大规模、动态变化的数据环境,如工厂生产线数据,能够有效支持实时数据处理和决策,增强整个微数据中心系统的性能和安全性。
在本申请的一些实施例中,当采集单元确定待处理数据的使用评分为第i预设使用评分Pi后,i=1,2,3,采集单元还包括:预先设定第一预设调整系数A1、第二预设调整系数A2和第三预设调整系数A3,且0<A1<A2<A3<1.2。采集待处理数据的使用频率Hs,将使用频率Hs与预先设定的第一预设使用频率Hs1和第二预设使用频率Hs2进行比对,Hs1<Hs2,根据比对结果选取调整系数对使用评分Pi进行调整,获取调整后的使用评分,并以调整后的使用评分继续运行。
具体而言,当Hs≤Hs1时,采集单元选取第一预设调整系数A1对使用评分Pi进行调整,获取调整后的使用评分Pi*A1。当Hs1<Hs≤Hs2时,采集单元选取第二预设调整系数A2对使用评分Pi进行调整,获取调整后的使用评分Pi*A2。当Hs2<Hs时,采集单元选取第三预设调整系数A3对使用评分Pi进行调整,获取调整后的使用评分Pi*A3。
可以理解的是,待处理数据的使用频率为同一数据来源类型相似数据的解密使用频率。基于使用频率动态调整使用评分的方法使得数据管理和加密策略更加灵活和精确,能够根据数据的实际使用情况和重要性,动态调整其安全性和加密等级。有助于优化存储资源的使用,提高数据访问的效率,而且还能确保关键数据得到适当的保护和快速访问,支持实时数据分析和决策。
在本申请的一些实施例中,当采集单元选取第i预设调整系数Ai对使用评分Pi进行调整,获取调整后的使用评分Pi*Ai后,i=1,2,3,采集单元根据使用评分判断是否对待处理数据的加密等级进行调整时,包括;采集单元将调整后的使用评分Pi*Ai与预先设定的标准评分P0进行比对,根据比对结果对待处理数据的加密等级进行调整。
具体而言,当Pi*Ai≥P0时,采集单元将加密等级调低一级,即当加密等级为第一等级时,将第一等级调整为第二等级,当加密等级为第二等级时维持不变。当Pi*Ai<P0时,采集单元不对加密等级进行调整。
可以理解的是,高频率使用和采集的数据往往需要快速处理和访问。调低加密等级可以减少加密和解密所需的时间,从而提高数据处理的效率和系统的响应速度,对于实时或准实时应用尤为重要。加密和解密操作尤其是高等级加密算法,通常比较资源密集,会消耗大量的计算资源。在资源受限的环境下,对高频率使用的数据采用较低等级的加密可以更有效地利用可用资源,确保系统能够平滑运行。根据数据的实际使用模式和重要性动态调整加密策略,既保障了数据的安全性,又提高了数据处理和访问的效率。通过智能化的调整机制,微数据中心系统能够更有效地支持实时数据处理和分析需求。
在本申请的一些实施例中,当采集单元确定待处理数据的加密等级后,判断单元根据加密等级确定加密策略时,包括:当加密等级为第一等级时,判断单元判定使用分段加密对待处理数据进行加密,即第一加密模块和第二加密模块共同对待处理数据进行加密。当加密等级为第二等级时,判断单元判定使用直接加密对待处理数据进行加密,即第一加密模块对待处理数据进行加密。
可以理解的是,对于第一等级的数据,系统采用分段加密的方法进行加密。数据被分割成多个段,每个段独立地由第一加密模块或第二加密模块加密。第二加密模块加密运算方式比第一加密模块更为复杂。这样做可以并行处理数据的不同部分,显著提高加密速度,同时保持了较高的数据安全性。对于第二等级的数据,采用直接加密的方法,仅使用第一加密模块对整个数据进行一次性加密处理。这种方法适用于对保密性要求不是特别高的情况,不需要额外的加密处理。采用分段加密策略特别适合处理大量或高敏感性的数据,能够有效提高加密速度和数据处理效率。允许系统更灵活地应对不同类型的数据安全需求,对于需要快速处理的高敏感性数据,通过分段并行加密能够显著缩短处理时间,确保数据快速安全地存储和传输。在需要实时处理大量数据的应用场景中,如实时监控系统、大规模物联网设备数据收集等,分段加密能够确保数据在传输或存储过程中的安全,同时满足系统对高效性的要求。这种策略的实施,体现了智能化数据管理和安全保护的结合,提高了微数据中心系统的整体性能和可靠性。
在本申请的一些实施例中,当判断单元判定对待处理数据进行分段加密时,判断单元还包括:对待处理数据进行识别并分段。将待处理数据中表格、数据与图形划分为第二待加密段。将待处理数据中非表格、非数据且非图形划分为第一待加密段。判断单元控制第一加密模块对第一待加密段进行加密,并控制第二加密模块对第二待加密段进行加密。
可以理解的是,使用卷积神经网络(CNN)等深度学习模型识别图像中的模式和对象,包括表格、数据和图形。训练模型后识别不同类型的图表和图形,如柱状图、饼图等,并从中提取数据。将数据中的表格、数据和图形划分为第二待加密段,而将非表格、非数据和非图形的内容划分为第一待加密段。这种分段依据数据内容的具体类型,旨在根据数据的不同特性和敏感度采用最合适的加密策略。通过对不同类型的数据内容采用不同的加密方法,既保证了敏感数据的安全性,又加快了数据加密速度,从而优化了加密过程的效率。
在本申请的一些实施例中,当判断单元确定加密策略并对待处理数据进行加密后,处理单元将加密后的数据存储至存储模块时,包括:处理单元采集第一待加密段的第一数据量L1,采集第二待加密段的第二数据量L2,获取数据量之比Q0,Q0=L1/L2,将数据量之比Q0与第一预设数据量之比与预先设定的第一预设数据量之比Q1和第二预设数据量之比Q2进行比对,Q1<Q2,根据比对结果确定第一加密模块和第二加密模块将数据存储至存储模块的传输通道占比Z。
具体而言,当Q0≤Q1时,处理单元确定传输通道占比Z为第一预设传输通道占比Z1。当Q1<Q0≤Q2时,处理单元确定传输通道占比Z为第二预设传输通道占比Z2。当Q2<Q0时,处理单元确定传输通道占比Z为第三预设传输通道占比Z3。其中,Z1<Z2<Z3。
可以理解的是,数据量之比Q0用于衡量第一待加密段与第二待加密段数据量的相对大小。传输通道占比Z即根据数据量之比Q0的值,确定第一加密模块和第二加密模块在数据存储传输过程中应占用的通道比例。在第一等级数据存储时,由第一加密模块和第二加密模块共同对多段数据进行加密,为保证数据存储时的完整性,根据数据量调整传输通道占比,避免部分数据传输速度较慢从而发生数据错误情况。根据待处理数据的实际量化需求优化传输通道的使用,从而提高数据存储和传输的效率。特别是在数据量大且变化频繁的环境中,可以确保大数据量段获得更多的传输资源,加速数据同步处理和同步存储过程,同时保持系统资源的高效利用。提高了数据处理的速度、效率和准确性,还确保了系统能够平滑地处理各种数据密集型任务。
在本申请的一些实施例中,当处理单元确定传输通道占比Z为第i预设传输通道占比Zi后,i=1,2,3,处理单元还用于:预先设定第一预设修正系数B1和第二预设修正系数B2,且0<B1<1<B2<1.2。处理单元采集第一加密段的实时存储速度Z1和第二加密段的实时存储速度Z2,获取速度差值ΔZ,ΔZ=Z2-Z1,根据速度差值ΔZ对传输通道占比Zi进行调整,并以调整后的传输通道占比继续运行。
具体而言,当ΔZ>0时,选取第二预设修正系数B2对传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B2。当ΔZ<0时,选取第一预设修正系数B1对传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B1。当ΔZ=0时,不对传输通道占比Zi进行调整,并将原传输通道占比Zi作为调整后的传输通道占比。
可以理解的是,通过动态调整传输通道占比,这种方法能够有效应对数据存储过程中的性能波动,保证了数据存储的高效性和平衡性。根据实时存储速度的变化调整传输通道占比,可以更合理地分配系统资源,避免某一部分的加密数据因速度慢而阻塞整个存储过程。通过减少存储过程中的瓶颈和不平衡,加快了数据存储的总体速度,提升了系统的处理能力。基于实时性能调整的策略进一步提高了系统的自适应能力和效率。在处理大规模、多样化数据的场景下,能够确保系统资源得到最优化利用,同时保持数据处理和存储过程的高效率。
上述实施例中微数据中心系统,通过采集单元的智能数据来源识别和完整性验证,结合判断单元的加密等级确定和加密策略制定,以及处理单元的高效数据加密处理,能够针对不同敏感级别的数据实施最适合的加密措施。特别是对于高敏感性数据的分段加密和对常规数据的标准加密,确保了数据的安全性,同时通过对高敏感性数据进行分段处理和分段加密,显著提高了数据处理的效率,减少了加密时间,避免了实时监控数据的缺失,从而保障了生产决策的及时性和降低了生产风险。还能根据数据的使用评分动态调整加密等级,进一步优化了数据处理流程,实现了数据安全与数据高效处理。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序商品。因此,本申请可采用完全硬件实施例、完全软件实施例,或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序商品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)和计算机程序商品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框,以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求保护范围之内。

Claims (5)

1.一种微数据中心系统,其特征在于,包括:
数据加密装置和管理装置,其中所述数据加密装置包括采集模块、第一加密模块、第二加密模块和存储模块,所述第一加密模块和第二加密模块对所述采集模块获取的待处理数据进行加密并将加密后的数据存储至所述存储模块;所述管理装置包括采集单元、判断单元和处理单元,所述管理装置用于对所述数据加密装置加密时进行控制;其中,
所述采集单元,被配置为采集所述采集模块获取的所述待处理数据的数据来源,根据所述数据来源确定加密等级,所述加密等级包括第一等级和第二等级;
所述采集单元还被配置为当判定所述待处理数据为第一加密等级时,验证所述待处理数据的完整性;当所述采集单元判定所述待处理数据的数据完整时,所述采集单元还被配置为确定所述待处理数据的使用评分,根据所述使用评分判断是否对所述待处理数据的加密等级进行调整;
所述判断单元,被配置为当所述采集单元确定所述待处理数据的加密等级后,所述判断单元根据所述加密等级确定加密策略;当所述待处理数据为第一等级时,所述判断单元对所述待处理数据进行分段处理,并进行分段加密;
所述处理单元,被配置为当所述判断单元确定所述加密策略并对所述待处理数据进行加密后,所述处理单元将加密后的数据存储至所述存储模块;
所述采集单元根据所述数据来源确定加密等级时,包括:
当所述待处理数据的数据来源为设备运行信息以及财务信息时,所述采集单元将所述待处理数据判定为第一等级;
当所述待处理数据的数据来源非设备运行信息以及财务信息时,所述采集单元将所述待处理数据判定为第二等级;
当所述采集单元判定所述待处理数据为第一等级时,所述采集单元验证所述待处理数据的完整性时,包括:
所述采集单元计算所述待处理数据的实时哈希值,将所述实时哈希值与数据产生时的历史哈希值进行比对,根据比对结果判断所述待处理数据的完整性;
当所述实时哈希值与所述历史哈希值相同时,所述采集单元判定所述待处理数据的数据完整;
当所述实时哈希值与所述历史哈希值不同时,所述采集单元判定所述待处理数据的数据不完整;
当所述采集单元判定所述待处理数据的数据完整时,所述采集单元确定所述待处理数据的使用评分时,包括:
采集所述待处理数据的存储频率Hz,将所述存储频率Hz与预先设定的第一预设频率Hz1和第二预设频率Hz2进行比对,Hz1<Hz2,根据比对结果确定所述待处理数据的使用评分P;
当Hz≤Hz1时,所述采集单元确定所述待处理数据的使用评分为第一预设使用评分P1;
当Hz1<Hz≤Hz2时,所述采集单元确定所述待处理数据的使用评分为第二预设使用评分P2;
当Hz2<Hz时,所述采集单元确定所述待处理数据的使用评分为第三预设使用评分P3;
其中,P1<P2<P3;
当所述采集单元确定所述待处理数据的使用评分为第i预设使用评分Pi后,i=1,2,3,所述采集单元还包括:
预先设定第一预设调整系数A1、第二预设调整系数A2和第三预设调整系数A3,且0<A1<A2<A3<1.2;采集所述待处理数据的使用频率Hs,将所述使用频率Hs与预先设定的第一预设使用频率Hs1和第二预设使用频率Hs2进行比对,Hs1<Hs2,根据比对结果选取调整系数对所述使用评分Pi进行调整,获取调整后的使用评分,并以所述调整后的使用评分继续运行;
当Hs≤Hs1时,所述采集单元选取所述第一预设调整系数A1对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A1;
当Hs1<Hs≤Hs2时,所述采集单元选取所述第二预设调整系数A2对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A2;
当Hs2<Hs时,所述采集单元选取所述第三预设调整系数A3对所述使用评分Pi进行调整,获取调整后的使用评分Pi*A3;
当所述采集单元选取第i预设调整系数Ai对所述使用评分Pi进行调整,获取调整后的使用评分Pi*Ai后,i=1,2,3,所述采集单元根据所述使用评分判断是否对所述待处理数据的加密等级进行调整时,包括;
所述采集单元将所述调整后的使用评分Pi*Ai与预先设定的标准评分P0进行比对,根据比对结果对所述待处理数据的加密等级进行调整;
当Pi*Ai≥P0时,所述采集单元将所述加密等级调低一级,即当所述加密等级为第一等级时,将所述第一等级调整为所述第二等级,当所述加密等级为第二等级时维持不变;
当Pi*Ai<P0时,所述采集单元不对所述加密等级进行调整。
2.根据权利要求1所述的微数据中心系统,其特征在于,当所述采集单元确定所述待处理数据的加密等级后,所述判断单元根据所述加密等级确定加密策略时,包括:
当所述加密等级为所述第一等级时,所述判断单元判定使用分段加密对所述待处理数据进行加密,即所述第一加密模块和所述第二加密模块共同对所述待处理数据进行加密;
当所述加密等级为所述第二等级时,所述判断单元判定使用直接加密对所述待处理数据进行加密,即所述第一加密模块对所述待处理数据进行加密。
3.根据权利要求2所述的微数据中心系统,其特征在于,当所述判断单元判定对所述待处理数据进行分段加密时,所述判断单元还包括:
对所述待处理数据进行识别并分段;
将所述待处理数据中表格、数据与图形划分为第二待加密段;
将所述待处理数据中非表格、非数据且非图形划分为第一待加密段;
所述判断单元控制所述第一加密模块对所述第一待加密段进行加密,并控制所述第二加密模块对所述第二待加密段进行加密。
4.根据权利要求3所述的微数据中心系统,其特征在于,当所述判断单元确定所述加密策略并对所述待处理数据进行加密后,所述处理单元将加密后的数据存储至所述存储模块时,包括:
所述处理单元采集所述第一待加密段的第一数据量L1,采集所述第二待加密段的第二数据量L2,获取数据量之比Q0,Q0=L1/L2,将所述数据量之比Q0与第一预设数据量之比与预先设定的第一预设数据量之比Q1和第二预设数据量之比Q2进行比对,Q1<Q2,根据比对结果确定所述第一加密模块和第二加密模块将数据存储至所述存储模块的传输通道占比Z;
当Q0≤Q1时,所述处理单元确定所述传输通道占比Z为第一预设传输通道占比Z1;
当Q1<Q0≤Q2时,所述处理单元确定所述传输通道占比Z为第二预设传输通道占比Z2;
当Q2<Q0时,所述处理单元确定所述传输通道占比Z为第三预设传输通道占比Z3;
其中,Z1<Z2<Z3。
5.根据权利要求4所述的微数据中心系统,其特征在于,当所述处理单元确定所述传输通道占比Z为第i预设传输通道占比Zi后,i=1,2,3,所述处理单元还用于:
预先设定第一预设修正系数B1和第二预设修正系数B2,且0<B1<1<B2<1.2;所述处理单元采集第一加密段的实时存储速度Z1和第二加密段的实时存储速度Z2,获取速度差值ΔZ,ΔZ=Z2-Z1,根据所述速度差值ΔZ对所述传输通道占比Zi进行调整,并以调整后的传输通道占比继续运行;
当ΔZ>0时,选取所述第二预设修正系数B2对所述传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B2;
当ΔZ<0时,选取所述第一预设修正系数B1对所述传输通道占比Zi进行调整,获取调整后的传输通道占比Zi*B1;
当ΔZ=0时,不对所述传输通道占比Zi进行调整,并将原传输通道占比Zi作为所述调整后的传输通道占比。
CN202410252347.9A 2024-03-06 2024-03-06 一种微数据中心系统 Active CN117828649B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410252347.9A CN117828649B (zh) 2024-03-06 2024-03-06 一种微数据中心系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410252347.9A CN117828649B (zh) 2024-03-06 2024-03-06 一种微数据中心系统

Publications (2)

Publication Number Publication Date
CN117828649A CN117828649A (zh) 2024-04-05
CN117828649B true CN117828649B (zh) 2024-05-28

Family

ID=90506294

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410252347.9A Active CN117828649B (zh) 2024-03-06 2024-03-06 一种微数据中心系统

Country Status (1)

Country Link
CN (1) CN117828649B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118409645B (zh) * 2024-07-04 2024-11-01 共济润道人工智能科技(上海)有限公司 一种基于ipu芯片的动态电源管理系统及方法

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106412045A (zh) * 2016-09-22 2017-02-15 中国联合网络通信集团有限公司 一种身份信息存储方法及系统
CN108563959A (zh) * 2018-04-24 2018-09-21 努比亚技术有限公司 文件加密方法、装置和计算机存储介质
CN108900511A (zh) * 2018-06-29 2018-11-27 中兴通讯股份有限公司 一种文件加密和解密的方法、装置及设备
JP2021189897A (ja) * 2020-06-02 2021-12-13 パナソニックIpマネジメント株式会社 制御方法、通信端末、プログラム、記憶媒体及び情報提供方法
CN114677057A (zh) * 2022-05-25 2022-06-28 国网浙江省电力有限公司 基于机器学习的绿色能源金融数据的采集评价方法及系统
WO2022133996A1 (zh) * 2020-12-25 2022-06-30 深圳晶泰科技有限公司 基于混合云计算平台的存储方法及系统
CN115883679A (zh) * 2022-11-25 2023-03-31 湖南皖湘科技有限公司 基于区块链的数据安全传输方法及系统
CN115935400A (zh) * 2023-03-10 2023-04-07 山东科技职业学院 一种基于工业互联网的数据加密存储系统
CN116599750A (zh) * 2023-06-06 2023-08-15 中国标准化研究院 一种利用加密技术确保数据变更可追溯的系统和方法
CN116680617A (zh) * 2023-06-19 2023-09-01 段雅琦 基于使用权限等级的数据保密性检测方法及系统
CN116980138A (zh) * 2023-08-09 2023-10-31 联一信息技术(北京)有限公司 在线交易安全系统
CN117336300A (zh) * 2023-12-01 2024-01-02 山东街景智能制造科技股份有限公司 一种用于状态机的资源管理系统
CN117371002A (zh) * 2023-09-08 2024-01-09 浙江大华技术股份有限公司 模型加密方法、模型解密方法、加密装置和可读存储介质
CN117640256A (zh) * 2024-01-25 2024-03-01 深圳市四海伽蓝电子科技有限公司 一种无线网卡的数据加密方法、推荐装置和存储介质
CN117633112A (zh) * 2023-11-30 2024-03-01 中国农业银行股份有限公司 一种系统事件的处理方法、设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170034184A1 (en) * 2015-07-31 2017-02-02 International Business Machines Corporation Proxying data access requests

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106412045A (zh) * 2016-09-22 2017-02-15 中国联合网络通信集团有限公司 一种身份信息存储方法及系统
CN108563959A (zh) * 2018-04-24 2018-09-21 努比亚技术有限公司 文件加密方法、装置和计算机存储介质
CN108900511A (zh) * 2018-06-29 2018-11-27 中兴通讯股份有限公司 一种文件加密和解密的方法、装置及设备
JP2021189897A (ja) * 2020-06-02 2021-12-13 パナソニックIpマネジメント株式会社 制御方法、通信端末、プログラム、記憶媒体及び情報提供方法
WO2022133996A1 (zh) * 2020-12-25 2022-06-30 深圳晶泰科技有限公司 基于混合云计算平台的存储方法及系统
CN114677057A (zh) * 2022-05-25 2022-06-28 国网浙江省电力有限公司 基于机器学习的绿色能源金融数据的采集评价方法及系统
CN115883679A (zh) * 2022-11-25 2023-03-31 湖南皖湘科技有限公司 基于区块链的数据安全传输方法及系统
CN115935400A (zh) * 2023-03-10 2023-04-07 山东科技职业学院 一种基于工业互联网的数据加密存储系统
CN116599750A (zh) * 2023-06-06 2023-08-15 中国标准化研究院 一种利用加密技术确保数据变更可追溯的系统和方法
CN116680617A (zh) * 2023-06-19 2023-09-01 段雅琦 基于使用权限等级的数据保密性检测方法及系统
CN116980138A (zh) * 2023-08-09 2023-10-31 联一信息技术(北京)有限公司 在线交易安全系统
CN117371002A (zh) * 2023-09-08 2024-01-09 浙江大华技术股份有限公司 模型加密方法、模型解密方法、加密装置和可读存储介质
CN117633112A (zh) * 2023-11-30 2024-03-01 中国农业银行股份有限公司 一种系统事件的处理方法、设备及存储介质
CN117336300A (zh) * 2023-12-01 2024-01-02 山东街景智能制造科技股份有限公司 一种用于状态机的资源管理系统
CN117640256A (zh) * 2024-01-25 2024-03-01 深圳市四海伽蓝电子科技有限公司 一种无线网卡的数据加密方法、推荐装置和存储介质

Also Published As

Publication number Publication date
CN117828649A (zh) 2024-04-05

Similar Documents

Publication Publication Date Title
CN117828649B (zh) 一种微数据中心系统
US9680707B2 (en) Automated change approval
CN102483731B (zh) 具有根据搜索负荷被均衡的指纹数据库的媒体识别系统
CN108833522B (zh) 一种确定节点可信的系统及方法
CN111949672B (zh) 一种支持物联网数据增量更新的区块链存储方法
US9658832B2 (en) Multi-factor entropy sourcing for random number generators
CN117131484A (zh) 一种动态加密方法、系统、计算机设备及存储介质
US11856006B2 (en) Abnormal communication detection apparatus, abnormal communication detection method and program
US10715387B1 (en) System for dynamic provisioning of host devices
CN112039730B (zh) 一种加密算法的性能评估方法及存储介质
CN115733677A (zh) 一种密码机调度方法及装置
CN117131530A (zh) 一种智慧工厂敏感数据加密防护方法
CN103559438A (zh) 进程识别方法及系统
CN118138352A (zh) 基于物联网的多维数据安全传输方法及系统
CN111612415A (zh) 一种项目管理方法及装置
CN105122239A (zh) 用于针对矢量化查询执行的自适应矢量大小选择的系统和方法
CN110909085A (zh) 数据处理方法、装置、设备及存储介质
CN111814175B (zh) 一种区块链间跨链信息传输控制系统
CN113630425A (zh) 一种多电力主体的财务数据安全传输方法
CN117149439B (zh) 一种降低可信计算静态度量频率和频次的方法和系统
CN116582547B (zh) 算力网络数据传输方法、装置、电子设备及存储介质
CN117909989B (zh) 一种基于大数据的数据安全采集方法及系统
CN111159714A (zh) 一种访问控制中主体运行时可信验证方法及系统
CN117851076B (zh) 一种硬件资源的调度方法、装置、电子设备及存储介质
CN118041696B (zh) 一种数据安全传输方法、云操作系统以及智能计算平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant