CN112181756A - 一种数据监测保全方法 - Google Patents

一种数据监测保全方法 Download PDF

Info

Publication number
CN112181756A
CN112181756A CN201910597790.9A CN201910597790A CN112181756A CN 112181756 A CN112181756 A CN 112181756A CN 201910597790 A CN201910597790 A CN 201910597790A CN 112181756 A CN112181756 A CN 112181756A
Authority
CN
China
Prior art keywords
data
file
backup
monitoring
directory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910597790.9A
Other languages
English (en)
Inventor
陈继杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Taiyu Information Technology Co ltd
Original Assignee
Shanghai Taiyu Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Taiyu Information Technology Co ltd filed Critical Shanghai Taiyu Information Technology Co ltd
Priority to CN201910597790.9A priority Critical patent/CN112181756A/zh
Publication of CN112181756A publication Critical patent/CN112181756A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793Remedial or corrective actions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3089Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及数据安全领域,具体涉及一种数据监测保全方法,包括:S1、数据登记;S2、数据备份;S3、数据监控:1、编写Java Native方法,通过该方法使java命令能生成对应的C++头文件;2、所述头文件包含有需监测的存档目录和备份目录的信息,以及所需监测的动作标识定义;3、创建C++动态库文件;4、使用Java命令调用所述生成的动态库文件,用以执行所述C++头文件ty_monitor.h对存档目录以及备份目录内的文件进行数据监测,实现Java监测功能;S4、监控数据反馈几个步骤,对电子数据进行实时监测、实时预警、实时保全、实时修复,始终保证同一原始数据有两个正确的备份数据,确保电子数据的安全。

Description

一种数据监测保全方法
技术领域
本发明涉及数据安全领域,具体涉及一种数据监测保全方法。
背景技术
随着社会信息的发展,各行业在信息化建设工作中也投入了大量的人力、物力,取得了丰硕的成果,并且随着信息化的深入,电子数据量还将不断的增加,如此庞大的数据量不仅拥有着巨大的使用价值,经济价值和历史价值,也是社会信誉和稳定的保证。我们在感受到信息快速发展的同时,一种越渐凸显的隐患正迫切的摆在我们面前,那就是数据本身的安全。
现在在电子数据保管上,人力和技术力量都相当有限,同时电子数据安全也向多元化发展,除了重大的灾难性事件外,更为常见的是存储介质自身的耗损、不当操作、病毒攻击、篡改及周围环境因素和数据自身可能出现的各种变化,一切都在不知不觉甚至毫不知晓的发生,一旦造成损失,必定影响到工作的开展和运转,因此,只有保证核心数据的安全才能保证信息化健康有序的进行。
发明内容
本发明的目的,是为了解决背景技术中的问题,提供一种数据监测保全方法。
本发明的上述技术目的是通过以下技术方案得以实现的:
一种数据监测保全方法,包括以下步骤:
S1、数据登记:
1、原始数据导入数据监测系统,形成登记文件,存入存档目录;
2、登记文件通过特定函数计算出与其相对应的数字摘要值;
3、将所有登记文件的数字摘要值放入摘要数据库中;
S2、数据备份:
1、为每一份登记文件创建备份文件,存入备份目录内;
2、备份结束后,采用与步骤S1中相同的特定函数计算处备份文件的数字摘要值,并与其相对应的登记文件的数字摘要值比对,比对一致则表示备份成功;
S3、数据监控:
1、编写Java Native方法,通过该方法使java命令能生成对应的C++头文件ty_monitor.h;
2、所述头文件ty_monitor.h包含有需监测的存档目录和备份目录的信息,以及所需监测的动作标识定义;
3、创建C++动态库文件;
4、使用Java命令调用所述生成的动态库文件,用以执行所述C++头文件ty_monitor.h对存档目录以及备份目录内的文件进行数据监测,实现Java监测功能;
S4、监控数据反馈:
1、当步骤S3中监测到数据发生新增、删除、修改或重命名时,调用短消息预警模块,将监听事件通过短消息发送给相关管理人员;
2、当步骤S3中监测到数据发生新增、删除、修改或重命名时,启动备份修复操作。
作为优选,步骤S1中所述特定函数为哈希函数。
作为优选,步骤S1中所述摘要数据库为数据库表的形式。
作为优选,步骤S3中使用java命令时,需要在C++中加载JVM环境,C++的线程要将JVM设置为全局变量,保持JVM一致;C++进行JNI参数全局化处理;C++的线程实时接收处理Java传入的监测指令参数并返回执行结果。
作为优选,步骤S2中,通过二进制流的方式创建备份文件,具体方法为,先从登记文件A1中读取数据,扩展为二进制数据流,再将数据流输入到备份文件A2,最后关闭输入输出流,备份文件A2创建完成。
作为优选,步骤S4中所述备份修复操作步骤为:即当监测到登记文件A1发生变化,系统先以二进制流的方式创建临时备份目录,然后将备份文件A2重新备份一份文件A3到此临时备份目录,保证系统始终有两份有效一致的数据,备份完成后系统通过奇偶校验信息提取文件A3将登记文件A1进行数据修复。
作为优选,所述备份修复操作过程中,备份文件A2备份成文件A3的方法与步骤S2中第二条方法相同。
综上所述,本发明采用动态备份方式取代传统大量电子数据静态备份的方式,从数据固化到数据监控到数据再次利用,制定了严格的操作规范和安全要求,并对电子数据进行实时监测、实时预警、实时保全、实时修复,始终保证同一原始数据有两个正确的备份数据,确保电子数据的安全,从而解决电子数据长期保管过程中数据存在状态无法直观监测,无法对电子数据出现丢失、异常等情况及时发现,无法对异常数据进行及时修复等问题。
具体实施方式
以下具体实施例仅仅是对本发明的解释,其并不是对本发明的限制,本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改,但只要在本发明的权利要求范围内都受到专利法的保护。
下面结合以实施例对本发明进行详细说明。
实施例1:
一种数据监测保全方法,包括以下步骤:
S1、数据登记:
1、原始数据导入数据监测系统,形成登记文件A1,存入存档目录。
2、登记文件A1通过哈希函数计算出与其相对应的数字摘要值。
3、将所有登记文件的数字摘要值放入摘要数据库中,摘要数据库为数据库表的形式。
S2、数据备份:
1、为每一份登记文件通过二进制流的方式创建备份文件A2,存入备份目录内,具体方法为,先从登记文件A1中读取数据,扩展为二进制数据流,再将数据流输入到备份文件A2,最后关闭输入输出流,备份文件A2创建完成。
2、备份结束后,采用哈希函数计算处备份文件A2的数字摘要值,并与其相对应的登记文件A1的数字摘要值比对,比对一致则表示备份成功。
S3、数据监控:
1、编写Java Native方法,通过该方法使java命令能生成对应的C++头文件ty_monitor.h。
2、所述头文件ty_monitor.h包含有需监测的存档目录和备份目录的信息,以及所需监测的动作标识定义,ty_monitor.h文件内涉及内容如下:
|#ifndef GRAPHICS_H//作用:防止ty_monitor.h被重复引用
|#define GRAPHICS_H
|#include<com.taiyu.dao.monitor>//引用标准库的头文件
| String path = REQUEST_BASE_PATH;//被监视目录
|#include"..."//引用非标准库的头文件
| boolean watchSubtree = true;//是否级联监视
|void Function1(...);//全局函数声明
| int mask = ty.FILE_CREATED | ty.FILE_DELETED | ty.FILE_MODIFIED |ty.FILE_RENAMED;(定义动作标识,如新增、删除、修改、重命名)
|inline();//inline函数的定义
|classBox//作用:类结构声明
|#endif
3、创建C++动态库文件,动态库文件涉及的内容如下:
/**
* 文件监听器函数定义
*/
class Listener extends Thread implements TyListener{
public Listener(){
System.out.println("new thread:" + Thread.currentThread().getName());
}
/**
* 该方法监听文件改名事件
* @param wd 被监听目录ID
* @param rootPath 被监听目录
* @param oldName 被改名前文件名
* @param newName 被改名后文件名
*/
public void fileRenamed(int wd, String rootPath, String oldName, StringnewName){
System.out.println("rename thread:" + Thread.currentThread().getName());
print("renamed " + rootPath + ":" + oldName + "->" + newName);
}
/**
* 该方法监听文件修改事件
* @param wd 被监听目录ID
* @param rootPath 被监听目录
* @param name 被修改文件名
*/
public void fileModified(int wd, String rootPath, String name){
System.out.println("modified thread:" + Thread.currentThread().getName());
print("modified " + rootPath + ":" + name);
}
/**
* 该方法监听文件删除事件
* @param wd 被监听目录ID
* @param rootPath 被监听目录
* @param name 被删除文件名
*/
public void fileDeleted(int wd, String rootPath, String name){
System.out.println("deleted thread:" + Thread.currentThread().getName());
print("deleted " + rootPath + ":" + name);
}
/**
* 该方法监听文件创建事件
* @param wd 被监听目录ID
* @param rootPath 被监听目录
* @param name
. 被创建文件名
*/
public void fileCreated(int wd, String rootPath, String name){
System.out.println("created thread:" + Thread.currentThread().getName());
print("created " + rootPath + ":" + name);
}
/**
* 错误打印
* @param msg 错误信息
4、使用Java命令调用所述生成的动态库文件,用以执行所述C++头文件ty_monitor.h对存档目录以及备份目录内的文件进行数据监测,实现Java监测功能,此过程中需要在C++中加载JVM环境,C++的线程要将JVM设置为全局变量,保持JVM一致;C++进行JNI参数全局化处理;C++的线程实时接收处理Java传入的监测指令参数并返回执行结果。
S4、监控数据反馈:
1、当步骤S3中监测到数据发生新增、删除、修改或重命名时,调用短消息预警模块,将监听事件通过短消息发送给相关管理人员。
2、当步骤S3中监测到数据发生新增、删除、修改或重命名时,启动备份修复操作,所述备份修复操作步骤为:即当监测到登记文件A1发生变化,系统先以二进制流的方式创建临时备份目录,然后将备份文件A2重新备份一份文件A3到此临时备份目录,保证系统始终有两份有效一致的数据,备份完成后系统通过奇偶校验信息提取文件A3将登记文件A1进行数据修复。

Claims (7)

1.一种数据监测保全方法,其特征在于,包括以下步骤:
S1、数据登记:
1、原始数据导入数据监测系统,形成登记文件,存入存档目录;
2、登记文件通过特定函数计算出与其相对应的数字摘要值;
3、将所有登记文件的数字摘要值放入摘要数据库中;
S2、数据备份:
1、为每一份登记文件创建备份文件,存入备份目录内;
2、备份结束后,采用与步骤S1中相同的特定函数计算处备份文件的数字摘要值,并与其相对应的登记文件的数字摘要值比对,比对一致则表示备份成功;
S3、数据监控:
1、编写Java Native方法,通过该方法使java命令能生成对应的C++头文件ty_monitor.h;
2、所述头文件ty_monitor.h包含有需监测的存档目录和备份目录的信息,以及所需监测的动作标识定义;
3、创建C++动态库文件;
4、使用Java命令调用所述生成的动态库文件,用以执行所述C++头文件ty_monitor.h对存档目录以及备份目录内的文件进行数据监测,实现Java监测功能;
S4、监控数据反馈:
1、当步骤S3中监测到数据发生新增、删除、修改或重命名时,调用短消息预警模块,将监听事件通过短消息发送给相关管理人员;
2、当步骤S3中监测到数据发生新增、删除、修改或重命名时,启动备份修复操作。
2.根据权利要求1所述的一种数据监测保全方法,其特征在于,步骤S1中所述特定函数为哈希函数。
3.根据权利要求1所述的一种数据监测保全方法,其特征在于,步骤S1中所述摘要数据库为数据库表的形式。
4.根据权利要求1所述的一种数据监测保全方法,其特征在于,步骤S3中使用java命令时,需要在C++中加载JVM环境,C++的线程要将JVM设置为全局变量,保持JVM一致;C++进行JNI参数全局化处理;C++的线程实时接收处理Java传入的监测指令参数并返回执行结果。
5.根据权利要求1所述的一种数据监测保全方法,其特征在于,步骤S2中,通过二进制流的方式创建备份文件,具体方法为,先从登记文件A1中读取数据,扩展为二进制数据流,再将数据流输入到备份文件A2,最后关闭输入输出流,备份文件A2创建完成。
6.根据权利要求5所述的一种数据监测保全方法,其特征在于,步骤S4中所述备份修复操作步骤为:即当监测到登记文件A1发生变化,系统先以二进制流的方式创建临时备份目录,然后将备份文件A2重新备份一份文件A3到此临时备份目录,保证系统始终有两份有效一致的数据,备份完成后系统通过奇偶校验信息提取文件A3将登记文件A1进行数据修复。
7.根据权利要求6所述的一种数据监测保全方法,其特征在于,所述备份修复操作过程中,备份文件A2备份成文件A3的方法与步骤S2中第二条方法相同。
CN201910597790.9A 2019-07-04 2019-07-04 一种数据监测保全方法 Pending CN112181756A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910597790.9A CN112181756A (zh) 2019-07-04 2019-07-04 一种数据监测保全方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910597790.9A CN112181756A (zh) 2019-07-04 2019-07-04 一种数据监测保全方法

Publications (1)

Publication Number Publication Date
CN112181756A true CN112181756A (zh) 2021-01-05

Family

ID=73914450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910597790.9A Pending CN112181756A (zh) 2019-07-04 2019-07-04 一种数据监测保全方法

Country Status (1)

Country Link
CN (1) CN112181756A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112882866A (zh) * 2021-02-24 2021-06-01 上海泰宇信息技术股份有限公司 一种适用于海量文件的备份方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130254746A1 (en) * 2012-03-26 2013-09-26 Software Ag Systems and/or methods for executing appropriate tests based on code modifications using live, distributed, real-time cache and feedback loop
CN104714864A (zh) * 2015-03-20 2015-06-17 成都云祺科技有限公司 一种计算机数据智能备份方法
CN105303126A (zh) * 2015-11-03 2016-02-03 北京电子科技学院 一种可信计数方法及系统
CN105468978A (zh) * 2015-11-16 2016-04-06 国网智能电网研究院 一种适用于电力系统通用计算平台的可信计算密码平台
CN106598785A (zh) * 2016-12-16 2017-04-26 广东美晨通讯有限公司 文件系统备份与还原的方法及装置
CN107769918A (zh) * 2017-09-07 2018-03-06 广东工业大学 一种安全的云数据多副本关联删除方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130254746A1 (en) * 2012-03-26 2013-09-26 Software Ag Systems and/or methods for executing appropriate tests based on code modifications using live, distributed, real-time cache and feedback loop
CN104714864A (zh) * 2015-03-20 2015-06-17 成都云祺科技有限公司 一种计算机数据智能备份方法
CN105303126A (zh) * 2015-11-03 2016-02-03 北京电子科技学院 一种可信计数方法及系统
CN105468978A (zh) * 2015-11-16 2016-04-06 国网智能电网研究院 一种适用于电力系统通用计算平台的可信计算密码平台
CN106598785A (zh) * 2016-12-16 2017-04-26 广东美晨通讯有限公司 文件系统备份与还原的方法及装置
CN107769918A (zh) * 2017-09-07 2018-03-06 广东工业大学 一种安全的云数据多副本关联删除方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
杨光: "基于MD5算法的网页保护系统设计与实现", 《电脑知识与技术》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112882866A (zh) * 2021-02-24 2021-06-01 上海泰宇信息技术股份有限公司 一种适用于海量文件的备份方法
CN112882866B (zh) * 2021-02-24 2023-12-15 上海泰宇信息技术股份有限公司 一种适用于海量文件的备份方法

Similar Documents

Publication Publication Date Title
US10785110B2 (en) Automated change approval
US8504528B2 (en) Duplicate backup data identification and consolidation
US8065273B2 (en) Automated priority restores
US11567792B2 (en) Deploying a cloud instance of a user virtual machine
US20070208918A1 (en) Method and apparatus for providing virtual machine backup
CN112835612A (zh) 一种基于区块链的电子文档版本管理方法及装置
CN109766330B (zh) 数据分片方法、装置、电子设备及存储介质
GB2529246A (en) Method for securing integrity and consistency of a cloud storage service with efficient client operations
WO2022082891A1 (zh) 大数据采集方法、系统、计算机设备及其存储介质
US9525673B1 (en) Content protection for extract, transform, load (ETL) scripts
CN112181756A (zh) 一种数据监测保全方法
CN109271281B (zh) 一种防数据被篡改的数据备份方法及系统
CN111797240A (zh) 企业实体唯一id创建方法、存储介质、电子设备及系统
US20120303590A1 (en) Management of deduplicated data during restoration in a network archival and retrieval system
CN116700884A (zh) 快照回滚数据一致性测试方法、装置、设备及介质
US20230244633A1 (en) Extending an expiration time of an object associated with an archive
CN106547756B (zh) 数据库的创建方法及装置
CN114090502A (zh) 一种资源管理方法、装置、设备及存储介质
CN111625397A (zh) 业务日志备份方法、集群、装置、电子设备及存储介质
CN113824757B (zh) 数据获取方法、系统和计算机可读存储介质
CN114115812B (zh) 一种跨版本的应用分发方法
McCown et al. Recovering a website's server components from the web infrastructure
JP4937387B2 (ja) 自動書き換えプログラムおよび自動書き換え装置
Wang et al. Complete data deletion based on hadoop distributed file system
CN117422285A (zh) 一种操作流程继承方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20210105

WD01 Invention patent application deemed withdrawn after publication