CN115237679A - 一种基于主机系统的数据恢复系统 - Google Patents
一种基于主机系统的数据恢复系统 Download PDFInfo
- Publication number
- CN115237679A CN115237679A CN202211146609.0A CN202211146609A CN115237679A CN 115237679 A CN115237679 A CN 115237679A CN 202211146609 A CN202211146609 A CN 202211146609A CN 115237679 A CN115237679 A CN 115237679A
- Authority
- CN
- China
- Prior art keywords
- data
- mark
- backup
- production end
- virtual machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
- G06F11/1451—Management of the data involved in backup or backup restore by selection of backup contents
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于主机系统的数据恢复系统，涉及数据恢复技术领域，包括数据生产端和数据主机终端，所述数据生产端在不同时间段的数据生成时，分别识别各个时间段数据的特征点，并基于特征点，对数据进行分段，并依次赋予标记1、标记2...标记N；随后基于各个标记，生成同一组数据中不同数据段的关联因子；所述数据主机终端包括接收模块、处理模块、储存模块和虚拟机；所述接收模块用于接收不同时间段的数据。本申请通过对数据进行分段，可以方便对数据进行识别和分类，在对实时更新的设备进行备份时，可以对数据进行分段识别，对改变的数据段进行备份，从而提高备份的速度，并且降低备份的数据量。
Description
技术领域
本发明涉及数据恢复技术领域，更具体地说，它涉及一种基于主机系统的数据恢复系统。
背景技术
现有数据库的备份方式通常采用主机热备份，即在主机服务器正常工作的过程中，对输出端的数据进行备份；通过备份的方式，对数据进行保存，可以在数据或设备损坏时，将备份数据传输至设备中，使其正常工作。
经检索，中国专利公开了一种数据备份系统及方法（公告号：CN112261114A），该专利包括：生产服务器、本地存储服务器和远程分布式文件系统，远程分布式文件系统包括远程灾备服务器和多个远程存储服务器，远程灾备服务器为远程分布式文件系统的管理节点，远程存储服务器为远程分布式文件系统的数据节点；生产服务器，用于生成待备份数据，向本地存储服务器发送所述待备份数据；本地存储服务器，用于存储生产服务器发送的待备份数据，并向远程灾备服务器发送所述待备份数据；远程灾备服务器，用于接收待备份数据，并采用分布式存储的方式将待备份数据存储至各远程存储服务器
在对数据进行储存时，若数据较大，则单次储存的效率较慢，并且在数据部分损坏时，单次修复所需的数据量较少，若直接对所有数据进行修复和覆盖中，则导致修复的效率低，并且消耗的资源较多。
发明内容
针对现有技术存在的不足，本发明的目的在于提供一种基于主机系统的数据恢复系统。
为实现上述目的，本发明提供了如下技术方案：一种基于主机系统的数据恢复系统，包括数据生产端和数据主机终端；
所述数据生产端在不同时间段的数据生成时，分别识别各个时间段数据的特征点，并基于特征点，对数据进行分段，并依次赋予标记1、标记2...标记N；随后基于各个标记，生成同一组数据中不同数据段的关联因子；
所述数据主机终端包括接收模块、处理模块、储存模块和虚拟机；
所述接收模块用于接收不同时间段的数据，并基于标记识别对应数据中的各个数据段，随后将数据传输至处理模块；
所述处理模块将各个标记与数据进行匹配，将数据划分为多个数据段，并将数据段输送至储存模块；
所述储存模块将同一数据中不同时间段且同一标记的数据段进行分类储存；
且储存模块将同一关联因子的数据传输至虚拟机中，得到备份数据，在数据生产端发出恢复指令后，接收模块将恢复指令和关联因子通过处理模块传输至虚拟机和储存模块；
虚拟机将备份数据传输至数据生产端，进行恢复；储存模块将其内部的数据段重组，并输送至虚拟机与备份数据进行对比。
进一步的，所述数据生产端在发送恢复指令时，将所需恢复数据的全部标记和关联因子输送至数据主机终端；
虚拟机基于关联因子将备份数据输送至数据生产端；
储存模块对应标记的多个数据段基于关联因子重组后，输送至虚拟机与备份数据进行对比，基于对比结果，对备份数据进行更换。
进一步的，所述数据生产端对发送后的标记进行备份，在发送恢复指令之前，对所需恢复数据的标记进行识别和匹配，识别数据中损坏的标记X，随后将带有标记X的恢复指令输送至数据主机终端；
数据终端将标记X与储存模块进行匹配，将对应的数据段及其关联因子通过虚拟机输送至数据生产端；
数据生产端将其内部损坏数据的关联因子与传输数据段的关联因子进行匹配，将传输数据段插入至损坏的数据中进行修复。
进一步的，所述储存模块的储存方法，包括以下步骤：
步骤一：将储存空间划分多个备份区域，多个备份区域均设置有缓存区域；
步骤二：将不同时间段的数据段按照各自数据中的标记储存至对应的区域中；同一区域中，储存不同时间段中同一标记的数据段，方便后续进行恢复；
步骤三：在后续备份时，将同一标记的数据段进行对比；若无变化，则将后一组的数据段删除；若有变化，则后一组的数据段将对应区域中的数据进行覆盖，被覆盖的数据移动至缓存区域中，方便后续进行检查。
进一步的，所述虚拟机内部设置有两组镜像区域，两组镜像区域分别标记为区域Ⅰ和区域Ⅱ；
区域Ⅰ和区域Ⅱ轮流更新备份数据；
在接收恢复指令后，虚拟机将最新更新的备份数据传输至数据生产端；
同时，储存模块向虚拟机中传输具有关联因子的数据，虚拟机将该数据与区域Ⅰ和区域Ⅱ中的两组备份数据进行对比。
进一步的，对比包括以下步骤：
A1：若数据与备份数据无差异，则停止输送该数据；
A2：若数据与备份数据有差异，虚拟机识别差异部分的标记，并基于该标记，将数据中对应的数据段传输至数据生产端，对已传输的备份数据中对应的数据段进行替换。
进一步的，所述接收模块在接收数据生产端的数据时，对该数据的关联因子进行识别，并检测各时间段数据关联因子的离群值，并基于对应数据的大数据，设定对应关联因子的利群阈值；
若关联因子的离群值大于利群阈值，则对应数据则进行标记Z，并发送标记Z至数据生产端。
进一步的，数据生产端收到标记Z后，对数据主机终端进行反馈；
若在时间Y内，数据生产端未进行反馈，则数据主机终端向预设的备份联系设备发送警示信息。
与现有技术相比，本发明具备以下有益效果：
本申请通过对数据进行分段，可以方便对数据进行识别和分类，在对实时更新的设备进行备份时，可以对数据进行分段识别，对改变的数据段进行备份，从而提高备份的速度，并且降低备份的数据量；
并且数据主机终端通过虚拟机保存有连续更新的备份数据，可以根据数据生产端的请求，对分段或者整段的数据进行输送，从而方便数据生产端进行恢复；
另一方面，在虚拟机对数据生产端进行快速恢复后，可以进一步的对储存模块中的最新数据进行对比，若数据有差异，则将对应的数据段进行更新，从而可以提高恢复的质量；
同时，数据主机终端在接收数据时，可以对数据中关联因子的离群值进行检测，在检测出异常时，可以及时进行提示。
附图说明
图1为一种基于主机系统的数据恢复系统的系统框图。
具体实施方式
参照图1所示，一种基于主机系统的数据恢复系统，包括数据生产端和数据主机终端，数据生产端用于生成数据，并将数据传输至数据主机终端，数据主机终端用于接收数据生产端正常工作时产生的数据，并且数据生产端损坏或其内部数据损坏时，将其内部储存的数据传输至数据生产端中，用于对其进行恢复；
数据生产端在不同时间段的数据生成时，分别识别各个时间段数据的特征点，并基于特征点，对数据进行分段，并依次赋予标记1、标记2...标记N；随后基于各个标记，生成同一组数据中不同数据段的关联因子；
数据主机终端包括接收模块、处理模块、储存模块和虚拟机；
接收模块用于接收不同时间段的数据，并基于标记识别对应数据中的各个数据段，随后将数据传输至处理模块；
处理模块将各个标记与数据进行匹配，将数据划分为多个数据段，并将数据段输送至储存模块；
储存模块将同一数据中不同时间段且同一标记的数据段进行分类储存；
且储存模块将同一关联因子的数据传输至虚拟机中，得到备份数据，在数据生产端发出恢复指令后，接收模块将恢复指令和关联因子通过处理模块传输至虚拟机和储存模块；
虚拟机将备份数据传输至数据生产端，进行恢复；储存模块将其内部的数据段重组，并输送至虚拟机与备份数据进行对比。
虚拟机内部设置有两组镜像区域，两组镜像区域分别标记为区域Ⅰ和区域Ⅱ；
区域Ⅰ和区域Ⅱ轮流更新备份数据，即数据第一次备份在区域Ⅰ，第二次备份在区域Ⅱ，第三次将区域Ⅰ的数据进行覆盖，随后重复数据的覆盖；
在接收恢复指令后，虚拟机将最新更新的备份数据传输至数据生产端；
同时，储存模块向虚拟机中传输具有关联因子的数据，虚拟机将该数据与区域Ⅰ和区域Ⅱ中的两组备份数据进行对比。
若数据与备份数据无差异，则停止输送该数据；
若数据与备份数据有差异，虚拟机识别差异部分的标记，并基于该标记，将数据中对应的数据段传输至数据生产端，对已传输的备份数据中对应的数据段进行替换。
接收模块在接收数据生产端的数据时，对该数据的关联因子进行识别，并检测各时间段数据关联因子的离群值，并基于对应数据的大数据，设定对应关联因子的利群阈值；
若关联因子的离群值大于利群阈值，则对应数据则进行标记Z，并发送标记Z至数据生产端。
数据生产端收到标记Z后，对数据主机终端进行反馈；
若在时间Y内，数据生产端未进行反馈，则数据主机终端向预设的备份联系设备发送警示信息。
工作原理：
实施例1
数据生产端在数据动态生成时，每隔设定的时间，将数据发送至数据主机终端进行备份；
在发送时，识别特征点，其中特征点进行人为设定，数据基于特征点进行分段，并依次进行标记，随后基于各个标记，生成同一组数据中不同数据段的关联因子；
数据主机终端中的储存模块将储存空间划分多个备份区域，多个备份区域均设置有缓存区域；
将不同时间段的数据段按照各自数据中的标记储存至对应的区域中；同一区域中，储存不同时间段中同一标记的数据段，方便后续进行恢复；
在后续备份时，将同一标记的数据段进行对比；数据段有变化，则后一组的数据段将对应区域中的数据进行覆盖，被覆盖的数据移动至缓存区域中，方便后续进行检查；
数据生产端在发送恢复指令时，将所需恢复数据的全部标记和关联因子输送至数据主机终端；
处理模块在接收到恢复指令和关联因子后，将关联因子分别发送至储存模块和虚拟机；
虚拟机在接收到关联因子后，与其内部的备份数据进行匹配，匹配成功后，将备份数据发送至数据生产端，对其内部的数据进行恢复；
同时储存模块基于关联因子，对其内部的储存的各个数据段进行重组，重组后发送至虚拟机，与虚拟机内部两组镜像区域中的备份数据进行匹配；
匹配无差异，则取消后续的数据传输；
匹配有差异，虚拟机识别差异部分的标记，并基于该标记，将数据中对应的数据段传输至数据生产端，对已传输的备份数据中对应的数据段进行替换。
实施例2
相较于实施例1，本实施例在发送恢复指令之前，对所需恢复数据的标记进行识别和匹配，识别数据中损坏的标记X，随后将带有标记X的恢复指令输送至数据主机终端，其中，X的取值范围在1-N之间；
数据终端将标记X与储存模块进行匹配，将对应的数据段及其关联因子通过虚拟机输送至数据生产端；
数据生产端将其内部损坏数据的关联因子与传输数据段的关联因子进行匹配，将传输数据段插入至损坏的数据中进行修复。
具体案例
某测绘公司采用本申请中的数据恢复系统，在测绘时，由多个测绘仪器将测绘数据传输至位于公司总部的主机中；
经反馈，在采用本申请后的数据恢复系统后，在遇到小范围的数据损坏时，数据的恢复速度更快，在测绘工作时，可以降低工作的准备时间；
并且在遇到设备损坏时，在将数据转移至新设备中时，速度更快，并且数据的准确度更高，并且恢复的数据，其刚恢复的数据速率较以前所使用的系统速度更快，并且在后续的更新中，其更新后的数据与设备损坏前的数据相差时间更少。
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本模板的保护范围。
Claims (7)
1.一种基于主机系统的数据恢复系统，包括数据生产端和数据主机终端，其特征在于：
所述数据生产端在不同时间段的数据生成时，分别识别各个时间段数据的特征点，并基于特征点，对数据进行分段，并依次赋予标记1、标记2...标记N；随后基于各个标记，生成同一组数据中不同数据段的关联因子；
所述数据主机终端包括接收模块、处理模块、储存模块和虚拟机；
所述接收模块用于接收不同时间段的数据，并基于标记识别对应数据中的各个数据段，随后将数据传输至处理模块；
所述处理模块将各个标记与数据进行匹配，将数据划分为多个数据段，并将数据段输送至储存模块；
所述储存模块将同一数据中不同时间段且同一标记的数据段进行分类储存；
且储存模块将同一关联因子的数据传输至虚拟机中，得到备份数据，在数据生产端发出恢复指令后，接收模块将恢复指令和关联因子通过处理模块传输至虚拟机和储存模块；
虚拟机将备份数据传输至数据生产端，进行恢复；储存模块将其内部的数据段重组，并输送至虚拟机与备份数据进行对比。
2.根据权利要求1所述的一种基于主机系统的数据恢复系统，其特征在于，所述数据生产端在发送恢复指令时，将所需恢复数据的全部标记和关联因子输送至数据主机终端；
虚拟机基于关联因子将备份数据输送至数据生产端；
储存模块对应标记的多个数据段基于关联因子重组后，输送至虚拟机与备份数据进行对比，基于对比结果，对备份数据进行更换。
3.根据权利要求1所述的一种基于主机系统的数据恢复系统，其特征在于，所述数据生产端对发送后的标记进行备份，在发送恢复指令之前，对所需恢复数据的标记进行识别和匹配，识别数据中损坏的标记X，随后将带有标记X的恢复指令输送至数据主机终端；
数据终端将标记X与储存模块进行匹配，将对应的数据段及其关联因子通过虚拟机输送至数据生产端；
数据生产端将其内部损坏数据的关联因子与传输数据段的关联因子进行匹配，将传输数据段插入至损坏的数据中进行修复。
4.根据权利要求1所述的一种基于主机系统的数据恢复系统，其特征在于，所述储存模块的储存方法，包括以下步骤：
步骤一：将储存空间划分多个备份区域，多个备份区域均设置有缓存区域；
步骤二：将不同时间段的数据段按照各自数据中的标记储存至对应的区域中；同一区域中，储存不同时间段中同一标记的数据段，方便后续进行恢复；
步骤三：在后续备份时，将同一标记的数据段进行对比；若无变化，则将后一组的数据段删除；若有变化，则后一组的数据段将对应区域中的数据进行覆盖，被覆盖的数据移动至缓存区域中。
5.根据权利要求1所述的一种基于主机系统的数据恢复系统，其特征在于，所述虚拟机内部设置有两组镜像区域，两组镜像区域分别标记为区域Ⅰ和区域Ⅱ；
区域Ⅰ和区域Ⅱ轮流更新备份数据；
在接收恢复指令后，虚拟机将最新更新的备份数据传输至数据生产端；
同时，储存模块向虚拟机中传输具有关联因子的数据，虚拟机将该数据与区域Ⅰ和区域Ⅱ中的两组备份数据进行对比。
6.根据权利要求5所述的一种基于主机系统的数据恢复系统，其特征在于，对比包括以下步骤：
A1：数据与备份数据无差异，则停止输送该数据；
A2：数据与备份数据有差异，虚拟机识别差异部分的标记，并基于该标记，将数据中对应的数据段传输至数据生产端，对已传输的备份数据中对应的数据段进行替换。
7.根据权利要求1所述的一种基于主机系统的数据恢复系统，其特征在于，所述接收模块在接收数据生产端的数据时，对该数据的关联因子进行识别，并检测各时间段数据关联因子的离群值，并基于对应数据的大数据，设定对应关联因子的利群阈值；
若关联因子的离群值大于利群阈值，则对应数据则进行标记Z，并发送标记Z至数据生产端。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211146609.0A CN115237679B (zh) | 2022-09-21 | 2022-09-21 | 一种基于主机系统的数据恢复系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211146609.0A CN115237679B (zh) | 2022-09-21 | 2022-09-21 | 一种基于主机系统的数据恢复系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115237679A true CN115237679A (zh) | 2022-10-25 |
| CN115237679B CN115237679B (zh) | 2022-12-13 |
Family
ID=83681369
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211146609.0A Active CN115237679B (zh) | 2022-09-21 | 2022-09-21 | 一种基于主机系统的数据恢复系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115237679B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103902407A (zh) * | 2012-12-31 | 2014-07-02 | 华为技术有限公司 | 一种虚拟机恢复方法及服务器 |
| CN110781028A (zh) * | 2018-07-30 | 2020-02-11 | 阿里巴巴集团控股有限公司 | 数据备份方法、数据恢复方法、装置及计算设备 |
| CN110955559A (zh) * | 2018-09-26 | 2020-04-03 | Emc知识产权控股有限公司 | 用于虚拟机资源标记的系统和方法 |
| WO2021238267A1 (zh) * | 2020-05-29 | 2021-12-02 | 浪潮电子信息产业股份有限公司 | 基于集群文件系统的数据备份方法、装置及可读存储介质 |
-
2022
- 2022-09-21 CN CN202211146609.0A patent/CN115237679B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103902407A (zh) * | 2012-12-31 | 2014-07-02 | 华为技术有限公司 | 一种虚拟机恢复方法及服务器 |
| CN110781028A (zh) * | 2018-07-30 | 2020-02-11 | 阿里巴巴集团控股有限公司 | 数据备份方法、数据恢复方法、装置及计算设备 |
| CN110955559A (zh) * | 2018-09-26 | 2020-04-03 | Emc知识产权控股有限公司 | 用于虚拟机资源标记的系统和方法 |
| WO2021238267A1 (zh) * | 2020-05-29 | 2021-12-02 | 浪潮电子信息产业股份有限公司 | 基于集群文件系统的数据备份方法、装置及可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115237679B (zh) | 2022-12-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112953737B (zh) | 配置异常检测方法、服务器以及存储介质 | |
| CN106528871B (zh) | 一种在线更新工业控制系统工程数据点信息的方法 | |
| US20200209830A1 (en) | Machining apparatus error correction system and method | |
| CN104135521A (zh) | 环境自动监测网络的数据异常值标识方法及系统 | |
| CN105512171A (zh) | 数据库同步的方法及装置 | |
| CN111930597B (zh) | 基于迁移学习的日志异常检测方法 | |
| CN115712623B (zh) | 一种基于捕获元数据变更的批量数据容错采集方法 | |
| CN110769074B (zh) | 一种新能源集控系统数据断点续传方法 | |
| CN112182233B (zh) | 用于存储设备故障记录的知识库、及利用其辅助定位设备故障的方法及系统 | |
| CN115237679B (zh) | 一种基于主机系统的数据恢复系统 | |
| CN116843107B (zh) | 一种基于bim技术的建筑信息智能管理系统 | |
| CN112598142B (zh) | 一种风电机组检修工作质量审查辅助方法与系统 | |
| CN117114420B (zh) | 一种基于图像识别的工贸安全事故风险管控系统和方法 | |
| CN105373446B (zh) | 一种基于自动演练的系统自动修复方法和装置 | |
| CN112231303A (zh) | 一种数据迁移系统及方法 | |
| CN100576182C (zh) | 计算机文件的实时监控系统和方法 | |
| CN115658360A (zh) | 一种基于日志数据的云系统故障诊断方法 | |
| CN105847978B (zh) | 一种基于智能电视的信息收集方法及系统 | |
| CN110399242B (zh) | 基于Hadoop平台的信息维护管理系统 | |
| CN110457284B (zh) | 基于SQLServer数据库的多时间点数据恢复方法及系统 | |
| CN112213313A (zh) | 接触网检测系统综合定位方法 | |
| CN110647578A (zh) | 页面信息同步显示的方法、装置、计算机设备和存储介质 | |
| CN113255600B (zh) | 基于客户端的点云地图更新优化方法、系统、介质及设备 | |
| CN117689187B (zh) | 一种用于轨道交通故障检测的数据监管方法及系统 | |
| CN117077040B (zh) | 基于机器学习的大型复杂装备故障诊断与预测系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |