CN110618897A - 一种基于vgda信息恢复vg数据的方法 - Google Patents

一种基于vgda信息恢复vg数据的方法 Download PDF

Info

Publication number
CN110618897A
CN110618897A CN201910782333.7A CN201910782333A CN110618897A CN 110618897 A CN110618897 A CN 110618897A CN 201910782333 A CN201910782333 A CN 201910782333A CN 110618897 A CN110618897 A CN 110618897A
Authority
CN
China
Prior art keywords
information
vgda
data
command
ppmapfile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910782333.7A
Other languages
English (en)
Other versions
CN110618897B (zh
Inventor
察干察思
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Wave Intelligent Technology Co Ltd
Original Assignee
Suzhou Wave Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Wave Intelligent Technology Co Ltd filed Critical Suzhou Wave Intelligent Technology Co Ltd
Priority to CN201910782333.7A priority Critical patent/CN110618897B/zh
Publication of CN110618897A publication Critical patent/CN110618897A/zh
Application granted granted Critical
Publication of CN110618897B publication Critical patent/CN110618897B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种基于VGDA信息恢复VG数据的方法,包括从PV头部或ODM中获取VGDA信息;根据所述VGDA信息,为每个LV创建PPmapfile文件,所述PPmapfile文件中包括LP对应的PP;创建LV,并指向所述LV对应的PPmapfile文件;激活VG,恢复数据的可用性。本发明通过获取VGDA信息,基于VGDA信息得到PP与LP的对应关系,从而创建PPmapfile文件,创建LV并指向对应的PPmapfile文件,得到故障前的VG,恢复VG卷中的数据信息,减少业务宕机时间。

Description

一种基于VGDA信息恢复VG数据的方法
技术领域
本发明涉及数据恢复技术领域,具体地说是一种基于VGDA信息恢复VG数据的方法。
背景技术
目前针对AIX(Advanced Interactive eXecutive,一种UNIX操作系统)操作系统磁盘数据的备份和恢复方法有很多种,包括使用tar方式进行文件的备份及恢复,手动或使用自动化定时任务脚本定期将AIX磁盘中的数据打包压缩,再将压缩包拷贝到外置存储进行保存,当需要恢复数据时,将压缩包上传至操作系统中进行解压缩恢复;使用AIX操作系统自带的mksysb功能,将AIX操作系统数据备份成文件映像或者是磁带映像,当操作系统发生灾难无法修复时,可以进行快速恢复进行备份;备份恢复用户数据卷组信息等方式。
以上方式都是在有数据备份的情况下,进行的数据恢复方式。当由于某些原因没有预先进行过数据备份,此时无法通过备份软件或者备份媒介进行数据恢复,当数据受到逻辑损坏,例如出现文件系统不可读写,VG(Volume Group,卷组)无法激活,数据只读等现象(数据并未发生物理丢失)时,现有方案往往无计可施。
发明内容
本发明实施例中提供了一种基于VGDA信息恢复VG数据的方法,以解决现有技术在未进行数据备份时,发生灾难,无法进行数据恢复的问题。
为了解决上述技术问题,本发明实施例公开了如下技术方案:
本发明提供了一种基于VGDA信息恢复VG数据的方法,包括以下步骤:
从PV(Physical Volume,系统的物理硬盘)头部或ODM(AIX中由一组对象类和对象组成的数据库,包含了所有已配置的物理卷、卷组、逻辑卷信息)中获取VGDA(Volume GroupDescriptor Area,卷组描述区,包含了物理卷所在卷组的所有逻辑卷与物理卷的描述信息)信息;
根据所述VGDA信息,为每个LV(Logical Volume,AIX中逻辑卷,由同在一个卷组的一个或多个LP组成,它不需要占用连续的PV空间,它可以跨越硬盘存在)创建PPmapfile文件,所述PPmapfile文件中包括LP对应的PPNUM;
创建LV,并指向所述LV对应的PPmapfile文件;
激活VG,恢复数据的可用性。
进一步地,从PV头部获取VGDA信息具体为:
通过readvgda命令获取PV头部的VGDA信息;
当部分PV头部的VGDA受损时,通过readvgda-p hdiskx命令,获取异常VG中任一PV头部的VGDA信息。
进一步地,从ODM中获取VGDA信息具体为:
通过exportvg命令从ODM中导出VGDA信息;
当ODM中的VGDA受损,PV头部的PVID故障时,利用recreatevg命令修复VGDA信息,并通过exportvg命令从ODM中导出VGDA信息;
当VG定义不存在于ODM中时,利用redefinevg恢复VG定义,并通过exportvg命令从ODM中导出VGDA信息。
进一步地,所述VGDA信息包括PVNUM、PPNUM、LVNAME、LP和VG的类型。
进一步地,所述根据所述VGDA信息,为每个LV创建PPmapfile文件的具体过程为:
获取同一LV的LP(Logical partition,逻辑分区,LP与PP相对应,一个LP一般对应一个PP,有镜像情况下一个LP可对应多个PP,LP的大小与PP的大小相同)所对应的PPNUM号;
根据所述PPNUM,以及对应的PVID(physical volume identifier,相当于软序列号)的hdisk值;
为每个LV创建格式为LVname:hdisk:PPnum1-PPnum2的PPmapfile文件,PPnum为当前LV中LP对应的PP(Physical partition,硬盘存储的最小分配单元)。
进一步地,所述创建LV,并指向所述LV对应的PPmapfile文件通过mklv-y lv1-traw-m/lv1_ppmapfie xxvg 32命令实现,其中-t参数为指定创建的LV类型,-m参数实现指向PPmapfile文件。
进一步地,在获取VGDA信息之前还包括步骤:
获取故障VG信息,以及该VG中包含的PV信息、LV信息。
进一步地,通过lspv命令,获取PV信息;通过lsvg命令,获取VG信息;通过lsvg-l命令,获取VG中包含LV的信息。
进一步地,所述恢复数据的可用性之后,还包括步骤:
对比恢复数据可用性之后的VG信息、PV信息和LV信息与故障前的信息是否一致,校验恢复数据的准确性。
发明内容中提供的效果仅仅是实施例的效果,而不是发明所有的全部效果,上述技术方案中的一个技术方案具有如下优点或有益效果:
1、通过获取VGDA信息,基于VGDA信息得到PP与LP的对应关系,从而创建PPmapfile文件,创建LV并指向对应的PPmapfile文件,得到故障前的VG,恢复VG卷中的数据信息,减少业务宕机时间。
2、在获取VGDA信息之前首先获取故障VG信息,并在恢复数据后,对比VG恢复后的信息与故障前信息的一致性,对恢复数据的准确性进行校验,进一步保证了本方案的可靠性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明所述方法实施例1的流程示意图;
图2是AIX中LVM模型的结构示意图;
图3是本发明所述方法实施例2的流程示意图。
具体实施方式
为能清楚说明本方案的技术特点,下面通过具体实施方式,并结合其附图,对本发明进行详细阐述。下文的公开提供了许多不同的实施例或例子用来实现本发明的不同结构。为了简化本发明的公开,下文中对特定例子的部件和设置进行描述。此外,本发明可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施例和/或设置之间的关系。应当注意,在附图中所图示的部件不一定按比例绘制。本发明省略了对公知组件和处理技术及工艺的描述以避免不必要地限制本发明。
如图1所示,本发明基于VGDA信息恢复VG数据的方法,其一实施例包括以下步骤:
S1,从PV头部或ODM中获取VGDA信息;
S2,根据所述VGDA信息,为每个LV创建PPmapfile文件,所述PPmapfile文件中包括LP对应的PPNUM;
S3,创建LV,并指向所述LV对应的PPmapfile文件;
S4,激活VG,恢复数据的可用性。
步骤S1中,AIX系统中的VGDA信息存在与PV头部和ODM这两个地方。本实施例通过readvgda命令获取PV头部的VGDA信息,或通过exportvg命令获取ODM中的VGDA信息。当VGDA信息受损时,通过以下2种方式来获取VGDA信息:
1)当ODM中的VGDA信息受损时,可以使用exportvg以及redefinevg、recreatevg修复解决。其中,如果ODM中的VGDA受损而PV头部仅仅是PVID出了问题,可以用recreatevg修复,然后通过exportvg从ODM中导出VGDA信息;如果VG定义在ODM中不存在了,只能用redefinevg恢复VG定义,然后通过exportvg从ODM中导出VGDA信息。
2)当PV头部的VGDA受损时,如果一个VG有多个PV,只有部分PV的头部VGDA损坏,可以通过readvgda-p hdiskx命令来获取相关VG中的VGDA信息,从未受损的PV上来获取VGDA信息。如果一个VG所有的PV头部的VGDA均损坏了,导致没有任何一份VGDA信息可用,则很难恢复,这种情况很少出现,只能通过数据备份恢复的方式来进行恢复或者通过专业的硬盘数据恢复厂商来恢复数据。
获取到的VGDA信息部分示例如下:
VGDA信息中包括PVNUM(PV编号)、PPNUM(PP编号)、LVNAME(LV名称)、LP以及VGType(类型)。其中PVNUM的值通过PVID来体现,PVID的取值为hdiskx。以上示例中LP与PP的对应关系为,LP为1对应PPNUM为1,LP为5对应的PPNUM为2,LP为2对应的PPNUM为3。
本发明的实施基于AIX系统的LVM模型,如图2所示,两个PV组成一个VG,,在实际应用中,一个VG可能由一个或多个PV组成。在VG的定义过程中,指定VG内磁盘空间的分割方式,即PV中物理分区的大小,每个PV都会被分割成用户指定大小的块,这个块就是物理分区PP。LV由多个PP构成,PP与LP形成对应关系。
当VG中只有一个PV时,该PV上就会存在2个VGDA区;当VG中有两个以上PV上时,其中一个PV上有2个VGDA区,另一PV上有1个VGDA区;当VG由3个及3个以上的PV组成时,每个PV上都会有1个VGDA区。同一VG的不同PV中存放的VGDA信息是一致的。
步骤S2中,根据VGDA信息,创建包含LP和PP对应关系的PPmapfile文件,文件格式为LVname:hdisk:PPnum1-PPnum2;其创建过程为:根据VGDA信息中的LVNAME得到同一LV,获取当前LV的LP所对应的PPNUM和PVID,得到PVID对应的hdisk取值;为每个LV创建格式为LVname:hdisk:PPnum1-PPnum2的PPmapfile文件,PPnum为当前LV中LP对应的PPNUM值。如名称为lv1、lv2的LV,形成的PPmapfile文件分别为:
lv1:hdiskx:220-220
lv2:hdiskx:222-309
以上形成的PPmapfile文件中同一LV下LP对应的PPNUM可能不是连续的,如lv1中还存在PPNUM为310的PP与LP对应,则PPmapfile文件可写为:
lv1:hdiskx:220-220
hdiskx:310-310
步骤S3中,编辑完所有PPmapfile文件后,通过命令mklv-y lv1-t raw-m/lv1_ppmapfie xxvg 32创建LV,并指向当前LV对应的PPmapfile文件。命令中-t参数为指定创建的LV设备类型,raw表示为裸设备,-m参数实现指向PPmapfile文件的操作。
步骤S4中,根据创建并指向对应PPmapfile的所有LV得到VG,激活VG,挂载文件系统,启用应用数据,实现数据的可用性,通过命令varyonvg vgxx;mount/dev/lvxx实现VG的激活与挂载,该步骤通过现有技术即可实现。另外在激活VG之前可能还涉及根据现场应用环境修改LV权限的问题,此处为现有技术,不再赘述。
如图3所示,本发明基于VGDA信息恢复VG数据的方法,另一实施例在上一实施例的步骤S1之前还包括步骤S0,获取故障VG信息,以及该VG中包含的PV信息、LV信息;在步骤S4之后还包括步骤S5,对比恢复数据可用性之后的VG信息、PV信息和LV信息与故障前的信息是否一致,校验恢复数据的准确性。
步骤S0中,分别通过lspv命令,获取PV信息;通过lsvg命令,获取VG信息;通过lsvg-l命令,获取VG中包含LV的信息。以尽可能多的获取故障VG及相关信息为目的,得到重建LV之前的故障VG信息,以便于与步骤S5中恢复数据可用性之后对VG及相关信息进行比较,进一步校验上一实施例中恢复数据的准确性,保证本发明的可靠性。
需要进一步说明的一点是,本发明解决的LV或者VG受到损坏只是数据发生逻辑损坏,VG中物理数据分布发生逻辑混乱导致VG数据不可读写,文件系统异常,无法访问等,并不是真正意义上的物理数据丢失,当VG中PP与LP的对应关系恢复正常后,AIX中VG数据即可恢复读写,数据也随之恢复正常使用。
以上所述只是本发明的优选实施方式,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也被视为本发明的保护范围。

Claims (9)

1.一种基于VGDA信息恢复VG数据的方法,其特征是,包括以下步骤:
从PV头部或ODM中获取VGDA信息;
根据所述VGDA信息,为每个LV创建PPmapfile文件,所述PPmapfile文件中包括LP对应的PPNUM;
创建LV,并指向所述LV对应的PPmapfile文件;
激活VG,恢复数据的可用性。
2.根据权利要求1所述的基于VGDA信息恢复VG数据的方法,其特征是,从PV头部获取VGDA信息具体为:
通过readvgda命令获取PV头部的VGDA信息;
当部分PV头部的VGDA受损时,通过readvgda-p hdiskx命令,获取异常VG中任一PV头部的VGDA信息。
3.根据权利要求1所述的基于VGDA信息恢复VG数据的方法,其特征是,从ODM中获取VGDA信息具体为:
通过exportvg命令从ODM中导出VGDA信息;
当ODM中的VGDA受损,PV头部的PVID故障时,利用recreatevg命令修复VGDA信息,并通过exportvg命令从ODM中导出VGDA信息;
当VG定义不存在于ODM中时,利用redefinevg恢复VG定义,并通过exportvg命令从ODM中导出VGDA信息。
4.根据权利要求1所述的基于VGDA信息恢复VG数据的方法,其特征是,所述VGDA信息包括PVNUM、PPNUM、LVNAME、LP和VG的类型。
5.根据权利要求4所述的基于VGDA信息恢复VG数据的方法,其特征是,所述根据所述VGDA信息,为每个LV创建PPmapfile文件的具体过程为:
获取同一LV的LP所对应的PPNUM;
根据所述PPNUM,以及对应的PVID的hdisk值;
为每个LV创建格式为LVname:hdisk:PPnum1-PPnum2的PPmapfile文件,PPnum为当前LV中LP对应的PPNUM号。
6.根据权利要求5所述的基于VGDA信息恢复VG数据的方法,其特征是,所述创建LV,并指向所述LV对应的PPmapfile文件通过mklv-y lv1-t raw-m/lv1_ppmapfie xxvg 32命令实现,其中-t参数为指定创建的LV类型,-m参数实现指向PPmapfile文件。
7.根据权利要求1-6任一项所述的基于VGDA信息恢复VG数据的方法,其特征是,在获取VGDA信息之前还包括步骤:
获取故障VG信息,以及该VG中包含的PV信息、LV信息。
8.根据权利要求7所述的基于VGDA信息恢复VG数据的方法,其特征是,通过lspv命令,获取PV信息;通过lsvg命令,获取VG信息;通过lsvg-l命令,获取VG中包含LV的信息。
9.根据权利要求8所述的基于VGDA信息恢复VG数据的方法,其特征是,所述恢复数据的可用性之后,还包括步骤:
对比恢复数据可用性之后的VG信息、PV信息和LV信息与故障前的信息是否一致,校验恢复数据的准确性。
CN201910782333.7A 2019-08-23 2019-08-23 一种基于vgda信息恢复vg数据的方法 Active CN110618897B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910782333.7A CN110618897B (zh) 2019-08-23 2019-08-23 一种基于vgda信息恢复vg数据的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910782333.7A CN110618897B (zh) 2019-08-23 2019-08-23 一种基于vgda信息恢复vg数据的方法

Publications (2)

Publication Number Publication Date
CN110618897A true CN110618897A (zh) 2019-12-27
CN110618897B CN110618897B (zh) 2023-01-06

Family

ID=68922494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910782333.7A Active CN110618897B (zh) 2019-08-23 2019-08-23 一种基于vgda信息恢复vg数据的方法

Country Status (1)

Country Link
CN (1) CN110618897B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1804807A (zh) * 2005-01-14 2006-07-19 英业达股份有限公司 San系统异常情况下的保护方法
CN104850469A (zh) * 2015-05-12 2015-08-19 浪潮电子信息产业股份有限公司 基于LV镜像实现linux系统中数据备份恢复与迁移的方法
CN108958976A (zh) * 2018-07-02 2018-12-07 山东汇贸电子口岸有限公司 一种pv快照备份恢复分布式数据库数据方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1804807A (zh) * 2005-01-14 2006-07-19 英业达股份有限公司 San系统异常情况下的保护方法
CN104850469A (zh) * 2015-05-12 2015-08-19 浪潮电子信息产业股份有限公司 基于LV镜像实现linux系统中数据备份恢复与迁移的方法
CN108958976A (zh) * 2018-07-02 2018-12-07 山东汇贸电子口岸有限公司 一种pv快照备份恢复分布式数据库数据方法和系统

Also Published As

Publication number Publication date
CN110618897B (zh) 2023-01-06

Similar Documents

Publication Publication Date Title
US10528419B2 (en) Mapping around defective flash memory of a storage array
US7778958B2 (en) Recovery of data on a primary data volume
US6990611B2 (en) Recovering data from arrays of storage devices after certain failures
US7389379B1 (en) Selective disk offlining
US8224781B2 (en) Data protection in a data storage system
US8713356B1 (en) Error detection and recovery tool for logical volume management in a data storage system
US7631158B2 (en) Disk snapshot method using a copy-on-write table in a user space
US20130006939A1 (en) Systems and methods for reliably managing files in a computer system
US9256373B1 (en) Invulnerable data movement for file system upgrade
JP2008539474A (ja) パワーセーフディスクストレージ装置、システム及び方法
US20190079834A1 (en) Database Transaction Log Migration
WO2011105023A1 (ja) 処理装置および書込方法
US20210232450A1 (en) Managing uncorrectable user data
US9519545B2 (en) Storage drive remediation in a raid system
US11556423B2 (en) Using erasure coding in a single region to reduce the likelihood of losing objects maintained in cloud object storage
CN113885809B (zh) 数据管理系统及方法
CN105354109A (zh) 视频监控索引数据的备份方法和装置
CN106933707B (zh) 基于raid技术的数据存储设备数据恢复方法及系统
US20100138603A1 (en) System and method for preventing data corruption after power failure
CN110618897B (zh) 一种基于vgda信息恢复vg数据的方法
US6854038B2 (en) Global status journaling in NVS
CN112784101B (zh) 视频数据存储方法及装置、数据存储设备
US10747610B2 (en) Leveraging distributed metadata to achieve file specific data scrubbing
CN114327292A (zh) 文件管理方法、系统、电子设备和存储介质
CN108268336B (zh) 保证元数据一致性的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant