CN101031907B

CN101031907B - 索引处理

Info

Publication number: CN101031907B
Application number: CN2005800330528A
Authority: CN
Inventors: R·帕拉波图
Original assignee: EMC Inc
Current assignee: EMC Inc; EMC Corp
Priority date: 2004-09-30
Filing date: 2005-09-29
Publication date: 2012-03-07
Anticipated expiration: 2025-09-29
Also published as: EP1805650A2; CN101031907A; EP1805650A4; WO2006039502A2; US7716262B2; JP2008515114A; WO2006039502A3; US20060074964A1

Abstract

根据一些实施例，处理索引的技术包括：接收索引的一部分，其中索引与标识符相关；确定标识符是否被存储；并且如果确定标识符被存储，则把索引的被接收的一部分存储在与所存储的标识符基本上相同的项中。

Description

索引处理

技术领域

本发明涉及计算机环境，尤其是数据备份。

背景技术

惯例是在计算机环境中备份数据。当数据被备份到备份介质(例如磁带驱动器、硬驱动器)时，附加信息(这里被称为索引)也可以从正在备份其数据的计算机系统被传送。索引提供关于正在被备份的数据的信息，比如备份数据如何被组织的。索引经常以随机顺序被接收，并且所接收的索引典型地需要被重组。对于大量的索引而言，在备份结束时对索引的组织可能花费很长时间并且耗费高的系统资源。应该值得期望的是能够以一种避免为重建索引所典型需要的极长的时间周期的方式来组织索引。

附图说明

在以下的详细描述和附图中公开了本发明的不同实施例。

图1是适用于执行本发明的系统的框图。

图2A-2B是根据用于处理索引的一些实施例的方法的流程图。

图3是根据一些实施例用于处理索引的方法的流程图。

图4是根据本发明的一些实施例的结合图3所讨论的具有由索引节点号所标识的索引项的索引树的例子。

图5是根据一些实施例的用于索引处理的方法的流程图。

具体实施方式

可以以各种方式实施本分明，包括如过程、装置、系统、合成物质(composition of mstter)、计算机可读介质(诸如计算机可读存储介质)或者计算机网络，其中程序指令经由光或者电子通信链路被发送。在该说明书中，这些实施或者本分明可以采取的任何其它形式可以被称为技术。通常，在本分明的范围内可以改变所公开的处理的步骤顺序。

下面，与示出本分明原理的附图一起提供本分明的一个或者多个实施例的详细描述。关于这些实施例描述本分明，但是本分明并不局限于任一实施例。本分明的范围只由权利要求限制并且本分明包含各种替代方案、修改和等价物。在下面的描述中阐明许多特定的细节，以便提供对本分明的彻底理解。为了实例的目的提供这些细节，并且可以在没有一些或者全部这些特定细节的情况下根据权利要求实施本分明。为了清楚的目的，在与本分明有关的技术领域中所公知的技术资料未被详细描述，使得本分明有必要地晦涩。

图1是适用于执行本发明的系统的框图。在本例中，数据服务器100被示出以发送数据到备份介质102。数据服务器100也发送索引到备份服务器104。

图2是根据一些实施例的用于处理索引的方法的流程图。在本例中，索引以块(piece)的方式被接收。例如，用于特定的数据块的索引也可以有DIR组件(component)和NODE组件，其中DIR包括索引节点(inode)号、父索引节点号和索引名称。在本实施例中，索引节点号是标识索引的唯一号码。索引的NODE组件也包括与DIR索引节点号相匹配的索引节点号、以及索引属性(例如统计信息(statinfo.))。统计信息的例子包括关于索引的信息，比如大小、类型、许可、创建和修改日期。

在本例中，索引组件被接收(200)。这里所使用的索引组件是索引的一部分，例如DIR组件或NODE组件。然后确定索引组件的索引节点号是否已经被存储(202)。在一实施例中，索引节点号被存储在磁盘上(on-disk)平衡树结构中，如B+树。B+树结构可以以与搜索库(诸如Legato公司、EMC的分公司的WISS)相结合的方式被使用。在一些实施例中，索引节点号可以是标识索引的唯一号码并且该索引的所有索引组件都与该号码相关。

如果这个特定索引的索引节点号未被发现被存储，那么所接收的索引组件作为新的项被存储(208)。例如，如果NODE组件被接收并且这个特定索引的索引节点号未被发现被存储于磁盘上的平衡树中，那么该所接收的组件作为新的项被存储在平衡树中。

如果这个特定索引的索引节点号被发现被存储，那么确定被接收到的索引组件是否是DIR(204)。如果不是DIR，那么假设是NODE组件并且被写入与所有匹配索引节点号的匹配存储索引节点号(matching stored inode number)相同的项中(210)。如果被接收到的索引组件是DIR(204)，那么确定匹配存储索引项是否包括NODE(206)。如果不包括，那么被接收到的DIR就作为新的项被存储(212)。

如果匹配存储索引项包括NODE(206)，那么确定所存储的索引项中的一个是否是DIR(220)。如果带有匹配索引节点号的DIR组件还未被存储但是有NODE项，那么匹配的NODE项用该所接收到的DIR组件更新(224)。然而，如果匹配存储索引项中的一个是DIR(220)，那么NODE属性从匹配项之一中被复制并且在接收DIR组件时被存储在新的项中(222)。

图3是根据一些实施例用于处理索引的方法的流程图。在本例中，索引的块已经被重构，作为索引项被存储在平衡树中，并且索引树正在被重建。当与图4结合起来被讨论时可以最好地理解图3。

图4是根据一些实施例结合图3所讨论的具有由索引节点号所标识的索引的索引树的例子。在本例中，该树被示出包括具有顶端索引的索引结构，所述顶端索引具有索引节点数2。具有索引节点号3和4的索引被示出为节点索引号2的子；并且索引节点号5、6、7和8为索引节点号3和4的子。索引节点号2这里被称为索引节点号3和索引节点号4的父；并且索引节点号3这里被称为索引节点号5和索引节点号6的父。在本例中，索引节点号2可以是一目录，该目录包括具有索引节点号3的目录和具有索引节点号4的另一目录。索引节点号3是一目录，该目录包括带有索引节点号5的文件和带有索引节点号6的另一文件。

在图3所示的实施例中，最顶端的索引节点号从所存储的索引节点号中被寻找(300)。例如，可以预先确定树中的最顶端的索引节点号是索引节点号2。因此，可以在平衡树(例如B+树)中执行搜寻来寻找索引节点号2。

然后，其父是最顶端的索引节点号的索引项被寻找(302)。例如，在图4所示的例子中，其父是最顶端的索引节点号的索引是索引节点号3和索引节点号4。因此，可以在平衡树中基于父信息执行搜索来寻找具有等同于索引节点号2的父的索引项。在一些实施例中，父索引节点号被存储在索引的DIR组件中。

这些索引项被标识为索引树的下一级(304)。然后确定是否存在具有作为父的这些索引节点号的项(306)。如果不存在具有作为父的这些索引节点号的索引项，那么重构完成。然而，如果存在具有作为父的这些索引节点号的项，那么最新发现的索引项被标识为索引树的下一级(304)。

图5是根据一些实施例的用于处理索引的方法的流程图。在本例中，索引以单一块而不是以接收索引的多个块的方式从数据服务器被传送到备份服务器。这里，索引节点号不被接收，而是索引的路径被接收。例如，索引d可以与路径a/b/c/d一起被接收，其中c是d的父，b是c的父，a是b的父。另外，另一索引d与其路径一起可以被接收，其中索引d不同于索引d。具有相同名称的文件可以出现在不同的目录下，例如a/c/b/d，其中这些文件不具有相同的路径。因此，按名称(例如d)的搜索在本例中是无用的。在一些实施例中，在路径中为项产生伪索引节点号。在一些实施例中，该索引节点号是唯一的。目录树可以在存储器中被产生，所述目录树包括索引名称、其被分配的索引节点号、以及其父被分配的索引节点号，使得可以通过搜索索引节点号或父索引节点号来执行快速搜索。

在图5所示的例子中，索引与该索引的路径(例如a/b/c/d)一起被接收(500)。确定路径项是否从路径中被找回(502)。如果路径项不从路径中被找回，那么处理完成。如果路径项(例如“b”)从路径中被找回，那么父索引节点号从目录树中被找回(504)。目录树包括目录列表。在一些实施例中，目录树被存储在存储器中而索引树被存储在磁盘上。然后确定路径项是否处于目录树中(506)。如果路径项已经存在于目录树中，那么下一项从所接收到的路径中被找回(502)。在一些实施例中，路径项从左到右被、从父到子被找回，在路径a/b/c/d的例子中例如a，然后b，然后c，然后d。

如果路径项不存在于目录树(506)中，那么在该例中唯一的索引节点号被分配给该路径项(508)。确定路径项是否是目录(510)。在一些实施例中，文件不被保存在目录树中而是目录被保存。目录具有至少一个子而文件没有。如果路径项是目录，那么该路径项被添加到目录树(512)。在一些实施例中，目录名称、其被分配的索引节点号和其父被分配的索引节点号被存储在目录树中。例如，如果路径a/b/c/d已经为索引“d”被接收，并且“c”已经被分配索引节点号4，并且“d”被分配索引节点号5，那么“d”的父索引节点号是4。不管路径项被加到目录树(512)还是路径项是目录(510)，索引被存储在磁盘上的平衡树中(514)。如果一个是可用的，那么下一路径项被找回(502)。

其后，在一些实施例中根据与图3所例示的方法相类似的方法，索引树可以被重建。在该实施例中，搜索存储在存储器的目录树而不是平衡树，以找到索引节点号和父索引节点号。

尽管为了清楚理解的目的已经稍详细地描述了前述的实施例，但是本发明不局限于所提供的细节。有许多实现本发明的可替代方式。公开的实施例是示例性的并且不是限制性的。

Claims

1.处理索引的方法，包括：

接收索引的一部分，其中索引被接收的一部分与标识符相关；

确定标识符是否被存储；

如果确定标识符被存储，则将索引被接收的一部分存储在与所存储的标识符相同的项中，

如果确定标识符未被存储，则将索引被接收的一部分作为新的项存储，

其中，索引被接收的一部分包括索引的多个部分的其中之一；多个部分中包含的每一部分包括索引的DIR组件或NODE组件；以及

其中，将索引被接收的一部分存储在与存储的标识符相同的项中使得索引的被接收的NODE组件能够被存储在与先前接收的和存储的与被接收的NODE组件相关联的相关于相同标识符的组件相同的项中。

2.根据权利要求1所述的方法，其中将索引的被接收的一部分存储在磁盘上。

3.根据权利要求1所述的方法，其中索引的一部分是索引的DIR组件。

4.根据权利要求1所述的方法，其中索引的一部分是索引的NODE组件。

5.根据权利要求1所述的方法，其中标识符是唯一的标识符。

6.根据权利要求1所述的方法，其中标识符是索引节点号。

7.根据权利要求1所述的方法，其中标识符被存储在磁盘上。

8.根据权利要求1所述的方法，进一步包括寻找第一标识符以及寻找具有与第一标识符匹配的父标识符的项。

9.根据权利要求8所述的方法，其中具有匹配父标识符的被找到的项被标识为索引树的下一级。

10.处理索引的装置，包括：

用于接收索引的一部分的部件，其中索引的被接收的一部分与标识符相关；

用于确定标识符是否被存储的部件；

用于如果确定标识符被存储则将索引被接收的一部分存储在与所存储的标识符相同的项中的部件；

用于如果确定标识符未被存储则把索引的被接收的一部分作为新的项存储的部件，

其中，索引的被接收的一部分包括索引的多个部分的其中之一；多个部分中包含的每一部分包括索引的DIR组件或NODE组件；以及

其中，将索引的被接收的一部分存储在与存储的标识符相同的项中使得索引的被接收的NODE组件能够被存储在与先前接收的和存储的与接收的NODE组件相关联的相关于相同标识符的组件相同的项中。

11.根据权利要求10所述的装置，其中索引的被接收的一部分被存储在磁盘上。

12.根据权利要求10所述的装置，其中所述装置还包括用于寻找第一标识符以及寻找具有与第一标识符匹配的父标识符的项的部件。

13.根据权利要求12所述的装置，其中具有匹配父标识符的被找到的项被标识为索引树的下一级。