CN101755257A - 管理在不同的网络上将写入从首要存储器复制到次要存储器 - Google Patents

管理在不同的网络上将写入从首要存储器复制到次要存储器 Download PDF

Info

Publication number
CN101755257A
CN101755257A CN200880025347.4A CN200880025347A CN101755257A CN 101755257 A CN101755257 A CN 101755257A CN 200880025347 A CN200880025347 A CN 200880025347A CN 101755257 A CN101755257 A CN 101755257A
Authority
CN
China
Prior art keywords
primary
writing
group
write
primary device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200880025347.4A
Other languages
English (en)
Other versions
CN101755257B (zh
Inventor
斯蒂芬·F·埃德尔
肯尼思·W·博伊德
肯尼思·F·戴三世
格雷戈里·E·麦克布赖德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN101755257A publication Critical patent/CN101755257A/zh
Application granted granted Critical
Publication of CN101755257B publication Critical patent/CN101755257B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2064—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring while ensuring consistency
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2071—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring using a plurality of controllers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2082—Data synchronisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/82—Solving problems relating to consistency

Abstract

提供用于在不同网络上管理将写从首要存储器拷贝到次要存储器的方法、系统和制品以及计算机程序。在至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第一组以及至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第二组上维持信息。从在第一或第二组中的首要器件之一接收关于将写从首要器件拷贝到次要器件的故障的故障通知。在第一网络上使用第一网络协议向在第一组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。在第二网络上使用第二网络协议向在第二组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。

Description

管理在不同的网络上将写入从首要存储器复制到次要存储器
技术领域
本发明涉及管理在不同的网络上将写入从首要存储器复制到次要存储器的方法、系统和制品。
背景技术
灾难恢复系统通常解决两类故障，在单个时间点上的突发的灾难性故障或在一个时间段上的数据丢失。在第二类循序渐进的灾难中，对磁盘卷(volume)的更新可能丢失。为了辅助数据更新的恢复，可以在远程位置处提供数据的拷贝。典型地随着应用系统将新的数据写入首要存储器件，进行这种双重或影子拷贝。可以使用不同的拷贝技术来用于在次要地点处保持数据的远程拷贝，诸如国际商业机器公司(“IBM”)的扩展远程拷贝(XRC)、耦合的XRC(CXRC)、全局拷贝、和全局镜像拷贝。
在数据镜像系统中，在卷对中维持数据。卷对由在首要存储器件中的卷和在包括了在首要卷中维持的数据的相同拷贝的次要存储器件中的相应卷组成。可以使用首要和次要存储控制器来控制对首要和次要存储器件的存取。
在诸如数据库系统的许多应用程序中，某些写不可能发生，除非发生了前一次写；否则，将危害数据整体性。其整体性依赖于前一次数据写的发生的这种数据写已知为依赖性的写(dependent write)。当所有写以其逻辑顺序被转移、即所有依赖性的写在依赖于其的写之前首先转移时，在首要和次要存储器中的卷是一致的。一致性组是对首要卷的更新的集合，以便以一致的方式来保护依赖性的写。一致性时间是该系统保证对次要卷的更新一致的最后的时间。一致性组包括以被写入首要期间的顺序被写入远程或次要地点的时间段时的所有依赖性的写。该一致性组还具有用于在具有等于或早于一致性时间戳的时间戳的一致性组中的所有数据写的一致性时间。一致性组维持数据在卷和存储器件之间的一致性。因此，当从次要卷恢复数据时，所恢复的数据将在一致性组的时间点上是一致的。
在一个会话内形成一致性组。被分配给一个会话的所有卷对将具有在同一一致性组中维持的其更新。因此，这些会话被用于确定将被组合到一致性组中的卷。在日记(journal)器件或卷内形成一致性组。从该日记，被收集以形成一致性组的更新被应用到次要卷。如果，在将来自该日记的更新正被应用到次要卷时系统故障，则在恢复操作期间，没有完成向次要卷的写的更新可以从该日记恢复，且被应用到次要卷。
发明内容
提供用于在不同网络上管理将写从首要存储器拷贝到次要存储器的方法、系统和制品以及计算机程序。在至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第一组以及至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第二组上维持信息。从在第一或第二组中的首要器件之一接收关于将写从首要器件拷贝到次要器件的故障的故障通知。在第一网络上使用第一网络协议向在第一组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。在第二网络上使用第二网络协议向在第二组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。
在另一实施例中，在至少一个一致性组中维持第一和第二组中的首要存储器，以便对第一和第二组中的首要存储器的依赖性的写以依赖性的写被写入第一和第二组中的任何首要存储器的顺序被拷贝到相应的次要存储器。
在另一实施例中，数据被同步地写入第一和第二组中的首要存储器和相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到接收到在相应的次要存储器处已经完成了写的应答。
在另一实施例中，在第一或第二网络上从首要器件之一接收将写记入日志的请求。将该写记入写日志。确定对于在第一和第二组中的任何首要器件是否存在任何未决的记入日志的写。在第一或第二网络上向首要器件返回日志完成，以使能该首要器件响应于确定对于在第一和第二组中的首要器件在写日志中不存在具有比返回日志完成的写更早的时间点的未决的记入日志的写，将该写拷贝到相应的次要器件。响应于接收到该写被拷贝到相应的次要器件的通知，从该写日志移除一个记入日志的写。
在另一实施例中，使用第一和第二网络协议从第一和第二组中的首要器件接收该冻结命令被接收的应答。使用第一网络协议向第一组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写。使用第二网络协议向第二组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写。分别使用第一和第二网络协议指令在第一和第二组中的首要器件以响应于从导致该故障通知的故障的恢复而将以改变记录数据结构指示的写拷贝到其相应的次要器件。
在另一实施例中，在第一组和第二组中的器件包括异类器件。
提供用于在不同的网络上将写从首要存储器拷贝到次要存储器的方法、系统、制品和计算机程序。响应于首要器件确定对首要存储器的写不能被拷贝到相应的次要存储器，使用第一网络协议将故障通知从至少一个首要器件和由所述至少一个首要器件管理的至少一个相应的首要存储器的第一组中的首要器件通信到控制系统。响应于首要器件确定对相应的首要存储器的写不能被拷贝到相应的次要存储器，使用第二网络协议将故障通知从至少一个首要器件和由所述至少一个首要器件管理的至少一个相应的首要存储器的第二组中的首要器件通信到控制系统。在第一组中的至少一个首要器件处，使用第一网络协议从控制系统接收冻结命令。在第二组中的至少一个首要器件处，使用第二网络协议从控制系统接收冻结命令。响应于接收到冻结命令，暂停将写从第一和第二组中的首要存储器拷贝到相应的次要存储器。
在另一实施例中，将写拷贝到第一和第二组中的首要存储器，以便在对相应的次要存储器的依赖性的写的拷贝中保留对第一和第二组中的任何首要存储器的依赖性的写的顺序。
在另一实施例中，同步地从第一和第二组中的首要器件拷贝数据到相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到在相应的次要存储器处接收到完成了写的应答。
在另一实施例中，由第一组中的首要器件之一接收写请求。在第一网络上使用第一网络协议发送消息，以将该写记入日志到控制系统，其中，第一组中的首要器件不向相应的次要存储器拷贝写，直到在第一网络上从控制系统接收到该写被记入日志的应答。在第二网络上使用第二网络协议发送消息，以将该写记入日志到控制系统，其中，第二组中的首要器件不向相应的次要存储器拷贝写，直到在第二网络上从控制系统接收到该写被记入日志的应答。在由第一和第二组中的首要器件将具有较早时间点的写拷贝到其相应的次要存储器之前，第一和第二组中的首要器件不将依赖性的写拷贝到其相应的次要存储器。
在另一实施例中，响应于完成将写拷贝到相应的次要存储器，在第一网络上，使用第一网络协议向控制系统发送写完成消息。响应于完成将写拷贝到相应的次要存储器，在第二网络上，使用第二网络协议向控制系统发送写完成消息。
在另一实施例中，响应于接收到冻结命令，在第一网络上使用第一网络协议向控制系统发送接收了冻结命令的应答。响应于接收到冻结命令，在第二网络上使用第二网络协议向控制系统发送接收了冻结命令的应答。响应于控制系统从第一和第二组中的所有首要器件接收到接收了冻结命令的应答，使用第一网络协议从控制系统接收运行命令。响应于接收到运行命令，完成对第一和第二组中的相应的次要存储器的写。响应于完成了写，以改变记录数据结构来指示一个完成的写。
在另一实施例中，在第一组中的至少一个首要器件和首要存储器包括相对于在第二组中的至少一个首要器件和至少一个首要存储器的异类器件，且其中，第一和第二组具有异类的存储管理器程序来进行通信故障通知、接收冻结命令和暂停写的拷贝的操作。
附图说明
现在将通过仅示例的方式并参考如下附图描述本发明的优选实施例：
图1图示了网络计算环境的实施例。
图2图示了一致性组成员信息的实施例。
图3图示了写日志(log)条目信息的实施例。
图4图示了处理写请求的操作的实施例。
图5图示了处理完成了写的应答的操作的实施例。
图6图示了应对一个次要器件的可用性的故障的操作的实施例。
图7图示了处理接收冻结(freeze)命令的应答的操作的实施例。
图8图示了其中实现了这些实施例的某些所描述的方面的计算机架构的方块图。
具体实施方式
图1图示了网络计算环境的实施例。一个或多个次要器件2的第一组每个管理对首要存储器4的输入/输出(I/O)存取，且每个次要器件6管理对次要存储器8的I/O存取。每个次要器件2将对耦合的首要存储器4的写镜像到相应的次要器件6，以在相应的次要器件2的次要存储器8中存储。首要器件2和相应的次要器件6的第一组使用第一网络协议在第一网络10上通信。一个或多个首要器件12的第二组每个管理对具有一个或多个首要卷16的首要存储器14的输入/输出(I/O)存取，且每个次要器件18管理对具有一个或多个次要卷22的次要存储器20的I/O存取。在第二组中的每个首要器件12将对被包括的耦合的卷16的写镜像到相应的次要器件18，以在相应的次要器件18的相应的次要卷22中存储。该首要器件12和相应的次要器件18的第二组使用第二网络协议在第二网络24上通信。
耦合到网络10和24两者的控制系统26包括控制软件28，该控制软件28管理在单个一致性组中的首要存储器4和首要卷16，以便对在不同网络10和24中的首要存储器4和首要卷16中的任何一个的任何写在时间点上是一致的。以此方式，对首要存储器4或首要卷16的依赖性的写以它们被写入首要地点的顺序被镜像到其相应的次要存储器8和次要卷22。在一致性组中的任何首要器件2和12处的任何地方的早先的写完成之前，在一致性组中的第一和第二组中的任何首要器件2和12处的任何地方的后来的依赖性的写不被拷贝到相应的次要器件6和18。控制软件26能够分别使用第一和第二网络协议来在第一和第二网络10和24上通信。
控制软件28维持具有关于一个一致性组中包括的每个首要卷16/次要卷22和首要存储器4/次要存储器8对的信息的一致性组信息30。控制软件28还将关于对在写日志32中未决的首要卷16和首要存储器4的写的信息记入日志。在一个实施例中，首要器件2和12同步地向其首要存储器4和首要卷16写数据，以便该写不完成，直到首要器件2和12确认了该写被成功地镜像到相应的次要存储器8、20。
网络10和24可以包括存储域网络(SAN)、局域网(LAN)、企业内部网、因特网、广域网(WAN)、对等网络、无线网络、仲裁回路网(arbitratedloop network)等。在描述的实施例中，使用不同的网络通信协议来在第一10和第二24网络上通信。例如，在一个实施例中，可以使用诸如以太网和TCP/IP的分组或无国界通信协议来在第一网络10上通信，且可以使用存储器件通信协议来在第二网络24上通信，诸如光纤信道、串行附接SCSI(SAS)等。
首要器件2和12以及次要器件6、18分别包括操作系统34、36、38和40。首要器件2和其相应的次要器件8的第一组分别包括存储器件驱动器42和44，以与控制软件28通信，且管理向首要存储器4的写请求和对次要存储器8的写的镜像。次要器件12和其相应的次要器件8的第二组分别包括存储管理器46和48，以与控制软件28通信，且管理向首要存储器12的写请求和对次要存储器18的其镜像。首要器件驱动器42和存储管理器46维持改变记录位图(bitmap)50和52，以指示当与相应的次要器件6和18的连接不可用时、诸如当以冻结/运行(FREEZE/RUN)模式操作时完成了向首要存储器4和卷16的写。
存储器4、8、14和20可以包括单个存储器件、诸如硬盘、闪存等，或存储器件的阵列，诸如Just a Bunch of Disks(JBOD)、网络附接存储器(NAS)、硬盘、直接存取存储器件(DASD)、独立盘的冗余阵列(RAID)阵列、虚拟器件、磁带存储器、闪存等。首要器件2和12可以包括多个逻辑分区(LPAR)或在单个系统中实现的虚拟处理器之一。
在一个实施例中，在第一组中的首要器件2和相应的次要器件6可以包括服务器，且存储器4和8可以包括器件2、6本地的在内部或外部总线上与器件2、6连接的硬盘、串行接口、通用串行总线(USB)、火线接口等。或者，在第一组中的器件2、6和存储器4、8的组合可以包括网络附接存储器(NAS)。在一个实施例中，在第二组中的器件12和18可以包括管理对包括实现多个逻辑卷16和22的互连存储器件、诸如RAID阵列、JBOD等的存储系统14和20的存取的企业存储服务器。
另外，在一个实施例中，与在第一组中的器件2、6一起使用的一个或多个操作系统34、38和/或存储器4、8相对于与在第二组中的器件12和18一起使用的操作系统36、30和/或存储器14、20来说是异类的。在一个实施例中，在附接的存储器4、8的器件驱动器42中使用用于管理对数据的写和镜像的存储管理器代码。在一个实施例中，存储管理器代码46和48可以包括在企业存储服务器中使用的硬件和软件的组合。
图2图示了可以在用于在一致性组中管理的首要/次要存储器对的一致性组信息30中的一致性组成员条目70中所包括的信息的例子。条目70包括管理对在一致性组中的首要存储器74的存取的首要器件72、管理对要向其镜像对首要存储器74的写的相应的次要存储器78的存取的次要器件76、首要器件72的网络地址80和用于与首要器件72通信的网络协议82。
图3图示了可以被包括在写日志32中的写日志条目90中的信息的例子，该写日志32包括首要器件90进行对首要存储器92的写以及该写的时间点。
图4图示了由在第一和第二组中的首要器件2、12中的器件驱动器42和存储管理器46以及控制软件28所进行的处理写请求的操作的实施例。当接收到(在块100)写请求时，器件驱动器42/存储管理器46在由首要器件使用的网络10或24上发送(在块102)消息，以将该写记入日志到控制软件28。响应于接收到(在块104)将该写记入日志的消息，控制软件28向所请求的写的写日志32添加(在块106)日志条目90(图3)。如果(在块108)对于在具有早前的时间点96的第一和第二组中的任何首要器件来说不存在未决的记入日志了的写，则控制软件28返回(在块110)日志完成。否则，如果(在块108)存在具有早前的时间点的还没有完成的未决的写，则控制结束，且不返回完成，以便首要器件2不能拷贝该写，直到时间早前的写被拷贝到其各自的次要存储器8或卷22。响应于接收到日志完成，器件驱动器42/存储管理器46可以经由管理对相应的次要存储器8的存取的次要器件6来将记入日志了的写拷贝(在块112)到首要存储器4和相应的次要存储器8。
在某些实施例中，首要存储器件4可以同步地写数据，以便该写不完成，直到该数据被成功地拷贝到相应的次要存储器8。在一个实施例中，如果该写数据在被写入次要存储器8之前被存储在管理对相应的次要存储器8的存取的次要器件6的缓存器中，则该写可以完成。
图5图示了在第一和第二组中的首要器件2、12中的器件驱动器42/存储管理器46以及控制软件28所进行的处理对次要存储器8的写的完成的操作的实施例。当器件驱动器42/存储管理器46接收(在块150)该写向相应的次要器件的拷贝完成的应答时，器件驱动器42/存储管理器46在由首要器件使用的网络10、24上向控制软件28发送(在块152)消息，告知完成了写。响应于接收(在块154)完成了写的应答，控制软件28删除(在块156)来自写日志32的完成了的写的日志条目90。控制软件28确定(在块158)在具有最早时间点96的写日志32中的记入了日志的写90(图3)，且向所确定的记入了日志的写的首要器件2、12返回(在块160)日志完成，如在字段92所示，以允许首要器件2、12将该写拷贝到次要器件6、18。这些操作保证了对在第一和第二组中的首要存储器4和卷16的任何一个的后来的写不被次序颠倒地拷贝到其相应的次要存储器8或次要卷22。在替换的实施例中，可以使用不同的技术来保证该数据不被次序颠倒地写，诸如使用延长的长的忙时间段，以便首要器件将拷贝写延迟为延长的长的忙时间段，以允许其他首要器件完成其早前的写的时间。
图6图示了由在第一和第二组中的首要器件2、12中的器件驱动器42/存储管理器46以及控制软件28进行的应对指示首要器件2、12不能与次要器件6、18通信的故障通知的操作的实施例。当检测(块200)或被次要器件2通知了在首要器件2、12不能与次要器件6、18通信的故障的硬件以时，器件驱动器42/存储管理器46在由首要器件2、12使用的网络10、24上向控制软件28发送(在块202)故障通知。该故障可以是在首要器件2、12和次要器件6、18之间的网络连接的故障、或在次要地点处的故障、例如次要器件6、18或次要存储器8、20的故障的结果。当接收(在块204)可能来自在第一10和第二24网络上的第一和第二组中的首要器件2、12的任一的故障通知时，该控制软件28使用第一网络协议向在第一组中的每个首要器件2发出(在块206)冻结命令，以停止向次要存储器8、20拷贝写。该控制软件28还使用第二网络协议向在第二组中的每个首要器件12发出(在块208)冻结命令，以停止向相应的至少一个次要器件拷贝写。该控制软件28可以从在一致性组信息30中的条目70确定要使用的首要器件72(图2)和网络协议82。
当接收(在块210)冻结命令时，器件驱动器42/存储管理器46暂停(在块212)将写向相应的次要存储器8或次要卷22的拷贝。器件驱动器42/存储管理器46向发送了冻结命令的首要器件2、12发送(在块214)接收到冻结命令的应答。
参考图7，当控制软件28接收(在块250)来自首要器件2、12之一的冻结命令的应答时，该控制软件28确定(在块252)是否从在第一10和第二24网络上的一致性组中的所有首要器件2、12接收了应答。如果否，如果没有从所有首要器件2、12接收到应答，则控制可能结束，或采取其他适当的动作。否则，如果已经从所有首要器件2、12接收了应答，则控制软件28使用第一网络协议向在第一组中的每个首要器件2发出(在块254)运行命令，以停止向相应的次要器件6、18拷贝写。控制软件28使用第二网络协议向在第二组中的每个首要器件12发出(在块256)运行命令，以停止向相应的次要器件18拷贝写。控制软件28可以确定用于来自一致性组信息30的运行命令的首要器件。
当接收(在块258)运行命令时，器件驱动器42/存储管理器46完成向使用存储器4或首要卷16的写(在块260)，并以改变记录数据结构50、52指示(在块262)完成了写。在次要器件6、18和/或存储器8、20恢复之后，首要器件2、12可以拷贝在改变记录位图50、52中指示的那些写，以同步首要4、14和次要8、20存储器。
所描述的实施例管理向在使用不同的网络通信协议的不同网络上分布的次要存储器或卷拷贝对首要存储器或卷的写。另外，所描述的实施例通过使用不同的网络协议管理在不同的网络中的首要器件来应对在次要地点处的故障。其他实施例维持在不同的网络中的次要存储器处的数据在时间点上一致。
另外的实施例细节
可以使用标准编程和/或工程技术来实现所描述的操作作为方法、装置或制品以产生软件、固件、硬件或其组合。可以实现所描述的操作作为保持在“计算机可读介质”中的代码，其中，处理器可以从该计算机可读介质读取和执行该代码。计算机可读介质可以包括诸如磁性存储介质(例如，硬盘、软盘、磁带等)、光学存储器(CD-ROM、DVD、光盘等)、易失性和非易失性存储器器件(例如，EEPROM、ROM、PROM、RAM、DRAM、SRAM、闪存、固件、可编程逻辑等)等的媒介。还可以在硬件逻辑(例如，集成电路芯片、可编程门阵列(PGA)、特定用途集成电路(ASIC)等)中实现该实现所描述的操作的代码。另外，可以在“传输信号”中实现该实现所描述的操作的代码，其中，传输信号可以通过空间或通过诸如光纤、铜线等的传输媒介传播。其中代码或逻辑被编码的传输信号还可以包括无线信号、卫星传输、无线电波、红外信号、蓝牙等。其中代码或逻辑被编码的传输信号能够被发送站发送且被接收站接收，其中，在传输信号中编码的代码或逻辑可以在接收和发送站或设备处的硬件或计算机可读介质中解码和存储。“制品”包括其中实现了代码的计算机可读介质、硬件逻辑、和/或传输信号。其中实现所描述的操作的实施例的代码被编码的设备可以包括计算机可读介质或硬件逻辑。当然，本领域技术人员将认识到，可以对该配置进行许多修改，而不脱离本发明的范围，且制品可以包括本领域公知的适当的信息承载介质。
术语“一个实施例”、“实施例”、“多个实施例”、“该实施例”、“这些实施例”、“一个或多个实施例”、“一些实施例”、和“一个实施例”意味着“本发明的一个或多个(但不是全部)实施例”，除非另外表述地指定。
术语“包括”、“包含”、“具有”和其变形意味着“包括但不局限于”，除非另外表述地指定。
项目的枚举列表不暗示这些项目的任一或所有是相互排除的，除非另外表述地指定。
术语“一个(a)”、“一个(an)”和“该(the)”意味着“一个或多个”，除非另外表述地指定。
彼此通信的设备不需要彼此持续通信，除非另外表述地指定。另外，彼此通信的设备可以直接或通过一个或多个中介间接通信。
具有彼此通信的若干组件的实施例的描述不暗示需要所有这种组件。相反，描述各种可选的组件以例示本发明的可能的实施例的广泛种类。
另外，虽然可以按顺序描述处理步骤、方法步骤、算法等，但可以配置这种处理、方法和算法以按交替的顺序工作。换句话说，可能描述的步骤的任何顺序或次序不一定指示需要以该顺序进行步骤。在此描述的处理的步骤可以按任何实际顺序进行。另外，可以同时进行一些步骤。
当在此描述了单个设备或制品时，将清楚，可以使用多于一个设备/制品(无论它们是否合作)来替代单个设备/制品。类似地，在此处描述了多于一个设备或制品(无论它们是否合作)的情况下，将清楚，可以使用当设备/制品来替代多于一个设备或制品，或可以使用不同数量的设备/制品来替代示出的数量的设备或程序。设备的功能和/或特征可以被未明确描述的具有这种功能/特征的一个或多个其他设备来替换地实现。因此，本发明的其他实施例不需要包括该设备本身。
图4、5、6、7的所示的操作示出了以特定顺序发生的某些事件。在替换的实施例中，某些操作可以以不同的顺序进行、被修改或移除。另外，步骤可以被添加到上述逻辑，且仍然符合所描述的实施例。另外，在此描述的操作可能按顺序发生，或某些操作可以并行地处理。另外，可以由单个处理单元或由分布式处理单元来进行操作。
图8图示了可以在设备2、6、12、18和26(图1)中整体或部分实现的计算系统架构300的实施例。该架构300可以包括一个或多个处理器302(例如微处理器)、存储器304(例如非易失性存储器器件)、和存储装置306(例如，非易失性存储器、诸如磁盘、光盘、磁带盘等)。存储装置306可以包括内部存储器件或附接的或网络可存取的存储器。在存储装置306中的程序以本领域公知的方式被装载到存储器304中且被(一个或多个)处理器302执行。该架构还包括使能在网络上的通信的一个或多个适配器308。可以使用输入设备310来向处理器302提供用户输入，且可以包括键盘、鼠标、铁笔(pen-stylus)、麦克风、触摸感应显示屏、或本领域公知的任何其他激励或输入机制。输出设备312能够呈现从处理器302或诸如显示监视器、打印机、存储器等的其他组件传送的信息。
已经为了图示和描述的目的呈现了本发明的各种实施例的前述描述。不意图穷举或限制本发明为所公开的精确形式。在上述教导的指引下，许多修改和变化是可能的。意图不由该详细的描述来限制本发明的范围，而是由所附的权利要求来限制。上述说明书、例子和数据提供了本发明的组成的该制品和使用的描述。由于可以进行本发明的许多实施例而不脱离本发明的精神和范围，因此，本发明位于此后所附的权利要求中。

Claims (40)

1.一种方法，包括：
在至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第一组以及至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第二组上维持信息；
从在第一或第二组中的首要器件之一接收关于将写从首要器件拷贝到次要器件的故障的故障通知；
使用第一网络协议在第一网络上向在第一组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件；以及
使用第二网络协议在第二网络上向在第二组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。
2.根据权利要求1的方法，还包括：
在至少一个一致性组中维持第一和第二组中的首要存储器，以便对第一和第二组中的多个首要存储器的依赖性的写以依赖性的写被写入第一和第二组中的任何首要存储器的顺序被拷贝到相应的次要存储器。
3.根据权利要求2的方法，其中，数据被同步地写入第一和第二组中的首要存储器和相应的次要存储器，以便对第一和第二组中的首要存储器的写直到接收到所述写在相应的次要存储器处已经完成的应答为止才完成。
4.根据权利要求1、2或3的方法，还包括：
在第一或第二网络上从首要器件之一接收将写记入日志的请求；
将该写记入写日志；
确定对于在第一和第二组中的任何首要器件是否存在任何未决的记入日志的写；
在第一或第二网络上向首要器件返回日志完成，以使得该首要器件响应于确定对于在第一和第二组中的首要器件在写日志中不存在具有比对于日志完成被返回的写更早的时间点的未决的记入日志的写，能够将该写拷贝到相应的次要器件；以及
响应于接收到该写被拷贝到相应的次要器件的通知，从该写日志移除一个记入日志的写。
5.根据权利要求1、2、3或4的方法，还包括：
使用第一和第二网络协议从第一和第二组中的首要器件接收该冻结命令被接收的应答；
使用第一网络协议向第一组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；
使用第二网络协议向第二组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；以及
分别使用第一和第二网络协议指令在第一和第二组中的首要器件以响应于从导致该故障通知的故障的恢复而将以改变记录数据结构指示的写拷贝到其相应的次要器件。
6.根据前述任一权利要求的方法，其中，在第一组和第二组中的器件包括异类器件。
7.一种系统，与至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第一组以及至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第二组通信，所述系统包括：
包含第一组和第二组上的信息的计算机可读介质；
处理器；
由该处理器执行以导致操作的控制程序，该操作包括：
从在第一或第二组中的首要器件之一接收关于将写从首要器件拷贝到次要器件的故障的故障通知；
在第一网络上使用第一网络协议向在第一组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件；以及
在第二网络上使用第二网络协议向在第二组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。
8.根据权利要求7的系统，其中，所述操作还包括：
在至少一个一致性组中维持第一和第二组中的首要存储器，以便对第一和第二组中的首要存储器的依赖性的写以依赖性的写被写入第一和第二组中的任何首要存储器的顺序被拷贝到相应的次要存储器。
9.根据权利要求8的系统，其中，数据被同步地写入第一和第二组中的首要存储器和相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到接收到在相应的次要存储器处已经完成了写的应答。
10.根据权利要求7-9中任一的系统，其中，所述操作还包括：
在第一或第二网络上从首要器件之一接收将写记入日志的请求；
将该写记入写日志；
确定对于在第一和第二组中的任何首要器件是否存在任何未决的记入日志的写；
在第一或第二网络上向首要器件返回日志完成，以使能该首要器件响应于确定对于在第一和第二组中的首要器件在写日志中不存在具有比返回日志完成的写更早的时间点的未决的记入日志的写，将该写拷贝到相应的次要器件；以及
响应于接收到该写被拷贝到相应的次要器件的通知，从该写日志移除一个记入日志的写。
11.根据权利要求7-10中任一的系统，所述操作还包括：
使用第一和第二网络协议从第一和第二组中的首要器件接收该冻结命令被接收的应答；
使用第一网络协议向第一组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；
使用第二网络协议向第二组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；以及
分别使用第一和第二网络协议指令在第一和第二组中的首要器件以响应于从导致该故障通知的故障的恢复而将以改变记录数据结构指示的写拷贝到其相应的次要器件。
12.根据权利要求7-11中任一的系统，其中，在第一组和第二组中的器件包括异类器件。
13.一种计算机程序产品，包括被使能与至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第一组以及至少一个首要存储器、管理对所述至少一个首要存储器的输入/输出(I/O)存取的至少一个首要器件和对所述至少一个首要存储器的写被拷贝到的至少一个相应的次要存储器的第二组通信且被使能导致操作的代码，该操作包括：
在第一和第二组上维持信息；
从在第一或第二组中的首要器件之一接收关于将写从首要器件拷贝到次要器件的故障的故障通知；
在第一网络上使用第一网络协议向在第一组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件；以及
在第二网络上使用第二网络协议向在第二组中的至少一个首要器件发出冻结命令，以停止将写拷贝到在相应的至少一个次要器件。
14.根据权利要求13的计算机程序产品，其中，所述操作还包括：
在至少一个一致性组中维持第一和第二组中的首要存储器，以便对第一和第二组中的首要存储器的依赖性的写以依赖性的写被写入第一和第二组中的任何首要存储器的顺序被拷贝到相应的次要存储器。
15.根据权利要求14的计算机程序产品，其中，数据被同步地写入第一和第二组中的首要存储器和相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到接收到在相应的次要存储器处已经完成了写的应答。
16.根据权利要求13-15中任一的计算机程序产品，其中，所述操作还包括：
在第一或第二网络上从首要器件之一接收将写记入日志的请求；
将该写记入写日志；
确定对于在第一和第二组中的任何首要器件是否存在任何未决的记入日志的写；
在第一或第二网络上向首要器件返回日志完成，以使能该首要器件响应于确定对于在第一和第二组中的首要器件在写日志中不存在具有比返回日志完成的写更早的时间点的未决的记入日志的写，将该写拷贝到相应的次要器件；以及
响应于接收到该写被拷贝到相应的次要器件的通知，从该写日志移除一个记入日志的写。
17.根据权利要求13-16中任一的计算机程序产品，其中，所述操作还包括：
使用第一和第二网络协议从第一和第二组中的首要器件接收该冻结命令被接收的应答；
使用第一网络协议向第一组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；
使用第二网络协议向第二组中的至少一个首要器件发出运行命令，以指令该首要器件完成在首要器件处的写，且响应于从第一和第二组中的向其发送了冻结命令的所有器件接收应答、以改变记录数据结构来指示完成的写；以及
分别使用第一和第二网络协议指令在第一和第二组中的首要器件以响应于从导致该故障通知的故障的恢复而将以改变记录数据结构指示的写拷贝到其相应的次要器件。
18.根据权利要求13-17中任一的计算机程序产品，其中，在第一组和第二组中的器件包括异类器件。
19.一种计算机程序，包括适用于当在计算机上运行所述程序时进行权利要求1-6的任一或权利要求20-26的任一的方法的程序代码装置。
20.一种方法，包括：
响应于首要器件确定对首要存储器的写不能被拷贝到相应的次要存储器，使用第一网络协议将故障通知从至少一个首要器件和由所述至少一个首要器件管理的至少一个相应的首要存储器的第一组中的首要器件通信到控制系统；
响应于首要器件确定对相应的首要存储器的写不能被拷贝到相应的次要存储器，使用第二网络协议将故障通知从至少一个首要器件和由所述至少一个首要器件管理的至少一个相应的首要存储器的第二组中的首要器件通信到控制系统；
在第一组中的至少一个首要器件处，使用第一网络协议从控制系统接收冻结命令；
在第二组中的至少一个首要器件处，使用第二网络协议从控制系统接收冻结命令；以及
响应于接收到冻结命令，暂停将写从第一和第二组中的首要存储器拷贝到相应的次要存储器。
21.根据权利要求20的方法，还包括：
将写拷贝到第一和第二组中的首要存储器，以便在对相应的次要存储器的依赖性的写的拷贝中保留对第一和第二组中的任何首要存储器的依赖性的写的顺序。
22.根据权利要求21的方法，其中，同步地从第一和第二组中的首要器件拷贝数据到相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到在相应的次要存储器处接收到完成了写的应答。
23.根据权利要求20、21或22的方法，还包括：
由第一组中的首要器件之一接收写请求；
在第一网络上使用第一网络协议发送消息，以将该写记入日志到控制系统，其中，第一组中的首要器件不向相应的次要存储器拷贝写，直到在第一网络上从控制系统接收到该写被记入日志的应答；
在第二网络上使用第二网络协议发送消息，以将该写记入日志到控制系统，其中，第二组中的首要器件不向相应的次要存储器拷贝写，直到在第二网络上从控制系统接收到该写被记入日志的应答；以及
其中，在由第一和第二组中的首要器件将具有较早时间点的写拷贝到其相应的次要存储器之前，第一和第二组中的首要器件不将依赖性的写拷贝到其相应的次要存储器。
24.根据权利要求20到23的任一的方法，还包括：
响应于完成将写拷贝到相应的次要存储器，在第一网络上，使用第一网络协议向控制系统发送写完成消息；
响应于完成将写拷贝到相应的次要存储器，在第二网络上，使用第二网络协议向控制系统发送写完成消息。
25.根据权利要求20-24的任一的方法，还包括：
响应于接收到冻结命令，在第一网络上使用第一网络协议向控制系统发送接收了冻结命令的应答；
响应于接收到冻结命令，在第二网络上使用第二网络协议向控制系统发送接收了冻结命令的应答；
响应于控制系统从第一和第二组中的所有首要器件接收到接收了冻结命令的应答，使用第一网络协议从控制系统接收运行命令；
响应于接收到运行命令，完成对第一和第二组中的相应的次要存储器的写；以及
响应于完成了写，以改变记录数据结构来指示一个完成的写。
26.根据权利要求20-25的任一的方法，其中，在第一组中的至少一个首要器件和首要存储器包括相对于在第二组中的至少一个首要器件和至少一个首要存储器的异类器件，且其中，第一和第二组具有异类的存储管理器程序来进行通信故障通知、接收冻结命令和暂停写的拷贝的操作。
27.一种可与控制系统、第一网络、第二网络和次要存储器操作的系统，包括：
至少一个首要器件和至少一个相应的首要存储器的第一组，其中，对第一组中的至少一个相应的首要存储器的写被拷贝到至少一个相应的次要存储器；
至少一个首要器件和至少一个相应的首要存储器的第二组，其中，对第二组中的至少一个相应的首要存储器的写被拷贝到至少一个相应的次要存储器；
由第一组中的至少一个首要器件执行的第一存储管理器，以使得第一组中的至少一个首要器件进行操作，所述操作包括：
响应于在第一组中的首要器件确定对相应的首要存储器的写不能被拷贝到相应的次要存储器，在第一网络上使用第一网络协议将故障通知通信到控制系统；
在第一组中的至少一个首要器件处，使用第一网络协议从控制系统接收冻结命令；
响应于从控制系统接收到冻结命令，暂停将写从第一组中的至少一个相应的首要存储器拷贝到至少一个相应的次要存储器；
由第二组中的至少一个首要器件执行的第二存储管理器，以使得第二组中的至少一个首要器件进行操作，所述操作包括：
响应于在第二组中的首要器件确定对相应的首要存储器的写不能被拷贝到相应的次要存储器，在第二网络上使用第二网络协议将故障通知通信到控制系统；
在第二组中的至少一个首要器件处，使用第二网络协议从控制系统接收冻结命令；以及
响应于从控制系统接收到冻结命令，暂停将写从第二组中的至少一个相应的首要存储器拷贝到至少一个相应的次要存储器。
28.根据权利要求27的系统，其中，第一和第二存储管理器被进一步执行以导致操作包括：
将写拷贝到第一和第二组中的首要存储器，以便在对相应的次要存储器的依赖性的写的拷贝中保留对第一和第二组中的任何首要存储器的依赖性的写的顺序。
29.根据权利要求28的系统，其中，在第一和第二组中的首要器件同步地拷贝数据到相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到在相应的次要存储器处接收到完成了写的应答。
30.根据权利要求27-29的系统，还包括：
其中，第一存储管理器进一步使得操作包括：
接收写请求；
在第一网络上使用第一网络协议发送消息，以将该写记入日志到控制系统，其中，第一组中的首要器件不向相应的次要存储器拷贝写，直到在第一网络上从控制系统接收到该写被记入日志的应答；
其中，第二存储管理器进一步使得操作包括：
在第二网络上使用第二网络协议发送消息，以将该写记入日志到控制系统，其中，第二组中的首要器件不向相应的次要存储器拷贝写，直到在第二网络上从控制系统接收到该写被记入日志的应答；以及
其中，第一和第二存储管理器被进一步执行以与控制系统合作，以使得在由第一和第二组中的首要器件将具有较早时间点的写拷贝到其相应的次要存储器之前，第一和第二组中的首要器件不将依赖性的写拷贝到其相应的次要存储器。
31.根据权利要求27到30的任一的方法，还包括：
其中，第一存储管理器被进一步执行以响应于完成将写拷贝到相应的次要存储器，在第一网络上，使用第一网络协议向控制系统发送写完成消息；
其中，第二存储管理器被进一步执行以响应于完成将写拷贝到相应的次要存储器，在第二网络上，使用第二网络协议向控制系统发送写完成消息。
32.根据权利要求27-31的任一的方法，还包括：
其中，第一存储管理器被进一步执行操作，包括：
响应于接收到冻结命令，在第一网络上使用第一网络协议向控制系统发送接收了冻结命令的应答；以及
响应于控制系统从第一和第二组中的首要器件接收到接收了冻结命令的应答，使用第一网络协议从控制系统接收运行命令；
响应于接收到运行命令，完成写；以及
响应于完成了写，以改变记录数据结构来指示一个完成的写；
其中，第二存储管理器被进一步执行操作，包括：
响应于接收到冻结命令，在第二网络上使用第二网络协议向控制系统发送接收了冻结命令的应答；以及
响应于控制系统从第一和第二组中的首要器件接收到接收了冻结命令的应答，使用第二网络协议从控制系统接收运行命令；
响应于接收到运行命令，完成写；以及
响应于完成了写，以改变记录数据结构来指示一个完成的写。
33.根据权利要求27-32的任一的方法，其中，在第一组中的至少一个首要器件和首要存储器包括相对于在第二组中的至少一个首要器件和至少一个首要存储器的异类器件，且其中，第一和第二组具有异类的存储管理器程序来进行通信故障通知、接收冻结命令和暂停写的拷贝的操作。
34.一种计算机程序产品，包括第一存储管理器和第二存储管理器，其中，由在也包括至少一个相应的首要存储器的第一组中的至少一个首要器件来执行第一存储管理器，其中对第一组中的至少一个相应的次要存储器的写被拷贝到相应的次要存储器，其中，由在也包括至少一个相应的首要存储器的第二组中的至少一个首要器件来执行第二存储管理器，其中对第二组中的至少一个相应的次要存储器的写被拷贝到相应的次要存储器，其中执行第一和第二存储管理器来与控制系统通信，并导致操作，所述操作包括：
响应于确定对首要存储器的写不能被拷贝到相应的次要存储器，由第一存储管理器使用第一网络协议将故障通知通信到控制系统；
响应于确定对首要存储器的写不能被拷贝到相应的次要存储器，由第二存储管理器使用第二网络协议将故障通知通信到控制系统；
由第一存储管理器在第一组中的至少一个首要器件处，使用第一网络协议从控制系统接收冻结命令；
由第二存储管理器在第二组中的至少一个首要器件处，使用第二网络协议从控制系统接收冻结命令；以及
响应于接收到冻结命令，由第一和第二存储管理器暂停将写从第一和第二组中的首要存储器拷贝到相应的次要存储器。
35.根据权利要求34的计算机程序产品，还包括：
由第一和第二存储管理器将写拷贝到首要存储器，以便在对相应的次要存储器的依赖性的写的拷贝中保留对第一和第二组中的任何首要存储器的依赖性的写的顺序。
36.根据权利要求35的计算机程序产品，其中，在第一和第二组中的第一和第二存储管理器同步地拷贝数据到相应的次要存储器，以便对第一和第二组中的首要存储器的写不完成直到在相应的次要存储器处接收到完成了写的应答。
37.根据权利要求34-36中的任一的计算机程序产品，还包括：
由第一和第二存储管理器接收写请求；
由第一存储管理器在第一网络上使用第一网络协议发送消息，以将该写记入日志到控制系统，其中，第一存储管理器不向相应的次要存储器拷贝写，直到在第一网络上从控制系统接收到该写被记入日志的应答；
由第二存储管理器在第二网络上使用第二网络协议发送消息，以将该写记入日志到控制系统，其中，第二存储管理器不向相应的次要存储器拷贝写，直到在第二网络上从控制系统接收到该写被记入日志的应答；以及
其中，在将具有较早时间点的写拷贝到其相应的次要存储器之前，第一和第二存储管理器不将依赖性的写拷贝到其相应的次要存储器。
38.根据权利要求34-37的任一的计算机程序产品，还包括：
由第一存储管理器响应于完成将写拷贝到相应的次要存储器，在第一网络上，使用第一网络协议向控制系统发送写完成消息；
由第二存储管理器响应于完成将写拷贝到相应的次要存储器，在第二网络上，使用第二网络协议向控制系统发送写完成消息。
39.根据权利要求34-38的任一的计算机程序产品，还包括：
由第一存储管理器响应于接收到冻结命令，在第一网络上使用第一网络协议向控制系统发送接收了冻结命令的应答；
由第二存储管理器响应于接收到冻结命令，在第二网络上使用第二网络协议向控制系统发送接收了冻结命令的应答；
由第一存储管理器响应于控制系统从第一和第二组中的所有首要器件接收到接收了冻结命令的应答，使用第一网络协议从控制系统接收运行命令；
由第二存储管理器响应于控制系统从第一和第二组中的所有首要器件接收到接收了冻结命令的应答，使用第二网络协议从控制系统接收运行命令；
由第一和第二存储管理器响应于接收到运行命令，完成对第一和第二组中的相应的次要存储器的写；以及
由第一和第二存储管理器响应于完成了写，以改变记录数据结构来指示一个完成的写。
40.根据权利要求34-39的任一的计算机程序产品，其中，在第一组中的至少一个首要器件和首要存储器包括相对于在第二组中的至少一个首要器件和至少一个首要存储器的异类器件，且其中，第一和第二存储管理器包括异类的存储管理器程序来进行通信故障通知、接收冻结命令和暂停写的拷贝的操作。
CN200880025347.4A 2007-07-19 2008-07-16 管理在不同的网络上将写入从首要存储器拷贝到次要存储器 Expired - Fee Related CN101755257B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/780,454 US7822892B2 (en) 2007-07-19 2007-07-19 Managing the copying of writes from primary storages to secondary storages across different networks
US11/780,454 2007-07-19
PCT/EP2008/059305 WO2009010532A2 (en) 2007-07-19 2008-07-16 Managing the copying of writes from primary storages to secondary storages across different networks

Publications (2)

Publication Number Publication Date
CN101755257A true CN101755257A (zh) 2010-06-23
CN101755257B CN101755257B (zh) 2013-02-27

Family

ID=40260133

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200880025347.4A Expired - Fee Related CN101755257B (zh) 2007-07-19 2008-07-16 管理在不同的网络上将写入从首要存储器拷贝到次要存储器

Country Status (8)

Country Link
US (1) US7822892B2 (zh)
EP (1) EP2188720B1 (zh)
JP (1) JP5147941B2 (zh)
KR (1) KR101221285B1 (zh)
CN (1) CN101755257B (zh)
AT (1) ATE508410T1 (zh)
DE (1) DE602008006743D1 (zh)
WO (1) WO2009010532A2 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104937576A (zh) * 2013-03-28 2015-09-23 惠普发展公司，有限责任合伙企业 协调存储在基于非易失性存储器的系统中的数据的复制
US9904607B2 (en) 2015-11-13 2018-02-27 International Business Machines Corporation Logical to physical table restoration from stored journal entries
CN113961150A (zh) * 2021-10-29 2022-01-21 苏州浪潮智能科技有限公司 一种分布式持久性内存文件系统保持数据一致性的方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7249195B2 (en) 2001-03-30 2007-07-24 Minor Ventures, Llc Apparatus and methods for correlating messages sent between services
US7725605B2 (en) * 2004-08-06 2010-05-25 Salesforce.Com, Inc. Providing on-demand access to services in a wide area network
US8380674B1 (en) * 2008-01-09 2013-02-19 Netapp, Inc. System and method for migrating lun data between data containers
US8331221B2 (en) * 2008-04-30 2012-12-11 Centurylink Intellectual Property Llc Automatic outage alert system
US8676753B2 (en) 2009-10-26 2014-03-18 Amazon Technologies, Inc. Monitoring of replicated data instances
US8074107B2 (en) 2009-10-26 2011-12-06 Amazon Technologies, Inc. Failover and recovery for replicated data instances
US9507864B2 (en) 2011-01-28 2016-11-29 The Dun & Bradstreet Corporation Inventory data access layer
JP5699852B2 (ja) * 2011-08-12 2015-04-15 富士通株式会社 情報処理装置、ストレージ制御方法およびプログラム
WO2013038444A1 (ja) * 2011-09-14 2013-03-21 株式会社日立製作所 サーバ計算機、サーバ計算機システム、及びサーバ計算機制御方法
US8898515B1 (en) * 2012-06-28 2014-11-25 Emc International Company Synchronous replication using multiple data protection appliances across multiple storage arrays
US10572357B2 (en) * 2017-03-29 2020-02-25 International Business Machines Corporation Switching over from using a first primary storage to using a second primary storage when the first primary storage is in a mirror relationship
US10565068B1 (en) * 2017-04-19 2020-02-18 EMC IP Holding Company LLC Primary array data dedup/compression using block backup statistics
CN109657819A (zh) * 2018-12-26 2019-04-19 国网黑龙江省电力有限公司 基于智能评判的二次设备智能远程巡检方法及装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5544347A (en) * 1990-09-24 1996-08-06 Emc Corporation Data storage system controlled remote data mirroring with respectively maintained data indices
JPH05341918A (ja) * 1992-05-12 1993-12-24 Internatl Business Mach Corp <Ibm> 二重化デイスク記憶装置システムを構成するための接続装置
US5712970A (en) * 1995-09-28 1998-01-27 Emc Corporation Method and apparatus for reliably storing data to be written to a peripheral device subsystem using plural controllers
US6199074B1 (en) 1997-10-09 2001-03-06 International Business Machines Corporation Database backup system ensuring consistency between primary and mirrored backup database copies despite backup interruption
US6976080B1 (en) 1998-03-27 2005-12-13 Hewlett-Packard Development Company, L.P. Multiple-protocol communication subsystem controller
US6308284B1 (en) 1998-08-28 2001-10-23 Emc Corporation Method and apparatus for maintaining data coherency
US6763436B2 (en) 2002-01-29 2004-07-13 Lucent Technologies Inc. Redundant data storage and data recovery system
US7103884B2 (en) 2002-03-27 2006-09-05 Lucent Technologies Inc. Method for maintaining consistency and performing recovery in a replicated data storage system
US7590667B2 (en) 2003-01-30 2009-09-15 Hitachi, Ltd. File replication method for distributed file systems
US7178055B2 (en) * 2003-06-06 2007-02-13 Hewlett-Packard Development Company, L.P. Method and system for ensuring data consistency after a failover event in a redundant data storage system
US7043665B2 (en) * 2003-06-18 2006-05-09 International Business Machines Corporation Method, system, and program for handling a failover to a remote storage location
US7376859B2 (en) * 2003-10-20 2008-05-20 International Business Machines Corporation Method, system, and article of manufacture for data replication
JP4629342B2 (ja) * 2004-01-09 2011-02-09 株式会社日立製作所 ストレージ装置およびその制御方法
JP4382602B2 (ja) * 2004-04-23 2009-12-16 株式会社日立製作所 リモートコピーシステム
US8055745B2 (en) 2004-06-01 2011-11-08 Inmage Systems, Inc. Methods and apparatus for accessing data from a primary data storage system for secondary storage
GB0416074D0 (en) 2004-07-17 2004-08-18 Ibm Controlling data consistency guarantees in storage apparatus
JP4575059B2 (ja) 2004-07-21 2010-11-04 株式会社日立製作所 ストレージ装置
JP4401895B2 (ja) * 2004-08-09 2010-01-20 株式会社日立製作所 計算機システム、計算機及びそのプログラム。
US7370261B2 (en) * 2005-05-09 2008-05-06 International Business Machines Corporation Convolution-encoded raid with trellis-decode-rebuild
US7702851B2 (en) * 2005-09-20 2010-04-20 Hitachi, Ltd. Logical volume transfer method and storage network system
US7366808B2 (en) * 2005-11-23 2008-04-29 Hitachi, Ltd. System, method and apparatus for multiple-protocol-accessible OSD storage subsystem
US7627775B2 (en) * 2005-12-13 2009-12-01 International Business Machines Corporation Managing failures in mirrored systems
US7552295B2 (en) 2006-01-03 2009-06-23 International Business Machines Corporation Maintaining consistency when mirroring data using different copy technologies
US7577867B2 (en) 2006-02-17 2009-08-18 Emc Corporation Cross tagging to data for consistent recovery
US7603581B2 (en) * 2006-03-17 2009-10-13 International Business Machines Corporation Remote copying of updates to primary and secondary storage locations subject to a copy relationship
US7877628B2 (en) * 2006-06-08 2011-01-25 International Business Machines Corporation Mirroring data between primary and secondary sites
US7793148B2 (en) * 2007-01-12 2010-09-07 International Business Machines Corporation Using virtual copies in a failover and failback environment
US7904682B2 (en) * 2007-07-19 2011-03-08 International Business Machines Corporation Copying writes from primary storages to secondary storages across different networks

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104937576A (zh) * 2013-03-28 2015-09-23 惠普发展公司，有限责任合伙企业 协调存储在基于非易失性存储器的系统中的数据的复制
US9678673B2 (en) 2013-03-28 2017-06-13 Hewlett Packard Enterprise Development Lp Coordinating replication of data stored in a non-volatile memory-based system
CN104937576B (zh) * 2013-03-28 2018-08-31 慧与发展有限责任合伙企业 协调存储在基于非易失性存储器的系统中的数据的复制
US9904607B2 (en) 2015-11-13 2018-02-27 International Business Machines Corporation Logical to physical table restoration from stored journal entries
US10621051B2 (en) 2015-11-13 2020-04-14 International Business Machines Corporation Logical to physical table restoration from stored journal entries
CN113961150A (zh) * 2021-10-29 2022-01-21 苏州浪潮智能科技有限公司 一种分布式持久性内存文件系统保持数据一致性的方法
CN113961150B (zh) * 2021-10-29 2024-04-02 苏州浪潮智能科技有限公司 一种分布式持久性内存文件系统保持数据一致性的方法

Also Published As

Publication number Publication date
KR101221285B1 (ko) 2013-01-10
DE602008006743D1 (de) 2011-06-16
CN101755257B (zh) 2013-02-27
US7822892B2 (en) 2010-10-26
JP5147941B2 (ja) 2013-02-20
KR20100042631A (ko) 2010-04-26
WO2009010532A2 (en) 2009-01-22
JP2010533911A (ja) 2010-10-28
EP2188720A2 (en) 2010-05-26
EP2188720B1 (en) 2011-05-04
US20090024676A1 (en) 2009-01-22
ATE508410T1 (de) 2011-05-15
WO2009010532A3 (en) 2009-04-02

Similar Documents

Publication Publication Date Title
CN101755257B (zh) 管理在不同的网络上将写入从首要存储器拷贝到次要存储器
CN100570574C (zh) 用于管理存储系统之间的数据拷贝的系统和方法
CN101578586B (zh) 在故障转移和故障回复环境中使用虚拟拷贝
US7577788B2 (en) Disk array apparatus and disk array apparatus control method
CN101889268B (zh) 判定是否用存储库存储重新同步期间更新的数据的方法和系统
US9459804B1 (en) Active replication switch
US8453011B2 (en) Storage system and data restoration method thereof
US7133986B2 (en) Method, system, and program for forming a consistency group
US7188222B2 (en) Method, system, and program for mirroring data among storage sites
US8935498B1 (en) Splitter based hot migration
EP1455275B1 (en) Data restoring apparatus using journal data and identification information
US8850144B1 (en) Active replication switch
US8806161B1 (en) Mirroring splitter meta data
US6463501B1 (en) Method, system and program for maintaining data consistency among updates across groups of storage areas using update times
JP5124183B2 (ja) 非同期リモートコピーシステムの制御方法及び非同期リモートコピーシステム
CN100369005C (zh) 执行拷贝操作的方法和系统
CN101405701A (zh) 磁带卷容器在复制和供应管理中的使用
CN101815986A (zh) 在存储控制器和复制引擎之间分离写入
US20110196825A1 (en) Storage system and data duplication method in the same
US20060106747A1 (en) Data transfer management in consistency group formation
US7302604B2 (en) Remote management commands in a mass storage system
WO2016084156A1 (ja) ストレージシステム
JP2007148520A (ja) 情報通知方法及び計算機システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130227

Termination date: 20200716

CF01 Termination of patent right due to non-payment of annual fee