CN101652756A - 数据存储系统中的业务工作量标识 - Google Patents

数据存储系统中的业务工作量标识 Download PDF

Info

Publication number
CN101652756A
CN101652756A CN200880011633A CN200880011633A CN101652756A CN 101652756 A CN101652756 A CN 101652756A CN 200880011633 A CN200880011633 A CN 200880011633A CN 200880011633 A CN200880011633 A CN 200880011633A CN 101652756 A CN101652756 A CN 101652756A
Authority
CN
China
Prior art keywords
data
workload identification
information
record set
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200880011633A
Other languages
English (en)
Other versions
CN101652756B (zh
Inventor
M·F·威尔丁
K·W·博伊德
J·W·帕尔姆
R·F·科恩
D·M·沙克尔福德
W·F·米尔
D·N·E·迪尔兰伯格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Core Usa Second LLC
GlobalFoundries Inc
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US11/734,097 external-priority patent/US7613888B2/en
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN101652756A publication Critical patent/CN101652756A/zh
Application granted granted Critical
Publication of CN101652756B publication Critical patent/CN101652756B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3476Data logging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/349Performance evaluation by tracing or monitoring for interfaces, buses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

数据存储系统根据所拥有的应用程序的写I/O把主机所提供的数据写入到数据存储器中。工作量管理器根据所拥有的应用程序的所述写I/O指导对所述所提供的数据的处理,并提供用于描述所述写I/O的业务工作量标识;存储子系统控制器把业务工作量标识添加到针对所述数据的记录集信息中;并且日志管理系统把该记录集信息存储到日志中。所述日志信息例如可以用来对数据缺损事件执行辩证分析或者执行安全审核等。

Description

数据存储系统中的业务工作量标识
通过引用而并入的文献
共有的美国专利No.5734818被并入,其公开了一种被配置为提供带有前缀头的自描述记录集的数据存储系统,所述前缀头包括用于数据存储、例如用于对初级数据存储站和次级数据存储站之间的数据的记录更新进行基于时间的序列排序的写I/O操作的时间戳。
技术领域
本发明涉及数据存储系统,更具体地说涉及被配置为根据所拥有的应用程序的写I/O把主机所提供的数据写入到数据存储器中的数据存储系统。
背景技术
数据存储系统提供了对来自主机的数据的存储,其对于能够把数据从主机删除是足够可靠的。数据存储的可靠性往往通过在初级存储器和次级存储器处复制数据来得以增强。例如,
Figure G2008800116335D00011
DS8000支持诸如在所并入的美国专利No.5734818中讨论的异步数据复制功能,其包括为初级数据存储器和次级数据存储器提供数据所需的数据传输。这种数据传输可以被记录为日志,从而以来自数据转发中的已知时刻的I/O一致性有效地重新创建数据。这些日志可以被备份,从而能够在由备份版本所覆盖的任意时刻恢复部分或全部数据。
客户可能希望对数据缺损事件进行辩证分析,或者希望针对哪个应用程序何时更新了哪些数据进行安全审核。
发明内容
方法和计算机程序产品例如提供了作为日志记录的信息,其可以用来对数据缺损事件进行辩证分析或者执行安全审核等。这样的数据存储系统可包括一个或多个数据存储控制系统,以及被设置为初级和/或次级数据存储器的设备。
在一个实施例中,一种数据存储系统被配置为根据所拥有的应用程序的写I/O把主机所提供的数据写入到数据存储器中,并包括被配置为根据所拥有的应用程序的写I/O指导对所提供的数据的处理的工作量管理器,被配置为提供用于描述所述写I/O的业务工作量标识,包括被配置为把业务工作量标识加到针对数据的记录集信息中的至少一个存储子系统,并包括被配置为把来自所述记录集信息的信息、包括所述业务工作量标识存储到日志中的日志管理系统。
在另一个实施例中,所述存储子系统被配置为把所述业务工作量标识添加到读记录集前缀中,并且所述日志管理系统被配置为把来自所述读记录集前缀的信息提供给所述日志。
在另一个实施例中,所述工作量管理器被配置为针对定义的扩展CCW提供业务工作量标识,所述定义的扩展CCW提供了针对所述读记录集前缀的业务工作量标识。
在另一个实施例中,所述工作量管理器被配置为针对前缀CCW提供业务工作量标识,所述前缀CCW提供了针对所述读记录集前缀的业务工作量标识。
在另一个实施例中,所述业务工作量标识包括针对由主机所定义的所拥有的应用程序的业务类。
在另一个实施例中,所述业务类包括I/O优先级信息,并且其中所述工作量管理器被配置为选择所述业务类的I/O优先级信息。
附图说明
下面将仅以示例的方式,参照附图来描述本发明的实施例,图中:
图1是示出了能够实现本发明的数据存储系统和主机的框图;
图2是示出了根据本发明的一个实施例的带有业务工作量标识的读记录集的前缀头的数据格式图;
图3是示出了描述根据本发明的一个实施例的带有业务工作量标识的读记录集的字段的数据格式图;
图4是示出了用于实现本发明的数据存储系统和主机系统的一个替代实施例的框图;以及
图5是示出了描述实现本发明的功能的流程图。
具体实施方式
在下面的说明中参照附图,以优选的实施例来描述本发明,附图中类似的附图标记代表相同或类似的单元。尽管以用于实现本发明的目的的最佳实施方式来描述本发明,但本领域技术人员应当理解,在此指导下可以做出多种改动,而不背离本发明的主旨或保护范围。
参照图1,示出了与主机系统12相连的数据存储系统10。典型地,可包括一个或多个主处理器并可包括网络的主机系统12包含应用程序30,所述应用程序30生成要由数据存储系统10所保存的数据。所述数据存储系统例如包括具有至少一个子系统控制器18的存储控制系统15和多个驱动设备16,所述驱动设备如磁盘驱动器,例如为RAID(独立磁盘冗余阵列)或JBOD(简单磁盘簇)的形式。存储控制系统15也可以和例如为自动数据存储库的形式的诸如磁带或光盘17的长期存储设备进行通信。可根据本发明工作的存储控制系统15的一个例子包括
Figure G2008800116335D00031
DS8000。
存储系统10结合了工作量管理器(WLM)20、20A,所述工作量管理器被配置为指导对所提供的数据的处理以便于存储。工作量管理器20、20A可以驻留在存储控制系统15或主机系统12中,或者同时驻留在这两者中。存储系统10包括用于临时存储数据和在存储系统操作时所使用的信息的高速缓存21。高速缓存也可以包括磁盘存储器,或者可以包括存储子系统16的一部分。在一个实施例中,工作量管理器20A包括主机系统12的操作系统(O/S)23的一个组件,以及一个I/O子系统(IOS)组件24。在一个替代实施例中,工作量管理器20包括存储控制系统15的至少一个处理器的操作系统43的一个组件,以及一个I/O子系统组件44。
工作量管理器20和存储控制系统的子系统控制器18可分别或共同包括程序代码和任意适当的逻辑、微处理器、以及用于对程序代码做出响应的相关联的内存和/或数据存储器,并且所述相关联的内存和/或数据存储器可包括固定或可重写的内存或数据存储设备。工作量管理器20可包括存储系统10的程序代码内的程序代码,或者可包括由存储系统10所使用的应用程序。该程序代码例如可以通过从例如位于操作员面板22或存储系统10的驱动器处的光盘或软盘的输入,或者通过从例如位于驱动设备17处的盒式磁带读取,或者从例如经由主机系统12的网络,或者通过其它适当的装置,从数据存储设备或内存被直接提供给存储系统。工作量管理器20可以在物理上位于主机系统12、存储控制系统15或者数据存储系统10中的任意位置处,或者分布在数据存储系统中。
数据存储系统10可包括初级站和次级站,例如,主机系统12、带有驱动设备16的存储控制系统15包括初级站,而带有子系统控制器28和驱动设备26的存储控制系统25包括次级站。因而数据存储系统能够在初级站处提供数据存储,而屏蔽次级站处的数据,异步传输数据,使用存储数据搬移器29以形成一致性组,如在所并入的专利No.5734818中所描述的。
在所并入的专利No.5734818中,初级站处的应用程序30生成记录更新,而例如远离初级站的次级站屏蔽记录更新。数据存储系统10包括综合体(sysplex)定时器,用于根据初级站中的处理进行时间同步。初级存储控制系统15对用于记录更新的写I/O操作做出响应,并针对每个记录更新向初级存储子系统16执行写I/O操作,所述写I/O操作与综合体定时器同步。初级存储子系统16相应地接受该写I/O操作并存储数据。
初级子系统控制器18发现某个写I/O操作指向也存储在次级站的一个卷,并用其高速缓存21中的特定存储信息构造一个读记录集前缀。因而该子系统控制器收集针对每个记录更新的记录集信息,并把一个前缀头附到预定的一组记录集信息上。该前缀头和这组预定的记录集信息形成自描述记录集,包括数据更新。
该记录集信息中包括记录更新序列号和记录更新时间等。该前缀头中包括操作时间戳、时间间隔组号和记录读取时间等。
存储数据搬移器29从子系统控制器18读取RRS,并形成一致性组,这些一致性组被写入到一个例如存储在高速缓存21中的日志中。所述一致性组是一段短时间周期内的所有I/O。重要的是保持跨卷和跨存储控制系统的数据一致性。记录集经由通信链路35被传送到次级存储控制系统25,该次级存储控制系统25对来自每个一致性组的记录更新进行排序,以便以和把记录更新写入到初级存储控制系统15时的次序相同的次序写入到次级存储控制系统25。
在所并入的专利No.5734818的一个实施例中,存储数据搬移器29为每个自描述记录创建一个日志记录,包括前缀头。该日志记录可以被传送到次级存储控制系统25,所使用的信息形成了一致性组,并控制记录更新向次级存储子系统26的写入。
参照图1、2和3,在本发明的一个实施例中,数据存储系统10被配置为根据所拥有的应用程序30的写I/O把主机12所提供的数据写入到数据存储器。应用程序的例子可包括会计、薪金簿、信息管理和数据库应用程序等。数据存储器可包括单一设备、带有多个存储设备的单一站点、带有多个存储系统的单一站点、如图1所示的初级站和次级站、或者初级和多个次级站点。
本发明包括用于提供日志信息的数据存储系统、方法和计算机程序产品,所述日志信息例如可用于对数据缺损事件进行辩证分析或者执行安全审核等,其中I/O的拥有应用程序被识别。
工作量管理器20被配置为根据拥有应用程序30的写I/O针对数据存储系统执行对所提供的数据的处理。工作量管理器20可驻留在存储控制系统15、主机12(如附图标记20A所示)或者这两者中,这里考虑包括数据存储系统10的一个元件。其中,工作量管理器既可以用20来表示,或者也可以用20A来表示。存储控制系统15被配置为向存储设备16存储数据,并且存储控制系统25被配置为向存储设备26存储数据。本发明可采用完全软件实现的方式、完全硬件实现的方式、或者既包含硬件单元也包括软件单元的方式。在优选的实施例中,本发明以软件来实现,其包括但不限于驻留软件、固件、微代码等。此外,本发明也可采用能够从计算机可用或计算机可读介质访问的计算机程序产品的形式,所述计算机可用或计算机可读介质提供由计算机或任意指令执行系统使用或与之关联使用的程序代码。为了说明的目的,计算机可用或计算机可读介质可以是能够容纳、存储、传输、传播或传递由指令执行系统、设备或装置使用或与之关联使用的程序代码的任意设备。
所述介质可以是电子、磁、电磁、红外或半导体系统(或者设备或装置)或可传播的介质。计算机可读介质的例子包括半导体或固态存储器、磁带、可移动计算机磁盘、随机访问存储器(RAM)、只读存储器(ROM)、刚性磁盘和光盘。光盘的当前例子包括紧凑盘-只读存储器(CD-ROM)、紧凑盘-读/写(CD-R/W)和DVD。
适用于存储和/或执行程序代码的数据处理系统包括通过系统总线与存储单元直接或间接耦合的至少一个处理器。所述存储单元可包括在程序代码实际执行期间所采用的本地存储器、海量存储器以及高速缓存存储器,所述高速缓存存储器提供对至少一些程序代码的临时存储,以减少执行期间从海量存储器取回代码所需的次数。网络适配器可连接到系统,使数据处理系统能够通过中间的私有或公共网络耦合到其它数据处理系统或远程设备。调制解调器、缆线调制解调器或以太网卡仅仅是一些目前可用的网络适配器类型。
客户经由主机12规定哪些应用程序(工作量)30被分配给哪类业务。一类业务指定可包含或包括I/O优先级。例如,zOS计算机操作系统允许客户最初为每个应用程序定义业务类,它通过工作量管理器20被分配给工作量。目前有几百个对于每个所管理的系统可用的独特类。在业务类中定义的是I/O优先级,它针对该业务类被提供给每个I/O操作。该业务类可反映出客户在工作量基础上对工作量所规定的相对业务优先级。这里,业务类或I/O优先级、或者任何类似的指定被称为“业务工作量标识”。
工作量管理器20包括通过I/O链所代表的业务类跟踪和管理工作量的基础结构,作为结果,它能够以与其提供针对工作量的I/O优先级类似的方式在写入链中提供信息。工作信息的结果单元通过操作系统功能/中间件被预留,使得当I/O被执行时,客户先前针对该工作量所定义的I/O优先级通过I/O被发送。
工作量管理器20被配置为提供描述由I/O子系统24、44所使用的写I/O的业务工作量标识。工作量管理器被配置为对一个要传递给数据存储系统的工作单元所代表的所有I/O提供业务工作量标识。
I/O子系统24、44从工作量管理器访问业务工作量标识(以及其他信息),并经由信道命令字(CCW)或等同物把业务工作量标识提供给存储子系统控制器18。CCW的例子是定义扩展CCW或前缀CCW。例如,所创建的定义扩展CCW被更改,以提供包括业务工作量标识的某些附加信息,并被添加到写I/O链。作为替代,生成一个前缀I/O,其包括业务工作量标识,并被添加到写I/O链。这里,CCW被认为是通过工作量管理器“提供”,而不考虑CCW的最初来源。
参照图2,存储子系统控制器18识别出所引用的I/O指向一个卷,该卷将被或者不被存储到初级站和次级站这两者中(被认为是“XRC”或者扩展远程拷贝),并如上所述利用其高速缓存21中的特定存储信息构造一个读记录集前缀500。包括在读记录集前缀中的是由工作量管理器20所提供的业务工作量标识100。前缀头500的其余部分由所并入的专利No.5734818加以解释,其与每个自描述记录集的格式有关。前缀头可包括一个用于描述前缀头500的总长的总数据长度501和针对该记录集的完整初级记录集信息。操作时间戳502是一个表明了当前正在处理的操作集的起始时间的时间戳。一个间隔组号503标示出当前记录集所属的时间间隔(由操作时间戳502和记录读取时间507所界定)。组内序列号504基于给定时间间隔组503内针对每个记录集的应用程序写I/O的写序列顺序的标识而得出。初级子存储标识(SSID)505唯一地标示出针对每个记录集的初级存储控制系统15的特定存储控制器。分配一个次级目标卷506,记录读取时间507提供了一个表明针对读取记录集处理当前间隔的结束时间的操作时间戳。操作时间戳502和记录读取时间507被用于对来自初级存储控制系统15的读取记录集的集合进行分组。
参照图3,记录集信息600由存储数据搬移器29通过从子系统控制器18读取所有读记录集500来收集,并且所述数据搬移器形成了一致性组。记录集信息把来自读记录集前缀头500的业务工作量标识100集成到一起。
记录集信息600的其余部分由所并入的专利No.5734818加以解释,其与每个自描述记录集的格式有关。更新特定信息601-610包括每条记录的初级设备单元地址601,其表明发生记录更新的实际数据存储设备或设备集合(其可以是虚拟的)。柱面号/头号(其可以是虚拟的)表明数据存储设备或设备集合上的位置。初级存储控制器会话标识符(SSID)603与初级SSID 505相同。状态标志604提供了状态信息,序列号605和630为每条记录分配一个号,以表明是否已经从主应用程序中读取了整个记录集。写I/O类型606是针对每个记录所执行的写操作类型的标识符。搜索依据607表明了第一条读记录集数据记录620的初始定位信息。扇区号608标示出发生记录更新的扇区,计数字段609描述了根在后面的多个特定记录数据字段620。当发生写更新时的主应用程序时间被记录在更新时间610内。特定记录数据620为每个记录更新提供了一个计数/索引/数据(CKD)。
所收集的信息通过一个日志管理系统被记录为日志,其可以包括存储数据结束29的一部分或工作量管理器的一部分,或者其可以实现为主机系统12的一个独立应用程序30。该日志管理系统被配置为把记录集信息存储到日志中。在一个实施例中,该日志最初被存储在高速缓存21中。该日志构成了由存储系统10形成一致性组并操作存储控制系统25以在存储设备26处保存该一致性组的数据的基础。为此,该日志可以被传送到次级存储控制系统25的高速缓存41。该日志可用来在数据屏蔽操作期间进行连续的数据保护操作。该日志继续增长例如一定的偏移量或者数据的日期值,并且该日志管理系统通过把日志卸载到诸如磁带17的存储器来保持信息,其采用了数据存储系统,并且该日志提供信息以覆盖所述偏移量或日期的特定时间段。该数据管理系统可以替代地或附带地把日志卸载到诸如磁带47的存储器。这样,已有的日志项和构成时间一致性组中一个特定点的所有写I/O的所有信息一起被记录为日志。也就是说,该信息是针对在特定逻辑会话中所定义的所有存储子系统上的所有卷之间的所有写I/O,并且该日志是基于时间的一致性组的集合。
参照图4,示出了一个数据存储系统400的替代实施例,其中初级主机401提供了经由次级主机411与次级站的通信。示出了两个应用程序402、403,它们代表了潜在的大量应用程序。数据存储以初级主机的综合体时钟407经由数据搬移器404在初级站421处运行,并经由数据搬移器414在次级站431处运行。这是在所并入的专利No.5734818中讨论的配置,其中所述主机包括至少一个初级处理器和至少一个次级处理器。处理器的一个例子是具有数据搬移器软件的DS9000。而且,位于每个站点处的是存储控制器405和415,以及诸如硬盘驱动器的直接存取存储设备。存储控制器的例子包括DS3990存储控制器,数据存储设备的例子包括
Figure G2008800116335D00093
DS3390DASD。
根据本发明,工作量管理器300可驻留在数据搬移器404处。工作量管理器300被配置为提供图2所示的由I/O子系统310所使用的业务工作量标识100,以经由信道命令字(CCW)或等同物提供给存储子系统存储控制器405,如上面所讨论的定义扩展CCW或前缀CCW。存储子系统控制器405构造用于XRC卷的读记录集前缀头500。图3中的记录集信息600由存储控制系统在数据搬移器404处收集,该数据搬移器形成了一致性组。记录集信息集成了来自读记录集前缀头500的业务工作量标识100。该日志管理系统可以驻留在工作量管理器300中或者与其驻留在一起,所收集的信息由日志管理系统记录为日志。在一个实施例中,该日志最初被存储在高速缓存301中。所述日志包括由存储系统在站点121处形成一致性组的基础,并且次级数据搬移器414被操作以在次级DASD 416处存储以执行组的数据。为此,所述日志可以被传送到次级站431的控制信息DASD 417。该日志可用于数据屏蔽操作期间的连续数据保护操作。该日志继续增长例如一定的偏移量或者数据的日期值,并且该日志管理系统经由数据搬移器404或数据存储系统的其他组件把日志卸载到磁带317,并且该日志提供信息以覆盖上面所述的偏移量或日期的特定时间段。
参照图5,示出了本发明的功能实现,并且在步骤700中,客户通过图1和图4中的主机12、401已经把一个业务类或I/O优先级分配给每个应用程序30,或者作为替代,分配给针对应用程序的不同I/O操作。业务类指定可包含或包括如上所述的I/O优先级。该业务类能够反映出客户在工作量基础上针对工作量所规定的相对业务优先级。如上所述,业务类或I/O优先级、或者类似的指定被称为“业务工作量标识”。
仍参照图5,从步骤710开始,图1和图4中的数据存储系统10、400被配置为提供描述写I/O的业务工作量标识,并通过该业务工作量标识将记录集信息记录为日志。在步骤720中,工作量管理器20、300访问其控制模块,以建立针对当前写I/O的业务类或I/O优先级,并推进针对与该I/O操作相关联的主导类别的I/O优先级。业务工作量标识可包括由主机针对所拥有的应用程序所定义的业务类,其中该业务类可以定义I/O优先级信息。工作量管理器被配置为选择I/O优先级信息或业务类,从而识别出该I/O所属的应用程序。
在步骤730中,工作量管理器20、300提供业务工作量标识,以便把业务工作量标识添加到定义扩展CCW或前缀CCW或等价物,数据存储系统生成CCW。CCW如上面所讨论的。CCW针对每个XRC I/O向存储子系统提供业务工作量标识。
在步骤740中,存储子系统发现I/O被引向XRC卷,并用其高速缓存中的存储信息构建读记录集前缀,并把图2所示的业务工作量标识100包括到读记录集前缀头500中。
在图5的步骤750中,数据存储系统收集针对一致性组的读记录集,并且日志管理系统把记录集信息600存储在日志中,例如存储在图1和4所示的高速缓存21、301中。该日志继续增长例如一定的偏移量或者数据的日期值,并且在步骤760中,该日志管理系统经由数据搬移器404或数据存储系统的其他部分,通过把日志卸载到诸如磁带17、47、317的存储器来保持信息,该日志提供信息以覆盖所述偏移量或日期的特定时间段,如上所述。这里,日志项的创建被认为是由日志管理系统进行的,而不考虑执行特定的信息收集和布置的特定应用程序,也不考虑作为日志项的信息格式和存储。
因而,这些日志项通过一致性组被记录到一起作为日志,形成针对所述偏移量或日期的时间段的所有写I/O的信息,每个日志项都带有业务工作量标识,其标示出生成该I/O的应用程序。该日志信息可以被用来对数据缺损事件执行辩证分析或执行安全审核等,这例如通过位于初级站处的操作员面板22或者次级站处的操作员面板770处的操作员来进行,或者通过图1所示的主机系统12或图4所示的系统401或411来进行。
业务工作量标识标示出提供I/O的所拥有的应用程序,并允许判断哪个应用程序何时更新何种数据。日志项还允许在该特定时刻以及在所考虑的该特定时刻之前的时刻经由一致性组向该卷或相关卷显示所有其他写I/O。该信息可用于判断哪个应用程序执行了写I/O,该写I/O在哪个特定时刻使哪些数据发生了缺损。进而,使用带有先前日志项的该信息可以允许判断由一个应用程序或可能已经导致数据缺损的其它程序所完成的写序列。另外,后续的日志项也可表明可能已经作为先前缺损事件的结果发生的其它数据缺损。如果需要的话,磁带也可以被存档以便将来的分析。在一个例子中,连续数据保护应用程序可提供对日志的接口,该应用程序或者位于高速缓存内或者来自磁带。
本领域技术人员将会理解,可以对上述方法加以改动,包括改变步骤的顺序。此外,本领域技术人员还将会理解,也可以采用与这里所描述的不同的特定元件设置。
尽管已经详细描述了本发明的优选实施例,很显然本领域技术人员也可以对这些实施例加以改动和调整,而不会背离如后续权利要求所述的本发明的保护范围。

Claims (13)

1.一种用于识别数据的方法,该数据由被配置为根据所拥有的应用程序的写I/O把主机所提供的数据写入到数据存储器中的数据存储系统处理,包括以下步骤:
根据所拥有的应用程序的所述写I/O指导对所述所提供的数据的处理;
提供用于描述所述写I/O的业务工作量标识;
把所述业务工作量标识添加到针对所述数据的记录集信息中;并且
把来自所述记录集信息中的包含所述业务工作量标识的信息存储到日志中。
2.权利要求1的方法,其中添加所述业务工作量标识的所述步骤包括把所述业务工作量标识添加到读记录集前缀中;并且把所述记录集信息存储到日志中的所述步骤包括把来自所述读记录集前缀中的所述信息提供给所述日志。
3.权利要求2的方法,其中提供所述业务工作量标识的所述步骤包括提供针对所定义的扩展信道命令字(CCW)的所述业务工作量标识,该扩展信道命令字提供了针对所述读记录集前缀的所述业务工作量标识。
4.权利要求2的方法,其中提供所述业务工作量标识的所述步骤包括提供针对前缀扩展信道命令字(CCW)的所述业务工作量标识,该扩展信道命令字提供了针对所述读记录集前缀的所述业务工作量标识。
5.权利要求1的方法,其中所述业务工作量标识包括通过所述主机为所述所拥有的应用程序所定义的业务类。
6.权利要求5的方法,其中所述业务类包括I/O优先级信息,并且其中提供所述业务工作量标识的所述步骤包括选择所述业务类的所述I/O优先级信息。
7.一种计算机产品,其包括具有计算机可读程序的计算机可读介质,其中该计算机可读程序当在至少一台计算机上执行时使该计算机执行如权利要求1至6中任一项所述的步骤。
8.一种被配置为根据所拥有的应用程序的写I/O把主机所提供的数据写入到数据存储器中的数据存储系统,包括:
工作量管理器,被配置为根据所拥有的应用程序的所述写I/O指导对所述所提供的数据的处理,并被配置为提供用于描述所述写I/O的业务工作量标识;
至少一个存储子系统,被配置为把所述业务工作量标识添加到针对所述数据的记录集信息中;以及
日志管理系统,被配置为把来自所述记录集信息中的包含所述业务工作量标识的信息存储到日志中。
9.权利要求8的数据存储系统,其中所述至少一个存储子系统被配置为把所述业务工作量标识添加到读记录集前缀中,并且所述日志管理系统被配置为把来自所述读记录集前缀中的所述信息提供给所述日志。
10.权利要求9的数据存储系统,其中所述工作量管理器被配置为提供针对所定义的扩展信道命令字(CCW)的所述业务工作量标识,该扩展信道命令字向所述至少一个存储器子系统提供针对所述读记录集前缀的所述业务工作量标识。
11.权利要求9的数据存储系统,其中所述工作量管理器被配置为提供针对前缀信道命令字(CCW)的所述业务工作量标识,该前缀信道命令字向所述至少一个存储器子系统提供针对所述读记录集前缀的所述业务工作量标识。
12.权利要求8至11中任一项的数据存储系统,其中所述业务工作量标识包括通过所述主机为所述所拥有的应用程序所定义的业务类。
13.权利要求12的数据存储系统,其中所述业务类包括I/O优先级信息,并且其中所述工作量管理器被配置为选择所述业务类的所述I/O优先级信息。
CN2008800116335A 2007-04-11 2008-04-07 数据存储系统中的业务工作量标识 Expired - Fee Related CN101652756B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US11/734,059 2007-04-11
US11/734,097 2007-04-11
US11/734,097 US7613888B2 (en) 2007-04-11 2007-04-11 Maintain owning application information of data for a data storage system
US11/734,059 US7610459B2 (en) 2007-04-11 2007-04-11 Maintain owning application information of data for a data storage system
PCT/EP2008/054163 WO2008125538A1 (en) 2007-04-11 2008-04-07 Service workload identification in a data storage system

Publications (2)

Publication Number Publication Date
CN101652756A true CN101652756A (zh) 2010-02-17
CN101652756B CN101652756B (zh) 2012-03-28

Family

ID=39708760

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800116335A Expired - Fee Related CN101652756B (zh) 2007-04-11 2008-04-07 数据存储系统中的业务工作量标识

Country Status (6)

Country Link
US (1) US7610459B2 (zh)
EP (1) EP2135166B1 (zh)
JP (1) JP5341062B2 (zh)
KR (1) KR101072056B1 (zh)
CN (1) CN101652756B (zh)
WO (1) WO2008125538A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102811112A (zh) * 2011-06-01 2012-12-05 国际商业机器公司 光纤信道输入/输出数据路由系统和方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8032497B2 (en) * 2007-09-26 2011-10-04 International Business Machines Corporation Method and system providing extended and end-to-end data integrity through database and other system layers
CN103064779B (zh) * 2012-12-26 2016-08-03 北京思特奇信息技术股份有限公司 一种快速处理日志信息的方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4420819A (en) * 1981-03-13 1983-12-13 Data Card Corporation System for processing and storing transaction data and for transmitting the transaction data to a remote host computer
US5544347A (en) * 1990-09-24 1996-08-06 Emc Corporation Data storage system controlled remote data mirroring with respectively maintained data indices
US5504861A (en) * 1994-02-22 1996-04-02 International Business Machines Corporation Remote data duplexing
KR0128271B1 (ko) * 1994-02-22 1998-04-15 윌리암 티. 엘리스 재해회복을 위한 일관성 그룹 형성방법 및 레코드갱싱의 섀도잉 방법, 주시스템, 원격데이타 섀도잉 시스템과 비동기 원격데이타 복제 시스템
US5615329A (en) * 1994-02-22 1997-03-25 International Business Machines Corporation Remote data duplexing
US5557742A (en) * 1994-03-07 1996-09-17 Haystack Labs, Inc. Method and system for detecting intrusion into and misuse of a data processing system
US5889935A (en) * 1996-05-28 1999-03-30 Emc Corporation Disaster control features for remote data mirroring
US6874104B1 (en) * 1999-06-11 2005-03-29 International Business Machines Corporation Assigning recoverable unique sequence numbers in a transaction processing system
US6631480B2 (en) * 1999-11-10 2003-10-07 Symantec Corporation Methods and systems for protecting data from potential corruption by a crashed computer program
US6957313B2 (en) * 2000-12-01 2005-10-18 Hsia James R Memory matrix and method of operating the same
US7472272B2 (en) * 2003-01-23 2008-12-30 Verdasys, Inc. Digital asset usage accountability via event journaling
US7467168B2 (en) * 2003-06-18 2008-12-16 International Business Machines Corporation Method for mirroring data at storage locations
US20050086529A1 (en) * 2003-10-21 2005-04-21 Yair Buchsbaum Detection of misuse or abuse of data by authorized access to database
JP2005202864A (ja) * 2004-01-19 2005-07-28 Hitachi Software Eng Co Ltd ネットワークシステム
DE602004026823D1 (de) * 2004-02-12 2010-06-10 Irdeto Access Bv Verfahren und System zur externen Speicherung von Daten
US20050203881A1 (en) * 2004-03-09 2005-09-15 Akio Sakamoto Database user behavior monitor system and method
US7096392B2 (en) * 2004-05-07 2006-08-22 Asempra Technologies, Inc. Method and system for automated, no downtime, real-time, continuous data protection
JP2006309579A (ja) * 2005-04-28 2006-11-09 Hitachi Ltd 記憶制御装置及びストレージシステム
US20070073519A1 (en) * 2005-05-31 2007-03-29 Long Kurt J System and Method of Fraud and Misuse Detection Using Event Logs
US8468313B2 (en) * 2006-07-14 2013-06-18 Oracle America, Inc. Asynchronous replication with write concurrency grouping

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102811112A (zh) * 2011-06-01 2012-12-05 国际商业机器公司 光纤信道输入/输出数据路由系统和方法
CN102811112B (zh) * 2011-06-01 2015-01-28 国际商业机器公司 光纤信道输入/输出数据路由系统和方法

Also Published As

Publication number Publication date
US7610459B2 (en) 2009-10-27
JP2010524105A (ja) 2010-07-15
EP2135166A1 (en) 2009-12-23
US20080256309A1 (en) 2008-10-16
JP5341062B2 (ja) 2013-11-13
WO2008125538A1 (en) 2008-10-23
CN101652756B (zh) 2012-03-28
KR101072056B1 (ko) 2011-10-10
KR20090127253A (ko) 2009-12-10
EP2135166B1 (en) 2016-06-22

Similar Documents

Publication Publication Date Title
CN100483365C (zh) 仿真存储系统
US7430686B1 (en) Data processing recovery system and method spanning multiple operating system
CN104040481B (zh) 用于融合、存储和检索增量式备份数据的方法和系统
US7844856B1 (en) Methods and apparatus for bottleneck processing in a continuous data protection system having journaling
CN100458716C (zh) 数据维护、备份和恢复方法
CN100377112C (zh) 磁盘驱动器、其控制方法以及磁盘伪造的探测方法
EP1387269A1 (en) Backup system and method of generating a checkpoint for a database
CN109582443A (zh) 基于分布式存储技术的虚拟机备份系统
CN105183581A (zh) 一种数据库容灾系统
US10783040B2 (en) Apparatus, system and method for data collection, import and modeling
CN100485630C (zh) 具有中央控制的数据备份的方法和系统
CN100422948C (zh) 一种计算机系统或数据的恢复方法
CN100487656C (zh) 资源管理的方法与系统
US11675674B2 (en) Instant recovery of databases
CN101652756B (zh) 数据存储系统中的业务工作量标识
US20180025034A1 (en) Archival of data in a relational database management system using block level copy
CN102792281B (zh) 存储设备
JP2002297427A (ja) データのバックアップのための方法、装置、システム、プログラム及び記憶媒体
US8056052B2 (en) Populating service requests
US7613888B2 (en) Maintain owning application information of data for a data storage system
Tonik Recovery of on-line data bases(Panel)
JPH06214722A (ja) ディスクアレイ装置のデータ格納方式
JP4036916B2 (ja) データ管理装置
JPS6357817B2 (zh)

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20171206

Address after: Grand Cayman, Cayman Islands

Patentee after: GLOBALFOUNDRIES INC.

Address before: American New York

Patentee before: Core USA second LLC

Effective date of registration: 20171206

Address after: American New York

Patentee after: Core USA second LLC

Address before: American New York

Patentee before: International Business Machines Corp.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120328

Termination date: 20190407

CF01 Termination of patent right due to non-payment of annual fee