WO2018173246A1 - ストレージシステム及び記憶制御方法 - Google Patents

ストレージシステム及び記憶制御方法 Download PDF

Info

Publication number
WO2018173246A1
WO2018173246A1 PCT/JP2017/011970 JP2017011970W WO2018173246A1 WO 2018173246 A1 WO2018173246 A1 WO 2018173246A1 JP 2017011970 W JP2017011970 W JP 2017011970W WO 2018173246 A1 WO2018173246 A1 WO 2018173246A1
Authority
WO
WIPO (PCT)
Prior art keywords
storage
data
storage controller
ctl
management information
Prior art date
Application number
PCT/JP2017/011970
Other languages
English (en)
French (fr)
Inventor
直柔 岡村
正範 藤井
直樹 守時
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to PCT/JP2017/011970 priority Critical patent/WO2018173246A1/ja
Priority to US16/330,333 priority patent/US10909007B2/en
Publication of WO2018173246A1 publication Critical patent/WO2018173246A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2002—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where interconnections or communication control functionality are redundant
    • G06F11/2007—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where interconnections or communication control functionality are redundant using redundant communication media
    • G06F11/201—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where interconnections or communication control functionality are redundant using redundant communication media between storage system components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/1658—Data re-synchronization of a redundant component, or initial sync of replacement, additional or spare unit
    • G06F11/1662—Data re-synchronization of a redundant component, or initial sync of replacement, additional or spare unit the resynchronized component or unit being a persistent storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2017—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where memory access, memory control or I/O control functionality is redundant
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0617—Improving the reliability of storage systems in relation to availability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Definitions

  • the present invention generally relates to storage control of a storage system having redundant storage controllers.
  • a storage system generally includes one or more storage devices (typically, a RAID (Redundant Array of Disks) group composed of a plurality of storage devices) and I / O (Input / Output) from a host. And a storage controller (hereinafter referred to as CTL) that executes data I / O to one or more storage devices in response to the request.
  • a storage controller hereinafter referred to as CTL
  • the CTL is made redundant (for example, Patent Document 1).
  • Each CTL has a memory and executes synchronization processing between CTLs in order to share information on the memory among the CTLs.
  • the synchronization process includes at least communication between CTLs of cached data (dirty data) according to a write request received from the host, and communication between CTLs of management information (at least updated part) updated according to the write request. Including either
  • a data communication path is established between CTLs.
  • Inter-CTL communication for synchronization processing is performed via a data communication path.
  • communication impossible when communication via the data communication path becomes impossible (hereinafter abbreviated as “communication impossible”), synchronization processing between CTLs becomes impossible (hereinafter abbreviated as “synchronization impossible”).
  • synchronization impossible In storage systems where it is desirable to avoid system outages as much as possible (for example, storage systems where operation 24 hours a day, 365 days a year is desired), it is not desirable to stop accepting I / O requests from hosts because synchronization is impossible .
  • the cause of communication failure may be a failure of the first CTL (for example, a failure of a port to which the data communication path is connected). Even if the second CTL is replaced while there is a failure in the first CTL, the communication cannot be performed again and the second CTL is blocked. In this case, it is conceivable to replace the first CTL, but for this purpose, the storage system must be stopped.
  • the first CTL If communication is impossible (communication via the data communication path is impossible) even if the second CTL is replaced, the first CTL writes dirty data and data management information to one or more storage devices. Write processing is executed while maintaining acceptance of I / O requests from the host.
  • the replaced second CTL reads data management information from one or more storage devices.
  • the first CTL stops accepting I / O requests from the host.
  • the replaced second CTL starts accepting an I / O request from the host.
  • the first CTL CTL that is likely to be a failure CTL
  • FIG. 1 shows a configuration of a computer system according to an embodiment. Each structure of role management information and data management information is shown. A part of the flow of processing executed when first and second communication failures occur is shown. The remainder of the flow of processing executed when the first and second communication failures occur is shown. An example of the screen displayed by the management system when the second communication failure occurs is shown.
  • CTL60 storage controller
  • CTL60A storage controller
  • CTL60B storage controller
  • end of the reference code given to the component in the CTL 60A is “A”
  • the end of the reference code given to the component in the CTL 60B is “B”.
  • accepting an I / O request means that an I / O request can be received, and does not necessarily mean that an I / O request has actually been received.
  • FIG. 1 shows a configuration of a computer system according to an embodiment.
  • the computer system 50 includes a host storage system 52 and a management system 54.
  • the host storage system 52 includes a plurality of hosts 101 and a storage system 103 connected to the plurality of hosts 101.
  • the management system 54 manages the storage system 103.
  • the plurality of hosts 101 and the storage system 103 are connected via a first communication network such as a SAN (Storage Area Network) 102, for example.
  • the management system 54 and the storage system 103 are connected via a second communication network such as a LAN (Local Area Network), for example.
  • the first and second communication networks may be the same communication network. Instead of at least one of the first and second communication networks, a relay device such as a PCIe (PCI-Express) switch or a multiplexer may be employed.
  • the number of hosts 101 may be one.
  • the host 101 is one or more host computers.
  • the storage system 103 includes a plurality of storage devices 131 and redundant CTLs 60A and 60B connected to the plurality of storage devices 131.
  • a data communication path 143 and a command communication path 144 are extended between the CTLs 60A and 60B.
  • the number of storage devices 131 may be one.
  • the outline of this embodiment is as follows, for example.
  • CTL 60A is a master and CTL 60B is a slave.
  • the CTL 60B (slave) is blocked and replaced.
  • the second communication failure that cannot be performed via the data communication path 143 that is, when the communication failure is not resolved
  • the selection of the CTL to be blocked Is incorrect (when an occlusion selection error is detected)
  • the replaced CTL 60B enters the hot standby mode
  • the CTL 60A enters the write through mode after confirming that the CTL 60B has entered the hot standby mode.
  • the replaced CTL 60B executes a preparation process including an initial setting for accepting an I / O request from the host 101.
  • the CTL 60A When the CTL 60A enters the write-through mode, the CTL 60A performs a write process for writing the data management information 175 and dirty data (data cached in the memory 161A but not written to the storage device 131) held in the CTL 60A to the storage device 131. , While accepting the I / O request from the host 101 is executed.
  • the replaced CTL 60B reads data management information from the storage device 131 to the memory 161B.
  • CTL 60A exits the write-through mode and stops accepting I / O requests from the host 101.
  • the replaced CTL 60B starts accepting an I / O request from the host 101.
  • the data management information 175 is synchronized between the CTLs 60A and 60B via the storage device 131.
  • the CTL 60A is blocked (the CTL 60A can be replaced).
  • the CTL 60A (CTL that is highly likely to be a failure CTL) can be replaced without stopping the storage system 103.
  • the host 101 transmits an I / O request for data (user data) to the storage system 103.
  • User data is data stored in the logical volume by the host 101.
  • the I / O request includes I / O destination information indicating an I / O destination area.
  • the I / O destination information includes, for example, the LUN (Logical Unit Number) of the I / O destination logical volume and the LBA (Logical Block Address) of the area in the logical volume.
  • the logical volume is provided by CTLs 60A and 60B.
  • the storage device 131 is a non-volatile storage device (for example, HDD (Hard Disk Drive) or SSD (Solid State Drive)).
  • HDD Hard Disk Drive
  • SSD Solid State Drive
  • the CTL 60 includes a FI / F (front end interface) 142, a BI / F (back end interface), an MI / F (management interface) 141, a memory 161, and a processor 121 connected to them.
  • FI / F front end interface
  • BI / F back end interface
  • MI / F management interface
  • the FI / F 142 is an interface device connected to a plurality of hosts 101.
  • the BI / F 123 is an interface device connected to the plurality of storage devices 131.
  • the M-I / F 141 is an interface device connected to the management system 54.
  • the memory 161 stores a control program 171, role management information 173, and data management information 175.
  • the control program 171 is executed by the processor 121 and controls the operation of the CTL 60.
  • the role management information 173 is information indicating each role (master or slave) of the CTLs 60A and 60B.
  • the data management information 175 is information related to data according to the write request received by the CTL 60.
  • a data communication path 143 is established between the CTLs 60A and 60B (for example, between the processors 121A and 121B).
  • a command communication path 144 is established between the CTLs 60A and 60B (for example, between the processors 121A and 121B).
  • Management system 54 is composed of one or more computers. Specifically, for example, when the management computer displays information (specifically, the management computer displays information on its own display device, or the management computer transmits display information to a remote display computer)
  • the management computer is the management system 54.
  • the management system 54 may include the plurality of computers (which may include a display computer when the display computer performs display). is there.
  • Input of information to the computer and output of information from the computer may be performed by an input / output device included in the computer. Examples of the input / output device include a display device, a keyboard, and a pointing device, but another device may be employed instead of or in addition to at least one of them.
  • a serial interface device or an Ethernet interface device (Ethernet is a registered trademark) is adopted, and a display computer having a display device, a keyboard, and a pointing device is connected to such an interface device.
  • the information may be output (for example, displayed) and input by the computer transmitting the display information to the display computer or the computer receiving the input information from the display computer.
  • FIG. 2 shows the configuration of each of the role management information 173 and the data management information 175.
  • the role management information 173 has an entry for each CTL 60, and each entry holds information such as the CTL ID 201 and the role 202.
  • the CTL ID 201 is the ID of the CTL 60.
  • a role 202 indicates the role of the CTL 60.
  • the CTL 60A (CTL ID 201 “CTL1”) is a master and the CTL 60B (CTL ID 201 “CTL2”) is a slave.
  • the data management information 175 has an entry for each data (user data). Each entry holds information such as a data ID 211 and a data attribute 212.
  • the data ID 121 is an ID of data (user data).
  • the data attribute 212 includes information regarding the attribute of the data, for example, a data storage area address (for example, an ID of the storage device 131 and a storage area address in the storage device 131).
  • the data attribute 212 further includes a data volume area address (for example, an address of an area in the logical volume), a data cache attribute (for example, dirty (data not stored in the storage device 131)), and clean (data stored in the storage device 131). Stored)) and a cache area address of the data (for example, an address of the area of the data in the memory 161).
  • 3 and 4 show the flow of processing executed when the first and second communication impossibility occurs.
  • the processing of the CTL 60A is, for example, processing performed when the processor 121A executes the control program 171A.
  • the processing of the CTL 60B is, for example, processing performed when the processor 121B executes the control program 171B.
  • the CTL 60A When the first communication impossibility in which communication via the data communication path 143 is impossible occurs (S301: Y), the CTL 60A performs the first communication disabling block process (for example, a module connected to the processor 121A). (For example, processing for stopping FI / F 142A and BI / F 123A) is executed (S302). Then, the CTL 60A transmits a block command (an example of a first signal) to the CTL 60B via the command communication path 144 (S303). S302 and S303 are executed by the CTL 60A because the CTL 60A is the master. The CTL 60B receives the block command via the command communication path 144 (S304), and blocks it in response to the block command (S305).
  • S304 command communication path 144
  • S305 blocks it in response to the block command
  • the CTL 60A may notify the management system 54 that the first communication failure has occurred, and the CTL 60B may receive a block command from the management system 54 that has received the notification. Until the CTL 60B receives the block command, both of the CTLs 60A and 60B accept an I / O request from the host 101. After the CTL 60B receives the block command, only the CTL 60A accepts an I / O request from the host 101. When the CTL 60B is blocked, the CTL 60B transmits a blocking completion notification to the CTL 60A via the command communication path 144 (S306).
  • the CTL 60A receives a block completion notification via the command communication path 144 (S307), and transmits a block completion message to the management system 54 via the MI / F 141A (S308).
  • the management system 54 receives the blocking completion message and displays the content of the message (S309).
  • the maintenance staff confirms the content of the message (S310), and determines whether to perform non-stop replacement of the CTL 60B (S311). “Non-stop replacement” refers to replacing the CTL 60 without stopping the storage system 103 (while the storage system 103 is still operating). When the determination result in S311 is false, the maintenance staff performs stop replacement of CTL 60B. “Stop replacement” is to stop the storage system 103 and replace the CTL 60.
  • the maintenance staff performs non-stop replacement of the CTL 60B, and transmits a completion notification to at least one of the CTL 60A and the replaced CTL 60B via the management system 54. (S312).
  • the completion notification is shared between the CTLs 60A and 60B via the command communication path 144.
  • the CTL 60A and the replaced CTL 60B receive the completion notification and execute recovery processing.
  • the following (1) to (4) are performed.
  • the processor 121B in the CTL 60B activates and initializes the CTL 60B.
  • the processor 121B diagnoses whether the module in the CTL 60B is normal.
  • the processor 121B performs initial settings related to communication between CTLs with the processor 121A in the CTL 60A.
  • the processor 121B performs synchronization processing of the data management information 175 with the processor 121A in the CTL 60A.
  • FIG. 4 shows the case where a second communication failure occurs in which communication via the data communication path 143 is impossible despite the replacement of the CTL 60B (S314: Y), that is, when an occlusion selection error occurs. Processing is executed. If the second communication failure does not occur but the storage system 103 does not return to normal (S315: N), S303 is executed again. When the storage system 103 returns to normal (S315: N), the process returns to S301.
  • the CTL 60A executes a second blockage process that disables communication (S400).
  • the CTL 60A transmits a confirmation message including an inquiry as to whether or not to perform non-stop replacement of the CTL 60A to the management system 54 (S401).
  • the management system 54 receives the confirmation message and displays the confirmation message (S402).
  • FIG. 5 shows an example of the confirmation message display screen.
  • the maintenance staff confirms the confirmation message (S403), and determines whether or not to perform non-stop replacement of the CTL 60A (S404). If the determination result in S404 is false, the maintenance staff performs stop replacement of the CTL 60A (S406). For example, S406 is performed after the “cancel” button on the display screen illustrated in FIG. 5 is pressed.
  • an execution message (an example of the third signal) including information indicating that non-stop replacement of the CTL 60A is executed is sent via the management system 54 between the CTL 60A and the replaced CTL 60B. It transmits to at least one of them (S405). For example, S405 is performed because the “start” button on the display screen illustrated in FIG. 5 is pressed.
  • S405 is performed because the “start” button on the display screen illustrated in FIG. 5 is pressed.
  • the CTL 60A and the replaced CTL 60B receive the execution message (S407), and the CTL 60B enters the hot standby mode. Specifically, the CTL 60B starts a preparation process including an initial setting for accepting an I / O request from the host (S408). After S400, S401 to S407 may be skipped and S408 may be started. That is, S408 may be started without a manual instruction from the maintenance staff.
  • the CTL 60B completes the preparation process (S409), and transmits a completion notification to at least the CTL 60A of the management system 54 and the CTL 60A. Upon receiving the completion notification, the management system 54 displays a completion notification message (S411).
  • the fact that the replaced CTL 60B has completed the preparation process means that the CTL 60B can accept an I / O request when the handover from the CTL 60A to the CTL 60B is completed. Therefore, the CTL 60A that has received the completion notification (in other words, the CTL 60A that has confirmed that the CTL 60B has entered the hot standby mode) enters the write-through mode, that is, has maintained acceptance of I / O requests from the host 101.
  • the write processing for writing the dirty data and the data management information on the memory 161A to the one or more storage devices 131 is started (S412).
  • the address of the storage area to which the data management information is written may be determined in advance.
  • the CTL 60A transmits a write processing start notification (an example of a second signal) to the CTL 60B via the command communication path 144 (S413).
  • the CTL 60B receives a write processing start notification (an example of a second signal) via the command communication path 144 (S414).
  • the address of the storage area to which the data management information is written may be specified.
  • the CTL 60B reads the data management information from the one or more storage devices 131, and starts a takeover process (for example, takeover of information regarding the blocked storage device 131) (S415). Note that reading data management information from one or more storage devices 131 may or may not be included in the takeover process.
  • the write-through mode when the CTL 60A receives a write request from the host 101, the data according to the write request is written to the one or more storage devices 131, and the data in the one or more storage devices 131 is written according to the writing of the data. The data management information is updated, and then the write completion is returned to the host 101.
  • a response is returned after data writing and data management information update according to the write request are performed on one or more storage devices 131. Thereby, it can be expected to guarantee the accuracy of taking over the data management information to the CTL 60B.
  • the CTL 60A transmits a write process completion notification (an example of a fourth signal) to the CTL 60B via the command communication path 144 (S416).
  • the CTL 60A stops accepting the I / O request (S417).
  • the CTL 60A changes the role of the CTL 60A from the master to the slave (updates the role management information 173).
  • the CTL 60B receives the write process completion notification via the command communication path 144, that is, completes the takeover process (S418). In this case, the CTL 60B starts accepting an I / O request (S419). At that time, the CTL 60B changes the role of the CTL 60B from the slave to the master (updates the role management information 173). In addition, the CTL 60B transmits to the management system 54 a notification that the CTL 60B has started accepting I / O. Receiving the notification, the management system 54 displays a message including information indicating that the CTL 60B has started accepting I / O (S420).
  • the CTL 60B since the CTL 60B becomes the master in S419, the CTL 60B can block the CTL 60A when communication failure occurs after the replacement of the CTL 60A.
  • the CTL 60B is temporary, and the CTL 60A may become the master and the CTL 60B may return to the slave after the replacement of the CTL 60A.
  • the CTL 60A accepts an I / O request
  • the CTL 60B accepts an I / O request instead of the CTL 60A.
  • the I / O request acceptance stop in S417 maintains that the data management information read by the CTL 60B to the memory 161B matches the data management information in the one or more storage devices 131.
  • the CTL 60B After S419, the CTL 60B returns a write completion notification confirmation response (an example of a fifth signal) to the CTL 60A via the command communication path 144 (S421).
  • a write completion notification confirmation response (an example of a fifth signal)
  • the CTL 60A closes (S422).
  • the fact that the CTL 60A receives the confirmation response of the write completion notification is equivalent to knowing that the CTL 60B has started accepting the I / O request. In such a case, since the CTL 60A is blocked, it can be ensured that at least one CTL 60 accepts an I / O request.
  • the exchange between the CTLs 60A and 60B may be via the management system 54.
  • the exchange via the command communication path 144 is expected to achieve faster exchange than via the management system 54. it can.
  • the maintenance staff determines whether or not to perform non-stop replacement of the CTL 60A. As a result, it is possible to prevent the CTL 60A from entering a closed state without confirmation from maintenance personnel.
  • the data attribute 212 may include at least one of I / O frequency and last I / O time.
  • the CTL 60B receives at least one of the I / O frequency and the last I / O time in each entry in the background (that is, whether or not an I / O request is received) after the I / O reception is started. Based on this, data with high readability may be predicted, and the predicted data may be cached from the storage device 131 to the memory 161B. Thereby, it can be expected to improve the read performance.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Hardware Redundancy (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

冗長化されたストレージコントローラでありデータ通信パス経由で接続されている第１及び第２のＣＴＬのうちの第２のＣＴＬがリプレースされても通信不可（データ通信パス経由の通信が不可能）が生じた場合、第１のＣＴＬが、ダーティデータ及びデータ管理情報を１以上の記憶デバイスに書き込むことである書込み処理を、ホストからＩ／Ｏ要求を受け付けることを維持したまま実行する。リプレースされた第２のＣＴＬが、１以上の記憶デバイスからデータ管理情報を読み出す。第１のＣＴＬが、ホストからＩ／Ｏ要求を受け付けることを停止する。リプレースされた第２のＣＴＬが、ホストからＩ／Ｏ要求を受け付けることを開始する。

Description

ストレージシステム及び記憶制御方法
　本発明は、概して、冗長化されたストレージコントローラを有するストレージシステムの記憶制御に関する。
　ストレージシステムは、一般に、１以上の記憶デバイス（典型的には、複数の記憶デバイスで構成されたＲＡＩＤ（Redundant Array of Independent (or Inexpensive) Disks）グループ）と、ホストからのＩ／Ｏ（Input/Output）要求に応答して１以上の記憶デバイスに対してデータのＩ／Ｏを実行するストレージコントローラ（以下、ＣＴＬ）とを有する。信頼性を担保するために、ＣＴＬは冗長化されている（例えば特許文献１）。
WO2016/088231
　冗長化されたＣＴＬとして、第１及び第２のＣＴＬがある。各ＣＴＬは、メモリを有し、そのメモリ上の情報をＣＴＬ間で共有するため、ＣＴＬ間の同期処理を実行する。同期処理は、ホストから受けたライト要求に従うキャッシュされたデータ（ダーティデータ）のＣＴＬ間通信、及び、そのライト要求に従い更新された管理情報（少なくとも更新された部分）のＣＴＬ間通信のうちの少なくともいずれかを含む。
　ＣＴＬ間にデータ通信パスが張られている。同期処理のためのＣＴＬ間通信は、データ通信パス経由で行われる。
　このため、データ通信パス経由の通信が不可能（以下、「通信不可」と略記する）となった場合、ＣＴＬ間の同期処理が不可能（以下、「同期不可」と略記する）になる。システム停止を可能な限り回避することが望まれるストレージシステム（例えば２４時間３６５日の稼働が望まれるストレージシステム）では、同期不可を理由にホストからのＩ／Ｏ要求の受け付けを止めることは望ましくない。
　しかし、同期不可のまま各ＣＴＬが単独で動作すると、システムの状態がいわゆるスプリットブレインとなり、記憶デバイス内のデータのロストのような問題が生じ得る。
　このため、同期不可の場合、第１及び第２のＣＴＬのうちのいずれかが閉塞して、単一のＣＴＬにより稼働を継続する必要がある。
　通信不可の原因の判別が必ずしも可能であるとは限らない。そこで、通信不可能の場合には必ず第２のＣＴＬ（決め打ちされたＣＴＬ）を閉塞しリプレースする方法が採用される。
　しかし、通信不可の原因が第１のＣＴＬの障害（例えば、データ通信パスが接続されるポートの障害）であることもあり得る。第１のＣＴＬに障害がある状態で第２のＣＴＬがリプレースされても、再び、通信不可が生じて第２のＣＴＬが閉塞することになる。この場合、第１のＣＴＬをリプレースすることが考えられるが、そのためには、ストレージシステムの停止が必要になってしまう。
　第２のＣＴＬがリプレースされても通信不可（データ通信パス経由の通信が不可能）が生じた場合、第１のＣＴＬが、ダーティデータ及びデータ管理情報を１以上の記憶デバイスに書き込むことである書込み処理を、ホストからＩ／Ｏ要求を受け付けることを維持したまま実行する。リプレースされた第２のＣＴＬが、１以上の記憶デバイスからデータ管理情報を読み出す。第１のＣＴＬが、ホストからＩ／Ｏ要求を受け付けることを停止する。リプレースされた第２のＣＴＬが、ホストからＩ／Ｏ要求を受け付けることを開始する。
　第２のＣＴＬ（決め打ちされたＣＴＬ）を閉塞することが間違いであった場合でも、ストレージシステムを停止することなく、第１のＣＴＬ（障害ＣＴＬである可能性が高いＣＴＬ）を閉塞してリプレースすることができる。
一実施形態に係る計算機システムの構成を示す。 役割管理情報及びデータ管理情報の各々の構成を示す。 第１及び第２の通信不可が生じた場合に実行される処理の流れの一部を示す。 第１及び第２の通信不可が生じた場合に実行される処理の流れの残りを示す。 第２の通信不可が生じた場合に管理システムによって表示される画面の一例を示す。
　以下、図面を参照して、一実施形態を説明する。以下の説明では、同種の要素を区別しないで説明する場合には、参照符号の共通符号を使用し、同種の要素を区別する場合は、参照符号を使用することがある。例えば、ＣＴＬ（ストレージコントローラ）を区別しない場合には、「ＣＴＬ６０」と言い、ＣＴＬを区別する場合には、「ＣＴＬ６０Ａ」、「ＣＴＬ６０Ｂ」のように言うことがある。また、ＣＴＬ６０Ａ内の構成要素に付与された参照符号の末尾は「Ａ」とし、ＣＴＬ６０Ｂ内の構成要素に付与された参照符号の末尾は「Ｂ」とする。
　また、以下の説明において、「Ｉ／Ｏ要求を受け付ける」とは、Ｉ／Ｏ要求の受信が可能な状態になることを意味し、実際にＩ／Ｏ要求を受信したことを必ずしも意味しない。
　図１は、一実施形態に係る計算機システムの構成を示す。
　計算機システム５０は、ホストストレージシステム５２と、管理システム５４とを有する。ホストストレージシステム５２は、複数のホスト１０１と、複数のホスト１０１に接続されたストレージシステム１０３とを有する。管理システム５４は、ストレージシステム１０３を管理する。複数のホスト１０１とストレージシステム１０３間は、例えば、ＳＡＮ（Storage Area Network）１０２のような第１の通信ネットワーク経由で接続される。管理システム５４とストレージシステム１０３間は、例えば、ＬＡＮ（Local Area Network）のような第２の通信ネットワーク経由で接続される。第１及び第２の通信ネットワークは同じ通信ネットワークでもよい。第１及び第２の通信ネットワークの少なくとも１つに代えてＰＣＩｅ（PCI-Express）スイッチやマルチプレクサのような中継デバイスが採用されてもよい。ホスト１０１の数は１でもよい。ホスト１０１は、１以上のホスト計算機である。
　ストレージシステム１０３は、複数の記憶デバイス１３１と、複数の記憶デバイス１３１に接続された冗長化されたＣＴＬ６０Ａ及び６０Ｂを有する。ＣＴＬ６０Ａ及び６０Ｂ間に、データ通信パス１４３と、コマンド通信パス１４４とが張られている。記憶デバイス１３１の数は１でもよい。
　本実施形態の概要は、例えば以下の通りである。
　ＣＴＬ６０ＡがマスターでありＣＴＬ６０Ｂがスレーブである。データ通信パス１４３経由の通信が不可能である第１の通信不可が生じた場合、ＣＴＬ６０Ｂ（スレーブ）が閉塞しリプレースされる。ＣＴＬ６０Ｂが閉塞しリプレースされてもデータ通信パス１４３経由の通信が不可能である第２の通信不可が生じた場合（つまり、通信不可が解消しない場合）、言い換えれば、閉塞対象とするＣＴＬの選択が誤っていた場合（閉塞選択ミスが検出された場合）、リプレースされたＣＴＬ６０Ｂが、ホットスタンバイモードに入り、ＣＴＬ６０Ａが、ＣＴＬ６０Ｂがホットスタンバイモードに入ったことを確認してライトスルーモードに入る。
　リプレースされたＣＴＬ６０Ｂは、ホットスタンバイモードに入った場合、ホスト１０１からＩ／Ｏ要求を受け付けるための初期設定を含んだ準備処理を実行する。
　ＣＴＬ６０Ａは、ライトスルーモードに入った場合、ＣＴＬ６０Ａが保持するデータ管理情報１７５及びダーティデータ（メモリ１６１Ａにキャッシュされたが記憶デバイス１３１に書き込まれていないデータ）を記憶デバイス１３１に書込む書込み処理を、ホスト１０１からＩ／Ｏ要求を受け付けることを維持したまま実行する。
　リプレースされたＣＴＬ６０Ｂは、記憶デバイス１３１からデータ管理情報をメモリ１６１Ｂに読み出す。
　ＣＴＬ６０Ａが、ライトスルーモードから抜けて、ホスト１０１からＩ／Ｏ要求を受け付けることを停止する。リプレースされたＣＴＬ６０Ｂが、ホスト１０１からＩ／Ｏ要求を受け付けることを開始する。
　第２の通信不可が生じた場合、記憶デバイス１３１経由で、ＣＴＬ６０Ａ及び６０Ｂ間でデータ管理情報１７５が同期する。その同期が完了し、ＣＴＬ６０ＢがＩ／Ｏ要求の受け付けを開始した場合、ＣＴＬ６０Ａが閉塞する（ＣＴＬ６０Ａのリプレースが可能となる）。
　本実施形態によれば、閉塞選択ミスが生じても、ストレージシステム１０３を停止することなく、ＣＴＬ６０Ａ（障害ＣＴＬである可能性が高いＣＴＬ）を交換することができる。
　以下、本実施形態を詳細に説明する。
　ホスト１０１は、ストレージシステム１０３にデータ（ユーザデータ）のＩ／Ｏ要求を送信する。ユーザデータは、ホスト１０１が論理ボリュームに格納するデータである。Ｉ／Ｏ要求は、Ｉ／Ｏ先の領域を表すＩ／Ｏ先情報を含む。Ｉ／Ｏ先情報は、例えば、Ｉ／Ｏ先の論理ボリュームのＬＵＮ（Logical Unit Number）と、その論理ボリュームにおける領域のＬＢＡ（Logical　Block　Address）とを含む。論理ボリュームは、ＣＴＬ６０Ａ及び６０Ｂにより提供される。
　記憶デバイス１３１は、不揮発性の記憶デバイス（例えば、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive））である。
　ＣＴＬ６０は、Ｆ－Ｉ／Ｆ（フロントエンドインタフェース）１４２、Ｂ－Ｉ／Ｆ（バックエンドインタフェース）、Ｍ－Ｉ／Ｆ（管理インタフェース）１４１、メモリ１６１、及び、それらに接続されたプロセッサ１２１を有する。
　Ｆ－Ｉ／Ｆ１４２は、複数のホスト１０１に接続されるインタフェースデバイスである。Ｂ－Ｉ／Ｆ１２３は、複数の記憶デバイス１３１に接続されるインタフェースデバイスである。Ｍ－Ｉ／Ｆ１４１は、管理システム５４に接続されるインタフェースデバイスである。
　メモリ１６１は、制御プログラム１７１、役割管理情報１７３及びデータ管理情報１７５を格納する。制御プログラム１７１は、プロセッサ１２１に実行され、ＣＴＬ６０の動作を制御する。役割管理情報１７３は、ＣＴＬ６０Ａ及び６０Ｂの各々の役割（マスター又はスレーブ）を示す情報である。データ管理情報１７５は、ＣＴＬ６０が受信したライト要求に従うデータに関する情報である。
　ＣＴＬ６０Ａ及び６０Ｂ間（例えば、プロセッサ１２１Ａ及び１２１Ｂ間）にデータ通信パス１４３が張られる。また、ＣＴＬ６０Ａ及び６０Ｂ間（例えば、プロセッサ１２１Ａ及び１２１Ｂ間）にコマンド通信パス１４４が張られる。
　管理システム５４は、１以上の計算機で構成される。具体的には、例えば、管理計算機が情報を表示する場合（具体的には、管理計算機が自分の表示デバイスに情報を表示する、或いは、管理計算機が表示用情報を遠隔の表示用計算機に送信する場合）、管理計算機が管理システム５４である。また、例えば、複数の計算機で管理計算機と同等の機能が実現されている場合は、当該複数の計算機（表示を表示用計算機が行う場合は表示用計算機を含んでよい）が、管理システム５４である。計算機への情報の入力や、計算機からの情報の出力は、計算機が有する入出力デバイスにより行われてよい。入出力デバイスの例としては、表示デバイス、キーボード及びポインティングデバイスが考えられるが、これらのうちの少なくとも１つに代えて又は加えて別のデバイスが採用されてよい。また、入出力デバイスの代替として、シリアルインタフェースデバイスやイーサーネットインタフェースデバイス（イーサネットは登録商標）が採用され、そのようなインタフェースデバイスに、表示デバイスとキーボード及びポインティングデバイスとを有する表示用計算機が接続され、計算機が表示用情報を表示用計算機に送信したり、計算機が入力用情報を表示用計算機から受信したりすることで、情報の出力（例えば表示）及び入力が行われてよい。
　図２は、役割管理情報１７３及びデータ管理情報１７５の各々の構成を示す。
　役割管理情報１７３は、ＣＴＬ６０毎にエントリを有し、各エントリが、ＣＴＬ　ＩＤ２０１及び役割２０２といった情報を保持する。ＣＴＬ　ＩＤ２０１は、ＣＴＬ６０のＩＤである。役割２０２は、ＣＴＬ６０の役割を示す。本実施形態によれば、第２の通信不可が生じる前は、ＣＴＬ６０Ａ（ＣＴＬ　ＩＤ２０１“ＣＴＬ１”）がマスターであり、ＣＴＬ６０Ｂ（ＣＴＬ　ＩＤ２０１“ＣＴＬ２”）がスレーブである。
　データ管理情報１７５は、データ（ユーザデータ）毎にエントリを有する。各エントリが、データＩＤ２１１及びデータ属性２１２といった情報を保持する。データＩＤ１２１は、データ（ユーザデータ）のＩＤである。データ属性２１２は、データの属性に関する情報、例えば、データの記憶領域アドレス（例えば、記憶デバイス１３１のＩＤとその記憶デバイス１３１における記憶領域のアドレス）を含む。データ属性２１２は、更に、データのボリューム領域アドレス（例えば、論理ボリュームにおける領域のアドレス）、データのキャッシュ属性（例えば、ダーティ（記憶デバイス１３１にデータが未格納）、クリーン（記憶デバイス１３１にデータが格納済））、及び、データのキャッシュ領域アドレス（例えば、データのメモリ１６１における領域のアドレス）のうちの少なくとも１つを含んでよい。
　以下、本実施形態で行われる処理の例を説明する。
　図３及び図４は、第１及び第２の通信不可が生じた場合に実行される処理の流れを示す。なお、以下の説明において、ＣＴＬ６０Ａの処理は、例えば、プロセッサ１２１Ａが制御プログラム１７１Ａを実行することにより行われる処理である。また、ＣＴＬ６０Ｂの処理は、例えば、プロセッサ１２１Ｂが制御プログラム１７１Ｂを実行することにより行われる処理である。
　データ通信パス１４３経由の通信が不可能である第１の通信不可が生じた場合（Ｓ３０１：Ｙ）、ＣＴＬ６０Ａが、その第１の通信不可の閉塞処理（例えば、プロセッサ１２１Ａに接続されているモジュール（例えば、Ｆ－Ｉ／Ｆ１４２Ａ及びＢ－Ｉ／Ｆ１２３Ａ）を停止させる処理）を実行する（Ｓ３０２）。そして、ＣＴＬ６０Ａが、コマンド通信パス１４４経由で、閉塞コマンド（第１の信号の一例）をＣＴＬ６０Ｂに送信する（Ｓ３０３）。Ｓ３０２及びＳ３０３は、ＣＴＬ６０Ａがマスターであるが故にＣＴＬ６０Ａにより実行される。ＣＴＬ６０Ｂは、コマンド通信パス１４４経由で閉塞コマンドを受信し（Ｓ３０４）、その閉塞コマンドに応答して、閉塞する（Ｓ３０５）。なお、第１の通信不可が生じたことが、ＣＴＬ６０Ａ（又は６０Ｂ）により管理システム５４に通知され、その通知を受けた管理システム５４からＣＴＬ６０Ｂが閉塞コマンドを受信してもよい。ＣＴＬ６０Ｂが閉塞コマンドを受信するまで、ＣＴＬ６０Ａ及び６０Ｂのいずれもホスト１０１からＩ／Ｏ要求を受け付け、ＣＴＬ６０Ｂが閉塞コマンドを受信した後、ＣＴＬ６０Ａのみがホスト１０１からＩ／Ｏ要求を受け付ける。ＣＴＬ６０Ｂは、閉塞したら、閉塞完了通知を、コマンド通信パス１４４経由で、ＣＴＬ６０Ａに送信する（Ｓ３０６）。
　ＣＴＬ６０Ａは、コマンド通信パス１４４経由で閉塞完了通知を受信し（Ｓ３０７）、閉塞完了メッセージを、Ｍ－Ｉ／Ｆ１４１Ａ経由で、管理システム５４に送信する（Ｓ３０８）。管理システム５４は、その閉塞完了メッセージを受信し、そのメッセージの内容を表示する（Ｓ３０９）。保守員が、そのメッセージ内容を確認し（Ｓ３１０）、ＣＴＬ６０Ｂの無停止リプレースを実施するか否かを判断する（Ｓ３１１）。「無停止リプレース」とは、ストレージシステム１０３を停止すること無しに（ストレージシステム１０３が稼働したままの状態で）ＣＴＬ６０をリプレースすることである。Ｓ３１１の判断結果が偽の場合、保守員は、ＣＴＬ６０Ｂの停止リプレースを実施する。「停止リプレース」とは、ストレージシステム１０３を停止してＣＴＬ６０をリプレースすることである。
　Ｓ３１１の判断結果が真の場合、保守員は、ＣＴＬ６０Ｂの無停止リプレースを実施し、且つ、管理システム５４経由で、完了通知を、ＣＴＬ６０ＡとリプレースされたＣＴＬ６０Ｂとのうちの少なくとも１つに送信する（Ｓ３１２）。ＣＴＬ６０ＡとリプレースされたＣＴＬ６０Ｂとのうちの１つが、完了通知を受信した場合、その完了通知は、コマンド通信パス１４４経由で、ＣＴＬ６０Ａ及び６０Ｂ間で共有される。
　ＣＴＬ６０Ａ及びリプレースされたＣＴＬ６０Ｂは、完了通知を受信し、回復処理を実行する。回復処理では、例えば次の（１）乃至（４）が行われる。
（１）ＣＴＬ６０Ｂ内のプロセッサ１２１Ｂが、ＣＴＬ６０Ｂの起動及び初期化を行う。
（２）プロセッサ１２１Ｂが、ＣＴＬ６０Ｂ内のモジュールが正常か否かを診断する。
（３）ＣＴＬ６０Ｂ内のモジュールが正常の場合、プロセッサ１２１Ｂは、ＣＴＬ６０Ａ内のプロセッサ１２１Ａとの間で、ＣＴＬ間通信に関する初期設定を行う。
（４）プロセッサ１２１Ｂは、ＣＴＬ６０Ａ内のプロセッサ１２１Ａとの間で、データ管理情報１７５の同期処理を行う。
　ＣＴＬ６０Ｂがリプレースされたにも関わらずデータ通信パス１４３経由の通信が不可能である第２の通信不可が生じた場合（Ｓ３１４：Ｙ）、つまり、閉塞選択ミスが生じた場合、図４に示す処理が実行される。なお、第２の通信不可は生じないがストレージシステム１０３が正常に戻らなければ（Ｓ３１５：Ｎ）、Ｓ３０３が再度実行される。ストレージシステム１０３が正常に戻った場合（Ｓ３１５：Ｎ）、処理が、Ｓ３０１に戻る。
　閉塞選択ミスが生じた場合、図４に示すように、ＣＴＬ６０Ａが、第２の通信不可の閉塞処理を実行する（Ｓ４００）。ＣＴＬ６０Ａが、ＣＴＬ６０Ａの無停止リプレースを実施するか否かの問合せを含む確認メッセージを管理システム５４に送信する（Ｓ４０１）。管理システム５４が、その確認メッセージを受信し、その確認メッセージを表示する（Ｓ４０２）。図５にその確認メッセージの表示画面の一例を示す。保守員が、その確認メッセージを確認し（Ｓ４０３）、ＣＴＬ６０Ａの無停止リプレースを実施するか否かを判断する（Ｓ４０４）。Ｓ４０４の判断結果が偽の場合、保守員は、ＣＴＬ６０Ａの停止リプレースを実施する（Ｓ４０６）。Ｓ４０６は、例えば、図５に例示の表示画面上の「キャンセル」ボタンが押された上で実施される。
　Ｓ４０４の判断結果が真の場合、管理システム５４経由で、ＣＴＬ６０Ａの無停止リプレースを実施することを示す情報を含んだ実施メッセージ（第３の信号の一例）を、ＣＴＬ６０ＡとリプレースされたＣＴＬ６０Ｂとのうちの少なくとも１つに送信する（Ｓ４０５）。Ｓ４０５は、例えば、図５に例示の表示画面上の「開始」ボタンが押されたことに起因して実施される。ＣＴＬ６０ＡとリプレースされたＣＴＬ６０Ｂとのうちの１つが、実施メッセージを受信した場合、その実施メッセージは、コマンド通信パス１４４経由で、ＣＴＬ６０Ａ及び６０Ｂ間で共有される。
　ＣＴＬ６０Ａ及びリプレースされたＣＴＬ６０Ｂは、実施メッセージを受信し（Ｓ４０７）、ＣＴＬ６０Ｂが、ホットスタンバイモードに入る。具体的には、ＣＴＬ６０Ｂが、ホストからＩ／Ｏ要求を受け付けるための初期設定を含んだ準備処理を開始する（Ｓ４０８）。なお、Ｓ４００の後、Ｓ４０１～Ｓ４０７がスキップされて、Ｓ４０８が開始されてもよい。つまり、保守員からの手動による指示無しに、Ｓ４０８が開始されてもよい。ＣＴＬ６０Ｂは、準備処理を完了し（Ｓ４０９）、完了通知を、管理システム５４及びＣＴＬ６０Ａのうちの少なくともＣＴＬ６０Ａに送信する。その完了通知を受けた管理システム５４は、完了通知メッセージを表示する（Ｓ４１１）。
　リプレースされたＣＴＬ６０Ｂが準備処理を完了したということは、ＣＴＬ６０ＡからＣＴＬ６０Ｂへの引継ぎが完了すれば、ＣＴＬ６０Ｂは、Ｉ／Ｏ要求を受け付けることが可能になるということである。そこで、その完了通知を受けたＣＴＬ６０Ａ（言い換えれば、ＣＴＬ６０Ｂがホットスタンバイモードに入ったことを確認したＣＴＬ６０Ａ）が、ライトスルーモードに入る、つまり、ホスト１０１からのＩ／Ｏ要求の受け付けを維持したままで、メモリ１６１Ａ上のダーティデータ及びデータ管理情報を１以上の記憶デバイス１３１に書込む書込み処理を開始する（Ｓ４１２）。データ管理情報の書込み先の記憶領域のアドレスは、予め決まっていてもよい。ＣＴＬ６０Ａは、コマンド通信パス１４４経由で、書込み処理開始通知（第２の信号の一例）を、ＣＴＬ６０Ｂに送信する（Ｓ４１３）。ＣＴＬ６０Ｂは、コマンド通信パス１４４経由で、書込み処理開始通知（第２の信号の一例）を受信する（Ｓ４１４）。書込み処理開始通知では、データ管理情報の書込み先の記憶領域のアドレスが指定されていてもよい。ＣＴＬ６０Ｂは、書込み処理開始通知を受信した場合、データ管理情報を１以上の記憶デバイス１３１から読み出し、引継ぎ処理（例えば、閉塞している記憶デバイス１３１に関する情報の引継ぎ）を開始する（Ｓ４１５）。なお、データ管理情報を１以上の記憶デバイス１３１から読み出すことは、引継ぎ処理に含まれても含まれなくてもよい。
　ライトスルーモードにおいて、ＣＴＬ６０Ａが、ホスト１０１からライト要求を受信した場合、そのライト要求に従うデータを１以上の記憶デバイス１３１に書き込み、且つ、そのデータの書き込みに応じて１以上の記憶デバイス１３１内のデータ管理情報を更新し、その後に、ライト完了をホスト１０１に応答する。このように、ライトスルーモードにおいてＣＴＬ６０Ａがライト要求を受信した場合、そのライト要求に従うデータの書き込みとデータ管理情報の更新とが１以上の記憶デバイス１３１に対して実行された後に応答が返る。これにより、データ管理情報をＣＴＬ６０Ｂに引き継ぐことの正確性を保証することが期待できる。
　ＣＴＬ６０Ａは、書込み処理が完了した場合、コマンド通信パス１４４経由で、書込み処理完了通知（第４の信号の一例）を、ＣＴＬ６０Ｂに送信する（Ｓ４１６）。ＣＴＬ６０Ａは、Ｉ／Ｏ要求の受け付けを停止する（Ｓ４１７）。その際、ＣＴＬ６０Ａは、ＣＴＬ６０Ａの役割を、マスターからスレーブに変更する（役割管理情報１７３を更新する）。
　ＣＴＬ６０Ｂは、コマンド通信パス１４４経由で、書込み処理完了通知を受信する、つまり引継ぎ処理を完了する（Ｓ４１８）。この場合、ＣＴＬ６０Ｂは、Ｉ／Ｏ要求の受け付けを開始する（Ｓ４１９）。その際、ＣＴＬ６０Ｂは、ＣＴＬ６０Ｂの役割を、スレーブからマスターに変更する（役割管理情報１７３を更新する）。また、ＣＴＬ６０Ｂは、ＣＴＬ６０ＢがＩ／Ｏ受付開始したことの通知を管理システム５４に送信する。その通知を受けた管理システム５４は、ＣＴＬ６０ＢがＩ／Ｏ受付開始したことを示す情報を含んだメッセージを表示する（Ｓ４２０）。なお、Ｓ４１９で、ＣＴＬ６０Ｂがマスターになるので、以後、ＣＴＬ６０Ａがリプレースされた後に通信不可が生じた場合、ＣＴＬ６０ＢがＣＴＬ６０Ａを閉塞させることができる。ＣＴＬ６０Ｂがマスターであるのは一時的であって、ＣＴＬ６０Ａのリプレース後にＣＴＬ６０ＡがマスターとなりＣＴＬ６０Ｂがスレーブに戻ってもよい。
　Ｓ４１６及びＳ４１８まで、ＣＴＬ６０Ａが、Ｉ／Ｏ要求を受け付け、Ｓ４１７及びＳ４１９から、ＣＴＬ６０Ｂが、ＣＴＬ６０Ａに代わってＩ／Ｏ要求を受け付ける。Ｓ４１７のＩ／Ｏ要求受付停止は、ＣＴＬ６０Ｂがメモリ１６１Ｂに読み出したデータ管理情報が、１以上の記憶デバイス１３１内のデータ管理情報と一致することを維持する。
　以上のように、第２の通信不可が生じた場合、閉塞コマンドではなく、上述した実施メッセージや書込み処理開始通知を受信するので、ＣＴＬ６０Ｂが閉塞することを回避できる。
　ＣＴＬ６０Ｂが、Ｓ４１９の後、コマンド通信パス１４４経由で、書込み完了通知の確認応答（第５の信号の一例）を、ＣＴＬ６０Ａに返す（Ｓ４２１）。ＣＴＬ６０Ａが、その確認応答を受信した場合に、閉塞する（Ｓ４２２）。ＣＴＬ６０Ａが、書込み完了通知の確認応答を受信するということは、ＣＴＬ６０ＢがＩ／Ｏ要求受付を開始したことを知ったことに相当する。このような場合にＣＴＬ６０Ａが閉塞するので、少なくとも１つのＣＴＬ６０がＩ／Ｏ要求を受け付けることを保証することができる。
　また、図３及び図４に示した処理において、ＣＴＬ６０Ａ及び６０Ｂ間のやり取りは、管理システム５４経由でもよいが、コマンド通信パス１４４経由とすることで、管理システム５４経由よりも高速なやり取りが期待できる。
　また、第２の通信不可が生じた場合にＣＴＬ６０Ａの無停止リプレースを実施するか否かは、保守員が判断する。これにより、保守員の確認無しにＣＴＬ６０Ａが閉塞した状態にまで入ることを防ぐことができる。
　以上、幾つかの実施例を説明したが、これらは本発明の説明のための例示であって、本発明の範囲をこれらの実施例にのみ限定する趣旨ではない。本発明は、他の種々の形態でも実施することが可能である。例えば、データ管理情報１７５において、データ属性２１２は、Ｉ／Ｏ頻度及び最終Ｉ／Ｏ時刻のうちの少なくとも１つを含んでよい。ＣＴＬ６０Ｂは、Ｉ／Ｏ受付開始後、バックグラウンドで（すなわち、Ｉ／Ｏ要求を受けたか否かに関わらず）、各エントリにおけるＩ／Ｏ頻度及び最終Ｉ／Ｏ時刻のうちの少なくとも１つに基づき、リード可能性の高いデータを予測し、予測されたデータを記憶デバイス１３１からメモリ１６１Ｂにキャッシュしておいてもよい。これにより、リード性能を高めることが期待できる。
１０４：ストレージシステム

Claims (10)

  1. 　Ｉ／Ｏ（Input/Output）要求を発行するホストに接続されるストレージシステムであって、
    　１以上の記憶デバイスと、
    　冗長化されたストレージコントローラでありホストと前記１以上の記憶デバイスとに接続される第１及び第２のストレージコントローラと、
    　前記第１及び第２のストレージコントローラに接続されたデータ通信パスと
    を有し、
    　前記第１のストレージコントローラは、前記第１のストレージコントローラが受信したライト要求に従うデータがキャッシュされる第１のメモリを有し、
    　前記第２のストレージコントローラは、前記第２のストレージコントローラが受信したライト要求に従うデータがキャッシュされる第２のメモリを有し、
    　前記第１及び第２のメモリの各々は、ライト要求に応答して前記１以上の記憶デバイスに書き込まれるデータに関する管理情報であるデータ管理情報を格納しており、
    　前記データ通信パスは、ダーティデータと管理情報更新部分とのうちの少なくとも１つを前記第１及び第２のストレージコントローラ間で同期するために使用されるパスであり、
    　前記ダーティデータは、メモリから前記１以上の記憶デバイスに未だ書き込まれていないデータであり、
    　前記管理情報更新部分は、前記データ管理情報のうちの少なくともライト要求に従い更新された部分であり、
    　前記データ通信パス経由の通信が不可能である第１の通信不可が生じた場合、前記第２のストレージコントローラが閉塞しリプレースされ、
    　前記第２のストレージコントローラがリプレースされても前記データ通信パス経由の通信が不可能である第２の通信不可が生じた場合、
    　　（Ａ）前記第１のストレージコントローラが、前記第１のメモリ内のダーティデータ及びデータ管理情報を前記１以上の記憶デバイスに書き込むことである書込み処理を、前記ホストからＩ／Ｏ要求を受け付けることを維持したまま実行し、
    　　（Ｂ）前記リプレースされた第２のストレージコントローラが、前記１以上の記憶デバイスから前記第２のメモリに前記データ管理情報を読み出し、
    　　（Ｃ）前記第１のストレージコントローラが、前記ホストからＩ／Ｏ要求を受け付けることを停止し、
    　　（Ｄ）前記リプレースされた第２のストレージコントローラが、前記ホストからＩ／Ｏ要求を受け付けることを開始する、
    ストレージシステム。
  2. 　前記第１の通信不可が生じた場合、前記第２のストレージコントローラが、前記第２のストレージコントローラの閉塞の起因となる第１の信号を受信し、
    　前記第２の通信不可が生じた場合、前記リプレースされた第２のストレージコントローラが、前記第１の信号ではなく、前記１以上の記憶デバイスから前記第２のメモリに前記データ管理情報を読み出すことの起因となる第２の信号を受信する、
    請求項１記載のストレージシステム。
  3. 　前記第１及び第２のストレージコントローラに接続されたコマンド通信パスを更に有し、
    　前記コマンド通信パスは、前記第１及び第２のストレージコントローラ間で制御コマンドを送受信するために使用されるパスであり、
    　前記第２のストレージコントローラは、前記コマンド通信パス経由で、前記第１の信号及び前記第２の信号を前記第１のストレージコントローラから受信する、
    請求項２記載のストレージシステム。
  4. 　前記第２の通信不可が生じた場合、前記リプレースされた第２のストレージコントローラが、
    　　前記ホストからＩ／Ｏ要求を受け付けるための初期設定を含んだ準備処理を実行し、
    　　前記準備処理が完了した場合、第３の信号を、前記コマンド通信パス経由で前記第１のストレージコントローラに送信し、
    　前記第１のストレージコントローラは、前記第３の信号を受信した場合、前記書込み処理を開始し、且つ、前記第２の信号を、前記コマンド通信パス経由で前記第２のストレージコントローラに送信する、
    請求項３記載のストレージシステム。
  5. 　前記第１のストレージコントローラは、前記書込み処理が完了した場合、第４の信号を、前記コマンド通信パス経由で前記第２のストレージコントローラに送信し、且つ、（Ｃ）を実行し、
    　前記第２のストレージコントローラは、前記第４の信号を受信した場合、（Ｄ）を実行する、
    請求項４記載のストレージシステム。
  6. 　前記第２のストレージコントローラは、（Ｄ）を実行した場合、第５の信号を、前記コマンド通信パス経由で前記第１のストレージコントローラに送信し、
    　前記第１のストレージコントローラは、前記第５の信号を受信した場合、閉塞する、
    請求項５記載のストレージシステム。
  7. 　前記第２の通信不可が生じる前、
    　　前記第１のコントローラが、前記第１の通信不可が生じた場合にスレーブとしての役割を有するストレージコントローラを閉塞させるための前記第１の信号を送信するマスターとしての役割を有し、
    　　前記第２のコントローラが、スレーブとしての役割を有し、
    　（Ｃ）は、前記第１のコントローラのマスターとしての役割が停止することであり、
    　（Ｄ）は、前記リプレースされた第２のコントローラのマスターとしての役割が開始することである、
    請求項３記載のストレージシステム。
  8. 　前記第１のストレージコントローラ、及び、前記リプレースされた第２のストレージコントローラは、前記ストレージシステムの管理システムに接続され、
    　前記第２の通信不可が生じた場合、
    　　前記第１のストレージコントローラが、前記管理システムが、第１のメッセージを送信し、
    　　前記第１のストレージコントローラ、及び、前記リプレースされた第２のストレージコントローラのうちの少なくとも１つが、前記第１のメッセージを受信した前記管理システムから第２のメッセージを受信した場合に、（Ａ）が開始する、
    請求項１記載のストレージシステム。
  9. 　（Ａ）において、前記第１のストレージコントローラが、前記ホストからライト要求を受信した場合、そのライト要求に従うデータを前記１以上の記憶デバイスに書き込み、且つ、そのデータの書き込みに応じて前記１以上の記憶デバイス内の前記データ管理情報を更新し、その後に、ライト完了を前記ホストに応答する、
    請求項１記載のストレージシステム。
  10. 　Ｉ／Ｏ（Input/Output）要求を発行するホストと１以上の記憶デバイスとに接続された冗長化されたストレージコントローラである第１及び第２のストレージコントローラを有するストレージシステムの記憶制御方法であって、
    　データ通信パス経由の通信が不可能である第１の通信不可が生じた場合、前記第２のストレージコントローラが閉塞しリプレースされ、
    　　前記データ通信パスは、前記第１及び第２のストレージコントローラに接続されたパスであり、
    　　前記第１のストレージコントローラは、前記第１のストレージコントローラが受信したライト要求に従うデータがキャッシュされる第１のメモリを有し、
    　　前記第２のストレージコントローラは、前記第２のストレージコントローラが受信したライト要求に従うデータがキャッシュされる第２のメモリを有し、
    　　前記第１及び第２のメモリの各々は、ライト要求に応答して前記１以上の記憶デバイスに書き込まれるデータに関する管理情報であるデータ管理情報を格納しており、
    　　前記データ通信パスは、ダーティデータと管理情報更新部分とのうちの少なくとも１つを前記第１及び第２のストレージコントローラ間で同期するために使用されるパスであり、
    　　前記ダーティデータは、メモリから前記１以上の記憶デバイスに未だ書き込まれていないデータであり、
    　　前記管理情報更新部分は、前記データ管理情報のうちの少なくともライト要求に従い更新された部分であり、
    　前記第２のストレージコントローラがリプレースされても前記データ通信パス経由の通信が不可能である第２の通信不可が生じた場合、
    　　（Ａ）前記第１のストレージコントローラが、前記第１のメモリ内のダーティデータ及びデータ管理情報を前記１以上の記憶デバイスに書き込むことである書込み処理を、前記ホストからＩ／Ｏ要求を受け付けることを維持したまま実行し、
    　　（Ｂ）前記リプレースされた第２のストレージコントローラが、前記１以上の記憶デバイスから前記第２のメモリに前記データ管理情報を読み出し、
    　　（Ｃ）前記第１のストレージコントローラが、前記ホストからＩ／Ｏ要求を受け付けることを停止し、
    　　（Ｄ）前記リプレースされた第２のストレージコントローラが、前記ホストからＩ／Ｏ要求を受け付けることを開始する、
    記憶制御方法。
PCT/JP2017/011970 2017-03-24 2017-03-24 ストレージシステム及び記憶制御方法 WO2018173246A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2017/011970 WO2018173246A1 (ja) 2017-03-24 2017-03-24 ストレージシステム及び記憶制御方法
US16/330,333 US10909007B2 (en) 2017-03-24 2017-03-24 Storage system and storage control method for replacing storage controllers in a communication-disabled state during a shutdown-less replacement

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/011970 WO2018173246A1 (ja) 2017-03-24 2017-03-24 ストレージシステム及び記憶制御方法

Publications (1)

Publication Number Publication Date
WO2018173246A1 true WO2018173246A1 (ja) 2018-09-27

Family

ID=63585256

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/011970 WO2018173246A1 (ja) 2017-03-24 2017-03-24 ストレージシステム及び記憶制御方法

Country Status (2)

Country Link
US (1) US10909007B2 (ja)
WO (1) WO2018173246A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08335144A (ja) * 1995-06-07 1996-12-17 Hitachi Ltd 外部記憶装置
JP2001290669A (ja) * 2000-04-10 2001-10-19 Ns Solutions Corp フェールオーバ管理システム、フェールオーバ管理装置、方法、及びコンピュータ読み取り可能な記録媒体

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6615091B1 (en) * 1998-06-26 2003-09-02 Eveready Battery Company, Inc. Control system and method therefor
US6412068B1 (en) * 1999-07-07 2002-06-25 Dell Products, L.P. Card management bus and method
US6578158B1 (en) * 1999-10-28 2003-06-10 International Business Machines Corporation Method and apparatus for providing a raid controller having transparent failover and failback
US20040123027A1 (en) * 2002-10-03 2004-06-24 Workman Michael Lee Systems and methods of multiple access paths to single ported storage devices
US7480831B2 (en) * 2003-01-23 2009-01-20 Dell Products L.P. Method and apparatus for recovering from a failed I/O controller in an information handling system
US7565566B2 (en) * 2003-04-23 2009-07-21 Dot Hill Systems Corporation Network storage appliance with an integrated switch
US8443119B1 (en) * 2004-02-26 2013-05-14 Symantec Operating Corporation System and method for disabling auto-trespass in response to an automatic failover
JP4555029B2 (ja) * 2004-09-01 2010-09-29 株式会社日立製作所 ディスクアレイ装置
US7444541B2 (en) * 2006-06-30 2008-10-28 Seagate Technology Llc Failover and failback of write cache data in dual active controllers
JP4897387B2 (ja) * 2006-08-10 2012-03-14 株式会社日立製作所 ストレージ装置およびこれを用いたデータの管理方法
US7562264B2 (en) * 2006-09-06 2009-07-14 Intel Corporation Fault tolerant soft error detection for storage subsystems
JP5318223B2 (ja) * 2009-04-06 2013-10-16 株式会社日立製作所 ストレージサブシステム、及びその制御方法
WO2012049709A1 (en) * 2010-10-14 2012-04-19 Hitachi, Ltd. Storage control apparatus and method
US8412884B1 (en) * 2011-10-13 2013-04-02 Hitachi, Ltd. Storage system and method of controlling storage system
US9130869B2 (en) * 2012-02-09 2015-09-08 Telefonaktiebolaget L M Ericsson (Publ) Methods of redirecting network forwarding elements and related forwarding elements and controllers
US9239797B2 (en) * 2013-08-15 2016-01-19 Globalfoundries Inc. Implementing enhanced data caching and takeover of non-owned storage devices in dual storage device controller configuration with data in write cache
TWI525428B (zh) * 2014-06-04 2016-03-11 仁寶電腦工業股份有限公司 複合儲存單元的管理方法及其電子裝置
WO2016088231A1 (ja) 2014-12-04 2016-06-09 株式会社日立製作所 ストレージシステム及びコマンド送信制御方法
US10387266B2 (en) * 2015-12-23 2019-08-20 Commvault Systems, Inc. Application-level live synchronization across computing platforms including synchronizing co-resident applications to disparate standby destinations and selectively synchronizing some applications and not others

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08335144A (ja) * 1995-06-07 1996-12-17 Hitachi Ltd 外部記憶装置
JP2001290669A (ja) * 2000-04-10 2001-10-19 Ns Solutions Corp フェールオーバ管理システム、フェールオーバ管理装置、方法、及びコンピュータ読み取り可能な記録媒体

Also Published As

Publication number Publication date
US10909007B2 (en) 2021-02-02
US20190205226A1 (en) 2019-07-04

Similar Documents

Publication Publication Date Title
US8612681B2 (en) Storage system, storage apparatus and method of controlling storage system
US7827367B2 (en) Backup control method for acquiring plurality of backups in one or more secondary storage systems
JP4935901B2 (ja) ストレージシステム、ストレージ装置、リモートコピー方法
JP5286212B2 (ja) ストレージクラスタ環境でのリモートコピー制御方法及びシステム
US8892840B2 (en) Computer system and data migration method
JP4887893B2 (ja) 計算機システム及び計算機システムの制御方法
US7421550B2 (en) Storage system and storage system management method
US8589616B2 (en) Storage system group including scale-out storage system and management method therefor
US8375004B2 (en) Asynchronous remote copy system and storage control method
US20120226860A1 (en) Computer system and data migration method
JP2005182222A (ja) リモートコピーシステム
JP2009009333A (ja) 非同期リモートコピーシステムの制御方法及び非同期リモートコピーシステム
JP2007323218A (ja) バックアップシステム
US20120221813A1 (en) Storage apparatus and method of controlling the same
US20110196825A1 (en) Storage system and data duplication method in the same
JP2009053946A (ja) 二重化コントーラ構成ブロックデバイス制御装置
US10503440B2 (en) Computer system, and data migration method in computer system
JP6230707B2 (ja) ストレージシステム
WO2018173246A1 (ja) ストレージシステム及び記憶制御方法
JP4635032B2 (ja) 記憶制御装置の制御プログラムの更新方法
US20100106924A1 (en) Computer system for performing remote copy using journal
US11308122B2 (en) Remote copy system
US9304876B2 (en) Logical volume migration in single server high availability environments
US9836359B2 (en) Storage and control method of the same
US20210334181A1 (en) Remote copy system and remote copy management method

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17901785

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17901785

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP