WO2007118371A1 - Procédé d'accès à un disque, et système et matrice de disques permettant d'étendre la capacité du disque - Google Patents

Procédé d'accès à un disque, et système et matrice de disques permettant d'étendre la capacité du disque Download PDF

Info

Publication number
WO2007118371A1
WO2007118371A1 PCT/CN2006/002258 CN2006002258W WO2007118371A1 WO 2007118371 A1 WO2007118371 A1 WO 2007118371A1 CN 2006002258 W CN2006002258 W CN 2006002258W WO 2007118371 A1 WO2007118371 A1 WO 2007118371A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
disk
disk array
command
switching unit
Prior art date
Application number
PCT/CN2006/002258
Other languages
English (en)
French (fr)
Inventor
Zhanming Wei
Original Assignee
Hangzhou H3C Technologies Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou H3C Technologies Co., Ltd. filed Critical Hangzhou H3C Technologies Co., Ltd.
Priority to JP2008511538A priority Critical patent/JP2008546049A/ja
Priority to EP06775575A priority patent/EP2009552A4/en
Priority to US12/097,253 priority patent/US8041890B2/en
Publication of WO2007118371A1 publication Critical patent/WO2007118371A1/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0658—Controller construction arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G06F13/16—Handling requests for interconnection or transfer for access to memory bus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/163—Interprocessor communication
    • G06F15/167—Interprocessor communication using a common memory, e.g. mailbox
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0617—Improving the reliability of storage systems in relation to availability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Definitions

  • the present invention relates to a network storage technology, and more particularly to a method for accessing a destination disk and a system for expanding disk capacity and a disk array.
  • a storage area network is a high-speed dedicated subnet that connects servers and disk arrays through a switched network.
  • the disk array is mainly used to store a large amount of data
  • the server is mainly used for reading and writing the disk array to acquire and store data.
  • each server can access any disk array through a switched network, greatly increasing data availability.
  • FIG. 1 is a schematic diagram of the structure of an IP SAN system.
  • the IP SAN system is a SAN system based on the IP-based Small Computer Interface (iSCSI) protocol and built on the Ethernet.
  • the server is connected to the storage controller (SC) via Ethernet, and the storage controller is connected to the disk array via Ethernet.
  • SC storage controller
  • FIG. 2 is a schematic diagram of an IP SAN system implementing extended disk capacity in the prior art.
  • the prior art cascades multiple slave disk arrays after each primary disk array.
  • the primary disk array is connected to both the secondary disk array and the secondary disk arrays via a Serial Small Computer Interface (SAS).
  • SAS Serial Small Computer Interface
  • FIG. 3 is a schematic diagram showing the connection of a primary disk array to a secondary disk array in the prior art.
  • the primary disk array includes an interface unit, a processing unit, a control unit, an expander, and a plurality of disks; each of the slave arrays includes an expander and Multiple disks.
  • the primary disk array is connected to the slave disk array and between each slave disk array through its internal expander (SAS Expander).
  • SAS Expander SAS Expander
  • 4 is a flow chart of accessing a destination disk using the IP SAN system shown in FIG. 2 in the prior art. Referring to FIG. 2, FIG. 3 and FIG. 4, taking the access of the disk array 1 to the server as an example, the process of accessing a destination disk by using the existing IP SA system of the expandable disk capacity includes the following steps:
  • Step 401 The server carries the command or data to be delivered in the iSCSI protocol package, encapsulates the iSCSI protocol packet, and sends the data to the storage controller (SC) through the Ethernet.
  • SC storage controller
  • Step 402 The storage controller decapsulates the received iSCSI protocol packet, obtains a command or data, and performs related service processing on the obtained command or data, such as a mirror or a snapshot.
  • Step 403 The storage controller carries the acquired command or data in the iSCSI protocol package, encapsulates the iSCSI protocol packet, and sends the data to the primary disk array through the Ethernet.
  • the server may be directly connected to the primary disk array through the Ethernet, so that in the process shown in FIG. 4 above, the steps are as follows.
  • the process from 401 to step 403 is as follows: The server carries the command or data to be delivered in the iSCSI protocol package, encapsulates the iSCSI protocol packet, and sends it to the primary disk array through the Ethernet.
  • Step 404 The interface unit inside the primary disk array receives the iSCSI protocol packet, and sends the iSCSI protocol packet to the processing unit.
  • Step 405 The processing unit inside the primary disk array performs decapsulation and protocol parsing on the received iSCSI protocol packet, acquires the command or data, and sends the obtained command or data to the control unit.
  • control unit described here and below may be an input/output processor (IOP) or a serial small computer interface controller (SAS/SATA Controller).
  • IOP input/output processor
  • SAS/SATA Controller serial small computer interface controller
  • Step 406 The control unit sends the command or data to the expander.
  • control unit is a core unit that controls the implementation of the disk access process, and each of the expanders establishes a physical connection channel with the disks in each disk array to read the disk. Write, maintain. In this step, the control unit performs the transmission process using the established underlying physical connection.
  • Step 407 The expander in the primary disk array searches for the port corresponding to the destination disk address in the routing table saved by itself according to the destination disk address in the received command or data, and uses the found port to receive the received port.
  • the command or data is sent to the expander from disk array 1 at a later stage.
  • Step 408 Search for the port corresponding to the address of the destination disk in the routing table saved by the expander in the disk array 1 according to the received command or the address of the destination disk in the data, and use the found port to The command or data is sent to a disk directly connected to itself, such as disk 1.
  • Step 409 Perform the corresponding data processing, such as reading and writing data or performing data scanning, from the disk 1 in the disk array 1 according to the obtained command or data.
  • only the primary disk array includes a control unit that can control access to each disk, that is, the control unit inside the primary disk array must handle all Disk access command processing or data read and write. In this way, when one or more servers simultaneously perform a large number of disk accesses, the control unit inside the primary disk array tends to have processing delays due to excessive traffic load, or even a series of problems such as service interruption or failure. Ensure the normal operation of the business.
  • a routing table is saved in any of the expanders for recording all disks.
  • the correspondence between the address and the port, and the expander completes the command or data forwarding by looking up the routing table.
  • the number of entries that can be recorded in the routing table is limited. Therefore, the primary disk array can only cascade up to 64 slave disk arrays, and cannot continue to cascade more slave disk arrays, thereby greatly Limits the expansion of disk capacity.
  • the main object of the present invention is to provide a method for accessing a destination disk and a system for expanding disk capacity
  • another object of the present invention is to provide a primary disk array and a secondary disk array to reduce the primary disk array.
  • the business load of the internal control unit ensures the normal operation of the business.
  • the PCIe switching unit and the control unit connect different disk arrays through their internal PCIe switching units.
  • the method further includes:
  • the processing unit in the primary disk array After obtaining the command or data, the processing unit in the primary disk array sends the acquired command or data to the PCIe switching unit in the primary disk array.
  • the PCIe switching unit in the primary disk array sends the command or data to the control unit in the corresponding disk array according to the address information of the destination disk in the received command or data;
  • the control unit in the corresponding disk array sends the received command or data to the destination disk directly connected thereto.
  • the method further includes: mapping, in any one of the disk arrays, an address of all the disks in the disk array into an address space, where the address space is saved on the first port of the disk array in which the PCIe switching unit is connected to the control unit And mapping the address of the disk in all subsequent disk arrays to another address space in which the PCIe switching unit stores the other address space on the second port connected to the subsequent PCIe switching unit Information
  • the step B includes: Bl, the PCIe switching unit in the primary disk array sends the received command or data to its first port and the second port;
  • the first port and the second port of the PCIe switching unit in the primary disk array respectively determine whether the address of the destination disk in the received command or data is within the address space saved by itself, and if yes, send the device through itself.
  • the received command or data is up to the corresponding control unit in the disk array. Otherwise, the received command or data is not forwarded.
  • a system for expanding disk capacity comprising at least one server, Ethernet, at least one primary disk array and its cascaded secondary disk array, the server for carrying commands or data in an iSCSI protocol package and performing the iSCSI protocol package After being encapsulated, it is sent to the interface unit in the primary disk array through the Ethernet.
  • the primary disk array further includes a processing unit, a PCIe switching unit, a control unit, and at least one disk, and in the primary disk array, the PCIe switching unit and the processing unit respectively
  • the control unit is directly connected, and the control unit is directly connected to any one of the disks;
  • the slave disk array includes a PCIe switching unit, a control unit and at least one disk, and in the slave disk array, the control unit is directly connected to the PCIe switching unit and any one of the disks respectively
  • Each disk array is directly connected through an internal PCIe switching unit, and
  • a processing unit in the primary disk array configured to send the command or data to the PCIe switching unit in the primary disk array after acquiring the command or data;
  • a PCIe switching unit in any one of the disk arrays configured to send the command or data to a first port directly connected to the control unit and a second directly connected to the PCIe switching unit of the subsequent stage when receiving the command or data a port, sending, by the processing of the first port and the second port, the received command or data to a control unit in the corresponding disk array;
  • the control unit in any one of the disk arrays is configured to send the received command or data to the destination disk directly connected thereto according to the address information of the destination disk in the command or data when receiving the command or data.
  • the first port of the PCIe switching unit in any one of the disk arrays is used to store an address mapping address space of all the disks in the disk array where the first port is located.
  • Information and when receiving the command or data, determining whether the address of the destination disk in the command or data is within the range of the address space held by itself, after determining that the address of the destination disk is within the range of the address space saved by itself Sending the received command or data to the directly connected control unit in the disk array where it is located;
  • the second port of the PCIe switching unit in any one of the disk arrays is configured to store address space information of address mappings of all disks in each disk array in the subsequent stage, and determine the destination disk in the command or data when receiving the command or data. Whether the address is within the range of the address space saved by itself, after determining that the address of the destination disk is within the range of the address space saved by itself, the received command or data is sent to the directly connected, later-level disk array. PCIe switching unit.
  • the PCIe switching unit is a PCIe switching chip with a PCIe interface and a switching network or an ASI device conforming to the ASI architecture.
  • control unit is an input/output processor IOP or a serial small computer interface controller SAS/SATA Controller
  • the system may further include: at least one storage controller, and any one of the servers is first connected to a storage controller through an Ethernet, and the storage controller is connected to the primary disk array through an Ethernet.
  • a primary disk array includes: an interface unit, a processing unit, a PCIe switching unit, a control unit, and at least one disk, wherein the PCIe switching unit is directly connected to the processing unit and the control unit, and the control unit and any one The disks are directly connected, and,
  • a processing unit configured to send the command or data to the PCIe switching unit after acquiring the command or the data
  • a PCIe switching unit configured to send the received command or data to a first port directly connected to the control unit and a second port directly connected to the subsequent PCIe switching unit, through the first port and the second port Processing the received command or data;
  • control unit configured to receive a command or data according to the command or data
  • the address information of the disk, and the received command or data is sent to the destination disk directly connected to it.
  • the first port of the PCIe switching unit is configured to save address space information of address mapping of all disks in the primary disk array, and when receiving the command or data, determine whether the address of the destination disk in the command or data is Within the range of the address space held by itself, after determining that the address of the destination disk is within the range of the address space held by itself, the received command or data is sent to the control unit in the primary disk array.
  • the second port of the PCIe switching unit is configured to store address space information mapped by addresses of all disks in the disk array in the subsequent stage, and when receiving the command or data, determine the address of the destination disk in the command or data. Whether within the range of the address space saved by itself, after determining that the address of the destination disk is within the range of the address space held by itself, the received command or data is sent to the PCIe directly connected to the external slave disk array. Exchange unit.
  • the PCIe switching unit is a PCIe switching chip with a PCIe interface and a switching network or an ASI device conforming to the ASI architecture.
  • control unit is an input/output processor IOP or a serial small computer interface controller SAS/SATA Controllers
  • a slave disk array includes: a PCIe switching unit, a control unit, and at least one disk, wherein the PCIe switching unit is directly connected to the control unit, and the control unit is directly connected to any one of the disks, and
  • a PCIe switching unit configured to send the received command or data to a first port directly connected to the control unit and a second port directly connected to the subsequent PCIe switching unit, through the first port and the second port Processing the received command or data;
  • the control unit is configured to, when receiving the command or the data, send the received command or data to the destination disk directly connected thereto according to the address information of the target disk in the command or the data.
  • the first port of the PCIe switching unit is configured to save the slave disk array Address space information of all disk addresses mapped, and when receiving a command or data, determine whether the address of the destination disk in the command or data is within the range of the address space saved by itself, and determine the address of the destination disk in itself After the range of the saved address space, the received command or data is sent to the control unit in the slave disk array.
  • the second port of the PCIe switching unit is configured to store address space information mapped by other addresses of all disks in the disk array in the latter stage, and determine the address of the destination disk in the command or data when receiving the command or data. Whether within the range of the address space saved by itself, after determining that the address of the destination disk is within the range of the address space held by itself, the received command or data is sent to the PCIe directly connected to the external slave disk array. Exchange unit.
  • the PCIe switching unit is a PCIe switching chip with a PCIe interface and a switching network or an ASI device conforming to the ASI architecture.
  • control unit is an input/output processor IOP or a serial small computer interface controller SAS/SATA Controlle
  • a disk array comprising: an expandable switching unit coupled to a processing module and a control unit coupled to the switching unit.
  • the expandable switching unit is PCIe Switc
  • the present invention has the following advantages:
  • each includes a control unit that can perform access control on each disk, and when accessing the disks in any one of the disk arrays, the disk is located
  • the control unit in the disk array is responsible for processing the access commands or reading and writing data. In this way, when one or more servers simultaneously perform a large number of disk accesses, the processing of the access command or the data reading and writing can be performed by different control units, instead of the prior art control unit. In order to avoid the excessive load of the control unit in the prior art, a series of problems such as processing delay or even service interruption or failure are avoided, thereby ensuring the normal operation of the service.
  • each primary disk array and its subsequent slave disk arrays include a control unit that can perform access control on each disk, any one disk array When the control unit in the column fails, it does not affect the server's access to other disk arrays, thus further ensuring the normal operation of the service.
  • the present invention can utilize a PCIe switch chip to implement command or data forwarding, whereas the prior art utilizes an expander (Expander) to implement command or data forwarding, and the price of the PCIe switch chip is lower than that of the expander (Expander). Therefore, the cost of the system is reduced.
  • Expander expander
  • FIG. 1 is a schematic structural diagram of an IP SAN system.
  • FIG. 2 is a schematic diagram of an IP SAN system implementing extended disk capacity in the prior art.
  • Figure 3 is a schematic diagram showing the connection of a primary disk array to a y disk array in the prior art.
  • Figure 4 is a flow diagram of accessing a destination disk using the system of Figure 2 in the prior art.
  • Fig. 5A is a schematic diagram showing the basic structure of a system for expanding a disk capacity in the present invention.
  • Fig. 5B is a schematic diagram showing an optimized structure of a system for expanding a disk capacity in the present invention.
  • Figure 6 is a main disk array and the same in the present invention. A schematic diagram of the array of disks.
  • Figure 7 is a flow diagram of accessing a destination disk in an embodiment of the present invention.
  • PCIe PCI Express
  • PCIe PCI Express
  • the PCIe protocol currently only needs to integrate multiple channels, and has multiple levels of service quality and information processing and congestion avoidance mechanisms.
  • ID routing and address routing are required. Packet forwarding eliminates the need for prior art routing lists to greatly reduce command and data transmission delays.
  • access speed can be greatly improved if the PCIe switching device is used to transmit commands or data in the disk array.
  • Fig. 5A is a schematic diagram showing the basic structure of a system for expanding a disk capacity in the present invention.
  • the system for expanding the disk capacity proposed by the present invention mainly includes: at least one server, an Ethernet network, at least one primary disk array, and a cascaded secondary disk array, and any one of the servers is connected to the primary disk array through an Ethernet.
  • Fig. 5B is a schematic diagram showing an optimized structure of a system for expanding a disk capacity in the present invention. Referring to FIG.
  • the system for expanding the disk capacity proposed by the present invention may further include: at least one storage controller, and any one of the servers first through Ethernet and one storage The controller is connected, and the storage controller is connected to the primary disk array through the Ethernet.
  • Figure 6 is a schematic diagram showing the arrangement of a primary disk array and a disk array in the present invention.
  • the main disk array is connected to the array of the disk and the disk array is connected by the PCIe switching unit, and
  • the primary disk array includes: an interface unit, a processing unit, a PCIe switching unit, a control unit, and at least one disk.
  • the interface unit is directly connected to the processing unit and provides a standard Ethernet interface.
  • the PCIe switching unit is directly connected to the processing unit and the control unit, and the control unit is directly connected to each disk;
  • the slave disk array includes: a PCIe switching unit, a control unit, and at least one disk.
  • the PCIe switching unit is directly connected to the control unit, and the control unit is directly connected to each disk.
  • a processing unit in the primary disk array configured to send the command or data to the PCIe switching unit in the primary disk array after acquiring the command or data;
  • a PCIe switching unit in any one of the disk arrays configured to send the command or data to a first port directly connected to the control unit and a second directly connected to the PCIe switching unit of the subsequent stage when receiving the command or data a port, sending, by the forwarding process of the first port and the second port, the received command or data to a control unit in the corresponding disk array;
  • control unit in any one of the disk arrays, configured to send the received command or data to the destination disk directly connected thereto according to the address information of the destination disk in the command or data when receiving the command or data;
  • a primary disk array or any one of the secondary disk arrays used to perform operations such as reading, writing, or scanning based on received commands or data when commands or data are received.
  • the present invention also proposes a method for accessing a destination disk, the core idea of which is: setting a PCIe switching unit between the processing unit and the control unit in the primary disk array, and setting PCIe switching in the slave disk array
  • the unit and the control unit connect different disk arrays through their internal PCIe switching units; after the processing unit in the primary disk array acquires commands or data, the acquired commands or data are sent to the PCIe switching unit in the primary disk array;
  • the PCIe switching unit in the primary disk array sends the received command or data to the control unit in the corresponding disk array according to the address information of the destination disk in the received command or data; the control unit in the corresponding disk array will receive The command or data is sent to the destination disk directly connected to it.
  • a PCIe switching unit is disposed in the primary disk array, and the PCIe switching unit is respectively connected to the processing unit and the control unit in the primary disk array, and the control unit in the primary disk array is connected to each disk in the primary disk array.
  • the original expander in the primary disk array can also be removed.
  • the original expander in the slave disk array can also be removed.
  • the existing processing unit and the control unit both support the PCIe interface, in the above process, the PCIe switching unit can be connected to the processing unit or the control unit through the PCIe interface.
  • the ports for which the PCIe switching unit is directly connected to the control unit are collectively referred to as the first port, and the PCIe switching unit is used for the port connected to the subsequent PCIe switching unit.
  • the second port Collectively referred to as the second port.
  • each disk array including the primary disk array and any one of the secondary disk arrays, map the addresses of all the disks in the disk array to an address space, and save the address on the first port of the PCIe switching unit in the disk array.
  • the information of the space; and, all subsequent addresses from the disk in the disk array are mapped to another address space, and the information of the other address space is saved on the second port of the PCIe switching unit in the disk array.
  • a disk array that includes: an expandable switching unit coupled to the processing module and a control unit coupled to the switching unit.
  • Different disk arrays are connected by their internal scalable switching units.
  • the scalable switching unit is a PCIe switching unit (PCIeSwitch).
  • PCIeSwitch PCIe switching unit
  • FIG. 7 is a flow diagram of accessing a destination disk in an embodiment of the present invention.
  • the process of accessing a destination disk by the method of the present invention includes the following steps when the main disk array is configured and the structure of the disk array is configured.
  • the command or data carries the address of the destination disk.
  • the specific implementation process of the server sending the encapsulated iSCSI protocol packet to the primary disk array includes: the server encapsulates the iSCSI protocol package through Ethernet. Sending to the storage controller; the storage controller decapsulates the received iSCSI protocol packet, obtains the command or data, and performs related business processing on the obtained command or data, such as mirroring or snapshot processing; storage control The obtained command or data is carried in the iSCSI protocol package, and the iSCSI protocol package is encapsulated and sent to the primary disk array through the Ethernet.
  • the server directly sends the encapsulated iSCSI protocol packet to the primary disk array through the Ethernet.
  • Step 702 The interface unit inside the primary disk array receives the iSCSI protocol packet, and sends the iSCSI protocol packet to the processing unit.
  • Step 703 The processing unit in the main disk array performs decapsulation and protocol parsing on the received iSCSI protocol packet, acquires the command or data, and sends the acquired command or data to the primary disk array through the PCIe interface. PCIe switching unit.
  • Step 704 The PCIe switching unit in the primary disk array sends the received command or data to its first port and the second port respectively.
  • Step 705 The first port and the second port of the PCIe switching unit in the primary disk array respectively send the received command or data to the corresponding control unit according to the information of the address space saved by the switch.
  • the specific implementation process of the step is: the first port of the PCIe switching unit in the primary disk array determines whether the address of the destination disk carried in the received command or data is within the range of the address space saved by itself, and if so, The received command or data is sent to the control unit in the primary disk array, and the step ends; otherwise, the forwarding process is not performed; and the second port of the PCIe switching unit in the primary disk array determines whether the received command or data is carried. Whether the address of the destination disk is in the range of the address space saved by itself Inside,
  • the second port of the PCIe switch unit in the primary disk array does not perform the forwarding process.
  • the second port of the PCIe switching unit in the primary disk array sends the received command or data to the PCIe switching unit in the secondary disk array 1 directly connected thereto; the PCIe switching unit in the disk array 1 Sending the received command or data to its first port and the second port at the same time; according to the principle of the above process in this step, by forwarding from the first port or the second port of the PCIe switching unit in the disk array 1, The received command or data is finally sent to a control unit in the corresponding disk array.
  • Step 706 The control unit that receives the command or data sends the command or data to the destination disk directly connected thereto according to the address information of the destination disk in the command or data.
  • Step 707 The destination disk performs corresponding data processing according to the received command or data, such as reading and writing data or performing data scanning.
  • control unit may be an input/output processor (IOP) or a serial small computer interface controller (SAS/SATA Controller).
  • IOP input/output processor
  • SAS/SATA Controller serial small computer interface controller
  • the present invention may also configure some processing policies, such as a RAID policy or a backup processing policy, on the IOP.
  • RAID policy or a backup processing policy
  • the IOP can further perform related processing on the current command or data according to the pre-configured processing policy, for example, mirroring the current command or data. Or backup processing, etc.
  • the IOP then sends the received command or data to the corresponding disk.
  • the PCIe switching unit may be a PCIe switching chip composed of a PCIe switching network that goes out to the PCIe interface.
  • ASI Advanced Switched Interconnect
  • the ASI switching network can directly use the protocol interface to directly carry the PCIe protocol, and directly output commands or data.
  • the PCIe switching unit may also be an ASI device conforming to the ASI architecture.

Description

对目的磁盘访问的方法和扩展磁盘容量的系统及磁盘阵列 技术领域 本发明涉及网络存储技术，特別是涉及一种对目的磁盘进行访问 的方法和扩展磁盘容量的系统以及磁盘阵列。
背景技术 在目前的网络存储技术中，存储区域网絡（ Storage Area Network， SAN )是一种通过交换网络连接服务器和磁盘阵列的高速专用子网。 其中，磁盘阵列主要用于存储大量的数据， 服务器主要用于对磁盘阵 列进行读写操作以便获取和存储数据。 在 SAN系统中， 每一个服务 器都可以通过交换网络访问任意一个磁盘阵列 ,从而大大提高了数据 的可用性。
SAN系统主要分为光纤通道（FC ) SAN系统和互联网协议（IP ) SAN系统。 图 1是 IP SAN系统的结构示意图。 参见图 1 , IP SAN系 统是一种采用基于 IP的小型计算机接口 （iSCSI )协议， 并架构在以 太网上的 SAN系统。在 IP SAN系统中，服务器通过以太网与存储控 制器（SC )相连， 存储控制器再通过以太网与磁盘阵列相连。
目前， 由于信息量急剧增长， 因此为了满足大容量的存储需求， 则必须对磁盘阵列的容量进行扩展。图 2是在现有技术中实现扩展磁 盘容量的 IP SAN系统的示意图。 参见图 2, 为了扩展磁盘容量， 现 有技术在每一个主磁盘阵列后级连多个从磁盘阵列。主磁盘阵列与从 磁盘阵列以及各从磁盘阵列之间均通过串行小型计算机接口 （ SAS ) 进行相连。
图 3是在现有技术中主磁盘阵列与从磁盘阵列相连的示意图。参 见图 2和图 3 , 在实现扩展磁盘容量的 IP SA 系统中， 主磁盘阵列 内部包括接口单元、 处理单元、 控制单元、 扩展器和多个磁盘； 每一 个从磁盘阵列内部均包括扩展器和多个磁盘。主磁盘阵列与从磁盘阵 列之间以及各个从磁盘阵列之间均通过其内部的扩展器 （ SAS Expander )进行相连。 图 4是在现有技术中利用图 2所示 IP SAN系统对目的磁盘进行 访问的流程图。 参见图 2、 图 3和图 4, 以服务器对 兹盘阵列 1进 行访问为例， 利用现有的可扩展磁盘容量的 IP SA 系统来对一个目 的磁盘进行访问的过程包括以下步骤：
步驟 401: 服务器将所需下发的命令或数据携带在 iSCSI协议包 中， 并将该 iSCSI协议包进行封装后， 通过以太网发送至存储控制器 ( SC )。
步骤 402:存储控制器对接收到的 iSCSI协议包进行解封装处理， 获取命令或数据， 并对所获取的命令或数据进行相关的业务处理， 比 如镜像或快照等业务处理。
步骤 403： 存储控制器将所获取的命令或数据携带在 iSCSI协议 包中， 并对该 iSCSI协议包进行封装后， 通过以太网发送至主磁盘阵 列。
需要说明的是， 在图 2所示的 IP SAN系统中也可以没有存储控 制器， 也就是说， 服务器可以直接通过以太网与主磁盘阵列相连， 这 样， 在上述图 4所示过程中， 步骤 401至步骤 403的过程为： 服务器 将所需下发的命令或数据携带在 iSCSI协议包中， 并将该 iSCSI协议 包进行封装后， 通过以太网发送至主磁盘阵列。
步骤 404: 主磁盘阵列内部的接口单元接收到 iSCSI协议包， 将 该 iSCSI协议包发送至处理单元。
步驟 405: 主磁盘阵列内部的处理单元对接收到的 iSCSI协议包 进行解封装和协议解析处理， 获取该命令或数据， 将所获取的命令或 数据发送至控制单元。
这里以及以下所述的控制单元可以是输入输出处理器（ IOP ),也 可以是串行小型计算机接口控制器（ SAS/SATA Controller )。
步骤 406: 控制单元将该命令或数据发送至扩展器。
这里， 控制单元是控制实现磁盘访问过程的核心单元， 通过各个 扩展器与各个磁盘阵列中的磁盘建立物理连接通道， 对磁盘进行读 写、 维护。 在本步驟中， 控制单元利用已建立的底层物理连接执行所 述的发送过程。
步骤 407: 主磁盘阵列内部的扩展器根据接收到的命令或数据中 目的磁盘地址，在自身保存的路由表中查找与该目的磁盘地址对应的 端口， 利用所查找到的端口， 将所接收到的命令或数据发送至后一级 的从磁盘阵列 1中的扩展器。
步骤 408: 从磁盘阵列 1中的扩展器根据接收到的命令或数据中 目的磁盘的地址，在自身保存的路由表中查找与该目的磁盘的地址对 应的端口，利用所查找到的端口将该命令或数据发送至与自身直接相 连的一个磁盘， 比如磁盘 1。
步骤 409: 从磁盘阵列 1中的磁盘 1根据所获取的命令或数据进 行相应的数据处理， 比如读写数据或进行数据扫描等。
根据以上描述可以看出， 现有技术具有以下缺点：
1、 在一个主磁盘阵列及其级连的后续从磁盘阵列中， 只有主磁 盘阵列中包括可对各个磁盘进行访问控制的控制单元， 也就是说， 主 磁盘阵列内部的控制单元必须负责处理所有磁盘的访问命令处理或 数据读写。 这样， 在一个或多个服务器同时进行大量磁盘访问时， 主 磁盘阵列内部的控制单元则往往会由于业务负荷量过多而出现处理 延时， 甚至是业务中断或失败等一系列问题， 从而无法保证业务的正 常进行。
1、 由于只有主磁盘阵列中包括可对各个磁盘阵列进行访问控制 的控制单元， 这样， 当该唯——个控制单元发生故障时， 服务器对所 有磁盘阵列的访问均无法执行， 从而导致整个系统发生瘫痪。
3、 由于扩展器端口到端口的延时很长， 比如， 扩展器建立一个 端口到另一个端口之间的连接需要 450纳秒，而扩展器将数据从一个 端口交换到另一个端口需要 180纳秒，这样则大大降低了服务器对磁 盘阵列的访问速度。
4、 在任意一个扩展器中均保存了路由表， 用于记录所有磁盘的 地址与端口的对应关系，扩展器通过查找路由表完成命令或数据的转 发。 然而在扩展器中， 路由表可记录的表项的数目是有限的， 因此， 主磁盘阵列后最多只能级连 64个从磁盘阵列， 而无法继续级连更多 的从磁盘阵列 , 从而大大限制了磁盘容量的扩展。
发明内容
有鉴于此，本发明的主要目的在于提供一种对目的磁盘进行访问 的方法和扩展磁盘容量的系统，本发明的另一目的在于提供一种主磁 盘阵列和从磁盘阵列，以便降低主磁盘阵列内部控制单元的业务负荷 量， 保证业务的正常进行。
为了达到上述目的 , 本发明的技术方案是这样实现的： 一种对目的磁盘进行访问的方法，在主磁盘阵列中的处理单元与 控制单元之间设置 PCIe交换单元，并在从磁盘阵列中设置 PCIe交换 单元和控制单元， 将不同的磁盘阵列通过其内部的 PCIe交换单元相 连， 该方法还包括：
A、 主磁盘阵列中的处理单元获取命令或数据后， 将所获取的命 令或数据发送至主磁盘阵列中的 PCIe交换单元；
B、主磁盘阵列中的 PCIe交换单元根据所接收到命令或数据中目 的磁盘的地址信息，将该命令或数据发送至对应磁盘阵列中的控制单 元；
C、 该对应磁盘阵列中的控制单元将接收到的命令或数据发送至 与其直接相连的目的磁盘。
其中， 该方法进一步包括： 在任意一个磁盘阵列中， 将该磁盘阵 列中所有磁盘的地址映射为一个地址空间， 在该磁盘阵列中 PCIe交 换单元与控制单元相连的第一端口上保存该地址空间的信息；并将后 续级连的所有磁盘阵列中磁盘的地址映射为另一个地址空间 ,在该磁 盘阵列中 PCIe交换单元与后级 PCIe交换单元相连的第二端口上保存 该另一个地址空间的信息；
所述步骤 B包括： Bl、 主磁盘阵列中的 PCIe交换单元将接收到的命令或数据发送 至自身的第一端口和第二端口；
B2、 主磁盘阵列中 PCIe交换单元的第一端口和第二端口分别判 断所接收到的命令或数据中目的磁盘的地址是否在自身所保存的地 址空间范围内， 如果是， 则通过自身发送所接收到的命令或数据， 直 至对应磁盘阵列中的控制单元， 否则， 不对接收到的命令或数据进行 转发。
一种扩展磁盘容量的系统， 包括至少一个服务器、 以太网、 至少 一个主磁盘阵列及其级连的从磁盘阵列 ,服务器用于将命令或数据携 带在 iSCSI协议包中并对该 iSCSI协议包进行封装后通过以太网发送 至主磁盘阵列中的接口单元， 主磁盘阵列中还包括处理单元、 PCIe 交换单元、 控制单元和至少一个磁盘， 且在主磁盘阵列中， PCIe 交 换单元分别与处理单元和控制单元直接相连，控制单元与任意一个磁 盘直接相连； 从磁盘阵列中包括 PCIe交换单元、 控制单元和至少一 个磁盘， 且在从磁盘阵列中， 控制单元分别与 PCIe交换单元和任意 一个磁盘直接相连； 各个磁盘阵列分别通过内部的 PCIe交换单元直 接相连， 并且，
主磁盘阵列中的处理单元， 用于在获取命令或数据后， 将该命令 或数据发送至主磁盘阵列中的 PCIe交换单元；
任意一个磁盘阵列中的 PCIe交换单元， 用于在接收到命令或数 据时，将该命令或数据发送至自身中与控制单元直接相连的第一端口 和与后级 PCIe交换单元直接相连的第二端口， 通过第一端口和第二 端口的处理将所接收到的命令或数据发送至对应磁盘阵列中的控制 单元；
任意一个磁盘阵列中的控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目的磁盘的地址信息，将所接收到的命令或数据 发送至与其直接相连的目的磁盘。
其中， 所述任意一个磁盘阵列中 PCIe交换单元的第一端口， 用 于保存该笫一端口所在磁盘阵列中所有磁盘的地址映射的地址空间 信息， 并在接收到命令或数据时， 判断该命令或数据中目的磁盘的地 址是否在自身所保存的地址空间的范围内，在确定目的磁盘的地址在 自身所保存的地址空间的范围内之后，将接收到的命令或数据发送至 直接相连的、 自身所在磁盘阵列中的控制单元；
所述任意一个磁盘阵列中 PCIe交换单元的第二端口， 用于保存 后级各磁盘阵列中所有磁盘的地址映射的地址空间信息，在接收到命 令或数据时，判断该命令或数据中目的磁盘的地址是否在自身所保存 的地址空间的范围内，在确定目的磁盘的地址在自身所保存的地址空 间的范围内之后， 将接收到的命令或数据发送至直接相连的、后级磁 盘阵列中的 PCIe交换单元。
其中， 所述 PCIe交换单元为具有 PCIe接口和交换网的 PCIe交 换芯片或符合 ASI架构的 ASI设备。
其中，所述控制单元为输入输出处理器 IOP或串行小型计算机接 口控制器 SAS/SATA Controller
其中， 所述系统还可以进一步包括： 至少一个存储控制器， 任意 一个服务器首先通过以太网与一个存储控制器相连，该存储控制器通 过以太网与主磁盘阵列相连。
一种主磁盘阵列， 该主磁盘阵列中包括： 接口单元、 处理单元、 PCIe交换单元、 控制单元和至少一个磁盘， 其中， PCIe交换单元分 别与处理单元和控制单元直接相连，控制单元与任意一个磁盘直接相 连， 并且，
处理单元， 用于在获取命令或数据后， 将该命令或数据发送至 PCIe交换单元；
PCIe 交换单元， 用于将所接收到的命令或数据发送至自身中与 控制单元直接相连的第一端口和与后级 PCIe交换单元直接相连的第 二端口， 通过第一端口和第二端口的处理发送所接收到的命令或数 据；
控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目 的磁盘的地址信息，将所接收到的命令或数据发送至与其直接相连的 目的磁盘。
其中， 所述 PCIe交换单元的第一端口， 用于保存主磁盘阵列中 所有磁盘的地址映射的地址空间信息， 并在接收到命令或数据时， 判 断该命令或数据中目的磁盘的地址是否在自身所保存的地址空间的 范围内 ,在确定目的磁盘的地址在自身所保存的地址空间的范围内之 后， 将接收到的命令或数据发送至主磁盘阵列中的控制单元。
其中， 所述 PCIe交换单元的第二端口， 用于保存后级各从磁盘 阵列中所有磁盘的地址映射的地址空间信息， 在接收到命令或数据 时，判断该命令或数据中目的磁盘的地址是否在自身所保存的地址空 间的范围内，在确定目的磁盘的地址在自身所保存的地址空间的范围 内之后， 将接收到的命令或数据发送至直接相连的、 外部从磁盘阵列 中的 PCIe交换单元。
其中， 所述 PCIe交换单元为具有 PCIe接口和交换网的 PCIe交 换芯片或符合 ASI架构的 ASI设备。
其中，所述控制单元为输入输出处理器 IOP或串行小型计算机接 口控制器 SAS/SATA Controllers
一种从磁盘阵列， 该从磁盘阵列中包括： PCIe 交换单元、 控制 单元和至少一个磁盘， 其中， PCIe 交换单元与控制单元直接相连， 控制单元与任意一个磁盘直接相连， 并且，
PCIe 交换单元， 用于将所接收到的命令或数据发送至自身中与 控制单元直接相连的第一端口和与后级 PCIe交换单元直接相连的第 二端口， 通过第一端口和第二端口的处理发送所接收到的命令或数 据；
控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目 的磁盘的地址信息，将所接收到的命令或数据发送至与其直接相连的 目的磁盘。
其中， 所述 PCIe交换单元的第一端口， 用于保存该从磁盘阵列 中所有磁盘的地址映射的地址空间信息， 并在接收到命令或数据时， 判断该命令或数据中目的磁盘的地址是否在自身所保存的地址空间 的范围内，在确定目的磁盘的地址在自身所保存的地址空间的范围内 之后， 将接收到的命令或数据发送至该从磁盘阵列中的控制单元。
其中， 所述 PCIe交换单元的第二端口 , 用于保存后级其它从磁 盘阵列中所有磁盘的地址映射的地址空间信息，在接收到命令或数据 时，判断该命令或数据中目的磁盘的地址是否在自身所保存的地址空 间的范围内，在确定目的磁盘的地址在自身所保存的地址空间的范围 内之后， 将接收到的命令或数据发送至直接相连的、 外部从磁盘阵列 中的 PCIe交换单元。
其中， 所述 PCIe交换单元为具有 PCIe接口和交换网的 PCIe交 换芯片或符合 ASI架构的 ASI设备。
其中 ,所述控制单元为输入输出处理器 IOP或串行小型计算机接 口控制器 SAS/SATA Controlle
一种磁盘阵列， 包括： 耦合于处理模块的可扩展式交换单元以及 与该交换单元耦合的控制单元。
其中， 所述可扩展式交换单元为 PCIe Switc
由此可见， 本发明具有以下优点：
1、 在主磁盘阵列及其级连的后续每一个从磁盘阵列中， 均包括 可对各个磁盘进行访问控制的控制单元， 并且，对任意一个磁盘阵列 中的磁盘进行访问时，由该磁盘所在磁盘阵列中的控制单元来负责对 访问命令的处理或数据读写。 这样， 在一个或多个服务器同时进行大 量磁盘访问时，对该访问命令的处理或数据读写则可以分别由不同的 控制单元来执行， 而不是现有技术中的由唯——个控制单元来处理 , 因此， 避免了现有技术中控制单元业务负荷量过多， 出现处理延时甚 至是业务中断或失败等一系列问题， 从而保证了业务的正常进行。
2、 由于在主磁盘阵列及其级连的后续每一个从磁盘阵列中， 均 包括可对各个磁盘进行访问控制的控制单元， 因此， 任意一个磁盘阵 列中的控制单元发生故障时， 不会影响服务器对其它磁盘阵列的访 问， 从而进一步保证了业务的正常进行。
3、 由于 PCIe交换单元端口到端口的延时很短， 仅为 15纳秒， 因此大大提高了服务器对磁盘阵列的访问速度。
4、 由于在 PCIe交换单元中， 只需在每一个端口上设置对应的地 址空间信息， 各端口按照其对应的地址空间进行转发处理， 而无需现 有技术中保存所有磁盘的地址信息， 因此， PCIe 交换单元可记录的 地址信息大幅度的增加，使得主磁盘阵列后能够级连更多的从磁盘阵 列， 从而进一步扩展了磁盘容量。
5、本发明可以利用 PCIe交换芯片来实现命令或数据的转发， 而 现有技术利用扩展器（Expander )来实现命令或数据的转发， 相对于 扩展器（Expander ), PCIe交换芯片的价格较低， 因此， 降低了系统 的成本。
附图说明 图 1是 IP SAN系统的结构示意图。
图 2是在现有技术中实现扩展磁盘容量的 IP SAN系统的示意图。 图 3是在现有技术中主磁盘阵列与y 兹盘阵列相连的示意图。 图 4是在现有技术中利用图 2所示系统对目的磁盘进行访问的流 程图。
图 5A是在本发明中扩展磁盘容量的系统的基本结构示意图。 图 5B是在本发明中扩展磁盘容量的系统的优化结构示意图。 图 6是在本发明中主磁盘阵列与^？兹盘阵列相连的示意图。
图 7是在本发明实施例中对目的磁盘进行访问的流程图。
具体实施方式 在现有技术中， 由于是采用集中控制的方式， 即由主磁盘阵列内 部的一个控制单元完成对所有磁盘阵列访问的控制， 因此， 容易出现 控制单元的业务负荷量过多导致业务无法正常进行的问题，并且在该 控制单元出现故障时， 会导致整个系统瘫痪。 可见， 为了避免现有技 术的缺点， 可以将集中控制的方式变为分布式控制的方式， 即由不同 的控制单元分别对不同磁盘阵列的访问进行控制。
另外， 目前， PCIe ( PCI Express )协议由于可以整合多个通道， 并具备多层次的服务质量水平以及信息处理和避免拥塞的机制，在传 输 PCIe协议包时， 只需要根据 ID路由和地址路由进行数据包转发， 无需进行现有技术的查找路由列表的过程，可大大减少命令和数据的 传输时延。 另外， 由于主磁盘阵列中的处理单元和控制单元均支持 PCIe接口， 因此， 如果利用 PCIe交换设备来进行磁盘阵列中命令或 数据的传输， 则可大大提高访问速度。
针对上述特点， 本发明提出了一种扩展磁盘容量的系统。 图 5A 是在本发明中扩展磁盘容量的系统的基本结构示意图。 参见图 5A, 本发明所提出的扩展磁盘容量的系统主要包括： 至少一个服务器、 以 太网、 至少一个主磁盘阵列及其级连的从磁盘阵列， 任意一个服务器 通过以太网与主磁盘阵列相连。 图 5B是在本发明中扩展磁盘容量的 系统的优化结构示意图。 参见图 5B, 为了便于对接收到的数据或命 令进行业务处理，在本发明所提出的扩展磁盘容量的系统中还可以进 一步包括： 至少一个存储控制器， 任意一个服务器首先通过以太网与 一个存储控制器相连， 该存储控制器通过以太网与主磁盘阵列相连。
图 6是在本发明中主磁盘阵列与 兹盘阵列相连的示意图。参见 图 5A、 图 5B和图 6, 在本发明系统中， 主磁盘阵列与Λί兹盘阵列以 及从磁盘阵列之间均通过 PCIe交换单元进行相连， 并且，
主磁盘阵列中包括： 接口单元、 处理单元、 PCIe 交换单元、 控 制单元和至少一个磁盘。 其中， 接口单元与处理单元直接相连， 提供 标准的以太网接口， PCIe 交换单元分别与处理单元和控制单元直接 相连， 控制单元与各个磁盘直接相连；
从磁盘阵列中包括： PCIe交换单元、 控制单元和至少一个磁盘。 其中， PCIe 交换单元与控制单元直接相连， 控制单元与各个磁盘直 接相连。
参见图 5A、 图 5B和图 6, 在本发明系统中， 主磁盘阵列中的处理单元， 用于在获取命令或数据后， 将该命令 或数据发送至主磁盘阵列中的 PCIe交换单元；
任意一个磁盘阵列中的 PCIe交换单元， 用于在接收到命令或数 据时，将该命令或数据发送至自身中与控制单元直接相连的第一端口 和与后级 PCIe交换单元直接相连的第二端口， 通过第一端口和第二 端口的转发处理将所接收到的命令或数据发送至对应磁盘阵列中的 控制单元；
任意一个磁盘阵列中的控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目的磁盘的地址信息，将所接收到的命令或数据 发送至与其直接相连的目的磁盘；
主磁盘阵列或从磁盘阵列中的任意一个磁盘，用于在接收到命令 或数据时， 根据接收到的命令或数据执行对应的操作， 如读写或扫描 等。
相应的， 本发明还提出了一种对目的磁盘进行访问的方法， 其核 心思想是： 在主磁盘阵列中的处理单元与控制单元之间设置 PCIe交 换单元， 并在从磁盘阵列中设置 PCIe交换单元和控制单元， 将不同 的磁盘阵列通过其内部的 PCIe交换单元相连； 主磁盘阵列中的处理 单元获取命令或数据后，将所获取的命令或数据发送至主磁盘阵列中 的 PCIe交换单元；主磁盘阵列中的 PCIe交换单元根据所接收到命令 或数据中目的磁盘的地址信息，将接收到的命令或数据发送至对应磁 盘阵列中的控制单元；该对应磁盘阵列中的控制单元将接收到的命令 或数据发送至与其直接相连的目的磁盘。
为使本发明的目的、技术方案和优点更加清楚， 下面结合附图及 具体实施例对本发明作进一步地详细描述。
为了实现本发明，需要重新设置主磁盘阵列以及从磁盘阵列的内 部结构， 包括以下 4个方面：
1、 在主磁盘阵列中设置 PCIe交换单元， 将该 PCIe交换单元分 别与主磁盘阵列中的处理单元和控制单元相连，并将主磁盘阵列中的 控制单元与主磁盘阵列中的各个磁盘相连。 这里， 还可以去除主磁盘阵列中原有的扩展器。
2、在任意一个从磁盘阵列中设置 PCIe交换单元和控制单元， 将 该从磁盘阵列中的 PCIe交换单元与控制单元相连， 并将该从磁盘阵 列中的控制单元与该从磁盘阵列中的各个磁盘相连。
这里， 还可以去除所述从磁盘阵列中原有的扩展器。
另外， 由于现有的处理单元和控制单元均支持 PCIe接口， 因此， 在上述过程中，可以通过 PCIe接口将 PCIe交换单元与所述的处理单 元或控制单元相连。
3、 将各个磁盘阵列相连。
这里， 参见图 6, 不同磁盘阵列之间通过其内部的 PCIe交换单 元进行相连。 并且， 不同磁盘阵列中的不同 PCIe交换单元具体通过 PCIe接口相连。
为了便于描述， 在本发明中， 将在任意一个磁盘阵列中， PCIe 交换单元用于与控制单元直接相连的端口统称为第一端口， 将 PCIe 交换单元用于与后级 PCIe交换单元相连的端口统称为第二端口。
4、 在每一个磁盘阵列中， 包括主磁盘阵列和任意一个从磁盘阵 列， 将磁盘阵列中所有磁盘的地址映射为一个地址空间， 在该磁盘阵 列中 PCIe交换单元的第一端口上保存该地址空间的信息； 并且， 将 后续所有从磁盘阵列中磁盘的地址映射为另一个地址空间 ,在该磁盘 阵列中 PCIe交换单元的第二端口上保存该另一个地址空间的信息。
根据以上描述， 可以理解还可能存在一种磁盘阵列， 其包括： 耦 合于处理模块的可扩展式交换单元以及与该交换单元耦合的控制单 元。 不同磁盘阵列之间通过其内部的可扩展式交换单元进行相连。 其 中所述可扩展式交换单元为 PCIe 交换单元（ PCIeSwitch )。处理模块 和控制单元的功能与前述相同， 不再赘述。
图 7是在本发明实施例中对目的磁盘进行访问的流程图。参见图 5A、 图 5B、 图 6和图 7, 利用本发明系统， 在设置完主磁盘阵列以 及从磁盘阵列内部的结构时，本发明方法实现对一个目的磁盘进行访 问的过程具体包括以下步骤： 步骤 701: 当服务器需要访问特定的目的磁盘时， 服务器将所需 下发的命令或数据携带在 iSCSI协议包中， 对该 iSCSI协议包进行封 装， 并将封装后的 iSCSI协议包发送至主磁盘阵列。
这里， 所述的命令或数据中携带有所述目的磁盘的地址。
参见图 5A， 当本发明系统如图 5A所示时， 在本步骤中， 服务 器将封装后的 iSCSI协议包发送至主磁盘阵列的具体实现过程包括： 服务器通过以太网将封装后的 iSCSI协议包发送至存储控制器；存储 控制器对接收到的 iSCSI协议包进行解封装处理， 获取命令或数据， 并对所获取的命令或数据进行相关的业务处理，比如镜像或快照等业 务处理； 存储控制器将所获取的命令或数据携带在 iSCSI协议包中， 并对该 iSCSI协议包进行封装后， 通过以太网发送至主磁盘阵列。
参见图 5B, 当本发明系统如图 5B所示时， 在本步驟中， 服务器 直接通过以太网将封装后的 iSCSI协议包发送至主磁盘阵列。
步骤 702: 主磁盘阵列内部的接口单元接收到 iSCSI协议包， 将 该 iSCSI协议包发送至处理单元。
步骤 703: 主磁盘阵列内部的处理单元对接收到的 iSCSI协议包 进行解封装和协议解析等处理， 获取该命令或数据， 通过 PCIe接口 将所获取的该命令或数据发送至主磁盘阵列中的 PCIe交换单元。
步骤 704: 主磁盘阵列中的 PCIe交换单元将接收到的命令或数 据分别发送至自身的第一端口和第.二端口。
步骤 705: 主磁盘阵列中 PCIe交换单元的第一端口和第二端口 分别根据自身保存的地址空间的信息，将接收到的命令或数据最终发 送至对应的控制单元。
本步驟的具体实现过程为： 主磁盘阵列中 PCIe交换单元的第一 端口判断所接收到命令或数据中携带的目的磁盘的地址是否在自身 所保存的地址空间的范围内， 如果是， 则将接收到的命令或数据发送 至主磁盘阵列中的控制单元， 本步骤结束， 否则， 不执行转发处理； 并且， 主磁盘阵列中 PCIe交换单元的第二端口判断所接收到命令或 数据中携带的目的磁盘的地址是否在自身所保存的地址空间的范围 内，
如果不是， 主磁盘阵列中 PCIe交换单元的第二端口则不执行转 发处理，
如果是， 主磁盘阵列中 PCIe交换单元的第二端口则将接收到的 命令或数据发送至后级与其直接相连的从磁盘阵列 1中的 PCIe交换 单元； ΛΛί兹盘阵列 1中的 PCIe交换单元将接收到的命令或数据同时 发送至自身的第一端口和第二端口； 才艮据本步骤上述过程的原理， 通 过从 盘阵列 1中 PCIe交换单元的第一端口或第二端口的转发， 将 接收到的命令或数据最终发送至一个对应磁盘阵列中的控制单元。
步骤 706: 接收到命令或数据的控制单元， 根据该命令或数据中 目的磁盘的地址信息，将该命令或数据发送至与其直接相连的目的磁 盘。
步骤 707: 目的磁盘根据接收到的命令或数据， 执行相应的数据 处理， 比如读写数据或进行数据扫描等。
在本发明中， 所述的控制单元可以是输入输出处理器（IOP ), 也 可以是串行小型计算机接口控制器（ SAS/SATA Controller )。 当所述 的控制单元为 IOP时， 本发明还可以在该 IOP上配置一些处理策略， 比如 RAID策略或备份处理策略等。 这样， 当 IOP接收到 PCIe交换 单元发来的命令或数据时，该 IOP还可以进一步根据预先配置的处理 策略， 针对当前的命令或数据执行相关处理， 比如， 针对当前的命令 或数据进行镜像处理或备份处理等。然后，该 IOP再将接收到的命令 或数据发送至对应的磁盘。
在本发明中，所述的 PCIe交换单元可以是一个对外出 PCIe接口 的、 由 PCIe交换网组成的 PCIe交换芯片。 另外， 由于高级交换互连 ( ASI )架构支持 PCIe协议， 即 ASI设备中包括 PCIe接口和 ASI交 换网， ASI交换网能够利用其协议接口直接承载 PCIe协议， 直接向 外输出命令或数据， 因此， 在本发明中， 所述的 PCIe交换单元还可 以是符合 ASI架构的 ASI设备。
总之， 以上所述仅为本发明的较佳实施例而已， 并非用于限定本 发明的保护范围。 凡在本发明的精神和原则之内， 所作的任何修改、 等同替换、 改进等， 均应包含在本发明的保护范围之内。

Claims

权 利 要 求
1、 一种对目的磁盘进行访问的方法， 其特征在于， 在主磁盘阵 列中的处理单元与控制单元之间设置 PCIe交换单元， 并在从磁盘阵 列中设置 PCIe交换单元和控制单元， 将不同的磁盘阵列通过其内部 的 PCIe交换单元相连， 该方法还包括：
A、 主磁盘阵列中的处理单元获取命令或数据后， 将所获取的命 令或数据发送至主磁盘阵列中的 PCIe交换单元；
B、主磁盘阵列中的 PCIe交换单元根据所接收到命令或数据中目 的磁盘的地址信息，将该命令或数据发送至对应磁盘阵列中的控制单 元；
C、 该对应磁盘阵列中的控制单元将接收到的命令或数据发送至 与其直接相连的目的磁盘。
2、 根据权利要求 1所述的方法， 其特征在于， 该方法进一步包 括： 在任意一个磁盘阵列中， 将该磁盘阵列中所有磁盘的地址映射为 一个地址空间， 在该磁盘阵列中 PCIe交换单元与控制单元相连的第 一端口上保存该地址空间的信息；并将后续级连的所有磁盘阵列中磁 盘的地址映射为另一个地址空间， 在该磁盘阵列中 PCIe交换单元与 后级 PCIe 交换单元相连的第二端口上保存该另一个地址空间的信 息；
所述步骤 B包括：
B1、 主磁盘阵列中的 PCIe交换单元将接收到的命令或数据发送 至自身的第一端口和第二端口；
B2、 主磁盘阵列中 PCIe交换单元的第一端口和第二端口分别判 断所接收到的命令或数据中目的磁盘的地址是否在自身所保存的地 址空间范围内， 如果是， 则通过自身发送所接收到的命令或数据， 直 至对应磁盘阵列中的控制单元， 否则， 不对接收到的命令或数据进行 转发。
3、 一种扩展磁盘容量的系统， 包括至少一个服务器、 以太网、 至少一个主磁盘阵列及其级连的从磁盘阵列，服务器用于将命令或数 据携带在 iSCSI协议包中并对该 iSCSI协议包进行封装后通过以太网 发送至主磁盘阵列中的接口单元， 其特征在于，
主磁蠱阵列中还包括处理单元、 PCIe 交换单元、 控制单元和至 少一个磁盘， 且在主磁盘阵列中， PCIe 交换单元分别与处理单元和 控制单元直接相连， 控制单元与任意一个磁盘直接相连； 从磁盘阵列 中包括 PCIe交换单元、 控制单元和至少一个磁盘， 且在从磁盘阵列 中， 控制单元分别与 PCIe交换单元和任意一个磁盘直接相连； 各个 磁盘阵列分别通过内部的 PCIe交换单元直接相连， 并且，
主磁盘阵列中的处理单元，用于根据主磁盘阵列中接口单元发来 的 iSCSI协议包获取命令或数据， 将该命令或数据发送至主磁盘阵列 中的 PCIe交换单元；
任意一个磁盘阵列中的 PCIe交换单元， 用于在接收到命令或数 据时，将该命令或数据发送至自身中与控制单元直接相连的第一端口 和与后级 PCIe交换单元直接相连的第二端口 , 通过第一端口和第二 端口的处理将所接收到的命令或数据发送至对应磁盘阵列中的控制 单元；
任意一个磁盘阵列中的控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目的磁盘的地址信息，将所接收到的命令或数据 发送至与其直接相连的目的磁盘。
4、 才艮据权利要求 3所述的系统， 其特征在于， 所述任意一个磁 盘阵列中 PCIe交换单元的第一端口， 用于保存该第一端口所在磁盘 阵列中所有磁盘的地址映射的地址空间信息，并在接收到命令或数据 时，判断该命令或数据中目的磁盘的地址是否在自身所保存的地址空 间的范围内，在确定目的磁盘的地址在自身所保存的地址空间的范围 内之后， 将接收到的命令或数据发送至直接相连的、 自身所在磁盘阵 列中的控制单元；
所述任意一个磁盘阵列中 PCIe交换单元的第二端口， 用于保存 后級各磁盘阵列中所有磁盘的地址映射的地址空间信息，在接收到命 令或数据时，判断该命令或数据中目的磁盘的地址是否在自身所保存 的地址空间的范围内，在确定目的磁盘的地址在自身所保存的地址空 间的范围内之后， 将接收到的命令或数据发送至直接相连的、后级磁 盘阵列中的 PCIe交换单元。
5、 根据权利要求 3或 4所述的系统， 其特征在于， 所述 PCIe交 换单元为具有 PCIe接口和交换网的 PCIe交换芯片或符合高级交换互 连 ASI架构的 ASI设备。
6、 根据权利要求 3或 4所述的系统， 其特征在于， 所述控制单 元为输入输出处理器 IOP 或串行小型计算机接口控制器 SAS/SATA Controller,
7、 根据权利要求 3所述的系统， 其特征在于， 所述系统还可以 进一步包括： 至少一个存储控制器，任意一个服务器首先通过以太网 与一个存储控制器相连， 该存储控制器通过以太网与主磁盘阵列相 连。
8、 一种主磁盘阵列， 其特征在于， 该主磁盘阵列中包括： 接口 单元、 处理单元、 PCIe交换单元、 控制单元和至少一个磁盘， 其中， PCIe 交换单元分别与处理单元和控制单元直接相连， 控制单元与任 意一个磁盘直接相连， 并且，
处理单元， 用于在获取命令或数据后， 将该命令或数据发送至 PCIe交换单元；
PCIe 交换单元， 用于将所接收到的命令或数据发送至自身中与 控制单元直接相连的第一端口和与后级 PCIe交换单元直接相连的第 二端口， 通过第一端口和第二端口的处理发送所接收到的命令或数 据；
控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目 的磁盘的地址信息，将所接收到的命令或数据发送至与其直接相连的 目的磁盘。
9、 根据权利要求 8所述的主磁盘阵列， 其特征在于， 所迷 PCIe 交换单元的第一端口，用于保存主磁盘阵列中所有磁盘的地址映射的 地址空间信息， 并在接收到命令或数据时， 判断该命令或数据中目的 磁盘的地址是否在自身所保存的地址空间的范围内，在确定目的磁盘 的地址在自身所保存的地址空间的范围内之后，将接收到的命令或数 据发送至主磁盘阵列中的控制单元。
10、根据权利要求 8所述的主磁盘阵列， 其特征在于， 所述 PCIe 交换单元的第二端口，用于保存后级各从磁盘阵列中所有磁盘的地址 映射的地址空间信息， 在接收到命令或数据时， 判断该命令或数据中 目的磁盘的地址是否在自身所保存的地址空间的范围内 ,在确定目的 磁盘的地址在自身所保存的地址空间的范围内之后，将接收到的命令 或数据发送至直接相连的、 外部从磁盘阵列中的 PCIe交换单元。
11、 根据权利要求 8、 9或 10所述的主磁盘阵列， 其特征在于， 所述 PCIe交换单元为具有 PCIe接口和交换网的 PCIe交换芯片或符 合 ASI架构的 ASI设备。
12、 根据权利要求 8、 9或 10所述的主磁盘阵列， 其特征在于， 所述控制单元为输入输出处理器 IOP或串行小型计算机接口控制器 SAS/SATA Controlle
13、 一种从磁盘阵列， 其特征在于， 该从磁盘阵列中包括： PCIe 交换单元、 控制单元和至少一个磁盘， 其中， PCIe 交换单元与控制 单元直接相连， 控制单元与任意一个磁盘直接相连， 并且，
PCIe 交换单元， 用于将所接收到的命令或数据发送至自身中与 控制单元直接相连的第一端口和与后级 PCIe交换单元直接相连的第 二端口， 通过第一端口和第二端口的处理发送所接收到的命令或数 据；
控制单元， 用于在接收到命令或数据时， 根据该命令或数据中目 的磁盘的地址信息，将所接收到的命令或数据发送至与其直接相连的 目的磁盘。
14、根据权利要求 13所述的从磁盘阵列，其特征在于，所述 PCIe 交换单元的第一端口 ,用于保存该从磁盘阵列中所有磁盘的地址映射 的地址空间信息， 并在接收到命令或数据时， 判断该命令或数据中目 的磁盘的地址是否在自身所保存的地址空间的范围内，在确定目的磁 盘的地址在自身所保存的地址空间的范围内之后，将接收到的命令或 数据发送至该从磁盘阵列中的控制单元。
15、根据权利要求 13所述的从磁盘阵列，其特征在于，所述 PCIe 交换单元的第二端口，用于保存后级其它从磁盘阵列中所有磁盘的地 址映射的地址空间信息， 在接收到命令或数据时， 判断该命令或数据 中目的磁盘的地址是否在自身所保存的地址空间的范围内，在确定目 的磁盘的地址在自身所保存的地址空间的范围内之后，将接收到的命 令或数据发送至直接相连的、 外部从磁盘阵列中的 PCIe交换单元。
16、根据权利要求 13、 14或 15所述的从磁盘阵列，其特征在于， 所述 PCIe交换单元为具有 PCIe接口和交换网的 PCIe交换芯片或符 合 ASI架构的 ASI设备。
17、根据权利要求 13、 14或 15所述的从磁盘阵列，其特征在于， 所述控制单元为输入输出处理器 IOP或串行小型计算机接口控制器 SAS/SATA Controller
18、 一种磁盘阵列， 包括： 耦合于处理模块的可扩展式交换单元 以及与该交换单元耦合的控制单元。
19、 根据权利要求 18所述的磁盘阵列， 其中所述可扩展式交换 单元为 PCIe Switch。
PCT/CN2006/002258 2006-04-19 2006-09-01 Procédé d'accès à un disque, et système et matrice de disques permettant d'étendre la capacité du disque WO2007118371A1 (fr)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2008511538A JP2008546049A (ja) 2006-04-19 2006-09-01 宛先ディスクへのアクセス方法とディスク容量拡張システム及びディスクアレイ
EP06775575A EP2009552A4 (en) 2006-04-19 2006-09-01 DISK ACCESS METHOD, AND DISC SYSTEM AND MATRIX FOR EXTENDING DISC CAPACITY
US12/097,253 US8041890B2 (en) 2006-04-19 2006-09-01 Method for accessing target disk, system for expanding disk capacity and disk array

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN200610066672.8 2006-04-19
CN200610066672A CN100581172C (zh) 2006-04-19 2006-04-19 一种对目的磁盘进行访问的方法和扩展磁盘容量的系统

Publications (1)

Publication Number Publication Date
WO2007118371A1 true WO2007118371A1 (fr) 2007-10-25

Family

ID=36994486

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2006/002258 WO2007118371A1 (fr) 2006-04-19 2006-09-01 Procédé d'accès à un disque, et système et matrice de disques permettant d'étendre la capacité du disque

Country Status (7)

Country Link
US (1) US8041890B2 (zh)
EP (1) EP2009552A4 (zh)
JP (1) JP2008546049A (zh)
KR (1) KR101011336B1 (zh)
CN (1) CN100581172C (zh)
RU (1) RU2399951C2 (zh)
WO (1) WO2007118371A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011523109A (ja) * 2008-11-25 2011-08-04 株式会社日立製作所 ライト完了を検知する機能を有するストレージシステム
EP2225651B1 (en) * 2007-11-26 2015-05-27 Emulex Design & Manufacturing Corporation Alignment-unit-based virtual formatting methods and devices employing the methods

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7827439B2 (en) * 2007-09-28 2010-11-02 Symantec Corporation System and method of redundantly storing and retrieving data with cooperating storage devices
CN101763221B (zh) * 2008-12-24 2013-01-30 成都市华为赛门铁克科技有限公司 一种存储方法、存储系统及控制器
JP2012133405A (ja) * 2009-07-24 2012-07-12 Hitachi Ltd ストレージ装置及びそのデータ転送制御方法
CN101710298B (zh) * 2009-12-17 2012-05-30 成都市华为赛门铁克科技有限公司 存储系统及系统中磁盘链路的数据处理方法和控制器
WO2012010930A2 (en) * 2010-07-21 2012-01-26 Freescale Semiconductor, Inc. Integrated circuit device, data storage array system and method therefor
WO2012036905A1 (en) * 2010-09-16 2012-03-22 Apple Inc. Multi-ported memory controller with ports associated with traffic classes
US8589626B2 (en) 2010-09-19 2013-11-19 Taejin Info Tech Co., Ltd. Hybrid RAID controller having multi PCI bus switching
CN102207829A (zh) * 2011-03-25 2011-10-05 浪潮(北京)电子信息产业有限公司 一种实现高端磁盘阵列的磁盘定位方法及装置
CN102591594B (zh) * 2012-02-10 2015-05-20 杭州华三通信技术有限公司 一种数据的处理方法和设备
CN103634277B (zh) * 2012-08-23 2019-02-05 深圳市腾讯计算机系统有限公司 一种共享内存的方法、服务器及系统
CN102968280B (zh) * 2012-11-21 2015-12-02 华为技术有限公司 一种存储系统及存储设备、控制设备
CN103870768A (zh) * 2012-12-13 2014-06-18 北京计算机技术及应用研究所 磁盘阵列与计算机或存储介质之间的认证方法及系统
CN103036817A (zh) * 2012-12-14 2013-04-10 华为技术有限公司 一种服务器单板、服务器单板实现方法及主处理器
CN104216850B (zh) * 2013-05-31 2018-06-19 鸿富锦精密电子(天津)有限公司 接口传输设备
CN103543961B (zh) * 2013-10-12 2017-04-19 浙江宇视科技有限公司 一种基于PCIe的存储扩展系统及存储扩展方法
TWI598739B (zh) * 2013-10-18 2017-09-11 美超微電腦股份有限公司 硬碟擴展裝置
CN104571376A (zh) * 2013-10-25 2015-04-29 鸿富锦精密电子(天津)有限公司 硬盘扩展系统
CN103955344B (zh) * 2014-05-13 2018-07-03 华为技术有限公司 一种数据处理方法和硬盘
CN104038550B (zh) * 2014-06-18 2018-01-23 华为技术有限公司 数据通信方法及其装置、存储系统
CN105450687B (zh) * 2014-08-19 2019-06-07 华为技术有限公司 一种标签转换方法、装置及sas存储器
CN104503867B (zh) * 2014-12-24 2017-07-11 北京同有飞骥科技股份有限公司 一种扩展柜掉线并重连后的灾难自动恢复方法
EP3291096B1 (en) 2016-05-27 2020-01-15 Huawei Technologies Co., Ltd. Storage system and device scanning method
EP3588316B1 (en) * 2017-04-07 2021-06-09 Panasonic Intellectual Property Management Co., Ltd. Information processing device
CN107357753B (zh) * 2017-07-12 2020-03-10 郑州云海信息技术有限公司 一种实现PCIE port和硬盘地址自动匹配的方法及系统
US20190034306A1 (en) * 2017-07-31 2019-01-31 Intel Corporation Computer System, Computer System Host, First Storage Device, Second Storage Device, Controllers, Methods, Apparatuses and Computer Programs
JP2024510355A (ja) 2022-02-24 2024-03-07 チャンシン メモリー テクノロジーズ インコーポレイテッド データ伝送回路、データ伝送方法及びメモリ
CN116705105A (zh) * 2022-02-24 2023-09-05 长鑫存储技术有限公司 存储电路、数据传输电路和存储器
US11928341B2 (en) 2022-02-24 2024-03-12 Changxin Memory Technologies, Inc. Sleep control method and sleep control circuit

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1447254A (zh) * 2003-04-04 2003-10-08 清华大学 海量网络存储器设备及其实现方法
US20050120176A1 (en) * 2003-11-28 2005-06-02 Hitachi, Ltd. Disk array device and method for controlling disk array device
EP1544721A2 (en) 2003-12-20 2005-06-22 Hewlett-Packard Development Company, L.P. A method of using a storage switch
US20050198436A1 (en) * 2004-03-05 2005-09-08 Junichi Iida Storage control system and method
WO2005091154A1 (en) 2004-03-19 2005-09-29 Koninklijke Philips Electronics N.V. Simulation circuit of pci express endpoint and downstream port for a pci express switch

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0863423A (ja) * 1994-08-24 1996-03-08 Nippon Steel Corp データ転送システム
RU2182722C2 (ru) 1995-11-10 2002-05-20 Сони Корпорейшн Устройство и способ обработки информации
JPH10164544A (ja) * 1996-11-25 1998-06-19 Xing:Kk データ集中管理型音・動画再生システム
JP3279248B2 (ja) * 1998-02-27 2002-04-30 日本電気株式会社 スイッチ機構およびこれを有するディスクアレイ装置およびコンピュータシステム
JP2000187559A (ja) * 1998-12-24 2000-07-04 Hitachi Ltd ディスクシステム
US6877044B2 (en) * 2000-02-10 2005-04-05 Vicom Systems, Inc. Distributed storage management platform architecture
JP3972596B2 (ja) 2001-04-20 2007-09-05 株式会社日立製作所 ディスクアレイシステム
KR100483412B1 (ko) * 2001-11-09 2005-04-15 가부시키가이샤 히타치세이사쿠쇼 기억 장치 시스템
JP4189171B2 (ja) * 2002-05-24 2008-12-03 株式会社日立製作所 ディスク制御装置
US6928514B2 (en) * 2002-08-05 2005-08-09 Lsi Logic Corporation Method and apparatus for teaming storage controllers
JP2005136481A (ja) * 2003-10-28 2005-05-26 Fujitsu Ltd 伝送システム
JP4454346B2 (ja) * 2004-03-11 2010-04-21 株式会社日立製作所 ディスクアレイ装置の保守用端末
JP4455137B2 (ja) * 2004-04-20 2010-04-21 株式会社日立製作所 記憶サブシステム管理方法
US20050281262A1 (en) 2004-06-17 2005-12-22 Zur Uri E Method and system for supporting read operations for iSCSI and iSCSI chimney
CN1722074A (zh) 2004-07-16 2006-01-18 佛山市顺德区顺达电脑厂有限公司 容错式磁盘阵列控制器
JP4555029B2 (ja) * 2004-09-01 2010-09-29 株式会社日立製作所 ディスクアレイ装置
US8189603B2 (en) * 2005-10-04 2012-05-29 Mammen Thomas PCI express to PCI express based low latency interconnect scheme for clustering systems
US7558981B2 (en) * 2005-10-18 2009-07-07 Dot Hill Systems Corp. Method and apparatus for mirroring customer data and metadata in paired controllers
CN1753406B (zh) 2005-10-26 2010-06-30 华中科技大学 一种基于iSCSI协议的IP存储控制方法及其装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1447254A (zh) * 2003-04-04 2003-10-08 清华大学 海量网络存储器设备及其实现方法
US20050120176A1 (en) * 2003-11-28 2005-06-02 Hitachi, Ltd. Disk array device and method for controlling disk array device
EP1544721A2 (en) 2003-12-20 2005-06-22 Hewlett-Packard Development Company, L.P. A method of using a storage switch
US20050198436A1 (en) * 2004-03-05 2005-09-08 Junichi Iida Storage control system and method
WO2005091154A1 (en) 2004-03-19 2005-09-29 Koninklijke Philips Electronics N.V. Simulation circuit of pci express endpoint and downstream port for a pci express switch

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2009552A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2225651B1 (en) * 2007-11-26 2015-05-27 Emulex Design & Manufacturing Corporation Alignment-unit-based virtual formatting methods and devices employing the methods
JP2011523109A (ja) * 2008-11-25 2011-08-04 株式会社日立製作所 ライト完了を検知する機能を有するストレージシステム

Also Published As

Publication number Publication date
JP2008546049A (ja) 2008-12-18
CN1832489A (zh) 2006-09-13
US8041890B2 (en) 2011-10-18
KR101011336B1 (ko) 2011-01-28
RU2399951C2 (ru) 2010-09-20
US20080307161A1 (en) 2008-12-11
CN100581172C (zh) 2010-01-13
RU2008130859A (ru) 2010-01-27
KR20080089589A (ko) 2008-10-07
EP2009552A1 (en) 2008-12-31
EP2009552A4 (en) 2010-10-06

Similar Documents

Publication Publication Date Title
WO2007118371A1 (fr) Procédé d'accès à un disque, et système et matrice de disques permettant d'étendre la capacité du disque
JP6317856B2 (ja) クラスタ間冗長構成におけるスムーズな制御部交代
US7131027B2 (en) Method and apparatus for disk array based I/O routing and multi-layered external storage linkage
US7124169B2 (en) Network system and its switches
CN100544342C (zh) 存储系统
TWI222288B (en) End node partitioning using virtualization
US7139826B2 (en) Initial copy for remote copy
US6675253B1 (en) Dynamic routing of data across multiple data paths from a source controller to a destination controller
US7672226B2 (en) Method, apparatus and program storage device for verifying existence of a redundant fibre channel path
US20030131068A1 (en) Distributed storage system, storage device and method of copying data
JP2007207007A (ja) ストレージシステム、ストレージコントローラ及び計算機システム
US8732381B2 (en) SAS expander for communication between drivers
JP2004240949A (ja) クラスタ型ストレージシステム及びその管理方法
US20060047928A1 (en) Storage switch asynchronous replication
JP2000099272A (ja) 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法
US10534541B2 (en) Asynchronous discovery of initiators and targets in a storage fabric
JP2006221526A (ja) ストレージ制御装置
KR20080096547A (ko) 가상 네트워크 저장 시스템, 네트워크 저장 장치 및 가상 방법
JP4189171B2 (ja) ディスク制御装置
WO2017162175A1 (zh) 一种数据传输方法及装置
US7805520B2 (en) Storage system, program and method
JP2004318741A (ja) ネットワーク管理プログラム、管理計算機及び管理方法
EP1438805A1 (en) Virtualisation in a storage system
JP2001043026A (ja) 系間情報通信システム
JP2001125868A (ja) ファイル共用装置、及びその方法、ファイル処理装置、及びその方法、ファイル共用プログラムを記録した記録媒体並びにファイル処理プログラムを記録した記録媒体

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2008511538

Country of ref document: JP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 06775575

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 12097253

Country of ref document: US

REEP Request for entry into the european phase

Ref document number: 2006775575

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2006775575

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 1020087016622

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 2008130859

Country of ref document: RU

NENP Non-entry into the national phase

Ref country code: DE