WO2013078879A1 - 数据迁移触发方法和装置 - Google Patents

数据迁移触发方法和装置 Download PDF

Info

Publication number
WO2013078879A1
WO2013078879A1 PCT/CN2012/079577 CN2012079577W WO2013078879A1 WO 2013078879 A1 WO2013078879 A1 WO 2013078879A1 CN 2012079577 W CN2012079577 W CN 2012079577W WO 2013078879 A1 WO2013078879 A1 WO 2013078879A1
Authority
WO
WIPO (PCT)
Prior art keywords
migration
specified
disk
data
array controller
Prior art date
Application number
PCT/CN2012/079577
Other languages
English (en)
French (fr)
Other versions
WO2013078879A9 (zh
Inventor
张冬
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Priority to EP12853181.1A priority Critical patent/EP2717167A4/en
Priority to US13/719,646 priority patent/US20130179635A1/en
Publication of WO2013078879A1 publication Critical patent/WO2013078879A1/zh
Publication of WO2013078879A9 publication Critical patent/WO2013078879A9/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays

Definitions

  • a tiered storage system usually consists of a conventional disk and a solid state drive (Solid State Disk or Solid State Drive, SSD).
  • SSD also known as an electronic hard disk or a solid state electronic disk, is a hard disk composed of a control unit and a solid state storage unit.
  • the solid state hard disk is compared with the conventional disk, it has the following advantages: fast start-up, no motor acceleration rotation process; no magnetic head, fast random read, minimum read delay; relatively short read time.
  • the SSD's addressing time is independent of the data storage location, and disk fragmentation does not affect the read time.
  • hotspot data is typically cached in the SSD to increase the speed of access to hotspot data.
  • SAN storage area network
  • data migration in a storage area network (SAN) storage system is performed by the SAN storage system to identify hotspots in the disk, and then the data in the hotspots is from the disk to the faster access SSD.
  • the data in the hotspot area can be directly accessed from the SSD, thereby speeding up the data access speed.
  • the application may wish to perform a targeted migration of the data blocks accessed by the specified file, directory, or application, thereby achieving an instant 10 (input and output) speed of accessing the data.
  • data migration in a SAN storage system is completely dependent on the storage system's statistics on hotspot areas.
  • a data migration triggering method provided by the present invention includes:
  • the host receives the data migration policy set by the user;
  • the data migration policy includes a migration object set by the user, a migration condition, and a target disk after the migration;
  • the migration object includes a specified file or a specified directory or a specified application access in the SAN storage system.
  • the host parses a block address of the migration object in the data migration policy
  • a data migration triggering device provided by the present invention includes:
  • a policy receiving module configured to receive a data migration policy set by a user; the data migration policy includes a migration object set by a user, a migration condition, and a target disk after the migration; the migration object includes a specified file or a specified in the storage system of the AN a directory or a data that is specified by the application; a proxy module, configured to parse a block address of the migrated object in the data migration policy; and a migration indication module, configured to send a migration indication to the disk array controller in the SAN storage system, indicating the location The disk array controller migrates the migration object from the source disk to the target disk according to the migration condition and the block address of the migration object.
  • the data migration triggering method and device after receiving the data migration policy set by the user, the host first parses the block address of the migration object in the data migration policy through the installed agent, and then sends the disk in the SAM storage system.
  • the array controller sends a migration indication including the block address of the migration object, instructing the disk array controller to migrate the migration object from the source disk to the target disk according to the migration condition and the migration direction in the data migration policy. Because the host instructs the disk array controller to perform data migration according to the data migration policy set by the user, and the block address of the migrated object is sensed by the installed agent, the SAM storage system can achieve the purpose of migrating the specified data according to the user's requirements.
  • FIG. 1 is a flowchart of a data migration triggering method according to an embodiment of the present invention
  • FIG. 2A is a flowchart of another data migration triggering method according to an embodiment of the present invention
  • FIG. 2B is an application scenario diagram of FIG.
  • FIG. 2C is a flowchart of still another data migration triggering method according to an embodiment of the present invention
  • FIG. 3A is a flowchart of another data migration triggering method according to an embodiment of the present invention
  • FIG. 3B is an application scenario diagram of FIG. 3A;
  • FIG. 4 is a flowchart of still another data migration triggering method according to an embodiment of the present invention
  • FIG. 5B is a flowchart of another data migration triggering method according to an embodiment of the present invention
  • FIG. 6 is a schematic structural diagram of a data migration triggering apparatus according to an embodiment of the present invention.
  • the technical solutions in the embodiments of the present invention are clearly and completely described in the following with reference to the accompanying drawings in the embodiments of the present invention.
  • the embodiments are a part of the embodiments of the invention, and not all of the embodiments. All other embodiments obtained by a person of ordinary skill in the art based on the embodiments of the present invention without departing from the inventive scope are the scope of the present invention.
  • FIG. 1 is a flowchart of a data migration triggering method according to an embodiment of the present invention.
  • the execution subject of the embodiment of the present invention is a host that interacts with the storage system 10.
  • the method includes the following steps: Step 11: The host receives the data migration policy set by the user; the data migration policy includes the migration object set by the user, the migration condition, and the target disk after the migration; the migration object includes the specified file in the SAN storage system or Specify the directory or data to be accessed by the specified application.
  • the SAN storage system of the embodiment of the present invention includes at least 10 types of disks having different speeds.
  • a SAN storage system includes a first disk and a second disk, the first disk having a 10 speed that is less than the 10th speed of the second disk.
  • the target disk after the migration of the migration object is the second disk.
  • the migration object is migrated accordingly.
  • the target disk is the first disk.
  • data can be migrated between the first disk and the second disk under the control of the disk array controller in the tiered storage system.
  • the host provides the user with a setting data migration policy.
  • Slight human interface Users can set data migration policies according to specific needs, including setting the data to be migrated, setting the migration object, setting the conditions under which to migrate the data, setting the migration conditions, and setting the target disk after data migration.
  • the following data migration policy can be set through the human machine interface:
  • the migration object is the specified file or the specified directory in the SAN storage system.
  • the migration condition is immediate migration, and the migrated target disk is the first. Two hard drives.
  • the user wants to immediately increase the speed of accessing the specified application.
  • the following data migration policy can be set through the human machine interface:
  • the migration object is the specified application in the SAN storage system, the migration condition is immediate migration, and the migrated target disk is the first Two hard drives.
  • the migration object is the specified file in the SAN storage system, the migration condition is immediate migration, and the migrated target disk is the first hard disk.
  • the migration object is the data in the SAN storage system whose access frequency reaches the specified frequency.
  • the migration condition is immediate migration, and the target disk after migration is the first. Two hard drives.
  • Step 12 The host resolves the block address of the migrated object in the data migration policy.
  • the host After receiving the data migration policy set by the user, the host obtains the block address of the migration object in the data migration policy.
  • the agent installed in the host can obtain the block address of the migrated object through the interface of the host file system, the operating system interface, or the specific driver layer on the path of the system 10, and the block address of the migrated object can be the physical of the migrated object. Address, can also be a migration pair
  • Step 13 The host sends a migration indication to the disk array controller in the SAN storage system, instructing the disk array controller to migrate the migration object from the source disk to the target disk according to the migration condition and the address of the migration object.
  • the host After obtaining the address of the migration object, the host sends a migration indication to the disk controller, where the migration indication includes the address of the migration object, the migration condition, and the migrated target disk, which is used to indicate that the disk array controller arrives according to the migration object when the migration condition arrives.
  • the address migrates the migrated object from the source disk to the target disk. If the physical address is mapped in the SAN storage system and the address of the migration object sent by the host is a logical address, the disk array controller in the SAN storage system converts the logical address of the migration object into a physical address.
  • the host determines the address of the migration object according to the data migration policy set by the user, and sends a migration indication to the disk array controller instead of The block address of the migrated data is determined by the disk array controller.
  • the migration object can be migrated to a target disk with a faster speed of 10, or the migration object can be migrated to a target disk with a slower speed of 10, so that the user can not only improve access to the migrated object.
  • the need for speed also reduces the need to access 10 speeds of migrated objects.
  • the host after receiving the data migration policy set by the user, the host obtains the block address of the migration object in the data migration policy, and then sends the migration target object to the disk array controller in the SAN storage system.
  • a migration indication of the block address instructing the disk array controller to migrate the migration object from the source disk to the target disk according to the migration conditions and migration direction in the data migration policy. Because the host instructs the disk array controller to perform data migration and resolves the block address of the migrated object according to the data migration policy set by the user, the SAN storage system can achieve the purpose of migrating the specified data according to user requirements.
  • FIG. 2A is a flowchart of another data migration triggering method according to an embodiment of the present invention.
  • FIG. 2B is a schematic diagram of an application scenario according to an embodiment of the present invention. This embodiment mainly describes how the host triggers the disk array controller to perform data migration on the specified file when the user wants to instantaneously accelerate the 10 speed of the specified file.
  • the hierarchical storage system in this embodiment includes a disk and a solid state disk.
  • the disk and the solid state disk store actual files, and the files in the host operating system are image files.
  • this embodiment includes:
  • Step 21a The host receives the data migration policy set by the user, where the migration object is a specified file in the SAN storage system, and the migrated target disk is a solid state disk, and the migration condition is immediate migration.
  • the file can be a directory file or a single file.
  • the purpose of the user to set the above data migration strategy is to accelerate the specified file instantaneously.
  • Step 22a The host parses the block address of the specified file in the SAN storage system through the Agent program.
  • the agent program of the host can detect the block address of the specified file through the interface of the file system, that is, the address of the corresponding data block of the specified file.
  • the address of the specified file can be a logical address or a physical address.
  • Step 23a The host sends a first migration indication to the disk array controller in the SAN storage system. Instructs the disk array controller to immediately migrate the specified file from disk to solid state drive based on the block address of the specified file.
  • the first migration indication delivered by the host includes the address of the specified file, the migration condition, and the target disk after the migration.
  • the migration condition is immediate migration
  • the target disk of the migration is a solid state drive. Because the file system on the host side usually contains file fragments, in order to ensure performance and efficiency, the host does not need to assign the specified file to the address of all the data blocks - the corresponding file is sent to the disk array controller, and only the specified file size is required. The address of the data block is sent to the disk array controller, and the address of the small fragment can be sent to the disk array controller.
  • the agent program in the host obtains the address of the specified file Filel in the SAN storage system, sends a first migration indication to the disk array controller in the SAN storage system, and the disk array controller migrates the specified file Filel from the disk to the indication according to the instruction.
  • SSD The corresponding data block on the disk before file migration is A. After the disk array controller is migrated to the SSD, the corresponding data block in the SSD is B.
  • the migration condition in step 21a may be a migration within a specified time.
  • another data migration triggering method provided by the embodiment of the present invention includes:
  • Step 21b The host receives the data migration policy set by the user, where the migration object is a specified file in the SAN storage system, and the migrated target disk is a solid state disk, and the migration condition is to migrate within a specified time.
  • the purpose of setting the above data migration policy by the user is to perform a force rate on the specified file within a specified time.
  • Step 22 b The host obtains the block address of the specified file in the SAN storage system through the Agent program.
  • Step 23b The host sends a second migration indication to the disk array controller in the SAN storage system, instructing the disk array controller to migrate the specified file from the disk to the solid state disk according to the address of the specified file within a specified time.
  • the second migration indication includes the address of the specified file, the migration condition, and the target disk after the migration.
  • the migrated target disk is a solid state disk, and the migration condition is to migrate within a specified time.
  • the disk array controller migrates the specified file from the source disk to the target disk according to the address of the specified file within the specified time.
  • the reference finger in the data migration policy set by the user The file is immediately migrated to the SSD, which is an instant acceleration of the specified file.
  • the host After receiving the data migration policy set by the user, the host obtains the address of the specified file through the file system interface, and sends a first migration indication to the disk array controller, instructing the disk array controller to immediately migrate the specified file according to the address of the specified file. To the solid state drive, thus satisfying the need for the user to instantly increase the host's access to the specified file at 10 speeds.
  • the migration condition that is migrated within the specified time by the user may be sent to the disk array controller to send a second migration indication, instructing the disk array controller to migrate the specified file from the source disk to the address of the specified file within a specified time.
  • the target disk which satisfies the need for the user to increase the host's access to the specified file at a speed of 10 minutes.
  • FIG. 3A is a flowchart of still another data migration triggering method according to an embodiment of the present invention.
  • FIG. 3B is a diagram of an application scenario of FIG. 3A according to an embodiment of the present invention. This embodiment primarily illustrates how the host can trigger the disk array controller to migrate data accessed by the specified application when the user wishes to instantaneously accelerate the 10 speeds of the data accessed by the specified application.
  • the hierarchical storage system in this embodiment includes a magnetic disk and a solid state hard disk.
  • this embodiment includes:
  • Step 31 The host receives the data migration policy set by the user.
  • the migration object is the data that is accessed by the specified application in the SAN storage system.
  • the migration condition is immediate migration, and the migrated target disk is a solid state disk.
  • the purpose of the user to set the above data migration strategy is to instantaneously accelerate the data accessed by the specified application.
  • Step 32 The agent program installed by the host resolves the block address of the data that the specified application accesses in the SAN storage system.
  • the host detects the address of the data accessed by the specified application through the interface of the operating system and the specific 10 driver layer inserted in the path of the system 10.
  • the address of the data accessed by the application may be a logical address or a physical address.
  • Step 33 The host sends an address third migration indication to the disk array controller that includes the data accessed by the specified application in the SAN storage system, and instructs the disk array controller to immediately access the specified application according to the address of the data accessed by the specified application. Data is migrated from disk to solid state drive.
  • the agent in the host obtains the specified application Appl in the SAN storage system.
  • a third migration indication is sent to the disk array controller in the storage system, and the disk array controller migrates the data accessed by the application App1 to the SSD according to the indication.
  • the data block corresponding to the application Appl access data is A in the disk before migration, and the corresponding data block in the SSD is B through the disk array controller.
  • the data accessed by the specified application in the data migration policy set by the user is immediately migrated to the solid state hard disk, that is, the data accessed by the specified application is instantaneously accelerated.
  • the host After receiving the data migration policy set by the user, the host obtains the data accessed by the specified application through the operating system interface, and sends a second migration indication to the disk array controller to instruct the disk array controller to immediately deliver the application according to the specified host.
  • the accessed data address migrates the data accessed by the specified application to the SSD, which satisfies the 10 speed requirement for the user to instantly increase the data accessed by the specified application.
  • FIG. 4 is a flowchart of still another method for triggering data migration according to an embodiment of the present invention.
  • This embodiment mainly shows how the host can trigger the disk array controller to migrate data in the SAN storage system when the user wants to instantaneously accelerate the data access frequency of the specified application to reach the specified frequency.
  • this embodiment includes:
  • Step 41 The host receives the data migration policy set by the user, where the migration object is the data whose access frequency reaches the specified frequency in the data accessed by the specified application in the SAN storage system, and the migration condition is immediate migration, and the target disk after the migration is a solid state drive. .
  • the purpose of the user to set the above data migration strategy is to instantaneously accelerate the data of the specified frequency in the data stored in the SAN storage system to the specified frequency.
  • Step 42 The host monitors the data accessed by the specified application, and parses the block address of the data accessed by the specified application to reach the specified frequency.
  • Step 43 The host sends a fourth migration indication to the disk array controller in the SAN storage system, instructing the disk array controller to immediately migrate the data whose access frequency reaches the specified frequency from the disk to the solid state disk according to the address indicated by the host.
  • the block address indicated by the host is the block address of the data whose access frequency reaches the specified frequency among the data accessed by the specified application.
  • the fourth migration indication includes an address specifying the data whose access frequency reaches the specified frequency in the data accessed by the application and the target disk after the migration.
  • the disk array controller immediately migrates the data of the data accessed by the specified application to the specified frequency from the disk to the SSD according to the address indicated by the host.
  • the purpose of the user's data migration policy is to instantaneously accelerate the data whose access frequency reaches a specified frequency in the data accessed by the specified application.
  • the fourth migration instruction is sent to the disk array controller, and the disk array controller immediately accesses the data accessed by the specified application according to the address indicated by the host.
  • the data of the specified frequency is migrated from the disk to the solid state hard disk, thereby satisfying the requirement for the user to instantaneously accelerate the data whose access frequency reaches the specified frequency in the data accessed by the specified application.
  • FIG. 5 is a flowchart of still another method for triggering data migration according to an embodiment of the present invention.
  • This embodiment mainly describes how the host triggers the disk array controller to migrate data in the SAN storage system when the user wants to instantaneously accelerate the 10 speeds of the hotspot area.
  • the embodiment includes: Step 51: The host receives a data migration policy set by the user, where the migration object is an input and output request sent by the host to reach a specified access frequency in a data area accessed by the SAN storage system.
  • the data area, the migration condition is immediate migration, and the target disk after the migration is a solid state drive.
  • the purpose of the user to set the above data migration policy is to instantaneously accelerate the hotspot data requested by the 10th.
  • Step 52 Monitor the data area of the data area accessed by the input and output request sent by the host to reach the specified access frequency, and obtain the block address of the data area that reaches the specified access frequency.
  • the agent program of the host continuously monitors all the data areas that are requested to be accessed in the SAN storage system, and determines the block address of the hotspot data area after determining that the data area that reaches the specified access frequency is the hotspot data area.
  • Step 53 The host sends a fifth migration indication to the disk array controller in the SAN storage system, instructing the disk array controller to immediately migrate the data whose access frequency reaches the specified frequency from the disk to the solid state disk according to the block address indicated by the host.
  • the fifth migration indication includes the address of the hot data area monitored by the host, the migrated target disk is a solid state drive, and the migration condition is immediate migration.
  • the block address indicated by the above host is the block address of the data area up to the specified access frequency.
  • the corresponding data block on the disk before the hotspot is migrated is A.
  • the corresponding data block in the SSD is B.
  • the host monitors the 10 hotspot areas according to the data migration policy set by the user, and sends the first to the disk array controller after monitoring the hotspot area.
  • the five migration indications indicate that the data whose access frequency reaches the specified frequency is immediately migrated from the disk to the solid state hard disk according to the block address indicated by the host, thereby satisfying the instantaneous acceleration of the hot data requested by the 10 storage system in the SAN storage system.
  • FIG. 6 is a schematic structural diagram of a data migration triggering apparatus according to an embodiment of the present invention.
  • the data migration triggering apparatus provided by the present invention includes: a policy receiving module 61, a proxy module 62, and a migration indicating module 63.
  • the policy receiving module 61 is configured to receive a data migration policy set by the user; the data migration policy includes a migration object set by the user, a migration condition, and a migrated target disk; and the migration object includes a specified file or a specified in the SAN storage system. Directory or data that is specified by the application.
  • the proxy module 62 is configured to parse a block address of the migrated object in the data migration policy.
  • the migration indication module 63 is configured to send a migration indication to the disk array controller in the SAN storage system, to instruct the disk array controller to migrate the migration object from the source disk to the migration address according to the migration condition and the block address of the migration object.
  • the target disk is configured to send a migration indication to the disk array controller in the SAN storage system, to instruct the disk array controller to migrate the migration object from the source disk to the migration address according to the migration condition and the block address of the migration object.
  • the proxy module 62 is specifically configured to parse the block address of the specified file or the specified directory.
  • the migration indication module 63 is specifically configured to: if the migration condition is immediate The host sends a first migration indication to the disk array controller in the sending SAN storage system, instructing the disk array controller to immediately perform the specified file according to the block address of the specified file or the block address of the specified directory. Or the specified directory is migrated from the source disk to the target disk.
  • the agent module 62 is specifically configured to parse the block address of the specified file or the specified directory when the user wants to speed up the specified file or the 10 speed of the specified directory.
  • the migration indication module 63 is specifically used for the migration. The condition is that the migration is performed within a specified time, and the host sends a second migration indication to the disk array controller in the sending hierarchical storage system, indicating that the disk array controller is in accordance with the block address of the specified file or The block address of the specified directory migrates the specified file or the specified directory from the source disk to the target disk.
  • the proxy module 62 is specifically configured to parse the block address of the data accessed by the specified application in the SAN storage system; the migration object is a specified application.
  • the data accessed in the SAN storage system, the migration condition is immediate migration.
  • the migration indication module 63 is specifically configured to control the disk array The controller sends a third migration indication, instructing the disk array controller to immediately migrate data accessed by the specified application from the source disk to the target disk according to an address of the data accessed by the specified application.
  • the agent module 62 is specifically configured to monitor the specified application when the user desires to instantaneously accelerate the data accessing the data of the specified application to the 10th speed of the data of the specified frequency.
  • the medium access frequency reaches the data of the specified frequency, the migration condition is immediate migration, and the input and output speed of the target disk is greater than the source disk.
  • the migration indication module 63 is configured to send a fourth migration indication to the disk array controller, to instruct the disk array controller to immediately send the access frequency to the data of the specified frequency according to an address indicated by the host. Migrating from the source disk to the target disk.
  • the proxy module 62 is specifically configured to monitor the data input area of the data access area accessed by the S AN storage system to reach the specified access frequency, and parse the And a data area of the data area that reaches the specified access frequency;
  • the migration object is a data area that reaches a specified access frequency in the data area that the host sends the input/output request to access, and the migration condition is immediate migration, and the input of the target disk The output speed is greater than the source disk.
  • the migration indication module 63 is configured to send a fifth migration indication to the disk array controller, to instruct the disk array controller to immediately send the access frequency to the data of the specified frequency according to an address indicated by the host Migrating from the source disk to the target disk.
  • the data migration triggering device obtained by the embodiment of the present invention obtains the block address of the migration object in the data migration policy after receiving the data migration policy set by the user, and then sends the block including the migration object to the disk array controller in the SAM storage system.
  • An migration indication of the address instructing the disk array controller to migrate the migration object from the source disk to the target disk according to the migration conditions and migration direction in the data migration policy. Because the host instructs the disk array controller to migrate data according to the data migration policy set by the user and senses the block address of the migrated object through the installed agent, the SAM storage system can achieve the purpose of migrating the specified data according to user requirements.
  • the foregoing storage medium includes: a medium that can store program codes, such as a ROM, a RAM, a magnetic disk, or an optical disk.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种数据迁移触发方法和装置，该方法包括：主主机接收用户设置的数据迁移策略；数据迁移策略包括用户设置的迁移对象、迁移条件和迁移到的目标盘；迁移对象包括SAN存储系统中的指定文件或指定目录或指定应用程序访问的数据；主机解析数据迁移策略中迁移对象的块地址；主机向SAN存储系统中磁盘阵列控制器发送迁移指示，指示磁盘阵列控制器根据迁移条件和迁移对象的块地址将迁移对象从源盘迁移到目标盘。本发明主机根据用户设置的数据迁移策略指示磁盘阵列控制器进行数据迁移，并解析迁移对象的块地址，因而SAN存储系统可达到根据用户需求迁移指定数据的目的。

Description

数据迁移触发方法和装置 本申请要求于 2011 年 11 月 28 日提交中国专利局、 申请号为 201110384443.1发明名称为 "流媒体数据的处理方法、 播放方法以及装置" 的中国专利申请的优先权， 其全部内容通过引用结合在本申请中。 技术领域 本发明涉及存储技术， 尤其涉及一种数据迁移触发方法和装置。 背景技术 分级存储系统通常由传统磁盘和固态硬盘 （Solid State Disk 或 Solid State Drive, 筒称 SSD )组成。 SSD也称电子硬盘或者固态电子盘， 是由控 制单元和固态存储单元组成的硬盘。 由于， 固态硬盘与传统磁盘比较， 拥 有以下优点： 启动快， 没有电机加速旋转的过程； 不用磁头， 快速随机读 取， 读延迟极小； 读取时间相对固定。 固态硬盘的寻址时间与数据存储位 置无关， 磁盘碎片不会影响读取时间。 因而， 通常将热点数据緩存在 SSD 中， 以提高访问热点数据的 10速度。
目前存储区域网络（ Storage Area Network, 筒称 SAN )存储系统中的 数据迁移， 是先由 SAN存储系统识别出磁盘中的热点区域， 然后将这些热 点区域中数据从磁盘到访问速度较快的 SSD中，后续主机可直接从 SSD中 访问热点区域中数据， 从而加快数据访问速度。 在实际应用的某些场景下， 用户可能希望针对指定的文件、 目录或者应用程序所访问的数据块进行有 针对性的迁移， 从而实现瞬间加快访问这些数据的 10 (输入输出）速度。 然而。 目前 SAN存储系统中的数据迁移完全依赖于存储系统对热点区域统 计。 用户无法控制存储系统中数据的迁移， 从而无法实现对指定数据的 10 速度进行瞬间加速的目的。 发明内容 本发明提供一种数据迁移触发方法和装置， 用于解决现有 SAN存储系 统中的数据迁移方法无法根据用户需求进行对指定数据迁移的缺陷。 本发明提供的一种数据迁移触发方法， 包括：
主机接收用户设置的数据迁移策略； 所述数据迁移策略包括用户设置 的迁移对象、 迁移条件和迁移后的目标盘； 所述迁移对象包括 SAN存储系 统中的指定文件或指定目录或指定应用程序访问的数据；
所述主机解析所述数据迁移策略中所述迁移对象的块地址；
所述主机向 SAN存储系统中磁盘阵列控制器发送迁移指示， 指示所述 磁盘阵列控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对 象从源盘迁移到所述目标盘。
本发明提供的一种数据迁移触发装置， 包括：
策略接收模块， 用于接收用户设置的数据迁移策略； 所述数据迁移策 略包括用户设置的迁移对象、 迁移条件和迁移后的目标盘； 所述迁移对象 包括 S AN存储系统中的指定文件或指定目录或指定应用程序访问的数据； 代理模块， 用于解析所述数据迁移策略中所述迁移对象的块地址； 迁移指示模块，用于向 SAN存储系统中磁盘阵列控制器发送迁移指示， 指示所述磁盘阵列控制器根据所述迁移条件和所述迁移对象的块地址将所 述迁移对象从源盘迁移到所述目标盘。
本发明实施例提供的数据迁移触发方法和装置， 主机接收到用户设置 的数据迁移策略后， 先通过安装的代理程序解析到数据迁移策略中迁移对 象的块地址，之后向 SAM存储系统中的磁盘阵列控制器发送包括迁移对象 的块地址的迁移指示， 指示磁盘阵列控制器根据数据迁移策略中迁移条件 和迁移方向， 将迁移对象从源盘迁移到目标盘。 由于， 主机根据用户设置 的数据迁移策略指示磁盘阵列控制器进行数据迁移， 并通过安装的代理程 序感知迁移对象的块地址， 因而 SAM存储系统可达到根据用户需求迁移指 定数据的目的。 附图说明
实施例或现有技术描述中所需要使用的附图作一筒单地介绍， 显而易见地， 下面描述中的附图是本发明的一些实施例， 对于本领域普通技术人员来讲， 在不付出创造性劳动性的前提下， 还可以根据这些附图获得其他的附图。 图 1为本发明实施例提供的一种数据迁移触发方法流程图； 图 2A为本发明实施例提供的另一种数据迁移触发方法流程图； 图 2B为图 2A的一种应用场景图；
图 2C为本发明实施例提供的又一种数据迁移触发方法流程图； 图 3A为本发明实施例提供的再一种数据迁移触发方法流程图； 图 3B为图 3A的一种应用场景图；
图 4为本发明实施例提供的再一种数据迁移触发方法流程图； 图 5 A为本发明实施例提供的再一种数据迁移触发方法流程图； 图 5B为图 5A的一种应用场景图；
图 6本发明实施例提供的一种数据迁移触发装置结构示意图。 具体实施方式 为使本发明实施例的目的、 技术方案和优点更加清楚， 下面将结合本 发明实施例中的附图， 对本发明实施例中的技术方案进行清楚、 完整地描 述， 显然， 所描述的实施例是本发明一部分实施例， 而不是全部的实施例。 基于本发明中的实施例， 本领域普通技术人员在没有付出创造性劳动前提 下所获得的所有其他实施例， 都属于本发明保护的范围。
图 1 为本发明实施例提供的一种数据迁移触发方法流程图。 本发明实 施例的执行主体为与存储系统进行 10交互的主机。 如图 1所示， 包括： 步骤 11 : 主机接收用户设置的数据迁移策略； 数据迁移策略包括用户 设置的迁移对象、 迁移条件和迁移后的目标盘； 迁移对象包括 SAN存储系 统中的指定文件或指定目录或指定应用程序访问的数据。
本发明实施例的 SAN存储系统至少包括 10速度不相同的两类磁盘。 例如， SAN存储系统包括第一磁盘和第二磁盘， 第一磁盘的 10速度小于第 二磁盘的 10速度。 迁移对象迁移前所在的源盘为第一磁盘时， 相应地， 迁 移对象迁移后的目标盘为第二磁盘； 迁移对象迁移前所在的源盘为第二磁 盘时， 相应地， 迁移对象迁移后的目标磁盘为第一磁盘。 根据访问需求， 数据可在分级存储系统中磁盘阵列控制器的控制下在第一磁盘和第二硬盘 之间进行迁移。
为了使用户可控制被迁移的数据， 主机为用户提供了设置数据迁移策 略的人机接口。 用户可根据具体需求， 设置数据迁移策略， 包括设置需要 被迁移的数据即设置迁移对象、 设置在什么情况下对数据进行迁移即设置 迁移条件， 设置数据迁移后的目标盘。 例如， 用户希望立即提高访问指定 文件的 10速度， 可通过人机接口设置如下数据迁移策略： 迁移对象为 SAN 存储系统中指定文件或者指定目录， 迁移条件是立即迁移， 迁移后的目标 盘为第二硬盘。 又例如， 用户希望立即提高访问指定应用程序的 10速度， 可通过人机接口设置如下数据迁移策略： 迁移对象为 SAN存储系统中指定 应用程序， 迁移条件是立即迁移， 迁移后的目标盘为第二硬盘。 又例如， 用户希望立即降低指定文件的 10速度， 可通过人机接口设置如下数据迁移 策略： 迁移对象为 SAN存储系统中指定文件， 迁移条件是立即迁移， 迁移 后的目标盘为第一硬盘。 例如， 用户希望基于访问频率进行 10加速， 可通 过人机接口设置如下数据迁移策略： 迁移对象为 SAN存储系统中访问频率 达到指定频率的数据， 迁移条件是立即迁移， 迁移后的目标盘为第二硬盘。
步骤 12: 主机解析获取数据迁移策略中迁移对象的块地址。
主机接收用户设置的数据迁移策略后， 获取数据迁移策略中迁移对象 的块地址。 主机中安装的代理程序根据迁移对象的不同， 可通过主机文件 系统的接口、 操作系统接口或系统 10路径上特定驱动层等获取迁移对象的 块地址， 迁移对象的块地址可以是迁移对象的物理地址， 也可以是迁移对
Agent代理程序
步骤 13: 主机向 SAN存储系统中磁盘阵列控制器发送迁移指示， 指示 磁盘阵列控制器根据迁移条件和迁移对象的地址将迁移对象从源盘迁移到 目标盘。
获取迁移对象的地址后， 主机向磁盘控制器发送迁移指示， 迁移指示 中包括迁移对象的地址、 迁移条件和迁移后的目标盘， 用于指示磁盘阵列 控制器在迁移条件到达时， 根据迁移对象的地址将迁移对象从源磁盘迁移 到目标盘。 如果 SAN存储系统中对物理地址进行了映射， 而主机发送的迁 移对象的地址是逻辑地址， 由 SAN存储系统中磁盘阵列控制器将迁移对象 的逻辑地址转换为物理地址。 本发明实施例由主机根据用户设置的数据迁 移策略， 确定迁移对象的地址， 并向磁盘阵列控制器下发迁移指示， 而不 是由磁盘阵列控制器确定被迁移数据的块地址。
通过数据迁移策略中设置的目标盘， 可以将迁移对象迁移到 10速度较 快的目标盘， 也可将迁移对象迁移到 10速度较慢的目标盘， 因此不仅可以 满足用户提高访问迁移对象的 10速度的需求，也可降低访问迁移对象的 10 速度的需求。
本发明实施例提供的数据迁移触发方法， 主机接收到用户设置的数据 迁移策略后， 先获取数据迁移策略中迁移对象的块地址， 之后向 SAN存储 系统中的磁盘阵列控制器发送包括迁移对象的块地址的迁移指示， 指示磁 盘阵列控制器根据数据迁移策略中迁移条件和迁移方向， 将迁移对象从源 盘迁移到目标盘。 由于， 主机根据用户设置的数据迁移策略指示磁盘阵列 控制器进行数据迁移， 并解析迁移对象的块地址， 因而 SAN存储系统可达 到根据用户需求迁移指定数据的目的。
图 2A为本发明实施例提供的另一种数据迁移触发方法流程图。 图 2B 为本发明实施例提供的一种应用场景图。 本实施例主要说明用户希望瞬间 加速指定文件的 10速度时， 主机如何触发磁盘阵列控制器对该指定文件进 行数据迁移。如图 2B所示，本实施例中分级存储系统包括磁盘和固态硬盘， 磁盘和固态硬盘存储实际的文件， 而主机操作系统中文件为镜像文件。
如图 2A所示， 本实施例包括：
步骤 21a: 主机接收用户设置的数据迁移策略， 其中， 迁移对象为 SAN 存储系统中的指定文件， 迁移后的目标盘为固态硬盘， 迁移条件为立即迁 移。
用户可以在一项数据迁移策略中给出多个待迁移的指定文件。 其中， 指文件可以是目录文件， 也可以是单个文件。 用户设置上述数据迁移策略 的目的是， 对指定文件进行瞬间加速。
步骤 22a: 主机通过 Agent程序解析 SAN存储系统中指定文件的块地 址。
主机的 Agent程序通过文件系统的接口可探测出指定文件的块地址， 即指定文件对应数据块的地址， 指定文件的地址可以是逻辑地址， 也可以 是物理地址。
步骤 23a: 主机向 SAN存储系统中磁盘阵列控制器发送第一迁移指示， 指示磁盘阵列控制器根据指定文件的块地址立即将指定文件从磁盘迁移到 固态硬盘。
主机下发的第一迁移指示中包括指定文件的地址、 迁移条件和迁移后 的目标盘。 其中迁移条件为立即迁移， 迁移的目标盘为固态硬盘。 由于主 机端的文件系统中一般都含有文件碎片， 为了保证性能和效率， 主机可以 不需要将指定文件对应所有数据块的地址——对应下发给磁盘阵列控制 器， 而只需要将指定文件的大数据块的地址下发给磁盘阵列控制器， 对于 细小碎片的地址可不下发给磁盘阵列控制器。
如图 2B所示， 主机中 Agent程序获取 SAN存储系统中指定文件 Filel 的地址， 向 SAN存储系统中磁盘阵列控制器发送第一迁移指示， 磁盘阵列 控制器根据指示将指定文件 Filel 从磁盘迁移到固态硬盘。 指定文件 Filel 迁移前在磁盘中对应的数据块为 A, 经磁盘阵列控制器迁移到固态硬盘后， 在固态硬盘中对应的数据块为 B。
另外， 步骤 21a中迁移条件可以是指定时间内迁移。 如图 2C所示， 本 发明实施例提供的又一种数据迁移触发方法包括：
步骤 21b: 主机接收用户设置的数据迁移策略， 其中， 迁移对象为 SAN 存储系统中指定文件， 迁移后的目标盘为固态硬盘， 迁移条件为在指定时 间内迁移。
用户设置上述数据迁移策略的目的是， 在指定时间内对指定文件进行 力口速。
步骤 22 b: 主机通过 Agent程序获取 SAN存储系统中指定文件的块地 址。
步骤 23b:主机向 SAN存储系统中磁盘阵列控制器发送第二迁移指示， 指示磁盘阵列控制器在指定时间内， 根据指定文件的地址将指定文件从磁 盘迁移到固态硬盘。
第二迁移指示包括指定文件的地址、 迁移条件和迁移后的目标盘， 迁 移后的目标盘为固态硬盘， 迁移条件为在指定时间内迁移。 磁盘阵列控制 器接收到第二迁移指示后， 在指定时间内， 根据指定文件的地址将指定文 件从源盘迁移到目标盘。
本发明提供的数据迁移触发方法中， 用户设置的数据迁移策略中对指 定文件立即迁移到固态硬盘， 即对指定文件进行瞬间加速。 主机接收到用 户设置的上述数据迁移策略后， 通过文件作系统接口获取指定文件的地址 后， 向磁盘阵列控制器发送第一迁移指示， 指示磁盘阵列控制器立即根据 指定文件的地址将指定文件迁移到固态硬盘， 从而满足了用户瞬间提高主 机访问指定文件的 10速度的需求。 进一步， 也可以用户设置的在指定时间 内迁移的迁移条件， 向磁盘阵列控制器发送第二迁移指示， 指示磁盘阵列 控制器在指定时间内， 根据指定文件的地址将指定文件从源盘迁移到目标 盘，从而满足了用户在指定时间内提高主机访问指定文件的 10速度的需求。
图 3A为本发明实施例提供的再一种数据迁移触发方法流程图。 图 3B 为本发明实施例提供的图 3A的应用场景图。本实施例主要说明用户希望瞬 间加速指定应用程序访问的数据的 10速度时， 主机如何触发磁盘阵列控制 器对该指定应用程序访问的数据进行迁移。 如图 3B所示， 本实施例中分级 存储系统包括磁盘和固态硬盘。
如图 3A所示， 本实施例包括：
步骤 31 : 主机接收用户设置的数据迁移策略， 其中， 迁移对象为指定 应用程序在 SAN存储系统中访问的数据， 迁移条件为立即迁移， 迁移后的 目标盘为固态硬盘。
用户设置上述数据迁移策略的目的是， 对指定应用程序访问的数据进 行瞬间加速。
步骤 32: 主机安装的 Agent程序解析指定应用程序在 SAN存储系统中 访问的数据的块地址。
用户可以在一项数据迁移策略中给出一个指定应用程序或多个应用程 序。 主机通过操作系统的接口和系统 10路径上所插入的特定 10驱动层探 测出指定应用程序访问的数据的地址， 应用程序访问的数据的地址可以是 逻辑地址， 也可以是物理地址。
步骤 33：主机向磁盘阵列控制器发送包括 S AN存储系统中指定应用程 序访问的数据的地址第三迁移指示， 指示磁盘阵列控制器根据指定应用程 序访问的数据的地址立即将指定应用程序访问的数据从磁盘迁移到固态硬 盘。
如图 3B所示，主机中 Agent获取指定应用程序 Appl在 SAN存储系统 中访问的数据的地址后， 向存储系统中磁盘阵列控制器发送第三迁移指示， 磁盘阵列控制器根据指示将定应用程序 Appl访问的数据迁移固态硬盘。指 定应用程序 Appl访问的数据迁移前在磁盘中对应的数据块为 A, 经磁盘阵 列控制器， 在固态硬盘中对应的数据块为 B。
本发明提供的数据迁移触发方法中， 用户设置的数据迁移策略中对指 定应用程序访问的数据立即迁移到固态硬盘， 即对指定应用程序访问的数 据进行瞬间加速。 主机接收到用户设置的上述数据迁移策略后， 通过操作 系统接口获取指定应用程序访问的数据后， 向磁盘阵列控制器发送第二迁 移指示， 指示磁盘阵列控制器立即根据指定主机下发的应用程序访问的数 据地址， 将指定应用程序访问的数据迁移到固态硬盘， 从而满足了用户瞬 间提高指定应用程序访问的数据的 10速度的需求。
图 4 为本发明实施例提供的再一种数据迁移触发方法流程图。 本实施 例主要说明用户希望瞬间加速指定应用程序访问的数据中访问频率达到指 定频率的数据的 10速度时， 主机如何触发磁盘阵列控制器对 SAN存储系 统中数据进行迁移。 如图 4所示， 本实施例包括：
步骤 41 : 主机接收用户设置的数据迁移策略， 其中， 迁移对象为 SAN 存储系统中指定应用程序访问的数据中访问频率达到指定频率的数据， 迁 移条件为立即迁移， 迁移后的目标盘为固态硬盘。
用户设置上述数据迁移策略的目的是， 对指定应用程序在 SAN存储系 统中访问的数据中访问频率达到指定频率的数据进行瞬间加速。
步骤 42: 主机监测指定应用程序访问的数据， 并解析指定应用程序访 问的数据中访问频率达到指定频率的数据的块地址。
步骤 43: 主机向 SAN存储系统中磁盘阵列控制器发送第四迁移指示， 指示磁盘阵列控制器根据主机指示的地址立即将访问频率达到指定频率的 数据从磁盘迁移到固态硬盘。
主机指示的块地址为指定应用程序访问的数据中访问频率达到指定频 率的数据的块地址。 第四迁移指示包括指定应用程序访问的数据中访问频 率达到指定频率的数据的地址和迁移后的目标盘。 磁盘阵列控制器根据主 机指示的地址， 立即将指定应用程序访问的数据中访问频率达到指定频率 的数据从磁盘迁移到固态硬盘。 本发明提供的数据迁移触发方法中， 用户的数据迁移策略的目的是， 对指定应用程序访问的数据中访问频率达到指定频率的数据进行瞬间加 速。 主机对指定应用程序访问的数据中访问频率进行监测后， 向磁盘阵列 控制器下发第第四迁移指示， 磁盘阵列控制器根据主机指示的地址， 立即 将指定应用程序访问的数据中访问频率达到指定频率的数据从磁盘迁移到 固态硬盘， 从而满足了用户对指定应用程序访问的数据中访问频率达到指 定频率的数据进行瞬间加速的需求。
图 5 为本发明实施例提供的再一种数据迁移触发方法流程图。 本实施 例主要说明用户希望瞬间加速热点区域的 10速度时， 主机如何触发磁盘阵 列控制器对 SAN存储系统中数据进行迁移。 如图 5所示， 本实施例包括： 步骤 51 : 主机接收用户设置的数据迁移策略， 其中， 迁移对象为主机 下发的输入输出请求在 SAN存储系统中访问的数据区域中达到指定访问频 率的数据区域， 迁移条件为立即迁移， 迁移后的目标盘为固态硬盘。
用户设置上述数据迁移策略的目的是， 对 10请求访问的热点数据进行 瞬间加速。
步骤 52: 监测主机下发的输入输出请求访问的数据区域中达到指定访 问频率的数据区域， 并获取达到指定访问频率的数据区域的块地址。
主机的 Agent程序持续监测所有下发的 10请求在 SAN存储系统中访 问的数据区域， 确定达到指定访问频率的数据区域为热点数据区域后， 解 析热点数据区域的块地址。
步骤 53: 主机向 SAN存储系统中磁盘阵列控制器发送第五迁移指示， 指示磁盘阵列控制器根据主机指示的块地址立即将访问频率达到指定频率 的数据从磁盘迁移到固态硬盘。
第五迁移指示中包括主机监测到的热点数据区域的地址、 迁移后的目 标盘为固态硬盘， 迁移条件为立即迁移。 上述主机指示的块地址为达到指 定访问频率的数据区域的块地址。
如图 5B所示， 热点区域迁移前在磁盘中对应的数据块为 A, 经磁盘控 制器迁移后， 在固态硬盘中对应的数据块为 B。
本实施例提供的数据迁移触发方法， 主机根据用户设置的数据迁移策 略， 监测 10请求的热点区域， 监测到热点区域后向磁盘阵列控制器下发第 五迁移指示， 指示根据主机指示的块地址立即将访问频率达到指定频率的 数据从磁盘迁移到固态硬盘， 从而满足了在 SAN存储系统中对 10请求访 问的热点数据进行瞬间加速。
图 6 本发明实施例提供的一种数据迁移触发装置结构示意图。 如图 6 所示， 本发明提供的数据迁移触发装置包括： 策略接收模块 61、 代理模块 62和迁移指示模块 63。
策略接收模块 61 , 用于接收用户设置的数据迁移策略； 所述数据迁移 策略包括用户设置的迁移对象、 迁移条件和迁移后的目标盘； 所述迁移对 象包括 SAN 存储系统中的指定文件或指定目录或指定应用程序访问的数 据。
代理模块 62, 用于解析所述数据迁移策略中所述迁移对象的块地址。 迁移指示模块 63 ,用于向 SAN存储系统中磁盘阵列控制器发送迁移指 示， 指示所述磁盘阵列控制器根据所述迁移条件和所述迁移对象的块地址 将所述迁移对象从源盘迁移到所述目标盘。
用户希望瞬间加速指定文件或指定目录的 10速度时， 代理模块 62, 具 体用于解析所述指定文件或指定目录的块地址； 所述迁移指示模块 63 , 具 体用于若所述迁移条件为立即迁移， 所述主机向发送 SAN存储系统中磁盘 阵列控制器发送第一迁移指示， 指示所述磁盘阵列控制器根据所述指定文 件的块地址或所述指定目录的块地址立即将所述指定文件或所述指定目录 从所述源盘迁移到所述目标盘。
用户希望在指定时间内加速指定文件或指定目录的 10速度时， 代理模 块 62, 具体用于解析所述指定文件或指定目录的块地址； 所述迁移指示模 块 63 , 具体用于若所述迁移条件为在指定时间内迁移， 所述主机向发送分 级存储系统中磁盘阵列控制器发送第二迁移指示， 指示所述磁盘阵列控制 器在所述指定时间内， 根据所述指定文件的块地址或所述指定目录的块地 址将所述指定文件或所述指定目录从所述源盘迁移到所述目标盘。
用户希望瞬间加速指定应用程序访问的数据的 10速度时， 所述代理模 块 62,具体用于解析所述指定应用程序在 SAN存储系统中访问的数据的块 地址； 所述迁移对象为指定应用程序在 SAN存储系统中访问的数据， 所述 迁移条件为立即迁移。 所述迁移指示模块 63 , 具体用于向所述磁盘阵列控 制器发送第三迁移指示， 指示所述磁盘阵列控制器根据所述指定应用程序 访问的数据的地址立即将所述指定应用程序访问的数据从所述源盘迁移到 所述目标盘。
用户希望瞬间加速指定应用程序访问的数据中访问频率达到指定频率 的数据的 10速度时， 所述代理模块 62, 具体用于监测所述指定应用程序在
SAN存储系统中访问的数据， 并解析所述指定应用程序访问的数据中访问 频率达到所述指定频率的数据的块地址； 所述迁移对象为所述指定应用程 序在 SAN存储系统中访问的数据中访问频率达到所述指定频率的数据， 所 述迁移条件为立即迁移， 所述目标盘的输入输出速度大于所述源盘。 所述 迁移指示模块 63 , 具体用于向所述磁盘阵列控制器发送第四迁移指示， 指 示所述磁盘阵列控制器根据所述主机指示的地址立即将所述访问频率达到 所述指定频率的数据从所述源盘迁移到所述目标盘。
用户希望瞬间加速热点区域的 10速度时， 所述代理模块 62, 具体用于 监测下发的输入输出请求在 S AN存储系统中访问的数据区域中达到指定访 问频率的数据区域， 并解析所述达到指定访问频率的数据区域的块地址； 所述迁移对象为主机下发的输入输出请求访问的数据区域中达到指定访问 频率的数据区域， 所述迁移条件为立即迁移， 所述目标盘的输入输出速度 大于所述源盘。 所述迁移指示模块 63 , 具体用于向所述磁盘阵列控制器发 送第五迁移指示， 指示所述磁盘阵列控制器根据所述主机指示的地址立即 将所述访问频率达到所述指定频率的数据从所述源盘迁移到所述目标盘。
本发明实施例提供的数据迁移触发装置， 接收到用户设置的数据迁移 策略后， 先获取数据迁移策略中迁移对象的块地址， 之后向 SAM存储系统 中的磁盘阵列控制器发送包括迁移对象的块地址的迁移指示， 指示磁盘阵 列控制器根据数据迁移策略中迁移条件和迁移方向， 将迁移对象从源盘迁 移到目标盘。 由于， 主机根据用户设置的数据迁移策略指示磁盘阵列控制 器进行数据迁移，并通过安装的代理程序感知迁移对象的块地址，因而 SAM 存储系统可达到根据用户需求迁移指定数据的目的。
本领域普通技术人员可以理解： 实现上述方法实施例的全部或部分步 骤可以通过程序指令相关的硬件来完成， 前述的程序可以存储于一计算机 可读取存储介质中， 该程序在执行时， 执行包括上述方法实施例的步骤； 而前述的存储介质包括： ROM、 RAM, 磁碟或者光盘等各种可以存储程序 代码的介质。
最后应说明的是： 以上实施例仅用以说明本发明的技术方案， 而非对 其限制； 尽管参照前述实施例对本发明进行了详细的说明， 本领域的普通 技术人员应当理解： 其依然可以对前述各实施例所记载的技术方案进行修 改， 或者对其中部分技术特征进行等同替换； 而这些修改或者替换， 并不 使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims

1、 一种数据迁移触发方法， 其特征在于， 包括：
主机接收用户设置的数据迁移策略； 所述数据迁移策略包括用户设 置的迁移对象、 迁移条件和迁移到的目标盘； 所述迁移对象包括 SAN存 储系统中的指定文件或指定目录或指定应用程序访问的数据；
所述主机解析所述数据迁移策略中所述迁移对象的块地址； 所述主机向 SAN存储系统中磁盘阵列控制器发送迁移指示，指示所 述磁盘阵列控制器根据所述迁移条件和所述迁移对象的块地址将所述迁 移对象从源盘迁移到所述目标盘。
2、 根据权利要求 1所述方法， 其特征在于， 所述迁移对象为 SAN 存储系统中的指定文件或者指定目录；
所述主机解析所述数据迁移策略中所述迁移对象的块地址； 所述主 机向 SAN存储系统中磁盘阵列控制器发送迁移指示，指示所述磁盘阵列 控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对象从源 盘迁移到所述目标盘， 包括：
所述主机解析 SAN存储系统中所述指定文件的块地址或所述指定 目录的块地址；
若所述迁移条件为立即迁移，所述主机向发送 SAN存储系统中磁盘 阵列控制器发送第一迁移指示， 指示所述磁盘阵列控制器根据所述指定 文件的块地址或所述指定目录的块地址立即将所述指定文件或所述指定 目录从所述源盘迁移到所述目标盘；
若所述迁移条件为在指定时间内迁移，所述主机向 SAN存储系统中 磁盘阵列控制器发送第二迁移指示， 指示所述磁盘阵列控制器在所述指 定时间内， 根据所述指定文件的块地址或所述指定目录的块地址将所述 指定文件或所述指定目录从所述源盘迁移到所述目标盘。
3、 根据权利要求 1所述方法， 其特征在于， 所述迁移对象为指定应 用程序在 SAN存储系统中访问的数据， 所述迁移条件为立即迁移； 所述主机解析所述数据迁移策略中所述迁移对象的块地址； 所述主 机向 SAN存储系统中磁盘阵列控制器发送迁移指示，指示所述磁盘阵列 控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对象从源 盘迁移到所述目标盘， 包括：
所述主机解析所述指定应用程序在 SAN存储系统中访问的数据的 块地址；
所述主机向所述磁盘阵列控制器发送第三迁移指示， 指示所述磁盘 阵列控制器根据所述指定应用程序访问的数据的地址立即将所述指定应 用程序访问的数据从所述源盘迁移到所述目标盘。
4、 根据权利要求 1所述方法， 其特征在于， 所述迁移对象为所述指 定应用程序在 S AN存储系统中访问的数据中访问频率达到所述指定频 率的数据， 所述迁移条件为立即迁移， 所述目标盘的输入输出速度大于 所述源盘；
所述主机解析所述数据迁移策略中所述迁移对象的块地址； 所述主 机向 SAN存储系统中磁盘阵列控制器发送迁移指示，指示所述磁盘阵列 控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对象从源 盘迁移到所述目标盘， 包括：
监测所述指定应用程序在 SAN存储系统中访问的数据，并获取所述 指定应用程序访问的数据中访问频率达到所述指定频率的数据的块地 址；
所述主机向所述磁盘阵列控制器发送第四迁移指示， 指示所述磁盘 阵列控制器根据所述主机指示的地址立即将所述访问频率达到所述指定 频率的数据从所述源盘迁移到所述目标盘。
5、 根据权利要求 1所述方法， 其特征在于， 所述迁移对象为主机下 发的输入输出请求访问的数据区域中达到指定访问频率的数据区域， 所 述迁移条件为立即迁移；
所述主机解析所述数据迁移策略中所述迁移对象的块地址； 所述主 机向 SAN存储系统中磁盘阵列控制器发送迁移指示，指示所述磁盘阵列 控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对象从源 盘迁移到所述目标盘， 包括：
监测主机下发的输入输出请求在 SAN存储系统中访问的数据区域 中达到指定访问频率的数据区域， 并获取所述达到指定访问频率的数据 区域的块地址； 阵列控制器根据所述主机指示的地址立即将所述访问频率达到所述指定 频率的数据从所述源盘迁移到所述目标盘， 其中， 所述目标盘的输入输 出速度大于所述源盘。
6、 一种数据迁移触发装置， 其特征在于， 包括：
策略接收模块， 用于接收用户设置的数据迁移策略； 所述数据迁移 策略包括用户设置的迁移对象、 迁移条件和迁移后的目标盘； 所述迁移 对象包括 SAN存储系统中的指定文件或指定目录或指定应用程序访问 的数据；
代理模块， 用于解析所述数据迁移策略中所述迁移对象的块地址； 迁移指示模块，用于向 S AN存储系统中磁盘阵列控制器发送迁移指 示， 指示所述磁盘阵列控制器根据所述迁移条件和所述迁移对象的块地 址将所述迁移对象从源盘迁移到所述目标盘。
7、 根据权利要求 6所述的装置， 其特征在于：
所述代理模块， 具体用于解析所述指定文件或指定目录的块地址； 所述迁移指示模块， 具体用于若所述迁移条件为立即迁移， 所述主 机向发送 SAN存储系统中磁盘阵列控制器发送第一迁移指示，指示所述 磁盘阵列控制器根据所述指定文件的块地址或所述指定目录的块地址立 即将所述指定文件或所述指定目录从所述源盘迁移到所述目标盘； 或， 所述迁移指示模块，具体用于若所述迁移条件为在指定时间内迁移， 所述主机向发送分级存储系统中磁盘阵列控制器发送第二迁移指示， 指 示所述磁盘阵列控制器在所述指定时间内， 根据所述指定文件的块地址 或所述指定目录的块地址将所述指定文件或所述指定目录从所述源盘迁 移到所述目标盘。
8、 根据权利要求 6所述的装置， 其特征在于：
所述代理模块，具体用于解析所述指定应用程序在 SAN存储系统中 访问的数据的块地址；所述迁移对象为指定应用程序在 SAN存储系统中 访问的数据， 所述迁移条件为立即迁移；
所述迁移指示模块， 具体用于向所述磁盘阵列控制器发送第三迁移 指示， 指示所述磁盘阵列控制器根据所述指定应用程序访问的数据的地 址立即将所述指定应用程序访问的数据从所述源盘迁移到所述目标盘。 所述代理模块，具体用于监测所述指定应用程序在 SAN存储系统中 访问的数据， 并解析所述指定应用程序访问的数据中访问频率达到所述 指定频率的数据的块地址；所述迁移对象为所述指定应用程序在 SAN存 储系统中访问的数据中访问频率达到所述指定频率的数据， 所述迁移条 件为立即迁移， 所述目标盘的输入输出速度大于所述源盘；
所述迁移指示模块， 具体用于向所述磁盘阵列控制器发送第四迁移 指示， 指示所述磁盘阵列控制器根据所述主机指示的地址立即将所述访 问频率达到所述指定频率的数据从所述源盘迁移到所述目标盘。
10、 根据权利要求 6所述的装置， 其特征在于：
所述代理模块，具体用于监测主机下发的输入输出请求在 SAN存储 系统中访问的数据区域中达到指定访问频率的数据区域， 并解析所述达 到指定访问频率的数据区域的块地址； 所述迁移对象为主机下发的输入 输出请求访问的数据区域中达到指定访问频率的数据区域， 所述迁移条 件为立即迁移；
所述迁移指示模块， 具体用于向所述磁盘阵列控制器发送第五迁移 指示， 指示所述磁盘阵列控制器根据所述主机指示的地址立即将所述访 问频率达到所述指定频率的数据从所述源盘迁移到所述目标盘； 其中， 所述目标盘的输入输出速度大于所述源盘。
11、 一种主机， 其特征在于， 包括：
存储介质， 用于存储指令； 处理器， 与所述存储器耦合， 所述处理器被配置为执行存储在所述 存储器中的指令， 且所述处理器被配置执行：
接收用户设置的数据迁移策略； 所述数据迁移策略包括用户设置的 迁移对象、 迁移条件和迁移到的目标盘； 所述迁移对象包括 SAN存储系 统中的指定文件或指定目录或指定应用程序访问的数据； 解析所述数据 迁移策略中所述迁移对象的块地址；向 SAN存储系统中磁盘阵列控制器 发送迁移指示， 指示所述磁盘阵列控制器根据所述迁移条件和所述迁移 对象的块地址将所述迁移对象从源盘迁移到所述目标盘。
12、根据权利要求 11所述主机， 其特征在于， 所述迁移对象为 SAN
≠L^ ki. ι hh r J^- El . 所述解析所述数据迁移策略中所述迁移对象的块地址； 所述向 S AN存储系统中磁盘阵列控制器发送迁移指示，指示所述磁 盘阵列控制器根据所述迁移条件和所述迁移对象的块地址将所述迁移对 象从源盘迁移到所述目标盘， 包括：
解析 SAN存储系统中所述指定文件的块地址或所述指定目录的块 地址； 若所述迁移条件为立即迁移，向发送 SAN存储系统中磁盘阵列控制 器发送第一迁移指示， 指示所述磁盘阵列控制器根据所述指定文件的块 地址或所述指定目录的块地址立即将所述指定文件或所述指定目录从所 述源盘迁移到所述目标盘；
若所述迁移条件为在指定时间内迁移，向 SAN存储系统中磁盘阵列 控制器发送第二迁移指示，指示所述磁盘阵列控制器在所述指定时间内， 根据所述指定文件的块地址或所述指定目录的块地址将所述指定文件或 所述指定目录从所述源盘迁移到所述目标盘。
13、 根据权利要求 11所述主机， 其特征在于， 所述迁移对象为指定 应用程序在 S AN存储系统中访问的数据， 所述迁移条件为立即迁移； 解析所述数据迁移策略中所述迁移对象的块地址；向 SAN存储系统 中磁盘阵列控制器发送迁移指示， 指示所述磁盘阵列控制器根据所述迁 移条件和所述迁移对象的块地址将所述迁移对象从源盘迁移到所述目标 盘， 包括：
解析所述指定应用程序在 S AN存储系统中访问的数据的块地址； 向所述磁盘阵列控制器发送第三迁移指示， 指示所述磁盘阵列控制 器根据所述指定应用程序访问的数据的地址立即将所述指定应用程序访 问的数据从所述源盘迁移到所述目标盘。
14、 根据权利要求 11所述主机， 其特征在于， 所述迁移对象为所述 指定应用程序在 S AN存储系统中访问的数据中访问频率达到所述指定 频率的数据， 所述迁移条件为立即迁移， 所述目标盘的输入输出速度大 于所述源盘；
解析所述数据迁移策略中所述迁移对象的块地址；向 SAN存储系统 中磁盘阵列控制器发送迁移指示， 指示所述磁盘阵列控制器根据所述迁 移条件和所述迁移对象的块地址将所述迁移对象从源盘迁移到所述目标 盘， 包括：
监测所述指定应用程序在 SAN存储系统中访问的数据，并获取所述 指定应用程序访问的数据中访问频率达到所述指定频率的数据的块地 址；
向所述磁盘阵列控制器发送第四迁移指示， 指示所述磁盘阵列控制 器根据指示的地址立即将所述访问频率达到所述指定频率的数据从所述 源盘迁移到所述目标盘。
15、 根据权利要求 11所述主机， 其特征在于， 所述迁移对象为主机 下发的输入输出请求访问的数据区域中达到指定访问频率的数据区域， 所述迁移条件为立即迁移；
解析所述数据迁移策略中所述迁移对象的块地址；向 SAN存储系统 中磁盘阵列控制器发送迁移指示， 指示所述磁盘阵列控制器根据所述迁 移条件和所述迁移对象的块地址将所述迁移对象从源盘迁移到所述目标 盘， 包括：
监测主机下发的输入输出请求在 SAN存储系统中访问的数据区域 中达到指定访问频率的数据区域， 并获取所述达到指定访问频率的数据 区域的块地址；
向所述磁盘阵列控制器发送第五迁移指示， 指示所述磁盘阵列控制 器根据指示的地址立即将所述访问频率达到所述指定频率的数据从所述 源盘迁移到所述目标盘， 其中， 所述目标盘的输入输出速度大于所述源 盘。
PCT/CN2012/079577 2011-11-28 2012-08-02 数据迁移触发方法和装置 WO2013078879A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP12853181.1A EP2717167A4 (en) 2011-11-28 2012-08-02 METHOD AND DEVICE FOR TRIGGERING A DATA MIGRATION
US13/719,646 US20130179635A1 (en) 2011-11-28 2012-12-19 Method and device for triggering data migration

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201110384443.1 2011-11-28
CN201110384443.1A CN102521138B (zh) 2011-11-28 2011-11-28 数据迁移触发方法和装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/719,646 Continuation US20130179635A1 (en) 2011-11-28 2012-12-19 Method and device for triggering data migration

Publications (2)

Publication Number Publication Date
WO2013078879A1 true WO2013078879A1 (zh) 2013-06-06
WO2013078879A9 WO2013078879A9 (zh) 2014-01-09

Family

ID=46292068

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2012/079577 WO2013078879A1 (zh) 2011-11-28 2012-08-02 数据迁移触发方法和装置

Country Status (4)

Country Link
US (1) US20130179635A1 (zh)
EP (1) EP2717167A4 (zh)
CN (1) CN102521138B (zh)
WO (1) WO2013078879A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113835638A (zh) * 2021-09-24 2021-12-24 苏州浪潮智能科技有限公司 一种存储系统中垃圾回收目的块的确定方法、装置及设备

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102521138B (zh) * 2011-11-28 2015-11-25 华为技术有限公司 数据迁移触发方法和装置
CN103106045A (zh) * 2012-12-20 2013-05-15 华为技术有限公司 数据迁移方法和系统、主机端设备
CN103020255B (zh) * 2012-12-21 2016-03-02 华为技术有限公司 分级存储方法和装置
CN104657286B (zh) * 2013-11-19 2019-05-10 中兴通讯股份有限公司 一种分级存储方法及装置
CN103761988B (zh) * 2013-12-27 2018-01-16 华为技术有限公司 固态硬盘及数据移动方法
CN105446888B (zh) * 2014-05-30 2018-10-12 华为技术有限公司 存储设备间移动数据的方法、控制器和存储系统
CN105808443B (zh) * 2014-12-29 2019-01-18 华为技术有限公司 一种数据迁移的方法、装置及系统
CN105630903B (zh) * 2015-12-21 2020-02-21 中国电子科技集团公司第十五研究所 一种海量数据快速存储的方法和装置
CN106909853A (zh) * 2015-12-22 2017-06-30 北京奇虎科技有限公司 一种操作执行方法及装置
CN109213420A (zh) * 2017-06-29 2019-01-15 杭州海康威视数字技术股份有限公司 数据存储方法、装置及系统
CN107844275A (zh) * 2017-11-22 2018-03-27 郑州云海信息技术有限公司 一种数据的迁移方法、装置及介质
US10795598B1 (en) * 2017-12-07 2020-10-06 Pure Storage, Inc. Volume migration for storage systems synchronously replicating a dataset
WO2019127234A1 (zh) * 2017-12-28 2019-07-04 华为技术有限公司 一种对象迁移的方法、设备和系统
US11032371B2 (en) * 2019-05-29 2021-06-08 Red Hat, Inc. Data migration using read function triggers

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1648842A (zh) * 2004-01-29 2005-08-03 株式会社日立制作所 具有多个接口的存储装置
US20070055715A1 (en) * 2005-09-07 2007-03-08 Kyosuke Achiwa Storage system, file migration method and computer program product
CN101079902A (zh) * 2007-06-29 2007-11-28 清华大学 海量数据分级存储方法
CN102215268A (zh) * 2011-07-14 2011-10-12 北京飞杰信息技术有限公司 一种迁移文件数据的方法和装置
CN102521138A (zh) * 2011-11-28 2012-06-27 成都市华为赛门铁克科技有限公司 数据迁移触发方法和装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337790A (ja) * 2000-05-24 2001-12-07 Hitachi Ltd 記憶システム及びその階層管理制御方法
US7293133B1 (en) * 2003-12-31 2007-11-06 Veritas Operating Corporation Performing operations without requiring split mirrors in a multi-class file system
US7441096B2 (en) * 2004-07-07 2008-10-21 Hitachi, Ltd. Hierarchical storage management system
US8924499B2 (en) * 2004-12-14 2014-12-30 International Business Machines Corporation Operating system migration with minimal storage area network reconfiguration
US7529903B2 (en) * 2005-07-05 2009-05-05 International Business Machines Corporation Systems and methods for memory migration
CN1959717B (zh) * 2006-10-09 2011-09-28 北京道达天际软件技术有限公司 订单驱动的海量遥感数据集群化预处理系统及其方法
CN101299695A (zh) * 2007-04-30 2008-11-05 北京亚细亚智业科技有限公司 一种基于以太网的集群式多级存储管理系统及方法
US8914340B2 (en) * 2008-02-06 2014-12-16 International Business Machines Corporation Apparatus, system, and method for relocating storage pool hot spots

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1648842A (zh) * 2004-01-29 2005-08-03 株式会社日立制作所 具有多个接口的存储装置
US20070055715A1 (en) * 2005-09-07 2007-03-08 Kyosuke Achiwa Storage system, file migration method and computer program product
CN101079902A (zh) * 2007-06-29 2007-11-28 清华大学 海量数据分级存储方法
CN102215268A (zh) * 2011-07-14 2011-10-12 北京飞杰信息技术有限公司 一种迁移文件数据的方法和装置
CN102521138A (zh) * 2011-11-28 2012-06-27 成都市华为赛门铁克科技有限公司 数据迁移触发方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2717167A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113835638A (zh) * 2021-09-24 2021-12-24 苏州浪潮智能科技有限公司 一种存储系统中垃圾回收目的块的确定方法、装置及设备
CN113835638B (zh) * 2021-09-24 2023-08-04 苏州浪潮智能科技有限公司 一种存储系统中垃圾回收目的块的确定方法、装置及设备

Also Published As

Publication number Publication date
US20130179635A1 (en) 2013-07-11
CN102521138B (zh) 2015-11-25
EP2717167A4 (en) 2014-10-29
CN102521138A (zh) 2012-06-27
WO2013078879A9 (zh) 2014-01-09
EP2717167A1 (en) 2014-04-09

Similar Documents

Publication Publication Date Title
WO2013078879A1 (zh) 数据迁移触发方法和装置
US9274954B1 (en) Caching data using multiple cache devices
US8904061B1 (en) Managing storage operations in a server cache
US8578101B2 (en) Calculating read operations and filtering redundant read requests in a storage system
US10154112B1 (en) Cloud-to-cloud data migration via cache
US9182912B2 (en) Method to allow storage cache acceleration when the slow tier is on independent controller
US9424314B2 (en) Method and apparatus for joining read requests
WO2011098017A1 (zh) 高速缓冲存储实现方法及装置
CA2810833A1 (en) Offload reads and writes
WO2012122915A1 (zh) 一种文件系统内读写数据的方法及装置
KR20140105298A (ko) 클라이언트에서 캐시를 이용하여 서버의 멀티 미디어 컨텐트를 스트리밍 재생하는 방법 및 이를 위한 장치
JP2008542887A5 (zh)
JP5611889B2 (ja) データ転送装置、データ送信システムおよびデータ送信方法
JP2012141943A (ja) Ｓａｓエキスパンダ接続ルーティング技法
WO2015154352A1 (zh) 分布式文件系统的数据迁移方法、装置及元数据服务器
US20160212198A1 (en) System of host caches managed in a unified manner
WO2012089144A1 (zh) 一种缓存分配方法及装置
WO2015039352A1 (zh) 缓存数据的方法和存储系统
WO2013004182A1 (zh) 应用程序虚拟化安装及加载方法及装置
WO2015067035A1 (zh) 数据拷贝管理装置及其数据拷贝方法
US7443872B1 (en) System and method for multiplexing channels over multiple connections in a storage system cluster
CN117112219A (zh) 主机内存数据访问的方法和装置
US10075505B2 (en) Transmitting data including pieces of data
US20160162216A1 (en) Storage control device and computer system
WO2014077451A1 (ko) Iscsi 스토리지 시스템을 이용한 네트워크 분산 파일 시스템 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12853181

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012853181

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE