WO2015145707A1 - 追記型記憶装置への書き込みデータ決定方法 - Google Patents

追記型記憶装置への書き込みデータ決定方法 Download PDF

Info

Publication number
WO2015145707A1
WO2015145707A1 PCT/JP2014/059067 JP2014059067W WO2015145707A1 WO 2015145707 A1 WO2015145707 A1 WO 2015145707A1 JP 2014059067 W JP2014059067 W JP 2014059067W WO 2015145707 A1 WO2015145707 A1 WO 2015145707A1
Authority
WO
WIPO (PCT)
Prior art keywords
write
data
storage device
once
storage
Prior art date
Application number
PCT/JP2014/059067
Other languages
English (en)
French (fr)
Inventor
司 柴山
幸徳 坂下
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to PCT/JP2014/059067 priority Critical patent/WO2015145707A1/ja
Publication of WO2015145707A1 publication Critical patent/WO2015145707A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks

Definitions

  • the present invention relates to a storage system.
  • a computer that manages data writing in a write-once storage device
  • the processor is based on data management information of a plurality of data stored in a temporary storage medium provided in the write-once storage device. Composing multiple data groups from the data, Based on the storage capacity of the write-once storage medium included in the write-once storage device, information on storage data of the higher-level storage device connected to the write-once storage device, and archive prediction information from the higher-level storage device to the write-once storage device
  • a computer is provided that determines a data group to be stored in a write-once storage medium from the data group and transmits an instruction to store the determined data group in the write-once storage medium to a write-once storage device.
  • FIG. 1 is a diagram for explaining the outline of the present invention.
  • FIG. 2 is an overall configuration diagram of the first embodiment.
  • FIG. 3 is a configuration diagram of the host computer and the file storage according to the first embodiment.
  • FIG. 4 is a configuration diagram of the block storage according to the first embodiment.
  • FIG. 5 is a configuration diagram of the write-once storage device according to the first embodiment.
  • FIG. 6 is a configuration diagram of the apparatus management server according to the first embodiment.
  • FIG. 7 is a configuration diagram of the hierarchy management server according to the first embodiment.
  • FIG. 8 is a diagram illustrating information of the file configuration management table according to the first embodiment.
  • FIG. 9 is a diagram illustrating information of the block configuration management table according to the first embodiment.
  • FIG. 1 is a diagram for explaining the outline of the present invention.
  • FIG. 2 is an overall configuration diagram of the first embodiment.
  • FIG. 3 is a configuration diagram of the host computer and the file storage according to the first embodiment.
  • FIG. 4 is a configuration
  • FIG. 10 is a diagram illustrating information of the write-once storage device configuration management table according to the first embodiment.
  • FIG. 11 is a diagram illustrating information of the configuration management table according to the first embodiment.
  • FIG. 12 is a diagram illustrating information of the file management table according to the first embodiment.
  • FIG. 13 is a diagram illustrating information of the movement policy table according to the first embodiment.
  • FIG. 14 is a diagram illustrating information in the determination criterion table according to the first embodiment.
  • FIG. 15 is a diagram illustrating information in the data group information table of the first embodiment.
  • FIG. 16 is a diagram illustrating information of the cache management table according to the first embodiment.
  • FIG. 17 is a diagram illustrating information in the write destination management table according to the first embodiment.
  • FIG. 1 is a diagram showing an outline of this embodiment.
  • the device management server 50 holds a storage management program 504, a file management table 508, a data group information table 511, and a write destination management table 513.
  • the file management table 508 includes file information held in the host computer 10 and the file server 20 and an estimated time for storing data in the write-once storage device 40 which is the end of the hierarchical storage.
  • the data group information table 511 includes information for grouping each file.
  • the write destination management table 513 includes information on the storage medium to which the data group is to be written.
  • the hierarchy management server 60 holds a hierarchy management program 604, a migration policy table 605, and file metadata 606.
  • the movement policy table 605 includes a data movement policy between devices.
  • the file metadata 606 includes metadata held by a file in the host computer or file server.
  • the write-once storage device 40 includes a cache memory 404, a write program 410, and a medium storage unit 407. A plurality of write-once storage media 408 are stored in the medium storage unit.
  • this embodiment By using this embodiment in such a case, it is possible to improve the capacity efficiency and the read performance.
  • a technology that reads data in advance (prefetch) if the purpose of use and its time are known, the read time is shortened, so it is possible to shorten the time to read data in advance.
  • the pre-read processing can be applied even to a large amount of data.
  • the summary writing is also effective for storage media other than write-once, and has utility other than improved read performance. For example, it is possible to reduce the CPU load due to the fact that defragmentation is not required for an HDD, and to improve the efficiency of data erasure by rewriting data in an erase unit or more for a semiconductor memory.
  • FIG. 2 is a block diagram showing a configuration example of the entire computer system 1.
  • the host computer 10 is connected to the file server 20 and the write-once storage device 40 via the data network 70a.
  • the file server 20 and the block storage 30 are connected via a data network 70b.
  • the host computer 10, file storage 20, block storage 30, write-once storage device 40, device management server 50, and hierarchy management server 60 are connected via a management network 80.
  • the data networks 70a and 70b do not need to be separated, and may be the same network.
  • the host computer 10 may be connected to the block storage 30.
  • the protocol of the data network 70 and the management network 80 may be any protocol such as FC (Fibre Channel) or IP (Internet Protocol), and the data network 70 and the management network 80 may be the same network.
  • the write-once storage device 40 and the device management server 50 are collectively referred to as a storage system 90.
  • the block storage 30B, the write-once storage device 40, and the device management server 50 are collectively referred to as a hybrid archive
  • FIG. 3 is a diagram showing an example of the host computer 10 and the file server 20.
  • the memory 102 stores an OS (Operating System) 103 and a device manager 106 for mounting a storage area of the storage apparatus.
  • the memory 102 includes an application 104 and a hierarchy management agent 105.
  • the CPU 101 operates the OS 103, the device manager 106, the application 104, and the hierarchy management agent 105 on the memory.
  • the hierarchy management agent 105 communicates with the hierarchy management program 604 in the hierarchy management server 60.
  • the data interface 107 is connected to the data network 70.
  • the management interface 108 is connected to the management network 80.
  • the data interface 107 and the management interface 108 may be the same.
  • the file control processor 202 operates the hierarchical management agent in the memory.
  • the host interface 201 is connected to the host computer 10 via the data network 70a.
  • the disk interface 205 is connected to the block storage 30 via the data network 70b.
  • the management interface 206 is connected to the device management server 50 via the management network 80.
  • the file control processor 202 mounts the volume of the block storage 30 and causes the file server 20 to operate as NAS (Network Attached Storage). Here, detailed operation of NAS is omitted.
  • NAS Network Attached Storage
  • the parity group 309 is created from a plurality of physical storage storage devices.
  • a plurality of parity groups 310 and 311 are created.
  • the logical volume 312 is a logical storage area created from the parity group, and is used as a storage area by being allocated to the host computer 10 or the file server 20.
  • One or more logical volumes 313 are created.
  • the host interface 301 is connected to the host computer 10 and the file server 20 via the data network 70.
  • the management interface 315 is connected to the device management server 50 via the management network 80.
  • FIG. 5 is a diagram showing an example of a write-once storage device.
  • the memory 403 holds a write management program 410, a reproduction program 411, an agent program 412, a changer program 413, and a write-once storage device configuration management table 414.
  • the writing program 410 is a program for writing data to the write-once storage medium 408 through the recording / reading unit 405.
  • the write-once storage medium 408 is a storage medium for storing data, and is a write-once storage medium that cannot be rewritten. It is composed of a hologram disc or a Blu-ray disc, and different types of discs may be mixed.
  • the number of write-once storage media 408 is larger than the number of recording / reading units 405.
  • the cache memory 404 is a storage medium that temporarily caches data sent from the upper layer, and is configured by SRAM, DRAM, flash memory, HDD, or the like. Further, the cache memory is not necessarily provided in the write-once storage device, and a part or all of the storage area of the upper block storage may be used as the cache memory of the write-once storage device. Even in this case, it is desirable to provide a write buffer for temporarily storing before actually writing to the write-once type storage medium. This is because when data reception from the host device is slower than writing to the write-once storage medium, writing is not performed efficiently, and a failure may occur.
  • the host interface 401 is connected to the host computer 10 via the data network 70.
  • the management interface 409 is connected to the device management server 50 via the management network 80.
  • FIG. 6 is a block diagram illustrating an example of the device management server 50.
  • the device management server 50 is connected to the host computer 10, the file server 20, the block storage 30, the write-once storage device 40, and the hierarchy management server 60 via the management network 80, and can acquire necessary information from each computer. Necessary information (including programs) can be given to each computer.
  • the device management server 50 includes a CPU 501, which is a processor, a NIC (Network Interface Card) 502, a memory 503, and an input / output device 520.
  • the CPU 501 executes a program developed on the memory 503.
  • the NIC 502 is an interface for connecting to the host computer 10, the file server 20, the block storage 30, the write-once storage device 40, and the hierarchy management server 60 included in the computer system 1 through the management network 80. Is done.
  • the storage management program 504 uses each table stored in the memory 503 to manage information on each management target (host computer 10, file server 20, block storage 30, write-once storage device 40, hierarchy management server 60). .
  • the storage management program 504 can communicate with the agent program 412 in the write-once storage device 40 and receive instructions and notification of information.
  • the write instruction program 506 is a program that gives an instruction to write data stored in the cache memory 404 in the write-once storage device 40 to the write-once storage medium 408.
  • FIG. 7 is a block diagram illustrating an example of the hierarchy management server 60.
  • the hierarchy management server 60 is connected to the host computer 10, the file server 20, the block storage 30, the write-once storage device 40, and the device management server 50 via the data network 70 or the management network 80, and acquires necessary information from each computer. And necessary information (including programs) can be given to each computer.
  • An input / output device 620 for operating the hierarchy management server 60 is connected to the hierarchy management server 60.
  • the input / output device 620 is a device such as a mouse, a keyboard, and a display, and is used to input / output information between the device management server 60 and an administrator (also referred to as a user).
  • the hierarchy management server 60 includes a CPU 601, which is a processor, a NIC 602, a memory 603, and an input / output device 620.
  • the CPU 601 executes a program developed on the memory 603.
  • the memory 603 stores a program executed by the CPU 601 and information necessary for executing the program. Specifically, the memory 603 stores a hierarchy management program 604, a migration policy table 605, and file metadata 606. Other programs may be stored.
  • the hierarchy management program 604 communicates with the hierarchy management agents 105, 205, and 305, acquires file information of the host computer 10 and the file server 20, and separates files or volumes of the host computer 10, the file server 20, and the block storage 30. This program moves to the host computer 10, the file server 20, and the block storage 30.
  • the file metadata 606 is a table showing attribute information of files in the host computer 10 and the file server 20.
  • FIG. 8 and subsequent figures are examples of tables stored in the memory in each computer.
  • FIG. 8 shows a file configuration management table 204 in the file server.
  • the file configuration management table 204 has the following information (2040) to (2042).
  • (2040) Device type Contains information on the device type of the file server.
  • (2041) Device identifier It has information that uniquely identifies the device that the file server has.
  • FIG. 9 shows a block configuration management table 304 in the block storage.
  • the block configuration management table 304 has the following information (3040) to (3043).
  • (3040) Device type Contains device type information of block storage.
  • (3041) Device identifier It has information that uniquely identifies the device that the block storage has.
  • (3043) Volume final access time It has information on the time when the last I / O occurred in the volume.
  • the volume last access time may be a time including I / O that does not actually access the storage medium because the target data has received a cache hit but received the read request.
  • FIG. 10 shows a write-once storage device configuration management table 414.
  • the write-once storage device configuration management table 414 has the following information (4140) to (4444).
  • (4140) Device type It has information on the type of device that the write-once storage device has.
  • (4141) Device identifier It has information that uniquely identifies a device of a write-once storage device.
  • (4142) Specification In the case of a cache and an optical disc, the size is set.
  • Cache threshold It has a threshold value serving as a reference for data write timing when data is stored in the cache memory 404 of the write-once storage device 40.
  • (4144) Write unit Indicates the minimum size that can be written to a storage medium such as an optical disc at one time.
  • FIG. 11 is an explanatory diagram of the configuration management table 507.
  • the configuration management table has the following information (5070) to (5077).
  • Information on the configuration management table is generated by the storage management program 504 based on the file configuration management table 204 in the file server, the block configuration management table 304 in the block storage, and the write-once storage device configuration management table 414.
  • a device to be managed has information indicating one of a block storage, a file server, and a write-once storage device.
  • (5072) Device type It has information on the device type of each managed device.
  • (5073) Device identifier It has information that uniquely identifies the device of each managed device.
  • Cache threshold It has a threshold value serving as a reference for data write timing when data is stored in the cache memory 404 of the write-once storage device 40.
  • Write unit Indicates the minimum size that can be written to a storage medium such as an optical disc at one time.
  • (5077) Volume final access time It has information on the time when the last I / O occurred in the volume.
  • FIG. 12 explains the file management table 508.
  • the file management table has the following information (5080) to (50892).
  • (5080) File identifier. Indicates information that uniquely identifies a file to be managed.
  • (5081) File size. Indicates the size of the file.
  • (5082) Last access time. Indicates the time when the file was last accessed.
  • (5083) Original storage location. Indicates the location of the storage device where the file was generated.
  • Current storage location Indicates the location of the storage device where the file currently exists.
  • Use application Shows information about applications that use the file.
  • (5086) Backup time Indicates the time when the file was last backed up.
  • (5088) Group ID The information which identifies the file group of the said file determined by the information of the judgment reference
  • Host Indicates the identifier of the host where the file exists.
  • Archive prediction time The estimated archive time of the file calculated from the information in the migration policy table 509 and the last access time 5082 is shown.
  • (50892) Extension If there is extension information of the file, it is indicated.
  • FIG. 13 shows an example of the movement policy table 509.
  • the movement policy table has the following information (5090) to (5092).
  • the data included in ST1 when the volume of ST1 is used in Host1 indicates that the data is moved to another tier called ST2 if there is no access for one month.
  • the policy is set for each host, but the policy may be set for each file or directory accessed by the host.
  • the data used from the same analysis application is considered to be read in principle at the same timing, and the priority is set to 0 so as to be in the same group.
  • the same timing backup of the reference ID 2 it is expected that data backed up at the same timing have the same access tendency. It is estimated that the same access tendency will continue after archiving, so it becomes a criterion for group selection.
  • the same application with the reference ID 1 is used as the group selection reference because the data used from the same application as the active data has a relatively high expected value read at the same timing after archiving.
  • FIG. 15 is an example of the data group information table 511.
  • the data group information table has the following information (5110) to (5114).
  • (5110) Group ID This is an identifier for identifying a file group.
  • (5111) Judgment result As a result of grouping according to the information of the judgment criteria table, it shows which criteria are met.
  • (5113) Reason for reference ID2. When it corresponds to standard ID2, the specific content is shown.
  • the number of reference ID reason columns in the data group information table increases with the number of reference IDs in the determination reference table 510.
  • FIG. 16 is an example of the cache management table 512.
  • the cache management table 512 has the following information (5120) to (5122).
  • (5120) File identifier Indicates the identifier of a file that exists in the cache file.
  • (5121) File size Indicates the size of the file.
  • (5122) Group ID Indicates an identifier for identifying the file group of the file.
  • FIG. 17 is an example of the write destination management table 513.
  • the write destination management table has the following information (5130) to (5131).
  • (5130) Group ID Indicates the identifier of the file group. For example, if “N + M” is described, not only one identifier but also a plurality of file groups can be written to the write-once disc identifier.
  • (5131) Write-once disc identifier Indicates the identifier of a write-once disc to which a file group is to be written. It is possible to describe not only one identifier but also a plurality of write-once disc identifiers.
  • FIG. 18 is an example of file metadata.
  • the file metadata 606 has the following information (6060) to (6067).
  • (6060) File identifier. Indicates the file identification information.
  • (6061) File size. Indicates the size of the file.
  • (6062) Update date and time. Indicates the date and time when the file was updated.
  • (6063) Last access date and time. Indicates the date and time when the file was last accessed.
  • (6064) Storage location Indicates the location of the storage device where the file currently exists.
  • a user Indicates the user of the file. You may use file creator information.
  • (6066) File permission. Indicates the access authority to the file.
  • (6067) Host. Indicates the identifier of the host that accesses the file.
  • FIG. 19 shows a flow S10 of information acquisition processing by the device management server 50 and the hierarchy management server 60 in the first embodiment.
  • the processing of Step 1000 and Step 1001 is executed either periodically or at the time of file creation.
  • the processing after S1002 is executed either periodically or when the file metadata 606 is updated.
  • the hierarchy management program 604 periodically collects file information from the OS 103 and the application 104 of each host computer 10.
  • the hierarchy management program 604 updates the file metadata 606 using the information acquired in Step 1000.
  • the storage management program 504 collects the file metadata 606 of the hierarchy management server 60 and the information of the application 104 of the host computer 10.
  • Step 1003 The storage management program 504 uses the information acquired in Step 1002 to update the file identifier, file size, last access time, storage location information, Host information, and application information in the file management table 508.
  • Step 1004 The storage management program 504 checks whether or not the updated usage application information indicates backup software, and if it is backup software, the process proceeds to Step 1005. Otherwise, go to Step 1006.
  • Step 1005 The storage management program 504 acquires the backup time of each file of the migration policy from the application 104 of the host computer 10 to the optical archive.
  • Step 1006 The storage management program 504 checks whether or not the updated usage application information indicates an archive data usage application. If the storage management program 504 is an archive data usage application, the processing proceeds to Step 1007. Otherwise, go to Step 1008.
  • the storage management program 504 acquires the usage method of the file archived from the archive data usage application from the application 104 of the host computer 10.
  • the usage method in the case of an archive data analysis application, an execution file to be used, a target file, an execution time thereof, and the like are included.
  • the storage management program 504 acquires information (for example, file extension) that can identify the application to be used from the host computer 10.
  • the storage management program 504 updates the file management table 508 using the acquired various information.
  • FIG. 20 shows a flow S11 of processing for setting data group information in the first embodiment.
  • the processing for each file is described at the timing when the file information is updated, but this flow may be periodically executed for all files.
  • the following steps are repeated for each generated and updated file and each host.
  • the storage management program 504 acquires update information (application, backup, etc.) related to the contents of the determination criteria table from the file management table 508, and creates information corresponding to the determination result of the data group information table 511.
  • update information application, backup, etc.
  • Step 1101 The storage management program 504 checks whether a group having the same reference content already exists in the data group information table 511, and if there is, proceeds to Step 1103. If not, the process proceeds to Step 1102.
  • Step 1102 The storage management program 504 assigns an unused group ID to create a new group, sets the group ID, sets the group ID, the determination result, and the reason for each reference ID in the data group information table. .
  • Step 1103 The storage management program 504 determines a file group of the file and sets a group ID in the file management table 508.
  • Step 1104 The storage management program 504 derives the time to be archived from the last access time and the data management policy, and sets a value in the predicted archive time column 50891 of the file management table 508.
  • Step 1201 The hierarchy management program 604 checks whether there is a file corresponding to the condition of the policy 5092 of the migration policy table 509. (Step 1202) If there is a corresponding file in the migration policy table, the process proceeds to Step 1203. If not, go to the next file check. (Step 1203) The hierarchy management program 604 copies the file to another storage apparatus or write-once storage apparatus via the hierarchy management agent. The above processing is repeated for each generated and updated file and for each host.
  • the storage management program 504 stores the estimated archive time of the upper tier (hierarchies other than the write-once storage device), the total file size in the cache memory, and the medium of the write-once storage device described in the configuration management table 507.
  • the size 5074 and the writing unit 5076 are compared. Specifically, a file group exceeding the writing unit is specified for the total size of all the file groups in the cache memory. If no file group exceeds the writing unit, all file groups are targeted. Next, among these file groups, the size of the files that are archived in the upper layer is added from the earliest time, and the file group that reaches the medium size 5047 of the write-once type storage device is written as the file group that writes out the file. decide.
  • the reason for determining the file group that reaches the medium size 5047 of the write-once type storage device as the file group to be written out is that if the medium size is reached slowly, the time that remains in the cache becomes long and the cache is compressed.
  • the storage management program 504 checks whether the group ID of the determined file group is registered as a write destination in the write destination management table. If registered, the process proceeds to Step 1306. If not registered, the process proceeds to Step 1305.
  • Step 1305) The storage management program 504 selects a medium that is not registered in the write destination management table from the configuration management table, and registers the ID of the file group specified this time and an unused write-once disc identifier in the write destination management table. .
  • Step 1306) The write instruction program 506 outputs an instruction to write the data of the specified file group to the storage medium described in the write destination management table to the write program 410 via the agent program 412 of the write-once storage device.
  • FIG. 23 shows a flow S14 of the data writing process in the first embodiment.
  • the process of FIG. 23 is executed at the timing when the data write instruction is transmitted in the flow S1306 of FIG.
  • the write program 410 issues an instruction to take out the designated storage medium to the changer program 413.
  • the changer program 413 drives the medium transport unit 406, takes out the corresponding write-once storage medium 408 from the medium storage unit 407, and sets the storage medium in the recording / reading unit 405.
  • the write program 410 writes the file group to the designated storage medium.
  • FIG. 24 is an explanation of the archive access history table 514.
  • the archive access history table has the following information (5140) to (5144).
  • (5140) File identifier Indicates the file identification information.
  • (5141) File size Indicates the size of the file.
  • (5142) Group ID Indicates the identification information of the file group.
  • (5143) Storage location Indicates on which medium in the write-once storage device the file is stored.
  • Access history The time when the archived file was read is retained as a history.
  • Step 1602 The storage management program 504 refers to the archive access history table and checks whether there is a file stored in another disk with the same access history (eg, read twice or more at the same timing). To do. Even if the timing is not exactly the same, it may be called twice or more during a specific period, or any other tendency may be used. If there is the same trend, the process proceeds to Step 1603. If there are no similar trends, the process ends.
  • Step 1603 The writing program 410 once reads a file having the same tendency into the cache and writes it into another write-once storage medium.
  • Step 1604 The group ID of the file written by the writing program 410 is updated, and the writing destination management table is also updated to the group ID of the current file and the written-once disk identifier.
  • the write program 410 executes the unreadable process for the corresponding file portion in the original write-once disc.
  • the writing program 410 writes a file with the same tendency to another write-once disk, but the access tendency is the same for a write-once storage medium in which some of the files with the same tendency are already stored.
  • some of the files having the same tendency may be stored in a write-once storage medium in which some files are already stored.
  • files archived in the write-once storage device can be stored in a capacity-efficient manner, and the reading speed can be improved.
  • a large-capacity storage medium such as a hologram disk as a write-once storage medium
  • a large-capacity cache is required to store the data in the cache in order to group related data to be written to the storage medium. Cost.
  • the data to be stored in the storage medium can be determined in consideration of the data that has not yet been stored in the cache, so that the amount of cache required for grouping can be reduced.
  • Example 2 The difference between the first embodiment and the second embodiment is the processing content of the data write instruction to the write-once type storage device.
  • the first embodiment when writing a file group to the medium, only one specific file group is specified and written, but in the second embodiment, a process of writing a plurality of file groups together as one file group is also included.
  • Processing flow S15 is shown in FIG. Note that the processing in FIG. 26 is performed at the timing when data is moved to the write-once storage device. (Step 1500) This Step is the same as the processing from Step 1300 to Step 1304 of the first embodiment.
  • Step 1501 The storage management program 504 has a predicted archive time of a file group in the upper hierarchy (hierarchies other than the write-once storage device), the total file size in the cache memory, and the size of the medium of the write-once storage device described in the configuration management table. 5074 and the write unit 5076 are compared. Specifically, a file group exceeding the writing unit is specified for the total size of all the file groups in the cache memory. (Step 1502) It is checked whether there is a file group exceeding the writing unit. If the result is Yes, the process proceeds to Step 1505. If No, the process proceeds to Step 1503. (Step 1503) The storage management program 504 checks whether there is a combination of file groups that differ only in some contents of the file group information table.
  • Step 1504. If there is, proceed to Step 1504. If not, go to Step 1505.
  • Step 1504 The storage management program 504 determines a plurality of file groups having a total size closest to the medium size among the plurality of file groups as file groups to be written on the same disk.
  • Step 1505 The storage management program 504 determines a single file group closest to the medium size as a file group to be written to the disk.
  • Step 1506 The storage management program 504 updates the information of one or more file groups and write-once disk identifiers in the write destination management table.
  • Step 1507 The storage management program 504 instructs the write program 410 of the write-once disk device to write the data of the specified file group to the storage medium described in the write destination management table.
  • the processing criteria for determining whether to combine a plurality of file groups into one may be other criteria. For example, when the write-once storage device has a small number of free media, an algorithm that puts a plurality of file groups into one with emphasis on capacity efficiency may be used. Also, using the estimated archive time, check if the cache memory overflows due to the large file size when the file is next archived, and manage only in the cache memory. When it is necessary to do so, a processing standard of collecting a plurality of file groups may be used. Other processing standards may also be used.
  • the second embodiment writes a plurality of file groups together on one medium, thereby reducing the number of additional recordings and reducing waste of capacity.
  • Example 3 will be described.
  • the difference between the first embodiment and the third embodiment is that the data is processed in file units in the third embodiment, whereas the data is processed in block units in the third embodiment.
  • the third embodiment an example is shown in which blocks are handled in units of LUs, but it may be considered in units of LBA (Logical Block / Address).
  • data is grouped using a lot of information such as application usage methods, but in the third embodiment, only access tendency information is used.
  • FIG. 27 explains the block management table 515.
  • the block management table has the following information (5150) to (5159).
  • (5150) Block identifier Set an identifier for the unit that manages the data. When a block is handled in units of LBA, an LBA start address and an end address are set here.
  • Last access date and time Indicates the date and time when the last I / O occurred to the block.
  • Original storage location Indicates the location of the device where the block was created.
  • (5154) Current storage location Indicates the location of the existing device in the block.
  • Backup date and time Indicates the date and time when the block was last backed up.
  • Purpose of use Indicates the purpose (application, execution time, etc.) for which the data of the block is used after archiving.
  • Group ID The information which identifies the data group of the said block determined by the information of the judgment criteria table 510 or the data group information table 511 is shown.
  • Host Indicates the identifier of the host to which the block is assigned.
  • Archive prediction time The archive predicted time of the block calculated from the information of the movement policy table 509 and the last access time 5152 is shown.
  • the storage management program 504 acquires configuration information and access time to the LU from the block storage 30.
  • the block management table is updated using the information acquired by the storage management program 504.
  • the table referred to in S1100 is changed from the file management table to the block management table, and the judgment criterion is the backup time.
  • the management target is changed for each storage, not for each host or file.
  • the file migration via the hierarchical management agent in S1203 is changed to LU migration processing.
  • Differences from the write instruction processing flow S13 (FIG. 17) in the first embodiment are as follows.
  • the file information notified in S1302 is volume information.
  • the storage destination of the information notified in S1303 is the volume management table.
  • the identifier of the cache management table is changed from the file identifier to the block identifier.
  • the file group becomes a data group.
  • the cache memory file is changed to the cache memory data, and the specified file is changed to the specified data.
  • the file group becomes a data group.
  • the file group becomes a data group.
  • the file group becomes a data group.
  • the above is the processing of the write instruction.
  • the write execution process flow S14 (FIG. 23) in the second embodiment is different in that the write target in Step 1402 is changed from a file group to a data group.
  • the target to be archived in the write-once type storage device can be handled not only in the file but also in the block unit, and can be stored in the write-once type storage device in a capacity efficient manner, and the speed at the time of reading can be improved. Is possible.

Abstract

　第１の記憶装置に接続される第２の記憶装置と、第２の記憶装置に接続される追記型記憶装置と、追記型記憶装置のデータ書き込みを管理する装置管理サーバと、を含むハイブリットアーカイブシステムであって、装置管理サーバは、書き換え可能な記憶媒体に格納される複数の第２記憶装置格納データのデータ管理情報に基づき、複数の第２記憶装置格納データから複数のデータ群を構成し、第１記憶装置に格納される複数の第１記憶装置格納データのデータ管理情報、ライトワンス記憶媒体の記憶容量、及び第１の記憶装置から第２の記憶装置へのデータ移動情報に基づき、複数のデータ群からライトワンス記憶媒体に書き込むデータ群を決定する。

Description

[規則37.2に基づきISAが決定した発明の名称]　追記型記憶装置への書き込みデータ決定方法
　本発明は記憶システムに関する。
　ストレージシステムのリード速度を向上させる技術として、アクセス頻度が所定値以上でかつ相関関係のある複数のファイルを１つのグループとして抽出し、グループのデータをディスク上の連続するブロックに書込む技術がある（特許文献１参照）。
特開平０８－２６３３３５号公報
　特許文献１記載の技術では、記憶媒体に格納するデータを決定する際、将来他のストレージ装置から受信するデータについて考慮していない。その結果、まとめて書き込むべき、アーカイブ装置のキャッシュに格納されているデータと、他のストレージ装置に格納されているデータとが、関連性があっても異なる記憶媒体に書きこまれる可能性がある。この場合、関連性のあるデータ群をリードする場合、複数のディスクから読み込む事が必要となり、応答時間を短縮する事ができない。
　上記課題を解決するために、追記型記憶装置のデータ書き込みを管理する計算機であって、プロセッサは追記型記憶装置の備える一時記憶媒体に格納された複数のデータのデータ管理情報に基づき、複数のデータから複数のデータ群を構成し、
　追記型記憶装置の備えるライトワンス記憶媒体の記憶容量、追記型記憶装置に接続される上位記憶装置の格納データに関する情報、及び上位記憶装置から追記型記憶装置へのアーカイブ予測情報に基づき、複数のデータ群からライトワンス記憶媒体に格納するデータ群を決定し、決定されたデータ群のライトワンス記憶媒体への格納指示を追記型記憶装置に送信することを特徴とする計算機を提供する。
　本発明の一つの効果により、他装置からのデータ受信を考慮して、関連するデータをまとめて記憶媒体に格納する事ができる。
図1は本実施例の発明の概要を説明する図である。 図２は実施例１の全体の構成図である。 図３は実施例１のホスト計算機とファイルストレージの構成図である。 図４は実施例１のブロックストレージの構成図である。 図５は実施例１の追記型記憶装置の構成図である。 図６は実施例１の装置管理サーバの構成図である。 図７は実施例１の階層管理サーバの構成図である。 図８は実施例１のファイル構成管理テーブルの情報を示す図である。 図９は実施例１のブロック構成管理テーブルの情報を示す図である。 図１０は実施例１の追記型記憶装置構成管理テーブルの情報を示す図である。 図１１は実施例１の構成管理テーブルの情報を示す図である。 図１２は実施例１のファイル管理テーブルの情報を示す図である。 図１３は実施例１の移動ポリシーテーブルの情報を示す図である。 図１４は実施例１の判断基準テーブルの情報を示す図である。 図１５は実施例１のデータ群情報テーブルの情報を示す図である。 図１６は実施例１のキャッシュ管理テーブルの情報を示す図である。 図１７は実施例１の書込み先管理テーブルの情報を示す図である。 図１８は実施例１のファイルメタデータの情報を示す図である。 図１９は実施例１の情報取得のフローを示す図である。 図２０は実施例１のデータ群情報設定のフローを示す図である。 図２１は実施例１の階層化による移動のフローを示す図である。 図２２は実施例１の書込み指示のフローを示す図である。 図２３は実施例１の書込み処理のフローを示す図である。 図２４は実施例１のアーカイブアクセス履歴テーブルの情報を示す図である。 図２５は実施例１の追記型記憶装置内でのデータ入換え処理のフローを示す図である。 図２６は実施例２の書込み指示のフローを示す図である。 図２７は実施例３のブロック管理テーブルの情報を示す図である。
　図１は本実施例の概略を示す図である。装置管理サーバ５０は、ストレージ管理プログラム５０４とファイル管理テーブル５０８とデータ群情報テーブル５１１と書込み先管理テーブル５１３とを保持する。ファイル管理テーブル５０８にはホスト計算機１０やファイルサーバ２０に保持されるファイル情報や階層ストレージの末端である追記型記憶装置４０へデータが保存される予測時間が含まれる。データ群情報テーブル５１１には、各ファイルをグループ化するための情報が含まれる。書込み先管理テーブル５１３にはデータ群を書き込むべき記憶媒体の情報が含まれる。階層管理サーバ６０は、階層管理プログラム６０４と移動ポリシーテーブル６０５とファイルメタデータ６０６を保持する。移動ポリシーテーブル６０５には各装置間のデータ移動ポリシーが含まれる。ファイルメタデータ６０６はホスト計算機やファイルサーバ内のファイルが持つメタデータが含まれる。追記型記憶装置４０は、キャッシュメモリ４０４と書込みプログラム４１０と媒体格納部４０７とを有する。媒体格納部には複数の追記型記憶媒体４０８が格納される。
　ストレージ管理プログラム５０４は定期的、もしくはデータ生成のタイミングでホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、追記型記憶装置４０、階層管理サーバ６０からデータに関する情報を収集しファイル管理テーブル５０８に保存する。次に収集したデータをデータ群情報テーブル５１１の情報を利用しグルーピングする。さらに移動ポリシーテーブル６０５の情報からデータが追記型記憶装置へ保存される時間を予測する。最後に、上位階層の移動傾向、キャッシュ上限サイズ（閾値）、追記型記憶媒体４０８の書込み単位、記憶媒体のサイズを考慮して、同一データ群のデータを書込み先管理テーブル５１３の情報に従いデータ書込みを実施する。
　本実施例により、追記型記憶媒体４０８にデータを書き込むときに追記型記憶装置内のデータだけでなく、これから追記型記憶装置内に移動される予定のデータまで考慮することで、膨大なキャッシュメモリを必要とせずに、一度に読まれる可能性のあるデータをより効率的にまとめて書き込むことができる。また、上位装置の記憶媒体もグループ化のためのキャッシュメモリとして使えるため、実質的にキャッシュメモリの容量追加と同様の効果を奏すると考えることもできる。
　その結果、ディスクから効率的にデータを読み込むことができ、リード速度を向上させることが出来る。特に、媒体の搬送を必要とする追記型記憶装置の場合はリードの際に、読み込むデータが複数の追記型記憶媒体に分散していると搬送時間を要するため、本実施例はより有効である。
　また、前述の様に、追記型記憶媒体は、データを追記する際には情報保存不可な領域が発生するため、本実施例により、データの追記型記憶媒体４０８への追記回数を減らし、容量効率よく記憶することが可能となる。例えば、記録密度の大きいホログラムディスクでは追記時に無駄な領域が大きくなってしまう。容量に無駄が発生するとデータサイズとしては１枚にまとめて書き込み可能なデータが、複数追記型記憶媒体に跨ってしまい、容量低下するだけでなく、リード速度が悪化する。また、ライトの最小単位が大きいなど、データを細かい単位で書き込む事そのものが難しい場合も考えられる。このような場合に本実施例を用いることで、容量効率の向上及び、リード性能の向上を実現することが可能となる。また、利用目的やその時間がわかっていれば事前にデータを読み出すような技術（プリフェッチ）を適用する場合、リード時間が短縮されるため、事前にデータを読み出す時間を短縮することが可能となり、大量データを対象にしても事前読み出し処理を適用することができるようになる。なお、まとめ書きはライトワンス以外の記憶媒体にも有効であり、リード性能向上以外の効用をもたらす。例えば、ＨＤＤであればデフラグが不要になることによるＣＰＵ負荷の低減、半導体メモリであれば消去単位以上でのデータの書き換えによるデータ消去の効率化などが挙げられる。
　次に本実施例の詳細を説明する。図２は全体の計算機システム１の構成例を示すブロック図である。ホスト計算機１０はデータネットワーク７０ａを介してファイルサーバ２０と、追記型記憶装置４０と接続される。ファイルサーバ２０とブロックストレージ３０はデータネットワーク７０ｂを介して接続される。なお、ホスト計算機１０、ファイルストレージ２０、ブロックストレージ３０、追記型記憶装置４０、装置管理サーバ５０、階層管理サーバ６０は管理ネットワーク８０を介して接続される。なお、データネットワーク７０ａ、７０ｂは分かれている必要はなく、同一のネットワークでも良い。ホスト計算機１０がブロックストレージ３０と接続されても良い。またデータネットワーク７０や管理ネットワーク８０のプロトコルはＦＣ（Ｆｉｂｒｅ　Ｃｈａｎｎｅｌ）やＩＰ（Ｉｎｔｅｒｎｅｔ　Ｐｒｏｔｏｃｏｌ）など任意のプロトコルで構わなく、データネットワーク７０と管理ネットワーク８０が同一ネットワークであってもよい。なお、追記型記憶装置４０と装置管理サーバ５０をまとめて記憶システム９０と呼ぶ。さらに、ブロックストレージ３０Ｂと、追記型記憶装置４０と、装置管理サーバ５０と、をまとめてハイブリットアーカイブシステム９５と呼ぶ。
　図３はホスト計算機１０とファイルサーバ２０の例を示す図である。メモリ１０２にはＯＳ（Ｏｐｅｒａｔｉｎｇ　Ｓｙｓｔｅｍ）１０３とストレージ装置の記憶領域をマウントするためのデバイスマネージャ１０６が格納される。メモリ１０２にはアプリケーション１０４と階層管理エージェント１０５を含む。ＣＰＵ１０１がメモリ上のＯＳ１０３やデバイスマネージャ１０６、アプリケーション１０４、及び階層管理エージェント１０５を動作させる。階層管理エージェント１０５は階層管理サーバ６０内の階層管理プログラム６０４と通信する。データインタフェース１０７はデータネットワーク７０と接続される。管理インタフェース１０８は管理ネットワーク８０と接続する。なお、データインタフェース１０７と管理インタフェース１０８は同じであってもよい。
　ファイルサーバ２０のメモリ２０３にはファイル構成管理テーブル２０４と階層管理エージェント２０５が格納される階層管理エージェント２０５は階層管理サーバ６０内の階層管理プログラム６０４と通信する。ファイル制御プロセッサ２０２が、メモリ内の階層管理エージェントを動作させる。ホストインタフェース２０１はデータネットワーク７０ａを介してホスト計算機１０と接続する。ディスクインタフェース２０５はデータネットワーク７０ｂを介してブロックストレージ３０と接続する。管理インタフェース２０６は管理ネットワーク８０を介して装置管理サーバ５０と接続する。ファイル制御プロセッサ２０２はブロックストレージ３０のボリュームをマウントしファイルサーバ２０をＮＡＳ（Ｎｅｔｗｏｒｋ　Ａｔｔａｃｈｅｄ　Ｓｔｏｒａｇｅ）として動作させる。ここではＮＡＳの詳細な動作は省略する。
　図４はブロックストレージ３０の例を示す図である。メモリ３０３はブロック構成管理テーブル３０４と階層管理エージェント３０５を保持する。階層管理エージェント３０５は階層管理サーバ６０内の階層管理プログラム６０４と通信する。ブロック制御プロセッサ３０２が、メモリ内の階層管理エージェント３０５を動作させる。物理ストレージデバイス３０６は１つ以上のＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）３０７や１つ以上のＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）３０８といったデバイスを備える。この物理ストレージデバイス３０６は同一の性質をもつ物理記憶領域でもよく、複数の異なる性質をもつ物理記憶領域からなってもよい。なお、物理ストレージデバイスの種類はＨＤＤやＳＳＤだけでなく任意の記憶デバイスでよい。パリティグループ３０９は複数の物理ストレージストレージデバイスから作成される。複数のパリティグループ３１０や３１１が作成される。論理ボリューム３１２はパリティグループから作成される論理的な記憶領域であり、ホスト計算機１０やファイルサーバ２０へ割り当てることで記憶領域として利用される。論理ボリューム３１３は１つ以上作成される。ホストインタフェース３０１はデータネットワーク７０を介してホスト計算機１０やファイルサーバ２０と接続する。管理インタフェース３１５は管理ネットワーク８０を介して装置管理サーバ５０と接続する。
　図５は追記型記憶装置の例を示す図である。メモリ４０３は書込み管理プログラム４１０と再生プログラム４１１とエージェントプログラム４１２とチェンジャプログラム４１３と追記型記憶装置構成管理テーブル４１４を保持する。書込みプログラム４１０は記録読み書き部４０５を通じて追記型記憶媒体４０８にデータを書き込むプログラムである。追記型記憶媒体４０８はデータを記憶する記憶媒体であり、書き換えの出来ないライトワンスの記憶媒体である。ホログラムディスクやブルーレイディスクで構成され、種類の異なるディスクが混載されてよい。追記型記憶媒体４０８の数は記録読み書き部４０５の数よりも多い。再生プログラム４１１は記録読み書き部４０５を通じて媒体のデータを再生するプログラムである。エージェントプログラム４１２は装置管理サーバ５０のストレージ管理プログラム５０４と書込み指示プログラム５０６と通信するプログラムである。チェンジャプログラム４１３は媒体格納部４０７に含まれる追記型記憶媒体４０８を、媒体搬送部４０６を利用して記録読み書き部４０５へ搬送、また記録読み書き部４０５から媒体格納部４０７へ搬送するプログラムである。追記型記憶装置構成管理テーブル４１４の詳細は後述する。追記型記憶装置内のコントローラ４０２が、メモリ４０３内のプログラムを動作させる。キャッシュメモリ４０４は上位階層から送られたデータを一時的にキャッシュしておく記憶媒体であり、ＳＲＡＭ、ＤＲＡＭ、フラッシュメモリ、又はＨＤＤなどにより構成される。また、このキャッシュメモリを必ずしも追記型記憶装置に備える必要はなく、上位のブロックストレージの記憶領域の一部又は全部を追記型記憶装置のキャッシュメモリとして用いてもよい。なお、この場合であっても、追記型記憶媒体に実際に書き込む前に一時記憶するライトバッファは備えている事が望ましい。これは上位装置からのデータ受信が、追記型記憶媒体への書き込みに対して遅い場合、書き込みが効率的に行われず、さらには障害が発生する可能性があるためである。ホストインタフェース４０１はデータネットワーク７０を介してホスト計算機１０と接続する。管理インタフェース４０９は管理ネットワーク８０を介して装置管理サーバ５０と接続する。
　図６は装置管理サーバ５０の例を説明するブロック図である。装置管理サーバ５０は管理ネットワーク８０を介してホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、追記型記憶装置４０、階層管理サーバ６０と接続され、各計算機から必要な情報を取得することができ、各計算機に必要な情報（プログラムを含む）を与えることができる。
　装置管理サーバ５０は、プロセッサであるＣＰＵ５０１、ＮＩＣ（Ｎｅｔｗｏｒｋ　Ｉｎｔｅｒｆａｃｅ　Ｃａｒｄ）５０２、メモリ５０３、及び入出力装置５２０を含む。ＣＰＵ５０１は、メモリ５０３上に展開されるプログラムを実行する。ＮＩＣ５０２は、管理ネットワーク８０を通じて、計算機システム１に含まれるホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、追記型記憶装置４０、階層管理サーバ６０に接続するためのインタフェースであり、例えばＩＰプロトコルが利用される。メモリ５０３は、ストレージ管理プログラム５０４、書込み指示プログラム５０６、構成管理テーブル５０７、ファイル管理テーブル５０８、移動ポリシーテーブル５０９、判断基準テーブル５１０、データ群情報テーブル５１１、キャッシュ管理テーブル５１２、書込み先管理テーブル５１３、及びアーカイブアクセス履歴テーブル５１４、を格納する。なお、他のプログラム及びテーブルが格納されていてもよい。
　ストレージ管理プログラム５０４は、メモリ５０３に格納される各テーブルを使用し、各管理対象（ホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、追記型記憶装置４０、階層管理サーバ６０）の情報を管理する。また、ストレージ管理プログラム５０４は追記型記憶装置４０内のエージェントプログラム４１２と通信し指示出しや情報の通知を受けることができる。
　書込み指示プログラム５０６は、追記型記憶装置４０内のキャッシュメモリ４０４内に溜まっているデータを追記型記憶媒体４０８に書き出す指示を与えるプログラムである。
　装置管理サーバ５０には、当該装置管理サーバ５０を操作するための入出力装置５２０が接続される。入出力装置５２０は、マウス、キーボード及びディスプレイなどの装置であり、装置管理サーバ５０と管理者（ユーザとも呼ぶ）との間で情報を入出力するために利用される。
　図７は階層管理サーバ６０の例を説明するブロック図である。階層管理サーバ６０は、データネットワーク７０または管理ネットワーク８０を介してホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、追記型記憶装置４０、装置管理サーバ５０と接続され各計算機から必要な情報を取得することができ、各計算機に必要な情報（プログラムを含む）を与えることができる。階層管理サーバ６０には、当該階層管理サーバ６０を操作するための入出力装置６２０が接続される。入出力装置６２０は、マウス、キーボード及びディスプレイなどの装置であり、装置管理サーバ６０と管理者（ユーザとも呼ぶ）との間で情報を入出力するために利用される。
　階層管理サーバ６０は、プロセッサであるＣＰＵ６０１、ＮＩＣ６０２、メモリ６０３、及び入出力装置６２０を含む。ＣＰＵ６０１は、メモリ６０３上に展開されるプログラムを実行する。メモリ６０３は、ＣＰＵ６０１によって実行されるプログラム及び当該プログラムを実行するために必要な情報を格納する。具体的には、メモリ６０３は、階層管理プログラム６０４、移動ポリシーテーブル６０５、ファイルメタデータ６０６、を格納する。なお、他のプログラムが格納されていてもよい。
　階層管理プログラム６０４は、階層管理エージェント１０５、２０５、３０５、と通信し、ホスト計算機１０、ファイルサーバ２０のファイル情報を取得し、ホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０のファイルまたはボリュームを別のホスト計算機１０、ファイルサーバ２０、ブロックストレージ３０、へ移動するプログラムである。ファイルメタデータ６０６は、ホスト計算機１０、ファイルサーバ２０内のファイルの属性情報を示すテーブルである。
　図８以降は各計算機内のメモリに格納されるテーブルの一例である。図８はファイルサーバ内のファイル構成管理テーブル２０４である。ファイル構成管理テーブル２０４は以下の（２０４０）乃至（２０４２）の情報を持つ。
（２０４０）デバイス種別。ファイルサーバが持つデバイスの種類の情報を持つ。
（２０４１）デバイス識別子。ファイルサーバが持つデバイスを一意に識別する情報を持つ。
（２０４２）スペック。ファイルシステムの場合はサイズが設定される。
　図９はブロックストレージ内のブロック構成管理テーブル３０４である。ブロック構成管理テーブル３０４は以下の（３０４０）乃至（３０４３）の情報を持つ。
（３０４０）デバイス種別。ブロックストレージが持つデバイスの種類の情報を持つ。
（３０４１）デバイス識別子。ブロックストレージが持つデバイスを一意に識別する情報を持つ。
（３０４２）スペック。デバイス種別によって設定される値が異なるが、ボリュームの場合はサイズ、ポートの場合は速度の値が設定される。
（３０４３）ボリューム最終アクセス時間。ボリュームに最後にＩ／Ｏが発生した時間の情報を持つ。ここで、ボリューム最終アクセス時間は、リード要求を受信したが対象データがキャッシュヒットしたため記憶媒体に実際にアクセスしないＩ／Ｏを含む時間としてもよい。
　図１０は追記型記憶装置構成管理テーブル４１４である。追記型記憶装置構成管理テーブル４１４は以下の（４１４０）乃至（４４４４）の情報を持つ。
（４１４０）デバイス種別。追記型記憶装置が持つデバイスの種類の情報を持つ。
（４１４１）デバイス識別子。追記型記憶装置が持つデバイスを一意に識別する情報を持つ。
（４１４２）スペック。キャッシュ及び光ディスクの場合はサイズが設定される。
（４１４３）キャッシュ閾値。追記型記憶装置４０のキャッシュメモリ４０４内にデータが保存されるときのデータ書き出しタイミングの基準となる閾値の値を持つ。
（４１４４）書込み単位。光ディスクなどの記憶媒体に一度に書きこむことのできる最小のサイズを示す。
　図１１は構成管理テーブル５０７の説明である。構成管理テーブルは以下の（５０７０）乃至（５０７７）の情報を持つ。構成管理テーブルの情報は、ストレージ管理プログラム５０４により、ファイルサーバ内のファイル構成管理テーブル２０４、ブロックストレージ内のブロック構成管理テーブル３０４および追記型記憶装置構成管理テーブル４１４に基づいて生成される。
（５０７０）装置ＩＤ。管理対象となる装置を一意に識別する情報を持つ。
（５０７１）装置種別。管理対象となる装置がブロックストレージ、ファイルサーバ、追記型記憶装置のいずれかを示す情報を持つ。
（５０７２）デバイス種別。各管理対象装置が持つデバイスの種類の情報を持つ。
（５０７３）デバイス識別子。各管理対象装置が持つデバイスを一意に識別する情報を持つ。
（５０７４）スペック。各管理対象によって設定される値が異なるが、ボリュームの場合はサイズ、ポートの場合は速度の値、ファイルシステムの場合はサイズ、キャッシュの場合はサイズ、光ディスクの場合はサイズが設定される。
（５０７５）キャッシュ閾値。追記型記憶装置４０のキャッシュメモリ４０４内にデータが保存されるときのデータ書き出しタイミングの基準となる閾値の値を持つ。
（５０７６）書込み単位。光ディスクなどの記憶媒体に一度に書きこむことのできる最小のサイズを示す。
（５０７７）ボリューム最終アクセス時間。ボリュームに最後にＩ／Ｏが発生した時間の情報を持つ。
　図１２はファイル管理テーブル５０８の説明である。ファイル管理テーブルは以下の（５０８０）乃至（５０８９２）の情報を持つ。
（５０８０）ファイル識別子。管理対象となるファイルを一意に識別する情報を示す。
（５０８１）ファイルサイズ。当該ファイルのサイズを示す。
（５０８２）最終アクセス時間。当該ファイルに最後にアクセスされた時間を示す。
（５０８３）元の保存場所。当該ファイルが生成された記憶装置の場所を示す。
（５０８４）現在の保存場所。当該ファイルが現存する記憶装置の場所を示す。
（５０８５）利用アプリ。当該ファイルを利用しているアプリの情報を示す。
（５０８６）バックアップ時間。当該ファイルが最後にバックアップされた時間を示す。
（５０８７）利用目的。当該ファイルがアーカイブ後に利用される目的（アプリ、実行時間など）を示す。
（５０８８）グループＩＤ。判断基準テーブル５１０やデータ群情報テーブル５１１の情報により決定される当該ファイルのファイル群を識別する情報を示す。
（５０８９）Ｈｏｓｔ。当該ファイルが存在するホストの識別子を示す。
（５０８９１）アーカイブ予測時間。移動ポリシーテーブル５０９の情報と最終アクセス時間５０８２から計算される当該ファイルのアーカイブ予測時間を示す。
（５０８９２）拡張子。当該ファイルの拡張子情報があればそれを示す。
　図１３は移動ポリシーテーブル５０９の一例である。移動ポリシーテーブルは以下の（５０９０）乃至（５０９２）の情報を持つ。
（５０９０）ホスト。ファイルを保持するホスト計算機１０を識別する情報を示す。
（５０９１）階層。ホストのファイルが存在するストレージ装置を示す。
（５０９２）ポリシー。データの移動ポリシーを示す。図１３の場合、ＳＴ１のボリュームをＨｏｓｔ１で利用しているときのＳＴ１に含まれるデータに対して、一ヶ月アクセスが無ければＳＴ２という別の階層へデータを移動する、ということを示す。なお、この実施例ではホスト単位にポリシーを設定しているがホストによりアクセスされるファイルやディレクトリ単位でポリシーを設定しても良い。
　図１４は判断基準テーブル５１０の一例である。判断基準テーブル５１０は、以下の（５１００）乃至（５１０２）の情報を持つ。
（５１００）基準ＩＤ。判断基準の識別子を示す。
（５１０１）基準内容。ファイル群を分けるときの基準となる情報を示す。
（５１０２）優先度。各判断基準の優先度を示す。優先度の数値が低いほど優先度が高い。また優先度０は最高の優先度であり、この最高の優先度を持つ基準ＩＤ３についてはこの基準にファイルが該当すればファイル群が決定する。例えば、基準ＩＤ３の目的判明済みとは、将来どんな分析アプリで利用するかどうかが既に分かっている場合である。同じ分析アプリから利用されるデータは原則同じタイミングでリードされると考え、同じグループになる様優先度が０に設定されている。基準ＩＤ２の同一タイミングバックアップとは、同じタイミングでバックアップされたデータ同士は同じアクセス傾向であったことが期待される。同じアクセス傾向はアーカイブ後も続く事が推定されるため、グループ選択の基準となる。基準ＩＤ１の同一アプリは、アクティブデータとして同じアプリから利用されていたデータは、アーカイブ後に同じタイミングでリードされる期待値が比較的高い事からグループ選択の基準となる。ここではこれらの基準を設けたが、当然他の基準を用いてもよい。ここでは全て優先度が異なる例を示したが、重複しない基準であれば、同じ優先度の基準があってもよい。
　図１５はデータ群情報テーブル５１１の一例である。データ群情報テーブルは以下の（５１１０）乃至（５１１４）の情報を持つ。
（５１１０）グループＩＤ。ファイル群を識別するための識別子である。
（５１１１）判断結果。判断基準テーブルの情報に従いグループ分けした結果、どの基準に該当したかを示す。
（５１１２）基準ＩＤ１理由。基準ＩＤ１に該当した場合、その具体的内容を示す。基準ＩＤに該当する理由毎にグループが設定される。
（５１１３）基準ＩＤ２理由。基準ＩＤ２に該当した場合、その具体的内容を示す。
（５１１４）基準ＩＤ３理由。基準ＩＤ３に該当した場合、その具体的内容を示す。
なお、判断基準テーブル５１０の基準ＩＤの数によりデータ群情報テーブルの各基準ＩＤ理由カラム数は増加する。
　図１６はキャッシュ管理テーブル５１２の一例である。キャッシュ管理テーブル５１２は以下の（５１２０）乃至（５１２２）の情報を持つ。
（５１２０）ファイル識別子。キャッシュファイルに存在するファイルの識別子を示す。
（５１２１）ファイルサイズ。当該ファイルのサイズを示す。
（５１２２）グループＩＤ。当該ファイルのファイル群を識別する識別子を示す。
　図１７は書き込み先管理テーブル５１３の一例である。書き込み先管理テーブルは以下の（５１３０）乃至（５１３１）の情報を持つ。
（５１３０）グループＩＤ。ファイル群の識別子を示す。１つの識別子だけでなく、例えば”Ｎ＋Ｍ”と記載すれば複数のファイル群を追記型ディスク識別子に書き込むように記載することも可能である。
（５１３１）追記型ディスク識別子。ファイル群を書き込むべき追記型ディスクの識別子を示す。１つの識別子だけでなく、複数の追記型ディスクの識別子を記載することも可能である。
　図１８はファイルメタデータの一例である。ファイルメタデータ６０６は以下の（６０６０）乃至（６０６７）の情報を持つ。
（６０６０）ファイル識別子。ファイルの識別情報を示す。
（６０６１）ファイルサイズ。当該ファイルのサイズを示す。
（６０６２）更新日時。当該ファイルが更新された日時を示す。
（６０６３）最終アクセス日時。当該ファイルに最後にアクセスされた日時を示す。
（６０６４）保存場所。当該ファイルが現存する記憶装置の場所を示す。
（６０６５）利用者。当該ファイルの利用者を示す。ファイルの作成者情報を使っても良い。
（６０６６）ファイルパーミッション。当該ファイルへのアクセス権限を示す。
（６０６７）Ｈｏｓｔ。当該ファイルにアクセルするホストの識別子を示す。
　図１９は実施例１における、装置管理サーバ５０や階層管理サーバ６０による情報取得処理のフローＳ１０を示す。なお、Ｓｔｅｐ１０００とＳｔｅｐ１００１の処理は定期的またはファイル作成時のいずれかに実行される。また、Ｓ１００２以降の処理も定期的またはファイルメタデータ６０６更新時のいずれかに実行される。
（Ｓｔｅｐ１０００）階層管理プログラム６０４は各ホスト計算機１０のＯＳ１０３やアプリケーション１０４からファイル情報を定期的に収集する。
（Ｓｔｅｐ１００１）階層管理プログラム６０４はＳｔｅｐ１０００で取得した情報を利用して、ファイルメタデータ６０６を更新する。
（Ｓｔｅｐ１００２）ストレージ管理プログラム５０４は階層管理サーバ６０のファイルメタデータ６０６、及びホスト計算機１０のアプリケーション１０４の情報を収集する。
（Ｓｔｅｐ１００３）ストレージ管理プログラム５０４はＳｔｅｐ１００２で取得した情報を利用して、ファイル管理テーブル５０８のうち、ファイル識別子、ファイルサイズ、最終アクセス時間、保存場所情報、Ｈｏｓｔ情報、利用アプリの情報を更新する。
（Ｓｔｅｐ１００４）ストレージ管理プログラム５０４は更新した利用アプリ情報がバックアップソフトを示すかどうかを調べ、バックアップソフトの場合はＳｔｅｐ１００５へ進む。そうでない場合はＳｔｅｐ１００６へ進む。
（Ｓｔｅｐ１００５）ストレージ管理プログラム５０４はホスト計算機１０のアプリケーション１０４から光アーカイブへの移動ポリシー各ファイルのバックアップ時間を取得する。
（Ｓｔｅｐ１００６）ストレージ管理プログラム５０４は更新した利用アプリ情報がアーカイブデータ利用アプリを示すかどうかを調べ、アーカイブデータ利用アプリの場合はＳｔｅｐ１００７へ進む。そうでない場合はＳｔｅｐ１００８へ進む。
（Ｓｔｅｐ１００７）ストレージ管理プログラム５０４はホスト計算機１０のアプリケーション１０４からアーカイブデータ利用アプリからアーカイブされたファイルの利用方法を取得する。利用方法の例として、アーカイブデータ分析アプリの場合、利用する実行ファイルと対象となるファイル、及びその実行時間などが含まれる。
（Ｓｔｅｐ１００８）ストレージ管理プログラム５０４はホスト計算機１０から利用アプリを特定可能な情報（例：ファイル拡張子）を取得する。
（Ｓｔｅｐ１００９）ストレージ管理プログラム５０４は取得した各種情報を利用してファイル管理テーブル５０８を更新する。
　図２０は実施例１におけるデータ群情報を設定する処理のフローＳ１１を示す。なお、図２０ではファイル情報が更新されたタイミングでファイル毎の処理を記載しているが、このフローは定期的にすべてのファイルに実行されてもよい。本実施例では、以下のステップを処理を生成、更新されたファイル毎、さらにホスト毎に繰り返す。
（Ｓｔｅｐ１１００）ストレージ管理プログラム５０４はファイル管理テーブル５０８から、判断基準テーブルの内容に関係する更新情報 （アプリ、バックアップなど）を取得し、データ群情報テーブル５１１の判断結果に該当する情報を作成する。このときに、判断基準テーブルの基準ＩＤ３（利用目的判明済み）に該当する情報が取得できている場合は優先度０のため基準が一意に確定するため他の基準内容はチェックする必要は無い。
（Ｓｔｅｐ１１０１）ストレージ管理プログラム５０４は既に同じ基準内容のグループがデータ群情報テーブル５１１にあるかチェックし、ある場合はＳｔｅｐ１１０３へ進む。無い場合はＳｔｅｐ１１０２へ進む。
（Ｓｔｅｐ１１０２）ストレージ管理プログラム５０４は新規グループを作成するために未使用のグループＩＤを採番し、グループＩＤを設定し、データ群情報テーブルにグループＩＤと判断結果、各基準ＩＤの理由を設定する。 
（Ｓｔｅｐ１１０３）ストレージ管理プログラム５０４は当該ファイルのファイル群を確定し、ファイル管理テーブル５０８にグループＩＤを設定する。
（Ｓｔｅｐ１１０４）ストレージ管理プログラム５０４は最終アクセス時間とデータ管理ポリシーからアーカイブされる時間を導出してファイル管理テーブル５０８のアーカイブ予測時間カラム５０８９１に値を設定する。 
　図２１は実施例１におけるデータの階層化による移動処理のフローＳ１２を示す。なお、図２１では管理対象となるホスト毎、さらにファイル情報が生成または更新されたタイミングでファイル毎の処理を記載しているが、このフローはファイルサーバ毎や、ストレージ装置毎に実施してもよく、タイミングも定期的にすべてのファイルに実行されてもよい。実施例では、以下のステップを処理を生成、更新されたファイル毎、さらにホスト毎に繰り返す。
（Ｓｔｅｐ１２００）階層管理プログラム６０４がホスト計算機上の階層管理エージェント１０５経由でファイルメタデータを取得。なお、この例ではホスト毎の例を示しているがファイルサーバやストレージ装置の場合はそれぞれ階層管理エージェント２０５、３０５経由で情報を取得しても良い。 
（Ｓｔｅｐ１２０１）階層管理プログラム６０４は移動ポリシーテーブル５０９のポリシー５０９２の条件に該当するファイルがあるかチェックする。
（Ｓｔｅｐ１２０２）移動ポリシーテーブルに該当するファイルがある場合はＳｔｅｐ１２０３へ進む。無い場合は次のファイルのチェックに進む。
（Ｓｔｅｐ１２０３）階層管理プログラム６０４は階層管理エージェント経由でファイルを別のストレージ装置または追記型記憶装置へコピーする。以上の処理を生成、更新されたファイル毎、さらにホスト毎に繰り返す。
　図２２は実施例１におけるデータ書き込み指示の処理のフローＳ１３を示す。なお、図２２の処理は追記型記憶装置にデータが移動したタイミングで実施される。
（Ｓｔｅｐ１３００）追記型ディスク装置４０のエージェントプログラム４１２がストレージ管理プログラム５０４へファイル情報を通知する。
（Ｓｔｅｐ１３０１）ストレージ管理プログラム５０４は通知されたファイル情報とファイル管理テーブルのファイル識別子に基づき、キャッシュ管理テーブルを更新する。 
（Ｓｔｅｐ１３０２）ストレージ管理プログラム５０４はキャッシュメモリ４０４のデータ合計サイズが構成管理テーブル５０７記載のキャッシュ閾値５０７５を越えているかを確認する。越えている場合はＳｔｅｐ１３０３へ進む。越えていない場合はデータ書き込みを実施しないため、当該処理を終了する。
（Ｓｔｅｐ１３０３）ストレージ管理プログラム５０４が上位階層（追記型記憶装置以外の階層）のファイル群のアーカイブ予測時間と、キャッシュメモリ内のファイルサイズ合計と、構成管理テーブル５０７記載の追記型記憶装置の媒体のサイズ５０７４と、書き込み単位５０７６とを比較する。具体的にはキャッシュメモリ内にある全てのファイル群の合計サイズについて書き込み単位を越えているファイル群を特定する。一つも書込み単位を越えるファイル群が無い場合は、全てのファイル群が対象となる。次に、それらのファイル群の中で上位階層のファイルでアーカイブされる時間が早いものからサイズを加算していき、最も遅く追記型記憶装置の媒体サイズ５０４７に到達するファイル群を書き出すファイル群として決定する。最も遅く追記型記憶装置の媒体サイズ５０４７に到達するファイル群を書き出すファイル群として決定する理由は、媒体サイズへの到達が遅いとキャッシュに留まる時間が長くなり、キャッシュを圧迫するためである。ここで、必ずしも最も遅く追記型記憶装置の媒体サイズ５０４７に到達するファイル群を選択する必要はなく、たとえばキャッシュ格納時間と格納データサイズの積分で求められる、キャッシュ格納コストが高いファイル群を選択しても良い。
（Ｓｔｅｐ１３０４）ストレージ管理プログラム５０４は決定したファイル群のグループＩＤが書込み先管理テーブルに書込み先として登録されているかチェックする。登録されていればＳｔｅｐ１３０６へ進む。登録されていなければＳｔｅｐ１３０５へ進む。
（Ｓｔｅｐ１３０５）ストレージ管理プログラム５０４が、構成管理テーブルから書き込み先管理テーブルに登録されていない媒体を選択し、書込み先管理テーブルに今回特定したファイル群のＩＤと未使用の追記型ディスク識別子を登録する。 
（Ｓｔｅｐ１３０６）書込み指示プログラム５０６が追記型記憶装置のエージェントプログラム４１２を経由し、書込みプログラム４１０に対して、特定したファイル群のデータを書込み先管理テーブル記載の記憶媒体へ書き出す指示を出力する。
　図２３は実施例１におけるデータ書き込みの処理のフローＳ１４を示す。なお、図２３の処理は図２２のフローＳ１３０６でデータ書き込み指示が送信されたタイミングで実行される。
（Ｓｔｅｐ１４００）書込みプログラム４１０が指定された記憶媒体を取りだす指示をチェンジャプログラム４１３に対して出す。
（Ｓｔｅｐ１４０１）チェンジャプログラム４１３は媒体搬送部４０６を駆動させ、媒体格納部４０７から該当する追記型記憶媒体４０８を取り出し、記録読み書き部４０５に記憶媒体を設定する。 
（Ｓｔｅｐ１４０２）書込みプログラム４１０が指定された記憶媒体にファイル群を書き込む。
　次に、図２４、図２５を用いてさらにＲｅａｄ効率を向上させるために追記型記憶装置内でのデータ書き換え処理について記載する。
　図２４はアーカイブアクセス履歴テーブル５１４の説明である。アーカイブアクセス履歴テーブルは以下の（５１４０）乃至（５１４４）の情報を持つ。
（５１４０）ファイル識別子。ファイルの識別情報を示す。
（５１４１）ファイルサイズ。当該ファイルのサイズを示す。
（５１４２）グループＩＤ。ファイル群の識別情報を示す。
（５１４３）保存場所。追記型記憶装置内のどの媒体にファイルが保存されているかを示す。
（５１４４）アクセス履歴。アーカイブされたファイルがリードされた時間を履歴として保持する。
　図２５は実施例１における追記型記憶装置内でのデータ書き換え処理のフローＳ１６を示す。なお、図２５の処理は追記型記憶装置内のデータがリードされたタイミングで実施されているが、Ｓｔｅｐ１６０２以降の処理はそのタイミング以外にも、定期的に実施してもよく、また媒体寿命等で媒体を交換するタイミングで実施してもよい。
（Ｓｔｅｐ１６００）追記型ディスク内のファイルにアクセスがあると、エージェントプログラム４１３がアクセス時間を装置管理サーバのストレージ管理プログラム５０４へ連絡する。 
（Ｓｔｅｐ１６０１）ストレージ管理プログラム５０４がアーカイブアクセス履歴テーブルのアクセス履歴を更新する。
（Ｓｔｅｐ１６０２）ストレージ管理プログラム５０４がアーカイブアクセス履歴テーブルを参照し、アクセス履歴が同じ傾向のもの（例：２回以上同じタイミングでリードされる）で別ディスクに保存されているファイルがあるかをチェックする。なお、タイミングがまったく同じでなくても特定の期間の間に２回以上呼ばれてもよいし、ほかの任意の傾向でよい。同じ傾向のものがあればＳｔｅｐ１６０３へ進む。同じ傾向のものが無ければ当該処理を終了する。
（Ｓｔｅｐ１６０３）書込みプログラム４１０は傾向が同じファイルを一度キャッシュに読み込み、別の追記型記憶媒体へ書込む。
（Ｓｔｅｐ１６０４）書込みプログラム４１０が書き込みをしたファイルのグループＩＤを更新し、書込み先管理テーブルも今回のファイルのグループＩＤと書き込みした追記型ディスク識別子に更新する。
（Ｓｔｅｐ１６０５）書込みプログラム４１０が元の追記型ディスク内の該当ファイルの部分はリード不可処理を実行する。
　なお、Ｓｔｅｐ１６０３で書込みプログラム４１０は、傾向が同じファイルを別の追記型ディスクに書き込むとしたが、傾向が同じファイルのうち一部のファイルが既に格納されている追記型記憶媒体にアクセス傾向が同じ他のファイルを格納できる空き領域がある場合には、傾向が同じファイルのうち一部のファイルが既に格納されている追記型記憶媒体に格納しても良い。以上の処理により、追記型記憶装置にアーカイブされるファイルを容量効率よく記憶することが可能となり、リード時の速度を向上させることが可能となる。また、追記型記憶媒体に、ホログラムディスクなど記憶容量の大きい記憶媒体を使う場合、記憶媒体に書き込む関連性のあるデータをグルーピングするために、データをキャッシュに蓄えようとすると大容量のキャッシュが必要となりコストがかかってしまう。本実施例では、未だキャッシュに格納されていないデータを考慮して、記憶媒体に格納するデータを決定する事が出来るため、グルーピングに必要なキャッシュの量を低減することが出来る。
　次に実施例２の説明をする。実施例１と実施例２の違いは追記型記憶装置へのデータ書き込み指示の処理内容である。実施例１ではファイル群を媒体へ書き込むときは特定の１つのファイル群のみ特定し書き出していたが、実施例２では複数のファイル群をまとめて１つのファイル群とし書き出す処理も含める。処理フローＳ１５を図２６に示す。なお、図２６の処理は追記型記憶装置にデータが移動したタイミングで実施される。　
（Ｓｔｅｐ１５００）このＳｔｅｐは実施例１のＳｔｅｐ１３００からＳｔｅｐ１３０４までの処理と同じである。
（Ｓｔｅｐ１５０１）ストレージ管理プログラム５０４が上位階層（追記型記憶装置以外の階層）のファイル群のアーカイブ予測時間と、キャッシュメモリ内のファイルサイズ合計と、構成管理テーブル記載の追記型記憶装置の媒体のサイズ５０７４と、書き込み単位５０７６とを比較する。具体的にはキャッシュメモリ内にある全てのファイル群の合計サイズについて書き込み単位を越えているファイル群を特定する。
（Ｓｔｅｐ１５０２）書込み単位を越えているファイル群が存在するかチェックし、その結果、ＹｅｓであればＳｔｅｐ１５０５へ進む。ＮｏであればＳｔｅｐ１５０３へ進む。
（Ｓｔｅｐ１５０３）ストレージ管理プログラム５０４がファイル群情報テーブルの一部内容のみが異なるファイル群の組み合わせがあるかどうかをチェックする。あればＳｔｅｐ１５０４へ進む。なければＳｔｅｐ１５０５へ進む。
（Ｓｔｅｐ１５０４）ストレージ管理プログラム５０４が複数ファイル群のうち、合計サイズが最も媒体サイズに近くなる複数のファイル群を同一ディスクに書き込むファイル群と決定する。 
（Ｓｔｅｐ１５０５）ストレージ管理プログラム５０４が最も媒体サイズに近い単一のファイル群をディスクに書き込むファイル群と決定する。
（Ｓｔｅｐ１５０６）ストレージ管理プログラム５０４が書込み先管理テーブルの１つ以上のファイル群と追記型ディスク識別子の情報を更新する。
（Ｓｔｅｐ１５０７）ストレージ管理プログラム５０４が追記型ディスク装置の書き込みプログラム４１０に対して、特定したファイル群のデータを書込み先管理テーブル記載の記憶媒体へ書き出す指示を出す。以上が実施例２のフローの説明である。
　なお、複数ファイル群を１つにまとめるかどうかの判断（Ｓｔｅｐ１５０２）の処理基準は他の判断基準でもよい。例えば追記型記憶装置の空き媒体が少ない場合に容量効率を重視して複数ファイル群を１つにまとめるアルゴリズムでもよい。また、アーカイブ予測時間を利用して、次にファイルがアーカイブされるときにそのファイルサイズが大きいために、キャッシュメモリあふれが発生してしまう状況になるかどうかをチェックし、キャッシュメモリ内のみでやりくりする必要がある場合に、複数ファイル群をまとめることという処理基準でもよい。また、その他の処理基準でもよい。
　以上により、追記の容量の無駄をより考慮して複数のファイル群を１つにまとめるかどうか判断することで、リード要求への応答時間を短縮しつつ、追記型記憶装置にアーカイブされるファイルを容量効率よく記憶することが可能となる。また、リード時の速度を向上させることが可能となる。実施例２は実施例１と比較し、複数のファイル群をまとめて１つの媒体に書き込むことで、追記回数が少なくなり容量の無駄を少なくできる。
　次に実施例３の説明をする。実施例１と実施例３の違いは、実施例がデータをファイル単位で扱っていたのに対して、実施例３ではデータをブロック単位で扱う。なお、実施例３ではＬＵ単位でブロックを扱う例を示すが、ＬＢＡ（Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）単位で考えてもよい。なお、実施例１ではアプリの利用方法等多くの情報を利用してデータをグルーピングしたが実施例３ではアクセス傾向の情報のみを利用する。
　図２７はブロック管理テーブル５１５の説明である。ブロック管理テーブルは以下の（５１５０）乃至（５１５９）の情報を持つ。
（５１５０）ブロック識別子。データを管理する単位に識別子を設定する。ＬＢＡ単位でブロックを扱う場合はここにはＬＢＡ開始アドレスと終了アドレスを設定する。
（５１５１）ブロックサイズ。管理単位がＬＵであればＬＵのサイズが設定され、ＬＢＡ単位で扱う場合には、5151で設定されたアドレス間のデータサイズが設定される。
（５１５２）最終アクセス日時。当該ブロックへ最後にＩ／Ｏが発生した日時を示す。
（５１５３）元の保存場所。当該ブロックが作成された装置の場所を示す。
（５１５４）現在の保存場所。当該ブロックの現存する装置の場所を示す。
（５１５５）バックアップ日時。当該ブロックが最後にバックアップされた日時を示す。
（５１５６）利用目的。当該ブロックのデータがアーカイブ後に利用される目的（アプリ、実行時間など）を示す。
（５１５７）グループＩＤ。判断基準テーブル５１０やデータ群情報テーブル５１１の情報により決定される当該ブロックのデータ群を識別する情報を示す。
（５１５８）Ｈｏｓｔ。当該ブロックが割り当てられているホストの識別子を示す。
（５１５９）アーカイブ予測時間。移動ポリシーテーブル５０９の情報と最終アクセス時間５１５２から計算される当該ブロックのアーカイブ予測時間を示す。
　次に、実施例３における情報取得処理のフローについて説明する。本フローは、定期的に実行されても良く、またＬＵ作成のタイミングで実行されてもよい。ストレージ管理プログラム５０４はブロックストレージ３０から構成情報とＬＵへのアクセス時間を取得する。次に、ストレージ管理プログラム５０４が取得した情報を利用して、ブロック管理テーブルを更新する。
　実施例３におけるデータ群情報設定処理のフローＳ１１（図１５）については、ブロックの場合はＳ１１００で参照するテーブルがファイル管理テーブルからブロック管理テーブルに変わること、さらに判断基準がバックアップ時間となる点が異なる。実施例３におけるデータの階層化処理のフローＳ１２（図１６）については管理対象がホスト毎やファイル毎ではなく、ストレージ毎に変わる。またＳ１２０３の階層管理エージェント経由によるファイル移動がＬＵの移行処理に変わる点が異なる。
　実施例１における書き込み指示の処理フローＳ１３（図１７）と異なる点は以下のとおりである。
Ｓ１３０２で通知するファイル情報がボリューム情報となる。
Ｓ１３０３で通知された情報の保存先がボリューム管理テーブルとなる。また、キャッシュ管理テーブルの識別子がファイル識別子からブロック識別子となる。
Ｓ１３０５ではファイル群がデータ群となる。キャッシュメモリ内ファイルがキャッシュメモリ内データ、特定するファイルが、特定するデータに変わる。
Ｓ１３０７ではファイル群がデータ群となる。
Ｓ１３０８ではファイル群がデータ群となる。
以上が、書き込み指示の処理のとなる。
　実施例２における書き込み実行処理のフローＳ１４（図２３）についてはＳｔｅｐ１４０２の書き込み対象がファイル群からデータ群となる点が異なる。以上の処理により、追記型記憶装置にアーカイブされる対象をファイルだけでなくブロック単位でも扱うことができ、追記型記憶装置に容量効率よく記憶することが可能となり、リード時の速度を向上させることが可能となる。
　３０…ブロックストレージ装置
　４０…追記型記憶装置
　５０…装置管理サーバ
　９０…記憶システム
　９５…ハイブリットアーカイブシステム

Claims (15)

  1. 　第１の記憶装置に接続される第２の記憶装置と、
    　前記第２の記憶装置に接続される追記型記憶装置と、
    　前記追記型記憶装置のデータ書き込みを管理する装置管理サーバと、を含むハイブリットアーカイブシステムであって、
    　前記追記型記憶装置は、ライトワンス記憶媒体を備え、
    　前記第２の記憶装置は、書き換え可能な記憶媒体を備え、
    　前記装置管理サーバは、前記書き換え可能な記憶媒体に格納された複数の第２記憶装置格納データのデータ管理情報に基づき、前記複数の第２記憶装置格納データから複数のデータ群を構成し、
    　前記第１記憶装置に格納される複数の第１記憶装置格納データのデータ管理情報、前記ライトワンス記憶媒体の記憶容量、及び前記第１の記憶装置から前記第２の記憶装置へのデータ移動情報に基づき、前記複数のデータ群から前記ライトワンス記憶媒体に書き込むデータ群を決定し、前記第２の記憶装置に前記決定されたライトワンス記憶媒体に書き込むデータ群を前記追記型記憶装置へ送信するよう指示を送信し、
    　前記第２の記憶装置は前記決定されたライトワンス記憶媒体に書き込むデータ群を前記追記型記憶装置に送信し、
    　前記追記型記憶装置は受信した前記決定されたライトワンス記憶媒体に書き込むデータ群を前記ライトワンス記憶媒体に格納する、
    　ことを特徴とするハイブリットアーカイブシステム。
  2. 　請求項１記載のハイブリットアーカイブシステムであって、
    　前記装置管理サーバは、前記第１の記憶装置及び前記第２の記憶装置の階層を管理する階層管理サーバと接続され、
    　前記装置管理サーバは、前記第１の記憶装置、前記第２の記憶装置または前記階層管理サーバから、前記第１記憶装置格納データのデータ管理情報、前記第１記憶装置格納データの最終アクセス時刻、及び階層移動ポリシーを取得し、前記取得した情報に基づき前記第１の記憶装置から前記第２の記憶装置へのデータ移動情報を構成する、
    　ことを特徴とするハイブリットアーカイブシステム。
  3. 　請求項２記載のハイブリットアーカイブシステムであって、
    　前記装置管理サーバは、
    　前記第２の記憶装置から前記複数の書き換え可能な記憶媒体に格納された複数の第２記憶装置格納データのデータ管理情報を受信し、前記複数の書き換え可能な記憶媒体に格納されるデータの総容量が閾値を超えた場合、前記決定されたライトワンス記憶媒体に書き込むデータ群を前記ライトワンス記憶媒体への送信指示を、前記第２の記憶装置に送信する、
    　ことを特徴とするハイブリットアーカイブシステム。
  4. 　請求項３記載のハイブリットアーカイブシステムにおいて、
    　前記追記型記憶装置は、前記ライトワンス記憶媒体を複数備え、
    　前記複数のライトワンス記憶媒体はブルーレイディスク及びホログラムディスクを含む、
    　ことを特徴とするハイブリットアーカイブシステム。
  5. 　追記型記憶装置のデータ書き込みを管理する計算機であって、
    　プロセッサを備え、
    　前記プロセッサは前記追記型記憶装置の備える一時記憶媒体に格納された複数のデータのデータ管理情報に基づき、前記複数のデータから複数のデータ群を構成し、
    　前記追記型記憶装置の備えるライトワンス記憶媒体の記憶容量、前記追記型記憶装置に接続される上位記憶装置の格納データに関する情報、及び前記上位記憶装置から前記追記型記憶装置へのアーカイブ予測情報に基づき、前記複数のデータ群から前記ライトワンス記憶媒体に格納するデータ群を決定し、
    　前記決定されたデータ群の前記ライトワンス記憶媒体への格納指示を前記追記型記憶装置に送信する
    　ことを特徴とする計算機。
  6. 　請求項５記載の計算機であって、
    　前記上位記憶装置の階層を管理する階層管理サーバ及び前記上位記憶装置と接続され、
    　前記プロセッサは、前記上位記憶装置または前記階層管理サーバから、前記上位記憶装置格納データのデータ管理情報、前記上位記憶装置格納データの最終アクセス時刻、階層移動ポリシーを取得し、前記取得した情報に基づき前記追記型記憶装置へのアーカイブ予測情報を作成する、
    　ことを特徴とする計算機。
  7. 　請求項６記載の計算機であって、
    　前記プロセッサは前記追記型記憶装置から前記一時記憶媒体に格納された複数のデータのデータ管理情報を受信し、前記一時記憶媒体に格納されたデータの総容量が閾値を超えた場合、前記決定されたライトワンス記憶媒体に格納するデータ群を前記ライトワンス記憶媒体へ格納する指示を、前記追記型記憶装置に送信する、
    　ことを特徴とする計算機。
  8. 　請求項７記載の計算機であって、
    　前記データ管理情報とは、各データのサイズ、利用アプリ、拡張子、最終アクセス時刻、利用目的、利用ホスト、及びバックアップ時刻のうちひとつ以上を含む情報であり、
    　グループ判断基準情報を格納するメモリを備えで、
    　前記プロセッサは前記複数のデータに関する前記データ管理情報及び前記グループ判断基準情報に基づき、前記複数のデータから複数のデータ群を構成する、
    　ことを特徴とする計算機。
  9. 　請求項５記載の計算機であって、
    　前記追記型記憶装置へのアクセスの履歴情報を管理するメモリを備え、
    　前記プロセッサは前記追記型記憶装置へのアクセスの履歴情報に基づいて、
    　前記ライトワンス記憶媒体に格納済みの複数のデータ群を構成する複数のデータから新たなデータ群を構成し、前記構成した新たなデータ群を前記ライトワンス記憶媒体に格納する指示を前記追記型記憶装置に送信する、
    ことを特徴とする計算機。
  10. 　請求項６記載の計算機であって、
    　前記プロセッサは
    　前記複数のデータ群のうち、前記ライトワンス記憶媒体の記憶容量に格納される時刻がもっとも遅いと予測されるデータ群を、前記ライトワンス記憶媒体に格納するデータ群として決定することを特徴とする計算機。
  11. 　請求項５記載の計算機であって、
    　前記プロセッサは、前記複数のデータ群から前記ライトワンス記憶媒体に格納する複数のデータ群を決定し、
    　前記ライトワンス記憶媒体に前記決定された複数のデータ群を格納するよう指示を前記追記型記憶装置に送信することを特徴とする計算機。
  12. 　請求項５記載の計算機は、
    　前記追記型記憶装置に接続される装置管理サーバであること、
    を特徴とする計算機。
  13. 　追記型記憶装置の書き込みデータ決定方法であって、
    　前記追記型記憶装置はライトワンス記憶媒体を備え、
    　書き換え可能な第１の記憶媒体を備える第１の記憶装置及び、書き換え可能な第２の記憶媒体を備える第２の記憶装置、に接続され
    　前記第２の記憶媒体に格納される複数の第２記憶装置格納データのデータ管理情報に基づき、前記第２の記憶装置に格納されるデータから複数のデータ群を構成するステップと、
    　前記第１の記憶媒体に格納されるデータのデータ管理情報、前記ライトワンス記憶媒体の記憶容量、及び前記第１の記憶装置から前記第２の記憶装置へのデータ移動情報に基づき、前記複数のデータ群から前記ライトワンス記憶媒体に書き込むデータ群を決定するステップと、を備える事を特徴とする追記型記憶装置の書き込みデータ決定方法。
  14. 　請求項１３記載の追記型記憶装置の書き込みデータ決定方法であって、
    　前記第１の記憶装置格納データのデータ管理情報、前記第１の記憶装置格納データの最終アクセス時刻、階層移動ポリシーに基づき前記第１の記憶装置から前記第２の記憶装置へのデータ移動情報を作成するステップを備える、
    　ことを特徴とする追記型記憶装置の書き込みデータ決定方法。
  15. 　請求項１３記載の追記型記憶装置の書き込みデータ決定方法であって、
    　前記第２の記憶媒体に格納されるデータの総容量が閾値を超えた場合に、前記決定されたライトワンス記憶媒体に書き込むデータ群を前記ライトワンス記憶媒体へ書きこむステップを備える
    　ことを特徴とする追記型記憶装置の書き込みデータ決定方法。
PCT/JP2014/059067 2014-03-28 2014-03-28 追記型記憶装置への書き込みデータ決定方法 WO2015145707A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/059067 WO2015145707A1 (ja) 2014-03-28 2014-03-28 追記型記憶装置への書き込みデータ決定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/059067 WO2015145707A1 (ja) 2014-03-28 2014-03-28 追記型記憶装置への書き込みデータ決定方法

Publications (1)

Publication Number Publication Date
WO2015145707A1 true WO2015145707A1 (ja) 2015-10-01

Family

ID=54194296

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/059067 WO2015145707A1 (ja) 2014-03-28 2014-03-28 追記型記憶装置への書き込みデータ決定方法

Country Status (1)

Country Link
WO (1) WO2015145707A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08110839A (ja) * 1994-10-12 1996-04-30 Toshiba Corp 集合型データ処理装置
JPH08129499A (ja) * 1994-11-02 1996-05-21 Hitachi Ltd 情報処理システム
JPH096678A (ja) * 1995-06-19 1997-01-10 Toshiba Corp 階層記憶装置
JP2007066313A (ja) * 2005-08-31 2007-03-15 Internatl Business Mach Corp <Ibm> 情報を記憶する方法および装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08110839A (ja) * 1994-10-12 1996-04-30 Toshiba Corp 集合型データ処理装置
JPH08129499A (ja) * 1994-11-02 1996-05-21 Hitachi Ltd 情報処理システム
JPH096678A (ja) * 1995-06-19 1997-01-10 Toshiba Corp 階層記憶装置
JP2007066313A (ja) * 2005-08-31 2007-03-15 Internatl Business Mach Corp <Ibm> 情報を記憶する方法および装置

Similar Documents

Publication Publication Date Title
US10649696B2 (en) Data set management
US8392685B2 (en) Arrangements for managing metadata of an integrated logical unit including differing types of storage media
JP6304406B2 (ja) ストレージ装置、プログラム、情報処理方法
US10031703B1 (en) Extent-based tiering for virtual storage using full LUNs
JP5456063B2 (ja) アロケートオンライトのスナップショットを用いた、ダイナミックストレージ階層化のための方法及びシステム
JP4749255B2 (ja) 複数種類の記憶デバイスを備えたストレージシステムの制御装置
US8239648B2 (en) Reclamation of thin provisioned disk storage
US9015413B2 (en) Management of data using inheritable attributes
US20140089628A1 (en) Data storage space recovery system and method
JP5410386B2 (ja) ストレージシステムのためのｉ／ｏ変換方法及び装置
WO2015015550A1 (ja) 計算機システム及び制御方法
JP2008015769A (ja) ストレージシステム及び書き込み分散方法
WO2013042159A1 (en) Storage apparatus, computer system, and data migration method
US11461287B2 (en) Managing a file system within multiple LUNS while different LUN level policies are applied to the LUNS
US9465543B2 (en) Fine-grained data reorganization in tiered storage architectures
US20110125950A1 (en) Systems and methods for performing deduplicated data processing on tape
JP6531574B2 (ja) ストレージ装置、ストレージ装置制御プログラム及びストレージ装置制御方法
US20210103400A1 (en) Storage system and data migration method
WO2015145707A1 (ja) 追記型記憶装置への書き込みデータ決定方法
JP2021114264A (ja) ストレージ制御装置およびストレージ制御プログラム
US9513826B2 (en) Storage apparatus and storage apparatus control method
US11947799B1 (en) Systems and methods for using the TRIM command with solid state devices
WO2016067326A1 (ja) ストレージシステム
JP2016197357A (ja) データアーカイブシステム及びデータ記録方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14886905

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14886905

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP