JP2019148977A - Disk array apparatus and disk pool capacity expanding method - Google Patents

Disk array apparatus and disk pool capacity expanding method Download PDF

Info

Publication number
JP2019148977A
JP2019148977A JP2018033097A JP2018033097A JP2019148977A JP 2019148977 A JP2019148977 A JP 2019148977A JP 2018033097 A JP2018033097 A JP 2018033097A JP 2018033097 A JP2018033097 A JP 2018033097A JP 2019148977 A JP2019148977 A JP 2019148977A
Authority
JP
Japan
Prior art keywords
disk
capacity
pool
disk pool
emergency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018033097A
Other languages
Japanese (ja)
Other versions
JP6927580B2 (en
Inventor
功 原
Isao Hara
功 原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Platforms Ltd
Original Assignee
NEC Platforms Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Platforms Ltd filed Critical NEC Platforms Ltd
Priority to JP2018033097A priority Critical patent/JP6927580B2/en
Publication of JP2019148977A publication Critical patent/JP2019148977A/en
Application granted granted Critical
Publication of JP6927580B2 publication Critical patent/JP6927580B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

To provide a disk array apparatus capable of avoiding a business work suspension caused by the insufficiency in capacity of a disk pool.SOLUTION: A disk array apparatus includes: a disk pool monitoring unit 121 that monitors whether or not the use capacity of a disk pool which collectively manages the capacities of respective physical disks forming one or a plurality of RAIDs reaches a predefined capacity threshold; an available region managing unit 122 that secures and manages the available region in each of the physical disks as a capacity for expanding the disk pool in the case of emergency with a difference in capacity among the plurality of physical disks forming each RAID being taken into consideration; and an emergency capacity securing unit 123 which determines that, on the basis of the monitoring result by the disk pool monitoring unit 121, when the use capacity of the disk pool reaches the threshold, an emergency expansion status occurs, and which tentatively allocates the available region secured by the available region managing unit 122 as a volume for capacity expansion of the disk pool.SELECTED DRAWING: Figure 1

Description

本発明は、ディスクアレイ装置およびディスクプール容量拡張方法に関し、特に、仮想ボリュームを提供するディスクアレイ装置においてディスクプール容量不足時に容量拡張を行うディスクアレイ装置およびディスクプール容量拡張方法に関する。   The present invention relates to a disk array device and a disk pool capacity expansion method, and more particularly to a disk array device and a disk pool capacity expansion method that perform capacity expansion when a disk pool capacity is insufficient in a disk array apparatus that provides a virtual volume.

ディスクアレイ装置は、多数の物理ディスクを搭載し、該物理ディスクを制御するコントローラによって構成されており、RAID(Redundant Arrays of Independent Disks)を構成して、信頼性および性能の向上を図った上で、サーバ等の外部装置に論理ボリュームを提供している。   A disk array device is configured with a controller that controls a number of physical disks and is configured with RAID (Redundant Arrays of Independent Disks) to improve reliability and performance. A logical volume is provided to an external device such as a server.

ディスクアレイ装置では、シンプロビジョニング(Thin Provisioning)技術により、効率的にボリュームを使用することができる。シンプロビジョニング技術を適用されたディスクアレイ装置においては、1つ以上存在するRAID構成のボリュームをディスクプールにまとめることができる。このようなディスクアレイ装置では、RAID構成のボリュームをディスクプールにまとめることにより、サーバ等の外部装置に提供する論理ボリュームの総容量を、ディスクプールの実容量よりも大きい容量に設定することが可能な仮想ボリュームとして、サーバ等の外部装置に割り当てて使用することもできる。仮想ボリュームの採用により、1つのサーバに1つ以上の仮想ボリュームを割り当てることや、別の複数のサーバへ1つ以上の仮想ボリュームを割り当てることができる。   In a disk array device, a volume can be efficiently used by a thin provisioning technology. In a disk array device to which the thin provisioning technology is applied, one or more existing RAID-configured volumes can be collected in a disk pool. In such a disk array device, it is possible to set the total capacity of logical volumes provided to external devices such as servers to a capacity larger than the actual capacity of the disk pool by collecting RAID-configured volumes in a disk pool. As a virtual volume, it can be assigned to an external device such as a server. By employing virtual volumes, one or more virtual volumes can be assigned to one server, or one or more virtual volumes can be assigned to a plurality of other servers.

導入初期においては、仮想ボリュームの実際の使用容量は少ないので、使用状況に合わせて、仮想ボリューム毎の使用容量の偏りが出たとしても、使用している総容量は、ディスクプールの実容量以内に効率的にディスクを割り当てて使用することができる。しかし、仮想ボリュームの使用している総容量がディスクプールの実容量を上回り、ディスクプールの容量が不足すると、サーバ等の外部装置における書き込みが失敗し、該仮想ボリュームを使用している業務の継続が難しくなる。そのため、ディスクプールの容量不足を防ぐために、計画的に物理ディスクを追加して、ディスクプールを拡張することが必要である。   Since the actual used capacity of the virtual volume is small at the initial stage of installation, the total used capacity is within the actual capacity of the disk pool even if the used capacity varies for each virtual volume according to the usage status. The disk can be allocated and used efficiently. However, if the total capacity used by the virtual volume exceeds the actual capacity of the disk pool and the capacity of the disk pool is insufficient, writing in an external device such as a server will fail, and continuation of operations that use the virtual volume will continue. Becomes difficult. For this reason, in order to prevent the disk pool from having insufficient capacity, it is necessary to expand the disk pool by systematically adding physical disks.

ディスクプールの容量不足を防ぐ技術の例として、例えば、特許文献1の特開2007−193573号公報「記憶装置システムおよび記憶制御方法」が開示されている。この特許文献1は、複数のディスクプールを備え、容量不足が生じる仮想ボリュームを他のディスクプールに移行し、ディスクプールの容量不足を解消するという方法を提案している。   As an example of a technique for preventing a disk pool capacity shortage, for example, Japanese Patent Laid-Open No. 2007-193573, “Storage device system and storage control method” of Patent Document 1, is disclosed. This patent document 1 proposes a method of eliminating a disk pool capacity shortage by transferring a virtual volume having a plurality of disk pools and causing a shortage of capacity to another disk pool.

なお、物理ディスクについては、ベンダなどの製品の違いにより、同容量の表記であっても、実際に使用可能な容量には差が存在しており、RAID構成を組む際に、容量の小さい物理ディスク側の容量を考慮した容量で使用されることになる。RAIDを構成する際には、実際に使用可能な容量を同じに設定するという観点からは、同時期の生産で、かつ、同じベンダで、かつ、同じ型番で、かつ、同じファームウェアバージョンである物理ディスクの使用が望ましく思えるが、物理ディスクの製造ロット不良を考慮すると、むしろ、物理ディスクを同じものに揃えない方が良いという考えもある。   For physical disks, there is a difference in the actual usable capacity even if the same capacity is indicated due to differences in products such as vendors. It is used with a capacity that takes into account the capacity on the disk side. When configuring the RAID, from the viewpoint of setting the actually usable capacity to the same, the physical that is the same production, the same vendor, the same model number, and the same firmware version Although the use of disks seems desirable, there is also the idea that it is better not to have the same physical disks in consideration of the physical disk production lot defect.

また、RAID構成においては、故障した物理ディスクを入れ替えていくことから、補修部品の物理ディスクとして、導入時にRAID構成されている物理ディスクとすべて同じものを用意することが難しい場合もある。そこで、RAID構成としては、容量差を生じることを考慮して、物理ディスクの容量よりも少なめに容量設定がなされることもある。   In addition, in a RAID configuration, since a failed physical disk is replaced, it may be difficult to prepare all the same physical disks that are RAID configured at the time of introduction as physical disks for repair parts. Therefore, in the RAID configuration, the capacity may be set to be smaller than the capacity of the physical disk in consideration of causing a capacity difference.

また、複数のRAIDを構成している場合、RAID単位で容量の異なる物理ディスクを用いて構成される場合もある。例えば、1TBの表記の物理ディスクで構成されるRAID構成と2TBの表記の物理ディスクで構成されるRAID構成との混在もある。かかる構成の場合には、RAID構成される物理ディスクが故障した場合、予備の物理ディスクであるホットスペアディスクが、故障した物理ディスクの代わりに、RAID構成に組み入れられる。このとき、RAIDを構成する物理ディスクは、容量が大きいものを容量の小さいものの代わりに利用することは可能であるので、ホットスペアディスクは、容量の大きい物理ディスクで構成することがある。例えば、1TBと2TBとのRAID構成の混在の場合には、ホットスペアディスクとしては2TBのディスクを用いて構成することがある。   Further, when a plurality of RAIDs are configured, there may be a case where physical disks having different capacities in RAID units are used. For example, there is a mixture of a RAID configuration composed of physical disks with 1 TB notation and a RAID configuration composed of physical disks with 2 TB notation. In such a configuration, when a physical disk configured as RAID fails, a hot spare disk that is a spare physical disk is incorporated into the RAID configuration instead of the failed physical disk. At this time, since a physical disk constituting a RAID can use a large capacity disk instead of a small capacity disk, the hot spare disk may be composed of a large capacity physical disk. For example, in the case of a mixed RAID configuration of 1 TB and 2 TB, a hot spare disk may be configured using a 2 TB disk.

特開2007−193573号公報JP 2007-193573 A

前述したような現状の技術においては、次のような問題を解決することができない。すなわち、ディスクアレイ装置においてシンプロビジョニング機能によりサーバ等に割り当てる仮想ボリュームの論理容量を実容量よりも多く割り当てる場合は、ディスクプールの容量が不足しないように、容量の監視と予測とにより事前に計画的な物理ディスクの追加と、ディスクプールの拡張を行うことが必要になる。   In the current technology as described above, the following problems cannot be solved. In other words, when assigning more than the actual capacity of the virtual volume to be allocated to the server, etc., with the thin provisioning function in the disk array device, plan and monitor the capacity in advance so that the capacity of the disk pool will not be insufficient. It is necessary to add a new physical disk and expand the disk pool.

ここで、かかる場合の問題点としては、次の点がある。すなわち、初期導入時には、予算等を抑えるために、最低限の物理容量のディスクアレイ装置によって構成した仮想ボリュームの導入を行うことが増えてきている。そのため、該仮想ボリュームの使用を継続していくには、物理ディスクの追加とディスクプールの拡張とを定期的に実施されることが前提となる。しかし、突発的に想定を上回って仮想ボリュームの使用容量が増大した場合には、物理ディスクの追加が、予算、手配等の準備も含め、間に合わない場合がある。このような場合には、ディスクプールの容量不足により、仮想ボリュームへの書き込みができなくなる状況が発生してしまい、サーバ側の業務の継続ができなくなる。また、サーバ側のOS(Operating System)やソフトの種類によっては、障害が発生し、業務継続に大きな支障が生じる場合もある。   Here, there are the following points as problems in such a case. That is, at the time of initial installation, in order to reduce the budget and the like, the introduction of a virtual volume configured by a disk array device having a minimum physical capacity is increasing. Therefore, in order to continue using the virtual volume, it is premised that the addition of the physical disk and the expansion of the disk pool are periodically performed. However, if the virtual volume usage capacity suddenly exceeds the assumption, the addition of the physical disk may not be in time, including preparations such as budget and arrangement. In such a case, a situation in which writing to the virtual volume cannot be performed due to insufficient capacity of the disk pool occurs, and the server side business cannot be continued. Further, depending on the type of OS (Operating System) and software on the server side, a failure may occur, which may cause a significant hindrance to business continuity.

また、前記特許文献1のように、複数のディスクプール間で容量を効率良く融通し合う技術においても、全体的に容量にゆとりが無い導入時の構成においては、突発的な容量増大に対してディスクプールの容量拡張が可能な容量にも限りがある。したがって、対応することができず、矢張り、ディスクプールの容量不足により書き込みができなくなって、サーバ側の業務の継続ができなくなる。また、同様に、サーバ側のOSやソフトの種類によっては、障害が発生し、業務継続に大きな支障が出る場合もある。   In addition, even in the technique of efficiently accommodating capacity between a plurality of disk pools as in Patent Document 1, in the configuration at the time of introduction where there is no room for capacity as a whole, sudden increase in capacity is prevented. The capacity that can expand the capacity of the disk pool is also limited. Therefore, it is impossible to cope with the situation, and writing cannot be performed due to the lack of capacity of the disk pool or the disk pool, and the server side business cannot be continued. Similarly, depending on the type of OS or software on the server side, a failure may occur, resulting in a significant hindrance to business continuity.

すなわち、特許文献1記載の技術等を含め、本発明に関連する現状の技術のディスクアレイ装置においては、ディスクプールの容量不足にして、サーバ等の外部装置側でディスク書き込みができなくなり、障害が発生して、業務が停止するという事態が発生することを防ぐことができなくなる。さらに、サーバ側のOSやソフトの種類によっては、障害が発生し、業務継続に大きな支障が生じてしまう。このように本発明に関連する現状の技術には、解決するべき課題がある。   That is, in the disk array device of the current technology related to the present invention including the technology described in Patent Document 1, the disk pool capacity is insufficient, and the disk writing cannot be performed on the external device side such as a server. It will not be possible to prevent the occurrence of a situation where the business is stopped. Furthermore, depending on the type of OS and software on the server side, a failure may occur, resulting in a significant hindrance to business continuity. Thus, the current technology related to the present invention has a problem to be solved.

(本発明の目的)
本開示の目的は、上述した課題に鑑み、ディスクプールの容量不足によって引き起こされる業務停止を回避することが可能なディスクアレイ装置およびディスクプール容量拡張方法の提供にある。
(Object of the present invention)
In view of the above-described problems, an object of the present disclosure is to provide a disk array device and a disk pool capacity expansion method capable of avoiding a business stop caused by a disk pool capacity shortage.

前述の課題を解決するため、本発明によるディスクアレイ装置およびディスクプール容量拡張方法は、主に、次のような特徴的な構成を採用している。   In order to solve the above-mentioned problems, the disk array device and the disk pool capacity expansion method according to the present invention mainly adopt the following characteristic configuration.

(1)本発明によるディスクアレイ装置は、
1ないし複数のRAIDを構成している各物理ディスクの容量をまとめて管理するディスクプールを形成して仮想ボリュームを提供し、
前記ディスクプールの使用容量が閾値に達したか否かの監視をするディスクプール監視手段と、
それぞれの前記物理ディスク内で生じている未使用領域を緊急時のディスクプール拡張用の容量として確保して管理する未使用領域管理手段と、
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達した場合、前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てる緊急容量確保手段と
を有することを特徴とする。
(1) A disk array device according to the present invention includes:
Providing a virtual volume by forming a disk pool that collectively manages the capacity of each physical disk constituting one or more RAIDs;
Disk pool monitoring means for monitoring whether the used capacity of the disk pool has reached a threshold;
Unused area management means for securing and managing an unused area generated in each of the physical disks as a capacity for expanding an emergency disk pool;
And an emergency capacity securing unit that temporarily allocates the unused area as a capacity expansion volume of the disk pool when the used capacity of the disk pool reaches the threshold based on the monitoring result. And

(2)本発明によるディスクプール容量拡張方法は、
1ないし複数のRAIDを構成している各物理ディスクの容量をまとめて管理するディスクプールを形成して仮想ボリュームを提供するディスクアレイ装置の前記ディスクプールの容量を拡張し、
前記ディスクプールの使用容量が閾値に達したか否かを監視するディスクプール監視ステップと、
それぞれの前記物理ディスク内で生じている未使用領域を緊急時のディスクプール拡張用の容量として確保して管理する未使用領域管理ステップと、
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達した場合、前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てる緊急容量確保ステップと
を有していることを特徴とする。
(2) A disk pool capacity expansion method according to the present invention includes:
Extending the capacity of the disk pool of a disk array device that provides a virtual volume by forming a disk pool that collectively manages the capacity of each physical disk constituting one or more RAIDs;
A disk pool monitoring step for monitoring whether the used capacity of the disk pool has reached a threshold;
An unused area management step for securing and managing an unused area generated in each of the physical disks as a capacity for expanding an emergency disk pool;
An emergency capacity securing step for temporarily allocating the unused area as a capacity expansion volume of the disk pool when the used capacity of the disk pool reaches the threshold based on the monitoring result. It is characterized by that.

本発明のディスクアレイ装置およびディスクプール容量拡張方法によれば、主に、以下のような効果を奏することができる。   According to the disk array device and the disk pool capacity expansion method of the present invention, the following effects can be mainly achieved.

つまり、本発明においては、ディスクプールの容量不足によって引き起こされる業務停止を回避することができ、業務を継続することが可能になることである。その理由は、RAID構成を形成する物理ディスク内で容量差を考慮して生じている未使用領域の容量を使用することによって、緊急時に、一時的に、ディスクプールを拡張して、容量不足を回避することを可能にしているからである。   In other words, in the present invention, it is possible to avoid a business stop caused by a lack of disk pool capacity and to continue the business. The reason for this is that by using the capacity of the unused area that occurs in consideration of the capacity difference in the physical disks that form the RAID configuration, the disk pool can be temporarily expanded in an emergency to reduce the capacity shortage. This is because it is possible to avoid it.

本発明に係るディスクアレイ装置のシステム構成の一例を示すシステム構成図である。1 is a system configuration diagram showing an example of a system configuration of a disk array device according to the present invention. 図1に示したディスクアレイ装置のディスクプールの構成を説明するための構成図である。FIG. 2 is a configuration diagram for explaining a configuration of a disk pool of the disk array device shown in FIG. 1. 図1に示したディスクアレイ装置において緊急時に実施されるディスクプールの容量拡張動作の一例を説明するフローチャートである。3 is a flowchart illustrating an example of a disk pool capacity expansion operation that is performed in an emergency in the disk array device illustrated in FIG. 1. 図1に示したディスクアレイ装置において未使用領域を用いた緊急時のディスクプールの容量拡張による緊急拡張状態から脱して通常の状態に復帰する動作の一例を説明するフローチャートである。3 is a flowchart for explaining an example of an operation of returning from the emergency expansion state by the capacity expansion of the emergency disk pool using an unused area to return to the normal state in the disk array device shown in FIG. 1.

以下、本発明によるディスクアレイ装置およびディスクプール容量拡張方法の好適な実施形態について添付図を参照して説明する。なお、以下の各図面に付した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではないことは言うまでもない。   Preferred embodiments of a disk array device and a disk pool capacity expansion method according to the present invention will be described below with reference to the accompanying drawings. It should be noted that the reference numerals attached to the following drawings are added for convenience to each element as an example for facilitating understanding, and it is needless to say that the present invention is not intended to be limited to the illustrated embodiment. Yes.

(本発明の特徴)
本発明の実施形態の説明に先立って、本発明の特徴についてその概要をまず説明する。本発明ディスクアレイ装置は、1ないし複数のRAIDを構成している各物理ディスクの容量をまとめて管理するディスクプールを形成して仮想ボリュームを提供する。このディスクアレイ装置は、前記ディスクプールの使用容量が閾値に達したか否かの監視をするディスクプール監視手段と、それぞれの前記物理ディスク内で生じている未使用領域を緊急時のディスクプール拡張用の容量として確保して管理する未使用領域管理手段と、を有している。さらに、前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達した場合、緊急拡張状態が発生したものと判定して、前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てる緊急容量確保手段をさらに有していることを主要な特徴としている。そして、該ディスクアレイ装置を、論理ボリュームとして、実容量よりも大きい仮想ボリュームをサーバ等の外部装置に割り当てることができるシンプロビジョニング機能を有するディスクアレイ装置として構成することができることも、主要な特徴の一つである。
(Features of the present invention)
Prior to the description of the embodiments of the present invention, an outline of the features of the present invention will be described first. The disk array device of the present invention provides a virtual volume by forming a disk pool that collectively manages the capacities of physical disks constituting one or more RAIDs. This disk array device comprises a disk pool monitoring means for monitoring whether or not the used capacity of the disk pool has reached a threshold value, and an unused area generated in each physical disk for expanding an emergency disk pool Unused area management means for securing and managing the capacity as a storage capacity. Further, based on the monitoring result, when the used capacity of the disk pool reaches the threshold, it is determined that an emergency expansion state has occurred, and the unused area is used as a capacity expansion volume of the disk pool. The main feature is that it further has an emergency capacity securing means to be temporarily allocated. The main feature is that the disk array device can be configured as a logical volume and a disk array device having a thin provisioning function capable of allocating a virtual volume larger than the actual capacity to an external device such as a server. One.

(本発明の実施形態の構成例)
次に、本発明に係るディスクアレイ装置の実施形態の構成例について図面を参照して詳細に説明する。 図1は、本発明に係るディスクアレイ装置のシステム構成の一例を示すシステム構成図であり、ディスクアレイ装置の内部構成の他に、該ディスクアレイ装置と接続される装置の一例についても示している。
(Configuration example of embodiment of the present invention)
Next, a configuration example of an embodiment of a disk array device according to the present invention will be described in detail with reference to the drawings. FIG. 1 is a system configuration diagram showing an example of the system configuration of a disk array device according to the present invention. In addition to the internal configuration of the disk array device, an example of a device connected to the disk array device is also shown. .

図1に示すように、本発明の一例を示すディスクアレイ装置10は、当該ディスクアレイ装置10から仮想ボリュームが提供される外部装置であるサーバ21、サーバ22、…等のサーバ群と、当該ディスクアレイ装置10を管理し、設定やステータス監視を行う管理端末30とが接続されて構成されている。   As shown in FIG. 1, a disk array device 10 showing an example of the present invention includes a server group such as a server 21, a server 22,... That is an external device to which a virtual volume is provided from the disk array device 10, and the disk A management terminal 30 that manages the array device 10 and performs setting and status monitoring is connected.

また、ディスクアレイ装置10の内部には、当該ディスクアレイ装置10の動作の制御を行う制御部100と当該ディスクアレイ装置10に設置された複数の物理ディスク210〜214、…、複数の物理ディスク220〜224、複数の物理ディスク230,231等の多数の物理ディスクを纏めているディスク部200とを、少なくとも備えている。なお、図1に示すように、物理ディスク210〜213、物理ディスク214および物理ディスク220〜224、物理ディスク230,231それぞれの1台当たりの容量は、例えば、1TB、2TB、2TBである。   Further, inside the disk array device 10, a control unit 100 that controls the operation of the disk array device 10, a plurality of physical disks 210 to 214,..., A plurality of physical disks 220 installed in the disk array device 10. 224, and a disk unit 200 in which a large number of physical disks such as a plurality of physical disks 230 and 231 are grouped. As shown in FIG. 1, the capacity of each of the physical disks 210 to 213, the physical disk 214 and the physical disks 220 to 224, and the physical disks 230 and 231 is, for example, 1 TB, 2 TB, and 2 TB.

また、制御部100により、物理ディスク210〜214、…、物理ディスク220〜224、物理ディスク230,231それぞれに対して、RAID311、…、RAID312、ホットスペア320として割り当てる設定動作処理を行うことや、制御部100の仮想ボリューム機能の処理としてRAID構成の容量をまとめたディスクプール300を形成して論理的に制御することが可能である。なお、仮想ボリュームをディスクプール300の実容量よりも大きい容量としてサーバ21,22等の外部装置に対して割り当てることが可能なシンプロビジョニング機能を付与することも可能である。   Further, the control unit 100 performs setting operation processing for assigning the physical disks 210 to 214,..., The physical disks 220 to 224, and the physical disks 230 and 231 as RAID 311,. As a process of the virtual volume function of the unit 100, it is possible to logically control by forming a disk pool 300 in which the capacity of the RAID configuration is collected. It is also possible to add a thin provisioning function that can allocate a virtual volume to an external device such as the servers 21 and 22 as a capacity larger than the actual capacity of the disk pool 300.

図1に示すサーバ21、サーバ22、…等のサーバ群は、ディスクアレイ装置10に対して、データの書き込みやデータの読み込みを行うものであり、図1には2台のサーバを記載しているが、1つ以上の任意の台数のサーバを接続するように構成しても良い。また、図1に示す管理端末30は、前述したように、ディスクアレイ装置10の各種ステータス情報の受信やディスクアレイ装置10の設定を行うものであり、場合によっては、サーバ21やサーバ22によって該管理端末30の機能を兼用するように構成しても良い。   The server group such as the server 21, the server 22,... Shown in FIG. 1 performs data writing and data reading with respect to the disk array device 10, and FIG. However, one or more arbitrary number of servers may be connected. Further, as described above, the management terminal 30 shown in FIG. 1 receives various status information of the disk array device 10 and sets the disk array device 10. You may comprise so that the function of the management terminal 30 may be shared.

ディスクアレイ装置10は、前述したように、内部に、制御部100と多数の物理ディスクを備えているディスク部200とによって構成されている。制御部100は、図1に示すように、ホスト管理部111、RAID・ホットスペア管理部112、ディスクプール管理部113、ディスクプール拡張部114、物理ディスク管理部115、ディスクプール監視部121、未使用領域管理部122、緊急容量確保部123、緊急状態復帰部124を少なくとも含んで構成されている。   As described above, the disk array device 10 includes the control unit 100 and the disk unit 200 including a large number of physical disks. As shown in FIG. 1, the control unit 100 includes a host management unit 111, a RAID / hot spare management unit 112, a disk pool management unit 113, a disk pool expansion unit 114, a physical disk management unit 115, a disk pool monitoring unit 121, an unused The area management unit 122, the emergency capacity securing unit 123, and the emergency state return unit 124 are included at least.

また、ディスク部200は、前述したように、複数の物理ディスク210〜214によって構成されたRAID311、複数の物理ディスク220〜224によって構成されたRAID312、複数の物理ディスク230,231によって構成されたホットスペア320、さらには、RAID311とRAID312とによって構成されたディスクプール300が含まれて構成されている。   Further, as described above, the disk unit 200 includes the RAID 311 configured by the plurality of physical disks 210 to 214, the RAID 312 configured by the plurality of physical disks 220 to 224, and the hot spare configured by the plurality of physical disks 230 and 231. 320, and further includes a disk pool 300 composed of RAID 311 and RAID 312.

制御部100は、ホスト管理部111によって、サーバ21、サーバ22、…のサーバ群との間で、仮想ボリュームの容量を提供する処理を行っている。仮想ボリュームは、1つのサーバ例えばサーバ21に対して1つ以上の仮想ボリュームの容量を割り当てても良いし、また、1つ以上のサーバ例えばサーバ21およびサーバ22の2つのサーバに対して1つ以上の仮想ボリュームの容量を割り当てても良い。   The control unit 100 uses the host management unit 111 to perform a process of providing a virtual volume capacity with the server group of the server 21, the server 22, and so on. One virtual volume may allocate one or more virtual volume capacities to one server, for example, server 21, and one virtual volume is allocated to one or more servers, such as server 21 and server 22. The above virtual volume capacity may be allocated.

また、制御部100は、物理ディスク管理部115により、ディスク部200の複数の物理ディスク210〜214、複数の物理ディスク220〜224、複数の物理ディスク230,231との間の接続処理を行っている。   Further, the control unit 100 uses the physical disk management unit 115 to perform connection processing among the plurality of physical disks 210 to 214, the plurality of physical disks 220 to 224, and the plurality of physical disks 230 and 231 of the disk unit 200. Yes.

また、制御部100は、RAID・ホットスペア管理部112により、ディスク部200にある複数の物理ディスク210〜214によるRAID311のRAID構成と、複数ディスクの物理ディスク220〜224によるRAID312のRAID構成と、を形成するための処理を行い、また、複数の物理ディスク230,231によるホットスペア320を構成する処理を行っている。   Also, the control unit 100 uses the RAID / hot spare management unit 112 to create a RAID 311 RAID configuration including a plurality of physical disks 210 to 214 in the disk unit 200 and a RAID 312 RAID configuration including a plurality of physical disks 220 to 224. A process for forming the hot spare 320 is performed, and a process for configuring the hot spare 320 by the plurality of physical disks 230 and 231 is performed.

また、制御部100は、ディスクプール管理部113により、仮想ボリューム機能(シンプロビジョニング機能も含めて良い)の処理を行い、ディスク部200のRAID311とRAID312との2つのRAID構成の物理容量をまとめたディスクプール300を構成する処理を行っている。なお、図1には、RAID311とRAID312との2つのRAID構成を1つのディスクプールでまとめているが、1つ以上の任意の個数のRAID構成によって1つのディスクプールを構成しても良いし、また、複数のディスクプールを構成するようにしても良い。   Further, the control unit 100 performs processing of the virtual volume function (including the thin provisioning function) by the disk pool management unit 113, and summarizes the physical capacities of the two RAID configurations of the RAID 311 and the RAID 312 of the disk unit 200. Processing to configure the disk pool 300 is performed. In FIG. 1, the two RAID configurations of RAID 311 and RAID 312 are combined into one disk pool, but one disk pool may be configured with one or more arbitrary RAID configurations. A plurality of disk pools may be configured.

また、制御部100は、ディスクプール拡張部114により、ディスクプール300へ容量追加の拡張処理を行う。   In addition, the control unit 100 uses the disk pool expansion unit 114 to perform expansion processing for adding capacity to the disk pool 300.

また、制御部100は、ディスクプール監視部121により、ディスクプール300の容量に関する閾値監視を行い、ディスクプール300の物理ディスクの総容量とサーバ(サーバ21、サーバ22、…のサーバ群)へ割り当てた仮想ボリュームにおいて実際に使用している総容量の使用率とを監視する。   Further, the control unit 100 uses the disk pool monitoring unit 121 to monitor the threshold regarding the capacity of the disk pool 300, and assigns the total physical disk capacity of the disk pool 300 and the servers (server group of the server 21, server 22,...). The usage rate of the total capacity actually used in the virtual volume is monitored.

また、制御部100は、未使用領域管理部122により、RAID構成している物理ディスク(複数の物理ディスク210〜214、複数の物理ディスク220〜224)の容量差を考慮して生じる、RAID構成で使用していない未使用領域を確保して管理している。該未使用領域については、後述する図2のディスクプール300のRAID構成の説明において詳細を説明する。   The control unit 100 also uses the unused area management unit 122 to create a RAID configuration that takes into account the capacity difference between the physical disks (a plurality of physical disks 210 to 214 and a plurality of physical disks 220 to 224) configured in RAID. The unused area that is not used by the system is secured and managed. Details of the unused area will be described later in the description of the RAID configuration of the disk pool 300 in FIG.

また、制御部100は、緊急容量確保部123により、未使用領域管理部122において管理されている未使用領域をまとめて容量確保し、ディスクプール300の容量拡張用のボリュームとして一時的に割り当てる処理を行う。   In addition, the control unit 100 uses the emergency capacity securing unit 123 to secure the unused areas managed by the unused area management unit 122 together and temporarily allocate the capacity as a capacity expansion volume of the disk pool 300. I do.

また、制御部100は、物理ディスク追加によるディスクプール300の容量拡張を行った後に、緊急状態復帰部124により、未使用領域に書き込まれたデータを、未使用領域からディスクプール300の容量拡張したボリューム(追加した物理ディスク)に対して移動させ、元の未使用領域に戻す処理を行う。   In addition, after expanding the capacity of the disk pool 300 by adding a physical disk, the control unit 100 expands the capacity of the disk pool 300 from the unused area to the data written in the unused area by the emergency state return unit 124. Move to the volume (added physical disk) and return to the original unused area.

ディスク部200は、複数の物理ディスク210〜214、複数の物理ディスク220〜224、複数の物理ディスク230,231とそれぞれ接続し、RAID311とRAID312とのRAID構成と、ホットスペア320とによって構成されている。図1には、2つのRAID構成と、2つの物理ディスクからなるホットスペア構成の例を示しているが、1つ以上のRAID構成と0個以上のホットスペアの構成であっても良い。   The disk unit 200 is connected to a plurality of physical disks 210 to 214, a plurality of physical disks 220 to 224, and a plurality of physical disks 230 and 231, respectively, and is configured by a RAID configuration of RAID 311 and RAID 312 and a hot spare 320. . FIG. 1 shows an example of a hot spare configuration composed of two RAID configurations and two physical disks, but it may be a configuration of one or more RAID configurations and zero or more hot spares.

なお、図1には、RAID311とRAID312とは、それぞれ、5個の物理ディスク210〜214と5個の物理ディスク220〜224とからなるRAID構成としている例を示しているが、2個以上の任意の個数の物理ディスクからなるRAID構成であっても良い。また、RAID311を構成する5個の物理ディスク210〜214のうち、4個の物理ディスク210〜213の容量は1TBであるが、物理ディスク214の容量だけ、物理ディスク補修交換結果として偶々2TBと他の物理ディスク210〜213とは異なる容量になっている場合を示している。   FIG. 1 shows an example in which RAID 311 and RAID 312 have a RAID configuration composed of five physical disks 210 to 214 and five physical disks 220 to 224, respectively. A RAID configuration composed of an arbitrary number of physical disks may be used. Of the five physical disks 210 to 214 constituting the RAID 311, the capacity of the four physical disks 210 to 213 is 1 TB, but only the capacity of the physical disk 214 is accidentally changed to 2 TB as the result of the physical disk repair and replacement. In this case, the capacity of the physical disks 210 to 213 is different.

また、ディスク部200は、RAID311とRAID312との2つのRAID構成の物理容量をまとめたディスクプール300を構成している。図1には、2つのRAID構成を1つのディスクプール300でまとめているが、1つ以上のRAID構成によって1つのディスクプールを構成しても良いし、また、1つ以上のRAID構成によって1つ以上のディスクプールで構成するようにしても良い。   Further, the disk unit 200 forms a disk pool 300 in which the physical capacities of the two RAID configurations of RAID 311 and RAID 312 are combined. In FIG. 1, two RAID configurations are combined into one disk pool 300, but one disk pool may be configured with one or more RAID configurations, and one RAID configuration may be one with one or more RAID configurations. It may be configured by two or more disk pools.

次に、図1に示したディスクアレイ装置10のディスクプール300について、図2を用いてさらに説明する。図2は、図1に示したディスクアレイ装置10のディスクプール300の構成を説明するための構成図である。図2のディスクプール300は、図1に示したように、RAID311とRAID312とにRAID構成されているが、RAID311としてRAID構成された各物理ディスク210〜214、RAID312としてRAID構成された各物理ディスク220〜224それぞれの容量差を考慮して、それぞれに未使用領域が存在している一例も併せて示している。   Next, the disk pool 300 of the disk array device 10 shown in FIG. 1 will be further described with reference to FIG. FIG. 2 is a configuration diagram for explaining the configuration of the disk pool 300 of the disk array device 10 shown in FIG. As shown in FIG. 1, the disk pool 300 in FIG. 2 is configured with RAID 311 and RAID 312, but each of the physical disks 210 to 214 configured as RAID 311 and each of the physical disks configured as RAID 312. Considering the capacity difference between 220 to 224, an example in which an unused area exists for each of them is also shown.

つまり、RAID311は、物理ディスク210、物理ディスク211、物理ディスク212、物理ディスク213、物理ディスク214の5個の物理ディスクからなるRAID構成としている。ここで、物理ディスク210、物理ディスク211は、1TBの容量と表記される物理ディスクであり、物理ディスク212、物理ディスク213も、同様に、1TBの容量と表記される物理ディスクであるが、前者の2つの物理ディスク210,211と後者の2つの物理ディスク212,213とは、ベンダと型番とが異なる物理ディスクであり、多少の容量差が生じている例を示している。なお、物理ディスク214は、2TBの容量と表記される物理ディスクである。   That is, the RAID 311 has a RAID configuration including five physical disks: a physical disk 210, a physical disk 211, a physical disk 212, a physical disk 213, and a physical disk 214. Here, the physical disk 210 and the physical disk 211 are physical disks expressed as 1 TB capacity, and the physical disk 212 and the physical disk 213 are similarly physical disks expressed as 1 TB capacity. These two physical disks 210 and 211 and the latter two physical disks 212 and 213 are physical disks with different vendors and model numbers, and show an example in which there is a slight capacity difference. The physical disk 214 is a physical disk expressed as 2 TB capacity.

異なる容量差がある複数の物理ディスクによって構成されたRAID構成は、容量が小さい物理ディスク側に合わせてRAIDの容量が設定されるので、RAID311の場合には、RAID構成に使用されていない未使用領域401が存在していることになる。つまり、図2に示す例においては、物理ディスク210,211の容量が最も小さいので、物理ディスク212,213,214に未使用領域401が存在する例を示している。   In the RAID configuration configured by a plurality of physical disks having different capacity differences, the RAID capacity is set in accordance with the physical disk having the smaller capacity. Therefore, in the case of RAID 311, it is not used for the RAID configuration. An area 401 exists. That is, in the example shown in FIG. 2, since the capacity of the physical disks 210 and 211 is the smallest, an example in which the unused area 401 exists in the physical disks 212, 213, and 214 is shown.

また、RAID312は、物理ディスク220、物理ディスク221、物理ディスク222、物理ディスク223、物理ディスク224の5個の物理ディスクからなるRAID構成としている。ここで、物理ディスク220、物理ディスク221、物理ディスク222は、2TBの容量と表記される物理ディスクであり、物理ディスク223、物理ディスク224も、2TBの容量と表記されている物理ディスクであるが、前者の3つ物理ディスク220〜222と後者の2つの物理ディスク223,224とは、ベンダと型番とが違う物理ディスクであり、多少の容量差が生じている例を示している。   The RAID 312 has a RAID configuration including five physical disks: a physical disk 220, a physical disk 221, a physical disk 222, a physical disk 223, and a physical disk 224. Here, the physical disk 220, the physical disk 221, and the physical disk 222 are physical disks expressed as 2TB capacity, and the physical disk 223 and the physical disk 224 are also physical disks expressed as 2TB capacity. The former three physical disks 220 to 222 and the latter two physical disks 223 and 224 are physical disks of different vendors and model numbers, and show an example in which a slight capacity difference occurs.

異なる容量差がある複数の物理ディスクによって構成されたRAID構成は、前述したように、容量が小さい物理ディスク側に合わせてRAIDの容量が設定されることになるが、さらには、将来入れ替わる物理ディスクの容量が少なくなる可能性を考慮して、RAID312の場合には、RAID構成における使用容量を少なく設定しており、RAID構成に使用されていない未使用領域402が存在することになる。つまり、図2に示す例においては、物理ディスク220〜224のすべてに未使用領域402が存在する例を示している。   As described above, in the RAID configuration configured by a plurality of physical disks having different capacity differences, the capacity of the RAID is set in accordance with the physical disk having the smaller capacity. Further, the physical disk to be replaced in the future. In the case of RAID 312, the used capacity in the RAID configuration is set to be small, and there is an unused area 402 that is not used in the RAID configuration. That is, in the example illustrated in FIG. 2, an example in which the unused area 402 exists in all of the physical disks 220 to 224 is illustrated.

本実施形態においては、以上のような構成により、RAID311における未使用領域401やRAID312における未使用領域402のように、RAID構成の各物理ディスク間における容量差を考慮して生じている未使用領域を、緊急時に、一時的に、ディスクプール拡張領域として割り当てることにしている。   In the present embodiment, an unused area generated in consideration of a capacity difference between physical disks in a RAID configuration, such as an unused area 401 in RAID 311 and an unused area 402 in RAID 312, in the present embodiment. Are temporarily allocated as a disk pool expansion area in an emergency.

(本発明の実施形態の動作の説明)
次に、本発明に係る一実施形態として図1、図2に示したディスクアレイ装置の動作についてその一例を詳細に説明する。まず、図1に示したディスクアレイ装置10が、緊急時に、一時的に、ディスクプール300を拡張する場合の動作についてその一例を図3のフローチャートを用いて詳細に説明する。図3は、図1に示したディスクアレイ装置10において緊急時に実施されるディスクプール300の容量拡張動作の一例を説明するフローチャートである。
(Description of the operation of the embodiment of the present invention)
Next, an example of the operation of the disk array device shown in FIGS. 1 and 2 as an embodiment according to the present invention will be described in detail. First, an example of the operation when the disk array device 10 shown in FIG. 1 expands the disk pool 300 temporarily in an emergency will be described in detail with reference to the flowchart of FIG. FIG. 3 is a flowchart for explaining an example of the capacity expansion operation of the disk pool 300 performed in the emergency in the disk array device 10 shown in FIG.

図1のディスクアレイ装置10の制御部100においては、ディスクプール監視部121により、ディスクプール300の使用量の監視と、閾値設定、および、使用量が該閾値を超えるか否かの判別監視と、の処理を常にバックグランドで行っている。図3のフローチャートにおいて、まず、ディスクプール300の使用量の監視は、ディスクプール管理部113から仮想ボリューム機能(場合によっては、さらに、シンプロビジョニング機能)の処理情報を取得して、ディスクプール300の物理ディスク210〜214,220〜224の総容量(未使用領域401,402を除く総容量)とサーバ21,22へ割り当てた仮想ボリュームとして実際に使用している総容量とに基づいて、使用率を計算して、該使用率を用いて監視を行っている(ステップa001)。そして、判別監視として、該使用率が容量閾値としてあらかじめ設定されている閾値に達したか否かを監視している。   In the control unit 100 of the disk array device 10 in FIG. 1, the disk pool monitoring unit 121 monitors the usage amount of the disk pool 300, sets a threshold value, and determines whether or not the usage amount exceeds the threshold value. The process is always performed in the background. In the flowchart of FIG. 3, first, the usage amount of the disk pool 300 is monitored by acquiring processing information of the virtual volume function (in some cases, a thin provisioning function in some cases) from the disk pool management unit 113. Usage rate based on the total capacity of physical disks 210 to 214 and 220 to 224 (total capacity excluding unused areas 401 and 402) and the total capacity actually used as virtual volumes allocated to servers 21 and 22 And the monitoring is performed using the usage rate (step a001). Then, as discrimination monitoring, it is monitored whether or not the usage rate has reached a threshold set in advance as a capacity threshold.

ディスクプール監視部121による判別監視結果として、前記使用率が前記閾値に達したかの判定を行い(ステップa0002)、前記閾値を超えた場合には(ステップa0002のYES)、ディスクプール300を構成しているRAID311、RAID312内の未使用領域401,402の確認ステップ(ステップa003)に進み、一方、前記閾値を超えてない場合には(ステップa0002のNO)、ステップa001に戻り、ディスクプール300の使用量監視を継続する。   As a result of discrimination monitoring by the disk pool monitoring unit 121, it is determined whether the usage rate has reached the threshold (step a0002). If the usage threshold is exceeded (YES in step a0002), the disk pool 300 is configured. The process proceeds to the confirmation step of unused areas 401 and 402 in the RAID 311 and RAID 312 (step a003). On the other hand, if the threshold is not exceeded (NO in step a0002), the process returns to step a001 to use the disk pool 300. Continue volume monitoring.

ステップa003に進むと、ディスクアレイ装置10の制御部100は、未使用領域管理部122により、複数の物理ディスク210〜214、物理ディスク220〜224のうち、RAID構成に使用していない未使用領域401,402を探して、ボリュームとして、ディスクプール300の容量拡張用に使用する準備処理を行う(ステップa003)。   In step a003, the control unit 100 of the disk array device 10 causes the unused area management unit 122 to use an unused area that is not used in the RAID configuration among the plurality of physical disks 210 to 214 and the physical disks 220 to 224. 401 and 402 are searched for, and a preparation process for use as a volume for expanding the capacity of the disk pool 300 is performed (step a003).

しかる後、緊急容量確保部123によって、未使用領域管理部122において準備した未使用領域401,402に対して、まとめて、ディスクプール300の容量拡張用のボリュームとして使用することが可能な容量確保の処理を行う(ステップa004)。   Thereafter, the emergency capacity securing unit 123 secures a capacity that can be used as a capacity expansion volume of the disk pool 300 for the unused areas 401 and 402 prepared in the unused area management unit 122. (Step a004).

そして、緊急容量確保部123は、ディスクプール拡張部114を介して、実使用量領域から設定したボリュームをディスクプール300に追加拡張する処理を行う(ステップa005)。この処理によって、ディスクプール300が容量拡張され、ディスクプール300の容量不足による業務停止を回避することができる。   Then, the emergency capacity securing unit 123 performs a process of additionally expanding the volume set from the actual usage amount area to the disk pool 300 via the disk pool expansion unit 114 (step a005). By this processing, the capacity of the disk pool 300 is expanded, and it is possible to avoid a business stop due to a lack of capacity of the disk pool 300.

しかる後、ディスクアレイ装置10の制御部100は、本ディスクアレイ装置10のステータスとして、緊急容量確保部123が未使用領域401,402によるディスクプール300の容量拡張を行った状態を、緊急拡張状態として設定して、本ディスクアレイ装置10を管理する管理端末30やサーバ21,22等の本ディスクアレイ装置10のディスクプール300を仮想ボリュームとして使用している外部装置に対して、緊急拡張状態の発生を示すステータス情報を通知する(ステップa005)。なお、ステータス情報については、管理端末30やサーバ21,22から、ディスクアレイ装置10に対してステータス確認が送信されてきた場合に、緊急拡張状態であることを示すステータス情報を通知するようにしても良い。   Thereafter, the control unit 100 of the disk array device 10 sets the status where the emergency capacity securing unit 123 has expanded the capacity of the disk pool 300 using the unused areas 401 and 402 as the status of the disk array device 10. To the external device that uses the disk pool 300 of the disk array device 10 such as the management terminal 30 and the servers 21 and 22 that manage the disk array device 10 as a virtual volume. Status information indicating the occurrence is notified (step a005). As for the status information, when the status confirmation is transmitted from the management terminal 30 or the servers 21 and 22 to the disk array device 10, the status information indicating the emergency extended state is notified. Also good.

次に、図1に示したディスクアレイ装置10のステータスが、図3のフローチャートの動作により緊急時に未使用領域401,402を用いてディスクプール300を容量拡張した緊急拡張状態から脱して、通常の状態に復帰する際の動作についてその一例を、図4のフローチャートを用いて詳細に説明する。図4は、図1に示したディスクアレイ装置10において未使用領域401,402を用いた緊急時のディスクプール300の容量拡張による緊急拡張状態から脱して、通常の状態に復帰する動作の一例を説明するフローチャートである。つまり、図4のフローチャートは、物理ディスクを新たに増設してディスクプール300の拡張工事を実施した後、緊急時に一時的に使用していたボリュームを、元の未使用領域401,402に戻して、次に発生する可能性がある緊急拡張状態に対応することが可能になるように、通常の状態に復帰するまでの動作について、その一例を説明している。   Next, the status of the disk array device 10 shown in FIG. 1 is released from the emergency expansion state in which the capacity of the disk pool 300 is expanded using the unused areas 401 and 402 in an emergency by the operation of the flowchart of FIG. An example of the operation when returning to the state will be described in detail with reference to the flowchart of FIG. FIG. 4 shows an example of an operation for returning from the emergency expansion state due to the capacity expansion of the emergency disk pool 300 using the unused areas 401 and 402 to return to the normal state in the disk array device 10 shown in FIG. It is a flowchart to explain. That is, in the flowchart of FIG. 4, after a physical disk is newly added and the disk pool 300 is expanded, the volume temporarily used in an emergency is returned to the original unused areas 401 and 402. An example of the operation until returning to the normal state is described so that it is possible to cope with the emergency extension state that may occur next.

図4のフローチャートにおいて、まず、図1のディスクアレイ装置10に物理ディスクを新たに増設すると、図1のディスクアレイ装置10の制御部100は、物理ディスク管理部115により、新たに追加された物理ディスクの接続と認識との処理を行った後、RAID・ホットスペア管理部112により、新たに追加された物理ディスクのRAID構成の設定等の処理が行われて、ディスクプール300の拡張が実施される(ステップb001)。   In the flowchart of FIG. 4, first, when a physical disk is newly added to the disk array device 10 of FIG. 1, the control unit 100 of the disk array device 10 of FIG. After the process of connecting and recognizing the disk, the RAID / hot spare management unit 112 performs the process of setting the RAID configuration of the newly added physical disk, and the disk pool 300 is expanded. (Step b001).

次に、ディスクアレイ装置10の制御部100は、ディスクプール拡張部114により、当該ディスクアレイ装置10の現在のステータスを確認して、緊急拡張状態の有無を判定する(ステップb002)。ディスクアレイ装置10の現在のステータスが緊急拡張状態ではなかった場合には(ステップb002のNO)、ステップb006に進み、ディスクプール拡張を正常に完了する。   Next, the control unit 100 of the disk array device 10 uses the disk pool expansion unit 114 to check the current status of the disk array device 10 and determine whether there is an emergency expansion state (step b002). If the current status of the disk array device 10 is not the emergency expansion state (NO in step b002), the process proceeds to step b006, and the disk pool expansion is normally completed.

一方、ディスクアレイ装置10の現在のステータスが緊急拡張状態であった場合には(ステップb002のYES)、ステップb003に進み、図3のフローチャートに示したような動作によって、緊急時として一時的に拡張したボリュームを元の状態に戻す処理を行う。すなわち、緊急状態復帰部124により、緊急拡張処理として図3のフローチャートにおいて作成されていたボリューム(RAID内の緊急拡張領域)に対して行われた書き込みデータを、物理ディスクの新たな増設によって拡張されたディスクプール300の新たな領域に移動させた後(ステップb003)、ステップb004以降の処理に進んで、緊急拡張処理として作成されたボリュームを未使用領域401,402に戻す処理に進む。   On the other hand, if the current status of the disk array device 10 is the emergency extended state (YES in step b002), the process proceeds to step b003, and temporarily as an emergency by the operation shown in the flowchart of FIG. Perform processing to restore the expanded volume to its original state. That is, the emergency state return unit 124 expands the write data, which was created in the flowchart of FIG. 3 as the emergency extension process in the flowchart of FIG. 3 (the emergency extension area in the RAID), by newly adding a physical disk. After moving to the new area of the disk pool 300 (step b003), the process proceeds to the process after step b004, and the process proceeds to the process of returning the volume created as the emergency expansion process to the unused areas 401 and 402.

まず、ステップb004においては、緊急状態復帰部124により、緊急拡張処理として図3のフローチャートにおいて作成されていたボリューム(RAID内の緊急拡張領域)に対して行われた書き込みデータを削除した後、該ボリューム(RAID内の緊急拡張領域)を開放して、元の未使用領域401,402に戻す(ステップb004)   First, in step b004, the emergency state return unit 124 deletes the write data that has been created for the volume (emergency expansion area in the RAID) created in the flowchart of FIG. The volume (emergency expansion area in RAID) is released and returned to the original unused areas 401 and 402 (step b004).

しかる後、ステップb005において、緊急状態復帰部124によって、本ディスクアレイ装置10のステータスを、緊急拡張状態から通常の状態に復帰させ、さらに、本ディスクアレイ装置10を管理する管理端末30やサーバ21,22等の本ディスクアレイ装置10のディスクプール300を仮想ボリュームとして使用している外部装置に対して、本ディスクアレイ装置10のステータスが緊急拡張状態から通常の状態に復帰した旨を示すステータス情報を通知する(ステップb005)。なお、ステータス情報については、管理端末30やサーバ21,22から、ディスクアレイ装置10に対してステータス確認が送信されてきた場合に、通常の状態であることを示すステータス情報を通知するようにしても良い。   Thereafter, in step b005, the emergency state return unit 124 returns the status of the disk array device 10 from the emergency extended state to the normal state, and further manages the disk array device 10 and the management terminal 30 and the server 21. Status information indicating that the status of the disk array device 10 has returned from the emergency extended state to the normal state with respect to an external device that uses the disk pool 300 of the disk array device 10 as a virtual volume. Is notified (step b005). As for the status information, when the status confirmation is transmitted from the management terminal 30 or the servers 21 and 22 to the disk array device 10, the status information indicating the normal state is notified. Also good.

以上により、ディスクプール拡張処理が完了し(ステップb006)、通常の状態としてディスクアレイ装置10を使用することができる状態に復帰し、次なるディスクプール300の容量不足の事態が発生した際に、緊急時として、未使用領域401,402を用いてディスクプール300の拡張を行うことが可能な状態になる。   As described above, when the disk pool expansion process is completed (step b006), the disk array apparatus 10 is returned to a normal state and the capacity of the next disk pool 300 is insufficient. In an emergency, the disk pool 300 can be expanded using the unused areas 401 and 402.

なお、RAID構成の物理ディスクにおいて容量差がある物理ディスクによって構成される1例としては、前述したように、物理ディスクに、同容量の表記がある場合であっても、ベンダの違いによって容量差が生じることや、同一のベンダであっても発売時期などで物理ディスク内の内部構成パーツの密度の違いやファームウェアの違いなどによって容量差が生じる。つまり、同容量の表記であっても、実際には容量の差が存在している。また、RAID構成は、故障した物理ディスクを入れ替えていくことから、補修部品の物理ディスクとして、導入時にRAID構成されている物理ディスクとすべて同じものを用意することが難しい場合もある。   In addition, as an example of a physical disk having a capacity difference in a RAID configuration physical disk, as described above, even if the physical disk has the same capacity notation, the capacity difference due to the vendor is different. Even with the same vendor, there is a difference in capacity due to the difference in the density of internal components in the physical disk and the difference in firmware at the time of release. In other words, there is actually a difference in capacity even if the same capacity is indicated. In addition, since the RAID configuration replaces a failed physical disk, it may be difficult to prepare all the same physical disks that are RAID configured at the time of introduction as the physical disks for repair parts.

したがって、RAID構成としては、容量差を生じることを考慮しておくことが必要になる。このため、図2に示したようなRAID構成の容量設定において物理ディスクに設定する未使用領域401,402の対象としては、物理ディスクのベンダや型番やファームウェアバージョン等の違いのみならず、後で、故障時に使用する補修用の物理ディスクのことを考慮して、RAID構成において使用する容量を物理ディスク実際の容量よりも少なく設定している場合も含める必要がある。   Therefore, it is necessary to consider that a capacity difference occurs in the RAID configuration. Therefore, the unused areas 401 and 402 set in the physical disk in the capacity setting of the RAID configuration as shown in FIG. 2 are not only the differences in the physical disk vendor, model number, firmware version, etc., but also later. Considering the physical disk for repair used at the time of failure, it is necessary to include the case where the capacity used in the RAID configuration is set smaller than the actual capacity of the physical disk.

また、図1に示したように、ホットスペア320の物理ディスク230,231としてはRAID構成の物理ディスク210〜214、物理ディスク220〜224と同等以上に容量が大きい物理ディスクが使用されている。したがって、RAID構成の物理ディスクにおいて容量差があるディスクによって構成される一例としては、ホットスペア320の物理ディスク230,231同等以下の容量の物理ディスクによってRAID構成されたいずれかのRAIDの物理ディスクの故障が発生した際に、ホットスペア320から容量が同等以上に大きい物理ディスクが組み込まれた後の状態になっている場合がある。   As shown in FIG. 1, as the physical disks 230 and 231 of the hot spare 320, physical disks having a capacity equal to or larger than that of the physical disks 210 to 214 and the physical disks 220 to 224 having a RAID configuration are used. Therefore, as an example of a disk having a capacity difference in a physical disk with a RAID configuration, a failure of one of the RAID physical disks configured with a physical disk having a capacity equal to or smaller than the physical disks 230 and 231 of the hot spare 320 May occur, a state after a physical disk having a capacity equal to or larger than that of the hot spare 320 is incorporated may be in a state.

そして、ディスクアレイ装置10の動作として、障害を起こして交換した新たな物理ディスクは、再び、元のRAID構成に組み込まれることに限らず、新たなホットスペア320として使用されることも可能である。かかる場合として、例えば、RAID構成として1TBの容量の物理ディスクの代わりに、2TBの物理ディスクがホットスペア320から組み込まれた場合、1TBが未使用領域となる。例えば、図2のディスクアレイ装置10のRAID311における物理ディスク214がこの場合に該当する。   Then, as an operation of the disk array device 10, a new physical disk that has been replaced due to a failure is not limited to being incorporated into the original RAID configuration, but can also be used as a new hot spare 320. In this case, for example, when a 2 TB physical disk is incorporated from the hot spare 320 instead of a physical disk having a capacity of 1 TB as a RAID configuration, 1 TB becomes an unused area. For example, the physical disk 214 in the RAID 311 of the disk array device 10 in FIG. 2 corresponds to this case.

また、ディスクプール監視部121によるディスクプール300の使用量の監視に用いる容量閾値としてあらかじめ設定されている閾値について、例えば、該閾値を90%に設定している場合、ディスクアレイ装置10の通常の運用形態においては、該閾値に達する前の例えば80%程度に達した際に、物理ディスクの増設の検討とディスクプール300の拡張の手続きを行うことが一般的に実施されている。しかしながら、かくのごとき運用形態であっても、物理ディスクの増設の実施が間に合わずに、前記閾値に達してしまった場合には、前述したように、未使用領域401,402を用いた緊急拡張状態のステータスに移行することになる。   In addition, regarding a threshold value set in advance as a capacity threshold value used for monitoring the usage amount of the disk pool 300 by the disk pool monitoring unit 121, for example, when the threshold value is set to 90%, the normal value of the disk array device 10 In the operation mode, for example, when reaching about 80% before the threshold is reached, it is generally performed to examine the expansion of the physical disk and the procedure for expanding the disk pool 300. However, even in such an operation mode, when the above threshold is reached without being able to add a physical disk in time, emergency extension using the unused areas 401 and 402 is used as described above. It will move to the status of the state.

(本実施形態の効果の説明)
以上に詳細に説明したように、本実施形態のディスクアレイ装置10においては、以下のような効果を奏することができる。
(Description of the effect of this embodiment)
As described in detail above, the following effects can be achieved in the disk array device 10 of the present embodiment.

つまり、本実施形態においては、ディスクプール300の容量不足によって引き起こされる業務停止を回避することができ、業務を継続することが可能になることである。その理由は、RAID構成を形成する物理ディスク内で容量差を考慮して生じている未使用領域401,402の容量を使用することによって、緊急時に、一時的に、ディスクプール300を拡張して、容量不足を回避することを可能にしているからである。   That is, in the present embodiment, it is possible to avoid a business stop caused by a lack of capacity of the disk pool 300, and to continue the business. The reason is that the disk pool 300 is temporarily expanded in an emergency by using the capacity of the unused areas 401 and 402 generated in consideration of the capacity difference in the physical disk forming the RAID configuration. This is because it is possible to avoid a shortage of capacity.

なお、本実施形態のディスクアレイ装置10は、シンプロビジョニング機能によりディスクプールの実容量よりも大きい容量の仮想ボリュームをサーバ21,22等の外部装置に対して仮想ボリュームとして提供する機能を有するディスクアレイ装置においては、特に効果的に適応することが可能である。   The disk array device 10 according to the present embodiment has a function of providing a virtual volume having a capacity larger than the actual capacity of the disk pool as a virtual volume to external devices such as the servers 21 and 22 by the thin provisioning function. In the device, it is possible to adapt particularly effectively.

(本発明の他の実施形態)
次に、前述した図1に示すディスクアレイ装置10の実施形態とは異なる本発明の他の実施形態について説明する。前述の図1のディスクアレイ装置10においては、ディスクアレイ装置10から論理ボリュームとして仮想ボリュームを割り当てるサーバ21、サーバ22それぞれとディスクアレイ装置10との間の接続については、例えば、ファイバチャネルやiSCSI(Internet Small Computer Systems Interface)等を使用して直接物理接続して、仮想ボリュームを直接サーバ21、サーバ22が認識することが可能な場合について説明した。しかし、本発明は、係る接続形式に限るものではなく、サーバ21、サーバ22がネットワーク経由でネットワークドライブとして仮想ボリュームを使用するような方式であっても良い。
(Other embodiments of the present invention)
Next, another embodiment of the present invention different from the embodiment of the disk array device 10 shown in FIG. 1 will be described. In the disk array device 10 of FIG. 1 described above, the connections between the disk array device 10 and the servers 21 and 22 that allocate virtual volumes as logical volumes from the disk array device 10 are, for example, Fiber Channel or iSCSI ( A case has been described in which the virtual volume can be directly recognized by the server 21 and the server 22 through direct physical connection using the Internet Small Computer Systems Interface). However, the present invention is not limited to such a connection type, and may be a system in which the server 21 and the server 22 use a virtual volume as a network drive via a network.

以上、本発明の好適な実施形態の構成を説明した。しかし、かかる実施形態は、本発明の単なる例示に過ぎず、何ら本発明を限定するものではないことに留意されたい。本発明の要旨を逸脱することなく、特定用途に応じて種々の変形変更が可能であることが、当業者には容易に理解できよう。   The configuration of the preferred embodiment of the present invention has been described above. However, it should be noted that such embodiments are merely examples of the present invention and do not limit the present invention in any way. Those skilled in the art will readily understand that various modifications and changes can be made according to a specific application without departing from the gist of the present invention.

10 ディスクアレイ装置
21 サーバ
22 サーバ
30 管理端末
100 制御部
111 ホスト管理部
112 RAID・ホットスペア管理部
113 ディスクプール管理部
114 ディスクプール拡張部
115 物理ディスク管理部
121 ディスクプール監視部
122 未使用領域管理部
123 緊急容量確保部
124 緊急状態復帰部
200 ディスク部
210〜214 物理ディスク
220〜214 物理ディスク
230,231 物理ディスク
300 ディスクプール
311 RAID
312 RAID
320 ホットスペア
401 未使用領域
402 未使用領域
10 disk array device 21 server 22 server 30 management terminal 100 control unit 111 host management unit 112 RAID / hot spare management unit 113 disk pool management unit 114 disk pool expansion unit 115 physical disk management unit 121 disk pool monitoring unit 122 unused area management unit 123 Emergency capacity securing unit 124 Emergency state recovery unit 200 Disk unit 210 to 214 Physical disk 220 to 214 Physical disk 230, 231 Physical disk 300 Disk pool 311 RAID
312 RAID
320 Hot spare 401 Unused area 402 Unused area

Claims (10)

1ないし複数のRAIDを構成している各物理ディスクの容量をまとめて管理するディスクプールを形成して仮想ボリュームを提供し、
前記ディスクプールの使用容量が閾値に達したか否かの監視をするディスクプール監視手段と、
それぞれの前記物理ディスク内で生じている未使用領域を緊急時のディスクプール拡張用の容量として確保して管理する未使用領域管理手段と、
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達した場合、前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てる緊急容量確保手段と
を有することを特徴とするディスクアレイ装置。
Providing a virtual volume by forming a disk pool that collectively manages the capacity of each physical disk constituting one or more RAIDs;
Disk pool monitoring means for monitoring whether the used capacity of the disk pool has reached a threshold;
Unused area management means for securing and managing an unused area generated in each of the physical disks as a capacity for expanding an emergency disk pool;
And an emergency capacity securing unit that temporarily allocates the unused area as a capacity expansion volume of the disk pool when the used capacity of the disk pool reaches the threshold based on the monitoring result. A disk array device.
論理ボリュームとして、前記ディスクプールの実容量よりも大きい容量の仮想ボリュームを外部装置に割り当てることができるシンプロビジョニング機能、
をさらに有していることを特徴とする請求項1に記載のディスクアレイ装置。
A thin provisioning function capable of allocating a virtual volume having a capacity larger than the actual capacity of the disk pool to an external device as a logical volume;
The disk array device according to claim 1, further comprising:
前記緊急容量確保手段により前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てた際に、当該ディスクアレイ装置を管理する管理端末、さらに、当該ディスクアレイ装置の前記ディスクプールを仮想ボリュームとして使用している前記外部装置が存在する場合は該外部装置に対して通知する
ことを特徴とする請求項1または2に記載のディスクアレイ装置。
When the unused area is temporarily allocated as a capacity expansion volume of the disk pool by the emergency capacity securing unit, a management terminal that manages the disk array apparatus, and further, the disk pool of the disk array apparatus The disk array device according to claim 1 or 2, wherein when there is the external device used as a virtual volume, the external device is notified.
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達したことによる緊急拡張状態において、物理ディスクの新たな増設により、前記ディスクプールの容量が拡張された際に、当該ディスクプールの前記容量拡張用のボリュームとして一時的に割り当てた前記未使用領域に対して書き込まれたデータを新たに増設された前記物理ディスク内の新たな領域に移動させた後、該容量拡張用のボリュームを開放して、元の前記未使用領域に復帰させる緊急状態復帰手段
をさらに有することを特徴とする請求項1ないし3のいずれかに記載のディスクアレイ装置。
Based on the result of the monitoring, when the capacity of the disk pool is expanded by a new addition of a physical disk in the emergency expansion state due to the used capacity of the disk pool reaching the threshold value, After the data written to the unused area temporarily allocated as the capacity expansion volume is moved to a new area in the newly added physical disk, the capacity expansion volume is moved. The disk array device according to any one of claims 1 to 3, further comprising emergency state return means for releasing and returning to the original unused area.
前記緊急事態復帰手段により、前記ディスクプールの前記容量拡張用のボリュームとして一時的に割り当てた前記未使用領域を元の状態に復帰させた際に、前記緊急拡張状態から通常の状態に復帰したことを、当該ディスクアレイ装置を管理する前記管理端末、さらに、当該ディスクアレイ装置の前記ディスクプールを仮想ボリュームとして使用している前記外部装置が存在する場合は該外部装置に対して通知する
ことを特徴とする請求項4に記載のディスクアレイ装置。
When the unused area temporarily allocated as the capacity expansion volume of the disk pool is returned to the original state by the emergency return means, the emergency extension state has returned to the normal state. The management terminal that manages the disk array device, and further, when there is the external device that uses the disk pool of the disk array device as a virtual volume, is notified to the external device. The disk array device according to claim 4.
1ないし複数のRAIDを構成している各物理ディスクの容量をまとめて管理するディスクプールを形成して仮想ボリュームを提供するディスクアレイ装置の前記ディスクプールの容量を拡張し、
前記ディスクプールの使用容量が閾値に達したか否かを監視するディスクプール監視ステップと、
それぞれの前記物理ディスク内で生じている未使用領域を緊急時のディスクプール拡張用の容量として確保して管理する未使用領域管理ステップと、
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達した場合、前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てる緊急容量確保ステップと
を有していることを特徴とするディスクプール容量拡張方法。
Extending the capacity of the disk pool of a disk array device that provides a virtual volume by forming a disk pool that collectively manages the capacity of each physical disk constituting one or more RAIDs;
A disk pool monitoring step for monitoring whether the used capacity of the disk pool has reached a threshold;
An unused area management step for securing and managing an unused area generated in each of the physical disks as a capacity for expanding an emergency disk pool;
An emergency capacity securing step for temporarily allocating the unused area as a capacity expansion volume of the disk pool when the used capacity of the disk pool reaches the threshold based on the monitoring result. A disk pool capacity expansion method characterized by the above.
論理ボリュームとして、前記ディスクプールの実容量よりも大きい容量の仮想ボリュームを外部装置に割り当てることができるシンプロビジョニング機能、
をさらに有していることを特徴とする請求項6に記載のディスクプール容量拡張方法。
A thin provisioning function capable of allocating a virtual volume having a capacity larger than the actual capacity of the disk pool to an external device as a logical volume;
The disk pool capacity expansion method according to claim 6, further comprising:
前記緊急容量確保ステップにより前記未使用領域を前記ディスクプールの容量拡張用のボリュームとして一時的に割り当てた際に、当該ディスクアレイ装置を管理する管理端末、さらに、当該ディスクアレイ装置の前記ディスクプールを仮想ボリュームとして使用している前記外部装置が存在する場合は該外部装置に対して通知する
ことを特徴とする請求項6または7に記載のディスクプール容量拡張方法。
When the unused area is temporarily allocated as a capacity expansion volume of the disk pool in the emergency capacity securing step, the management terminal that manages the disk array device, and further the disk pool of the disk array device The disk pool capacity expansion method according to claim 6 or 7, wherein when there is the external device used as a virtual volume, the external device is notified.
前記監視の結果に基づき、前記ディスクプールの使用容量が前記閾値に達したことによる緊急拡張状態において、物理ディスクの新たな増設により、前記ディスクプールの容量が拡張された際に、当該ディスクプールの前記容量拡張用のボリュームとして一時的に割り当てた前記未使用領域に対して書き込まれたデータを新たに増設された前記物理ディスク内の新たな領域に移動させた後、該容量拡張用のボリュームを開放して、元の前記未使用領域に復帰させる緊急状態復帰ステップ
をさらに有していることを特徴とする請求項6ないし8のいずれかに記載のディスクプール容量拡張方法。
Based on the result of the monitoring, when the capacity of the disk pool is expanded by a new addition of a physical disk in the emergency expansion state due to the used capacity of the disk pool reaching the threshold value, After the data written to the unused area temporarily allocated as the capacity expansion volume is moved to a new area in the newly added physical disk, the capacity expansion volume is moved. The disk pool capacity expansion method according to any one of claims 6 to 8, further comprising an emergency state return step of releasing and returning to the original unused area.
前記緊急事態復帰ステップにより、前記ディスクプールの前記容量拡張用のボリュームとして一時的に割り当てた前記未使用領域を元の状態に復帰させた際に、前記緊急拡張状態から通常の状態に復帰したことを、当該ディスクアレイ装置を管理する前記管理端末、さらに、当該ディスクアレイ装置の前記ディスクプールを仮想ボリュームとして使用している前記外部装置が存在する場合は該外部装置に対して通知する
ことを特徴とする請求項9に記載のディスクプール容量拡張方法。
When the unused area temporarily allocated as the capacity expansion volume of the disk pool is restored to the original state by the emergency return step, the emergency extension state is restored to the normal state. The management terminal that manages the disk array device, and further, when there is the external device that uses the disk pool of the disk array device as a virtual volume, is notified to the external device. The disk pool capacity expansion method according to claim 9.
JP2018033097A 2018-02-27 2018-02-27 Disk array device and disk pool capacity expansion method Active JP6927580B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018033097A JP6927580B2 (en) 2018-02-27 2018-02-27 Disk array device and disk pool capacity expansion method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018033097A JP6927580B2 (en) 2018-02-27 2018-02-27 Disk array device and disk pool capacity expansion method

Publications (2)

Publication Number Publication Date
JP2019148977A true JP2019148977A (en) 2019-09-05
JP6927580B2 JP6927580B2 (en) 2021-09-01

Family

ID=67850495

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018033097A Active JP6927580B2 (en) 2018-02-27 2018-02-27 Disk array device and disk pool capacity expansion method

Country Status (1)

Country Link
JP (1) JP6927580B2 (en)

Also Published As

Publication number Publication date
JP6927580B2 (en) 2021-09-01

Similar Documents

Publication Publication Date Title
US9348724B2 (en) Method and apparatus for maintaining a workload service level on a converged platform
US8261032B2 (en) Storage system to backup dirty data elements using a cache memory
US20090077302A1 (en) Storage apparatus and control method thereof
JP4480756B2 (en) Storage management device, storage system control device, storage management program, data storage system, and data storage method
US7457916B2 (en) Storage system, management server, and method of managing application thereof
US9256507B2 (en) Computer system and its event notification method
JP5158074B2 (en) Storage management program, storage management method, storage management device, and storage system
US8209505B2 (en) Storage system and method of taking over logical unit in storage system
JP4711688B2 (en) Storage system
JP6212934B2 (en) Storage system, information processing apparatus control program, and storage system control method
JP7140898B2 (en) Storage system and data allocation method in the storage system
US20200042416A1 (en) Information processing system, information processing system management method, and program thereof
JPWO2018138813A1 (en) Computer system
JP2005196490A (en) System and method for data duplication
US8886993B2 (en) Storage device replacement method, and storage sub-system adopting storage device replacement method
KR20210138502A (en) System, method, and device for fault resilient storage
US20140156815A1 (en) Storage system and method for managing configuration information thereof
JPH09269871A (en) Data re-redundancy making system in disk array device
US9116859B2 (en) Disk array system having a plurality of chassis and path connection method
US20110296103A1 (en) Storage apparatus, apparatus control method, and recording medium for storage apparatus control program
JP2019148977A (en) Disk array apparatus and disk pool capacity expanding method
US10514846B2 (en) Computer system and management method for computer
JP2010009476A (en) Computer system
JP6805838B2 (en) Disk management system, disk management method, and disk management program
JP2017228078A (en) Storage device, storage controller, and storage control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190606

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200722

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200825

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201013

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210224

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210329

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210729

R150 Certificate of patent or registration of utility model

Ref document number: 6927580

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150