JP2008171231A - Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program - Google Patents
Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program Download PDFInfo
- Publication number
- JP2008171231A JP2008171231A JP2007004294A JP2007004294A JP2008171231A JP 2008171231 A JP2008171231 A JP 2008171231A JP 2007004294 A JP2007004294 A JP 2007004294A JP 2007004294 A JP2007004294 A JP 2007004294A JP 2008171231 A JP2008171231 A JP 2008171231A
- Authority
- JP
- Japan
- Prior art keywords
- array
- disk
- array disk
- generation
- maintenance management
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 66
- 238000007726 management method Methods 0.000 title claims abstract description 55
- 238000011084 recovery Methods 0.000 claims abstract description 67
- 230000003449 preventive effect Effects 0.000 claims abstract description 22
- 238000000034 method Methods 0.000 claims description 14
- 238000004891 communication Methods 0.000 claims description 10
- 238000012806 monitoring device Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 4
- 238000012544 monitoring process Methods 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 6
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Abstract
Description
本発明は、アレイディスク群の保守管理技術に関し、特に、アレイディスクの予防交換の判定基準をアレイディスクの世代毎に動的に変更するアレイディスク群の保守管理システム、アレイディスク群の保守管理装置、アレイディスク群の保守管理方法およびアレイディスク群の保守管理プログラムに関する。 The present invention relates to an array disk group maintenance management technique, and more particularly to an array disk group maintenance management system and an array disk group maintenance management apparatus that dynamically change a judgment criterion for preventive replacement of an array disk for each generation of array disks. The present invention relates to an array disk group maintenance management method and an array disk group maintenance management program.
複数のフィールド(ディスク装置の運用場所)とサポートセンタを通信回線などで接続し、各フィールドに設置されたディスク装置から送られてくるエラー情報などをサポートセンタ(集中監視装置)で受信し、複数のディスク装置を集中監視するシステムが運用されている。
上記ディスク装置として、冗長構成のアレイディスク装置が使用されている場合、ディスクが故障(フォルト)しても、予備のディスクであるHS(Hot Spare)にデータをコピーすることにより、運用を継続することが可能である。
上記システムにおいて、従来においては例えば以下のようにして、各フィールドに設置されたディスク装置の保守管理を行っている。
Multiple fields (disk device operating location) and support center are connected via communication lines, etc., and error information sent from disk devices installed in each field is received by the support center (centralized monitoring device). A system for centralized monitoring of disk devices is operating.
When a redundant array disk device is used as the disk device, even if the disk fails (faults), the operation is continued by copying data to the spare disk HS (Hot Spare). It is possible.
In the above system, conventionally, for example, maintenance management of disk devices installed in each field is performed as follows.
例えば、冗長構成のアレイディスクがフォルトすると、データを予備のディスクであるHSにコピーするとともに、フォルトの発生したことを上記センタに通知する。
上記通知を受けたセンタでは、CE(カスタマーエンジニア)に対して該ディスク装置の保守を指示する。CEは保守部品などを準備し、フォルトが発生したディスクが設置された場所に行き、ディスクを交換するなどの保守を行う。なお、ここでは、ディスクのフォルトとは、ディスクがリカバリ不能な程度に故障することをいう。
For example, when a redundant array disk faults, data is copied to the spare disk HS, and the center is notified that a fault has occurred.
Upon receiving the above notification, the center instructs CE (customer engineer) to maintain the disk device. The CE prepares maintenance parts, etc., goes to the place where the faulted disk is installed, and performs maintenance such as replacing the disk. Here, the disk fault means that the disk fails to the extent that it cannot be recovered.
しかし、複数のディスクのフォルトが発生した場合、HSが不足し、RAIDの冗長化が崩れる恐れがある。したがって、アレイディスクが故障する前に、事前にディスクの予防交換(フォルトの発生しそうなディスクを、フォルト前に交換)を実施することが望ましい。
ディスクを予防交換する技術としては、例えば特許文献1に記載のものが知られている。特許文献1に記載のものは、ディスクのエラー情報を取得して所定のファイルに記録し、所得したエラー情報を統計分析することにより、障害発生前に予防交換すべきかを判断し、ディスク障害が発生する前に、自動的に正常なディスクを使用したアレイディスクに組み変えるようにしたものである。
As a technique for preventive replacement of a disk, for example, a technique described in
年々、新しいバードディスクが開発・提供されているが、その信頼性等は必ずしも同じではなく、ディスクの型格、開発・提供時期などによりバラツキがある。
例えば、代替可能な同様な性能のディスクであっても、ある時期に提供されたディスクより、これより前あるいは後に提供されたディスクの方が信頼性が高いという場合も多々ある。以下では、上述したように、信頼性が変わらないと考えられる同じような時期に開発・提供された性能、容量、用途等に応じて分類される一連のディスク群の単位をそれぞれ世代と表現する。すなわち、異なる世代のディスクとは、信頼性が異なっていると考えられる、異なる時期に開発・提供時期されたディスクを意味する。
従って、前述したようなディスクの予防交換を行うに際しては、ディスクの世代を考慮して信頼性の低い世代のディスクは早めに交換するなどの措置を講ずることが望ましい。
New bird discs are being developed and provided year by year, but their reliability is not always the same, and there are variations depending on the type of disc and the timing of development and provision.
For example, even if a disk with similar performance that can be replaced, a disk provided earlier or later is more reliable than a disk provided at a certain time. In the following, as described above, a series of disk group units classified according to performance, capacity, usage, etc. developed and provided at the same time when reliability is considered to be unchanged will be expressed as generations. . In other words, different generation disks mean disks that are considered to have different reliability and have been developed and provided at different times.
Therefore, when performing the above-described preventive replacement of a disk, it is desirable to take measures such as replacing a disk of a low-reliability generation early in consideration of the disk generation.
従来においては、世代によって信頼性が異なるといった認識はあったものの、世代による信頼性の相違を考慮して、ディスク装置の予防交換を自動的に行うといった考え方はなく、せいぜい、ディスク装置のエラー情報などから、人手により、世代による信頼性の相違を把握し、信頼性の低い世代のディスクは、早めに交換するといったことが行われていた程度であった。
しかし、監視すべきアレイディスク装置が多数あり、ディスクの世代数が多く、さらにアレイディスク装置に、世代の異なるディスクが混在して使用されているような場合には、上述したように人手により世代毎にディスクの信頼性を認識し、予防交換を行うことは困難である。
本発明は、上述した問題点を解決するためになされたものであって、アレイディスク装置群の保守管理を行うに際し、世代毎の信頼性を考慮してディスクの予防交換が行えるようにし、各フィールドに設置されたアレイディスク装置の信頼性を向上させることを目的とする。
In the past, although it was recognized that the reliability was different depending on the generation, there was no idea of automatically performing a preventive replacement of the disk device in consideration of the difference in reliability depending on the generation. At best, error information of the disk device From the above, it was only possible to grasp the difference in reliability by generation and replace the disk of a generation with low reliability early.
However, when there are many array disk devices to be monitored, the number of disk generations is large, and disks with different generations are mixedly used in the array disk device, the generation is done manually as described above. It is difficult to recognize the reliability of the disk every time and perform preventive replacement.
The present invention has been made in order to solve the above-described problems. When performing maintenance management of an array disk device group, it is possible to perform preventive replacement of a disk in consideration of reliability for each generation. The object is to improve the reliability of an array disk device installed in the field.
各アレイディスク装置でリカバリエラー(ディスクを交換せずに修復可能なエラー)の発生回数を調べ、リカバリエラーの発生回数が、判定基準である予め定められた閾値を超えると、各アレイディスク装置では、前述したように自動的にリカバリエラが閾値を越えたディスクをHSに交換し、アレイディスク装置の構成を組み変える。
上記において、本発明では、集中監視装置と各場所に設置されたアレイディスク装置とを通信手段で接続し、集中監視装置で、アレイディスク装置からエラー情報などのログ情報を取得し、上記ログ情報から各アレイディスク装置におけるディスクのフォルト(リカバリできない故障)数を得て、このフォルト数からディスクの世代毎の故障率を算出する。
そして、算出されたディスクの世代毎の故障率に基づき、各アレイディスク装置における上記閾値を更新する。例えば、ある世代のディスクの故障率が高い場合には、該ディスクが組み込まれているアレイディスク装置における当該ディスクの閾値を下げ、リカバリエラーの発生回数が比較的少ない場合でも、予防交換されるようにする。
このように、世代毎のディスクの故障率に基づき、予防交換するか否かを判定する判定基準である閾値を更新することにより、故障率が高い世代のディスクは早めに予防交換されることになり、リカバリできない故障が発生する率を低下させることができ、アレイディスク装置全体の信頼性を向上させることができる。
Check the number of occurrences of recovery errors (errors that can be repaired without replacing the disk) in each array disk device, and if the number of occurrences of recovery errors exceeds a predetermined threshold that is a criterion, each array disk device As described above, the disk whose recovery error exceeds the threshold value is automatically replaced with HS, and the configuration of the array disk device is reconfigured.
In the above, in the present invention, the centralized monitoring device and the array disk device installed at each place are connected by communication means, the centralized monitoring device acquires log information such as error information from the array disk device, and the log information Thus, the number of disk faults (failures that cannot be recovered) in each array disk device is obtained, and the failure rate for each disk generation is calculated from the number of faults.
Then, based on the calculated failure rate for each disk generation, the threshold value in each array disk device is updated. For example, when a failure rate of a certain generation of disks is high, the threshold value of the disk in the array disk device in which the disk is incorporated is lowered so that even if the number of occurrences of recovery errors is relatively small, preventive replacement is performed. To.
In this way, by updating the threshold value, which is a criterion for determining whether to perform preventive replacement based on the failure rate of the disk for each generation, the generational disk with a high failure rate is proactively replaced. Thus, the rate of occurrence of failures that cannot be recovered can be reduced, and the reliability of the entire array disk device can be improved.
すなわち、本発明においては、以下のように前記課題を解決する。
(1)アレイディスク群に含まれるアレイディスクのリカバリエラーの発生回数が所定の閾値を超えた時に該アレイディスクの予防交換を行う複数のディスク装置と、上記複数のディスク装置と通信手段で接続され、上記複数のディスク装置を集中監視する集中監視装置とを備えるアレイディスク群の保守管理システムを設ける。
そして、上記集中監視装置は、上記複数のディスク装置からログ情報を取得するログ情報取得手段と、上記取得されたログ情報からフォルトしたアレイディスクの数の情報を取得するフォルト数情報取得手段と、上記取得されたフォルトしたアレイディスクの数の情報に基づいて、上記アレイディスクの世代毎の故障率を算出する故障率算出手段と、上記算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新する閾値更新手段とを備える。
(2)上記複数のディスク装置は、上記アレイディスクのリカバリエラーの発生回数が上記所定の閾値を超えた時に、該アレイディスク内のデータを予備のアレイディスクにコピーして、該アレイディスクの切り離しを行う。
(3)上記閾値更新手段は、上記算出されたアレイディスクの世代毎の故障率と故障率についての所定の閾値とを比較し、該アレイディスクの世代毎の故障率と故障率についての所定の閾値との比較結果に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての所定の閾値を更新する。
That is, in the present invention, the above-mentioned problem is solved as follows.
(1) A plurality of disk devices that perform preventive replacement of an array disk when the number of occurrences of recovery errors of the array disks included in the array disk group exceeds a predetermined threshold, and the plurality of disk devices are connected by communication means. An array disk group maintenance management system comprising a centralized monitoring device for centrally monitoring the plurality of disk devices is provided.
And the centralized monitoring device, log information acquisition means for acquiring log information from the plurality of disk devices, fault number information acquisition means for acquiring information on the number of faulted array disks from the acquired log information, Based on the acquired information on the number of faulted array disks, failure rate calculation means for calculating the failure rate for each generation of the array disk, and based on the calculated failure rate for each generation of the array disk, Threshold update means for updating the predetermined threshold for the number of occurrences of recovery errors in each generation of array disks.
(2) When the number of occurrences of recovery errors of the array disk exceeds the predetermined threshold, the plurality of disk devices copy the data in the array disk to a spare array disk and disconnect the array disk I do.
(3) The threshold value updating means compares the calculated failure rate for each generation of the array disk with a predetermined threshold value for the failure rate, and determines a predetermined failure rate and failure rate for each generation of the array disk. Based on the comparison result with the threshold, a predetermined threshold for the number of occurrences of recovery errors of the array disks of each generation is updated.
本発明のアレイディスク群の保守管理システム、アレイディスク群の保守管理装置、アレイディスク群の保守管理方法およびアレイディスク群の保守管理プログラムは、複数のディスク装置からログ情報を取得し、該ログ情報からフォルトしたアレイディスクの数の情報(フォルト数情報)を取得し、該フォルト数情報に基づいて、アレイディスクの世代毎の故障率を算出し、該算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新する。
また、上記複数のディスク装置は、上記アレイディスクのリカバリエラーの発生回数が上記所定の閾値を超えた時に、該アレイディスク内のデータを予備のアレイディスクにコピーして、該アレイディスクの切り離しを行う(予防交換を行う)。
An array disk group maintenance management system, an array disk group maintenance management device, an array disk group maintenance management method, and an array disk group maintenance management program according to the present invention acquire log information from a plurality of disk devices, and the log information Information on the number of faulted array disks (fault number information) is obtained, a failure rate for each generation of the array disk is calculated based on the fault number information, and the calculated failure rate for each generation of the array disk Based on the above, the predetermined threshold for the number of occurrences of recovery errors of the array disks of each generation is updated.
The plurality of disk devices copy the data in the array disk to a spare array disk and disconnect the array disk when the number of occurrences of recovery errors of the array disk exceeds the predetermined threshold. Perform (perform preventive replacement).
従って、本発明によれば、アレイディスクの予防交換の判定基準をアレイディスクの世代毎に動的に変更することができる。その結果、複数のディスク装置に分散して配置された各世代のアレイディスクを、世代毎に自動的に予防交換することが可能となる。
このため、故障率が高い世代のディスクは早めに予防交換されることになり、リカバリできない故障が発生する率を低下させることができ、アレイディスク装置の信頼性を向上させることができる。
Therefore, according to the present invention, it is possible to dynamically change the judgment criteria for preventive replacement of array disks for each generation of array disks. As a result, it is possible to automatically prevent and replace each generation of array disks distributed and arranged in a plurality of disk devices for each generation.
Therefore, a generation disk having a high failure rate is proactively replaced early, the rate at which failures that cannot be recovered can be reduced, and the reliability of the array disk device can be improved.
図1は、本発明のアレイディスク群の保守管理システムの構成の一例を示す図である。本発明のアレイディスク群の保守管理システムは、アレイディスク群の保守管理装置1と、複数のディスク装置2とを備える。
FIG. 1 is a diagram showing an example of the configuration of an array disk group maintenance management system according to the present invention. The array disk group maintenance management system of the present invention includes an array disk group
アレイディスク群の保守管理装置1は、ディスク装置2とネットワーク等の通信手段3で接続され、ディスク装置2を集中監視する処理装置である。具体的には、アレイディスク群の保守管理装置1は、アレイディスク101を備えるディスク装置2からログ情報を取得し、該ログ情報に基づいてフォルト数情報を取得し、取得したフォルト数情報に基づいて、アレイディスク101の世代毎の故障率を算出する。上記フォルト数情報とは、フォルトしたアレイディスクの数の情報である。
The array disk group
また、アレイディスク群の保守管理装置1は、算出されたアレイディスク101の世代毎の故障率に基づいて、ディスク装置2が備える各世代のアレイディスク101のリカバリエラーの発生回数の閾値を更新し、更新した該閾値の情報をディスク装置2に対して送信して、ディスク装置2内の閾値記憶部205に記憶させる。
また、アレイディスク群の保守管理装置1は、ディスク装置2から後述するエラー通知を受信して、アレイディスク群の保守管理装置1のオペレータ(図示を省略)に通知する。当該通知を受けたオペレータは、ディスク装置2の保守要員100に対してメール通知や電話連絡等して、上記エラー通知の送信元であるディスク装置2の保守を行わせる。
Further, the
The array disk group
複数のディスク装置2の各々は、アレイディスク101を備え、該アレイディスク101を管理する。各ディスク装置2は、例えば複数のフィールド(場所)に設置されており、また、例えば複数の世代のアレイディスク101を備えている。従って、各世代のアレイディスク101は、例えば複数のフィールドに分散して配置されている。
ディスク装置2は、ログ情報をアレイディスク群の保守管理装置1に対して送信する。上記ログ情報には、ディスク装置2が備えるアレイディスク101のうち、フォルトしたアレイディスクの情報が含まれている。また、該ログ情報には、例えば、後述するアレイディスク101のリカバリエラーの種類の情報が含まれている。
Each of the plurality of
The
また、ディスク装置2は、アレイディスク群の保守管理装置1から送信された各世代のアレイディスクのリカバリエラーの発生回数の閾値を閾値記憶部205に記憶する。ここで、アレイディスク101のリカバリエラーは複数種類存在する。例えば、ディスク装置2によるリード動作、ライト動作、ヘッドシーク動作等の各動作内容毎に、リカバリエラーが存在する。従って、ディスク装置2は、リカバリエラーの種類毎に、各世代のアレイディスク101のリカバリエラーの発生回数の閾値を閾値記憶部205に記憶するようにしてもよい。
また、ディスク装置2は、アレイディスク101のリカバリエラーの発生回数が閾値記憶部205に記憶された閾値を超えた時に、該アレイディスク101の予防交換を行う。すなわち、閾値記憶部205に記憶された閾値は、アレイディスクの予防交換の判定基準である。
Further, the
In addition, the
ディスク装置2内のアレイディスク101(図1中の#1および#2に示すアレイディスク101)は、例えばミラー構成されている。ディスク装置2は、例えば、#2に示すアレイディスク101のリカバリエラーの発生回数が上記閾値を超えた時に、該アレイディスク101内のデータを予備のアレイディスクであるHS102にコピーして、該アレイディスク101の切り離しを行う。該アレイディスク101のデータのHS102へのコピーと該アレイディスクの切り離しを行って、該アレイディスク101とHS102とを入れ替える処理を、リダンダントコピーという。該切り離されたアレイディスク101は、フォルトしたものと扱われる。
ディスク装置2は、フォルト扱いとしたアレイディスク101を切り離した後に、アレイディスク群の保守管理装置1に対してエラー通知を行う。エラー通知は、アレイディスク101がフォルトしたことの通知である。
The
The
アレイディスク群の保守管理装置1は、送受信部11、フォルト数情報取得部12、故障率算出部13、閾値更新部14、ログ情報記憶部15、閾値記憶部16を備える。
送受信部11は、ディスク装置2から送信されたログ情報を受信して、受信したログ情報をログ情報記憶部15に記憶する。また、送受信部11は、閾値更新部14によって更新されたリカバリエラーの発生回数の閾値情報をディスク装置2に対して送信する。
送受信部11は、アレイディスク群の保守管理装置1のオペレータによって入力される、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信するか特定のディスク装置2に送信するかを示す選択情報に基づいて、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信し、または、特定のディスク装置2(例えば、当該閾値に対応する世代のアレイディスク101を備えるディスク装置2)に対して送信する。また、送受信部11は、ディスク装置2からエラー通知を受信して、オペレータに通知する。
The array disk group
The transmission / reception unit 11 receives the log information transmitted from the
The transmission / reception unit 11 transmits the information on the updated threshold value of the number of occurrences of recovery errors input by the operator of the
フォルト数情報取得部12は、ログ情報記憶部15内に記憶されたログ情報に基づいて、フォルト数情報を取得する。具体的には、フォルト数情報取得部12はログ情報記憶部15からログ情報を抽出する。抽出されたログ情報中には、ディスク装置2内においてフォルトしたアレイディスク101の情報が含まれているので、フォルト数情報取得部12は、抽出されたログ情報に基づいて、フォルト数情報を取得する。
故障率算出部13は、フォルト数情報取得部12によって取得されたフォルト数情報に基づいて、アレイディスク101の故障率を各世代毎に算出する。故障率算出部13は、例えばアレイディスクの年間故障率(AFR:Annual failure Rate )を算出する。AFRの算出例については後述する。
The fault number
The failure
閾値更新部14は、故障率算出部13によって算出されたアレイディスク101の故障率に基づいて、閾値記憶部16内に記憶されている各世代のアレイディスク101のリカバリエラーの発生回数の閾値を更新する。本発明の一実施例によれば、閾値更新部14は、リカバリエラーの種類毎に、各世代のアレイディスク101のリカバリエラーの発生回数の閾値を更新するようにしてもよい。
ログ情報記憶部15には、ディスク装置2から受信されたログ情報が記憶される。閾値記憶部16には、閾値更新部14によって更新されたリカバリエラーの発生回数の閾値が記憶される。
Based on the failure rate of the
The log information storage unit 15 stores log information received from the
なお、上述したアレイディスク群の保守管理装置1及びその各部の機能は、CPUとその上で実行されるプログラムにより実現される。当該本発明を実現するプログラムは、コンピュータが読み取り可能な記録媒体、例えば半導体メモリ、ハードディスク、CD−ROM、DVD等に格納することができ、これらの記録媒体に記録して提供され、又は、通信インタフェースを介してネットワークを利用した送受信により提供される。
Note that the functions of the array disk group
図2は、ディスク装置の構成の一例を示す図である。ここでは、ディスク装置2がRAID5の装置である場合を例にとって説明する。
ディスク装置2は、ディスク装置部20とRAIDコントローラ21とを備える。ディスク装置部20は、アレイディスク101およびHS102を備え、アレイディスク101のリダンダントコピー(アレイディスク101内のデータのHS102へのコピーおよび該アレイディスク101の切り離し)を行う。アレイディスク101のリダンダントコピーの例については、図3を参照して後述する。図2中の#1〜#4に示すアレイディスク101は、例えばRAID5を構成している。RAIDコントローラ21は、ファームウェアで構成されており、ディスク装置部20に対してリダンダントコピーを指示する。
FIG. 2 is a diagram illustrating an example of the configuration of the disk device. Here, a case where the
The
RAIDコントローラ21は、エラー通知部201、ログ送信部202、送受信部203、リダンダントコピー指示部204、閾値記憶部205を備える。
エラー通知部201は、ディスク装置部20がアレイディスク101を切り離した時に、送受信部203を通じて、アレイディスク群の保守管理装置1に対してエラー通知を行う。
ログ送信部202は、送受信部203を通じて、ディスク装置2のログ情報をアレイディスク群の保守管理装置1に対して送信する。
The RAID controller 21 includes an
The
The
送受信部203は、アレイディスク群の保守管理装置1に対してエラー通知を行い、また、ログ情報を送信する。また、送受信部203は、アレイディスク群の保守管理装置1からアレイディスク101のリカバリエラーの発生回数の閾値情報を受信して、閾値記憶部205に記憶する。
リダンダントコピー指示部204は、アレイディスク101のリカバリエラーの発生回数を監視し、該リカバリエラーの発生回数が閾値記憶部205に記憶された閾値を超えたと判断すると、ディスク装置部20に対してリダンダントコピーを指示する。
The transmission /
The redundant
図3は、図2に示すディスク装置におけるリダンダントコピーの一例を示す図である。リダンダントコピー指示部204が、図3(A)中の#3に示すアレイディスク101のリカバリエラーの発生回数が閾値記憶部205に記憶されている閾値を超えたと判断すると、リダンダントコピー指示部204は、ディスク装置部20に対して#3に示すアレイディスク101を予防交換対象ドライブとして、リダンダントコピーを指示する。
FIG. 3 is a diagram showing an example of a redundant copy in the disk device shown in FIG. When the redundant
該リダンダントコピーの指示を受けたディスク装置部20は、図3(A)中に示すように、#3に示すアレイディスク101内のデータをHS102にコピーするとともに、図3(B)中に示すように、該#3に示すアレイディスク101の切り離しと、HS102のRAID5への組み込みを行う。
Upon receiving the redundant copy instruction, the
図4は、アレイディスク群の保守管理装置によるアレイディスクの世代毎のAFRの算出例を説明する図である。ここでは、各世代のアレイディスク101が複数のフィールドに分散して配置されている場合を例にとって説明する。なお、フィールドとは、ディスク装置2の運用場所である。
FIG. 4 is a diagram for explaining an example of calculating the AFR for each generation of array disks by the array disk group maintenance management apparatus. Here, a case will be described as an example where
図4(A)中に示すように、a世代、b世代、c世代、・・・といった各世代のアレイディスク101は、第1フィールド、第2フィールド、・・・といった複数のフィールドに分散して配置されている。
例えば、第1フィールドにおけるa世代のアレイディスク101の年間フォルト数がna1台、b世代のアレイディスク101の年間フォルト数がnb1台、c世代のアレイディスク101の年間フォルト数がnc1台、・・・である。また、例えば第2フィールドにおけるa世代のアレイディスク101の年間フォルト数がna2台、b世代のアレイディスク101の年間フォルト数がnb2台、c世代のアレイディスク101の年間フォルト数がnc2台、・・・である。上記各世代の年間フォルト数の情報は、ログ情報の一部として、各フィールドに配置されたディスク装置2からアレイディスク群の保守管理装置1に送信される。
As shown in FIG. 4A, each generation of
For example, the annual fault number of the a
アレイディスク群の保守管理装置1が備えるフォルト数情報取得部12は、上記各世代の年間フォルト数の情報を算出する。すなわち、フォルト数情報取得部12は、図4(B)に示すように、例えばa世代のアレイディスク101の年間フォルト数として、na1+na2+・・・、b世代のアレイディスク101の年間フォルト数として、nb1+nb2+・・・、c世代のアレイディスク101の年間フォルト数として、nc1+nc2+・・・を算出する。a世代、b世代、c世代以外の世代のアレイディスク101の年間フォルト数についても同様に算出される。
そして、図4(C)に示すように、故障率算出部13が、上記算出された各世代の年間フォルト数の情報に基づいて、所定のAFR算出式に基づいて、各世代のアレイディスクのAFRを算出する。
The fault number
Then, as shown in FIG. 4C, the failure
図5は、アレイディスク群の保守管理装置によるリカバリエラーの発生回数の閾値の更新処理の例を説明する図である。この例では、アレイディスク群の保守管理装置1が備える閾値更新部14が、図4を参照して前述したAFRの算出例に従って故障率算出部13が算出したアレイディスクの世代毎のAFRと、予め定められた該AFRの閾値の情報とを比較し、該比較結果に基づいて、各世代のリカバリエラーの発生回数の閾値を更新する。
FIG. 5 is a diagram illustrating an example of threshold value update processing for the number of occurrences of recovery errors by the array disk group maintenance management device. In this example, the threshold update unit 14 included in the
より具体的には、閾値更新部14は、AFRが該AFRの閾値未満であると判断した場合には、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を更新せず、AFRが該AFRの閾値以上であると判断した場合には、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を、該AFRが該AFRの閾値を超える程度に応じた値に設定して減らす。閾値更新部14は、例えば、AFRが該AFRの閾値を超える程度が大きいほど、設定するリカバリエラーの発生回数の閾値を小さくする。
More specifically, when the threshold update unit 14 determines that the AFR is less than the threshold of the AFR, the threshold update unit 14 updates the threshold of the number of occurrences of recovery errors for the generation of the
図5中に示すグラフの横軸はアレイディスク101の世代、縦軸はアレイディスク101の各世代に対応するAFRである。EtはAFRの閾値、Eaはa世代のアレイディスク101のAFR、Ebはb世代のアレイディスク101のAFR、Ecはc世代のアレイディスク101のAFRである。
The horizontal axis of the graph shown in FIG. 5 is the generation of the
閾値更新部14は、EaとEtとを比較し、EaがEt未満であると判断する。従って、閾値更新部14は、a世代のアレイディスクについてのリカバリエラーの発生回数の閾値を更新しない。
また、閾値更新部14は、EbとEtとを比較し、EbがEt以上であると判断する。従って、閾値更新部14は、b世代のアレイディスクについてのリカバリエラーの発生回数の閾値を、例えばEbからEtを減じた結果得られる値に応じた値に設定して減らす。 また、閾値更新部14は、EcとEtとを比較し、EcがEt以上であると判断する。従って、閾値更新部14は、c世代のアレイディスクについてのリカバリエラーの発生回数の閾値を、EcからEtを減じた結果得られる値に応じた値に設定して減らす。
The threshold update unit 14 compares Ea and Et, and determines that Ea is less than Et. Therefore, the threshold update unit 14 does not update the threshold for the number of occurrences of recovery errors for the a generation array disks.
Further, the threshold update unit 14 compares Eb and Et, and determines that Eb is equal to or greater than Et. Therefore, the threshold update unit 14 reduces the threshold of the number of occurrences of recovery errors for the b generation array disks by setting, for example, a value corresponding to a value obtained as a result of subtracting Et from Eb. Further, the threshold update unit 14 compares Ec and Et, and determines that Ec is equal to or greater than Et. Therefore, the threshold update unit 14 reduces the threshold of the number of occurrences of recovery errors for the c generation array disks by setting the threshold to a value obtained as a result of subtracting Et from Ec.
本発明におけるリカバリエラーの発生回数の閾値の更新処理は、上述した処理に限定されない。本発明の一実施例によれば、閾値更新部14が、例えば、AFRが該AFRの閾値未満であると判断した場合には、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を増やし、AFRが該AFRの閾値と等しいと判断した場合には、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を更新せず、AFRが該AFRの閾値より大きいと判断した場合には、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を減らすようにしてもよい。
The threshold value update process for the number of occurrences of recovery errors in the present invention is not limited to the process described above. According to one embodiment of the present invention, when the threshold update unit 14 determines that the AFR is less than the threshold of the AFR, for example, the occurrence of a recovery error for the generation of the
図6は、アレイディスク群の保守管理装置によるリカバリエラーの発生回数の閾値の更新処理フローの例を示す図である。
まず、アレイディスク群の保守管理装置1の送受信部11が、ディスク装置2からログ情報を受信して(ステップS1)、ログ情報記憶部15に記憶する。次に、フォルト数情報取得部12が、ログ情報記憶部15からログ情報を切り出す(ステップS2)。
フォルト数情報取得部12は、切り出したログ情報を解析して、フォルト数情報を取得する(ステップS3)。そして、故障率算出部13が、取得されたフォルト数情報に基づいて、各世代のアレイディスク101のAFRを算出する(ステップS4)。そして、故障率算出部13が、ステップS4において算出されたAFRが該AFRの閾値未満かを判断する(ステップS5)。
FIG. 6 is a diagram showing an example of a processing flow for updating the threshold value of the number of occurrences of recovery errors by the array disk group maintenance management device.
First, the transmission / reception unit 11 of the array disk group
The fault number
故障率算出部13が、AFRが該AFRの閾値未満であると判断した場合は、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値に1を加えて(ステップS10)、ステップS8に進む。故障率算出部13が、AFRが該AFRの閾値未満でないと判断した場合は、故障率算出部13は、AFRが該AFRの閾値より大きいかを判断する(ステップS6)。
If the failure
故障率算出部13が、AFRが該AFRの閾値より大きくない(すなわち、AFR=AFRの閾値である)と判断した場合、故障率算出部13は、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値を更新しない(ステップS11)。故障率算出部13が、AFRが該AFRの閾値より大きいと判断した場合、故障率算出部13は、該AFRに対応する世代のアレイディスク101についてのリカバリエラーの発生回数の閾値から1を減じて(ステップS7)、ステップS8に進む。
When the failure
次に、アレイディスク群の保守管理装置1のオペレータが、上記ステップS7またはステップS10において更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信するか特定のディスク装置2に送信するかを示す選択情報を送受信部11に対して入力すると、送受信部11は、入力された選択情報に基づいて、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信するか特定のディスク装置2に送信するかを判断する(ステップS8)。ステップS8において、送受信部11は、予め設定された上記選択情報に基づいて、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信するか特定のディスク装置2に送信するかを判断するようにしてもよい。
Next, the operator of the
送受信部11が、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に送信すると判断した場合には、送受信部11は、更新されたリカバリエラーの発生回数の閾値の情報を全てのディスク装置2に対して送信する(ステップS9)。
送受信部11が、更新されたリカバリエラーの発生回数の閾値の情報を特定のディスク装置2に送信すると判断した場合には、送受信部11は、更新されたリカバリエラーの発生回数の閾値の情報を該特定のディスク装置2に対して送信する(ステップS12)。
When the transmission / reception unit 11 determines to transmit the updated information on the number of occurrences of recovery errors to all the
When the transmission / reception unit 11 determines to transmit the updated information on the number of occurrences of the recovery error to the
以上、説明したように、本発明によれば、アレイディスクの予防交換の判定基準をアレイディスクの世代毎に動的に変更することができる。その結果、複数のディスク装置に分散して配置された各世代のアレイディスクを、世代毎に自動的に予防交換することが可能となる。 As described above, according to the present invention, the criterion for preventive replacement of an array disk can be dynamically changed for each generation of array disks. As a result, it is possible to automatically prevent and replace each generation of array disks distributed and arranged in a plurality of disk devices for each generation.
1 アレイディスク群の保守管理装置
2 ディスク装置
3 通信手段
11 送受信部
12 フォルト数情報取得部
13 故障率算出部
14 閾値更新部
15 ログ情報記憶部
16、205 閾値記憶部
20 ディスク装置部
21 RAIDコントローラ
100 保守要員
101 アレイディスク
102 HS
201 エラー通知部
202 ログ送信部
203 送受信部
204 リダンダントコピー指示部
DESCRIPTION OF
201
Claims (6)
上記アレイディスク群に含まれるアレイディスクのリカバリエラーの発生回数が所定の閾値を超えた時に該アレイディスクの予防交換を行う複数のディスク装置と、
上記複数のディスク装置と通信手段で接続され、上記複数のディスク装置を集中監視する集中監視装置とを備え、
上記集中監視装置は、
上記複数のディスク装置からログ情報を取得するログ情報取得手段と、
上記取得されたログ情報からフォルトしたアレイディスクの数の情報を取得するフォルト数情報取得手段と、
上記取得されたフォルトしたアレイディスクの数の情報に基づいて、上記アレイディスクの世代毎の故障率を算出する故障率算出手段と、
上記算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新する閾値更新手段とを備える
ことを特徴とするアレイディスク群の保守管理システム。 An array disk group maintenance management system,
A plurality of disk devices that perform preventive replacement of the array disk when the number of occurrences of recovery errors of the array disk included in the array disk group exceeds a predetermined threshold;
A centralized monitoring device connected to the plurality of disk devices by communication means and centrally monitoring the plurality of disk devices;
The centralized monitoring device is
Log information acquisition means for acquiring log information from the plurality of disk devices;
Fault number information acquisition means for acquiring information on the number of faulted array disks from the acquired log information;
A failure rate calculating means for calculating a failure rate for each generation of the array disk based on the acquired information on the number of faulted array disks;
An array disk group comprising threshold update means for updating the predetermined threshold for the number of occurrences of recovery errors of the array disk of each generation based on the calculated failure rate for each generation of the array disk Maintenance management system.
ことを特徴とする請求項1に記載のアレイディスク群の保守管理システム。 When the number of occurrences of recovery errors of the array disk exceeds the predetermined threshold, the plurality of disk devices copy the data in the array disk to a spare array disk and detach the array disk The maintenance management system for an array disk group according to claim 1.
ことを特徴とする請求項1に記載のアレイディスク群の保守管理システム。 The threshold update unit compares the calculated failure rate for each generation of the array disk with a predetermined threshold for the failure rate, and determines the failure rate for each generation of the array disk and the predetermined threshold for the failure rate. 2. The array disk group maintenance management system according to claim 1, wherein a predetermined threshold for the number of occurrences of recovery errors of each generation of array disks is updated based on the comparison result.
上記複数のディスク装置からログ情報を取得するログ情報取得手段と、
上記取得されたログ情報からフォルトしたアレイディスクの数の情報を取得するフォルト数情報取得手段と、
上記取得されたフォルトしたアレイディスクの数の情報に基づいて、上記アレイディスクの世代毎の故障率を算出する故障率算出手段と、
上記算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新する閾値更新手段とを備える
ことを特徴とするアレイディスク群の保守管理装置。 A maintenance management device for an array disk group connected by a communication means to a plurality of disk devices that perform preventive replacement of the array disk when the number of occurrences of recovery errors of the array disk included in the array disk group exceeds a predetermined threshold. There,
Log information acquisition means for acquiring log information from the plurality of disk devices;
Fault number information acquisition means for acquiring information on the number of faulted array disks from the acquired log information;
A failure rate calculating means for calculating a failure rate for each generation of the array disk based on the acquired information on the number of faulted array disks;
An array disk group, comprising: threshold update means for updating the predetermined threshold for the number of occurrences of recovery errors of the array disks of each generation based on the calculated failure rate for each generation of array disks Maintenance management equipment.
上記複数のディスク装置からログ情報を取得するステップと、
上記取得されたログ情報からフォルトしたアレイディスクの数の情報を取得するステップと、
上記取得されたフォルトしたアレイディスクの数の情報に基づいて、上記アレイディスクの世代毎の故障率を算出するステップと、
上記算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新するステップとからなる
ことを特徴とするアレイディスク群の保守管理方法。 In a maintenance management device for an array disk group, which is connected by a communication means to a plurality of disk devices that perform preventive replacement of the array disk when the number of occurrences of recovery errors of the array disk included in the array disk group exceeds a predetermined threshold A maintenance management method for array disks,
Obtaining log information from the plurality of disk devices;
Acquiring information on the number of faulted array disks from the acquired log information;
Calculating a failure rate for each generation of the array disk based on the acquired information on the number of faulted array disks;
The maintenance of the array disk group comprising the step of updating the predetermined threshold for the number of occurrences of recovery errors of the array disks of each generation based on the calculated failure rate for each generation of array disks Management method.
コンピュータに、
上記複数のディスク装置からログ情報を取得する処理と、
上記取得されたログ情報からフォルトしたアレイディスクの数の情報を取得する処理と、
上記取得されたフォルトしたアレイディスクの数の情報に基づいて、上記アレイディスクの世代毎の故障率を算出する処理と、
上記算出されたアレイディスクの世代毎の故障率に基づいて、各世代のアレイディスクのリカバリエラーの発生回数についての上記所定の閾値を更新する処理とを実行させる
ことを特徴とするアレイディスク群の保守管理プログラム。 In a maintenance management device for an array disk group, which is connected by a communication means to a plurality of disk devices that perform preventive replacement of the array disk when the number of occurrences of recovery errors of the array disk included in the array disk group exceeds a predetermined threshold A maintenance management program for array disks,
On the computer,
Processing for obtaining log information from the plurality of disk devices;
A process of acquiring information on the number of faulty array disks from the acquired log information;
A process of calculating a failure rate for each generation of the array disk based on the acquired information on the number of faulted array disks;
A process of updating the predetermined threshold for the number of occurrences of recovery errors of each generation of array disks based on the calculated failure rate for each generation of array disks. Maintenance management program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007004294A JP4854522B2 (en) | 2007-01-12 | 2007-01-12 | Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007004294A JP4854522B2 (en) | 2007-01-12 | 2007-01-12 | Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008171231A true JP2008171231A (en) | 2008-07-24 |
JP4854522B2 JP4854522B2 (en) | 2012-01-18 |
Family
ID=39699262
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007004294A Expired - Fee Related JP4854522B2 (en) | 2007-01-12 | 2007-01-12 | Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4854522B2 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012014531A (en) * | 2010-07-01 | 2012-01-19 | Fujitsu Ltd | Storage device, controller of storage device and control method for storage device |
CN103297264A (en) * | 2013-04-19 | 2013-09-11 | 无锡成电科大科技发展有限公司 | Cloud platform failure recovery method and system |
JP2015184858A (en) * | 2014-03-24 | 2015-10-22 | 日本電気株式会社 | disk array system, method, and program |
JP2016099859A (en) * | 2014-11-25 | 2016-05-30 | 日本電気株式会社 | Maintenance management system, maintenance management method, and maintenance management program |
JP2017033412A (en) * | 2015-08-04 | 2017-02-09 | 株式会社東芝 | Storage management device and method, and storage system |
JP2021018561A (en) * | 2019-07-19 | 2021-02-15 | セイコーエプソン株式会社 | Method for controlling information processing apparatus, program, and communication system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07200191A (en) * | 1994-01-10 | 1995-08-04 | Fujitsu Ltd | Disk array device |
JP2004227449A (en) * | 2003-01-27 | 2004-08-12 | Hitachi Ltd | Diagnostic device for trouble in disk array device |
JP2005004869A (en) * | 2003-06-11 | 2005-01-06 | Adtex:Kk | Recording device, recording data management method, and program |
-
2007
- 2007-01-12 JP JP2007004294A patent/JP4854522B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07200191A (en) * | 1994-01-10 | 1995-08-04 | Fujitsu Ltd | Disk array device |
JP2004227449A (en) * | 2003-01-27 | 2004-08-12 | Hitachi Ltd | Diagnostic device for trouble in disk array device |
JP2005004869A (en) * | 2003-06-11 | 2005-01-06 | Adtex:Kk | Recording device, recording data management method, and program |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012014531A (en) * | 2010-07-01 | 2012-01-19 | Fujitsu Ltd | Storage device, controller of storage device and control method for storage device |
CN103297264A (en) * | 2013-04-19 | 2013-09-11 | 无锡成电科大科技发展有限公司 | Cloud platform failure recovery method and system |
CN103297264B (en) * | 2013-04-19 | 2017-04-12 | 无锡成电科大科技发展有限公司 | Cloud platform failure recovery method and system |
JP2015184858A (en) * | 2014-03-24 | 2015-10-22 | 日本電気株式会社 | disk array system, method, and program |
JP2016099859A (en) * | 2014-11-25 | 2016-05-30 | 日本電気株式会社 | Maintenance management system, maintenance management method, and maintenance management program |
JP2017033412A (en) * | 2015-08-04 | 2017-02-09 | 株式会社東芝 | Storage management device and method, and storage system |
JP2021018561A (en) * | 2019-07-19 | 2021-02-15 | セイコーエプソン株式会社 | Method for controlling information processing apparatus, program, and communication system |
JP7306127B2 (en) | 2019-07-19 | 2023-07-11 | セイコーエプソン株式会社 | Information processing device control method, program, and communication system |
Also Published As
Publication number | Publication date |
---|---|
JP4854522B2 (en) | 2012-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4854522B2 (en) | Array disk group maintenance management system, array disk group maintenance management apparatus, array disk group maintenance management method, and array disk group maintenance management program | |
EP2672387B1 (en) | A distributed object storage system | |
US8037362B2 (en) | Storage system that finds occurrence of power source failure | |
US20070079170A1 (en) | Data migration in response to predicted disk failure | |
JP2005100259A (en) | Array type disk device, program, and method for preventing double fault of drive | |
JP5296878B2 (en) | Method, apparatus, and program for use in a computerized storage system that includes one or more replaceable units to manage testing of one or more replacement units (to manage testing of replacement units) Computerized storage system with replaceable units) | |
EP1550192A4 (en) | System and method for application monitoring and automatic disaster recovery for high-availability | |
CN101960429B (en) | Video media data storage system and related methods | |
JP2022052504A (en) | Bmc, server system, device stabilization determination method, and program | |
JP4747203B2 (en) | Disk array device, disk array device control program, and disk array device control method | |
US20070234107A1 (en) | Dynamic storage data protection | |
US20230136274A1 (en) | Ceph Media Failure and Remediation | |
JP2007272702A (en) | Disk array subsystem, and redundancy maintenance method and program | |
JP2007249741A (en) | Suspicious point identification device and processing method | |
JP4973703B2 (en) | Failure detection method and monitoring device | |
JP2006164304A (en) | Array type disk device preventing double fault of drive, program, and method | |
JP5995265B2 (en) | Information processing system, maintenance method and program | |
JP2011123808A (en) | Plant control system and failure occurrence determination method for the same | |
CN116360687A (en) | Cluster distributed storage method, device, equipment and medium | |
JP5532687B2 (en) | Information processing system, failure handling mechanism of information processing system, and failure handling method of information processing system | |
JP2009015553A (en) | Storage device, program, and memory failure recovery method | |
JP2016038656A (en) | Connection monitoring device, connection monitoring program, and connection monitoring method | |
CN112751688A (en) | Flow control processing method of OTN device, electronic device and storage medium | |
JP5951520B2 (en) | Multiple processing system | |
JP2009175818A (en) | Disk management system for replacing hard disk inside system by operation monitoring |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090907 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111025 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111025 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141104 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4854522 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |