JP2016157227A - 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム - Google Patents

不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム Download PDF

Info

Publication number
JP2016157227A
JP2016157227A JP2015033979A JP2015033979A JP2016157227A JP 2016157227 A JP2016157227 A JP 2016157227A JP 2015033979 A JP2015033979 A JP 2015033979A JP 2015033979 A JP2015033979 A JP 2015033979A JP 2016157227 A JP2016157227 A JP 2016157227A
Authority
JP
Japan
Prior art keywords
semiconductor memory
nonvolatile semiconductor
memory device
data
access
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015033979A
Other languages
English (en)
Other versions
JP6274127B2 (ja
Inventor
長瀬 芳伸
Yoshinobu Nagase
芳伸 長瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2015033979A priority Critical patent/JP6274127B2/ja
Publication of JP2016157227A publication Critical patent/JP2016157227A/ja
Application granted granted Critical
Publication of JP6274127B2 publication Critical patent/JP6274127B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Tests Of Electronic Circuits (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)
  • Memory System (AREA)
  • For Increasing The Reliability Of Semiconductor Memories (AREA)

Abstract

【課題】不揮発性半導体記憶装置の寿命を外部から予測することを可能とする。
【解決手段】試験装置20は、不揮発性メモリ31と、コントローラ32を含む不揮発性半導体記憶装置30に、所定のアクセスパターンでデータを書き込み、単位記憶領域ごとのアクセス時間を測定する。情報処理装置10は、試験装置20から単位記憶領域ごとのアクセス時間を取得し、単位記憶領域ごとのアクセス時間をもとに、不揮発性半導体記憶装置30を分類する。
【選択図】図1

Description

本発明は、メモリカード等の不揮発性半導体記憶装置を評価する評価システム、評価方法、及び評価プログラムに関する。
近年、メモリカード(SDカード等)、USBメモリ、ソリッドステートドライブ(SSD)といった不揮発性半導体記憶装置が普及している。不揮発性半導体記憶装置は、NAND型フラッシュメモリ等の不揮発性半導体メモリと、不揮発性半導体メモリのアクセス制御を行うコントローラを内蔵している。不揮発性半導体メモリの寿命を予測する方法として、不揮発性半導体メモリの読み出し電圧を内部でモニタすることにより、寿命を予測し、外部に報知する手法が提案されている(例えば特許文献1参照)。
不揮発性半導体記憶装置に内蔵されている不揮発性メモリ及びコントローラの種類は多種多様であり、その組み合わせも多種多様である。上述のような寿命予測機能を搭載しない不揮発性半導体記憶装置も多く販売されている。
特開2013−122793号公報
メモリカード等の不揮発性半導体記憶装置は、デジタルカメラやスマートフォン等の電子機器にバンドルされて販売されることも多い。電子機器のメーカは、バンドルして販売する不揮発性半導体記憶装置の寿命を把握しておく必要性が高い。
本発明はこうした状況に鑑みてなされたものであり、その目的は、不揮発性半導体記憶装置の寿命を外部から予測する技術を提供することにある。
上記課題を解決するために、本発明のある態様の不揮発性半導体記憶装置(30)の評価システム(1)は、不揮発性半導体メモリ(31)と、コントローラ(32)を含む不揮発性半導体記憶装置(30)の評価システム(1)であって、不揮発性半導体記憶装置(30)に、所定のアクセスパターンでデータの書き込み又は読み出しを行い、単位記憶領域ごとのアクセス時間を測定する試験装置(20)と、前記試験装置(20)から単位記憶領域ごとのアクセス時間を取得し、単位記憶領域ごとのアクセス時間をもとに、前記不揮発性半導体記憶装置(30)を分類する情報処理装置(10)と、を備える。
本発明の別の態様は、不揮発性半導体記憶装置(30)の評価方法である。この方法は、不揮発性半導体メモリ(31)と、コントローラ(32)を含む不揮発性半導体記憶装置(30)の評価方法であって、不揮発性半導体記憶装置(30)に、所定のアクセスパターンでデータの書き込み又は読み出しを行い、単位記憶領域ごとのアクセス時間を測定するステップと、測定された単位記憶領域ごとのアクセス時間をもとに、前記不揮発性半導体記憶装置(30)を分類するステップと、を備える。
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
本発明によれば、不揮発性半導体記憶装置の寿命を外部から予測することができる。
本発明の実施の形態1に係る評価システムの構成を示す図である。 実施の形態1に係る不揮発性半導体記憶装置の評価方法の流れを示すフローチャートである。 正方向アクセスパターンの一例を示す図である。 逆方向アクセスパターンの一例を示す図である。 アクセス時間の分布を示す第1例のグラフである。 アクセス時間の分布を示す第2例のグラフである。 評価対象のメモリカードのアクセスパターンデータと、比較対象のメモリカードのアクセスパターンデータを重ねた図である。 評価対象のメモリカードをカテゴリ分類するための操作画面例を示す図である。 評価対象のメモリカードを新規カテゴリに登録する操作画面例を示す図である。 特定LBAにおける書き込み、読み出しアクセス時間の推移の一例を示すグラフである。 本発明の実施の形態2に係る評価システムの構成を示す図である。 実施の形態2に係る比較評価処理の流れを示すフローチャートである。 混合分布による近似値を説明するための模式的なグラフである。 アクセス時間の分布からピークの個数とピークの位置を検出する方法を説明するための模式的なグラフである。 セグメント分割の一例を示す図である。 評価データ保持部のデータ形式の一例を示す図である。 最短距離を持つ基準データを特定する処理を説明するための模式図である。
本発明の実施の形態は、不揮発性半導体記憶装置の寿命評価に関する。本実施の形態では、不揮発性半導体記憶装置に対して、規格に基づく外部インタフェースからアクセスし、アクセス時間を測定する。当該アクセス時間をもとに不揮発性半導体記憶装置の寿命を予測し、不揮発性半導体記憶装置の製品使用上の閾値を決定する。
従来の不揮発性半導体記憶装置の寿命予測方法の一つに、内部のコントロールチップが、不揮発性半導体メモリ(以下、本明細書では不揮発性メモリという)の書き込み電圧を直接監視する構成を持つものがある。当該コントロールチップは、書き込み電圧をリアルタイムに監視することにより、不揮発性メモリの寿命予測を行い、不揮発性メモリにおいて障害が発生するであろう閾値を決定する。その閾値をもとに、障害が発生していると推測される不揮発性メモリへの書き込みを抑制することにより、システム運用に問題が発生しないようにしている。このように、コントロールチップで不揮発性メモリの書き込み時の電圧を直接監視することにより、不揮発性メモリの寿命を直接予測する手法は既に存在する。
不揮発性半導体記憶装置のメーカは、内部の不揮発性メモリの延命を図るため、アクセスに対してウェアレベリングを行い、できるだけ同じ不揮発性メモリをアクセスしないようにチューニングしている。従って、不揮発性半導体記憶装置の外側からは、どの不揮発性メモリを何回アクセスしたかを正確に把握することが難しく、どの不揮発性メモリが寿命に達しているかを判断することは基本的にできない。
また、市場に流通している不揮発性半導体記憶装置に内蔵されている不揮発性メモリ及びコントロールチップの多くは、寿命に達したときに何らかのレスポンスを外部に返すように設計されていない。従って、一般に市場に流通している不揮発性半導体記憶装置の寿命を外部から予測することは非常に難しい。
本実施の形態では、一般に市場に流通している、不揮発性メモリ及びコントロールチップを含む不揮発性半導体記憶装置全体の使用寿命を予測する方法を提案する。この寿命予測では、規格に基づく外部インタフェースからのアクセスに対するアクセス時間を測定し、測定したアクセス時間により、不揮発性半導体記憶装置の製品使用上の閾値を決定する。
以下、本実施の形態に係る不揮発性半導体記憶装置の寿命予測の概要を説明する。本実施の形態では、個々の不揮発性半導体記憶装置に対するデータの書き込み時のアクセス時間および/または読み出し時のアクセス時間を相対比較する。これにより、同一または類似する不揮発性メモリとコントロールチップの組み合わせを特定する。データ書き込み時のアクセス時間は、外部インタフェースから書き込みコマンドと書き込みデータを不揮発性半導体記憶装置に送信し、不揮発性半導体記憶装置から書き込み完了の応答コマンドを受信するまでの時間をいう。以下、単に「書き込み時間」と表記することもある。データ読み出し時のアクセス時間は、外部インタフェースから読み出しコマンドを不揮発性半導体記憶装置に送信し、不揮発性半導体記憶装置が読み出しデータの送信を完了するまでの時間をいう。以下、単に「読み出し時間」と表記することもある。
同一カテゴリの中の個体の一つを、不揮発性半導体記憶装置の本来の性能を保持できない状態になるまで、データの書き込みと読み出しを読み出したデータが正常であることを確認しながら、アクセス時間の測定を繰り返す。これにより、性能を保持できないレベルになるアクセス時間を導き出し、個体の寿命限界を導き出す。寿命限界を導き出した個体と同一カテゴリに分類されたその他の不揮発性半導体記憶装置も同一の寿命特性を持つと予測する。個体の一つは本来の性能を保持できないものになるが、後述する比較評価だけ行われるその他の不揮発性半導体記憶装置は本来の性能を保持したまま使用できる。その不揮発性半導体記憶装置のアクセス時間が、上記個体から導き出した寿命限界のアクセス時間に達したとき、障害が発生すると予測することができる。
本実施の形態に係る不揮発性半導体記憶装置の寿命予測は、比較評価と寿命評価に大別される。まず比較評価の概要を説明する。外部インタフェースから不揮発性半導体記憶装置に対し、固定された特定のセクタ単位(例えば、256セクタ単位)で連続してアクセスする。その際のアクセス時間をミリ秒オーダで記録する。アクセスパターンは、最小LBA(Logical Block Address)から最大LBAへの正方向に、又は最大LBAから最小LBAへの逆方向に、指定されたLBA単位で単調増加または単調減少でアクセスするパターンである。最小LBAは通常、0であり、最大LBAはシステムにより異なる。以下、本明細書では説明を簡単にするためLBAの単位記憶領域とセクタの単位記憶領域は同じ大きさであるとする。即ち、当該アクセスパターンは、単位記憶領域の最小値から最大値の方向へ所定値単位でアクセス開始位置を増加させ、その所定値単位のデータをアクセスするアクセスパターン、または単位記憶領域の最大値から最小値の方向へ所定値単位でアクセス開始位置を減少させ、その所定値単位のデータをアクセスするアクセスパターンである。測定した単位記憶領域ごとのアクセス時間をミリ秒オーダで細かくプロットする。
これまで、HDDの性能評価方法として、アプリケーションソフトを使用したベンチマーク試験が存在する。これは、相対的に大まかなHDDの性能評価を示す指標として使用されており、部分的なアクセスによりHDDの相対的な性能比較に用いられるものであって、寿命評価を考慮している物ではなかった。そのため、測定された個体がどのようなアクセス時間を有するかという大まかな違いは検出できるが、そのアクセス時間から、測定した各個体がどのような種類のものであるかを細かく分類することはできない。
そこで本実施の形態では、LBAにアクセスした時間を明確にするため、固定されたLBA単位でLBAが重複することなく、アクセス開始位置を増加またはアクセス開始位置を減少させるアクセスパターンを使用する。例えば、一般に公開されているIDEMA(The International Disk Drive Equipment and Materials Association)のHDD評価パターン(Command completion time measurement tool White Paper)を使用できる。
このようなアクセスパターンを用い、アクセスする方向、アクセスするLBA、転送するデータ、アクセス手法を厳密に定め、不揮発性メモリの一部分の領域ではなく、全体領域にデータを書き込む。これより、評価対象の個体のアクセス性能の正確な特徴を抽出することができる。なお転送するデータは、不揮発性半導体記憶装置30に最も負荷を与えるデータにするとよい。最も負荷を与えるデータは通常、全ビットが「1」のデータである。
本実施の形態では、アクセス時間をプロットする装置として、オペレーティングシステム(OS)等による時間的に不適当なオーバーヘッドを持たない専用の治具を使用することが望ましいが、専用の治具を省略し、ソフトウェアで計測することも可能である。
これにより、不揮発性メモリとコントロールチップを含めた不揮発性半導体記憶装置全体のアクセス性能を正確に把握することができる。測定したアクセス時間の違いにより、不揮発性半導体記憶装置の性能を評価することができ、類似の性能を持つ不揮発性半導体記憶装置を同じカテゴリに分類できる。
カテゴリ分類の指標として、(1)LBAごとのアクセス時間の分布、(2)指定されたアクセスパターンによる試験開始から試験終了までに要する時間がある。同一の不揮発性メモリ及びコントロールチップを持つ不揮発性半導体記憶装置は、上記2点において同じような評価結果を示す。
この評価方法により、例えば、内蔵されている不揮発性メモリ及びコントロールチップが不明な不揮発性半導体記憶装置を含む、市場に流通している全ての不揮発性半導体記憶装置を相対的に分類できる。このように不揮発性半導体記憶装置を分類した上で、個々の不揮発性半導体記憶装置がどのような寿命性能を有するか評価する。
次に寿命評価の概要を説明する。寿命評価も比較評価と同様に、オペレーティングシステム(OS)等による時間的に不適当なオーバーヘッドを持たない専用の治具を使用することが望ましいが、専用の治具を省略し、ソフトウェアで計測することも可能である。寿命評価において比較評価と異なるのはアクセスパターンである。
寿命評価では、指定されたデータ単位でLBAが重複することなく、アクセス開始位置を増加させながら0LBAから最大LBAまでシーケンシャルに全面書き込みを行うとともに、書き込んだ同じデータの読み出しを行いデータが正常に書き込まれているかを確認することにより、そのときの書き込みアクセス時間、読み出しアクセス時間をプロットし、評価する不揮発性半導体記憶装置が全体的にどのくらいの回数書き込みが可能であるかを評価する。データが書き込まれても正常なデータとして読めなくなったとき、不揮発性半導体記憶装置は本来の性能を有しなくなるので、寿命に達したと判断する。このような書き込みは、評価する不揮発性半導体記憶装置の不揮発性メモリの酸化膜の劣化を進行させることができるので、最終的に読み込まれたデータと書き込まれたデータが異なったことが、不揮発性メモリの寿命に達したことを示し、これにより、評価する不揮発性半導体記憶装置が本来の性能を維持できなくなったとして、寿命に達し、破壊されたものと判断する。
従って、使用する不揮発性半導体記憶装置は、それ以前の書き込み回数が明確である物を使用する必要があり、何も書き込まれていない不揮発性半導体記憶装置を比較評価に引き続き寿命評価を行った場合、全領域、1回は書き込まれた物を使用することになる。
この寿命評価においては、不揮発性半導体記憶装置が寿命に達したと判断されるまで、この評価を繰り返し0LBAから最大LBAまで全面行う。評価の結果、このカテゴリごとの不揮発性半導体記憶装置の書き込み回数の限界が寿命として登録され、この寿命に達するまでの書き込みアクセス時間のプロット、読み出しアクセス時間のプロットと特にデータが異常を来したときの書き込みアクセス時間、読み出しアクセス時間がカテゴリ化された不揮発性半導体記憶装置固有の情報として登録される。
比較評価および寿命評価を一体的に運用するため、本実施の形態に係る評価システムは、試験装置と情報処理装置を備える。当該試験装置は、不揮発性半導体記憶装置を差し込むソケットを有し、ソケットに差し込まれた不揮発性半導体記憶装置に対して、特定のインタフェースを通して規定のアクセスパターンでデータを送り出す。当該情報処理装置は本評価システム全体を制御する。例えば試験装置のアクセスパターンを変更する。当該情報処理装置は測定結果を蓄積するデータベースを管理する。このデータベースに、カテゴリ分類された比較評価データと、各カテゴリの寿命評価データを関連付けて登録する。各カテゴリで1つの個体の寿命評価データがあれば、他の個体の寿命評価試験をしなくても、その寿命を予測することができる。
本実施の形態では、内蔵されている不揮発性メモリとコントロールチップを含む不揮発性半導体記憶装置全体の特性を用いて、不揮発性半導体記憶装置を分類する。各カテゴリに属する1つの個体の寿命特性を導くことにより、カテゴリ内の他の個体の寿命特性を導くことができる。よって、不揮発性半導体記憶装置の内部に寿命を監視する仕組みを持たずに、市場に流通している不揮発性半導体記憶装置の寿命を予測できる。また寿命特性をもとに、評価対象の不揮発性半導体記憶装置が、後どれだけ書き込みが可能かを推定することもできる。
ここで本実施の形態に係る不揮発性半導体記憶装置の評価方法のポイントをまとめると、次のようになる。不揮発性半導体記憶装置の内部に特別な寿命評価装置等を搭載することなく、外部インタフェースからのアクセスに対するアクセス時間を測定することにより、不揮発性半導体記憶装置の寿命を予測できる。不揮発性半導体記憶装置に含まれる不揮発性メモリ及びコントロールチップを特定する必要なく、パッケージ化された状態のまま不揮発性半導体記憶装置の寿命を予測できる。
記憶領域全体を対象として、所定のLBA単位でLBAが重複することなく、アクセス開始位置を増加またはアクセス開始位置を減少させるアクセスパターンでアクセスし、単位記憶領域ごとのアクセス時間を測定する。これにより、複数の不揮発性半導体記憶装置を高精度に相対比較できる。相対比較することにより、不揮発性半導体記憶装置の内部構造を解析することなく、パッケージ化された状態のままカテゴリ分類できる。厳密に管理された寿命評価用のアクセスパターンでアクセスすることにより、不揮発性半導体記憶装置の寿命をパッケージ化された状態のまま予測できる。同一カテゴリに属する他の不揮発性半導体記憶装置のアクセス時間から、寿命に達するまでの使用回数を推定できる。
以下、本発明の実施の形態に係る評価システムを具体的に説明する。実施の形態1では比較評価の一部をマニュアル操作で行う例を説明し、実施の形態2では比較評価の全てを自動処理で行う例を説明する。
図1は、本発明の実施の形態1に係る評価システム1の構成を示す図である。評価対象の不揮発性半導体記憶装置30は不揮発性メモリ31及びコントローラ32を含む。コントローラ32は外部インタフェースから書き込みコマンド及び書き込みデータを受信すると当該データを不揮発性メモリ31の指定された記憶領域に書き込む。当該データの書き込みが完了すると外部インタフェースに応答信号を返す。またコントローラ32は外部インタフェースから読み出しコマンドを受信すると、不揮発性メモリ31の指定された記憶領域からデータを読み出し、外部インタフェースに送信する。以下の説明では、不揮発性半導体記憶装置30としてメモリカードを想定する。
試験対象の不揮発性半導体記憶装置30は試験装置20に装着または接続される。試験装置20は、不揮発性半導体記憶装置30のアクセス時間をミリ秒オーダで正確に測定できるテスト治具である。試験装置20は、不揮発性半導体記憶装置30に規定のアクセスパターンでデータを書き込み、単位記憶領域ごとのアクセス時間を測定する。
試験装置20は、不揮発性半導体記憶装置30に書き込み命令または読み出し命令を発行するコマンド実行機能、発行したコマンドに対するレスポンス時間をアクセス時間として測定する測定機能、測定した結果を図示しない内部記憶部に記憶するデータ保持機能を有する。当該内部記憶部は、測定データを格納にするに十分な容量を持つFIFO(First In First Out)構造の半導体メモリで構成される。当該内部記憶部は、格納された測定データを順番に情報処理装置10に送り出す。その際、コマンド実行機能および測定機能に影響を与えずにデータを送り出すことができる。
情報処理装置10は例えばPCで構成され、評価システム1全体を制御する。情報処理装置10は試験装置20とケーブルで接続される。情報処理装置10は、試験装置20から単位記憶領域ごとのアクセス時間を取得し、単位記憶領域ごとのアクセス時間をもとに、不揮発性半導体記憶装置30を分類する。
情報処理装置10は制御部11、記憶部12、表示部13及び操作部14を備える。制御部11は試験実行部111、表示制御部113、操作受付部114、分類部115及び寿命評価部116を含む。図1の制御部11には、実施の形態1にて注目する処理に関連する機能ブロックのみを描いている。これらの機能はハードウェア資源とソフトウェア資源の協働、又はハードウェア資源のみにより実現できる。ハードウェア資源としてプロセッサ、ROM、RAM、その他のLSIを利用できる。ソフトウェア資源としてオペレーティングシステム、アプリケーション等のプログラムを利用できる。
記憶部12はハードディスクドライブ(HDD)、ソリッドステートドライブ(SSD)等の記録媒体を備え、評価データ保持部121を含む。図1の記憶部12にも、実施の形態1にて注目する処理に関連する機能ブロックのみを描いている。実施の形態1では、評価データ保持部121は、不揮発性半導体記憶装置30の単位記憶領域ごとのアクセス時間を少なくとも保持する。
図2は、実施の形態1に係る不揮発性半導体記憶装置30の評価方法の流れを示すフローチャートである。試験実行部111は比較評価を実行する。具体的には、試験実行部111は試験装置20に対して、比較評価用の試験を実行するよう命令する。試験装置20は当該命令を受けると比較評価用のアクセスパターンを用意し、コマンド実行機能により、不揮発性半導体記憶装置30に書き込みコマンドを発行する。
不揮発性半導体記憶装置30のコントローラ32は正常に書き込みコマンドを受信し、不揮発性メモリ31の指定されたLBAに書き込みが完了すると、書き込み完了の応答を試験装置20に返す。試験装置20の測定機能は、書き込みコマンド発行から応答が戻るまでの時間をアクセス時間として測定し、不揮発性半導体記憶装置30に送り出したLBAの位置データととともに内部記憶部に記憶する。情報処理装置10の試験実行部111は、試験装置20の内部記憶部から、位置データとアクセス時間を含む測定データを取得し、順次プロットする(S10)。以下、個体のLBAごとのアクセス時間の集合をアクセスパターンデータという。このアクセスパターンデータにより、最終的にどの時間帯にアクセス時間が収束するかを確認できる。
分類部115は、評価対象の不揮発性半導体記憶装置30の評価データと、既にカテゴリ分類された評価済みの不揮発性半導体記憶装置30の評価データとを比較する(S11)。評価データは、アクセスパターンデータそのものを使用してもよいし、アクセスパターンデータから抽出された特徴量を使用してもよい。
実施の形態1では、評価データの比較を例えば以下のように行う。表示制御部113は、評価対象の不揮発性半導体記憶装置30のアクセスパターンデータを示すグラフと、評価データ保持部121にカテゴリ分類されて保持される比較対象の不揮発性半導体記憶装置30のアクセスパターンデータを示すグラフを画面上に表示させる。その際、両方のグラフを同一画面上にオーバーラップさせて表示させてもよい。
操作受付部114は、当該画面を見ているユーザの操作を受け付ける。ユーザは、当該画面上に表示されている評価対象の不揮発性半導体記憶装置30のアクセスパターンデータと、比較対象の不揮発性半導体記憶装置30のアクセスパターンデータが近似するか否か判断し、その判断結果を操作受付部114に入力する。
ユーザは、画面に表示されている比較対象の不揮発性半導体記憶装置30のアクセスパターンデータを示すグラフを切り替えることができる。操作受付部114に対してユーザから切替指示操作がなされると、当該切替指示操作にもとづき、表示制御部113は、画面上に表示される比較対象の不揮発性半導体記憶装置30のアクセスパターンを示すグラフを、別のものに切り替える。
分類部115は、当該ユーザの操作にもとづき、評価対象の不揮発性半導体記憶装置30を分類するカテゴリを決定する。評価対象の不揮発性半導体記憶装置30と評価データが近似する評価済み(比較対象)の不揮発性半導体記憶装置30が存在する場合(S12のY)、分類部115は、当該比較対象の不揮発性半導体記憶装置30が属しているカテゴリに、評価対象の不揮発性半導体記憶装置30を分類する(S13)。寿命評価部116は、評価データ保持部121から当該カテゴリに属する不揮発性半導体記憶装置30の寿命評価データを読み出し、これを用いて、評価対象の不揮発性半導体記憶装置30の寿命を予測する(S14)。なおここで、寿命予測部(図1には図示せず)を別途設けた上で、寿命予測部がS14の処理を行ってもよい。
評価対象の不揮発性半導体記憶装置30と評価データが近似する評価済みの不揮発性半導体記憶装置30が存在しない場合(S12のN)、試験実行部111は寿命評価を実行する(S15)。具体的には、試験実行部111は試験装置20に対して、寿命評価用の試験を実行するよう命令する。試験装置20は当該命令を受けると寿命評価用のアクセスパターンを用意し、コマンド実行機能により不揮発性半導体記憶装置30に、予め用意されたデータの書き込みコマンドを発行する。
不揮発性半導体記憶装置30のコントローラ32は正常に書き込みコマンドを受信し、不揮発性メモリ31の指定されたLBAに書き込みが完了すると、書き込み完了の応答を試験装置20に返す。試験装置20の測定機能は、書き込みコマンド発行から応答が戻るまでの時間を書き込み時のアクセス時間として測定し、不揮発性半導体記憶装置30に送り出したLBAの位置データとともに内部記憶部に記憶する。なお、書き込み時のアクセス時間と同様に、読み出し(読み込み)コマンド発行から応答が戻るまでの時間を読み出し時のアクセス時間として測定し、これをカテゴリ分類に用いてもよい。すなわち、1)書き込み時のアクセス時間のみ、2)読み出し時のアクセス時間のみ、3)書き込み時のアクセス時間と読み出し時のアクセス時間の両方、のいずれかを用いてカテゴリ分類を行うことができる。
続いて試験装置20はコマンド実行機能により、データを書き込んだLBAから当該データを読み出すコマンドを不揮発性半導体記憶装置30に発行する。不揮発性半導体記憶装置30のコントローラ32は正常に読み出しコマンドを受信すると、指定されたLBAからデータを読み出し、外部に送り出す。試験装置20の測定機能は、読み出しコマンド送信からデータ受信までの時間を読み出し時のアクセス時間として測定し、不揮発性半導体記憶装置30に送り出したLBAの位置データとともに内部記憶部に記憶する。
情報処理装置10の寿命評価部116は、試験装置20から不揮発性半導体記憶装置30に書き込まれたデータと、不揮発性半導体記憶装置30から試験装置20に読み出したデータを比較し、両者が一致するか確認する。両者が一致すれば次のLBAに進み、最後のLBAまで、データの書き込み、読み出し、一致判定からなるデータ比較処理を繰り返す。この先頭のLBAから最後のLBAまでの当該データ比較処理を、書き込みデータと読み出しデータが一致しなくなるまで繰り返す。
データが一致しなくなるまで上記データ比較処理を繰り返すことにより測定されたアクセス時間と位置データを含む測定データは、内部記憶部から情報処理装置10に送られる。情報処理装置10の寿命評価部116は、取得した測定データをプロットすることにより、評価対象の不揮発性半導体記憶装置30に対する書き込みデータと読み出しデータが一致しなくなるまでのアクセス時間の推移を示す寿命評価データを作成する。寿命試験が終了すると、寿命評価部116は、寿命評価試験を実行した不揮発性半導体記憶装置30の寿命評価データを当該不揮発性半導体記憶装置30の比較評価データに関連付けて、評価データ保持部121に記録する(S16)。
評価データ保持部121に記録された寿命評価データは、他の不揮発性半導体記憶装置30の寿命予測に使用できるようになる。このように寿命評価部116は、カテゴリに属する全ての不揮発性半導体記憶装置30の寿命を評価する必要はなく、カテゴリごとに少なくとも1つの不揮発性半導体記憶装置30の寿命を評価すればよい。
次にアクセスパターンの具体例を説明する。以下、正方向アクセスパターン、逆方向アクセスパターンの例を挙げる。
図3は、比較評価に使用される正方向アクセスパターンの一例を示す図である。縦軸はLBAを示し、横軸はコマンド発行番号(コマンドの発行順序を示す番号)を示している。コマンド発行番号が小さい順に、各コマンドが発行される。正方向アクセスは、0LBAから最大LBAまで図3に示すように256セクタ単位でメディア全面に書き込みを行う。各アクセスコマンドの発行は、図3で示すように、1番目のアクセスコマンドはLBA開始位置から256セクタ分書き込まれるように発行され、2番目のLBA開始位置は、1番目のLBA開始位置から256セクタ分加算して同じように書き込まれるように発行される。なお、アクセスコマンドは読み込みであってもいい。このとき、不揮発性半導体記憶装置に書き込まれるデータは任意の物でも問題は無いが、データが0、1、2、からFまでの常に1を加算した連続したデータを書き込むと、書き込まれたデータに問題があった場合、どのデータで問題があったかを発見しやすい利便性がある。
図4は、比較評価に使用される逆方向アクセスパターンの一例を示す図である。逆方向アクセスは、最大LBAからアクセスするセクタ数を減算した物を先頭に0LBAまで図4に示すように256セクタ単位でメディア全面に書き込みを行う。各アクセスコマンドの発行は、図4で示すように、1番目のアクセスコマンドはLBA開始位置から256セクタ分書き込まれるよう発行され、2番目のLBA開始位置は、1番目のLBA開始位置から256セクタ分減算して同じように書き込まれるように発行される。なお、アクセスコマンドは読み込みであってもよい。このとき、不揮発性半導体記憶装置に書き込まれるデータは任意の物でも問題は無いが、データが0、1、2、からFまでの常に1を加算した連続したデータを書き込むと、書き込まれたデータに問題があった場合、どのデータで問題があったかを発見しやすい利便性がある。図3および図4に示すように、本実施例においては、アクセス開始LBA(アクセス開始位置)とコマンド発行番号が一対一に対応付けられており、相互に変換可能である。また本実施例においては、コマンド発行番号は、「1」から始まる連番であり、アクセス開始LBAに比べて必要な記憶容量が少なくて済むため、後述するアクセス時間の分布を示すデータにおいて、横軸にコマンド発行番号を用いるが、コマンド発行番号の代わりにアクセス開始LBAを用いても、もちろんよい。
次に比較評価における不揮発性半導体記憶装置30のカテゴリ判別について、具体的に説明する。比較評価におけるカテゴリ判別は主に、コマンド発行番号ごとのアクセス時間(アクセスパターンデータ)の収束の仕方、及び指定されたアクセスパターンによる試験の開始から終了までに要した時間(以下、アクセス試験時間ともいう)で行う。
まず、アクセス開始位置を増加またはアクセス開始位置を減少させるアクセスパターンによる連続するアクセス時間の収束について説明する。不揮発性メモリは電子の保持能力によってデータを保存するため、LBAの配置によってアクセス時間に大きな変動を持たない性質がある。不揮発性メモリでは、ハードディスク等の円盤磁気メディアのようにデータ保存位置にヘッドを送り出してデータを読み出す駆動系を持たない。従ってLBAの配置による駆動系の動作遅延が発生せず、アクセス位置によるアクセス時間の変動が基本的に発生しない。
しかしながら、不揮発性メモリはその製造メーカによって一度にアクセスできる容量が異なり、その寿命にも差がある。同じ製造メーカの同じ型番の不揮発性メモリであっても製造時期によって、それらが異なってくる場合がある。また、それぞれの不揮発性メモリに合わせて作られているコントロールチップもその製造メーカ、組み合わせる不揮発性メモリによってアクセス性能が異なってくる。また、アクセス手法によっても不揮発性メモリの寿命が異なってくる。
不揮発性メモリの種類がSLC(Single Level Cell)の場合、指定されたLBAしかアクセスしないが、MLC(Multiple Level Cell)の場合、指定されたLBAと内部キャッシュ内のLBAの2箇所にアクセスする。内部キャッシュ内のLBAはコントロールチップしか知らないLBAである。TLC(Triple Level Cell)では、3カ所同時に書き込まれる。
内部の不揮発性メモリとコントロールチップがどのようなものかは、パッケージメディアとしてのメモリカードの外からは判断できない。たとえ内部構成が分かったとしても、同じ型番の不揮発性メモリでも製造時期によって、寿命、アクセス性能が異なる。従ってメモリカード全体としての寿命を個々の不揮発性メモリ及びコントロールチップから判断することは困難である。
しかしながらメモリカード全体として、同一の不揮発性メモリとコントロールチップで構成されたメモリカードは、同じアクセス特性を持つ。内部の不揮発性メモリ及びコントロールチップは特定できないが、同じアクセス特性を持つメモリカードであるか否かは特定できる。上述のようにメモリカードではアクセス中に不特定となる駆動系等の外部的要因がないことから、アクセス特性から高精度なカテゴリ識別が可能である。
メモリカードのアクセス特性は、固定長のセクタ単位でLBAに連続してデータを書き込んだ時の収束時間で判断できる。理想的なメモリカードであれば、どのLBAに対するアクセス時間も同じになり、1つのアクセス時間に収束する。
図5は、左から図3で示した1番目のアクセスコマンドを発行したLBAから順に256セクタ分データを書き込だ時のアクセス時間の分布を示す第1例のグラフである。コマンド発行から応答までの時間をコマンドレスポンスタイムといい、この時間を縦軸にアクセス時間として計測する。左から図3で示すコマンド発行番号ごとのアクセス時間を示す。図5に示すグラフでは、1番目のコマンド発行から全てのLBAのアクセス時間が5ミリ秒で等しく、アクセス時間が一直線に収束している。
しかしながら実際は理想的な特性にならず、アクセス時間がいくつかに分散する傾向がある。そこで、最初にアクセス時間の集計表により、どの時間にアクセスが収束するかを特定し、時間分布の数値を特定する。その上で、一番収束するアクセス時間の帯がどこにあるか、その他に収束する帯が何本出るかを特定する。
図6は、左から図3で示した1番目のアクセスコマンドを発行したLBAから順に256セクタ分データを書き込だ時のアクセス時間の分布を示す第2例のグラフである。左から図3で示すコマンド発行番号ごとのアクセス時間を示す。図6に示すグラフからは、主にアクセス時間が5ミリ秒に収束する帯と10ミリ秒に収束する2つの帯が存在し、最大で15ミリ秒のアクセス時間を要するLBAが存在することが分かる。帯の配列は、不揮発性メモリの最大容量と、不揮発性メモリに書き込んでいるコントロールチップの性能に依存する。アクセス時間の最大値は、コントロールチップによる不揮発性メモリへの通常アクセスにおける処理の最大値を示す。このようにメモリカードは、アクセス時間の収束の仕方に特徴があり、この特徴を利用してメモリカードを相対的にグループ分けすることができる。
次に比較評価におけるカテゴリ判別の別の方法として、指定されたアクセスパターンによるアクセス試験時間を使用する例を説明する。アクセス性能はメモリカードのカテゴリにより異なることから、アクセス時間の総計である、試験開始から終了までに要するアクセス試験時間はカテゴリごとに異なる。しかしながら、同じ不揮発性メモリとコントロールチップを使用しているメモリカードはアクセスパターンが近似していることからアクセス試験時間も近似する。従って、カテゴリごとのアクセス試験時間を比較評価に使用できる。
これまで説明してきたカテゴリ分類は、容量違いのメモリカードにも適用できる。メモリカードの場合、同じパッケージで8GByte、16GByte、32GByteのように容量違いが存在する。この容量違いの中で、同じ不揮発性メモリとコントロールチップを使用しているものは、単位LBA当たりのアクセス時間が近似的な値を示す。従って比較評価でのアクセス分布が同一特徴を有しながら、評価終了時間が容量に比例する物は、同一カテゴリの容量違いのメモリカードと判断できる。
例えば、同じアクセスパターンを使用した試験で、試験に60秒かかった8GByteのメモリカードと、試験に120秒かかった16GByteのメモリカードは、同じ不揮発性メモリとコントロールチップを持ち、容量が異なるものであると判断できる。ウェアレベリングの作用により、寿命は容量の大きさに比例する。例えば、8GByteで連続書き込みを行って30日で寿命に達するメモリカードと同一カテゴリに属する16GByteのメモリカードは同じ速度で連続書き込みを行った場合、60日で寿命に達すると予想できる。
次にカテゴリ分類のためのデータ比較の具体例を説明する。実施の形態1では、評価対象のメモリカードのアクセスパターンデータと、比較対象のメモリカードのアクセスパターンデータが一致または近似するかをユーザに評価させる。
図7は、評価対象のメモリカードのアクセスパターンデータと、比較対象のメモリカードのアクセスパターンデータを重ねた図である。いずれも4GByteのメモリカードを対象としている。丸印のデータは、評価対象のメモリカードのアクセスパターンである。アクセス試験時間は1分23秒である。三角印のデータは、比較対象のメモリカードのアクセスパターンデータである。アクセス試験時間は1分35秒である。
データ比較は以下の順番で行われる。まず同じ容量のメモリカードであるか確認する。同じ容量である場合、2つのアクセス試験時間の差が所定値以下であるか確認する。図7に示す例では同じ容量のメモリカードである。この所定値としては、例えば、1分といった値を用いることができる。あるいは、メモリカードの容量が4GB以下の場合は30秒、4GB〜8GBの場合は1分などのように、メモリカードの容量別に所定値を定めておいてもよい。異なる種類のメモリカードの場合、アクセス試験時間が分単位で大きくずれる傾向がある。図7に示す例では、2つのアクセス時間の差は12秒であるため、上記の所定値を1分とすると、所定値以下であると判定される。
次にアクセス時間が収束する帯に注目する。図7に示す例では、丸印と三角印のほとんどが2つの帯のいずれかに収束していることが分かる。帯から飛び出しているプロットデータは、イレギュラーアクセスがあったことを示しており誤差成分である。2つのメモリカードの多くのプロットデータが重なるため、2つのメモリカードは同じ種類であると推測できる。異なる種類のメモリカードの場合、帯に収束しないプロットデータが多くなり、図7のように帯に収束することはない。以上の評価から、丸印のアクセスパターンデータを持つメモリカードは、データベース上の三角印のアクセスパターンデータを持つメモリカードと同じカテゴリであると判断できる。
図8は、評価対象のメモリカードをカテゴリ分類するための操作画面例を示す。この操作画面13aではグラフ領域13bが設けられ、グラフ領域13bには、評価対象の丸印のアクセスパターンデータと、評価データ保持部121から呼び出した比較対象の三角印のアクセスパターンデータが重ねて表示される。また操作画面13aには、グラフ領域13bに表示される評価対象のメモリカードと評価対象のメモリカードの、それぞれのアクセス試験時間が表示される。
ユーザは、グラフ領域13bに表示される2種類のアクセスパターンデータを異なるカテゴリのデータと判断した場合、戻るボタン13dまたは進むボタン13eを押下して、比較対象のアクセスパターンデータをデータベース内の他のアクセスパターンデータに切り替える。なお、現在選択されている比較対象のデータ名がデータ名ウインドウ13cに表示される。
ユーザは、切り替えられた比較対象のアクセスパターンデータと、評価対象のアクセスパターンデータを見て、同じカテゴリのデータと判断したとき、「同じカテゴリに登録する」ボタン13fを押下する。この場合、評価対象のメモリカードの寿命評価は、当該カテゴリに属するメモリカードの寿命評価を流用できるため、新たな寿命評価試験を行う必要がない。データベース内の全てのメモリカードのアクセスパターンデータと比較して、近似するアクセスパターンデータが存在しないと判断したとき、ユーザは「新規カテゴリに登録する」ボタン13gを押下する。この場合、新規に登録した後、評価対象のメモリカードの寿命試験を行う。
ユーザが「同じカテゴリに登録する」ボタン13fを押下した場合、寿命評価部116は、評価データ保持部121から当該カテゴリに属する不揮発性半導体記憶装置30の寿命評価データを読み出し、これを用いて寿命予測を行う。具体的には、寿命評価データとして、後述する限界書き込み回数と、メモリカードの容量を読み出し、これらを用いて評価対象のメモリカードの寿命を予測する。評価対象のメモリカードの容量と、寿命評価データのメモリカードの容量が同じ場合は、評価対象のメモリカードの限界書き込み回数は、読み出した限界書き込み回数と同じであると予測する。また、評価対象のメモリカードの容量と、寿命評価データのメモリカードの容量が異なる場合は、両者の単位容量あたりの限界書き込み回数が同じであるとみなして、寿命予測を行う。例えば、評価対象のメモリカードが8GBであり、寿命評価データのメモリカードの容量が4GBである場合、評価対象のメモリカードの容量は、寿命評価データのメモリカードの容量の2倍であるので、限界書き込み回数は容量と比例関係にあるとみなし、評価対象のメモリカードの限界書き込み回数は、寿命評価データのメモリカードの限界書き込み回数の2倍であると推定する。なおここで、寿命予測部(図1には図示せず)を別途設けた上で、寿命予測部が、上述の寿命予測処理を行ってもよい。
図9は、評価対象のメモリカードを新規カテゴリに登録する操作画面例を示す。図8の「新規カテゴリに登録する」ボタン13gが押下されると、図9の新規登録画面13hに遷移する。ユーザは、新規登録するデータ名、メモリカードの容量、ラベル表記のメーカ、ラベル表記のスピードをそれぞれの入力ウインドウ13i、13j、13k、13lに入力し、決定ボタン13mを押下する。これにより評価対象のメモリカードの評価データがデータベースに新規登録される。
メモリカードの容量、ラベル表記のメーカ、ラベル表記のスピードは、メディア本体から自動で読み取れない項目であるため、メモリカードのラベルを読んだユーザが、ラベルに表記されている内容を入力する。なお、容量は最大LBAから算出できるため、ユーザの入力がなくても演算により特定できる。データ名とともにラベル表記のメーカ、ラベル表記のスピードは、その評価したメモリカードの個別情報である。このデータ名は図8の13cに示す比較対象のデータ名として使用される。
図8では、評価対象の1つのメモリカードのアクセスパターンデータと、比較対象の1つのメモリカードのアクセスパターンを重ねて表示する例を示した。この点、評価対象の1つのメモリカードのアクセスパターンデータと、比較対象の複数のメモリカードのアクセスパターンを重ねて表示してもよい。また、比較対象のメモリカードのアクセスパターンと、評価対象のメモリカードのアクセスパターンを1つのグラフに重ね合わせずに、複数の別々のグラフとして表示してもよい。操作画面13a内のグラフの位置を適切に配置すること(複数のグラフのX座標またはY座標を整列させる等)により、重ね合わせする場合と比べて若干操作性は低下するものの、比較的容易に比較することができる。また図8では、アクセスパターンデータを散布図で表示する例を示したが、ヒストグラム形式などの他の形式で表示してもよい。
次に、寿命試験(寿命評価)の詳細について説明する。図10に、寿命試験で指定されたデータ単位でLBAが重複することなく、アクセス開始位置を増加させながら0LBAから最大LBAまで全面書き込みを行ったときの特定LBAの書き込み時間、読み出し時間をプロットした例を示す。
不揮発性半導体記憶装置に使用されている不揮発性メモリは、書き込み回数が増えていくに従い、電子を閉じ込めている酸化膜の劣化が進行し、電子を保持しにくくなるので、データが壊れやすくなり、その結果として読み出したデータのエラーが増え、内部でのECC(Error Correcting Code)処理が増加し、データ読み出し時のアクセス時間が長くなる。そのため、図10に示すように各LBAの読み出し時間は緩やかに増大する。最終的に不揮発性半導体記憶装置の動作規格が規定するアクセス時間を超えて、内部処理時間いっぱいまで読み出し処理を行っても、読み出したデータが書き込まれたデータと異なるようであれば、その不揮発性半導体記憶装置は寿命に達したと判定できる。ここで読み出したデータは、ECCによるエラー補正の限界を超えているデータといえる。
このように不揮発性半導体記憶装置が寿命回数に到達したとき、内部のエラー処理時間をすべて使って読み出しのアクセス時間が延びるので、このときの読み出しのアクセス時間は、通常の読み出しアクセス時間よりも時間を要するという特徴があることから、寿命に達する書き込み回数とそのときの読み出しのアクセス時間には関連性があり、寿命に達したときの読み出しのアクセス時間から寿命回数に到達したことを推測することができる。
不揮発性半導体記憶装置に使用されている不揮発性メモリは、書き込み回数が増えていくに従い、電子を閉じ込めている酸化膜の劣化が進行する。その結果、書き込み回数が増えるに従い電子が酸化膜を通りやすくなるので、書き込み時のアクセス時間が短くなる特徴がある。書き込み後読み出されたデータの異常が確認されるとともに、書き込みのアクセス時間が通常のアクセス時間より短く変化したとき、寿命に達する書き込み回数とそのときの書き込みのアクセス時間には関連性があり、寿命に達したときの書き込みのアクセス時間からも寿命回数に到達したことを推測することができる。
これにより、不揮発性半導体記憶装置の中には、内部のコントロールチップのウェアレベリング処理により、再度同じLBAにアクセスしても異常が発生せず、性能が回復するものもあるが、寿命回数に達したときの書き込み、読み出しのアクセス時間との比較を行うことにより、より確実に不揮発性半導体記憶装置が寿命に至る回数に達したことを判断することができる。
この結果、不揮発性半導体記憶装置は、温度条件に変化がなければ、電子の動きであるアクセス回数以外、性能を変化させる要因が少ない、従ってアクセス時間をもとに同一カテゴリに分類された不揮発性半導体記憶装置は同じ不揮発性メモリとコントロールチップを使用していると推測できることから、同じ書き込み回数に対する書き込みアクセス時間のカーブ及び読み出し回数に対する読み出しアクセス時間のカーブを持ち、同じ寿命に達する回数を持つ、同じような寿命性能を持つ物と推定できる。
当然ではあるが、同じ不揮発性メモリを搭載した不揮発性半導体記憶装置でもコントロールチップが異なると、特にウェアレベリングの処理の仕方で内部の不揮発性メモリの本当の書き込み回数は異なるので、不揮発性半導体記憶装置の寿命に至る書き込み回数は異なる。
このように、寿命評価は評価した不揮発性半導体記憶装置が実際に何回書き込みができるかを評価することができ、結果として比較評価で同一カテゴリとされた不揮発性半導体記憶装置もこの回数まで書き込みができることを評価者は知ることができ、例えば不揮発性半導体記憶装置への書き込み回数がわかっている不揮発性半導体記憶装置搭載機器における不揮発性半導体記憶装置の交換時期を知ることができる。
このため、評価結果として不揮発性半導体記憶装置の寿命に至る書き込み回数(限界書き込み回数)が寿命として登録され、この寿命に達するまでの書き込みアクセス時間のプロット、読み出しアクセス時間のプロットと特にデータが異常を来したときの書き込みアクセス時間、読み出しアクセス時間がカテゴリ化された不揮発性半導体記憶装置固有の情報として登録される。
また、これらの情報から、寿命に達したときの書き込み回数に対する書き込みアクセス時間、及び読み出し回数に対する読み出しアクセス時間から逆算して、同一カテゴリに属する他の不揮発性半導体記憶装置の現在の書き込み回数を推定できる。即ち、他の不揮発性半導体記憶装置の現在の書き込みアクセス時間および読み出しアクセス時間が、何回目の書き込みに達したときの書き込みアクセス時間および読み出しアクセス時間であるかを特定することにより、現在の書き込み回数を推定できる。従って、他の不揮発性半導体記憶装置が寿命に達するまで、残りどのくらいの書き込みが可能かを予想することができる。
以上説明したように実施の形態1によれば、不揮発性半導体記憶装置30に対して、比較評価用のアクセスパターンで外部からアクセスし、そのアクセス時間をもとに不揮発性半導体記憶装置30をカテゴリ分類する。さらにカテゴリごとに1つの不揮発性半導体記憶装置30に対して、寿命評価用のアクセスパターンで外部からアクセスし、書き込みデータと読み出しデータが一致しなくなるまで繰り返すことにより寿命を評価する。これにより、不揮発性半導体記憶装置30の寿命を外部から予測できる。即ち内蔵されている不揮発性メモリとコントロールチップを特定することなく、パッケージ化された状態で寿命を予測できる。従って不揮発性メモリ及び/又はコントロールチップの製造メーカ以外の第三者でも簡単に寿命を予測できる。
カテゴリ分類をユーザの目視により決定することにより、ノイズデータに左右されずにカテゴリ分類できる。特にアクセスパターンデータのサンプル数が少ない状態では、実施の形態2で説明する自動分類よりユーザの目視による分類のほうが精度が高くなる傾向にある。ユーザにカテゴリ分類を要求する際、評価対象のデータと比較対象のデータをグラフ化して重ねて表示するグラフィックユーザインタフェースを用いることにより、ユーザが両者を比較しやすくなり、分類の精度が高まる効果が期待できる。
以上、実施の形態1では比較評価の一部をマニュアル操作で行う例を説明した。以下、実施の形態2では比較評価の全てを自動処理で行う例を説明する。
図11は、本発明の実施の形態2に係る評価システム1の構成を示す図である。以下、図1に示した実施の形態1に係る評価システム1との相違点を説明する。実施の形態2では、情報処理装置10の制御部11は、特徴量抽出部112をさらに備える。特徴量抽出部112は、アクセスパターンデータから特徴量を抽出する。特徴量の抽出方法の具体例は後述する。
実施の形態2では分類部115は、評価対象の不揮発性半導体記憶装置30のアクセスパターンデータから抽出された特徴量と、既にカテゴリ分類された他の不揮発性半導体記憶装置30のアクセスパターンデータから抽出された特徴量を比較して、評価対象の不揮発性半導体記憶装置30を分類する。具体的には、評価対象の不揮発性半導体記憶装置30の当該特徴量と、最も差が小さい他の不揮発性半導体記憶装置30の当該特徴量を特定する。両者の差が設定値以下の場合、評価対象の不揮発性半導体記憶装置30を当該他の不揮発性半導体記憶装置30が属するカテゴリに分類する。両者の差が設定値を超える場合、評価対象の不揮発性半導体記憶装置30を新たなカテゴリに分類する。
図12は、実施の形態2に係る比較評価処理の流れを示すフローチャートである。特徴量抽出部112は、評価対象の個体であるメモリカードのアクセスパターンデータから特徴量を抽出する(S20)。特徴量として、以下に示す種々のものを用いることができるが、大きく分けると、アクセスパターンデータのセクタ(LBA)軸の情報を用いない特徴量と、セクタ(LBA)軸の情報を用いる特徴量の2種類がある。なお、読み出し時間のデータ、書き込み時間のデータのいずれか一方から特徴量を抽出してもよいし、両方から特徴量を抽出してもよい。また、アクセス開始位置が増加するアクセスパターンのデータ、アクセス開始位置が減少するアクセスパターンのデータのいずれか一方を用いてもよいし、両方を用いてもよい。両方を用いる場合、より高精度に比較評価、即ちカテゴリ分類ができる。以下では、i番目の特徴量をF[i]と表すが、以下に示す特徴量を全部抽出する必要はなく、この一部を抽出して用いればよい。
まず、セクタ(LBA)軸の情報を用いない特徴量について説明する。アクセスパターンデータを、測定した全てのセクタ(LBA)に渡って集約したデータを作成し、そのデータに基づき特徴量を算出する。セクタ(LBA)に関する情報は失われるが、相対的に少ないデータ数でアクセスパターンデータの特徴を数値化できる。
セクタ(LBA)軸の情報を用いない第1の特徴量として、アクセス試験時間を使用できる。アクセス試験時間は、評価対象のメモリカードの単位容量当たりのアクセス時間の合計値である。即ち、所定のアクセスパターンを使用した比較評価における試験開始から終了までに要した総時間である。単位容量は例えば、256セクタの容量に設定する。メモリカードの容量が多いほど通常、アクセス試験時間が長くなる。
セクタ(LBA)軸の情報を用いない第2の特徴量として、評価対象のメモリカードの単位容量当たりのアクセス時間の代表値を使用できる。代表値としては、平均値、中央値、最頻値のうちの1つ以上を用いればよい。以下では、簡単のため、単位容量当たりのアクセス時間を「アクセス時間」とする。
セクタ(LBA)軸の情報を用いない第3の特徴量として、アクセス時間の分布の範囲を示す値を使用できる。例えば、アクセス時間の最大値および最小値を用いることができる。ただし、最大値および最小値は測定誤差の影響を受けやすいので、アクセス時間の小さい順に数えて「α1」%番目のデータの値であるVα1、「α2」%番目のデータの値であるVα2を用いるのが望ましい(α1<α2)。例えば、α1=5%、α2=95%とすればよい。
セクタ(LBA)軸の情報を用いない第4の特徴量として、アクセス時間の分布の幅を示す値を使用できる。アクセス時間の分散、標準偏差、(最大値−最小値)、(Vα2−Vα1)のうちの1つ以上を用いればよい。
セクタ(LBA)軸の情報を用いない第5の特徴量として、アクセス時間の分布の形状を示す値を使用できる。アクセス時間の分布の形状を示す値として例えば、(A)アクセス時間のヒストグラム、(B)混合分布による近似値、(C)ピークの個数と位置を使用できる。
(A)アクセス時間のヒストグラムは、アクセス時間を所定の複数の階級(ビン)に分けて、階級ごとのデータ個数をカウントして作成したヒストグラムである。例えば、0〜10msec、10msec〜20msec、20msec〜30msec、…、80msec〜90msec、90msec〜、などのように、階級幅を10msecとする10個の階級を設定し、それぞれの階級に対応するデータ個数を集計すればよい。なお、容量の異なるメモリカードの比較を行うために、相対度数のヒストグラムを作成することが望ましい。また、階級幅は均一である必要はなく、階級ごとに異なっていてもよい。また、階級の数Hnは、あらかじめ決めておけばよく、10個に限定されないのは、もちろんのことである。このように作成したヒストグラムの各階級の値をそれぞれ特徴量とする。例えば、Hn個の階級を用いる場合、ヒストグラム関連の特徴量は、F[i]〜F[i+Hn−1]となる。
図13は、(B)混合分布による近似値を説明するための模式的なグラフである。図13に示すように、アクセス時間の分布を複数の確率分布の混合で近似する。図13では、アクセス時間の分布を点線で示しており、このアクセス時間の分布を近似した3個の正規分布を実線で描いている。図13のグラフの横軸はアクセス時間に対応する階級であり、実際は離散化されているが、簡単のため連続量として示している。また、縦軸は階級ごとの相対頻度であるが、確率(確率密度)とみなして処理を行う。階級kの相対頻度がh[k]である場合、階級kに対応するアクセス時間の中央値をxとして、確率p(x)=h[k]として以下の処理を行う。一般に、混合する成分の個数をM、j番目の確率分布のパラメータをθ[j](j=1〜M)、j番目の確率分布をD(x|θ[j])、j番目の確率分布の混合係数β[j]とすると、アクセス時間xの分布p(x)は下記式(1)で表される。ここで、混合係数β[j]は下記式(2)の条件を満たす0以上の実数である。
Figure 2016157227
Figure 2016157227
確率分布としては、正規分布を用いるのがよい。1次元の正規分布の場合は、確率分布のパラメータは、平均μと標準偏差σの2つである。すなわち、j番目の確率分布のパラメータは、μ[j]、σ[j]、β[j]の3つとなる。そして、EMアルゴリズム等の手法を適用することにより、p(x)との誤差が最も少なくなるように、μ[j]、σ[j]、β[j]を算出することができる。すなわち、3M個の数値でアクセス時間の分布p(x)を表すことができる。この3M個の数値である、μ[j]、σ[j]、β[j](j=1〜M)を特徴量F[i]〜F[i+3M−1]とする。
なおここで、特徴量の順番を決める方法としては、β[j]の大きさに基づき特徴量の番号を決める方法、μ[j]の大きさに基づき特徴量の番号を決める方法、σ[j]の大きさに基づき特徴量の番号を決める方法のいずれを用いてもよい。例えば、β[j]の大きい順に特徴量の若い番号を割り当てる場合は、β[j]が最も大きい成分のパラメータを特徴量F[i]〜F[i+2]とし、β[j]が2番目に大きい成分のパラ−メータを特徴量F[i+3]〜F[i+5]などとすればよい。また成分の個数Mの値は、あらかじめ決めておいてもよいし、BIC(Bayesian Information Criterion)などの手法を用いて最適値を決定してもよい。
事前に決めておく場合は、例えば、数個〜10個程度の範囲の個数を用いればよい。また最適値を算出する場合は、評価試験ごとに成分の個数が変わる可能性があるため、成分の個数Mを特徴量の1つに入れる。また、最大Mz個までの成分のパラメータを保存できる特徴量を用意しておき、M<Mzの場合には、(Mz−M)個のパラメータに対応する特徴量を「0」にすればよい。例えば、成分の個数Mを特徴量F[i]とし、1〜M個目の成分のパラメータを特徴量F[i+1]〜F[i+3M]に対応させる。そして、F[i+3M+1]〜F[i+3Mz]の特徴量は「0」にする。このようにすれば、成分の個数Mを可変にして、特徴量を生成することができる。
図14は、(C)アクセス時間の分布からピークの個数とピークの位置を検出する方法を説明するための模式的なグラフである。図13と同様に、横軸はアクセス時間に対応する階級であり、実際は離散化されているが、図では簡単のため連続量として示している。縦軸は階級ごとの相対頻度h[k]である。
まず、相対頻度の最大値、およびその位置(1番目のピーク)を検出する。図14においては、階級k1において、最大値h[k1]を取る。次に、2番目に大きなピークの値とその位置を検出する。ピークの検出方法としては種々のものを用いることができるが、例えば、下記式(3)の条件を満たす階級kと、その相対頻度h[k]を検出すればよい。すなわち、cを正の所定数として、階級がk−c〜k+c(ただしkを除く)の範囲の相対度数の最大値が、h[k]よりも小さいという条件を満たす位置を検出すればよい。
Figure 2016157227
図14の例では、2番目のピークはk2であり、その相対頻度はh[k2]である。同様に、3番目に大きなピーク、4番目に大きなピーク、などを検出し、全部でQ個のピークを検出する。Qの値は、あらかじめ決めておいてもよいし、所定の条件に基づき決定してもよい。例えば、あらかじめ5個と決めておき、大きい順に5個のピークを検出してもよい。あるいは、最大ピークの値に所定の割合を乗じた値以上のピーク値を持つピークのみを検出対象とし、最大Qz個のピークを検出してもよい。
例えば、図14に示すように、最大値h[k1]の30%の値(図の点線)以上のピーク値を持つk1、k2のみを検出対象とし、このしきい値に満たないk3を検出対象としない等の処理を行ってもよい。1つのピークにつき、アクセス時間の階級kと、相対頻度h[k]の2つの数値が得られるので、Q個のピークを検出した場合は、2Q個の特徴量が得られる。また、検出するピークの個数を可変にする場合は、最大Qz個のピークの情報を保存できる2Qz個の特徴量と、ピーク個数を保存する1個の特徴量の合計(2Qz+1)個の特徴量を用意しておく。そして、実際に検出したピークの個数QがQzに満たない(Q<Qz)場合、2(Qz−Q)の特徴量は「0」に設定する。
次に、セクタ(LBA)軸の情報を用いる特徴量について説明する。アクセスパターンデータのセクタ(LBA)軸の情報を用いることにより、メモリカードの特徴を更に詳細に数値化することができる。
セクタ(LBA)軸の情報を用いる第1の特徴量として、セグメントごとの特徴量を使用できる。アクセス時間からなるアクセスパターンデータをセクタ方向に複数の領域(セグメント)に分割し、セグメントごとに、上述したセクタ(LBA)軸の情報を用いない第1〜第5の特徴量を算出する。
図15は、セグメント分割の一例を示す図である。図15は、所定のLBAを境界として、アクセスパターンデータを3つのセグメントに分割した例である。セグメント1〜セグメント3について、それぞれ特徴量を算出する。セグメントの幅は均等であっても、均等でなくてもよい。また、LBAの絶対値を境界に用いてもよいし、そのメモリカードの最大LBAを基準とした相対値を境界に用いてもよい。例えば、最大LBAの10%の値をセグメントの幅にした10個のセグメントを作成してもよい。このようにLBAの相対値でセグメントを作成することにより、容量の異なるメモリカードの特徴量の比較が容易になる場合がある。このように複数のセグメントを作成し、セグメントごとに特徴量を算出する方法を用いると、LBAが小さい領域では、アクセス時間が長いが、LBAが大きい領域では、アクセス時間が短いといったメモリカードの特性を精度よく特徴量に反映することができる。
セクタ(LBA)軸の情報を用いる第2の特徴量として、局所特徴量を使用できる。アクセスパターンデータにおいて、LBAの小さい方から数えてu番目のアクセス時間をA[u]とした場合、A[u]とuの近傍のアクセス時間(A[u−1]、A[u+1]など)を用いて、局所特徴量を算出する。アクセスパターンデータで測定されたLBAの個数をUとすると、例えば、下記式(4)に従って、特徴量F[i]を算出することができる。また、下記式(4)の代わりに下記式(5)を用いてもよい。
Figure 2016157227
Figure 2016157227
上記式(4)または上記式(5)によれば、隣接するセクタ間のアクセス時間の差が大きいアクセスパターンデータほど、特徴量F[i]が大きくなる。例えば、LBAの変化に対して、アクセス時間が細かく変動するメモリカードでは、この特徴量が大きな値となる。LBAの変化によらずアクセス時間がほぼ一定のメモリカードでは、この特徴量は小さな値となる。従って、このようなメモリカードの特性を特徴量に反映させることができる。
また、下記式(6)を用いて特徴量を算出してもよい。上記式(4)との違いは、あるLBAの隣のLBAではなく、所定数sだけ離れたLBAとの差を算出する点である。アクセス時間が一定の周期で変動する場合、所定数sをその周期に一致させると、特徴量が小さな値となる。所定数sが周期と一致しない場合は、特徴量が大きな値となる。従って、sを少しずつ変えて、複数の特徴量を算出することにより、アクセス時間の周期的な変動の情報を特徴量に反映させることができる。例えば、s=1〜10とした10種類の特徴量を算出してもよい。
Figure 2016157227
また、下記式(7)を用いて特徴量を算出してもよい。ここでG(u)は、下記式(8)で定義される関数である。すなわち、Lを所定数として、(u−L)〜(u+L)の範囲の全てのデータにおいて、LBAの変化に対してアクセス時間が単調増加する場合は「1」、それ以外の場合に「0」となる関数である。このような式を用いることにより、局所的な単調増加パターンの多い/少ないを特徴量に反映させることができる。また、関数G(u)の設定を変更することにより、単調増加パターンだけでなく、単調減少パターン、V字変化パターン、逆V字変化パターンを検出してもよい。
Figure 2016157227
Figure 2016157227
以上詳述した処理により種々の特徴量を抽出することができる。なお上述した方法では、評価対象の個体の1回の測定データに基づいて特徴量を算出するが、複数回の測定データに基づいて特徴量を算出してもよい。例えば、1つの個体についてアクセスパターンデータを3回測定し、3回分のアクセスパターンデータを全て用いて特徴量を算出してもよい。図13および図14に示すような、アクセス時間の分布を扱う場合においても、3回分のアクセスパターンデータを合わせた分布を作成した上で特徴量を抽出すればよい。このように、複数回の測定データに基づいて特徴量を抽出すると、測定誤差の影響を軽減することができ、分類精度を向上させることができる。以下では図12のステップS20において、N個の特徴量i=1〜Nを算出したものとする。
以下、図12のフローチャートに戻る。分類部115は、評価対象のメモリカードの特徴量と、各比較対象のメモリカードの特徴量との距離を算出する(S21)。評価対象のメモリカードの特徴量をFe[i](i=1〜N)とする。
図16は、評価データ保持部121のデータ形式の一例を示す図である。評価データ保持部121は、過去に評価した個体のデータを基準データとして、データベース化して格納している。図16に示す基準データのデータベースには、基準データ番号と、記憶容量と、カテゴリ番号と、特徴量と、寿命データとが関連づけて格納されている。この寿命データは、上述した寿命試験の結果得られるデータであり、少なくとも限界書き込み回数を含む。また、これ以外に、寿命に達するまでの書き込みアクセス時間のプロットデータ、読み出しアクセス時間のプロットデータ、寿命に達したときの書き込みアクセス時間および読み出しアクセス時間などのデータを含めてもよい。
カテゴリ番号は、カテゴリを識別する番号であり、同じカテゴリのメモリカードは、基本的に同じ寿命特性を持つとみなす。ただし、後述するように、寿命予測の際に記憶容量の違いを考慮する。図16に示す例では、記憶容量4GBのメモリカードは、R1個登録されており、C1種類のカテゴリが存在する。また記憶容量8GBのメモリカードは、R2個登録されており、C2種類のカテゴリが存在する。全体としては、R個のデータが登録されており、C種類のカテゴリが存在する状態である。なお、図16には示していないが、図9に示したように、「データ名」、「ラベル表記のメーカ」、「ラベル表記のスピード」等の情報をデータベースに格納してもよい。
記憶容量が異なるメモリカードには、基本的には異なるカテゴリ番号が付与されているが、1つのカテゴリ番号に記憶容量の異なる複数のメモリカードを対応させておくことも可能である。また図16に示すように、1つのカテゴリに対して、複数の基準データを登録してもよい(カテゴリ「1」が3個存在する)。1つのカテゴリに対して最低1つの基準データが必要である。また寿命データは、寿命評価試験により得られた数値である。図16に示す基準データのデータベースには、R個の基準データが存在するものとし、基準データ番号r(r=1〜R)の特徴量をF[r][i](i=1〜N)とする。評価対象の個体のデータと、基準データrとの間の距離d[r]は、下記式(9)により算出することができる。
Figure 2016157227
ここで、w[i](i=1〜N)は、重み係数であり、特徴量ごとに所定の正の値を設定しておく。この重み係数を使用しないことも可能であるが、重み係数を用いると、スケール(値の範囲)の大きく異なる特徴量が存在しても、精度よく距離を算出することができる。また、データベース内の基準データの特徴量それぞれを、最大値が「1」、最小値が「0」になるように正規化しておき、評価対象の個体の特徴量も同じ方法で正規化した上で、距離を算出してもよい。また、データベース内の基準データの特徴量それぞれを、平均値が「0」、標準偏差「1」になるように正規化しておき、評価対象の個体の特徴量も同じ方法で正規化した上で、距離を算出してもよい。そのような正規化を行う場合は、重み係数w[i]を省略してもよい。
図12のフローチャートに戻る。次に分類部115は、距離d[r](r=1〜R)の中から最短距離を持つ基準データを特定する(S22)。
図17は、最短距離を持つ基準データを特定する処理を説明するための模式図である。図17では、特徴量の数が3個の場合を示しており、評価対象の個体、および基準データはこの3次元空間内の点として表される。図17内の黒丸は、評価対象の個体を示しており、番号の付いた白丸は、基準データを示しており、番号は基準データのカテゴリを示している。図17の例では、カテゴリ2の基準データとの距離が最短であると特定できる。
図12のフローチャートに戻る。次に分類部115は、特定した最短距離が所定の設定値ε以下であるか否か判定する(S23)。設定値εを決める方法の1つとして、以下の方法を用いることができる。まず、予備実験として、同一カテゴリに属する複数のメモリカードを用意し、それぞれのアクセスパターンを測定し、それぞれの特徴量を算出する。次に、同一カテゴリに属する個体間の距離を算出し、その距離の最大値(同一カテゴリの最大距離)を算出する。例えば、同一カテゴリに属する5個のメモリカードを用意し、それぞれの個体間の10個の距離を算出し、その最大値を算出すればよい。そして、同一カテゴリの最大距離の定数倍を設定値εとする。例えば、同一カテゴリの最大距離の2倍を設定値εとする。
ステップS23において最短距離が設定値ε以下である場合(S23のY)、分類部115は、評価対象の個体のカテゴリを、最短距離を持つ基準データのカテゴリと同じと判定する(S24)。そして、評価対象の個体の寿命(限界書き込み回数)を、最短距離を持つ基準データの寿命(限界書き込み回数)から推定する。なお、この場合は、寿命試験は不要である。具体的には、評価対象の個体の単位容量あたりの寿命が、最短距離を持つ基準データの単位容量あたりの寿命と同じであると推定する。例えば、評価対象の記憶容量と、最短距離を持つ基準データの記憶容量が同じ場合、評価対象の個体の寿命は、基準データの寿命と同じと推定する。また例えば、評価対象の個体が8GBであり、最短距離を持つ基準データが4GBの場合は、評価対象の個体は、その基準データの2倍の寿命を持つと推定する。
なお、最短距離を持つ基準データと同じカテゴリ番号を持つ基準データを更に用いて、寿命予測を行ってもよい。例えば、図16に示す例において、最短距離を持つ基準データの番号が「3」である場合、そのカテゴリ番号「1」と同じカテゴリ番号を持つ基準データ(「1」〜「3」)を用いて寿命予測をしてもよい。具体的には、基準データ「1」〜「3」の寿命データLife1〜Life3の平均値または中央値等の代表値を用いて寿命を予測する。
ステップS23において最短距離が設定値εより大きい場合(S23のN)、分類部115は、評価対象の個体を、基準データのデータベースに登録されているカテゴリのどれにも該当しないと判定し、新規カテゴリとして基準データに登録する(S25)。例えば、図16に示す例の場合、データベースに(R+1)行目を追加し、既に登録されているカテゴリ番号の最大値(最大カテゴリ番号)に1を加えた番号を新規カテゴリとして登録し、特徴量の項目に抽出した特徴量Fe[i](i=1〜N)を登録する。寿命データの項目(限界書き込み回数)は一先ず空欄として登録され、寿命試験が実施された後に、限界書き込み回数が登録される。
なお、上述の説明では、評価対象の個体と全ての基準データとの距離を算出したが、評価対象の個体の記憶容量と同じ記憶容量を持つ基準データに限定して距離を算出してもよい。すなわち、評価対象の個体と同じ記憶容量を持つ基準データを用いて寿命予測を行う。基準データの個数がある程度多い場合には、このようにした方が、寿命予測の精度が高くなる。
また、基準データが非常に少ない場合は、全ての基準データを比較対象とし、基準データが比較的多い場合には、記憶容量が所定の範囲にある基準データを比較対象としてもよい。基準データが非常に多い場合には、評価対象と記憶容量が同じ基準データのみを比較対象とする等の制御を行ってもよい。所定の範囲としては、例えば、評価対象のメモリカードの記憶容量の1/2倍〜2倍の範囲を用いることができる。
また、上述の説明では、特徴量を用いて、評価対象の個体と基準データとの距離を算出したが、距離の代わりに類似度を算出してもよい。例えば、下記式(10)に従って、類似度S[r](r=1〜R)を算出してもよい。この場合は、図12のステップS22において、最大類似度を特定し、ステップS23において、最大類似度が設定値以上であるか否かを判定すればよい。
Figure 2016157227
また、1つのカテゴリについて複数(例えば、10個程度)の基準データをデータベースに登録した上で、評価対象の個体と距離の小さい順にγ個(γ≧2)の評価データを特定し、それらを用いて評価対象の個体のカテゴリを決定してもよい。例えば、距離の小さい順に3個の基準データを特定してカテゴリの判定を行うことができる。距離が1番小さい基準データのカテゴリが「1」、2番目に小さい基準データのカテゴリが「3」、3番目に小さい基準データのカテゴリが「1」であった場合、多数決により、最も数の多いカテゴリ「1」を評価対象の個体のカテゴリとする。また、距離が1番小さい基準データのカテゴリが「2」、2番目に小さい基準データのカテゴリが「3」、3番目に小さい基準データのカテゴリが「1」であった場合、多数決では決まらないため、最短距離のカテゴリ「2」を評価対象の個体のカテゴリとする。また、距離の小さい順に所定数の基準データを特定し、それぞれの距離が小さいほど大きな値となる重み付けを行って多数決処理を行ってもよい。
このように、最短距離の基準データのカテゴリだけでなく、距離の短い順に所定数の基準データを特定し、それらのカテゴリを用いて評価対象の個体のカテゴリを判定することにより、アクセス時間測定の誤差の影響を軽減し、精度よく分類を行うことができる。
また、距離の短い順に所定数(複数)の基準データを特定し、それらの複数の寿命データの代表値(平均値、中央値など)を用いて寿命予測を行ってもよい。この寿命予測方法は、評価対象の個体のカテゴリを1つに決定せずに、複数のカテゴリと関連があると見なして、寿命予測をすることに相当する。また、距離の小さい順に所定数の基準データを特定し、それぞれの距離が小さいほど大きな値となる重み付けを複数の寿命データに対して行って、加重平均値を算出し、それを用いて寿命予測を行ってもよい。
以上説明したように実施の形態2によれば、実施の形態1と同様に不揮発性半導体記憶装置30の寿命を外部から予測できる。即ち内蔵されている不揮発性メモリとコントロールチップを特定することなく、パッケージ化された状態で不揮発性半導体記憶装置30の寿命を予測できる。
実施の形態1のようにカテゴリ分類をユーザの目視により決定するのではなく、統計的処理にもとづき抽出される特徴量にもとづき決定することにより、より客観的なカテゴリ分類ができる。特にアクセスパターンデータのサンプル数が多く揃った後は、高精度に分類できる。また不揮発性半導体記憶装置は、ハードディスクと比較してアクセスパターンデータが安定しており、異常値が少なく統計処理に馴染みやすい。
以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
例えば実施の形態1で説明したグラフィックユーザインタフェースと、実施の形態2で説明した特徴量にもとづく自動分類を組み合わせてもよい。例えば図8に示した操作画面に自動分類ボタンを追加してもよい。ユーザは、自動分類ボタンを押下することにより、情報処理装置10により評価対象と最も差分が小さいと判断された比較対象のアクセスパターンデータのグラフを表示させることができる。これにより、ユーザは自己の判断と、試験装置20により算出された判断が一致しているか確認できる。また、自動分類されたカテゴリを参考にして、ユーザが最終的なカテゴリを判定してもよい。
1 評価システム、 10 情報処理装置、 11 制御部、 111 試験実行部、 112 特徴量抽出部、 113 表示制御部、 114 操作受付部、 115 分類部、 116 寿命評価部、 12 記憶部、 121 評価データ保持部、 13 表示部、 14 操作部、 20 試験装置、 30 不揮発性半導体記憶装置、 31 不揮発性メモリ、 32 コントローラ。

Claims (8)

  1. 不揮発性半導体メモリと、コントローラを含む不揮発性半導体記憶装置の評価システムであって、
    不揮発性半導体記憶装置に、所定のアクセスパターンでデータの書き込み又は読み出しを行い、単位記憶領域ごとのアクセス時間を測定する試験装置と、
    前記試験装置から単位記憶領域ごとのアクセス時間を取得し、単位記憶領域ごとのアクセス時間をもとに、前記不揮発性半導体記憶装置を分類する情報処理装置と、
    を備えることを特徴とする評価システム。
  2. 前記情報処理装置は、
    不揮発性半導体記憶装置の単位記憶領域ごとのアクセス時間を保持する評価データ保持部と、
    評価対象の不揮発性半導体記憶装置の単位記憶領域ごとのアクセス時間を示すグラフと、前記評価データ保持部にカテゴリ分類されて保持される比較対象の不揮発性半導体記憶装置の単位記憶領域ごとのアクセス時間を示すグラフを画面上に表示させる表示制御部と、
    ユーザの操作を受け付ける操作受付部と、
    前記ユーザの操作にもとづき、前記評価対象の不揮発性半導体記憶装置を分類するカテゴリを決定する分類部と、
    を有することを特徴とする請求項1に記載の評価システム。
  3. 前記表示制御部は、前記評価対象の不揮発性半導体記憶装置の単位記憶領域ごとのアクセス時間を示すグラフと、前記比較対象の不揮発性半導体記憶装置の単位記憶領域のアクセス時間を示すグラフを、同一画面上にオーバーラップさせて表示させ、
    前記ユーザの切替指示操作にもとづき、前記画面上に表示される前記比較対象の不揮発性半導体記憶装置の単位記憶領域ごとのアクセス時間を示すグラフを、別のものに切り替えることを特徴とする請求項2に記載の評価システム。
  4. 前記情報処理装置は、
    前記決定された前記評価対象の不揮発性半導体記憶装置のカテゴリに属する他の不揮発性半導体記憶装置の寿命に係るデータに基づいて、前記評価対象の不揮発性半導体記憶装置の寿命を予測する寿命予測部を有する、
    ことを特徴とする請求項2または3に記載の評価システム。
  5. 前記アクセスパターンは、単位記憶領域の最小値から最大値の方向に所定値単位でアクセス開始位置が増加するアクセスパターン、または単位記憶領域の最大値から最小値の方向に所定値単位でアクセス開始位置が減少するアクセスパターンであることを特徴とする請求項1から3のいずれかに記載の評価システム。
  6. 前記情報処理装置は、
    前記試験装置から、当該不揮発性半導体記憶装置に対して書き込んだデータと、当該不揮発性半導体記憶装置から読み出したデータを比較して当該不揮発性半導体記憶装置の寿命を評価する寿命評価部を有し、
    前記寿命評価部は、不揮発性半導体記憶装置を分類するカテゴリごとに少なくとも1つの不揮発性半導体記憶装置の寿命を評価することを特徴とする請求項1から5のいずれかに記載の評価システム。
  7. 不揮発性半導体メモリと、コントローラを含む不揮発性半導体記憶装置の評価方法であって、
    不揮発性半導体記憶装置に、所定のアクセスパターンでデータの書き込み又は読み出しを行い、単位記憶領域ごとのアクセス時間を測定するステップと、
    測定された単位記憶領域ごとのアクセス時間をもとに、前記不揮発性半導体記憶装置を分類するステップと、
    を備えることを特徴とする評価方法。
  8. 不揮発性半導体メモリと、コントローラを含む不揮発性半導体記憶装置の評価プログラムであって、
    不揮発性半導体記憶装置に、所定のアクセスパターンでデータの書き込み又は読み出しを行い、単位記憶領域ごとのアクセス時間を測定する試験装置から単位記憶領域ごとのアクセス時間を取得し、単位記憶領域ごとのアクセス時間をもとに、前記不揮発性半導体記憶装置を分類する処理を、
    コンピュータに実行させることを特徴とする評価プログラム。
JP2015033979A 2015-02-24 2015-02-24 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム Active JP6274127B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015033979A JP6274127B2 (ja) 2015-02-24 2015-02-24 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015033979A JP6274127B2 (ja) 2015-02-24 2015-02-24 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム

Publications (2)

Publication Number Publication Date
JP2016157227A true JP2016157227A (ja) 2016-09-01
JP6274127B2 JP6274127B2 (ja) 2018-02-07

Family

ID=56826083

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015033979A Active JP6274127B2 (ja) 2015-02-24 2015-02-24 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム

Country Status (1)

Country Link
JP (1) JP6274127B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112435706A (zh) * 2020-11-05 2021-03-02 北京中电华大电子设计有限责任公司 一种非易失性存储器应用级擦写寿命评价方法
CN116580756A (zh) * 2023-06-01 2023-08-11 合肥开梦科技有限责任公司 一种存储芯片测试装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021135760A (ja) 2020-02-27 2021-09-13 キオクシア株式会社 メモリシステムおよびメモリ制御方法
KR20220021992A (ko) 2020-08-14 2022-02-23 삼성전자주식회사 비휘발성 메모리 장치, 그것의 동작 방법, 그것을 제어하는 제어기, 및 그것을 포함하는 저장 장치
CN112164417A (zh) * 2020-10-10 2021-01-01 上海威固信息技术股份有限公司 一种存储芯片的性能检测方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6352073A (ja) * 1986-07-22 1988-03-05 エッセヂエッセ―トムソン マイクロエレクトロニクス・エッセ・エッレ・エッレ バ−ンインの間にeprom型半導体デバイスをテストするための方法及び装置
JPH10125092A (ja) * 1996-10-22 1998-05-15 Advantest Corp フラッシュメモリ試験装置
JP2014203467A (ja) * 2013-04-01 2014-10-27 株式会社東芝 メモリシステム、制御システムおよび寿命予測方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6352073A (ja) * 1986-07-22 1988-03-05 エッセヂエッセ―トムソン マイクロエレクトロニクス・エッセ・エッレ・エッレ バ−ンインの間にeprom型半導体デバイスをテストするための方法及び装置
JPH10125092A (ja) * 1996-10-22 1998-05-15 Advantest Corp フラッシュメモリ試験装置
JP2014203467A (ja) * 2013-04-01 2014-10-27 株式会社東芝 メモリシステム、制御システムおよび寿命予測方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112435706A (zh) * 2020-11-05 2021-03-02 北京中电华大电子设计有限责任公司 一种非易失性存储器应用级擦写寿命评价方法
CN112435706B (zh) * 2020-11-05 2023-06-30 北京中电华大电子设计有限责任公司 一种非易失性存储器应用级擦写寿命评价方法
CN116580756A (zh) * 2023-06-01 2023-08-11 合肥开梦科技有限责任公司 一种存储芯片测试装置
CN116580756B (zh) * 2023-06-01 2024-03-22 合肥开梦科技有限责任公司 一种存储芯片测试装置

Also Published As

Publication number Publication date
JP6274127B2 (ja) 2018-02-07

Similar Documents

Publication Publication Date Title
JP6274127B2 (ja) 不揮発性半導体記憶装置の評価システム、評価方法、及び評価プログラム
US7992061B2 (en) Method for testing reliability of solid-state storage medium
US9129699B2 (en) Semiconductor storage apparatus and method including executing refresh in a flash memory based on a reliability period using degree of deterioration and read frequency
US7522884B2 (en) Apparatus and method for analyzing drive test data for communications system
US20170131948A1 (en) Visualization of usage impacts on solid state drive life acceleration
US10901629B2 (en) Method and apparatus for managing health of a storage medium in a storage device
WO2020062702A9 (zh) 短信发送的方法、装置、计算机设备和存储介质
US20100157766A1 (en) Predicting cartridge failure from cartridge memory data
CN111078123B (zh) 一种闪存块的磨损程度的评估方法及装置
WO2022213410A1 (zh) 一种闪存的有效性预测方法、装置及存储介质
US11366714B2 (en) Behavior-driven die management on solid-state drives
CN108694988B (zh) 存储器测试系统及其操作方法
JP4527456B2 (ja) メモリ寿命警告装置、および情報処理方法
WO2022165955A1 (zh) 闪存的异常检测方法、装置、计算机设备及存储介质
US9916220B2 (en) Smart logging of trace data for storage systems
JP6274128B2 (ja) 不揮発性半導体記憶装置の評価方法、評価システム、及び評価プログラム
CN112650446A (zh) NVMe全闪存存储系统的智能存储方法、装置及设备
CN101752008B (zh) 固态储存媒体可靠度的测试方法
CN115794451A (zh) 基于存储设备健康状态的执行策略预测方法、装置及系统
CN111835593B (zh) 基于非易失性存储介质的检测方法、存储介质及电子设备
JP7358031B2 (ja) 不揮発性半導体記憶装置の寿命予測装置、寿命予測方法、及び寿命予測プログラム
CN109857333B (zh) 一种ssd介质的健康度处理方法、ssd控制器及磁盘阵列
Oakley et al. Examining the impact of critical attributes on hard drive failure times: Multi‐state models for left‐truncated and right‐censored semi‐competing risks data
US20230278567A1 (en) Autonomous driving control apparatus and method thereof
JP7321406B2 (ja) バリデーション方法決定装置およびバリデーション方法決定方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170330

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171225

R150 Certificate of patent or registration of utility model

Ref document number: 6274127

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150