JP4168626B2 - 記憶装置間のファイル移行方法 - Google Patents
記憶装置間のファイル移行方法 Download PDFInfo
- Publication number
- JP4168626B2 JP4168626B2 JP2001372148A JP2001372148A JP4168626B2 JP 4168626 B2 JP4168626 B2 JP 4168626B2 JP 2001372148 A JP2001372148 A JP 2001372148A JP 2001372148 A JP2001372148 A JP 2001372148A JP 4168626 B2 JP4168626 B2 JP 4168626B2
- Authority
- JP
- Japan
- Prior art keywords
- file
- file server
- attribute information
- data
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99951—File or database maintenance
- Y10S707/99952—Coherency, e.g. same view to multiple users
- Y10S707/99953—Recoverability
Description
【発明の属する技術分野】
本発明は、情報処理システムなどにおける記憶装置システムのデータアクセス方法に係り、特に、記憶装置間のデータ移行方法に関する。
【0002】
【従来の技術】
銀行や企業などで使用される計算機システムでは、極めて大量のデータが取り扱われるため、大規模な記憶装置を必要とする。さらに、それらデータは日々増加していくため、記憶装置を増設する、またはより大容量な記憶装置へ置き換えていく必要が生じる。記憶装置を置き換える場合、通常の手段としては、記憶装置(以下、旧記憶装置) のバックアップを磁気テープなどにとり、それを新しい記憶装置(以下、新記憶装置) にリストアすることで実現する。
ただし、バックアップをとるためには一旦ホストのI/Oを停止する必要があり、その停止時間は一般に長い。そしてこの停止時間は、記憶装置の容量が大きくなればなるほど増大していく。さらに、上記のような大規模システムでは24時間無停止運転が前提であり、これは記憶装置の置き換えの場合も同様であるので、一旦ホスト側のI/Oを停止してバックアップをとる方法では問題がある。
【0003】
記憶装置の置き換えに関して、旧記憶装置から新記憶装置へとデータを移行する際にオンラインで実行する方法が特開2000-187608で開示されている。特開2000-187608では、最初ホスト計算機とある記憶装置(旧記憶装置)とで運用しているシステムに、新規記憶装置を導入する際、旧記憶装置内のデータを新規記憶装置に移動しつつ、新規記憶装置では同時にホスト計算機からのリード・ライトアクセスを受け付ける。具体的には、旧記憶装置から新規記憶装置にデータ移行を行う際に、一旦ホスト計算機と旧記憶装置間の接続を遮断し、ホスト計算機を新規記憶装置に接続しなおす。また新規記憶装置は旧記憶装置とも直接接続される。新規記憶装置は旧記憶装置のデータを新規記憶装置にコピーする機能と、ホスト計算機に対して、自らが旧記憶装置であるかのように見せかける機能を持つことで、ユーザに透過的にディスク装置間のデータ移行を可能にしている。
【0004】
また、近年では、複数のホスト計算機間を相互接続するローカルエリアネットワーク(LAN)に直接接続されるNAS(Network Attached Storage)と呼ばれる記憶装置が普及してきている。NASと各ホスト計算機とは、NFS(Network File System)などのネットワークファイルアクセス用プロトコルでデータのやり取りを行う。NFSでは、ファイルのリード/ライト、あるいはファイル作成/削除などファイルアクセスに必要な命令が規定されている。そのため、これら命令を組み合わせて、NASにおいても特開2000-187608に開示されているような、これまで運用してきたNAS(旧NAS)から新規のNASへとデータをコピーすることは可能である。
【0005】
【発明が解決しようとする課題】
特開2000-187608に開示されている方法を応用することで、NASにおいても単純なデータのコピーは充分可能である。ただし、NASにおいてデータを移行した場合、そのデータに付随する属性情報が問題となる。ファイルには、ファイル名、そのファイルの所有者とともに、ファイルの作成された日付、アクセスされた時刻などが記される。旧NASから新規NASへとファイルをコピーする際、単純に旧NASからあるファイルを読み出し、新規NASにファイル書き込みを行っただけでは、ファイルの作成された日付、アクセスされた時刻が変わってしまい、旧NASの状態を保ったデータ移行が行えない。またさらに、NASでは一般にホスト計算機との間のアクセスにおいて、複数種類のアクセスプロトコルでデータアクセスすることが可能である。例えば多くのNASでは、NFSとCIFS(Common Internet File System)とをサポートする。それぞれのプロトコルにおけるファイル属性は、共通している項目もあればそうでない項目もある。そのため、もしNFSプロトコルで旧NASからファイルを読み出すと、NFSにおけるファイル属性しか取り出せず、CIFSプロトコルにおけるファイル属性が移行できない。
【0006】
本発明の目的は、NASにおいて、ホスト、ユーザに対して透過的で、かつ完全なデータ移行が可能なシステムを提供することにある。
【0007】
【課題を解決するための手段】
本発明における計算機システムは、ホスト計算機、第1のファイルサーバ装置と、第2のファイルサーバ装置とで構成される。ホスト計算機は最初は第1のファイルサーバ装置に接続されてI/Oを行っているが、第1のファイルサーバ装置から第2のファイルサーバ装置にデータ移行を行う際に、一旦ホスト計算機と第1のファイルサーバ装置との接続は遮断される。引き続きホスト計算機は、第2のファイルサーバ装置に接続され、また第1のファイルサーバ装置と第2のファイルサーバ装置も接続される。
【0008】
第1のファイルサーバ装置から第2のファイルサーバ装置へのデータ移行は、まず第2のファイルサーバ装置が第1のファイルサーバ装置のディレクトリツリー構造を読み出し、第2のファイルサーバ装置はそれをもとにして第1のファイルサーバ装置のファイルを全て読み出していく。読み出されたファイルは順次第2のファイルサーバ装置へと書き込まれる。
【0009】
具体的な移行は、第2のファイルサーバ装置が第1のファイルサーバに対してファイルの読み出しとファイル属性の読み出しとを行い、その結果を第2のファイルサーバ装置へと書き込むことで実現する。第2のファイルサーバ装置がファイル属性を書き込む際、第1のファイルサーバ装置に書き込まれていた日付情報のまま第2のファイルサーバ装置へと格納する。
【0010】
また、第1のファイルサーバ装置、第2のファイルサーバ装置が、複数のファイルアクセスプロトコルをサポートしている場合、第2のファイルサーバ装置は、1ファイルに対し、ファイル属性の読み出し、書き込みを複数回ずつ行う。例えば、2種類のアクセスプロトコルがサポートされている場合には、ファイル属性の読み書きが2回行われる。
【0011】
また、データの移行中にホスト計算機からのファイルアクセスがあった場合には、第2のファイルサーバ装置が処理する。例えばリードアクセスの場合、当該ファイルが第2のファイルサーバ装置に移行されていない場合には、一旦第1のファイルサーバ装置から第2のファイルサーバ装置へと当該ファイルを移行し、引き続いてホスト計算機からのリードアクセスを受け付ける。移行が済んでいる場合には、第2のファイルサーバ装置はそのままホスト計算機からのリード要求を処理する。
【0012】
【発明の実施の形態】
図1は、本発明を適用した計算機システムの一実施形態における構成例を示すブロック図である。計算機システムは、ホスト1、ホスト2、旧ファイルサーバ装置3、新ファイルサーバ装置4、イーサネットスイッチ5とで構成される。
【0013】
ホスト1にはNFS(Network File System)クライアントプログラム11、アプリケーションプログラム12が存在し、アプリケーションプログラム12はNFSクライアントプログラム11を介して旧ファイルサーバ装置3ないし新ファイルサーバ装置4にアクセスする。またホスト2にはCIFS(Common Internet File System)クライアントプログラム21、アプリケーションプログラム22が存在し、アプリケーションプログラム22はCIFSクライアントプログラム21を介して旧ファイルサーバ装置3ないし新ファイルサーバ装置4にアクセスする。
【0014】
旧ファイルサーバ装置3はインタフェース31、32とディスク33、制御装置34とで構成される。また新ファイルサーバ装置4は、インタフェース41、42とディスク43、制御装置44で構成される。旧ファイルサーバ装置3はインタフェース31からイーサネットスイッチ5を介して、また新ファイルサーバ装置4はインタフェース41からイーサネットスイッチ5を介してホスト1、2と接続される。また、旧ファイルサーバ装置3と新ファイルサーバ装置4はインタフェース32、42がイーサネットケーブル6で接続される。
【0015】
制御装置34にはNFS処理手段341、CIFS処理手段342、及びファイルシステム部343が存在する。NFS処理手段341はホスト1からのファイルアクセス要求を処理し、CIFS処理手段342はホスト2からのファイルアクセス要求を処理する。ファイルシステム部343は、ディスク33内のファイルのリード・ライト処理を行う。NFS処理手段341又はCIFS処理手段342がファイルリード要求を受け付けると、ファイルシステム部343がそれを受けてディスク33からリード対象ファイルやファイル属性情報を取り出して、NFS処理手段341又はCIFS処理手段342へと渡す。ライト要求の場合には、NFS処理手段341又はCIFS処理手段342が受け付けたファイルがディスク33に書き込まれる。
【0016】
制御装置44にも同様にNFS処理手段441、CIFS処理手段442、ファイルシステム部443が存在し、これらはそれぞれNFS処理手段341、CIFS処理手段342、ファイルシステム部343とほぼ同様の動作を行う。また、制御装置44には移行手段444が存在し、旧ファイルサーバ装置3から新ファイルサーバ装置4へのデータ移行を実施する。
【0017】
図2以降で、本発明の実施形態における新ファイルサーバ装置4で取り扱うファイルシステムや用語について概説する。一般のファイルサーバでファイルを管理する場合、階層化ディレクトリと呼ばれる構造をとり、図2にあるように、ルートディレクトリを先頭にして、複数のファイル・ディレクトリがルートディレクトリ下に存在する。以下、図2のような、1つのルートディレクトリを先頭に階層化されたファイル・ディレクトリ構造に属するファイル・ディレクトリとその構造を形成する属性情報の集まりをファイルシステムと呼ぶ。
【0018】
旧ファイルサーバ装置3、新ファイルサーバ装置4では、このファイルシステムを少なくとも1つ管理できる。1つのファイルシステムは必ずしも1つのディスクに存在するわけではなく、複数のディスクにまたがることもある。あるいは逆に、1つのディスクに複数のファイルシステムが格納されることもある。ただし、本発明の実施形態の説明においては簡単のために、1つのファイルシステムが1つのディスクに格納されているものとして説明する。
【0019】
図3は新ファイルサーバ装置4のディスク43上に置かれるファイルシステムの構造を示している。ファイルシステムは、各ファイルサイズなどを示す属性情報であるメタデータ、ディレクトリにあるファイル・ディレクトリ名の集合であるディレクトリエントリ、そしてファイルの実体である実データで構成される。本発明の実施形態においては、メタデータを格納するメタデータ領域431、ディレクトリエントリを格納するディレクトリエントリ領域432、実データを格納する実データ領域433がディスク43上に存在する。また、それ以外にディスク43上にはログ領域434が存在し、これは移行手段444が利用する。本発明の実施形態においては、メタデータ領域431、ログ領域434などがディスク43上にあるとしているが、これは必ずしもディスク43上にある必要性はなく、新ファイルサーバ装置4のメモリ上にあってもよい。
【0020】
メタデータ領域431には、メタデータ70がファイル・ディレクトリの数だけ格納されている。メタデータ70はそれぞれが、メタデータ番号71、ファイルタイプ72、移行中フラグ73、サイズ74、最終アクセス時刻75、最終更新時刻76、NFS用アクセス権情報77、CIFSアクセス権情報78、及びポインタ79で構成される。特に、NFS用アクセス権情報77はNFSプロトコルでファイルをアクセスするためのファイル属性情報であり、CIFSアクセス権情報78はCIFSプロトコルでファイルをアクセスするためのファイル属性情報である。また、ディレクトリエントリ432領域には、ディレクトリエントリ80がディレクトリの数だけ存在する。ディレクトリエントリ80は、あるディレクトリ内のファイル名又はディレクトリ名のリストを少なくとも1つ管理している。
【0021】
メタデータ番号71はファイルシステム内で一意な番号で、メタデータ番号71で示されるファイル又はディレクトリが、ファイルシステム内で一意に定まる。このメタデータ番号71で示されるファイル又はディレクトリの下位に属するファイル又はディレクトリは、メタデータ番号71に対応する他のディレクトリエントリ80に格納され、これらの情報を辿ることによってファイル又はディレクトリの階層構造を把握できる。
ファイルタイプ72は当該メタデータ番号71で示される対象が、ファイルであるかディレクトリであるか、などを示すフラグが入る。移行中フラグ73は移行手段444が使用するもので、ファイル移行中の場合にはここがオンになり、ファイル移行が終了しているものはこのフラグをオフにする。移行手段444による、このフラグの具体的な使い方は後述する。サイズ74は当該ファイルのサイズを示す。最終アクセス時刻75は、ホスト1、2が当該ファイルをリードないしライトした時の最新時刻を示す。最終更新時刻76は当該ファイルの書き込み、更新をした最新時刻を表す。ポインタ79はファイル、ディレクトリの実体が置かれているディスク43上の物理アドレス情報が入る。当該メタデータ70で示される対象がファイルであれば、ポインタ79は実データ領域433のある領域を指し、ディレクトリの場合には、ディレクトリエントリ領域432上のあるブロックを示す。ポインタ79は、ファイルサイズが大きい場合、ファイルが複数の領域に断片化されて配置されている場合などには複数個存在する。
【0022】
NFS用アクセス権情報77は、ホスト1がNFS処理手段441を介してファイルを参照する場合に必要な情報であり、またCIFS用アクセス権情報78は、ホスト2がCIFS処理手段442を介してファイルを参照する場合に必要となる情報である。NFSとCIFSとでは、規定されているそれぞれ異なった情報を提供できるように管理している。例えば属性情報には、当該ファイルにアクセスするユーザを制限するためのパーミッション情報が含まれているが、NFS処理手段341、441が提供するパーミッション情報は、当該ファイルを所有するオーナーがファイルにアクセス(読み込み、書き込み、実行)できるか、当該ファイルの所属するグループからファイルがアクセスできるか、その他のユーザがファイルにアクセスできるか、を示す3種類のパーミッション情報を持つ。
【0023】
一方、CIFS処理手段342、442が提供する情報はACL(Access Control List)と呼ばれ、1つのファイルに対し、複数のユーザに対応したパーミッション情報を設定できる。例えばユーザAはあるファイルに対して、読み出しのみが可能だが、ユーザBはファイル書き込みも可能であるというような、ユーザごとのパーミッション情報が設定可能である。このようにNFS処理手段441、CIFS処理手段442とでは取り扱う属性情報が異なっており、新ファイルサーバ装置4のファイルシステムでは、これら2つの処理手段のどちらからアクセスされても良いように2種類の情報を保持する。
【0024】
ディレクトリエントリ80は1つのディレクトリ直下にあるファイル・ディレクトリの名前のリストを保持する。エントリ中にはメタデータ番号71とファイル/ディレクトリ名81の組が、当該ディレクトリ下のファイル、ディレクトリ全てについて存在している。
【0025】
図3で説明したファイルシステムを構成するメタデータ70などの情報は新ファイルサーバ装置4についてであるが、旧ファイルサーバ装置3もこれらと同様の情報をもつ。ただし、新ファイルサーバ装置4と旧ファイルサーバ装置3とで、メタデータ70などの情報の種類、データ構造は同一である必要はない。また、本発明の実施形態においては、旧ファイルサーバ装置3、新ファイルサーバ装置4はNFS,CIFSによってホスト1ないしホスト2からアクセスされることを前提としているが、それ以外にNovell NetWareのファイルアクセスプロトコルなどでアクセスされる装置である場合には、メタデータ内にそのファイルアクセスプロトコル独自の属性情報を別途有することになる。
【0026】
つづいて旧ファイルサーバ装置3から新ファイルサーバ装置4へのデータ移行処理について概説する。ホスト1、2、あるいは新ファイルサーバ装置4などが旧ファイルサーバ装置3の保持するファイルにアクセスする場合、NFS処理手段341又はCIFS処理手段342を介するしかない。また逆に新ファイルサーバ装置4に対してホスト1又はホスト2などがアクセスする場合にも、NFS処理手段341又はCIFS処理手段342を介するしかない。
【0027】
そのため、ホスト1又はホスト2が単純に旧ファイルサーバ装置3のファイルを読み出し、新ファイルサーバ装置4に書き込む場合、NFS処理手段341又はCIFS処理手段342を介してファイルを読み出し、またNFS処理手段441又はCIFS処理手段442を介してファイルを書き込むことになる。
【0028】
その場合、NFS処理手段341あるいはCIFS処理手段342を介してファイルを読み出すため、たとえばNFS処理手段341を介するとCIFSに固有のファイル属性・アクセス権情報などが欠落するという問題が生ずる。逆に、CIFS処理手段342を介するとNFSに固有のファイル属性などが欠落する。
【0029】
また、ホスト1又はホスト2がNFS処理手段441又はCIFS処理手段442を介して新ファイルサーバ装置4にファイルを書き込むと、本来旧ファイルサーバ装置3のファイル属性情報に残っている最終更新時刻76あるいは最終アクセス時刻75が、ホスト1、2が新ファイルサーバ装置4にファイルを書き込んだ時刻に変更されてしまうという問題も生ずる。本発明の実施形態における移行手段444はこれら問題を解決する。
【0030】
データ移行前には、ホスト1、2はイーサネットスイッチ5を介して、旧ファイルサーバ装置3とのみ接続されて、I/O処理を行っている。データ移行を行う際には、まずホスト1、2と旧ファイルサーバ装置3との接続を遮断する。具体的にはホスト1、2が旧ファイルサーバ装置3のファイルシステムを使用している場合、それをアンマウントする。その後旧ファイルサーバ装置3のインタフェース31とイーサネットスイッチ5の接続を外し、インタフェース32と新ファイルサーバ装置4のインタフェース42とを接続することで、旧ファイルサーバ装置3をネットワークから切り離し、新ファイルサーバ装置4からのみアクセスできるようにする。
【0031】
新たにネットワークに接続された新ファイルサーバ装置4は、ファイルサーバ装置のIPアドレス、共有ディレクトリ名(ファイルシステムをホスト1、2に見せる際のディレクトリ名)などの設定を旧ファイルサーバ装置3と同じにする。なお、本発明の実施形態のように、必ずしもデータ移行時に上記のように物理的にネットワークから切り離す必要はなく、ホスト1、2が旧ファイルサーバ装置3にアクセスしないように出来ればよい。たとえば、旧ファイルサーバ装置3のIPアドレスを変更するなどで対応可能である。
【0032】
その後、ホスト1、2は新ファイルサーバ装置4のファイルシステムをマウントし、I/O処理を再開する。移行手段444では、旧ファイルサーバ装置3のファイルを新ファイルサーバ装置4のディスク32に順次書き込むと同時に、ホスト1、2からのリード・ライト処理を受け付ける。データ移行中にホスト1、2が新ファイルサーバ装置4に対してI/O処理を行った場合にも、移行手段444はホスト1、2に対し、新ファイルサーバ装置4内にあたかも旧ファイルサーバ装置3にあるファイルが存在しているかのように見せ、ホスト1、2は自由にリード・ライトが出来る。
【0033】
次に、図4で、移行手段444の行う旧ファイルサーバ装置3から新ファイルサーバ装置4へのファイル移行処理の流れを概説する。移行手段444では、旧ファイルサーバ装置3のルートディレクトリから順にファイル・ディレクトリの属性情報を全て新ファイルサーバ装置4へとコピーし(ステップ1001)、続いて各ファイルについて、実データをコピーする(ステップ1002)。ファイルやその属性情報を移行している間にホスト1、2からファイル更新などが行われた場合に、ログ領域434にその操作が記録され、移行処理の最後にログ領域に記録された内容を反映して移行処理は終了する(ステップ1003)。
【0034】
ファイル・ディレクトリ属性情報だけを先に全部移行するのは、一般にホスト1、2からのファイル・ディレクトリアクセスの際、実データに対するアクセスよりもファイル・ディレクトリ属性情報へのアクセスが多いからである。ホスト1、2からファイル・ディレクトリアクセスがあった場合、まだ当該ファイルが旧ファイルサーバ装置3から移行できていない場合には、移行手段444は旧ファイルサーバ装置3に対して当該ファイルなどを読み出しに行く。そうするとホスト1、2からみて応答時間が悪化するため、本発明の実施形態においては、ファイル・ディレクトリ属性情報を最初にすべて移行する方法をとっている。ただし、性能面を考慮しなければ、ファイル・ディレクトリ属性情報と、実データとを同時に移行しても問題はない。
【0035】
図5以降では、図4のステップ1001に相当するファイル・ディレクトリ属性の移行処理、ステップ1002に相当する実データの移行処理を順次説明していく。まず、図5では移行手段444が行う、ファイル・ディレクトリの属性情報の移行処理の流れを説明する。移行手段444は図5の処理を旧ファイルサーバ装置3のルートディレクトリから順に実施する。
【0036】
まず、NFSコマンドにより、ディレクトリの属性情報を取得する(ステップ2001)。例えばNFSの場合には、GETATTRコマンドにより属性情報が取得できる。続いてCIFSコマンドによって、当該ディレクトリの属性情報を取得する(ステップ2002)。例えばSMBgetattrコマンドなどである。メタデータ70中のサイズ74、最終アクセス時刻75、最終更新時刻76などは、本発明の実施形態においてはステップ2001のNFS用アクセス権情報77を取得する時に同時に取得しているものとする。なお、ステップ2001、2002の順序は逆であっても構わない。
【0037】
ステップ2003で、取得した属性情報をディスクのメタデータ領域431に書き込む。この際、メタデータ431中の移行中フラグ73をオンにする。続いて、当該ディレクトリ下にファイルが存在するか検索する(ステップ2004)。これは例えば旧ファイルサーバ装置3に対してNFSコマンドREADDIRなどを実施することで確認が可能である。ファイルが存在する場合にはステップ2005以降へと進む。
【0038】
ステップ2005では、ステップ2004で検索した結果を受けて、当該ディレクトリ配下にあるファイル全てについて、NFS属性情報を取得する。続いてステップ2006ではCIFSコマンドによって、当該ディレクトリ配下にあるファイル全てについてCIFS属性情報を取得する。ステップ2007ではステップ2005、2006で取得した属性情報をメタデータ領域431へ書き込む。この際も、ステップ2003と同様、メタデータ431中の移行中フラグ73をオンにする。
【0039】
ステップ2008では、当該ディレクトリ下にさらにディレクトリ(サブディレクトリ)が存在するか検索する。存在する場合には、全サブディレクトリについて、図5のファイル・ディレクトリ属性情報の移行処理を実施する(ステップ2009)。すなわち、図5の処理を再帰的に実行することになるため、ファイル・ディレクトリ属性情報の移行処理をルートディレクトリから実施することで、1つのファイルシステムにおけるファイル・ディレクトリの属性情報が全て移行されることになる。最後に、ステップ2004、2008で得られた、当該ディレクトリ下にあるファイル・ディレクトリ名の情報をディレクトリエントリ80として作成・書き込みして処理は終了する(ステップ2010)。
【0040】
次に、図6でファイルの実データを移行する処理を説明する。この処理は図5のファイル属性情報の移行処理と同様、ルートディレクトリから移行処理を開始し、サブディレクトリについても再帰的に処理を実施することで、ファイルシステム全体について、ファイル実データの移行を実現している。まず最初に、移行対象のディレクトリ下にファイルがあるかを確認する(ステップ2101)。この処理は、移行手段444がファイルシステムのディレクトリエントリを検索することで実現できる。
【0041】
次に、ディレクトリ下のファイルについて、移行中フラグがオンであるか確認し(ステップ2102)、移行中フラグがオンのファイルについては、旧ファイルサーバ装置3からファイルの実データを読み出し(ステップ2103)、そのデータを新ファイルサーバ装置4へ書き込む(ステップ2104)。ステップ2105では、データの書き込みが終わったファイルについては、当該ファイルの移行中フラグ73をオフにする。ステップ2106で、移行対象のディレクトリ直下にある全てのファイルについて移行が完了しているか確認し、完了している場合にはステップ2107へ進み、移行されていないファイルがある場合にはステップ2102からステップ2105までの処理を繰り返す。
【0042】
ステップ2107では当該ディレクトリ下に、サブディレクトリがあるか確認し、存在する場合にはサブディレクトリについて、図6のファイル実データ移行処理を実施する(ステップ2108)。すなわち、図5のステップ2009と同様、ルートディレクトリから図6のファイル実データ移行処理を実施し、サブディレクトリに付いても再帰的に実データ移行処理を実施する。その後、当該ディレクトリの移行中フラグ73をオフにし(ステップ2109)、処理を終了する。ステップ2107でサブディレクトリがない場合には直接ステップ2109に移り、移行中フラグ73をオフにして処理を終了する。
【0043】
次に、図5、図6の移行処理中にホスト1又はホスト2からファイルアクセスがあった時、移行手段444が実施する処理の流れを説明する。まず、図7では移行処理中にホスト1又はホスト2から、ファイルあるいはファイル属性のリード要求があった場合の処理の流れを説明する。ホスト1、2からファイルアクセスがあると、通常は新ファイルサーバ装置4のNFS処理手段441又はCIFS処理手段442はファイルシステム部443を用いてファイルアクセス処理を行うが、移行処理中には、移行手段444を介してファイルアクセス処理を実施する。
【0044】
移行手段はNFS処理手段441又はCIFS処理手段442からファイルアクセス要求を受け付けると、まず新ファイルサーバ装置4のディスク43内のメタデータ領域431、ディレクトリエントリ領域432のサーチ(ステップ2501)と、ログ領域434のサーチ(ステップ2502)を実施し、アクセス対象のファイル属性情報が新ファイルサーバ装置4に移行されているか検索する。ログ領域434は、移行処理中に、ホスト1、2からファイル作成・更新が発生したときに、移行手段444がその内容を記録するために用いるが、これについては後述する。
【0045】
ステップ2501、2502の結果から、アクセス対象ファイルの属性情報が新ファイルサーバ装置4に移行されているか判定し(ステップ2503)、移行されていない場合にはステップ2510に進み、移行手段444は旧ファイルサーバ装置3からファイル属性とデータを読み出し(ステップ2510)、その結果をホスト1あるいはホスト2に返し(ステップ2511)、処理を終了する。
【0046】
属性情報が新ファイルサーバ装置4に移行されている場合にはステップ2504に進み、当該ファイルのメタデータ70の移行中フラグ73がオンになっているかチェックする。フラグがオンの場合には、実データが新ファイルサーバ装置4に移行されていないため、旧ファイルサーバ装置3からデータを読み出し(ステップ2505)、そのデータを新ファイルサーバ装置4へ書き込む(ステップ2506)。さらに、ログ領域434に当該ファイルの更新などの情報が存在する場合には、その情報を新ファイルサーバ装置4のディスク43に反映し(ステップ2507)、移行中フラグ73をオフにする(ステップ2508)ことで、当該ファイルの実データの移行を実施する。
【0047】
引き続いて、新ファイルサーバ装置4のディスク43から直接ファイル属性やデータを読み出し(ステップ2509)、ホスト1又はホスト2に結果を返す(ステップ2511)ことで、リード処理が終了する。また、ステップ2504でフラグがオフだった場合には、ファイル属性・実データともに、すでに新ファイルサーバ装置4に移行されていることを示しているので、ステップ2509を実行し、ホスト1又はホスト2に結果を返し(ステップ2511)、移行処理中のリード処理は完了する。
【0048】
続いて、移行処理中にホスト1ないしホスト2から、ファイルの更新や削除要求があった場合の移行手段444の行う処理の流れを図8で説明する。
【0049】
NFS処理手段441又はCIFS処理手段442からファイルアクセス要求を受け付けると、メタデータ領域431、ディレクトリエントリ領域432のサーチ(ステップ2601)と、ログ領域434のサーチ(ステップ2602)を実施し、アクセス対象のファイル属性情報が新ファイルサーバ装置4に移行されているか検索する。ステップ2601、2602の結果から、アクセス対象ファイルの属性情報が新ファイルサーバ装置4に移行されているか判定し(ステップ2603)、移行されていない場合にはステップ2610に進み、移行手段444は旧ファイルサーバ装置3からファイル属性とデータを読み出す。
【0050】
続いてステップ2611で、旧ファイルサーバ装置3から読み出したファイル属性、実データとNFS処理手段441ないしCIFS処理手段442から受け付けた更新の内容とをログ領域434に書き込む。ファイルとその更新内容を即座にメタデータ領域431などに反映せずにログ領域に書き込むのは、更新内容をすぐに反映できないことがあるからである。
【0051】
例えば、旧ファイルサーバ装置3に図2にあるようなディレクトリ構造の記録されていて、このファイルシステムを新ファイルサーバ装置4に移行中、dir_b1以下のファイル、ディレクトリの属性情報の移行は完了したが、dir_b2以下のファイル、ディレクトリの属性情報(図2の点線で示された部分。楕円部分がファイル、長方形がディレクトリを示す)が移行できていないという状態が存在しうる。この場合にたとえばfile4のファイル更新要求があったとすると、新ファイルサーバ装置4にはfile4の所属すべきディレクトリであるdir_b2の属性情報がメタデータ領域431、ディレクトリエントリ領域432に存在しないため、file4のメタデータを格納することができない。このような場合にも、ホスト1、2からの更新要求は受け付け、かつそれ以降その更新内容を新ファイルサーバ装置4に反映する必要があるため、一旦ログ領域434に更新内容を記録し、後でログ領域434の内容を新ファイルサーバ装置4のメタデータ領域431などに反映していく。
【0052】
ステップ2603でアクセス対象ファイルの属性情報が新ファイルサーバ装置4に移行されていた場合にはステップ2604に進み、当該ファイルのメタデータ70の移行中フラグ73がオンになっているかチェックする。フラグがオンの場合には、実データが新ファイルサーバ装置4に移行されていないため、旧ファイルサーバ装置3からデータを読み出し(ステップ2605)、そのデータを新ファイルサーバ装置4へ書き込む(ステップ2606)。
【0053】
さらに、ログ領域434に当該ファイルの更新などの情報が存在する場合には、その情報を新ファイルサーバ装置4のディスク43に反映し(ステップ2607)、その後に更新要求に従って、当該ファイルの実データあるいはメタデータの更新を行う(ステップ2608)。移行中フラグ73がオフの場合には、ファイル属性・実データともに、すでに新ファイルサーバ装置4に移行されていることを示しているので、ステップ2608に進んでNFS処理手段441ないしCIFS処理手段442から受け付けた更新の内容を新ファイルサーバ装置4のディスク43に書き込む。ステップ2608のデータ更新が終わった後、移行中フラグ73をオフにし(ステップ2609)、最後に更新処理の終わったことをホスト1ないしホスト2に通知し(ステップ2612)、処理は終了する。
【0054】
次に、移行手段444の用いるログ領域434のデータ構造と、ログ領域434に記録された内容をファイルシステムに反映する処理(図8のステップ2607)について説明する。移行手段444はファイル移行中にホスト1、2からのファイル・ディレクトリなどの更新要求があり、かつ当該ファイル・ディレクトリが新ファイルサーバ装置4に未反映の場合、その内容をログ領域434にログデータ90としてログ領域434の先頭から順に記録していく(これは図8のステップ2611に相当する部分である)。
【0055】
図9にログデータ90の内容を示す。移行済みフラグ91は当該ログデータ90が移行手段444によって、すでに新ファイルサーバ装置4のファイルシステムに反映されたことを示すフラグである。ファイル/ディレクトリ名92はファイル移行中にホスト1、2からの更新要求などがあった時の対象ファイル名ないしディレクトリ名を示す。オペレーション名93は、その時の処理の種類を表す。例えばファイルの書き込み、移動、削除などである。時刻94は当該要求のあった時刻を示す。オペレーションデータ95はその時の処理に付随するデータであり、オペレーションによってそのデータは異なる。例えば書き込み要求の場合には、ファイルの実データなどが該当する。
【0056】
図10以降で、ログデータ90の反映処理の流れを説明する。まず図10では、図7のステップ2507、あるいは図8のステップ2607における処理、すなわち、移行中にファイル・ディレクトリのリード・ライトなどの要求を受け付けた際、当該ファイル・ディレクトリに対する更新情報がログデータ90に記録されていた時の処理を説明する。
【0057】
まず、ログ領域の先頭から順に検索し、アクセス対象となっているファイル/ディレクトリ名に対応するログデータ90を検索する(ステップ3001)。続いてステップ3002で当該ログデータ90の移行済みフラグ91がオフかどうかを判定し、オフの場合にはステップ3003に進んで、ログデータ90に記録されているオペレーションに従って処理を実行する。例えばデータ更新であれば、ログデータ90にかかれているデータをファイルに対して上書きするなどである。
【0058】
次に、ステップ3004で移行済みフラグ91をオンにして、ステップ3005に移る。ステップ3002で移行済みフラグがオンであった場合にはステップ3003、3004は飛ばしてステップ3005に移る。ステップ3005ではログ領域434の全ログデータを検索したか判定し、全ログデータの検索が未だの場合にはステップ3001に戻る。全ログデータを検索し終わったら、処理は終了する。
【0059】
図11では、図4のステップ1003の処理、すなわち移行処理の最後で行うログデータ90の反映処理を説明する。ここではログ領域434に書かれている全ログデータ90の内容をファイル・ディレクトリに反映する。
【0060】
まず、ログ領域の先頭からログデータ90を検索する(ステップ3101)。続いて、ログデータ90の移行済みフラグ91がオフかどうか判定し(ステップ3102)、オフの場合には、ログデータ90に記録されたオペレーションを実行し(ステップ3103)、移行済みフラグをオンにする(ステップ3104)。移行済みフラグ91がすでにオンの場合には、これら処理は行わない。全ログデータ90について処理が完了している場合には(ステップ3105)、ステップ3107でログ領域434内のログデータ90を全て消去し、処理を終了する。全ログデータ90について処理が完了していない場合には、次のログデータを検索し、ステップ3102移行の処理を繰り返す。
【0061】
図11の場合、ログ領域434のデータを先頭から最後まで順に処理していくのは1回だけであるため、ステップ3104で移行済みフラグ91を必ずしもオンにする必要はないが、図11の処理中に何らかの障害が発生して処理が中断した場合には有効である。例えば障害が発生した場合には、移行処理ではこのログデータ90の反映処理を、ログ領域の434の先頭からログデータ90をチェックし直して、反映処理を再実行するが、移行済みフラグ91をオンにしていないと、再実行前にすでに反映済みのログデータ90についてもまた処理を行うことになってしまう。移行済みフラグ91をオンにすることでこれを避けることが出来る。
【0062】
本実施形態では、ホストコンピュータからのアクセスを受け付けながら、旧ファイルサーバ装置から新ファイルサーバ装置へファイルシステムの移行が実現できる例を示したが、図4から図11で説明した移行処理からも分かるように本実施形態ではファイルシステム全体ではなく、特定のディレクトリのデータ移行など、より細かい単位でのデータ移行も可能である。
【0063】
また、移行元のディスクと移行先のディスクのサイズは同一である必要はまったくなく、移行元のファイルシステムのディスク使用量よりも移行先のディスクが大きければ移行は可能である。さらに、本実施形態では2つのファイルサーバ装置間でのデータ移行方法を示したが、同一ファイルサーバ内で、あるファイルシステムのディスク使用量が多くなってきたときに、より大容量のディスクにファイルシステムを移し変える、あるいは特定のディレクトリを別のディスクに移動するなどの用途にも利用できる。
【0064】
【発明の効果】
本発明によれば、ファイルサーバ装置間のファイル移行の際に、ファイル属性情報を変化させることなく、ファイルを移行できる。その結果、ファイルアクセス時刻などの日付情報が変化しないように新ファイルサーバ装置へデータを格納できる。また、複数のファイルアクセスプロトコルをサポートするファイルサーバ装置のファイル属性も移行できる。
【図面の簡単な説明】
【図1】本発明の実施形態における計算機システムの構成例を示すブロック図である。
【図2】本発明の旧ファイルサーバ装置、新ファイルサーバ装置に格納されるファイル・ディレクトリ構造を示す。
【図3】本発明の新ファイルサーバ装置内ディスクに格納されるファイルシステムのメタデータ構造を示す。
【図4】本発明の実施形態における、移行手段のデータ移行処理を示すフローチャートである。
【図5】移行手段の行う、ファイル・ディレクトリ属性情報の移行処理を示すフローチャートである。
【図6】移行手段の行う、ファイル実データの移行処理を示すフローチャートである。
【図7】移行手段の処理中に、ホストからのファイルリード要求があったときの、移行手段の処理の流れを示すフローチャートである。
【図8】移行手段の処理中に、ホストからのファイルライト要求があったときの、移行手段の処理の流れを示すフローチャートである。
【図9】本発明の新ファイルサーバ装置で用いられるログデータのデータ構造を示す図である。
【図10】移行処理の行う、ログデータの反映処理の流れを示すフローチャートである。
【図11】移行処理の行う、ログデータの反映処理の流れを示すフローチャートである。
【符号の説明】
1…ホスト、2…ホスト、3…旧ファイルサーバ装置、
4…新ファイルサーバ装置、5…イーサネットスイッチ、
11…NFSクライアントプログラム、12…アプリケーションプログラム、
13…インタフェース、21…CIFSクライアントプログラム、
22…アプリケーションプログラム、23…インタフェース、
31…インタフェース、32…インタフェース、33…ディスク、
34…制御装置、41…インタフェース、42…インタフェース、
43…ディスク、44…制御装置
Claims (9)
- 複数の計算機と、複数のファイルアクセスプロトコルに対応可能な第1のファイルサーバと、第2のファイルサーバと、で構成される計算機システムのファイルサーバにおいて、
前記第1のファイルサーバは、前記複数のファイルアクセスプロトコル毎に前記第2のファイルサーバが有するファイルの実データに応じた属性情報と、前記実データを読み出す手段と、
前記読み出されたファイルの実データと、前記ファイルの実データに対応する前記複数のファイルアクセスプロトコル毎に読み出された複数の属性情報の内容と、を前記第1のファイルサーバに格納する手段と、
前記計算機から前記複数のファイルアクセスプロトコルのうち、何れかのファイルアクセスプロトコルによって、前記格納されたファイルあるいはファイル属性のリード要求があった場合、前記第1のファイルサーバが前記何れかのファイルアクセスプロトコルに応じた属性情報を用いて前記計算機に応答する手段とを有することを特徴とするファイルサーバ。 - 請求項1におけるファイルサーバであって、
前記ファイルの属性情報はファイルの作成日付、参照日付、及び更新日付を含むことを特徴とするファイルサーバ。 - 少なくとも1つの計算機と、それぞれが記憶装置を有する複数のファイルサーバとでなる計算機システムにおける記憶装置間のファイル移行方法において、
第1のファイルサーバの記憶装置に、複数のファイルアクセスプロトコル毎に、第2のファイルサーバの記憶装置から読み出した複数のファイルの属性情報を格納し、
前記何れかのファイルの属性情報に基づいて、前記第1のファイルサーバの記憶装置に、前記第2のファイルサーバの記憶装置から読み出したファイルの実データを格納し、
前記計算機から前記複数のファイルアクセスプロトコルのうち、何れかのファイルアクセスプロトコルによって、前記格納されたファイルあるいはファイル属性のリード要求があった場合、前記第1のファイルサーバが前記何れかのファイルアクセスプロトコルに応じた属性情報を用いて前記計算機に応答することを特徴とする記憶装置間のファイル移行方法。 - 前記ファイルの属性情報は、前記第2のファイルサーバの記憶装置に保持されていたファイルの作成日付、参照日付、及び更新日付の少なくとも1つを含むことを特徴とする請求項3記載の記憶装置間のファイル移行方法。
- 前記何れかのファイルの属性情報、及び前記ファイルの実データの少なくとも一方の移行中に前記計算機から移行中のファイルに対するアクセス要求があった場合、前記第1のファイルサーバのログ領域に前記アクセス要求の内容を記憶し、前記ファイルの移行が終了した後に、前記ログ領域の内容に基づいた処理を行なうことを特徴とする請求項3記載の記憶装置間のファイル移行方法。
- 前記第1のファイルサーバは、前記記憶装置のメタデータ領域に、それぞれのファイルアクセスプロトコルに応じた、ファイルの属性情報を格納することを特徴とする請求項3記載の記憶装置間のファイル移行方法。
- 前記計算機が第1のファイルアクセスプロトコルによって、前記第1のファイルサーバにアクセスした場合、前記第1のファイルサーバは、前記第1のファイルアクセスプロトコルに応じた属性情報を用いて前記計算機に応答し、
前記計算機が第2のファイルアクセスプロトコルによって、前記第1のファイルサーバにアクセスした場合、前記第1のファイルサーバは、前記第2のファイルアクセスプロトコルに応じた属性情報を用いて前記計算機に応答することを特徴とする請求項3乃至6記載の記憶装置間のファイル移行方法。 - 前記第1のファイルアクセスプロトコルは、CIFSであり、また、前記第2のファイルアクセスプロトコルは、NFSであることを特徴とする請求項7記載の記憶装置間のファイル移行方法。
- 前記計算機が前記第1のファイルアクセスプロトコルによって、前記第1のファイルサーバにリード要求した場合、
前記第1のファイルサーバは、前記リード要求の対象となるファイルの前記第1のファイルアクセスプロトコルの属性情報が、前記第2のファイルサーバから前記第1のファイルサーバに移行されているか否か確認し、
該属性情報が移行されている場合、前記第1のファイルサーバは、前記ファイルのデータが前記第2のファイルサーバから前記第1のファイルサーバに移行されているか否か確認し、
該データが前記第1のファイルサーバに移行されていない場合、前記第1のファイルサーバは、前記第2のファイルサーバからデータを読み出し、前記第1のファイルサーバの前記記憶装置に書き込み、さらに、前記ログ領域に前記ファイルの更新情報が存在する場合、前記更新情報を前記第1のファイルサーバの前記記憶装置に書き込み、
前記第1のファイルサーバは、前記リード要求の対象となる前記属性情報と、前記データを第1のファイルサーバの前記記憶装置から読み出し、前記計算機に送ることを特徴とする請求項7記載の記憶装置間のファイル移行方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001372148A JP4168626B2 (ja) | 2001-12-06 | 2001-12-06 | 記憶装置間のファイル移行方法 |
US10/254,619 US7386552B2 (en) | 2001-12-06 | 2002-09-25 | Methods of migrating data between storage apparatuses |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001372148A JP4168626B2 (ja) | 2001-12-06 | 2001-12-06 | 記憶装置間のファイル移行方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003173279A JP2003173279A (ja) | 2003-06-20 |
JP4168626B2 true JP4168626B2 (ja) | 2008-10-22 |
Family
ID=19181088
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001372148A Expired - Fee Related JP4168626B2 (ja) | 2001-12-06 | 2001-12-06 | 記憶装置間のファイル移行方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7386552B2 (ja) |
JP (1) | JP4168626B2 (ja) |
Families Citing this family (113)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7035880B1 (en) | 1999-07-14 | 2006-04-25 | Commvault Systems, Inc. | Modular backup and retrieval system used in conjunction with a storage area network |
US7395282B1 (en) | 1999-07-15 | 2008-07-01 | Commvault Systems, Inc. | Hierarchical backup and retrieval system |
US7155481B2 (en) | 2000-01-31 | 2006-12-26 | Commvault Systems, Inc. | Email attachment management in a computer system |
US7003641B2 (en) | 2000-01-31 | 2006-02-21 | Commvault Systems, Inc. | Logical view with granular access to exchange data managed by a modular data and storage management system |
US6658436B2 (en) | 2000-01-31 | 2003-12-02 | Commvault Systems, Inc. | Logical view and access to data managed by a modular data and storage management system |
US7836017B1 (en) | 2000-09-12 | 2010-11-16 | Hewlett-Packard Development Company, L.P. | File replication in a distributed segmented file system |
US8935307B1 (en) | 2000-09-12 | 2015-01-13 | Hewlett-Packard Development Company, L.P. | Independent data access in a segmented file system |
US6782389B1 (en) * | 2000-09-12 | 2004-08-24 | Ibrix, Inc. | Distributing files across multiple, permissibly heterogeneous, storage devices |
US7406484B1 (en) | 2000-09-12 | 2008-07-29 | Tbrix, Inc. | Storage allocation in a distributed segmented file system |
US20060288080A1 (en) * | 2000-09-12 | 2006-12-21 | Ibrix, Inc. | Balanced computer architecture |
US20040236798A1 (en) * | 2001-09-11 | 2004-11-25 | Sudhir Srinivasan | Migration of control in a distributed segmented file system |
US6968463B2 (en) * | 2001-01-17 | 2005-11-22 | Hewlett-Packard Development Company, L.P. | System for controlling access to resources in a storage area network |
US6779063B2 (en) | 2001-04-09 | 2004-08-17 | Hitachi, Ltd. | Direct access storage system having plural interfaces which permit receipt of block and file I/O requests |
US6915397B2 (en) * | 2001-06-01 | 2005-07-05 | Hewlett-Packard Development Company, L.P. | System and method for generating point in time storage copy |
US6931487B2 (en) * | 2001-10-22 | 2005-08-16 | Hewlett-Packard Development Company L.P. | High performance multi-controller processing |
US6947981B2 (en) * | 2002-03-26 | 2005-09-20 | Hewlett-Packard Development Company, L.P. | Flexible data replication mechanism |
US7032131B2 (en) * | 2002-03-26 | 2006-04-18 | Hewlett-Packard Development Company, L.P. | System and method for ensuring merge completion in a storage area network |
US7007042B2 (en) * | 2002-03-28 | 2006-02-28 | Hewlett-Packard Development Company, L.P. | System and method for automatic site failover in a storage area network |
JP2004280283A (ja) * | 2003-03-13 | 2004-10-07 | Hitachi Ltd | 分散ファイルシステム、分散ファイルシステムサーバ及び分散ファイルシステムへのアクセス方法 |
US7454569B2 (en) | 2003-06-25 | 2008-11-18 | Commvault Systems, Inc. | Hierarchical system and method for performing storage operations in a computer network |
JP2005078612A (ja) * | 2003-09-04 | 2005-03-24 | Hitachi Ltd | ファイル共有システム及びファイル共有装置間のファイル移行方法 |
US7546324B2 (en) * | 2003-11-13 | 2009-06-09 | Commvault Systems, Inc. | Systems and methods for performing storage operations using network attached storage |
US20050125456A1 (en) * | 2003-12-09 | 2005-06-09 | Junichi Hara | File migration method based on access history |
JP4568502B2 (ja) * | 2004-01-09 | 2010-10-27 | 株式会社日立製作所 | 情報処理システムおよび管理装置 |
JP4500057B2 (ja) | 2004-01-13 | 2010-07-14 | 株式会社日立製作所 | データ移行方法 |
JP2005228170A (ja) * | 2004-02-16 | 2005-08-25 | Hitachi Ltd | 記憶装置システム |
JP2005310008A (ja) * | 2004-04-23 | 2005-11-04 | Fuji Xerox Co Ltd | 木構造データ同期装置および方法 |
JP2005321913A (ja) * | 2004-05-07 | 2005-11-17 | Hitachi Ltd | ファイル共有装置を有する計算機システム、および、ファイル共有装置の移行方法 |
US7124143B2 (en) | 2004-05-10 | 2006-10-17 | Hitachi, Ltd. | Data migration in storage system |
US7209967B2 (en) * | 2004-06-01 | 2007-04-24 | Hitachi, Ltd. | Dynamic load balancing of a storage system |
US7886299B2 (en) * | 2004-06-01 | 2011-02-08 | Hitachi, Ltd. | Method of dynamically balancing workload of a storage system |
US7613889B2 (en) * | 2004-06-10 | 2009-11-03 | International Business Machines Corporation | System, method, and program for determining if write data overlaps source data within a data migration scheme |
US7074627B2 (en) * | 2004-06-29 | 2006-07-11 | Freescale Semiconductor, Inc. | Lead solder indicator and method |
JP4682549B2 (ja) * | 2004-07-09 | 2011-05-11 | 富士ゼロックス株式会社 | 分類案内装置 |
JP4421999B2 (ja) * | 2004-08-03 | 2010-02-24 | 株式会社日立製作所 | Worm機能付きデータマイグレーションを実行するストレージ装置、ストレージシステム及びデータ移動方法 |
JP4438582B2 (ja) * | 2004-09-22 | 2010-03-24 | 株式会社日立製作所 | データ移行方法 |
US8315973B1 (en) * | 2004-09-28 | 2012-11-20 | Symantec Operating Corporation | Method and apparatus for data moving in multi-device file systems |
JP4437432B2 (ja) * | 2004-09-30 | 2010-03-24 | 株式会社日立製作所 | 計算機システム |
JP4514578B2 (ja) * | 2004-10-27 | 2010-07-28 | 株式会社日立製作所 | データの移行先を選択する方法及び装置 |
US8127088B2 (en) * | 2005-01-27 | 2012-02-28 | Hewlett-Packard Development Company, L.P. | Intelligent cache management |
US7301718B2 (en) * | 2005-01-31 | 2007-11-27 | Hewlett-Packard Development Company, L.P. | Recording errors in tape drives |
US20060230243A1 (en) * | 2005-04-06 | 2006-10-12 | Robert Cochran | Cascaded snapshots |
US7970803B2 (en) | 2005-07-01 | 2011-06-28 | Qnx Software Systems Gmbh & Co. Kg | Optimized startup verification of file system integrity |
US7873683B2 (en) | 2005-07-01 | 2011-01-18 | Qnx Software Systems Gmbh & Co. Kg | File system having transaction record coalescing |
US8959125B2 (en) | 2005-07-01 | 2015-02-17 | 226008 Ontario Inc. | File system having inverted hierarchical structure |
US7779218B2 (en) * | 2005-07-22 | 2010-08-17 | Hewlett-Packard Development Company, L.P. | Data synchronization management |
US7206156B2 (en) * | 2005-07-27 | 2007-04-17 | Hewlett-Packard Development Company, L.P. | Tape drive error management |
JP4982990B2 (ja) * | 2005-09-29 | 2012-07-25 | セイコーエプソン株式会社 | コピー装置及び方法 |
US7325078B2 (en) * | 2005-10-06 | 2008-01-29 | Hewlett-Packard Development Company, L.P. | Secure data scrubbing |
US7721053B2 (en) * | 2005-10-24 | 2010-05-18 | Hewlett-Packard Development Company, L.P. | Intelligent logical unit provisioning |
JP4764701B2 (ja) * | 2005-11-01 | 2011-09-07 | 株式会社日立製作所 | ログ情報を管理する計算機システム及びログ情報の管理方法 |
US7765230B2 (en) * | 2005-12-01 | 2010-07-27 | The Boeing Company | Method and system for managing data |
US7769719B2 (en) * | 2006-01-05 | 2010-08-03 | International Business Machines Corporation | File system dump/restore by node numbering |
US20070214384A1 (en) * | 2006-03-07 | 2007-09-13 | Manabu Kitamura | Method for backing up data in a clustered file system |
JP4772569B2 (ja) * | 2006-04-07 | 2011-09-14 | 株式会社日立製作所 | 共通名前空間においてディレクトリ単位のマイグレーションを実行するシステム及び方法 |
US7467268B2 (en) | 2006-04-14 | 2008-12-16 | Hewlett-Packard Development Company, L.P. | Concurrent data restore and background copy operations in storage networks |
JP5082310B2 (ja) * | 2006-07-10 | 2012-11-28 | 日本電気株式会社 | データ移行装置及びプログラム |
US7908276B2 (en) | 2006-08-25 | 2011-03-15 | Qnx Software Systems Gmbh & Co. Kg | Filesystem having a filename cache |
US20080059510A1 (en) * | 2006-08-31 | 2008-03-06 | Daniel Cardamore | Multimedia system framework having layer consolidating access to multiple media devices |
US8566503B2 (en) | 2006-08-25 | 2013-10-22 | Qnx Software Systems Limited | Multimedia filesystem having unified representation of content on diverse multimedia devices |
JP2008134712A (ja) | 2006-11-27 | 2008-06-12 | Hitachi Ltd | ファイル共有システム、ファイル共有装置及びファイル共有用ボリュームの移行方法 |
US20080147747A1 (en) * | 2006-12-14 | 2008-06-19 | Dan Cardamore | Media system having synchronization with preemptive prioritization of synchronization order |
US7934027B2 (en) * | 2007-01-19 | 2011-04-26 | Hewlett-Packard Development Company, L.P. | Critical resource management |
JP2008181461A (ja) * | 2007-01-26 | 2008-08-07 | Hitachi Ltd | Nas装置間でのデータ移行を制御する装置及び方法 |
JP5142537B2 (ja) * | 2007-01-26 | 2013-02-13 | キヤノン株式会社 | データ処理装置、データ処理方法、プログラムおよび記憶媒体 |
US20080181107A1 (en) * | 2007-01-30 | 2008-07-31 | Moorthi Jay R | Methods and Apparatus to Map and Transfer Data and Properties Between Content-Addressed Objects and Data Files |
US8024514B2 (en) * | 2007-03-01 | 2011-09-20 | Hewlett-Packard Development Company, L.P. | Access control management |
US7861031B2 (en) * | 2007-03-01 | 2010-12-28 | Hewlett-Packard Development Company, L.P. | Access control management |
US7694079B2 (en) | 2007-04-04 | 2010-04-06 | Hewlett-Packard Development Company, L.P. | Tagged sequential read operations |
JP2008276488A (ja) * | 2007-04-27 | 2008-11-13 | Hitachi Ltd | ストレージシステムおよびストレージシステムの情報移行方法 |
US9219705B2 (en) * | 2007-06-25 | 2015-12-22 | Microsoft Technology Licensing, Llc | Scaling network services using DNS |
US8990527B1 (en) * | 2007-06-29 | 2015-03-24 | Emc Corporation | Data migration with source device reuse |
US8244781B2 (en) * | 2007-09-28 | 2012-08-14 | Emc Corporation | Network accessed storage files system query/set proxy service for a storage virtualization system |
TW200925858A (en) * | 2007-12-06 | 2009-06-16 | Ind Tech Res Inst | Virtual file managing system and method for building system configuration and accessing file thereof |
JP5238235B2 (ja) * | 2007-12-07 | 2013-07-17 | 株式会社日立製作所 | 管理装置及び管理方法 |
JP5040629B2 (ja) * | 2007-12-10 | 2012-10-03 | 富士通株式会社 | データ移行プログラム、データ移行方法およびデータ移行装置 |
JP5137562B2 (ja) * | 2007-12-26 | 2013-02-06 | 株式会社リコー | 情報処理装置、情報処理方法、及び情報処理プログラム |
JP2009169773A (ja) * | 2008-01-18 | 2009-07-30 | Yokogawa Electric Corp | 画像データ管理システム |
US8688628B2 (en) * | 2008-02-29 | 2014-04-01 | Red Hat, Inc. | Nested queued transaction manager |
KR101448637B1 (ko) * | 2008-03-05 | 2014-10-13 | 엘지전자 주식회사 | 방송 신호 처리 시스템 및 방송 신호 처리 시스템의 저장장치 검색 방법 |
JP4549408B2 (ja) * | 2008-06-24 | 2010-09-22 | 富士通株式会社 | ファイルサーバのクラスタノード制御プログラム,クラスタノード制御方法及びクラスタノード制御装置 |
US8914540B1 (en) * | 2008-07-01 | 2014-12-16 | Cisco Technology, Inc. | Multi-fabric SAN based data migration |
JP5430164B2 (ja) * | 2009-01-30 | 2014-02-26 | キヤノン株式会社 | データ管理方法及び装置 |
US8209307B2 (en) * | 2009-03-31 | 2012-06-26 | Commvault Systems, Inc. | Systems and methods for data migration in a clustered file system |
JP5331555B2 (ja) * | 2009-04-23 | 2013-10-30 | 株式会社日立製作所 | データ移行システムおよびデータ移行方法 |
JP5024329B2 (ja) * | 2009-05-08 | 2012-09-12 | 富士通株式会社 | 中継プログラム、中継装置、中継方法、システム |
US8612439B2 (en) | 2009-06-30 | 2013-12-17 | Commvault Systems, Inc. | Performing data storage operations in a cloud storage environment, including searching, encryption and indexing |
US8498890B2 (en) * | 2009-09-18 | 2013-07-30 | International Business Machines Corporation | Planning and orchestrating workflow instance migration |
CN102947681B (zh) | 2010-04-20 | 2016-05-18 | 惠普发展公司,有限责任合伙企业 | 用于表面增强发光的自动布置、发光增强器件 |
US9274058B2 (en) | 2010-10-20 | 2016-03-01 | Hewlett-Packard Development Company, L.P. | Metallic-nanofinger device for chemical sensing |
US9279767B2 (en) | 2010-10-20 | 2016-03-08 | Hewlett-Packard Development Company, L.P. | Chemical-analysis device integrated with metallic-nanofinger device for chemical sensing |
US9021198B1 (en) | 2011-01-20 | 2015-04-28 | Commvault Systems, Inc. | System and method for sharing SAN storage |
US8812448B1 (en) * | 2011-11-09 | 2014-08-19 | Access Sciences Corporation | Computer implemented method for accelerating electronic file migration from multiple sources to multiple destinations |
DE102012200042A1 (de) * | 2012-01-03 | 2013-07-04 | Airbus Operations Gmbh | Serversystem, luft- oder raumfahrzeug und verfahren |
JP5632408B2 (ja) * | 2012-02-27 | 2014-11-26 | 日本電信電話株式会社 | データ移行装置およびその動作方法 |
US9552288B2 (en) | 2013-02-08 | 2017-01-24 | Seagate Technology Llc | Multi-tiered memory with different metadata levels |
US10073987B2 (en) * | 2013-04-02 | 2018-09-11 | Western Digital Technologies, Inc. | Methods and systems for privileged execution support for file system commands on a storage device |
WO2015000503A1 (en) * | 2013-07-02 | 2015-01-08 | Hitachi Data Systems Engineering UK Limited | Method and apparatus for migration of a virtualized file system, data storage system for migration of a virtualized file system, and file server for use in a data storage system |
CN105593804B (zh) * | 2013-07-02 | 2019-02-22 | 日立数据系统工程英国有限公司 | 用于文件系统虚拟化的方法和设备、用于文件系统虚拟化的数据存储系统、以及用于数据存储系统的文件服务器 |
CN103365982B (zh) * | 2013-07-03 | 2016-07-20 | 杭州华三通信技术有限公司 | 访问集群文件系统的方法及主机 |
US9298734B2 (en) | 2014-06-06 | 2016-03-29 | Hitachi, Ltd. | Storage system, computer system and data migration method |
CN104408047A (zh) * | 2014-10-28 | 2015-03-11 | 浪潮电子信息产业股份有限公司 | 一种基于nfs文件服务器的文本文件多机并行上传到hdfs方法 |
JP6037469B2 (ja) | 2014-11-19 | 2016-12-07 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 情報管理システム、情報管理方法およびプログラム |
US10127110B2 (en) | 2015-07-31 | 2018-11-13 | International Business Machines Corporation | Reallocating storage in a dispersed storage network |
US10289629B1 (en) * | 2016-06-22 | 2019-05-14 | Amazon Technologies, Inc. | Techniques for interruption-free partitioning |
CN108205559B (zh) * | 2016-12-19 | 2022-01-07 | 腾讯科技(深圳)有限公司 | 一种数据管理方法及其设备 |
US10705992B2 (en) | 2017-12-11 | 2020-07-07 | International Business Machines Corporation | Non-disruptive encoding of source data in a source data set migrated to a target data set |
CN108595108A (zh) * | 2017-12-29 | 2018-09-28 | 北京奇虎科技有限公司 | 一种数据的迁移方法和装置 |
CN108829345B (zh) * | 2018-05-25 | 2020-02-21 | 华为技术有限公司 | 日志文件的数据处理方法和终端设备 |
US11144517B2 (en) * | 2019-06-28 | 2021-10-12 | Paypal, Inc. | Data store transition using a data migration server |
JP7347007B2 (ja) | 2019-08-28 | 2023-09-20 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システム、及び情報処理プログラム |
US11308986B2 (en) * | 2020-08-11 | 2022-04-19 | International Business Machines Corporation | Event based reconcile operation for hierarchical storage management |
JP2020198128A (ja) * | 2020-08-31 | 2020-12-10 | キオクシア株式会社 | メモリシステム |
Family Cites Families (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5276867A (en) * | 1989-12-19 | 1994-01-04 | Epoch Systems, Inc. | Digital data storage system with improved data migration |
US5544347A (en) * | 1990-09-24 | 1996-08-06 | Emc Corporation | Data storage system controlled remote data mirroring with respectively maintained data indices |
US5367698A (en) * | 1991-10-31 | 1994-11-22 | Epoch Systems, Inc. | Network file migration system |
US5475834A (en) * | 1992-10-26 | 1995-12-12 | International Business Machines Corporation | Integration of migration level two and backup tape processing using multiple inventory entries |
US5991753A (en) * | 1993-06-16 | 1999-11-23 | Lachman Technology, Inc. | Method and system for computer file management, including file migration, special handling, and associating extended attributes with files |
US5495607A (en) * | 1993-11-15 | 1996-02-27 | Conner Peripherals, Inc. | Network management system having virtual catalog overview of files distributively stored across network domain |
US5873103A (en) * | 1994-02-25 | 1999-02-16 | Kodak Limited | Data storage management for network interconnected processors using transferrable placeholders |
US5537585A (en) * | 1994-02-25 | 1996-07-16 | Avail Systems Corporation | Data storage management for network interconnected processors |
US6128714A (en) * | 1994-03-17 | 2000-10-03 | Hitachi, Ltd. | Method of processing a data move instruction for moving data between main storage and extended storage and data move instruction processing apparatus |
KR100380878B1 (ko) * | 1994-04-25 | 2003-08-02 | 소니 가부시끼 가이샤 | 데이터저장처리장치 |
US5564037A (en) * | 1995-03-29 | 1996-10-08 | Cheyenne Software International Sales Corp. | Real time data migration system and method employing sparse files |
EP2270687A2 (en) * | 1995-04-11 | 2011-01-05 | Kinetech, Inc. | Identifying data in a data processing system |
US5678044A (en) * | 1995-06-02 | 1997-10-14 | Electronic Data Systems Corporation | System and method for improved rehosting of software systems |
US5680640A (en) * | 1995-09-01 | 1997-10-21 | Emc Corporation | System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state |
JPH0997201A (ja) | 1995-09-30 | 1997-04-08 | Nec Corp | データベースのバックアップ作成システム |
US5819020A (en) * | 1995-10-16 | 1998-10-06 | Network Specialists, Inc. | Real time backup system |
JP3193880B2 (ja) * | 1996-12-11 | 2001-07-30 | 株式会社日立製作所 | データ移行方法 |
US5953729A (en) * | 1997-12-23 | 1999-09-14 | Microsoft Corporation | Using sparse file technology to stage data that will then be stored in remote storage |
JP4292331B2 (ja) * | 1998-04-27 | 2009-07-08 | ソニー株式会社 | データ記録再生装置及びその方法 |
EP0981091B1 (en) * | 1998-08-20 | 2008-03-19 | Hitachi, Ltd. | Data copying in storage systems |
US6269382B1 (en) * | 1998-08-31 | 2001-07-31 | Microsoft Corporation | Systems and methods for migration and recall of data from local and remote storage |
JP2000187608A (ja) | 1998-12-24 | 2000-07-04 | Hitachi Ltd | 記憶装置サブシステム |
US6654830B1 (en) * | 1999-03-25 | 2003-11-25 | Dell Products L.P. | Method and system for managing data migration for a storage system |
US6640278B1 (en) * | 1999-03-25 | 2003-10-28 | Dell Products L.P. | Method for configuration and management of storage resources in a storage network |
JP3980785B2 (ja) | 1999-03-30 | 2007-09-26 | 株式会社リコー | 原本性保証電子保存装置、原本性保証電子保存方法およびその方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体 |
US6304942B1 (en) * | 1999-08-09 | 2001-10-16 | Lsi Logic Corporation | Providing an upgrade path for an existing data storage system |
US6490666B1 (en) * | 1999-08-20 | 2002-12-03 | Microsoft Corporation | Buffering data in a hierarchical data storage environment |
US6961778B2 (en) * | 1999-11-30 | 2005-11-01 | Accenture Llp | Management interface between a core telecommunication system and a local service provider |
US6658436B2 (en) * | 2000-01-31 | 2003-12-02 | Commvault Systems, Inc. | Logical view and access to data managed by a modular data and storage management system |
JP4175764B2 (ja) * | 2000-05-18 | 2008-11-05 | 株式会社日立製作所 | 計算機システム |
AU6778601A (en) * | 2000-06-26 | 2002-01-08 | International Business Machines Corporation | Data management application programming interface for a parallel file system |
US6938039B1 (en) * | 2000-06-30 | 2005-08-30 | Emc Corporation | Concurrent file across at a target file server during migration of file systems between file servers using a network file system access protocol |
US6804719B1 (en) * | 2000-08-24 | 2004-10-12 | Microsoft Corporation | Method and system for relocating files that are partially stored in remote storage |
AU2002312508B2 (en) * | 2000-09-11 | 2008-01-17 | Agami Systems, Inc. | Storage system having partitioned migratable metadata |
US20040236798A1 (en) * | 2001-09-11 | 2004-11-25 | Sudhir Srinivasan | Migration of control in a distributed segmented file system |
US6782389B1 (en) * | 2000-09-12 | 2004-08-24 | Ibrix, Inc. | Distributing files across multiple, permissibly heterogeneous, storage devices |
US6823336B1 (en) * | 2000-09-26 | 2004-11-23 | Emc Corporation | Data storage system and method for uninterrupted read-only access to a consistent dataset by one host processor concurrent with read-write access by another host processor |
US6850959B1 (en) * | 2000-10-26 | 2005-02-01 | Microsoft Corporation | Method and system for transparently extending non-volatile storage |
US6976060B2 (en) * | 2000-12-05 | 2005-12-13 | Agami Sytems, Inc. | Symmetric shared file storage system |
US20040133606A1 (en) * | 2003-01-02 | 2004-07-08 | Z-Force Communications, Inc. | Directory aggregation for files distributed over a plurality of servers in a switched file system |
AU2002249939A1 (en) * | 2001-01-11 | 2002-07-24 | Z-Force Communications, Inc. | File switch and switched file system |
US7363657B2 (en) * | 2001-03-12 | 2008-04-22 | Emc Corporation | Using a virus checker in one file server to check for viruses in another file server |
US6728736B2 (en) * | 2001-03-14 | 2004-04-27 | Storage Technology Corporation | System and method for synchronizing a data copy using an accumulation remote copy trio |
US6944785B2 (en) * | 2001-07-23 | 2005-09-13 | Network Appliance, Inc. | High-availability cluster virtual server system |
CA2461025A1 (en) * | 2001-09-26 | 2003-04-03 | Mark Saake | Efficient mangement of large files |
US7065541B2 (en) * | 2001-10-10 | 2006-06-20 | International Business Machines Corporation | Database migration |
US8335915B2 (en) * | 2002-05-14 | 2012-12-18 | Netapp, Inc. | Encryption based security system for network storage |
US7039662B2 (en) * | 2004-02-24 | 2006-05-02 | Hitachi, Ltd. | Method and apparatus of media management on disk-subsystem |
-
2001
- 2001-12-06 JP JP2001372148A patent/JP4168626B2/ja not_active Expired - Fee Related
-
2002
- 2002-09-25 US US10/254,619 patent/US7386552B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003173279A (ja) | 2003-06-20 |
US20030110237A1 (en) | 2003-06-12 |
US7386552B2 (en) | 2008-06-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4168626B2 (ja) | 記憶装置間のファイル移行方法 | |
JP4568115B2 (ja) | ハードウェアベースのファイルシステムのための装置および方法 | |
US8103639B1 (en) | File system consistency checking in a distributed segmented file system | |
US7836018B2 (en) | Simultaneously accessing file objects through web services and file services | |
JP4787315B2 (ja) | データコンテナの中身をクラスタの複数のボリュームにわたってストライピングするためのストレージシステム・アーキテクチャ | |
US7860907B2 (en) | Data processing | |
US7519628B1 (en) | Technique for accelerating log replay with partial cache flush | |
CN103765393B (zh) | 存储系统 | |
JP4799936B2 (ja) | 条件別スナップショット取得方法及びシステム | |
US7886119B1 (en) | Time and space efficient technique for creating virtual volume copies | |
US7165096B2 (en) | Storage area network file system | |
JP4806572B2 (ja) | データミラーリングによって参照負荷を分散するストレージシステムにおけるアクセスの制御 | |
KR100380221B1 (ko) | Raid 데이터 저장 시스템에 있어서 즉시 백업을제공하는 방법 및 시스템 | |
US9122397B2 (en) | Exposing storage resources with differing capabilities | |
US7707165B1 (en) | System and method for managing data versions in a file system | |
US8095678B2 (en) | Data processing | |
CN103597440A (zh) | 用于创建克隆文件的方法以及采用该方法的文件系统 | |
JP4278452B2 (ja) | 計算機システム | |
US8090925B2 (en) | Storing data streams in memory based on upper and lower stream size thresholds | |
JP4398464B2 (ja) | 1つのターゲット・ボリュームと1つのソース・ボリュームとの間のポイント・イン・タイム・コピー関連性を管理するためのシステム、方法、及びプログラム | |
US9165003B1 (en) | Technique for permitting multiple virtual file systems having the same identifier to be served by a single storage system | |
US20080016106A1 (en) | Data processing | |
JP2004252957A (ja) | 分散ファイルシステムのファイルレプリケーション方法及び装置 | |
US20080007757A1 (en) | Data processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20060419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070828 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071029 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080422 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080623 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080715 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080728 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110815 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110815 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120815 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120815 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130815 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |