JP2015156088A - データ移行システム - Google Patents

データ移行システム Download PDF

Info

Publication number
JP2015156088A
JP2015156088A JP2014030505A JP2014030505A JP2015156088A JP 2015156088 A JP2015156088 A JP 2015156088A JP 2014030505 A JP2014030505 A JP 2014030505A JP 2014030505 A JP2014030505 A JP 2014030505A JP 2015156088 A JP2015156088 A JP 2015156088A
Authority
JP
Japan
Prior art keywords
data
server
metadata
file
file server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014030505A
Other languages
English (en)
Inventor
孝太郎 三原
Kotaro Mihara
孝太郎 三原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2014030505A priority Critical patent/JP2015156088A/ja
Publication of JP2015156088A publication Critical patent/JP2015156088A/ja
Pending legal-status Critical Current

Links

Images

Abstract

【課題】データ移行時のファイルサーバの負荷を軽減する。【解決手段】ファイルサーバ１と同じＬＡＮ上にコピーサーバ２を配置し、コピーサーバ２にディスク装置３Ｂを接続し、コピーサーバ２がファイルサーバ１からディスク装置３Ａの保持するファイルデータのメタデータを取得してディスク装置３Ｂのメタデータと比較して差分を抽出し、ファイルサーバ１から差分のあるファイルデータを取得してディスク装置３Ｂに格納する。これにより、ファイルサーバ１はディスク装置３Ａ，３Ｂ間のデータの差分を抽出する処理を行う必要がなくなるので、ファイルサーバの負荷を軽減することが可能となる。【選択図】図１

Description

本発明は、データを移行する技術に関する。
ディスク装置を更改する際には、旧ディスク装置から新ディスク装置にデータを移行する必要がある。旧ディスク装置を接続してサービスを提供しているファイルサーバに新ディスク装置を接続し、サービス提供中に旧ディスク装置から新ディスク装置へデータを移行することで、ディスク装置の更改のためのサービス停止期間を短くすることができる。
"第３回 ストレージ統合を阻むデータ移行の壁（２／３）"、［online］、日経ＢＰ社、［平成２６年１月２４日検索］、インターネット〈 URL：http://itpro.nikkeibp.co.jp/article/COLUMN/20101118/354298/?ST=bigdata&P=2〉
しかしながら、サービス提供中のファイルサーバに旧ディスク装置と新ディスク装置を接続し、ファイルサーバ自身のリソース（ＣＰＵ／メモリ）を使ってデータを移行する方法では、ファイルサーバに対して負荷がかかり提供中のサービスに影響を与えるという問題があった。
本発明は、上記に鑑みてなされたものであり、データ移行時のファイルサーバの負荷を軽減することを目的とする。
本発明に係るデータ移行システムは、第１蓄積装置を接続して当該第１蓄積装置が格納するデータに対するアクセスサービスを提供するファイルサーバと第２蓄積装置を接続したコピーサーバとを備えたデータ移行システムであって、前記ファイルサーバは、前記第１蓄積装置に格納されたデータに関する情報を有する第１メタデータを前記第１蓄積装置から読み出して前記コピーサーバに送信するメタデータ送信手段と、前記コピーサーバから要求されたデータを前記第１蓄積装置から読み出して前記コピーサーバに送信するデータ送信手段と、を有し、前記コピーサーバは、前記ファイルサーバから前記第１メタデータを受信するとともに、前記第２蓄積装置に格納されたデータに関する情報を有する第２メタデータを前記第２蓄積装置から読み出すメタデータ取得手段と、前記第１メタデータと前記第２メタデータを比較して差分を抽出する差分抽出手段と、前記差分に基づいて前記ファイルサーバにデータを要求し、受信したデータと前記第１メタデータを前記第２蓄積装置に格納するデータ格納手段と、を有することを特徴とする。
本発明によれば、データ移行時のファイルサーバの負荷を軽減することができる。
本実施の形態におけるデータ移行システムの全体構成図である。 本実施の形態におけるファイルサーバとコピーサーバの構成を示す機能ブロック図である。 本実施の形態におけるデータ移行システムがデータを移行する処理の流れを示すシーケンス図である。 比較例のデータ移行システムの構成を示す機能ブロック図である。
以下、本発明の実施の形態について図面を用いて説明する。
図１は、本実施の形態におけるデータ移行システムの全体構成図である。
本実施の形態におけるデータ移行システムは、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）内に配置されたファイルサーバ１とコピーサーバ２を備える。ＳＡＮ（Ｓｔｏｒａｇｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）内には現在利用中のディスク装置３Ａとデータの移行先であるディスク装置３Ｂが配置される。ファイルサーバ１にはディスク装置３Ａを接続し、コピーサーバ２にはディスク装置３Ｂを接続する。ファイルサーバ１は、ディスク装置３Ａが格納するデータに対するアクセスサービスをＬＡＮ内の他の装置に提供する。コピーサーバ２は、ファイルサーバ１を介してディスク装置３Ａが保持するデータを取得してディスク装置３Ｂへコピーし、ディスク装置３Ａ，３Ｂ間でデータを同期する。
続いて、ファイルサーバ１とコピーサーバ２の構成について説明する。
図２は、ファイルサーバ１とコピーサーバ２の構成を示す機能ブロック図である。
同図に示すファイルサーバ１は、読出部１１および送信部１２を備える。
読出部１１は、ディスク装置３Ａが格納するファイルデータとメタデータをファイルサーバ１が備えるメモリに読み出す。メタデータは、ファイルデータに関連する情報であり、ファイルデータの作成日時や作成者、変更日時、データ形式、タイトル、注釈などの情報を有する。
送信部１２は、読出部１１が読み出したファイルデータとメタデータをコピーサーバ２に送信する。
なお、ファイルサーバ１は、ＬＡＮ内の他の装置に対してディスク装置３Ａに格納されたデータへのアクセスを仲介する機能を有しているが、ここでの説明は省略する。
コピーサーバ２は、読出部２１、書込部２２、差分抽出部２３、および受信部２４を備える。
読出部２１は、ディスク装置３Ｂが格納するメタデータをコピーサーバ２が備えるメモリに読み出す。
書込部２２は、ファイルサーバ１から受信したファイルデータとメタデータをディスク装置３Ｂに格納する。
差分抽出部２３は、ファイルサーバ１から受信したメタデータとディスク装置３Ｂから読み出したメタデータを比較し、ディスク装置３Ａ，３Ｂ間のデータの差分を抽出する。
受信部２４は、ファイルサーバ１からファイルデータとメタデータを受信し、コピーサーバ２が備えるメモリに格納する。
なお、ファイルサーバ１、コピーサーバ２が備える各部は、演算処理装置、記憶装置等を備えたコンピュータにより構成して、各部の処理がプログラムによって実行されるものとしてもよい。このプログラムはファイルサーバ１、コピーサーバ２が備える記憶装置に記憶されており、磁気ディスク、光ディスク、半導体メモリ等の記録媒体に記録することも、ネットワークを通して提供することも可能である。
続いて、データ移行システムの動作について説明する。
図３は、本実施の形態におけるデータ移行システムがデータを移行する処理の流れを示すシーケンス図である。なお、図２にもデータの流れを示す矢印と符号を付している。
所定のタイミングで、コピーサーバ２はファイルサーバ１にメタデータを要求するとともに（ステップＳ１１）、ディスク装置３Ｂに格納されているメタデータをコピーサーバ２のメモリに読み出す（ステップＳ１２）。所定のタイミングは、例えば、所定の周期やコピーサーバ２によるデータのコピーが完了した後などである。
ファイルサーバ１はコピーサーバ２からメタデータを要求されると、ディスク装置３Ａに格納されているメタデータをメモリに読み出して（ステップＳ１３）、コピーサーバ２にメタデータを送信する（ステップＳ１４）。
コピーサーバ２はファイルサーバ１からメタデータを受信すると、受信したディスク装置３Ａのメタデータとディスク装置３Ｂのメタデータを比較し、ディスク装置３Ａ，３Ｂ間のデータの差分を抽出する（ステップＳ１５）。
そして、コピーサーバ２はファイルサーバ１に差分のあるファイルデータを要求する（ステップＳ１６）。
ファイルサーバ１はコピーサーバ２からファイルデータを要求されると、要求されたファイルデータをディスク装置３Ａからメモリに読み出して（ステップＳ１７）、コピーサーバ２にファイルデータを送信する（ステップＳ１８）。
コピーサーバ２はファイルデータを受信すると、受信したファイルデータとそのファイルデータのメタデータをディスク装置３Ｂに保存する（ステップＳ１９）。
＜比較例＞
次に、比較例のデータ移行システムについて説明する。
図４は、比較例のデータ移行システムの構成を示す機能ブロック図である。同図に示す比較例のデータ移行システムは、ファイルサーバ５に２つのディスク装置３Ａ，３Ｂを接続してファイルサーバ５がデータを移行する。ファイルサーバ５は、ディスク装置３Ａからファイルデータとメタデータをメモリに読み出す読出部５１、ディスク装置３Ｂにファイルデータとメタデータを書き込む書込部５２、およびディスク装置３Ａ，３Ｂ間のデータの差分を抽出する差分抽出部５３を備える。以下、比較例のデータ移行システムの動作と本実施の形態のデータ移行システムとの違いについて説明する。
データを移行する際、読出部５１はディスク装置３Ａからメタデータを読み出すとともに（ステップＳ５１）、ディスク装置３Ｂからメタデータを読み出し（ステップＳ５２）、差分抽出部５３がそれぞれのメタデータを比較してディスク装置３Ａ，３Ｂ間のデータの差分を抽出する（ステップＳ５３）。
そして、読出部５１が差分のあるファイルデータをディスク装置３Ａからメモリに読み出し（ステップＳ５４）、書込部５２は差分のあるファイルデータとそのメタデータをディスク装置３Ｂに書き込む（ステップＳ５５）。
本実施の形態のファイルサーバ１と比較例のファイルサーバ５を比べると、本実施の形態のファイルサーバ１は、ステップＳ５２のディスク装置３Ｂからメタデータを読み出す処理、ステップＳ５３の差分を抽出する処理、およびステップＳ５５のファイルデータとメタデータをディスク装置３Ｂに書き込む処理を行っていない。本実施の形態のファイルサーバ１は、ステップＳ１４のコピーサーバ２にメタデータを送信する処理とステップＳ１８のコピーサーバ２にファイルデータを送信する処理を行っているが、この処理の負荷は比較例のファイルサーバ５のステップＳ５５のファイルデータとメタデータをディスク装置３Ｂに書き込む処理と同等であると考えられる。したがって、比較例のファイルサーバ５の処理に対して本実施の形態のファイルサーバ１から実質的に削減される処理は、ステップＳ５２のディスク装置３Ｂからメタデータを読み出す処理とステップＳ５３の差分を抽出する処理である。差分を抽出する処理は、ＣＰＵ／メモリへの負担が大きいと考えられる。本実施の形態のデータ移行システムでは、この差分を抽出する処理をコピーサーバ２に分散させることでファイルサーバ１の負荷を軽減している。
以上説明したように、本実施の形態によれば、ファイルサーバ１と同じＬＡＮ上にコピーサーバ２を配置し、コピーサーバ２にディスク装置３Ｂを接続し、コピーサーバ２がファイルサーバ１からディスク装置３Ａの保持するファイルデータのメタデータを取得してディスク装置３Ｂのメタデータと比較して差分を抽出し、ファイルサーバ１から差分のあるファイルデータを取得してディスク装置３Ｂに格納することにより、ファイルサーバ１はディスク装置３Ａ，３Ｂ間のデータの差分を抽出する処理を行う必要がなくなるので、ファイルサーバの負荷を軽減することが可能となる。
１…ファイルサーバ
１１…読出部
１２…送信部
２…コピーサーバ
２１…読出部
２２…書込部
２３…差分抽出部
２４…受信部
３Ａ，３Ｂ…ディスク装置
５…ファイルサーバ
５１…読出部
５２…書込部
５３…差分抽出部

Claims (1)

  1. 第１蓄積装置を接続して当該第１蓄積装置が格納するデータに対するアクセスサービスを提供するファイルサーバと第２蓄積装置を接続したコピーサーバとを備え、前記第１蓄積装置から前記第２蓄積装置へデータを移行するデータ移行システムであって、
    前記ファイルサーバは、
    前記第１蓄積装置に格納されたデータに関する情報を有する第１メタデータを前記第１蓄積装置から読み出して前記コピーサーバに送信するメタデータ送信手段と、
    前記コピーサーバから要求されたデータを前記第１蓄積装置から読み出して前記コピーサーバに送信するデータ送信手段と、を有し、
    前記コピーサーバは、
    前記ファイルサーバから前記第１メタデータを受信するとともに、前記第２蓄積装置に格納されたデータに関する情報を有する第２メタデータを前記第２蓄積装置から読み出すメタデータ取得手段と、
    前記第１メタデータと前記第２メタデータを比較して差分を抽出する差分抽出手段と、
    前記差分に基づいて前記ファイルサーバにデータを要求し、受信したデータと前記第１メタデータを前記第２蓄積装置に格納するデータ格納手段と、を有すること
    を特徴とするデータ移行システム。
JP2014030505A 2014-02-20 2014-02-20 データ移行システム Pending JP2015156088A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014030505A JP2015156088A (ja) 2014-02-20 2014-02-20 データ移行システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014030505A JP2015156088A (ja) 2014-02-20 2014-02-20 データ移行システム

Publications (1)

Publication Number Publication Date
JP2015156088A true JP2015156088A (ja) 2015-08-27

Family

ID=54775372

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014030505A Pending JP2015156088A (ja) 2014-02-20 2014-02-20 データ移行システム

Country Status (1)

Country Link
JP (1) JP2015156088A (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1185528A (ja) * 1997-09-09 1999-03-30 Oki Electric Ind Co Ltd 情報処理装置、ソフトウエア配布方法および記録媒体
JP2003006213A (ja) * 2001-06-22 2003-01-10 Fuji Photo Film Co Ltd 画像バックアップ方法及び画像処理方法
JP2008146627A (ja) * 2006-12-12 2008-06-26 Hitachi Ltd 複数のデータセンタにおけるストレージリソース管理のための方法および装置
WO2013171858A1 (ja) * 2012-05-16 2013-11-21 株式会社Ｓｙｎｃｌｏｇｕｅ 同期プログラム及び同期方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1185528A (ja) * 1997-09-09 1999-03-30 Oki Electric Ind Co Ltd 情報処理装置、ソフトウエア配布方法および記録媒体
JP2003006213A (ja) * 2001-06-22 2003-01-10 Fuji Photo Film Co Ltd 画像バックアップ方法及び画像処理方法
JP2008146627A (ja) * 2006-12-12 2008-06-26 Hitachi Ltd 複数のデータセンタにおけるストレージリソース管理のための方法および装置
WO2013171858A1 (ja) * 2012-05-16 2013-11-21 株式会社Ｓｙｎｃｌｏｇｕｅ 同期プログラム及び同期方法

Similar Documents

Publication Publication Date Title
US11734125B2 (en) Tiered cloud storage for different availability and performance requirements
US9613156B2 (en) Cookie information sharing method and system
US20140351211A1 (en) Media File Synchronization
US20160048430A1 (en) Method of operating a shared nothing cluster system
US20100217750A1 (en) Archive apparatus, conversion apparatus and conversion program
JP6168996B2 (ja) コンテンツ制御方法、コンテンツ制御装置およびプログラム
US20160088077A1 (en) Seamless binary object and metadata sync
KR101238374B1 (ko) 메쉬업 서버스 지원방법 및 장치
US8635270B2 (en) Thread mechanism for media and metadata upload
EP2770719A2 (en) Method of creating compound file and data storage device having the compound file
JP6508648B2 (ja) データベースを管理するシステム及び方法
US20160125003A1 (en) Secondary queue for index process
WO2014068749A1 (ja) メタデータ管理システム、メタデータ管理方法及び記憶媒体
CN107704464A (zh) 解析静态资源的路径的方法及装置
JP2015156088A (ja) データ移行システム
US10503773B2 (en) Tagging of documents and other resources to enhance their searchability
JP2019169143A (ja) 権利保有者が所有する印刷物のコピーを追跡するシステム、方法、装置、及びプログラム
JP2018504689A5 (ja)
EP2587381B1 (en) Server device and content acquisition method
US20140344756A1 (en) Information processing apparatus, and control method therefor
US20140379762A1 (en) Content management system
JP4933573B2 (ja) Ｗｅｂシステムにおける分散処理方法およびｗｅｂシステムにおける分散処理システム
JP5702382B2 (ja) データ管理装置およびデータ管理方法
KR101792863B1 (ko) 컨텐츠 스트리밍 장치 및 방법
JP7114877B2 (ja) 同期処理装置、ファイル同期システムおよびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160927

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170404