JP2011022721A - アーカイブ装置、データ格納プログラムおよびデータ格納方法 - Google Patents
アーカイブ装置、データ格納プログラムおよびデータ格納方法 Download PDFInfo
- Publication number
- JP2011022721A JP2011022721A JP2009166043A JP2009166043A JP2011022721A JP 2011022721 A JP2011022721 A JP 2011022721A JP 2009166043 A JP2009166043 A JP 2009166043A JP 2009166043 A JP2009166043 A JP 2009166043A JP 2011022721 A JP2011022721 A JP 2011022721A
- Authority
- JP
- Japan
- Prior art keywords
- data
- hash value
- divided data
- attribute information
- divided
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/113—Details of archiving
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1748—De-duplication implemented within the file system, e.g. based on file segments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】所定の容量で分割された分割データと、分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報とを記憶する。そして、所定の容量で分割された分割データごとのハッシュ値を算出し、算出したハッシュ値に該当する属性情報が記憶されているか否かを判定する。そして、算出したハッシュ値に該当する属性情報が記憶されていないと判定された場合、新たに受信したデータの分割データおよび分割データの属性情報を格納するように制御する。また、算出したハッシュ値に該当する属性情報が記憶されている場合、分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御する。
【選択図】 図1
Description
上記したように、実施例1によれば、分割データ記憶部31は、外部装置70から受信したデータであり、所定の容量で分割された分割データを記憶する。そして、属性情報記憶部32は、分割データ記憶部31が記憶する分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を記憶する。そして、ハッシュ値算出部21は、外部装置70から受信したデータであり、所定の容量で分割された分割データごとのハッシュ値を算出する。そして、判定部22は、ハッシュ値算出部21によって算出されたハッシュ値に該当する属性情報が属性情報記憶部32に記憶されているか否かを判定する。そして、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されていないと判定された場合、外部装置70から新たに受信したデータの分割データを分割データ記憶部31に格納するように制御する。さらに、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されていないと判定された場合、分割データの属性情報を属性情報記憶部32に格納するように制御する。また、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されている場合、分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御する。従って、外部装置70が格納を要求する新規データのうち、格納済みのデータと共有されない分割データのみを格納対象とすることができ、記録容量を削減することが可能となる。
まず最初に、図2〜6を用いて、実施例2におけるデータ格納システムの構成を説明する。図2は、実施例2におけるデータ格納システムの構成を説明するための図であり、図3は、データ分割部を説明するための図であり、図4は、実施例2における属性情報記憶部を説明するための図である。また、図5は、ハッシュ値算出部を説明するための図であり、図6は、実施例2におけるデータ格納制御部を説明するための図である。
次に、図7および図8を用いて、実施例2におけるデータ格納システムによる処理を説明する。図7は、実施例2における外部装置による処理の手順を説明するための図であり、図8は、実施例2におけるアーカイブ装置による処理の手順を説明するための図である。
図7に示すように、まず、実施例2における外部装置70は、格納コマンド受け付けると(ステップS101肯定)、データ分割部81は、格納を要求するデータをデータ記憶部91から読み出す(ステップS102)。
図8に示すように、まず、実施例2におけるアーカイブ装置10は、外部装置70から分割データを受信すると(ステップS201肯定)、ハッシュ値算出部21は、受信した分割データのハッシュ値を算出する(ステップS202)。具体的には、ハッシュ値算出部21は、受信した分割データのハッシュ値を算出し、算出したハッシュ値をハッシュ値記憶部33に格納する。
上記したように、実施例2によれば、分割データ記憶部31は、外部装置70から受信データであり、所定の容量で分割された分割データを記憶する。そして、属性情報記憶部32は、分割データ記憶部31が記憶する分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を記憶する。そして、ハッシュ値算出部21は、外部装置70から受信したデータであり、所定の容量で分割された分割データごとのハッシュ値を算出する。そして、判定部22は、ハッシュ値算出部21によって算出されたハッシュ値に該当する属性情報が属性情報記憶部32に記憶されているか否かを判定する。そして、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されていないと判定された場合、外部装置70から新たに受信したデータの分割データを分割データ記憶部31に格納するように制御する。さらに、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されていないと判定された場合、分割データの属性情報を属性情報記憶部32に格納するように制御する。また、データ格納制御部23は、ハッシュ値算出部21が算出したハッシュ値に該当する属性情報が属性情報記憶部32に記憶されている場合、分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御する。従って、データを所定の容量で分割した分割データで管理することにより、複数のデータにおいて同一である分割データを重複することなく、共有して記憶するように制御することができ、記録容量を削減することが可能となる。
まず最初に、図9および図10を用いて、実施例3におけるデータ格納システムの構成を説明する。図9は、実施例3におけるデータ格納システムの構成を示す図であり、図10は、実施例3におけるデータ格納制御部を説明するための図である。
次に、図11を用いて、実施例3における仮分割データの判定処理を説明する。図11は、実施例3における仮分割データの判定処理の手順を説明するための図である。なお、実施例3における外部装置70およびアーカイブ装置10によるデータ格納に関する処理の手順は、実施例2において説明した処理の手順と同一であることから、説明を省略する。
上記したように、実施例3によれば、分割データ判定部24は、複数の分割データがそれぞれ同一の複数の分割元のデータから分割されているか否かを判定する。そして、データ格納制御部23は、分割データ判定部24によって複数の分割データがそれぞれ同一の複数の分割元のデータから分割されていると判定された場合、該当する複数の分割データを単一の仮分割データとする。そして、データ格納制御部23は、仮分割データを形成する各分割データの識別情報を仮分割データの識別情報に置き換えて、属性情報記憶部32に格納する。従って、実施例3におけるデータ格納システムは、分割データごとにそれぞれ有していた分割元のリンク先情報を、仮分割データのリンク先として、ひとつにまとめることができ、記録容量をより削減することが可能となる。
まず最初に、図9および図12を用いて、実施例4におけるデータ格納システムの構成を説明する。図9は、実施例3におけるデータ格納システムの構成を説明するための図であり、図12は、実施例4におけるデータ格納制御部を説明するための図である。
次に、図13を用いて、実施例4におけるアーカイブ装置による処理を説明する。図13は、実施例4におけるアーカイブ装置による処理の手順を説明するための図である。なお、実施例4における外部装置による処理は、実施例2における外部装置による手順と同一であることから、説明を省略する。また、図13に示すステップS405〜S409およびステップS411は、それぞれ図8に示すステップS201〜S205およびステップS206と同一であることから説明を省略する。
上記したように、実施例4によれば、データ格納制御部23は、さらに、仮分割データの分割元のデータ数が所定の閾値を超えた場合、仮分割データを形成する複数の分割データを結合した結合分割データを前記分割データ記憶部に格納するように制御する。また、データ格納制御部23は、結合分割データを形成する分割データを分割データ記憶部31から削除し、かつ、分割データの属性情報を属性情報記憶部32から削除するように制御する。また、データ格納制御部23は、結合分割データを分割データ記憶部31に格納するように制御する場合、結合分割データのハッシュ値、識別情報および結合分割データを形成する各分割データのハッシュ値をさらに対応付けた属性情報に更新するように制御する。そして、判定部22は、結合分割データの属性情報で、新たに受信したデータを判定する際、属性情報に含まれる分割データのハッシュ値と新たに受信したデータの分割データのハッシュ値とが同一である場合に、結合分割データのハッシュ値を用いて判定を行う。従って、実施例4におけるデータ格納システムは、分割データを結合分割データとして管理することによって、分割データごとに記憶していた属性情報を削除することができ、記録容量をより削減することができる。
まず最初に、図14を用いて、実施例5におけるデータ格納システムの構成を説明する。図14は、実施例5におけるデータ格納システムの構成を示す図である。
次に、図15を用いて、実施例5における分割データ容量決定処理を説明する。図15は、実施例5における分割データ容量決定処理の手順を説明するための図である。なお、実施例5における外部装置およびアーカイブ装置におけるデータ格納に関する各種処理は、実施例2〜4における外部装置およびアーカイブ装置と同様であることから、説明を省略する。
上記したように、実施例5によれば、分割決定部25は、分割データ記憶部31が記憶する分割データの各容量に基づいて、データを分割する所定の容量を決定する。そして、命令部26は、分割決定部25によって決定された所定の容量でデータを送信するように外部装置70に命令する。従って、実施例5におけるデータ格納システムは、格納するデータ容量を適宜変更することにより、データ格納システムの利用環境に応じたデータ容量で分割データを格納することができ、記録容量をさらに削減することができる。
上記した実施例1〜5では、データの分割を外部装置70において実行する場合について説明したが、本実施例はこれに限定するものではなく、例えば、外部装置70から受信したデータをアーカイブ装置10において分割する場合であってもよい。
また、上記の実施例において説明した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に更新することができる。例えば、本実施例は、分割データを結合して結合分割データとする際の閾値を任意に設定することができる。
ところで、上記の実施例4では、ハードウェアロジックによって各種の処理を実現する場合を説明したが、本実施例はこれに限定されるものではなく、予め用意されたプログラムをコンピュータで実行するようにしてもよい。そこで、以下では、図16を用いて上記の実施例4に示したデータ格納システムと同様の機能を有するデータ格納プログラムを実行するコンピュータの一例を説明する。図16は、実施例5におけるデータ格納プログラムを実行するコンピュータを説明するための図である。
前記分割データ記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を記憶する属性情報記憶部と、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出部と、
前記ハッシュ値算出部によって算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されているか否かを判定する判定部と、
前記判定部によって、前記ハッシュ値算出部により算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記分割データ記憶部に格納するとともに、当該分割データの属性情報を前記属性情報記憶部に格納するように制御し、前記ハッシュ値算出部により算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御部と、
を有したことを特徴とするアーカイブ装置。
前記データ格納制御部は、前記処理に加えて、前記分割データ判定部によって複数の分割データがそれぞれ同一の複数の分割元のデータから分割されていると判定された場合、当該複数の分割データを単一の仮分割データとし、当該仮分割データを形成する各分割データの識別情報を当該仮分割データの識別情報に置き換え、前記属性情報記憶部に格納することを特徴とする付記1に記載のアーカイブ装置。
前記判定部は、前記処理に加えて、前記結合分割データの属性情報を用いて新たに受信したデータを判定する際に、当該属性情報に含まれる分割データのハッシュ値と新たに受信したデータの分割データのハッシュ値とが同一である場合に、結合分割データのハッシュ値を用いて判定を行うことを特徴とする付記3に記載のアーカイブ装置。
前記第一の記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を第二の記憶部に格納する属性情報格納手順と、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出手順と、
前記ハッシュ値算出手順によって算出されたハッシュ値に該当する属性情報が前記第二の記憶部に記憶されているか否かを判定する判定手順と、
前記判定手順によって、前記ハッシュ値算出手順により算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記第一の記憶部に格納するとともに、当該分割データの属性情報を前記第二の記憶部に格納するように制御し、前記ハッシュ値算出手順により算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御手順と、
をコンピュータに実行させることを特徴とするデータ格納プログラム。
前記データ格納制御手順は、前記処理に加えて、前記分割データ判定手順によって複数の分割データがそれぞれ同一の複数の分割元のデータから分割されていると判定された場合、当該複数の分割データを単一の仮分割データとし、当該仮分割データを形成する各分割データの識別情報を当該仮分割データの識別情報に置き換え、前記第二の記憶部に格納することを特徴とする付記7に記載のデータ格納プログラム。
前記判定手順は、前記処理に加えて、前記結合分割データの属性情報を用いて新たに受信したデータを判定する際に、当該属性情報に含まれる分割データのハッシュ値と新たに受信したデータの分割データのハッシュ値とが同一である場合に、結合分割データのハッシュ値を用いて判定を行うことを特徴とする付記9に記載のデータ格納プログラム。
前記第一の記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を第二の記憶部に格納する属性情報格納ステップと、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出ステップと、
前記ハッシュ値算出ステップによって算出されたハッシュ値に該当する属性情報が前記第二の記憶部に記憶されているか否かを判定する判定ステップと、
前記判定ステップによって、前記ハッシュ値算出ステップにより算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記第一の記憶部に格納するとともに、当該分割データの属性情報を前記第二の記憶部に格納するように制御し、前記ハッシュ値算出ステップにより算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御ステップと、
を含んだことを特徴とするデータ格納方法。
前記データ格納制御ステップは、前記処理に加えて、前記分割データ判定ステップによって複数の分割データがそれぞれ同一の複数の分割元のデータから分割されていると判定された場合、当該複数の分割データを単一の仮分割データとし、当該仮分割データを形成する各分割データの識別情報を当該仮分割データの識別情報に置き換え、前記第二の記憶部に格納することを特徴とする付記13に記載のデータ格納方法。
前記判定ステップは、前記処理に加えて、前記結合分割データの属性情報を用いて新たに受信したデータを判定する際に、当該属性情報に含まれる分割データのハッシュ値と新たに受信したデータの分割データのハッシュ値とが同一である場合に、結合分割データのハッシュ値を用いて判定を行うことを特徴とする付記15に記載のデータ格納方法。
20 制御部
21 ハッシュ値算出部
22 判定部
23 データ格納制御部
24 分割データ判定部
25 分割決定部
26 命令部
30 記憶部
31 分割データ記憶部
32 属性情報記憶部
33 ハッシュ値記憶部
34 判定結果記憶部
35 決定結果記憶部
40 入出力制御I/F部
50 通信部
60 ネットワーク
70 外部装置
80 処理部
81 データ分割部
82 分割データ送信部
90 記憶部
91 データ記憶部
92 分割データ記憶部
100 入出力制御I/F部
110 通信部
Claims (8)
- 外部装置から受信したデータであり、所定の容量で分割された分割データを記憶する分割データ記憶部と、
前記分割データ記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を記憶する属性情報記憶部と、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出部と、
前記ハッシュ値算出部によって算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されているか否かを判定する判定部と、
前記判定部によって、前記ハッシュ値算出部により算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記分割データ記憶部に格納するとともに、当該分割データの属性情報を前記属性情報記憶部に格納するように制御し、前記ハッシュ値算出部により算出されたハッシュ値に該当する属性情報が前記属性情報記憶部に記憶されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御部と、
を有したことを特徴とするアーカイブ装置。 - 複数の分割データがそれぞれ同一の複数の分割元のデータから分割されているか否かを判定する分割データ判定部をさらに有し、
前記データ格納制御部は、前記処理に加えて、前記分割データ判定部によって複数の分割データがそれぞれ同一の複数の分割元のデータから分割されていると判定された場合、当該複数の分割データを単一の仮分割データとし、当該仮分割データを形成する各分割データの識別情報を当該仮分割データの識別情報に置き換え、前記属性情報記憶部に格納することを特徴とする請求項1に記載のアーカイブ装置。 - 前記データ格納制御部は、さらに、前記仮分割データの分割元のデータ数が所定の閾値を超えた場合、当該仮分割データを形成する複数の分割データを結合した結合分割データを前記分割データ記憶部に格納するとともに、当該結合分割データを形成する分割データを前記分割データ記憶部から削除し、かつ、当該分割データの属性情報を前記属性情報記憶部から削除するように制御することを特徴とする請求項2に記載のアーカイブ装置。
- 前記データ格納制御部は、さらに、前記結合分割データを前記分割データ記憶部に格納するように制御する場合、当該結合分割データの属性情報として、当該結合分割データのハッシュ値、識別情報および当該結合分割データを形成する各分割データのハッシュ値をさらに対応付けた属性情報に更新するように制御し、
前記判定部は、前記処理に加えて、前記結合分割データの属性情報を用いて新たに受信したデータを判定する際に、当該属性情報に含まれる分割データのハッシュ値と新たに受信したデータの分割データのハッシュ値とが同一である場合に、結合分割データのハッシュ値を用いて判定を行うことを特徴とする請求項3に記載のアーカイブ装置。 - 前記分割データ記憶部が記憶する分割データの各容量に基づいて、データを分割する所定の容量を決定する分割決定部をさらに有することを特徴とする請求項2〜4のいずれか一つに記載のアーカイブ装置。
- 前記分割決定部によって決定された所定の容量でデータを送信するように前記外部装置に命令する命令部をさらに有することを特徴とする請求項5に記載のアーカイブ装置。
- 外部装置から受信したデータであり、所定の容量で分割された分割データを第一の記憶部に格納する分割データ格納手順と、
前記第一の記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を第二の記憶部に格納する属性情報格納手順と、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出手順と、
前記ハッシュ値算出手順によって算出されたハッシュ値に該当する属性情報が前記第二の記憶部に記憶されているか否かを判定する判定手順と、
前記判定手順によって、前記ハッシュ値算出手順により算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記第一の記憶部に格納するとともに、当該分割データの属性情報を前記第二の記憶部に格納するように制御し、前記ハッシュ値算出手順により算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御手順と、
をコンピュータに実行させることを特徴とするデータ格納プログラム。 - 外部装置から受信したデータであり、所定の容量で分割された分割データを第一の記憶部に格納する分割データ格納ステップと、
前記第一の記憶部が記憶する前記分割データごとのハッシュ値と分割元のデータを一意に特定するための識別情報とが対応付けられた属性情報を第二の記憶部に格納する属性情報格納ステップと、
前記外部装置から新たに受信したデータであり、前記所定の容量で分割された分割データごとのハッシュ値を算出するハッシュ値算出ステップと、
前記ハッシュ値算出ステップによって算出されたハッシュ値に該当する属性情報が前記第二の記憶部に記憶されているか否かを判定する判定ステップと、
前記判定ステップによって、前記ハッシュ値算出ステップにより算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていないと判定された場合、前記外部装置から新たに受信したデータの分割データを前記第一の記憶部に格納するとともに、当該分割データの属性情報を前記第二の記憶部に格納するように制御し、前記ハッシュ値算出ステップにより算出されたハッシュ値に該当する属性情報が前記第二の記憶部に格納されていると判定された場合、当該ハッシュ値の算出に用いられた分割データの識別情報のみを同一のハッシュ値が含まれる属性情報に対応付けて格納するように制御するデータ格納制御ステップと、
を含んだことを特徴とするデータ格納方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009166043A JP5254141B2 (ja) | 2009-07-14 | 2009-07-14 | アーカイブ装置、データ格納プログラムおよびデータ格納方法 |
US12/833,323 US8423556B2 (en) | 2009-07-14 | 2010-07-09 | Archive device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009166043A JP5254141B2 (ja) | 2009-07-14 | 2009-07-14 | アーカイブ装置、データ格納プログラムおよびデータ格納方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011022721A true JP2011022721A (ja) | 2011-02-03 |
JP5254141B2 JP5254141B2 (ja) | 2013-08-07 |
Family
ID=43466002
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009166043A Expired - Fee Related JP5254141B2 (ja) | 2009-07-14 | 2009-07-14 | アーカイブ装置、データ格納プログラムおよびデータ格納方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8423556B2 (ja) |
JP (1) | JP5254141B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014500536A (ja) * | 2010-10-11 | 2014-01-09 | イーストソフト コーポレーション | クラウドシステム、クラウドシステムにおけるファイルの圧縮及び転送方法 |
WO2014155668A1 (ja) * | 2013-03-29 | 2014-10-02 | 株式会社 東芝 | データの重複をハッシュテーブルに基づいて排除するためのストレージシステム、ストレージコントローラ及び方法 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9317456B2 (en) * | 2010-10-18 | 2016-04-19 | Infosys Technologies Ltd. | Method and system for performing event-matching with a graphical processing unit |
US9195666B2 (en) * | 2012-01-17 | 2015-11-24 | Apple Inc. | Location independent files |
WO2014078990A1 (zh) * | 2012-11-20 | 2014-05-30 | 华为技术有限公司 | 数据存储方法、数据存储装置及数据存储系统 |
CN104123309B (zh) | 2013-04-28 | 2017-08-25 | 国际商业机器公司 | 用于数据管理的方法和系统 |
JP6252223B2 (ja) * | 2014-02-14 | 2017-12-27 | 富士通株式会社 | 制御方法、受信装置、及び通信システム |
CN106326285B (zh) * | 2015-06-30 | 2019-11-12 | 华为技术有限公司 | 一种存储数据的方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003524243A (ja) * | 2000-02-18 | 2003-08-12 | アヴァマー テクノロジーズ インコーポレイテッド | 共通性ファクタリングシステムに用いられるハッシュファイルシステムおよび方法 |
JP2005267600A (ja) * | 2004-03-15 | 2005-09-29 | Hitachi Ltd | 長期データ保護システム及び方法 |
WO2009066611A1 (ja) * | 2007-11-20 | 2009-05-28 | Nec Corporation | 仮想マシン向けデータ格納システム、データ格納方法およびデータ格納用プログラム |
JP2009543198A (ja) * | 2006-06-29 | 2009-12-03 | ネットアップ,インコーポレイテッド | ブロック指紋を読み出し、ブロック指紋を使用してデータ重複を解消するシステム、及び方法 |
JP2010515114A (ja) * | 2006-12-01 | 2010-05-06 | エヌイーシー ラボラトリーズ アメリカ インク | 迅速かつ効率的なデータ管理及び/またはデータ処理のための方法及びシステム |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020124137A1 (en) * | 2001-01-29 | 2002-09-05 | Ulrich Thomas R. | Enhancing disk array performance via variable parity based load balancing |
US7386525B2 (en) * | 2001-09-21 | 2008-06-10 | Stonesoft Corporation | Data packet filtering |
JP2004030423A (ja) | 2002-06-27 | 2004-01-29 | Ntt Comware Corp | コンテンツ配信制御装置及びプログラム |
US8356021B2 (en) * | 2005-03-11 | 2013-01-15 | Ross Neil Williams | Method and apparatus for indexing in a reduced-redundancy storage system |
WO2006102621A2 (en) * | 2005-03-23 | 2006-09-28 | Stream Theory, Inc. | System and method for tracking changes to files in streaming applications |
US7765191B2 (en) * | 2005-04-15 | 2010-07-27 | Emc Corporation | Methods and apparatus for managing the replication of content |
US7409489B2 (en) * | 2005-08-03 | 2008-08-05 | Sandisk Corporation | Scheduling of reclaim operations in non-volatile memory |
US7930559B1 (en) * | 2006-06-30 | 2011-04-19 | Emc Corporation | Decoupled data stream and access structures |
US7720892B1 (en) * | 2006-06-30 | 2010-05-18 | Emc Corporation | Bulk updates and tape synchronization |
CN101201832B (zh) * | 2006-12-15 | 2010-04-21 | 国际商业机器公司 | 优化网页图像的方法和系统 |
US20080168068A1 (en) * | 2007-01-10 | 2008-07-10 | Hutheesing Vivek A | Methods and systems for a geographically defined communication platform |
US20080172430A1 (en) * | 2007-01-11 | 2008-07-17 | Andrew Thomas Thorstensen | Fragmentation Compression Management |
US7761425B1 (en) * | 2007-03-29 | 2010-07-20 | Symantec Corporation | Low-overhead means of performing data backup |
US7769971B2 (en) * | 2007-03-29 | 2010-08-03 | Data Center Technologies | Replication and restoration of single-instance storage pools |
US20080243878A1 (en) * | 2007-03-29 | 2008-10-02 | Symantec Corporation | Removal |
US8489830B2 (en) * | 2007-03-30 | 2013-07-16 | Symantec Corporation | Implementing read/write, multi-versioned file system on top of backup data |
US8046509B2 (en) * | 2007-07-06 | 2011-10-25 | Prostor Systems, Inc. | Commonality factoring for removable media |
US8880797B2 (en) * | 2007-09-05 | 2014-11-04 | Emc Corporation | De-duplication in a virtualized server environment |
US8036464B2 (en) * | 2007-09-07 | 2011-10-11 | Satyam Computer Services Limited | System and method for automatic segmentation of ASR transcripts |
US7519635B1 (en) * | 2008-03-31 | 2009-04-14 | International Business Machines Corporation | Method of and system for adaptive selection of a deduplication chunking technique |
US8515909B2 (en) * | 2008-04-29 | 2013-08-20 | International Business Machines Corporation | Enhanced method and system for assuring integrity of deduplicated data |
US8397084B2 (en) * | 2008-06-12 | 2013-03-12 | Microsoft Corporation | Single instance storage of encrypted data |
US8161255B2 (en) * | 2009-01-06 | 2012-04-17 | International Business Machines Corporation | Optimized simultaneous storing of data into deduplicated and non-deduplicated storage pools |
US8682862B2 (en) * | 2009-04-10 | 2014-03-25 | Phd Virtual Technologies Inc. | Virtual machine file-level restoration |
US8050251B2 (en) * | 2009-04-10 | 2011-11-01 | Barracuda Networks, Inc. | VPN optimization by defragmentation and deduplication apparatus and method |
WO2010125230A1 (en) * | 2009-04-30 | 2010-11-04 | Nokia Corporation | Data transmission optimization |
US20100318759A1 (en) * | 2009-06-15 | 2010-12-16 | Microsoft Corporation | Distributed rdc chunk store |
US8380688B2 (en) * | 2009-11-06 | 2013-02-19 | International Business Machines Corporation | Method and apparatus for data compression |
US8442942B2 (en) * | 2010-03-25 | 2013-05-14 | Andrew C. Leppard | Combining hash-based duplication with sub-block differencing to deduplicate data |
-
2009
- 2009-07-14 JP JP2009166043A patent/JP5254141B2/ja not_active Expired - Fee Related
-
2010
- 2010-07-09 US US12/833,323 patent/US8423556B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003524243A (ja) * | 2000-02-18 | 2003-08-12 | アヴァマー テクノロジーズ インコーポレイテッド | 共通性ファクタリングシステムに用いられるハッシュファイルシステムおよび方法 |
JP2005267600A (ja) * | 2004-03-15 | 2005-09-29 | Hitachi Ltd | 長期データ保護システム及び方法 |
JP2009543198A (ja) * | 2006-06-29 | 2009-12-03 | ネットアップ,インコーポレイテッド | ブロック指紋を読み出し、ブロック指紋を使用してデータ重複を解消するシステム、及び方法 |
JP2010515114A (ja) * | 2006-12-01 | 2010-05-06 | エヌイーシー ラボラトリーズ アメリカ インク | 迅速かつ効率的なデータ管理及び/またはデータ処理のための方法及びシステム |
WO2009066611A1 (ja) * | 2007-11-20 | 2009-05-28 | Nec Corporation | 仮想マシン向けデータ格納システム、データ格納方法およびデータ格納用プログラム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014500536A (ja) * | 2010-10-11 | 2014-01-09 | イーストソフト コーポレーション | クラウドシステム、クラウドシステムにおけるファイルの圧縮及び転送方法 |
WO2014155668A1 (ja) * | 2013-03-29 | 2014-10-02 | 株式会社 東芝 | データの重複をハッシュテーブルに基づいて排除するためのストレージシステム、ストレージコントローラ及び方法 |
US9152341B2 (en) | 2013-03-29 | 2015-10-06 | Kabushiki Kaisha Toshiba | Storage system, storage controller, and method for eliminating data duplication based on hash table |
Also Published As
Publication number | Publication date |
---|---|
JP5254141B2 (ja) | 2013-08-07 |
US8423556B2 (en) | 2013-04-16 |
US20110016132A1 (en) | 2011-01-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5254141B2 (ja) | アーカイブ装置、データ格納プログラムおよびデータ格納方法 | |
EP2120165B1 (en) | Systems and methods for space management in file systems | |
KR20200027413A (ko) | 데이터 저장 방법, 장치 및 시스템 | |
US9031906B2 (en) | Method of managing data in asymmetric cluster file system | |
US8683122B2 (en) | Storage system | |
JP4714778B2 (ja) | アーカイブ装置、変換装置および変換プログラム | |
US11151102B2 (en) | Systems and methods for data management using zero-touch tagging | |
JP2008015984A (ja) | データ移行装置及び方法並びにプログラム | |
US20110295914A1 (en) | Storage system | |
CN104580439B (zh) | 一种云存储系统中使数据均匀分布的方法 | |
JP4713257B2 (ja) | データ記憶装置及びバージョン管理プログラム | |
US8683121B2 (en) | Storage system | |
TW201908987A (zh) | 用於物聯網設備於資料中心備份的分散式重複資料刪除儲存系統及其達成分散式重複資料刪除方法 | |
JP2015026214A (ja) | システム、情報処理装置およびその制御方法、並びにプログラム | |
WO2006115220A1 (ja) | コンテンツ管理システム | |
US10387043B2 (en) | Writing target file including determination of whether to apply duplication elimination | |
WO2019244656A1 (ja) | ストレージ装置 | |
JP2010108114A (ja) | ストレージシステムの性能向上又は管理方法、システム、装置及びプログラム | |
JP5272185B2 (ja) | 計算機システム及びストレージシステム | |
JP5929326B2 (ja) | ストレージシステム | |
US8914336B2 (en) | Storage device and data storage control method | |
JP5459388B2 (ja) | ストレージ装置 | |
US20190258621A1 (en) | Method and system for using external content type object types | |
KR101470857B1 (ko) | iSCSI 스토리지 시스템을 이용한 네트워크 분산 파일 시스템 및 방법 | |
JP4856217B2 (ja) | データ格納プログラム、データ格納方法およびデータ格納システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110408 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110419 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110620 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120123 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120131 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20120406 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130417 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5254141 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160426 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |