CN103380418A - 存储系统 - Google Patents

存储系统 Download PDF

Info

Publication number
CN103380418A
CN103380418A CN2012800067960A CN201280006796A CN103380418A CN 103380418 A CN103380418 A CN 103380418A CN 2012800067960 A CN2012800067960 A CN 2012800067960A CN 201280006796 A CN201280006796 A CN 201280006796A CN 103380418 A CN103380418 A CN 103380418A
Authority
CN
China
Prior art keywords
data
file
address date
stored
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012800067960A
Other languages
English (en)
Other versions
CN103380418B (zh
Inventor
顾佳骏
渡边伦幸
川北智弥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Electrical Scheme Innovation Corp
NEC Corp
Original Assignee
NEC Corp
NEC Software Tohoku Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp, NEC Software Tohoku Ltd filed Critical NEC Corp
Publication of CN103380418A publication Critical patent/CN103380418A/zh
Application granted granted Critical
Publication of CN103380418B publication Critical patent/CN103380418B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • G06F3/0613Improving I/O performance in relation to throughput
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/064Management of blocks
    • G06F3/0641De-duplication techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/0643Management of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065Replication mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11CSTATIC STORES
    • G11C15/00Digital stores in which information comprising one or more characteristic parts is written into the store and in which information is read-out by searching for one or more of these characteristic parts, i.e. associative or content-addressed stores

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

提供这一存储系统,其具有:存储设备,其存储对文件进行配置的分割数据,并且还存储地址数据,地址数据是基于参考目的地的数据内容和存储位置的地址数据,并且是参考分割数据或其他地址数据的地址数据;以及数据存储控制单元,在向存储设备新近存储分割数据或其他地址数据时,如果将被新近存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容,则使用地址数据来参考已存储在存储设备中的数据作为将被新近存储的分割数据或其他地址数据;其中数据存储控制单元具有地址数据获取单元,其在接收到用于标识存储在存储设备中的待复制文件的文件标识信息时,基于该文件标识信息来获取该文件的地址数据,以及一个地址数据设置单元,其在存储设备中设置获得的地址数据,使得待文件被存储在复制目的地的目录中。

Description

存储系统
技术领域
本发明涉及存储系统,更具体地,涉及一种内容可寻址存储系统,其指定存储位置以通过使用根据所存储数据的内容而指定的唯一地址来存储数据。
背景技术
近年来,各种信息随着计算机的发展和传播而数字化。用于存储此类数字数据的设备例如是诸如磁带和磁盘的存储设备。由于将被存储的数据日益增加并达到数量巨大,所以需要海量存储。另外,需要在减少存储设备所耗费的成本的同时保持可靠性。此外,还需要之后能够容易地检索数据。因此,期望存储系统能够自动地实现存储容量和性能的增加、消除重复的存储以减少存储成本,并且以高冗余度进行工作。
在此种环境下,近年来已开发出内容可寻址存储系统,如文档1中示出的专利。在该内容可寻址存储系统中,将数据分发并存储进多个存储设备,并且通过根据数据的内容指定的唯一内容地址来指定数据被存储在的存储位置。具体地说,在内容可寻址存储系统中,给定的数据被分割成多个片段,并且对其添加了冗余数据片段,并且这些片段分别被存储进多个存储设备。
因此,之后,可以通过指定内容地址来检索数据(即,存储在由内容地址指定的存储位置中的片段)并且从片段中恢复分割之前给定的数据。
而且,生成内容地址,以便该内容地址根据数据的内容是唯一的。例如,使用数据的哈希值。因此,关于重复的数据,通过参考相同存储位置的数据来获取相同内容的数据成为可能。因此,不需要单独地存储重复的数据,并且消除重复的记录并减少数据容量成为可能。
另外,内容可寻址存储系统中,使用了树文件系统。这是一种其中参考存储的数据的内容地址被位于更高层的内容地址参考、并且藉此内容地址被存储在树结构中的系统。因此,通过从较高层到较低层跟踪内容地址的参考目的地,访问目标存储数据成为可能。
专利文档1:日本未审查专利申请公布号2010-157204
一般地,当复制文件系统中的文件时,需要执行一次从存储器检索所有将被复制的文件数据并且重写入复制目的地文件的过程。这引起复制过程的执行时间与文件的大小(即,数据量)成比例地增加以及存储系统的性能因频繁地执行该过程而降低的问题。
当在上述内容可寻址存储系统中复制文件时,也出现了上述需要花时间进行复制的问题。也就是说,为了复制数据,需要执行首先基于内容地址指定并检索将被复制的数据并且从片段中恢复数据的过程,而且,需要执行对已存储的数据进行复制的过程。因此,仍然出现了需要花时间来执行复制过程的问题。
发明内容
因此,本发明的目的是解决上述需要花时间来执行数据复制过程的问题。
为了实现该目的,根据本发明的方面的存储系统包括:
存储设备,用于存储对文件进行配置的分割数据以及还存储基于参考目的地的数据内容和存储位置的地址数据,该地址数据参考分割数据或其他地址数据;以及
数据存储控制单元,用于在分割数据或其他地址数据被新近存储进存储设备、并且将被新近存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,进行控制以通过使用地址数据来参考已存储在存储设备中的数据作为将被新近存储的分割数据或其他地址数据。
其中数据存储控制单元包括:地址数据获取单元,用于接受指定存储在存储设备中的复制目标文件的文件说明信息并且基于文件说明信息获取复制目标文件的地址数据;以及地址数据设置单元,用于在存储设备中设置获得的地址数据以使得复制目标文件被存储进复制目的地目录。
另外,根据本发明的另一方面的计算机程序是包括指令的计算机程序,指令用于:
使信息处理设备实现数据存储控制单元,该信息处理设备连接至存储设备,该存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,该地址数据参考分割数据或者其他地址数据,该数据存储控制单元用于在分割数据或其他地址数据被新近存储进存储设备、并且将被新近存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,进行控制以通过使用地址数据来参考已存储在存储设备中的数据作为将被新近存储的分割数据或其他地址数据;并且
使数据存储控制单元实现地址数据获取单元和地址数据设置单元,该地址数据获取单元用于接受指定存储在存储设备中的复制目标文件的文件说明信息,并且基于该文件说明信息来获取复制目标文件的地址数据,地址数据设置单元用于在存储设备中设置获得的地址数据以使得复制目标文件被存储进复制目的地目录。
另外,根据本发明的另一方面的数据存储方法,包括由连接至存储设备的信息处理设备执行如下操作,该存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,该地址数据参考分割数据或其他地址数据,操作包括:
执行数据存储控制,在分割数据或其他地址数据被新近存储进存储设备、并且将被新近存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,通过使用地址数据来参考已存储在存储设备的数据作为将被新近存储的分割数据或其他地址数据;并且
接受指定存储在存储设备中的复制目标文件的文件说明信息,基于该文件说明信息获取复制目标文件的地址数据,并且在存储设备中设置获得的地址数据以使得复制目标文件被存储进复制目的地目录。
利用上述配置,本发明使得迅速地执行数据复制过程成为可能。
附图说明
图1是示出了本发明的第一示例性实施例中的存储系统的配置和数据的存储和参考的方面的框图;
图2是示出了存储在图1中公开的CAS单元中的数据的方面的框图;
图3是示出了存储在图1中公开的CAS单元中的数据的方面的框图;
图4是示出了存储在图1中公开的CAS单元中的数据的方面的框图;
图5是示出了存储在图1中公开的CAS单元中的数据的方面的框图;
图6是示出了存储在图1中公开的CAS单元中的数据的方面的框图;
图7是示出了本发明的第二示例性实施例中的存储系统的配置的框图;
图8是示出了存储在图7中公开的CAS单元中的数据的方面的框图;
图9是示出了存储在图7中公开的CAS单元中的数据的方面的框图;
图10是示出了本发明的附记1中的存储系统的配置的框图。
具体实施方式
<第一示例性实施例>
将参考图1至图6对本发明的第一示例性实施例进行描述。图1是示出了存储系统的配置和数据的存储和参考的方面的框图。图2至图6是示出了存储在形成在存储设备中的CAS单元的数据的方面的框图。
首先,本示例性实施例中的存储系统是所谓的内容可寻址存储系统,其中数据被分发并存储到多个存储设备中,并且存储数据的存储位置通过根据数据内容指定的唯一内容地址而被指定。
内容可寻址存储系统1被一个或多个具有算数设备(未示出)和存储设备20的信息处理设备配置,并且如图1所示,包括通过向算数设备的程序安装而构造的数据存储控制单元10。继而,数据存储控制单元10具有从将被存储的数据(其部分)获得哈希值的功能(数据到哈希转换功能11),并且具有将获得的哈希值转换成地址数据(下文中称为“CA(内容地址)”)的功能(哈希到CA转换功能12),该地址数据表示先前由固定的规则对应的物理存储设备20的存储位置。当存储数据D时,哈希到CA转换功能12返回CA(内容地址)。而且,数据存储控制单元10具有参考功能13,用以从物理存储设备20中检索由CA所参考的数据D。物理存储设备20中用于CA的区域称为CAS单元21。
因此,在将文件或另一CA存储进存储设备20时、新近存储的文件或其他CA具有与已存储在存储设备20中的数据相同的数据内容的情况下,数据存储控制单元10允许通过使用CA来参考已存储在存储设备20中的数据作为新近存储的文件或其他CA,并且具有消除重复记录的效果。
接下来,将参考图2来描述由前述内容可寻址存储系统1生成的文件系统的结构的示例。用于管理文件系统的所谓元数据和实际的文件数据被按需分割成块,并且被存储到CAS单元21中。也就是说,被存储进CAS单元21的块可以存储文件数据的已分割数据和表示另一块的存储位置的CA(内容地址)。因此,在CAS单元21中生成了逻辑树结构。
例如,在将某个文件存储到内容可寻址存储系统中时,需要将文件数据分割成块(当需要时),将通过分割获得的块存储进CAS单元21,并且管理由此获得的CA。对参考通过分割文件而获得的多个块的多个CA进行管理结构应称为“文件管理结构”(文件管理结构数据),并且被存储进CAS单元21,由参考标号41、42和43指示。另外,文件在文件系统内的存储位置称为目录,并且对存储在目录中的文件和参考文件管理目录的CA进行管理的结构称为“目录管理结构”(目录管理结构数据)。例如,目录管理结构被存储进CAS单元21,由图3中的参考标号31、32和33指示。对于目录管理结构,将被参考的文件的名称与参考该文件的文件管理结构的CA、或者将被参考的目录的名称与该目录的目录管理结构的CA是相关的。
根据本发明的内容可寻址存储系统1具有复制已存储在CAS单元21中的文件的功能。具体地说,本示例性实施例中的数据存储控制单元10这样来复制文件:获取上述“文件管理结构”,它是待复制的文件的地址数据(地址数据获取单元),并且在CAS单元21中生成并设置这一“文件管理结构”的复制(地址数据设置单元)。在内容可寻址存储系统中,可以按照上述方式进行复制,因为相同内容的数据被存储在相同地址中。
例如,在图3中示出的示例中,通过将存储在复制源目录管理结构(由参考标号32表示)中的文件管理结构(由参考标号43表示)的CA复制到复制目的地目录管理结构33(由参考标号33表示)中,可以复制对该文件管理结构(由配置由参考标号43表示)中所存储的CA中存储的文件进行配置的数据。此时,由于无论文件数据的大小如何,文件管理结构43中的CA中的数据量都是足够小的数据量,所以可以在短时间内复制文件。
还可以如下考虑上文描述的文件复制。假定以与一般的文件复制相同的方式,检索存在于某个内容可寻址存储系统的文件系统中的文件的数据并且将其作为另一文件新近存储到CAS单元中。此时,数据以与已存储的数据块相同的方式被分割成块,并且被存储进CAS单元21。继而,所有通过数据的存储而获得的CA变成与被检索的文件的文件管理结构管理的CA相同。因此,当该文件管理结构被存储进CAS单元时,与已存储的检索源文件的文件管理结构的CA相同的CA被获得。通过将所获得的文件管理结构的CA和文件的名称之间的对应添加到存储目的地的目录结构并存储进CAS单元而形成的树结构因此与上述通过复制CA获得的树结构是相同的。由此很清楚的是,将文件管理结构的CA复制进复制目的地目录管理结构,具有与复制由文件管理结构指定的整个文件相同的效果。
如稍后的第二示例性实施例所述,由于使得内容可寻址存储系统不知道地址参考源的文件系统的特征,所以一种将文件管理结构的CA复制进复制目的地目录管理结构的方法在概念上允许文件向另一文件系统的复制以及文件在一个文件系统中的复制。由于用于存储文件数据的地址空间在文件系统内是封闭的,因此一般的文件系统需要在将文件复制进另一文件系统时加载并写入数据。另一方面,根据本发明的内容可寻址存储系统在内容可寻址存储系统之内具有文件管理结构的存储目的地,并且具有将文件管理结构的CA复制进另一文件系统的目录管理结构的功能,藉此能够即时生成文件的复制而无需加载或写数据,即便复制源目录和复制目的地目录在不同的文件系统中。
在如参考图3描述的由目录管理结构32和33指定的目录中存储的两个文件指定一个文件管理结构43的CA的情况下,将考虑更新目录之一(32)的文件的情况。图4示出了一个目录(32)的文件被更新之后的状态。通过更新文件数据,新生成了文件管理结构44,并且更新的文件指示新文件管理结构44的CA。这是因为新的文件管理结构44包括更新的文件数据的CA,并且因此被存储进与原始的文件管理结构不同的CA。作为这一操作的结果,复制源文件(43)和复制目的地文件(44)被明确地识别为不同的文件。
如上所述生成的两个文件具有一种自然的结构,它只共享未被更新的数据而彼此不参考被更新部分的数据。另外,在这一操作期间,复制源文件管理结构未发生改变。因此,无需冻结复制源文件的改变。
另外,根据本发明的存储系统被配置成即使在文件管理结构43和44的CA发生如上所述的改变时,仍防止目录管理结构32被存储进另一CA。具体地说,本示例性实施例的CAS单元21分别利用标识符提供将被存储的文件以及存储文件的目录,并且标识符在文件和目录被生成时被给定并且直到被删除之前都不会改变。如图5所示,在CAS单元21之内生成并管理对应映射50,在该对应映射50中,使标识符对应于包括具有该标识符的文件的块(数据)的CA的文件管理结构的CA。另外,如图5所示,在对应映射50中,使标识符与指定具有该标识符的目录的目录管理结构的CA对应。另外,目录管理结构具有文件名称与标识符之间的对应,而非将被参考的文件的名称或另一目录的文件的名称与CA之间的对应。
例如,在图5的示例中,文件F1的标识符“id2”与文件F1的文件管理结构43的CA“CA2”之间的对应被存储进对应映射50,并且文件F1的标识符“id2”被目录管理结构32参考。另外,目录管理结构32的目录的标识符“id1”与目录管理结构32的CA“CA1”之间的对应被存储进对应映射50,并且目录管理结构32的标识符“id1”被更高的目录管理结构31参考。因此,如图5中的虚线箭头所示,可以通过在对应映射50中参考与目录管理结构32、33中所存储的参考目的地的标识符相对应的CA,来参考目标目录的文件。
利用上述配置,可以只通过改变文件的标识符与CA的对应映射50而无需改变目录管理结构来更新文件。例如,如图6所示,在将文件F1的数据内容更新成文件F1’时,参考文件F1的文件管理结构43被改变成新的文件管理结构44,并且在这种情况下,只有与文件F1的标识符“id2”相对应的CA被改变成文件管理结构44的CA“CA3”(见图6中的阴影部分)。
<第二示例性实施例>
接下来,将参考图7至图9来描述本发明的第二示例性实施例。图7是示出了的第二示例性实施例中的存储系统的配置和操作的框图,并且图8和图9是示出了在CAS单元中复制文件的方面的框图。
为方便起见,所描述的是目录管理结构被配置成直接保持CA,但是实际上,如第一示例性实施例中参考图6所描述的,存储在目录管理结构中的是标识符而不是CA,并且使标识符与将被参考的CA相对应的对应映射被存储在CAS单元中。
首先,本示例性实施例中的存储系统被一个或多个具有算数设备和存储设备的信息处理设备配置,类似于上述第一示例性实施例。该存储系统包括文件复制即时生成功能110和CAS文件系统管理功能120,它们通过向算数设备的程序安装而被构造,如图7所示。CAS文件系统管理功能120包括CA获取单元121,路径分析单元122以及具有目录管理结构获取单元124和目录管理结构更新单元125的CA设置单元123。在存储设备中,形成有CAS单元130。
本示例性实施例中的存储系统的CAS单元130存储如图8中示出的内容可寻址文件系统的数据结构,并且存储两个文件系统,即文件系统1和文件系统2。存储在CAS单元130中的文件系统的数目不限于两个,而是可以存储多个文件系统。CAS文件系统管理功能120(数据存储控制单元)具有执行对每个文件系统的管理的功能。下面,将参考图7至图9来描述存储系统的操作。
首先,如图7所示,当作出文件复制请求时,文件复制即时生成功能110接收复制源文件路径(文件说明信息(路径信息))和复制目的地文件路径的输入,复制源文件路径表示将被复制的文件的存储位置,复制目的地文件路径表示复制目的地文件的存储位置(图7中的S1)。继而,文件复制即时生成功能110将复制源文件路径传递至管理文件系统1的数据的CAS文件系统管理功能120的CA获取单元121(图7中的S2)。
CA获取单元121(地址数据获取单元)通过使用路径分析单元122来分析复制源文件路径(图7中的S3),并且在目录管理结构131a中检索CA132(参见图8),该目录管理结构131a指示参考来自CAS单元130的路径所指定的文件(图8中示出的阴影“数据”)(图7中的S4)。继而,CA获取单元121将检索的CA132返回给文件复制生成功能110(图7中的S5)。
随后,文件复制即时生成功能110将返回的CA132和复制目的地文件路径传递给管理文件系统2的数据的CAS文件系统管理功能120的CA设置单元123(图7中的S6)。
CA设置单元123(地址数据设置单元)通过使用路径分析单元122来分析复制目的地文件路径(图7中的S7),并且获得由路径指定的目录管理结构131b的CA(见图9)。继而,CA设置单元123将目录管理结构131b的CA作为输入传递给目录管理结构获取单元124。目录管理结构获取单元124检索与从CAS单元130传递的CA相对应的目录管理结构131b(图7中的S8),并且返回至CA设置单元123。
随后,CA设置单元123将目录管理结构131b作为输入传递给目录管理结构更新单元125。目录管理结构更新单元125将文件名称与CA132之间的对应添加至目录管理结构131b(见图9中的阴影部分),并且向CAS单元130写入和返回更新的目录管理结构131b(图7中的S9)。
因此,指示属于文件系统1的文件管理结构133的CA132被复制到属于文件系统2的目录管理结构131b中,并且因此,完成了文件从文件系统1向文件系统2的复制。
由此,本发明的存储系统可以实现文件的即时复制,不管文件的大小如何都无需大量数据的输入/输出。另外,本发明的存储系统可以在存在于相同的内容可寻址存储系统上的两个文件系统之间复制文件。
尽管在以上描述中,文件的路径信息被用作向文件复制即时生成功能110的输入,但是指定文件系统的关键字信息(文件系统的名称)和被给予文件的文件标识符可被用作用于指定复制源文件和复制目的地文件的信息。根据这种信息,首先,CA获取单元121可以指定复制源文件的存储位置并且获得复制源文件的CA,并且CA设置单元123可以指定位于复制目的地目录的文件并且进行定位以便参考所获得的CA而非文件,从而复制文件。因此,即使在文件复制目的地的路径信息未被公开时也可以复制文件,只要文件系统的名称和标识符已公开即可。复制目的地文件应该事先生成,并且其中可以存在任何数据(文件可以是空的)。
<附记>
以上公开的示例性实施例的全部或部分可以被描述为如下附记。以下,将参考图10对本发明中的存储系统的配置的概要进行描述。然而,本发明不限于下列配置。
(附记1)
存储系统220包括:
存储设备220,用于存储对文件进行配置的分割数据以及还存储基于参考目的地的数据内容和存储位置的地址数据,该地址数据参考分割数据或其他地址数据;以及
数据存储控制单元210,用于在分割数据或其他地址数据将被新近存储进存储设备、并且将被新近存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,进行控制以通过使用地址数据来参考已存储在存储设备中的数据作为将被新近存储的分割数据或其他地址数据,
其中数据存储控制单元210包括:地址数据获取单元211,用于接受指定存储在存储设备中的复制目标文件的文件说明信息,并且基于文件说明信息获取复制目标文件的地址数据;以及地址数据设置单元212,用于在存储设备中设置获取的地址数据,以使得复制目标文件被存储进复制目的地目录。
(附记2)
根据附记1的存储系统,其中:
存储设备被配置成存储文件管理结构数据和目录管理结构数据,该文件管理结构数据存储参考对文件进行配置的多个分割数据的多个地址数据,目录管理结构数据存储参考文件管理结构数据的地址数据的并且指定目录,该目录是地址数据的参考目的地中所存储的文件的存储位置;
地址数据获取单元被配置成基于文件说明信息指定存储参考对复制目标文件进行配置的分割数据的地址数据的文件管理结构数据,并且获取参考该文件管理结构数据的地址数据;以及
地址数据设置单元被配置成将由地址数据获取单元获取的地址数据复制到指定位于复制目标文件的复制目的地的目录的目录管理结构数据。
(附记3)
根据附记2的存储系统,其中:
存储设备被配置成存储使得被给予每个文件的标识符对应于参考该文件的文件管理结构数据的地址数据,并且还存储被给予地址数据所参考的文件的标识符以作为参考目录管理结构数据中的参考文件管理结构数据的地址数据;以及
数据存储控制单元被配置成基于在目录管理结构数据中被存储为地址数据的标识符并且基于对应映射来参考文件。
(附记4)
根据附记3的存储系统,其中存储设备被配置成:存储目录管理结构数据,目录管理结构数据存储参考其他目录结构管理数据的地址数据,并且还向对应映射中存储使得被给予每个目录的标识符与指定目录的目录管理结构数据的地址数据相对应的对应映射;并且存储被给予地址数据所参考的目录的标识符,作为目录管理结构数据中的参考其他目录结构管理数据的地址数据。
(附记5)
根据附记3或4的存储系统,其中数据存储控制单元被配置成在改变文件的数据内容时,改变在对应映射中与目录的标识符相对应的地址数据。
(附记6)
根据附记1至5中的任一项的存储系统,其中地址数据获取单元被配置成接受表示复制目标文件的存储位置的路径信息作为文件说明信息,并且获取参考由路径信息指定的文件的地址数据。
(附记7)
根据附记3至5中的任一项的存储系统,其中地址数据获取单元被配置成接受指定存储复制目标文件的文件系统的文件系统说明信息和文件的标识符作为文件说明信息,并且获取参考由文件系统说明信息和文件的标识符指定的文件的地址数据。
(附记8)
一种计算机程序包括指令,该指令用于:
使信息处理设备实现数据存储控制单元,信息处理设备连接至存储设备,存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,地址数据参考分割数据或者其他地址数据,数据存储控制单元用于在分割数据或其他地址数据新近将被存储到存储设备中、并且新近将被存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,控制以通过使用地址数据来参考已存储在存储设备中的数据作为新近将被存储的分割数据或其他地址数据;以及
使数据存储控制单元实现地址数据获取单元和地址数据设置单元,地址数据获取单元用于接受指定存储在存储设备中的复制目标文件的文件说明信息,并且基于文件说明信息获取复制目标文件的地址数据,地址数据设置单元用于在存储设备中设置获取的地址数据以使得复制目标文件被存储在复制目的地目录中。
(附记9)
根据附记8的计算机程序,其中:
存储设备被配置成存储文件管理结构数据并且还存储目录管理结构数据,文件管理结构数据存储参考配置文件的多个分割数据的多个地址数据,目录管理结构数据存储参考文件管理结构数据的地址数据并且指定目录,目录是地址数据的参考目的地中所存储的文件的存储位置;
地址数据获取单元被配置成基于文件说明信息来指定存储参考配置复制目标文件的分割数据的地址数据的文件管理结构数据,并且获取参考文件管理结构数据的地址数据;以及
地址数据设置单元被配置成将由地址数据获取单元获取的地址数据复制到指定位于复制目标文件的复制目的地中的目录的目录管理结构数据。
(附记10)
一种数据存储方法,包括由连接至存储设备的信息处理设备执行以下操作,存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,地址数据参考分割数据或其他地址数据,包括:
在分割数据或其他地址数据被新近存储到存储设备中、并且新近将被存储的分割数据或其他地址数据具有与已存储在存储设备中的数据相同的数据内容的情况下,执行数据存储控制,以通过使用地址数据来参考已存储在存储设备中的数据作为新近将被存储的分割数据或其他地址数据;以及
接受指定存储在存储设备中的复制目标文件的文件说明信息,基于文件说明信息来获取复制目标文件的地址数据,并且在存储设备中设置获取的地址数据以使得复制目标文件被存储到复制目的地目录中。
(附记11)
根据附记10的数据存储方法,其中:
由存储设备存储文件管理结构数据并且还存储目录管理结构数据,文件管理结构数据存储参考配置文件的多个分割数据的多个地址数据,目录管理结构数据存储参考文件管理结构数据的地址数据并且指定目录,目录是地址数据的参考目的地中所存储的文件的存储位置;
由信息处理设备基于文件说明信息来指定存储参考配置复制目标文件的分割数据的地址数据的文件管理结构数据,获取参考文件管理结构数据的地址数据,并且将由地址数据获取单元获取的地址数据复制到指定位于复制目标文件的复制目的地中的目录的目录管理结构数据。
在以上描述的每个示例性实施例中,程序被存储在存储设备或记录在计算机可读记录介质中。例如,记录介质是便携式介质,诸如,软盘、光盘、磁光盘和半导体存储器。
尽管已经参考各个示例性实施例对本发明进行描述,但是本发明并不限于以上描述的示例性实施例。本发明的配置和细节可以以各种能够被本领域的技术人员理解的方式、在本发明的范围内被修改。
本发明基于并要求2011年01月28日提交的日本专利申请号2011-016230的优先权的权益,其公开以引用方式被完全并入于此。
参考标号的描述
1 存储系统
10 数据存储控制单元
11 数据到哈希转换功能
12 哈希到CA转换功能
13 参考功能
20 存储设备
21 CAS单元
31-33 目录管理结构
41-44 文件管理结构
50 对应映射
110 文件复制即时生成功能
120 CAS文件系统管理功能
121 CA获取单元
122 路径分析单元
123 CA设置单元
124 目录管理结构获取单元
125 目录管理结构更新单元
130 CAS单元
131a、131b 目录管理结构
132 CA
133 文件管理结构
200 存储系统
210 数据存储控制单元
211 地址数据获取单元
212 地址数据设置单元
220 存储设备

Claims (9)

1.一种存储系统,包括:
存储设备,用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,所述地址数据参考所述分割数据或其他地址数据;以及
数据存储控制单元,用于在所述分割数据或所述其他地址数据新近将被存储到所述存储设备中、并且新近将被存储的所述分割数据或所述其他地址数据具有与已存储在所述存储设备中的数据相同的数据内容的情况下,控制以通过使用所述地址数据来参考已存储在所述存储设备中的所述数据作为新近将被存储的所述分割数据或所述其他地址数据,
其中所述数据存储控制单元包括地址数据获取单元和地址数据设置单元,所述地址数据获取单元用于接受指定存储在所述存储设备中的复制目标文件的文件说明信息以及基于所述文件说明信息来获取所述复制目标文件的所述地址数据,所述地址数据设置单元用于在所述存储设备中设置获取的所述地址数据以使得所述复制目标文件被存储到复制目的地目录中。
2.根据权利要求1所述的存储系统,其中:
所述存储设备被配置成存储文件管理结构数据并且还存储目录管理结构数据,所述文件管理结构数据存储参考对所述文件进行配置的多个所述分割数据的多个地址数据,所述目录管理结构数据存储参考所述文件管理结构数据的地址数据并且指定目录,所述目录是所述地址数据的参考目的地中所存储的所述文件的存储位置;
所述地址数据获取单元被配置成基于所述文件说明信息来指定存储参考对所述复制目标文件进行配置的分割数据的地址数据的所述文件管理结构数据,并且获取参考所述文件管理结构数据的地址数据;以及
所述地址数据设置单元被配置成将由所述地址数据获取单元获取的所述地址数据复制到指定位于所述复制目标文件的复制目的地中的目录的所述目录管理结构数据中。
3.根据权利要求2所述的存储系统,其中:
所述存储设备被配置成存储使被给予每个所述文件的标识符对应于参考所述文件的所述文件管理结构数据的地址数据的对应映射,并且还存储被给予所述地址数据所参考的所述文件的所述标识符,作为所述目录管理结构数据中的参考所述文件管理结构数据的所述地址数据;以及
所述数据存储控制单元被配置成基于被存储为所述目录管理结构数据中的所述地址数据的所述标识符并且基于所述对应映射来参考所述文件。
4.根据权利要求3所述的存储系统,其中所述存储设备被配置成:存储所述目录管理结构数据,所述目录管理结构数据存储参考其他目录结构管理数据的地址数据,并且还向所述对应映射中存储使得被给予每个所述目录的标识符与指定所述目录的所述目录管理结构数据的地址数据相对应的对应映射;并且存储被给予所述地址数据所参考的所述目录的所述标识符,作为所述目录管理结构数据中的参考所述其他目录结构管理数据的所述地址数据。
5.根据权利要求3或4所述的存储系统,其中所述数据存储控制单元被配置成在改变所述文件的数据内容时,改变在所述对应映射中与所述目录的所述标识符相对应的所述地址数据。
6.根据权利要求1至5中的任一项所述的存储系统,其中所述地址数据获取单元被配置成接受表示所述复制目标文件的存储位置的路径信息作为所述文件说明信息,并且获取参考由所述路径信息指定的所述文件的所述地址数据。
7.根据权利要求3至5中的任一项所述的存储系统,其中所述地址数据获取单元被配置成接受指定存储所述复制目标文件的文件系统的文件系统说明信息和所述文件的标识符作为所述文件说明信息,并且获取参考由所述文件系统说明信息和所述文件的所述标识符指定的文件的所述地址数据。
8.一种包括指令的计算机程序,所述指令用于:
使信息处理设备实现数据存储控制单元,所述信息处理设备连接至存储设备,所述存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,所述地址数据参考所述分割数据或者其他地址数据,所述数据存储控制单元用于在所述分割数据或所述其他地址数据新近将被存储到所述存储设备中、并且新近将被存储的所述分割数据或所述其他地址数据具有与已存储在所述存储设备中的数据相同的数据内容的情况下,控制以通过使用所述地址数据来参考已存储在所述存储设备中的所述数据作为新近将被存储的所述分割数据或所述其他地址数据;以及
使所述数据存储控制单元实现地址数据获取单元和地址数据设置单元,所述地址数据获取单元用于接受指定存储在所述存储设备中的复制目标文件的文件说明信息,并且基于所述文件说明信息获取所述复制目标文件的所述地址数据,所述地址数据设置单元用于在所述存储设备中设置获取的所述地址数据以使得所述复制目标文件被存储在复制目的地目录中。
9.一种数据存储方法,包括由连接至存储设备的信息处理设备执行以下操作,所述存储设备用于存储对文件进行配置的分割数据并且还存储基于参考目的地的数据内容和存储位置的地址数据,所述地址数据参考所述分割数据或其他地址数据,所述操作包括:
在所述分割数据或所述其他地址数据被新近存储到所述存储设备中、并且新近将被存储的所述分割数据或所述其他地址数据具有与已存储在所述存储设备中的数据相同的数据内容的情况下,执行数据存储控制,以通过使用所述地址数据来参考已存储在所述存储设备中的所述数据作为新近将被存储的所述分割数据或所述其他地址数据;以及
接受指定存储在所述存储设备中的复制目标文件的文件说明信息,基于所述文件说明信息来获取所述复制目标文件的所述地址数据,并且在所述存储设备中设置获取的所述地址数据以使得所述复制目标文件被存储到复制目的地目录中。
CN201280006796.0A 2011-01-28 2012-01-18 存储系统 Active CN103380418B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011016230 2011-01-28
JP2011-016230 2011-01-28
PCT/JP2012/000253 WO2012101983A1 (ja) 2011-01-28 2012-01-18 ストレージシステム

Publications (2)

Publication Number Publication Date
CN103380418A true CN103380418A (zh) 2013-10-30
CN103380418B CN103380418B (zh) 2016-04-13

Family

ID=46580562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280006796.0A Active CN103380418B (zh) 2011-01-28 2012-01-18 存储系统

Country Status (6)

Country Link
US (1) US20150302021A1 (zh)
EP (1) EP2669806B1 (zh)
JP (1) JP5477927B2 (zh)
CN (1) CN103380418B (zh)
CA (1) CA2825891A1 (zh)
WO (1) WO2012101983A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107145449A (zh) * 2016-03-01 2017-09-08 日本电气株式会社 存储设备和存储方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170277477A1 (en) * 2014-10-03 2017-09-28 Agency For Science, Technology And Research Distributed Active Hybrid Storage System
CN104935966A (zh) * 2015-06-03 2015-09-23 无锡天脉聚源传媒科技有限公司 一种分类视频信息的复制方法及装置
JP6648596B2 (ja) * 2016-03-28 2020-02-14 日本電気株式会社 ファイルシステム制御装置、ストレージシステム、ファイルシステム制御方法、及び、プログラム
US11030187B1 (en) * 2016-05-18 2021-06-08 Salesforce.Com, Inc. Distributed database systems and structures
JP6911443B2 (ja) * 2017-03-27 2021-07-28 日本電気株式会社 情報処理装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1188929A (zh) * 1996-11-20 1998-07-29 松下电器产业株式会社 发送数据的方法、发送数据的设备以及媒体
EP1172796A1 (en) * 1999-03-08 2002-01-16 Faith, Inc. Data reproducing device, data reproducing method, and information terminal
CN1386262A (zh) * 2000-07-24 2002-12-18 索尼计算机娱乐公司 图像处理系统、装置、方法和计算机程序

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4385371A (en) * 1981-02-09 1983-05-24 Burroughs Corporation Approximate content addressable file system
JP3294326B2 (ja) * 1992-07-09 2002-06-24 株式会社日立製作所 データ処理方法および装置
GB0025226D0 (en) * 2000-10-14 2000-11-29 Ibm Data storage system and method of storing data
US6643654B1 (en) * 2001-06-25 2003-11-04 Network Appliance, Inc. System and method for representing named data streams within an on-disk structure of a file system
US7051050B2 (en) * 2002-03-19 2006-05-23 Netwrok Appliance, Inc. System and method for restoring a single file from a snapshot
JP4211285B2 (ja) * 2002-05-24 2009-01-21 株式会社日立製作所 ネットワークストレージシステムの仮想一元化方法及び装置
DE10237875A1 (de) * 2002-08-19 2004-03-04 Siemens Ag Vorrichtung, insbesondere Automatisierungsgerät, mit in Datei gespeicherter Dateiverzeichnisstruktur
US7805470B2 (en) * 2005-06-23 2010-09-28 Emc Corporation Methods and apparatus for managing the storage of content in a file system
US7958101B1 (en) * 2006-01-03 2011-06-07 Emc Corporation Methods and apparatus for mounting a file system
US8315984B2 (en) * 2007-05-22 2012-11-20 Netapp, Inc. System and method for on-the-fly elimination of redundant data
US7992037B2 (en) 2008-09-11 2011-08-02 Nec Laboratories America, Inc. Scalable secondary storage systems and methods
JP5313600B2 (ja) * 2008-09-16 2013-10-09 株式会社日立製作所 ストレージシステム、及びストレージシステムの運用方法
JP5229137B2 (ja) 2009-07-07 2013-07-03 株式会社リコー インク充填用治具、インク充填装置、インク充填方法、インク充填キット
JP2010113587A (ja) * 2008-11-07 2010-05-20 Hitachi Ltd ストレージシステムおよびストレージシステムによるファイルシステムの管理方法
JP5391705B2 (ja) * 2009-01-27 2014-01-15 日本電気株式会社 ストレージシステム
JP2010225024A (ja) * 2009-03-25 2010-10-07 Hitachi Ltd ストレージ装置とそのファイル制御方法およびストレージシステム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1188929A (zh) * 1996-11-20 1998-07-29 松下电器产业株式会社 发送数据的方法、发送数据的设备以及媒体
EP1172796A1 (en) * 1999-03-08 2002-01-16 Faith, Inc. Data reproducing device, data reproducing method, and information terminal
CN1386262A (zh) * 2000-07-24 2002-12-18 索尼计算机娱乐公司 图像处理系统、装置、方法和计算机程序

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107145449A (zh) * 2016-03-01 2017-09-08 日本电气株式会社 存储设备和存储方法

Also Published As

Publication number Publication date
CA2825891A1 (en) 2012-08-02
EP2669806B1 (en) 2018-07-04
JP5477927B2 (ja) 2014-04-23
JPWO2012101983A1 (ja) 2014-06-30
CN103380418B (zh) 2016-04-13
US20150302021A1 (en) 2015-10-22
EP2669806A1 (en) 2013-12-04
WO2012101983A1 (ja) 2012-08-02
EP2669806A4 (en) 2017-05-03

Similar Documents

Publication Publication Date Title
CN101743546B (zh) 用于提供快照的文件系统的分层存储管理
JP4157858B2 (ja) ストレージ・エリア・ネットワーク(san)ファイル・システムの並列高速バックアップ
KR100962055B1 (ko) 컴퓨터 시스템들간의 객체 공유
US7836266B2 (en) Managing snapshot history in a data storage system
CN101258493B (zh) 用于在顺序存取数据存储子系统中执行搜索操作的系统和方法
CN100583096C (zh) 管理数据删除的方法
US7657721B2 (en) Method of maintaining a plurality of snapshots, server apparatus and storage apparatus
US7320059B1 (en) Methods and apparatus for deleting content from a storage system
US7636704B2 (en) Methods and apparatus for scheduling an action on a computer
CN103380418B (zh) 存储系统
US7653800B2 (en) Continuous data protection
US7350041B1 (en) Methods and apparatus for managing the storage of content
US20070061540A1 (en) Data storage system using segmentable virtual volumes
CN102779180A (zh) 数据存储系统的操作处理方法,数据存储系统
CN101147118A (zh) 用于重新配置存储系统的方法和装置
US7549029B2 (en) Methods for creating hierarchical copies
US20210224161A1 (en) Efficient io processing in a storage system with instant snapshot, xcopy, and unmap capabilities
CN100403269C (zh) 用于管理关于目标卷与源卷之间关系的信息的方法和系统
US20220011977A1 (en) Storage system, control method, and recording medium
CN114153394A (zh) 一种数据存储管理方法、装置及设备
JP2007323589A (ja) 仮想ボリュームのコピー制御方法、コピー制御装置、およびコピー制御プログラム
TWI475419B (zh) 用於在儲存系統上存取檔案的方法和系統
JP2004013786A (ja) データ記憶方法およびデータ記憶制御装置
WO2021189312A1 (en) Meta server crash recovery in object storage system using enhanced meta structure
WO2021189314A1 (en) Data server crash recovery in object storage system using enhanced meta structure

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: JAPAN ELECTRICAL SCHEME INNOVATION CORPORATION

Free format text: FORMER OWNER: NEC SOFTWARE NORTHEAST CORPORATION

Effective date: 20141023

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141023

Address after: Tokyo, Japan

Applicant after: NEC Corp.

Applicant after: Japan Electrical Scheme Innovation Corporation

Address before: Tokyo, Japan

Applicant before: NEC Corp.

Applicant before: NEC Software Tohoku, Ltd.

C14 Grant of patent or utility model
GR01 Patent grant