CN1752967A - 一种使用分布式数据库储存文件信息的系统及方法 - Google Patents
一种使用分布式数据库储存文件信息的系统及方法 Download PDFInfo
- Publication number
- CN1752967A CN1752967A CN 200410080149 CN200410080149A CN1752967A CN 1752967 A CN1752967 A CN 1752967A CN 200410080149 CN200410080149 CN 200410080149 CN 200410080149 A CN200410080149 A CN 200410080149A CN 1752967 A CN1752967 A CN 1752967A
- Authority
- CN
- China
- Prior art keywords
- fileinfo
- data base
- file
- distributed data
- disk
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种使用分布式数据库储存文件信息的系统及方法,在磁盘系统中的各磁盘设备均包含有一分布式数据库,在该分布式数据库中储存有该磁盘设备中对应文件的文件信息,供应用程序调用,这样即使磁盘设备被移动,也不会影响文件信息的调用,相关使用该文件信息的应用程序也不受影响。
Description
技术领域
本发明涉及一种文件信息储存系统及其储存方法,特别是涉及一种使用分布式数据库储存文件信息的系统及其储存方法。
背景技术
请参见图1,该图是现有技术应用数据库记录文件信息的结构示意图。如图1所示,应用程序对磁盘设备11中的文件系统进行调用时,通常需要使用储存在数据库12中的文件信息。当文件信息发生变化时,需要修改数据库12中对应的项。当今使用的硬件环境很多都支持磁盘设备11的热插拔,如图2所示,可以将一台磁盘系统(源磁盘系统101)上的磁盘设备11移动到另一台磁盘系统(目标磁盘系统102)上。这样的操作通常会出现问题,原因是当磁盘设备11从源磁盘系统101移动到目标磁盘系统102上的时候,对应数据库12中的文件信息并没有移动,因而会导致文件信息的接口不能正常的使用,从而使相应的应用程序不能正常的运行。源磁盘系统101上的数据库12中还存着已经移动的磁盘设备11上的文件信息,执行使用到文件信息的接口时,找不到相应的文件,会产生错误,而目标磁盘系统102的数据库12中也不存在移动过来的磁盘设备11上的文件信息,同样会出现错误。
发明内容
本发明所要解决的技术问题在于提供一种使用分布式数据库储存文件信息的系统及方法,当磁盘设备在不同的磁盘系统中移动的时候,可以正常使用文件信息的接口,从而使应用程序正常运行。
为了实现上述目的,本发明提供了一种使用分布式数据库储存文件信息的方法,其包括如下步骤:
在每个磁盘设备上分别建立分布式数据库;及
在所述分布式数据库中储存所述磁盘设备中的文件信息,包括:
获取所述磁盘设备的文件信息;
建立所述文件信息的ID值;及
以所述ID值为主键,将所述文件信息储存到所述分布式数据库中。
所述的使用分布式数据库储存文件信息的方法,其中,所述获取所述磁盘设备的文件信息的步骤,为获取磁盘新写入文件的信息。
所述的使用分布式数据库储存文件信息的方法,其中,所述将所述文件信息储存到所述分布式数据库中的步骤,进一步包括判断所述分布式数据库中是否已经储存所述文件信息的步骤。
本发明还提供了一种在分布式数据库中调用文件信息的方法,用以提供应用程序对磁盘设备文件信息的调用,包括如下步骤:
获取所述应用程序调用文件的ID值;
根据所述ID值确定对应的磁盘设备中的分布式数据库,并在所述分布式数据库中搜索相应的文件信息;
将搜索到的所述文件信息填入一自定义结构中;及
所述的分布式数据库中调用文件信息的方法,其中,所述自定义结构包括:ID值、文件信息、文件所在的磁盘信息以及文件移动的信息。
所述的分布式数据库中调用文件信息的方法,其中,所述文件信息包括文件的名称、文件的大小、文件的读些属性、用户访问文件权限以及用户最后访问文件的时间。
所述的分布式数据库中调用文件信息的方法,其中,所述文件所在的磁盘信息包括磁盘的UUID以及磁盘的类型。
所述的分布式数据库中调用文件信息的方法,其中,进一步包括判断所述自定义结构是否完整的步骤。
本发明提供了一种在分布式数据库中删除文件信息的方法,包括如下步骤:
获取所要删除文件的ID值;
根据所述ID值在该数据库中搜索相应的文件信息;
从数据库中删除对应的文件信息;及
对磁盘上的文件进行删除操作。
本发明提供了一种具有分布式数据库的磁盘系统,其中,所述磁盘系统中的各磁盘设备均包含有一分布式数据库,所述分布式数据库用以储存所述磁盘设备中对应文件的文件信息,该文件信息供应用程序的调用。
本发明使用分布式的数据库储存磁盘设备上的文件信息,对文件信息的储存方式进行了变革,在每一个磁盘设备上建立一个数据库储存文件信息,这样即使磁盘设备被移动了,也不影响文件信息,相关使用文件信息的应用程序也不受影响。而且由于每一个磁盘设备上建立存储文件信息的数据库,存储相应磁盘设备上的文件信息,资料容量不会太大,比起将所有的资料存储在一个数据库中,检索速度提高。当单一的磁盘设备发生损毁情况时,也不影响应用程序对其他的磁盘设备上的文件信息的读取。
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
附图说明
图1为现有技术使用数据库记录文件信息的示意图;
图2为现有技术磁盘移动时,数据库中文件信息的示意图;
图3为本发明的使用分布式数据库储存文件信息的系统的架构图;
图4为本发明的磁盘设备移动时,相应文件信息共同移动的示意图;
图5为本发明的自定义结构的示意图;
图6为本发明的应用程序调用文件信息的流程图;
图7为本发明的文件信息储存过程的流程图;
图8为本发明的文件删除过程的流程图;
图9为本发明实施例的磁盘设备移动后,调用文件信息的示意图;及
图10为本发明实施例的自定义结构的示意图。
其中,附图标记如下:
10-磁盘系统
11-磁盘设备
12-数据库
13-分布式数据库
101-源磁盘系统
102-目标磁盘系统
具体实施方式
根据本发明的使用分布式数据库储存文件信息的系统及方法,请参见图3,该图为本发明的使用分布式数据库储存文件信息的系统的架构图。如图3所示,本发明在磁盘系统10的每一个磁盘设备11中均建立数据库,这里称这些数据库为分布式数据库13,该分布式数据库13用以储存该磁盘设备11上的文件信息,供应用程序调用。这样,如图4所示,当磁盘设备11由源磁盘系统101移向目标磁盘系统102时,即使是移动了磁盘设备11,对应的分布式数据库13中的文件信息也会与该磁盘设备11一起被移动,可以保证使用文件信息的应用程序可以正常的使用这些信息,应用程序可以正常运行。
根据本发明的磁盘系统10在向磁盘设备11存储文件之后,将对应的文件信息也存储到分布式数据库13中,当磁盘设备11移动的时候,分布式数据库13中的信息也同时移动到另一个设备上。因此,访问上面的数据库并不受影响。
应用程序调用文件信息的运作流程如图6所示,首先获取该应用程序所调用文件的ID值(步骤610),该值是唯一的。根据这个ID值可以确定文件具体存储的磁盘设备,对应的可以知道存储该文件信息的数据库。数据库中也是以这个ID值作为主键,搜索出所记录的相应的文件信息。即根据该ID值确定对应的磁盘设备中的数据库,并在该数据库中搜索对应的文件信息(步骤620)。将检索到的信息填入一自定义结构中(步骤630),其中该自定义结构包含应用程序可能用到的所有信息。再判断该结构是否完整(步骤640),如果完整则以ID值为主要的标示将该自定义结构返回给该应用程序使用(步骤650),如果不完整则报出错信息(步骤660)。
其中,该自定义结构如图5所示,包括ID、文件的信息、文件所在的磁盘信息、文件移动的信息。其中文件的信息包括文件名称,文件的大小,文件的读写属性,用户访问文件权限,用户最后访问文件的时间等。文件所在磁盘的信息包括磁盘的UUID(Universal Unique Identifier:唯一识别码),磁盘的类型等,文件移动的信息包括文件是否被移动,文件移动到的设备信息。
请参见图7,该图是本发明的文件信息储存过程的流程图。
当磁盘设备出现文件写入操作的时候,将文件信息存储在磁盘上的分布式数据库中,首先在每个磁盘设备上分别建立分布式数据库(步骤710),对应磁盘上的数据库只记录该磁盘上的文件信息。然后通过函数得到相应的文件信息,按照固定的方式为该信息建立ID值(步骤720),该ID值包含着文件所在的磁盘设备的信息,将ID值和文件信息填入到自定义的结构中。以ID值为标示,在该磁盘的数据库中进行检索(步骤730),然后判断得到的文件信息是否存在(步骤740),如果发现相同的ID值,则该文件已经被存储过了,报出错信息并返回(步骤760),如果没有发现相同的ID值,即得到的文件信息不存在,则以ID值为主键,将文件信息存储到分布式数据库中(步骤750),最后再判断文件信息是否成功存入分布式数据库(步骤770),若成功报成功信息(步骤780),否则报出错信息(步骤790)。
请参见图8,该图是本发明的文件删除过程的流程图。
若将文件从磁盘设备上删除,则需要将其在分布式数据库中的信息也删除掉。首先,使用自定义的函数得到将要删除文件的ID值(步骤810),根据该ID值在该数据库中搜索相应的文件信息(步骤820),然后判断数据库中是否存在该ID值(步骤830),如果存在,由于该ID值是数据库中的主键,则可以找到相应的信息,将该相应的文件信息从分布式数据库中删除(步骤840),再判断对应项是否已删除(步骤850),如果未删除,则提示错误信息(步骤860),如已删除则再删除磁盘上相应的文件(步骤870),若成功删除,则提示成功信息(步骤880),如果数据库中不存在该ID值,则直接跳到步骤870删除磁盘上相应的文件。
请参见图9,该图为本发明实施例的磁盘设备移动后,调用文件信息的示意图。
在一台可以热插拔硬盘的磁盘系统10上,在磁盘设备11上建立分布式数据库13,将磁盘设备11上的文件信息存储到该分布式数据库13中。应用程序从该分布式数据库13中读取文件信息,将磁盘设备11上的文件移动到其它的磁盘设备上,利用相应的文件信息在原来的磁盘设备上建立文件索引,将文件移动的情况记录到分布式数据库13中,当访问原来磁盘上的文件时,应用程序会根据数据库中文件记录的情况,找到移动到的具体磁盘设备,将该磁盘设备上的文件移动回来,和原来的索引组成原来的文件,达到正常访问的目的。
本实施例的自定义结构如图10所示,包括ID、文件的信息、文件所在的磁盘信息、文件移动的信息。其中,文件的信息包括文件名称、文件的大小、文件的读写属性、用户访问文件权限、用户最后访问文件的时间。文件所在磁盘信息包括磁盘的UUID(Universal Unique Identifier:唯一识别码)、磁盘的类型。文件移动的信息包括文件是否被移动、文件移动到的设备的UUID、文件移动到的设备的位置信息、文件移动的时间、应用程序使用的句柄名称。
当磁盘设备上的文件移动到其它存储设备上,磁盘设备被移动到另一台机器上时,用户访问该磁盘设备上的文件,应用程序会从该磁盘设备的分布式数据库中得到文件信息以及文件移动到的具体存储设备的信息,并将文件从设备上移动回来,和磁盘设备上的索引组成文件,以便用户可以正常的访问。
当然,本发明还可有其他多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (10)
1、一种使用分布式数据库储存文件信息的方法,其特征在于,包括如下步骤:
在每个磁盘设备上分别建立分布式数据库;及
在所述分布式数据库中储存所述磁盘设备中的文件信息,又包括:
获取所述磁盘设备的文件信息;
建立所述文件信息的ID值;及
以所述ID值为主键,将所述文件信息储存到所述分布式数据库中。
2、根据权利要求1所述的使用分布式数据库储存文件信息的方法,其特征在于,所述获取所述磁盘设备的文件信息的步骤,是获取磁盘新写入文件的信息。
3、根据权利要求1所述的使用分布式数据库储存文件信息的方法,其特征在于,所述将所述文件信息储存到所述分布式数据库中的步骤,进一步包括判断所述分布式数据库中是否已经储存所述文件信息的步骤。
4、一种在分布式数据库中调用文件信息的方法,用以提供应用程序对磁盘设备文件信息的调用,包括如下步骤:
获取所述应用程序调用文件的ID值;
根据所述ID值确定对应的磁盘设备中的分布式数据库,并在所述分布式数据库中搜索相应的文件信息;
将搜索到的所述文件信息填入一自定义结构中;及
将所述自定义结构返回给所述应用程序。
5、根据权利要求4所述的分布式数据库中调用文件信息的方法,其特征在于,所述自定义结构包括:ID值、文件信息、文件所在的磁盘信息以及文件移动的信息。
6、根据权利要求5所述的分布式数据库中调用文件信息的方法,其特征在于,所述文件信息包括文件的名称、文件的大小、文件的读些属性、用户访问文件权限以及用户最后访问文件的时间。
7、根据权利要求5所述的分布式数据库中调用文件信息的方法,其特征在于,所述文件所在的磁盘信息包括磁盘的UUID以及磁盘的类型。
8、根据权利要求4所述的分布式数据库中调用文件信息的方法,其特征在于,进一步包括判断所述自定义结构是否完整的步骤。
9、一种在分布式数据库中删除文件信息的方法,包括如下步骤:
获取所要删除文件的ID值;
根据所述ID值在该数据库中搜索相应的文件信息;
从数据库中删除对应的文件信息;及
对磁盘上的文件进行删除操作。
10、一种具有分布式数据库的磁盘系统,其特征在于,所述磁盘系统中的各磁盘设备均包含有一分布式数据库,所述分布式数据库用以储存所述磁盘设备中对应文件的文件信息,该文件信息供应用程序的调用。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200410080149 CN1752967A (zh) | 2004-09-24 | 2004-09-24 | 一种使用分布式数据库储存文件信息的系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200410080149 CN1752967A (zh) | 2004-09-24 | 2004-09-24 | 一种使用分布式数据库储存文件信息的系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1752967A true CN1752967A (zh) | 2006-03-29 |
Family
ID=36679821
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200410080149 Pending CN1752967A (zh) | 2004-09-24 | 2004-09-24 | 一种使用分布式数据库储存文件信息的系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN1752967A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105095489A (zh) * | 2015-08-18 | 2015-11-25 | 浪潮(北京)电子信息产业有限公司 | 一种分布式文件删除方法、装置和系统 |
CN109101528A (zh) * | 2018-06-21 | 2018-12-28 | 深圳市买买提信息科技有限公司 | 数据处理方法、数据处理装置及电子设备 |
-
2004
- 2004-09-24 CN CN 200410080149 patent/CN1752967A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105095489A (zh) * | 2015-08-18 | 2015-11-25 | 浪潮(北京)电子信息产业有限公司 | 一种分布式文件删除方法、装置和系统 |
CN109101528A (zh) * | 2018-06-21 | 2018-12-28 | 深圳市买买提信息科技有限公司 | 数据处理方法、数据处理装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8843454B2 (en) | Elimination of duplicate objects in storage clusters | |
CN110162525B (zh) | 基于b+树的读写冲突解决方法、装置及存储介质 | |
CN101446984B (zh) | 一种文件存储方法、装置及文件删除方法和装置 | |
CN1839384A (zh) | 数据集比较与净变化处理 | |
CN102375852A (zh) | 建立数据索引的方法、利用该索引查询数据的方法和系统 | |
CN101067822A (zh) | 用于元数据的分级存储管理的方法和系统 | |
CN103229164B (zh) | 数据访问方法和装置 | |
CN109522283B (zh) | 一种重复数据删除方法及系统 | |
CN103902623A (zh) | 用于在存储系统上存取文件的方法和系统 | |
CN1975731A (zh) | 用于管理对数据库中数据的访问的系统和方法 | |
CN110888837A (zh) | 对象存储小文件归并方法及装置 | |
CN1555527A (zh) | 重组所存储的数据的系统和方法 | |
CN109189759B (zh) | Kv存储系统中的数据读取方法、数据查询方法、装置及设备 | |
CN100347705C (zh) | 一种合并文件的方法 | |
US20200311029A1 (en) | Key value store using generation markers | |
CN1752967A (zh) | 一种使用分布式数据库储存文件信息的系统及方法 | |
CN1851711A (zh) | 数据库访问的实现方法 | |
CN1661572A (zh) | 用于管理存储装置与主机设备间数据访问的方法 | |
CN113157692B (zh) | 一种关系型内存数据库系统 | |
CN112214356B (zh) | 文件数据恢复方法、装置、计算机设备及存储介质 | |
CN110413617B (zh) | 一种根据数据量的大小动态调节哈希表组的方法 | |
CN1235169C (zh) | 一种嵌入式系统的数据存放及其查找方法 | |
RU2389066C2 (ru) | Многомерная база данных и способ управления многомерной базой данных | |
CN111966670A (zh) | 基于镶嵌数据集的遥感数据分发方法、装置和管理平台 | |
Moss | Garbage collecting persistent object stores |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |