CN103324733A - 一种基于数据库的文件可重构存储及管理方法 - Google Patents

一种基于数据库的文件可重构存储及管理方法 Download PDF

Info

Publication number
CN103324733A
CN103324733A CN2013102672263A CN201310267226A CN103324733A CN 103324733 A CN103324733 A CN 103324733A CN 2013102672263 A CN2013102672263 A CN 2013102672263A CN 201310267226 A CN201310267226 A CN 201310267226A CN 103324733 A CN103324733 A CN 103324733A
Authority
CN
China
Prior art keywords
file
guid
database
value
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013102672263A
Other languages
English (en)
Inventor
梁效宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SICHUAN SALVATIONDATA INFORMATION SAFETY TECHNOLOGY Co Ltd
Original Assignee
SICHUAN SALVATIONDATA INFORMATION SAFETY TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SICHUAN SALVATIONDATA INFORMATION SAFETY TECHNOLOGY Co Ltd filed Critical SICHUAN SALVATIONDATA INFORMATION SAFETY TECHNOLOGY Co Ltd
Priority to CN2013102672263A priority Critical patent/CN103324733A/zh
Publication of CN103324733A publication Critical patent/CN103324733A/zh
Pending legal-status Critical Current

Links

Images

Abstract

一种基于数据库的文件可重构存储及管理方法,包括如下步骤:1)、在数据表中建立关键字段,存储GUID值;2)、在保存或上传文件时,生成GUID值,并将此GUID值作为数据表关键字段的值;3)、在读取文件时,先使用SQL找到需要读取的文件信息,并从数据表中取得GUID值;4)、数据库信息存在但文件系统丢失或目录结构混乱时,通过遍历数据库数据并根据GUID在外部存储介质中找到对应的文件;5)文件系统存储但数据库信息缺失,通过遍历文件系统并根据GUID及文件名中的其他信息重构部分数据库内容。本发明可保证在任何时候都能根据数据库信息关联到文件或从文件系统关联到数据库信息,不会发生文件或数据库读取失误。

Description

一种基于数据库的文件可重构存储及管理方法
技术领域
 本发明涉及数据库及文件存储领域,更具体的涉及将数据库信息对应到文件系统中存储的文件,并可通过文件名重构数据库记录的方法。
背景技术
基于数据库的文件存储及管理在各类数据库管理系统中应用广泛。目前有如下两种实现方式:
1、文件内容存放到各种存储介质,文件名、文件路径、大小等信息存储到数据库中。需要访问文件时,需首先从数据库提取文件信息,然后根据文件信息找到文件的存放位置,并使用文件。这种方式可以通过结构化查询语言(Structured Query Language,以下简称为SQL)快速定位文件信息,并能直接从外部存储介质中快速读取文件。但存在着如果数据库信息丢失或文件目录被意外打乱,使用者将无法对应或找不到目标文件的情况。
2、文件内容存放到数据库,文件名、文件路径、大小等信息也存储到数据库中。这种方式需要访问文件时,需要先从数据库中提取文件内容到本地,然后通过本地文件系统进行文件的读写操作。这种方式可以防止文件信息与文件内容脱节,单把大容量的文件直接存入数据库,在使用SQL查询数据时,效率很低。而且要使用文件必须要先从数据库完整提取文件内容到本地后,才能使用。如果文件较大,将不得不花费大量时间去等待文件下载。
SQL,structured query language,简称SQL。一种对关系数据库中的数据进行定义和操作的句法,为大多数关系数据库管理系统所支持的工业标准。
GUID,即Globally Unique Identifier(全球唯一标识符) 也称作UUID(Universally Unique IDentifier) 。 GUID是一个通过特定算法产生的二进制长度为128位的数字标识符,用于指示产品的唯一性。GUID 主要用于在拥有多个节点、多台计算机的网络或系统中,分配必须具有唯一性的标识符。GUID 的格式为“xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx”,其中每个 x 是 0-9 或 a-f 范围内的一个32位十六进制数。例如:6F9619FF-8B86-D011-B42D-00C04FC964FF 即为有效的 GUID 值。
 
发明内容
本发明研究开发了一种基于数据库的文件可重构存储及管理方法,目的在于:通过研究数据库和文件通过GUID进行关联,在任意一方缺失时,可通过另外一方进行重构处理。
本发技术方案:
一种基于数据库的文件可重构存储及管理方法,其特征在于,包括如下步骤:
1)、在数据表中建立关键字段,存储GUID值;
2)、在保存或上传文件时,生成GUID值,并将此GUID值作为数据表关键字段的值,且存入数据库系统;然后将文件名以GUID值开头存入外部存储介质,数据表数据通过GUID值和文件系统建立关联;
3)、在读取文件时,先使用SQL找到需要读取的文件信息,并从数据表中取得GUID值,然后根据GUID值到文件系统中定位以GUID开头的文件名,并读取使用;
4)、数据库信息存在但文件系统丢失或目录结构混乱时,通过遍历数据库数据并根据GUID在外部存储介质中找到对应的文件,然后重构文件系统;
5)如果文件系统存储但数据库信息缺失,可通过遍历文件系统并根据GUID及文件名中的其他信息重构部分数据库内容。
所述步骤2)中将文件名以GUID值开头的规则为:GUID + 空格 + 相关文件信息 + 扩展名。
    本发明的有益效果是:
本发明可实现一种使用GUID在数据库中存储数据以及使用GUID在文件系统中存储文件,并在任意一方发生缺失时,可通过GUID遍历并重构另外一方数据的管理及存储方法。此方法可保证在任何时候都能根据数据库信息关联到文件或从文件系统关联到数据库信息,不会发生文件或数据库的读取失误。并在一方数据发生缺失时,最大限度的重构数据。
附图说明
图1根据本发明的文件存储流程图。
图2是根据本发明的文件读取流程图。
图3是根据本发明的文件系统重构流程图。
图4是根据本发明的数据库信息重构流程图。
具体实施方式
下面结合实施例对本发明进行进一步描述。
实施例一:
一种基于数据库的文件可重构存储及管理方法,其特征在于,包括如下步骤:
1)、在数据表中建立关键字段,存储GUID值;
2)、在保存或上传文件时,生成GUID值,并将此GUID值作为数据表关键字段的值,且存入数据库系统;然后将文件名以GUID值开头GUID + 空格 + 相关文件信息 + 扩展名的规则存入外部存储介质,数据表数据通过GUID值和文件系统建立关联;
3)、在读取文件时,先使用SQL找到需要读取的文件信息,并从数据表中取得GUID值,然后根据GUID值到文件系统中定位以GUID开头的文件名,并读取使用;
4)、数据库信息存在但文件系统丢失或目录结构混乱时,通过遍历数据库数据并根据GUID在外部存储介质中找到对应的文件,然后重构文件系统;
5)、如果文件系统存储但数据库信息缺失,可通过遍历文件系统并根据GUID及文件名中的其他信息重构部分数据库内容。
具体工作过程:
为了更清楚的理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步详细阐述。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述其他方式来实施,因此本发明并不限于下面公开的具体实施例的限制。
如图1所示,本发明的文件存储流程图,实现按照本发明内容中描述的方法对数据库及文件进行存储。
步骤101:系统使用GUID生成机,生成一个唯一的GUID值。此GUID值具有全球唯一性;
步骤102:使用生成的GUID作为数据库记录的关键字段值,并保存相关的文件信息到数据库中;
步骤103:使用GUID作为文件名开头,并将此文件存储到外部存储介质中。
如图2所示,本发明的文件读取流程图,包括如下步骤:
步骤201:使用SQL查询出目标数据;
步骤202:提取查询到数据的文件信息;
步骤203:获得数据库中保存文件的GUID;
步骤204:在外部存储介质中定位此GUID开头的文件。
如图3所示,本发明的文件系统重构流程图,包括如下步骤:
步骤301:使用SQL提取所有数据;
步骤302:循环获取数据表的GUID;
步骤303:在外部存储介质中定位此GUID开头的文件;
步骤304:根据数据表中的记录重构此文件的路径及相关信息。
如图4所示,本发明的数据库信息重构流程图,包括如下步骤:
步骤401:遍历外部存储介质上所有GUID编码格式开头的文件;
步骤402:在目标数据表中新建以GUID为主键的记录;
步骤403:从文件名中提取其他信息保存到此数据记录。

Claims (2)

1. 一种基于数据库的文件可重构存储及管理方法,其特征在于,包括如下步骤:
1)、在数据表中建立关键字段,存储GUID值;
2)、在保存或上传文件时,生成GUID值,并将此GUID值作为数据表关键字段的值,且存入数据库系统;然后将文件名以GUID值开头存入外部存储介质,数据表数据通过GUID值和文件系统建立关联;
3)、在读取文件时,先使用SQL找到需要读取的文件信息,并从数据表中取得GUID值,然后根据GUID值到文件系统中定位以GUID开头的文件名,并读取使用;
4)、数据库信息存在但文件系统丢失或目录结构混乱时,通过遍历数据库数据并根据GUID在外部存储介质中找到对应的文件,然后重构文件系统;
5)如果文件系统存储但数据库信息缺失,通过遍历文件系统并根据GUID及文件名中的其他信息重构部分数据库内容。
2.根据权利要求1所述的一种基于数据库的文件可重构存储及管理方法,其特征在于:所述步骤2)中将文件名以GUID值开头的规则为:GUID + 空格 + 相关文件信息 + 扩展名。
CN2013102672263A 2013-06-30 2013-06-30 一种基于数据库的文件可重构存储及管理方法 Pending CN103324733A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2013102672263A CN103324733A (zh) 2013-06-30 2013-06-30 一种基于数据库的文件可重构存储及管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013102672263A CN103324733A (zh) 2013-06-30 2013-06-30 一种基于数据库的文件可重构存储及管理方法

Publications (1)

Publication Number Publication Date
CN103324733A true CN103324733A (zh) 2013-09-25

Family

ID=49193476

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013102672263A Pending CN103324733A (zh) 2013-06-30 2013-06-30 一种基于数据库的文件可重构存储及管理方法

Country Status (1)

Country Link
CN (1) CN103324733A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105242951A (zh) * 2015-11-13 2016-01-13 北京金山安全管理系统技术有限公司 一种软件应用的uuid调用方法
CN106155845A (zh) * 2016-08-02 2016-11-23 四川效率源信息安全技术股份有限公司 一种基于xfs文件系统数据的重组恢复方法
WO2018157765A1 (zh) * 2017-03-02 2018-09-07 华为技术有限公司 数据库系统中对象的编码及运算方法与数据库服务器
CN109739689A (zh) * 2018-12-25 2019-05-10 四川效率源信息安全技术股份有限公司 一种雕复SQL Server数据库文件的方法
CN109982016A (zh) * 2017-12-28 2019-07-05 深圳Tcl数字技术有限公司 一种录制文件展示方法、装置及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020111960A1 (en) * 1997-12-30 2002-08-15 Irons Steven W. Apparatus and method for simultaneously managing paper-based documents and digital images of the same
US20050091255A1 (en) * 2003-10-23 2005-04-28 Rajan Rajeev B. System and method for storing and retrieving a field of a user defined type outside of a database store in which the type is defined
CN101017503A (zh) * 2007-02-09 2007-08-15 镇江佳得信息技术有限公司 多版面电子名片机及多版面电子名片制作方法
CN101661509A (zh) * 2009-09-29 2010-03-03 金蝶软件(中国)有限公司 一种生成数据库表主键字段的方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020111960A1 (en) * 1997-12-30 2002-08-15 Irons Steven W. Apparatus and method for simultaneously managing paper-based documents and digital images of the same
CN1602486A (zh) * 2001-10-25 2005-03-30 影像标记公司 纸质文件及其图像的管理
US20050091255A1 (en) * 2003-10-23 2005-04-28 Rajan Rajeev B. System and method for storing and retrieving a field of a user defined type outside of a database store in which the type is defined
CN1735890A (zh) * 2003-10-23 2006-02-15 微软公司 存储和检索在定义类型的数据库存储外的用户定义类型的字段的系统和方法
CN101017503A (zh) * 2007-02-09 2007-08-15 镇江佳得信息技术有限公司 多版面电子名片机及多版面电子名片制作方法
CN101661509A (zh) * 2009-09-29 2010-03-03 金蝶软件(中国)有限公司 一种生成数据库表主键字段的方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105242951A (zh) * 2015-11-13 2016-01-13 北京金山安全管理系统技术有限公司 一种软件应用的uuid调用方法
CN106155845A (zh) * 2016-08-02 2016-11-23 四川效率源信息安全技术股份有限公司 一种基于xfs文件系统数据的重组恢复方法
WO2018157765A1 (zh) * 2017-03-02 2018-09-07 华为技术有限公司 数据库系统中对象的编码及运算方法与数据库服务器
CN108536705A (zh) * 2017-03-02 2018-09-14 华为技术有限公司 数据库系统中对象的编码及运算方法与数据库服务器
CN108536705B (zh) * 2017-03-02 2021-10-01 华为技术有限公司 数据库系统中对象的编码及运算方法与数据库服务器
US11194806B2 (en) 2017-03-02 2021-12-07 Huawei Technologies Co., Ltd. Object encoding and computation method in database system and database server
CN109982016A (zh) * 2017-12-28 2019-07-05 深圳Tcl数字技术有限公司 一种录制文件展示方法、装置及存储介质
CN109739689A (zh) * 2018-12-25 2019-05-10 四川效率源信息安全技术股份有限公司 一种雕复SQL Server数据库文件的方法
CN109739689B (zh) * 2018-12-25 2023-03-14 四川效率源信息安全技术股份有限公司 一种雕复SQL Server数据库文件的方法

Similar Documents

Publication Publication Date Title
CN106874348B (zh) 文件存储和索引方法、装置及读取文件的方法
CN103324733A (zh) 一种基于数据库的文件可重构存储及管理方法
CN105069048A (zh) 一种小文件存储方法、查询方法和装置
CN105468642A (zh) 数据的存储方法及装置
CN105069111A (zh) 云存储中基于相似性的数据块级数据去重方法
CN107977396B (zh) 一种KeyValue数据库的数据表的更新方法与表数据更新装置
CN103049355B (zh) 一种数据库系统恢复方法及设备
WO2013123831A1 (en) Intelligent data archiving
CN103605778A (zh) 一种视频文件的定位方法、装置及系统
CN107111460A (zh) 使用块文件的重复数据删除
CN106649676A (zh) 一种基于hdfs存储文件的去重方法及装置
CN110399348A (zh) 文件重删方法、装置、系统及计算机可读存储介质
CN106547646B (zh) 一种数据备份及恢复方法、数据备份及恢复装置
CN104965835B (zh) 一种分布式文件系统的文件读写方法及装置
CN111858730A (zh) 一种图数据库的数据导入导出装置、方法、设备及介质
CN102591935A (zh) 一种分布式数据存储管理方法及系统
CN103414762A (zh) 云备份方法和装置
US11321431B2 (en) Data processing, watermark embedding and watermark extraction
CA2702133A1 (en) Redistribute native xml index key shipping
US20200409594A1 (en) Storage Node Processing of Predefined Data Functions
CN102624545A (zh) 网管系统的数据备份方法、装置和恢复方法、装置
CN104516945A (zh) 一种基于关系数据库的hdfs元数据存储方法
CN103544217A (zh) 数据封存系统
CN104636218A (zh) 数据恢复方法及装置
CN102831240B (zh) 扩展元数据文件的存储方法和存储结构

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130925