CN105117489A - 一种数据库管理方法、装置及电子设备 - Google Patents

一种数据库管理方法、装置及电子设备 Download PDF

Info

Publication number
CN105117489A
CN105117489A CN201510604230.3A CN201510604230A CN105117489A CN 105117489 A CN105117489 A CN 105117489A CN 201510604230 A CN201510604230 A CN 201510604230A CN 105117489 A CN105117489 A CN 105117489A
Authority
CN
China
Prior art keywords
database file
user data
cryptographic hash
read
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510604230.3A
Other languages
English (en)
Other versions
CN105117489B (zh
Inventor
邝泽徽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Internet Security Software Co Ltd
Original Assignee
Beijing Kingsoft Internet Security Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Internet Security Software Co Ltd filed Critical Beijing Kingsoft Internet Security Software Co Ltd
Priority to CN201510604230.3A priority Critical patent/CN105117489B/zh
Publication of CN105117489A publication Critical patent/CN105117489A/zh
Application granted granted Critical
Publication of CN105117489B publication Critical patent/CN105117489B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • G06F16/2255Hash tables

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Storage Device Security (AREA)

Abstract

本发明实施例公开了一种数据库管理方法、装置及电子设备,所述方法包括:接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;获取所述第一数据库文件对应的第一哈希值;确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;以所述第一标识为文件名后缀,将更新后的第一数据库文件存储在对象式文件存储系统中。本发明适用于基于对象式文件存储系统进行数据库管理。

Description

一种数据库管理方法、装置及电子设备
技术领域
本发明涉及计算机应用技术领域,尤其涉及一种数据库管理方法、装置及电子设备。
背景技术
随着互联网技术的快速发展,人们在日常生活和工作中越来越多地使用互联网,在使用互联网的过程中,产生了大量的用户数据。目前,通常使用以MySQL为代表的关系型数据库,或者使用以MongoDB为代表的非关系型数据库来存储用户数据。这些数据库都是基于条目式的数据存储的形式,每个条目数据必然包含单个用户的标示字段等的一系列参数。
在实现本发明的过程中,发明人发现现有技术中至少存在如下技术问题:
对于有多个分级的用户数据来说,使用MySQL数据库或MongoDB数据库进行用户数据存储,由于基于条目式的数据会占用大量的存储资源,存储成本较高。
发明内容
有鉴于此,本发明实施例提供的一种数据库管理方法、装置及电子设备,可以解决如何降低存储成本的问题。
第一方面,本发明实施例提供一种数据库管理方法,包括:
接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取所述第一数据库文件对应的第一哈希值;
确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;
以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
可选的,所述用户数据处理操作包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;
所述将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件,包括:
若二者相同,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
可选的,所述方法还包括:
当读取一条待读取用户数据时,确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
读取所述目标标识对应的数据库文件;
根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据。
可选的,所述根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据包括:
根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
可选的,所述确定所述第一数据库文件的第一标识包括:
当将多条目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除多条目标用户数据时,按照时间先后顺序确定所述第一数据库文件的第一标识。
第二方面,本发明实施例提供一种数据库管理装置,包括:
接收单元,用于接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取单元,用于获取所述第一数据库文件对应的第一哈希值;
第一确定单元,用于确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
运算单元,用于对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
对比单元,用于将所述第一哈希值与所述第二哈希值进行对比;
执行单元,用于当所述第一哈希值与所述第二哈希值相同时,执行所述用户数据处理操作,得到更新后的第一数据库文件;
存储单元,用于以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
可选的,述用户数据处理操作包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;所述执行单元包括:
操作模块,用于当所述第一哈希值与所述第二哈希值相同时,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
更新模块,用于对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
可选的,所述装置还包括:
第二确定单元,用于当读取一条待读取用户数据时,确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
文件读取单元,用于读取所述目标标识对应的数据库文件;
数据读取单元,用于根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据。
可选的,所述数据读取单元包括:
计算模块,用于根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
读取模块,用于根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
可选的,所述第一确定单元,用于当将多条目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除多条目标用户数据时,按照时间先后顺序确定所述第一数据库文件的第一标识。
第三方面,本发明实施例还提供了一种电子设备,可以包括:
一个或者多个处理器;
存储器;
一个或者多个模块,所述一个或者多个模块存储在所述存储器中,当被所述一个或者多个处理器执行时进行如下操作:
接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取所述第一数据库文件对应的第一哈希值;
确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;
以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
第四方面,本发明实施例还提供了一种存储介质,用于存储应用程序,所述应用程序用于执行本发明实施例所提供的一种数据库管理方法。
第五方面,本发明实施例还提供了一种应用程序,用于执行本发明实施例所提供的一种数据库管理方法。
在本发明中,第一数据库文件位于对象式文件存储系统中,当用户对第一数据库文件进行用户数据处理操作时,将所存储的第一数据库文件的第一哈希值与对第一数据库文件进行哈希运算得到的第二哈希值进行对比,若二者相同,则执行所述用户数据处理操作,得到更新后的第一数据库文件,并以所确定的第一数据库文件的第一标识为文件名后缀,存储在对象式文件存储系统中。与现有技术相比,本发明基于对象式文件存储系统对数据库文件进行存储,由于对象式文件存储系统相对于基于条目式的数据存储,成本较低,因此能够降低存储成本。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1为本发明数据库管理方法一实施例的流程示意图;
图2为图1中S15一实施例的流程示意图;
图3为本发明数据库管理方法另一实施例的流程示意图;
图4为图3中S19一实施例的流程示意图;
图5为本发明数据库管理装置一实施例的结构示意图;
图6为图5中执行单元15一实施例的结构示意图;
图7为本发明数据库管理装置另一实施例的结构示意图;
图8为图7中数据读取单元19一实施例的结构示意图;
图9为本发明电子设备实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
参看图1,本发明实施例提供一种数据库管理方法,该方法应用于电子设备中,其中包括:
S10、接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
其中,所述用户数据处理操作可以包括:将目标用户数据写入第一数据库文件、从所述第一数据库文件中删除目标用户数据、或者从所述第一数据库文件中读取一条或多条用户数据。
可以理解的是,第一数据库文件是对象式文件存储系统中的任意一个数据库文件。
S11、获取所述第一数据库文件对应的第一哈希值;
其中,所述第一数据库文件对应的第一哈希值存储于元数据存储系统中,所述元数据存储系统存储有所述对象式文件存储系统中各数据库文件的文件名、哈希值、标识,用于对对象式文件存储系统中各数据库文件进行上级索引。
在步骤S10中,用户向电子设备输入的对第一数据库文件进行的用户数据处理操作中携带有所述第一数据库文件的文件名或标识,电子设备根据该文件名或标识,从所述元数据存储系统中查找对应的第一数据库文件,并获取到该第一数据库文件的第一哈希值。
S12、确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
其中,电子设备每次接收到用户输入的对第一数据库文件进行的用户数据处理操作之后,都会访问唯一标识生成器,唯一标识生成器根据第一数据库文件的当前标识,生成第一数据库文件对应的最新标识,返回给电子设备;所述第一标识可以为版本号,但不仅限于此。
S13、对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
其中,哈希运算是将任意长度的二进制值映射为固定长度的较小二进制值,这个小的二进制值称为哈希值,哈希值是一段数据唯一且极其紧凑的数值表示形式;所述第一数据库文件的数据为任意长度二进制值格式,所述第二哈希值是将任意长度二进制值格式的第一数据库文件的数据进行哈希运算得到的具有固定长度的二进制值。
S14、将所述第一哈希值与所述第二哈希值进行对比;
将从所述元数据存储系统中获取到的第一哈希值与对所述第一数据库文件进行哈希运算得到的第二哈希值进行对比,判断二者是否相同。
S15、当所述第一哈希值与所述第二哈希值相同时,执行所述用户数据处理操作,得到更新后的第一数据库文件;
当所述第一哈希值与所述第二哈希值相同时,表明电子设备从元数据存储系统中索引到的第一数据库文件与对象式文件存储系统中存储的第一数据库文件是相同的,验证成功,可以执行用户数据操作,进而,电子设备根据用户输入的对第一数据库文件进行的用户数据处理操作的类型,执行将目标用户数据写入第一数据库文件、从所述第一数据库文件中删除目标用户数据、或者从所述第一数据库文件中读取一条或多条用户数据,执行该用户数据处理操作之后,得到更新后的第一数据库文件。
S16、以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
其中,该更新后的第一数据库文件将原有的第一数据库文件进行替换。
在将所述更新后的第一数据库文件存储在所述对象式文件存储系统中之前,电子设备还可以对所述更新后的第一数据库文件进行行压缩。从而可以减小所述更新后的第一数据库文件的体积,减少对存储空间的占用,提高存储资源的使用效率,降低存储成本。
本发明实施例提供的数据库管理方法,第一数据库文件位于对象式文件存储系统中,当用户对第一数据库文件进行用户数据处理操作时,将所存储的第一数据库文件的第一哈希值与对第一数据库文件进行哈希运算得到的第二哈希值进行对比,若二者相同,则执行所述用户数据处理操作,得到更新后的第一数据库文件,并以所确定的第一数据库文件的第一标识为文件名后缀,存储在对象式文件存储系统中。与现有技术相比,本发明基于对象式文件存储系统对数据库文件进行存储,由于对象式文件存储系统相对于基于条目式的数据存储,成本较低,因此能够降低存储成本。
可选的,在本发明数据库管理方法一实施例中,所述用户数据处理操作可包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;
参看图2,所述当所述第一哈希值与所述第二哈希值相同时,执行所述用户数据处理操作,得到更新后的第一数据库文件(S15),可包括:
S151、当所述第一哈希值与所述第二哈希值相同时,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
其中,所述第一数据库文件中存储有各目标用户数据及其对应的索引值,根据该索引值,电子设备可以查找到对应的目标用户数据。
S152、对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
其中,所述第一数据库文件的文件信息存储于元数据存储系统中,用于对对象式文件存储系统中各数据库文件进行上级索引,当将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据之后,对元数据存储系统中存储的第一数据库文件的文件信息进行更新,以便后续能够根据文件名从所述元数据存储系统中正确索引到第一数据库文件,以及从所述元数据存储系统中查找到第一数据库文件最新的哈希值。
参看图3,可选的,在本发明数据库管理方法一实施例中,所述方法还可包括:
S17、当读取一条待读取用户数据时,电子设备确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
其中,当用户向电子设备输入从数据库文件中读取一条待读取用户数据时,携带有该数据库文件的文件名,电子设备根据该文件名,从所述元数据存储系统中查找到对应的数据库的目标标识;所述目标标识可以为版本号,但不仅限于此。
S18、电子设备读取所述目标标识对应的数据库文件;
电子设备根据该目标标识,从所述元数据存储系统中查找到对应的数据库文件,并从对象式文件存储系统中读取该数据库文件。
S19、根据所述待读取用户数据的索引值,电子设备从所述目标标识对应的数据库文件中读取所述待读取用户数据。
其中,所述第一数据库文件中存储有各目标用户数据及其对应的索引值,根据该索引值,电子设备可以查找到对应的目标用户数据。
参看图4,可选的,在本发明数据库管理方法一实施例中,所述根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据(S19),可包括:
S191、根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
其中,根据所述待读取用户数据的索引值,可以确定该待读取用户数据在所述目标标识对应的数据库文件中的起始位置,然后根据用户请求读取的该待读取用户数据的大小,确定出对应的索引块偏移量。
S192、根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
具体地,从该待读取用户数据在所述目标标识对应的数据库文件中的起始位置,读取大小为所述索引块偏移量的用户数据。
可选的,在本发明数据库管理方法一实施例中,所述确定所述第一数据库文件的第一标识可包括:
当将多条目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除多条目标用户数据时,按照时间先后顺序确定所述第一数据库文件的第一标识。
具体地,用户每输入将一条目标用户数据写入第一数据库文件的操作,或者从所述第一数据库文件中删除一条目标用户数据的操作,唯一标识生成器都会根据第一数据库文件的当前标识,生成第一数据库文件对应的最新标识,并返回给电子设备。
参看图5,本发明实施例提供一种数据库管理装置,包括:
接收单元10,用于接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
其中,所述用户数据处理操作可以包括:将目标用户数据写入第一数据库文件、从所述第一数据库文件中删除目标用户数据、或者从所述第一数据库文件中读取一条或多条用户数据。
获取单元11,用于获取所述第一数据库文件对应的第一哈希值;
其中,所述第一数据库文件对应的第一哈希值存储于元数据存储系统中,所述元数据存储系统存储有所述对象式文件存储系统中各数据库文件的文件名、哈希值、标识,用于对对象式文件存储系统中各数据库文件进行上级索引。
用户向电子设备输入的对第一数据库文件进行的用户数据处理操作中携带有所述第一数据库文件的文件名或标识,电子设备根据该文件名或标识,从所述元数据存储系统中查找对应的第一数据库文件,并获取到该第一数据库文件的第一哈希值。
第一确定单元12,用于确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
其中,电子设备每次接收到用户输入的对第一数据库文件进行的用户数据处理操作之后,都会访问唯一标识生成器,唯一标识生成器根据第一数据库文件的当前标识,生成第一数据库文件对应的最新标识,返回给电子设备;所述第一标识可以为版本号,但不仅限于此。
运算单元13,用于对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
其中,哈希运算是将任意长度的二进制值映射为固定长度的较小二进制值,这个小的二进制值称为哈希值,哈希值是一段数据唯一且极其紧凑的数值表示形式;所述第一数据库文件的数据为任意长度二进制值格式,所述第二哈希值是将任意长度二进制值格式的第一数据库文件的数据进行哈希运算得到的具有固定长度的二进制值。
对比单元14,用于将所述第一哈希值与所述第二哈希值进行对比;
将从所述元数据存储系统中获取到的第一哈希值与对所述第一数据库文件进行哈希运算得到的第二哈希值进行对比,判断二者是否相同。
执行单元15,用于当所述第一哈希值与所述第二哈希值相同时,执行所述用户数据处理操作,得到更新后的第一数据库文件;
当所述第一哈希值与所述第二哈希值相同时,表明电子设备从元数据存储系统中索引到的第一数据库文件与对象式文件存储系统中存储的第一数据库文件是相同的,验证成功,可以执行用户数据操作,进而,电子设备根据用户输入的对第一数据库文件进行的用户数据处理操作的类型,执行将目标用户数据写入第一数据库文件、从所述第一数据库文件中删除目标用户数据、或者从所述第一数据库文件中读取一条或多条用户数据,执行该用户数据处理操作之后,得到更新后的第一数据库文件。
存储单元16,用于以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
其中,该更新后的第一数据库文件将原有的第一数据库文件进行替换。
本发明实施例提供的数据库管理装置,第一数据库文件位于对象式文件存储系统中,当用户对第一数据库文件进行用户数据处理操作时,将所存储的第一数据库文件的第一哈希值与对第一数据库文件进行哈希运算得到的第二哈希值进行对比,若二者相同,则执行所述用户数据处理操作,得到更新后的第一数据库文件,并以所确定的第一数据库文件的第一标识为文件名后缀,存储在对象式文件存储系统中。与现有技术相比,本发明基于对象式文件存储系统对数据库文件进行存储,由于对象式文件存储系统相对于基于条目式的数据存储,成本较低,因此能够降低存储成本。
可选的,在本发明数据库管理装置一实施例中,所述用户数据处理操作可包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;参看图6,所述执行单元15可包括:
操作模块151,用于当所述第一哈希值与所述第二哈希值相同时,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
其中,所述第一数据库文件中存储有各目标用户数据及其对应的索引值,根据该索引值,电子设备可以查找到对应的目标用户数据。
更新模块152,用于对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
其中,所述第一数据库文件的文件信息存储于元数据存储系统中,用于对对象式文件存储系统中各数据库文件进行上级索引,当将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据之后,对元数据存储系统中存储的第一数据库文件的文件信息进行更新,以便后续能够根据文件名从所述元数据存储系统中正确索引到第一数据库文件,以及从所述元数据存储系统中查找到第一数据库文件最新的哈希值。
参看图7,可选的,在本发明数据库管理装置一实施例中,所述装置还可包括:
第二确定单元17,用于当读取一条待读取用户数据时,确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
其中,当用户向电子设备输入从数据库文件中读取一条待读取用户数据时,携带有该数据库文件的文件名,电子设备根据该文件名,从所述元数据存储系统中查找到对应的数据库的目标标识;所述目标标识可以为版本号,但不仅限于此。
文件读取单元18,用于读取所述目标标识对应的数据库文件;
电子设备根据该目标标识,从所述元数据存储系统中查找到对应的数据库文件,并从对象式文件存储系统中读取该数据库文件。
数据读取单元19,用于根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据。
其中,所述第一数据库文件中存储有各目标用户数据及其对应的索引值,根据该索引值,电子设备可以查找到对应的目标用户数据。
参看图8,可选的,在本发明数据库管理装置一实施例中,所述数据读取单元19可包括:
计算模块191,用于根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
其中,根据所述待读取用户数据的索引值,可以确定该待读取用户数据在所述目标标识对应的数据库文件中的起始位置,然后根据用户请求读取的该待读取用户数据的大小,确定出对应的索引块偏移量。
读取模块192,用于根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
具体地,从该待读取用户数据在所述目标标识对应的数据库文件中的起始位置,读取大小为所述索引块偏移量的用户数据。
可选的,在本发明数据库管理装置一实施例中,所述第一确定单元12,可用于当将多条目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除多条目标用户数据时,按照时间先后顺序确定所述第一数据库文件的第一标识。
具体地,用户每输入将一条目标用户数据写入第一数据库文件的操作,或者从所述第一数据库文件中删除一条目标用户数据的操作,唯一标识生成器都会根据第一数据库文件的当前标识,生成第一数据库文件对应的最新标识,并返回给电子设备。
参看图5,本发明实施例还提供了一种电子设备,可以包括:
一个或者多个处理器31;
存储器32;
一个或者多个模块33,所述一个或者多个模块33存储在所述存储器32中,当被所述一个或者多个处理器31执行时进行如下操作:
接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取所述第一数据库文件对应的第一哈希值;
确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;
以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
本发明实施例还提供了一种存储介质,用于存储应用程序,所述应用程序用于执行本发明实施例所提供的一种数据库管理方法。
本发明实施例还提供了一种应用程序,用于执行本发明实施例所提供的一种数据库管理方法。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,″计算机可读介质″可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
为了描述的方便,描述以上装置是以功能分为各种单元/模块分别描述。当然,在实施本发明时可以把各单元/模块的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。

Claims (10)

1.一种数据库管理方法,其特征在于,包括:
接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取所述第一数据库文件对应的第一哈希值;
确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;
以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
2.根据权利要求1所述的数据库管理方法,其特征在于,所述用户数据处理操作包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;
所述将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件,包括:
若二者相同,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
3.根据权利要求1或2所述的数据库管理方法,其特征在于,所述方法还包括:
当读取一条待读取用户数据时,确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
读取所述目标标识对应的数据库文件;
根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据。
4.根据权利要求3所述的数据库管理方法,其特征在于,所述根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据包括:
根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
5.根据权利要求2所述的数据库管理方法,其特征在于,所述确定所述第一数据库文件的第一标识包括:
当将多条目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除多条目标用户数据时,按照时间先后顺序确定所述第一数据库文件的第一标识。
6.一种数据库管理装置,其特征在于,包括:
接收单元,用于接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取单元,用于获取所述第一数据库文件对应的第一哈希值;
第一确定单元,用于确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
运算单元,用于对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
对比单元,用于将所述第一哈希值与所述第二哈希值进行对比;
执行单元,用于当所述第一哈希值与所述第二哈希值相同时,执行所述用户数据处理操作,得到更新后的第一数据库文件;
存储单元,用于以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
7.根据权利要求6所述的数据库管理装置,其特征在于,所述用户数据处理操作包括将目标用户数据写入第一数据库文件或者从所述第一数据库文件中删除目标用户数据的操作;所述执行单元包括:
操作模块,用于当所述第一哈希值与所述第二哈希值相同时,将所述目标用户数据及其对应的索引值写入所述第一数据库文件中,或者从所述第一数据库文件中删除所述目标用户数据;
更新模块,用于对所述第一数据库文件的文件信息进行更新,所述文件信息包括文件名、哈希值。
8.根据权利要求6或7所述的数据库管理装置,其特征在于,所述装置还包括:
第二确定单元,用于当读取一条待读取用户数据时,确定所述待读取用户数据对应的数据库的目标标识,所述目标标识为所述待读取用户数据对应的数据库的最新标识;
文件读取单元,用于读取所述目标标识对应的数据库文件;
数据读取单元,用于根据所述待读取用户数据的索引值,从所述目标标识对应的数据库文件中读取所述待读取用户数据。
9.根据权利要求8所述的数据库管理装置,其特征在于,所述数据读取单元包括:
计算模块,用于根据所述待读取用户数据的索引值,计算所述目标标识对应的数据库文件中的索引块偏移量;
读取模块,用于根据所述索引块偏移量,从所述目标标识对应的数据库文件的数据块中读取所述用户数据。
10.一种电子设备,其特征在于,包括:
一个或者多个处理器;
存储器;
一个或者多个模块,所述一个或者多个模块存储在所述存储器中,当被所述一个或者多个处理器执行时进行如下操作:
接收用户输入的对第一数据库文件进行的用户数据处理操作,所述第一数据库文件位于对象式文件存储系统中;
获取所述第一数据库文件对应的第一哈希值;
确定所述第一数据库文件的第一标识,所述第一标识为所述第一数据库文件对应的最新标识;
对所述第一数据库文件进行哈希运算,得到所述第一数据库文件对应的第二哈希值;
将所述第一哈希值与所述第二哈希值进行对比,若二者相同,执行所述用户数据处理操作,得到更新后的第一数据库文件;
以所述第一标识为文件名后缀,将所述更新后的第一数据库文件存储在所述对象式文件存储系统中。
CN201510604230.3A 2015-09-21 2015-09-21 一种数据库管理方法、装置及电子设备 Active CN105117489B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510604230.3A CN105117489B (zh) 2015-09-21 2015-09-21 一种数据库管理方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510604230.3A CN105117489B (zh) 2015-09-21 2015-09-21 一种数据库管理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN105117489A true CN105117489A (zh) 2015-12-02
CN105117489B CN105117489B (zh) 2018-10-19

Family

ID=54665477

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510604230.3A Active CN105117489B (zh) 2015-09-21 2015-09-21 一种数据库管理方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN105117489B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107220005A (zh) * 2017-05-27 2017-09-29 郑州云海信息技术有限公司 一种数据操作方法及系统
WO2018032995A1 (zh) * 2016-08-19 2018-02-22 阿里巴巴集团控股有限公司 一种数据存储、数据校验、数据溯源方法和设备
CN108121719A (zh) * 2016-11-28 2018-06-05 北京国双科技有限公司 一种实现数据抽取转换加载etl的方法及装置
CN111666267A (zh) * 2019-03-05 2020-09-15 国家计算机网络与信息安全管理中心 一种数据清洗方法、装置及终端设备
CN113282243A (zh) * 2021-06-09 2021-08-20 杭州海康威视系统技术有限公司 存储对象文件的方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102194002A (zh) * 2011-05-25 2011-09-21 中兴通讯股份有限公司 哈希表的表项添加、删除、查找方法及哈希表存储装置
CN102325167A (zh) * 2011-07-21 2012-01-18 杭州微元科技有限公司 一种网络文件传输的校验方法
CN102567415A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据库的控制方法和装置
US20140019494A1 (en) * 2012-07-10 2014-01-16 Tencent Technology (Shenzhen) Co., Ltd. Method and apparatus for file storage
CN103729225A (zh) * 2014-01-22 2014-04-16 中国人民解放军国防科学技术大学 一种基于内容分块的远程文件实时更新方法
CN104407808A (zh) * 2014-10-31 2015-03-11 华为技术有限公司 写入数据的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567415A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据库的控制方法和装置
CN102194002A (zh) * 2011-05-25 2011-09-21 中兴通讯股份有限公司 哈希表的表项添加、删除、查找方法及哈希表存储装置
CN102325167A (zh) * 2011-07-21 2012-01-18 杭州微元科技有限公司 一种网络文件传输的校验方法
US20140019494A1 (en) * 2012-07-10 2014-01-16 Tencent Technology (Shenzhen) Co., Ltd. Method and apparatus for file storage
CN103729225A (zh) * 2014-01-22 2014-04-16 中国人民解放军国防科学技术大学 一种基于内容分块的远程文件实时更新方法
CN104407808A (zh) * 2014-10-31 2015-03-11 华为技术有限公司 写入数据的方法和装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018032995A1 (zh) * 2016-08-19 2018-02-22 阿里巴巴集团控股有限公司 一种数据存储、数据校验、数据溯源方法和设备
US10880078B2 (en) 2016-08-19 2020-12-29 Advanced New Technologies Co., Ltd. Data storage, data check, and data linkage method and apparatus
US10931441B2 (en) 2016-08-19 2021-02-23 Advanced New Technologies Co., Ltd. Data storage, data check, and data linkage method and apparatus
US11082208B2 (en) 2016-08-19 2021-08-03 Advanced New Technologies Co., Ltd. Data storage, data check, and data linkage method and apparatus
US11356245B2 (en) 2016-08-19 2022-06-07 Advanced New Technologies Co., Ltd. Data storage, data check, and data linkage method and apparatus
CN108121719A (zh) * 2016-11-28 2018-06-05 北京国双科技有限公司 一种实现数据抽取转换加载etl的方法及装置
CN108121719B (zh) * 2016-11-28 2020-06-30 北京国双科技有限公司 一种实现数据抽取转换加载etl的方法及装置
CN107220005A (zh) * 2017-05-27 2017-09-29 郑州云海信息技术有限公司 一种数据操作方法及系统
CN111666267A (zh) * 2019-03-05 2020-09-15 国家计算机网络与信息安全管理中心 一种数据清洗方法、装置及终端设备
CN113282243A (zh) * 2021-06-09 2021-08-20 杭州海康威视系统技术有限公司 存储对象文件的方法及装置

Also Published As

Publication number Publication date
CN105117489B (zh) 2018-10-19

Similar Documents

Publication Publication Date Title
CN105117489A (zh) 一种数据库管理方法、装置及电子设备
US11023452B2 (en) Data dictionary with a reduced need for rebuilding
CN107704202B (zh) 一种数据快速读写的方法和装置
US11093461B2 (en) Method for computing distinct values in analytical databases
CN105740303A (zh) 改进的对象存储的方法及装置
CN110647562B (zh) 一种数据查询方法和装置、电子设备、存储介质
CN105791242A (zh) 对象类型的识别方法、服务器、客户端和系统
CN110674360A (zh) 一种用于数据关联图谱的构建和数据的溯源方法和系统
US10528534B2 (en) Method and system for deduplicating data
CN111190899B (zh) 一种埋点数据处理方法、装置、服务器及存储介质
CN111258990A (zh) 索引库数据迁移方法、装置、设备及存储介质
CN114328632A (zh) 基于位图的用户数据分析方法、装置及计算机设备
CN112364185B (zh) 多媒体资源的特征确定方法、装置、电子设备和存储介质
CN104063377A (zh) 信息处理方法和使用其的电子设备
CN109710626B (zh) 数据入库管理方法、装置、电子设备,及存储介质
CN108376054B (zh) 一种对标识数据进行索引的处理方法及装置
US20130311967A1 (en) Method and System for Collapsing Functional Similarities and Consolidating Functionally Similar, Interacting Systems
CN104103028A (zh) 诊疗记录管理系统和诊疗记录管理方法
CN113157671A (zh) 一种数据监控方法及装置
CN103399743A (zh) 用于识别安装文件的设备和方法
CN110750268A (zh) 文件清理方法、装置、计算机可读存储介质及电子设备
CN103761247A (zh) 一种出错文件的处理方法及装置
CN110489125B (zh) 文件管理方法和计算机存储介质
CN112306571A (zh) 一种bios更新管理方法及相关设备
CN108108402B (zh) 数据项释义更新方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant