CN106649590A - 一种处理数据库的存储空间的方法和装置 - Google Patents

一种处理数据库的存储空间的方法和装置 Download PDF

Info

Publication number
CN106649590A
CN106649590A CN201611028754.3A CN201611028754A CN106649590A CN 106649590 A CN106649590 A CN 106649590A CN 201611028754 A CN201611028754 A CN 201611028754A CN 106649590 A CN106649590 A CN 106649590A
Authority
CN
China
Prior art keywords
storehouse
database
information
memory space
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611028754.3A
Other languages
English (en)
Inventor
任娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd, Qizhi Software Beijing Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Priority to CN201611028754.3A priority Critical patent/CN106649590A/zh
Publication of CN106649590A publication Critical patent/CN106649590A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种处理数据库的存储空间的方法和装置。该方法包括:预定义数据库的存储空间处理规则;获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;根据第一信息表中的内容,对数据库中的相应库表进行相应的处理。本发明可以实现数据库存储空间资源的合理利用,减少存储空间的资源浪费,同时有效防止数据的缺失或不完整。

Description

一种处理数据库的存储空间的方法和装置
技术领域
本发明涉及计算机技术领域,具体涉及一种处理数据库的存储空间的方法和装置。
背景技术
数据库是按照数据结构来组织、存储和管理数据的仓库。随着信息技术和市场的发展,数据管理不再仅仅是存储和管理数值型的数据,而转变成用户所需要的各种数据管理,包括字符类的数据、数值类的数据,等等。数据库在进行数据管理的时候,会首先申请每种数据类型的存储长度,当一条数据写入的时候,根据数据的类型,分配给该数据相应类型的存储长度,但是该存储长度不会根据该数据的实际存储长度而改变,所以,当数据的实际存储长度太短的话,会造成数据库资源的浪费;当数据的实际存储长度太长的话,会造成数据的丢失和不完整。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的处理数据库的存储空间的方法和相应的装置。
依据本发明的一个方面,提供了一种处理数据库的存储空间的方法,包括:
预定义数据库的存储空间处理规则;
获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
可选地,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
可选地,所述获取数据库的库表信息包括:
获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;
以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
可选地,所述获取数据库中的各库表的各字段的实际存储的数据的最大长度值包括:
遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
可选地,在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,该方法进一步包括:
将所述第一信息表发送给使用该于主从式数据库系统的业务端。
可选地,所述根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理包括:
接收所述业务端在接收到所述第一信息表后反馈的库表操作信息;根据所述库表操作信息,对数据库中的相应库表进行相应的处理;
和/或,
当所述业务端在预设时间内未反馈信息时,根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
可选地,所述对数据库的库表进行相应的处理包括:
对于数据库中的相应库表的相应字段,修改该字段的类型;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。
可选地,该方法进一步包括:
设定第一周期时间;
每隔所述第一周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。
可选地,该方法进一步包括:
记录每次处理的数据库的库表标识;
其中,每隔所述第一周期时间,只获取之前未处理过的新增的库表信息。
可选地,该方法进一步包括:
设定第二周期时间;第二周期时间大于第一周期时间;
每隔所述第二周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,执行所述获取数据库的库表信息时,获取数据库中的全部库表信息。
根据本发明的另一方面,提供了一种处理数据库的存储空间的装置,其中,该装置包括:
规则定义单元,适于预定义数据库的存储空间处理规则;
库表信息获取单元,适于获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
库表处理单元,适于根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
可选地,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
可选地,所述库表信息获取单元,适于获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
可选地,所述库表信息获取单元,遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
可选地,所述库表处理单元,进一步适于在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,将所述第一信息表发送给使用该于主从式数据库系统的业务端。
可选地,所述库表处理单元,适于接收所述业务端在接收到所述第一信息表后反馈的库表操作信息;根据所述库表操作信息,对数据库中的相应库表进行相应的处理;
和/或,
所述库表处理单元,适于当所述业务端在预设时间内未反馈信息时,根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
可选地,所述库表处理单元,适于对于数据库中的相应库表的相应字段,修改该字段的类型;或者,对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。
可选地,该装置进一步包括:周期设定单元,适于设定第一周期时间;
所述库表信息获取单元和所述库表处理单元,适于每隔所述第一周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。
可选地,所述库表信息获取单元,进一步适于记录每次处理的数据库的库表标识;
每隔所述第一周期时间,只获取之前未处理过的新增的库表信息。
可选地,所述周期设定单元,进一步适于设定第二周期时间;第二周期时间大于第一周期时间;
所述库表信息获取单元和所述库表处理单元,适于每隔所述第二周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,所述库表信息获取单元执行所述获取数据库的库表信息时,获取数据库中的全部库表信息。
根据本发明的技术方案,首先定义一个数据库存储空间的处理规则,获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以此来提取数据库中存储不合理的库表信息,然后再根据第一信息表中的内容,对数据库中的相应库表进行相应的处理,将数据库中不合理的存储处理后,可以有效减少数据库的存储空间的资源浪费,使数据库资源分配更加合理,同时有效防止数据缺失或不完整。综上所述,本发明可以实现数据库存储空间资源的合理利用,减少存储空间的资源浪费,同时有效防止数据的缺失或不完整。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的一种处理数据库的存储空间的方法的流程示意图;
图2示出了根据本发明一个实施例的一种处理数据库的存储空间的装置的结构示意图;
图3示出了根据本发明一个实施例的一种处理数据库的存储空间的装置的解雇示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的一种处理数据库的存储空间的方法的流程示意图。如图1所示,该方法包括:
步骤S110,预定义数据库的存储空间处理规则。
存储空间处理规则可以根据需求进行定义,通过该存储空间处理规则可以相应的解决数据库中存储空间的利用不合理的问题,进而有效改善数据库存储空间的资源浪费或者数据的缺失现象。在本步骤中,可以是针对数据库的库表中存储的数据字段定义存储空间处理规则,并且通过存储字段的长度进行限定。例如,对于库表中的一个字段,可以定义为实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。
步骤S120,获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中。
在本发明的一个实施例中,通过扫描线上数据库系统的“information_ schema.tables”,获取数据库系统中的所有库表,提取出符合存储空间处理规则的库表信 息,输出到第一信息表中,即待处理库表信息的信息表,这些待处理库表信息存在存储空间 利用不合理的问题。例如,对于库表中的一个字段,存储空间处理规则为实际存储的数据的 最大长度值超出了创建该库表时为该字段申请的存储空间长度值。那么遍历整个数据库中 的库表,将库表中的字段的长度不为空,且符合实际存储的数据的最大长度值超出创建该 库表时为该字段申请的存储空间长度值的库表信息提取,并存入第一信息表中。
步骤S130中,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理。
第一信息表中存储的是待处理的库表信息,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理,就可以消除数据库库表中存储空间资源浪费或者数据缺失不完整的问题。例如,可以改变数据类型、改变数据库针对字段申请的存储空间长度值,等。
可见,本发明的方法可以实现数据库存储空间资源的合理利用,减少存储空间的资源浪费,同时有效防止数据的缺失或不完整。
在本发明的一个实施例中,存储空间处理规则包括如下中的一种或多种:
(1)对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。例如,针对数据库库表中的一个类型为“Char”的字段,数据库为该字段申请的存储空间长度值为255,而字段的数据的实际存储长度为500,这样该条数据存储的时候就会被截断,造成数据丢失或不完整,为了有效解决这个问题,对于库表中的一个字段,可以定义的存储空间处理规则为:实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。
(2)对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。例如,针对数据库库表中的一个类型为“int”的字段,数据库为该字段申请的存储空间长度值为100,并且只能分配给每个类型为“int”的字段100的存储长度,但是在该字段实际存储的数据中的最长数据的长度只有50,这样就会造成数据库中的存储空间的资源浪费,为了有效解决这个问题,对于库表中的一个字段,可以定义的存储空间处理规则为:实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。这里的预设值不做限定,可根据数据库的实际存储情况以及每种字段的类型进行设定,例如针对“int”类型的,其预设值可设定为50;针对“Char”类型的,其预设值可设定为100。
为了获取符合存储空间处理规则的库表信息,在本发明的一个实施例中,步骤S120中的获取数据库的库表信息包括:获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
具体地,获取数据库中的各库表的各字段的实际存储的数据的最大长度值包括:遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。这里获取各字段的实际存储的数据的最大长度值的时候,可以采用SQL语句完成,例如“length”语句,即“length”+字段名,那么返回的数据就是该字段的实际存储的最大长度值,实际代码可以是“(select length($colvar)form$db limit 1)”。
数据库为业务端提供存储和管理数据的服务,在进行数据库的存储空间管理之前,需要把预进行操作的信息返回给相应业务端,获取业务端的进一步确认。所以,在本发明的一个实施例中,在根据第一信息表中的内容,对数据库的库表进行相应的处理之前,该方法进一步包括:将第一信息表发送给使用该于主从式数据库系统的业务端。
进一步地,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理包括:接收业务端在接收到第一信息表后反馈的库表操作信息;根据库表操作信息,对数据库中的相应库表进行相应的处理。这里相应的库表的处理操作可以是业务端自行处理,也可以通过返回库表操作信息,数据库维护人员进行处理。
在发送给用户的第一信息表文件中可以附加上预设时间信息(例如2天),如果用户在预设时间(2天)内没有及时反馈信息,数据库维护人员将自动默认第一信息表中的库表都是需要进行处理。所以,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理还包括:当业务端在预设时间内未反馈信息时,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理。
然而,本领域技术人员应可了解,上述经过业务端确认后方可处理库表的方式并非本发明的限制。由于该库表的存储不合理会造成数据库资源的浪费,库表处理对业务端的影响也有限,因此当得到第一信息表后,也可以不经过业务端同意而直接进行处理的操作。
在本发明的一个实施例中,对数据库的库表进行相应的处理包括:
如果数据库中的字段实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。那么,对于数据库中的相应库表的相应字段,修改该字段的类型。例如,“Char”类型的字段的数据存储的实际长度为10,而申请的存储空间长度值为500。那么就可以将该字段的类型改为“Varchar”,这里的“Varchar”和“Char”均属于字符串类型,但是“Varchar”可以根据字段的实际存储长度分配给该字段相应的存储长度,占用的数据库空间也是实际存储长度对应的空间。
或者,
如果数据库中的字段实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。那么对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短。例如,发现所有“Char”类型的字段的数据存储的实际长度都在10或者10以下,但是创建数据库是申请的存储空降长度值为100,就把申请的存储空降长度值改为50。
或者,
如果字段的数据的实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值,那么对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。例如,“int”类型的数据的字段的实际存储长度为500,但是,创建数据库是申请的存储空降长度值为100,那么就将为该“int”字段申请的存储空间长度值加长到600。还需要说明,在将申请的存储空间长度值加长的时候是在满足数据库存储空间的前提下进行的操作。
本发明方案的实施不需要每时每刻都进行,为了保证数据库的正常工作以及本发明方案的合理进行,图1所示的方法进一步包括:
设定第一周期时间;每隔第一周期时间,执行获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。例如,可以将第一周期时间设定为1天,即一天执行一次本发明的技术方案。
在本发明的一个实施例中,上述方法进一步包括:记录每次处理的数据库的库表标识;其中,每隔第一周期时间,只获取之前未处理过的新增的库表信息。
数据库中的库表很多,如果每隔一天的时间就进行一次,一方面数据量太大;另一方面,有些库表在一天内可能没有更新数据。如果在全部的库表中执行本发明的技术方案,会影响该技术方案的处理时间,降低处理效率,浪费处理时的运行资源。所以,将上一周处理过的库表进行标识,下一周期进行处理的时候就可以不获取带有标识的库表信息,只获取之前未处理过的新增的库表信息。
但是,库表信息还会进行不定期的更新中,较长时间不处理的话还会出现数据库资源浪费或者数据不完整的情况,所以,在本发明的一个实施例中,该方法进一步包括:设定第二周期时间;第二周期时间大于第一周期时间;每隔第二周期时间,执行获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,执行获取数据库的库表信息时,获取数据库中的全部库表信息。例如,第一周期时间可以设定1天,第二周期时间设定为1个月,即每隔1天获取未标识的新增的库表信息进行处理,每隔一个月的时间获取全部库表信息进行处理。
图2示出了根据本发明一个实施例的一种处理数据库的存储空间的装置的结构示意图。如图2所示,该处理数据库的存储空间的装置200包括:
规则定义单元210,适于预定义数据库的存储空间处理规则。
存储空间处理规则可以根据需求进行定义,通过该存储空间处理规则可以相应的解决数据库中存储空间的利用不合理的问题,进而有效改善数据库存储空间的资源浪费或者数据的缺失现象。在本步骤中,可以是针对数据库的库表中存储的数据字段定义存储空间处理规则,并且通过存储字段的长度进行限定。例如,对于库表中的一个字段,可以定义为实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。
库表信息获取单元220,适于获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中。
在本发明的一个实施例中,通过扫描线上数据库系统的“information_ schema.tables”,获取数据库系统中的所有库表,提取出符合存储空间处理规则的库表信 息,输出到第一信息表中,即待处理库表信息的信息表,这些待处理库表信息存在存储空间 利用不合理的问题。例如,对于库表中的一个字段,存储空间处理规则为实际存储的数据的 最大长度值超出了创建该库表时为该字段申请的存储空间长度值。那么遍历整个数据库中 的库表,将库表中的字段的长度不为空,且符合实际存储的数据的最大长度值超出创建该 库表时为该字段申请的存储空间长度值的库表信息提取,并存入第一信息表中。
库表处理单元230,适于根据第一信息表中的内容,对数据库中的相应库表进行相应的处理。
第一信息表中存储的是待处理的库表信息,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理,就可以消除数据库库表中存储空间资源浪费或者数据缺失不完整的问题。例如,可以改变数据类型、改变数据库针对字段申请的存储空间长度值,等。
可见,本发明的方法可以实现数据库存储空间资源的合理利用,减少存储空间的资源浪费,同时有效防止数据缺失或不完整。
在本发明的一个实施例中,存储空间处理规则包括如下中的一种或多种:
(1)对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。例如,针对数据库库表中的一个类型为“Char”的字段,数据库为该字段申请的存储空间长度值为255,而字段的数据的实际存储长度为500,这样该条数据存储的时候就会被截断,造成数据丢失或不完整,为了有效解决这个问题,对于库表中的一个字段,可以定义的存储空间处理规则为:实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值。
(2)对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。例如,针对数据库库表中的一个类型为“int”的字段,数据库为该字段申请的存储空间长度值为100,并且只能分配给每个类型为“int”的字段100的存储长度,但是在该字段实际存储的数据中的最长数据的长度只有50,这样就会造成数据库中的存储空间的资源浪费,为了有效解决这个问题,对于库表中的一个字段,可以定义的存储空间处理规则为:实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。这里的预设值不做限定,可根据数据库的实际存储情况以及每种字段的类型进行设定,例如针对“int”类型的,其预设值可设定为50;针对“Char”类型的,其预设值可设定为100。
为了获取符合存储空间处理规则的库表信息,在本发明的一个实施例中,库表信息获取单元220,适于获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
具体地,库表信息获取单元,遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。这里获取各字段的实际存储的数据的最大长度值的时候,可以采用SQL语句完成,例如“length”语句,即“length”+字段名,那么返回的数据就是该字段的实际存储的最大长度值,实际代码可以是“(select length($colvar)form$db limit1)”。
数据库为业务端提供存储和管理数据的服务,在进行数据库的存储空间管理之前,需要把预进行操作的信息返回给相应业务端,获取业务端的进一步确认。所以,在本发明的一个实施例中,库表处理单元230,进一步适于在根据第一信息表中的内容,对数据库的库表进行相应的处理之前,将第一信息表发送给使用该于主从式数据库系统的业务端。
进一步地,库表处理单元230,适于接收业务端在接收到第一信息表后反馈的库表操作信息;根据库表操作信息,对数据库中的相应库表进行相应的处理这里相应的库表的处理操作可以是业务端自行处理,也可以通过返回库表操作信息,数据库维护人员进行处理。
在发送给用户的第一信息表文件中可以附加上预设时间信息(例如2天),如果用户在预设时间(2天)内没有及时反馈信息,数据库维护人员将自动默认第一信息表中的库表都是需要进行处理。所以,库表处理单元230,适于当业务端在预设时间内未反馈信息时,根据第一信息表中的内容,对数据库中的相应库表进行相应的处理。
然而,本领域技术人员应可了解,上述经过业务端确认后方可处理库表的方式并非本发明的限制。由于该库表的存储不合理会造成数据库资源的浪费,库表处理对业务端的影响也有限,因此当得到第一信息表后,也可以不经过业务端同意而直接进行处理的操作。
在本发明的一个实施例中,如果数据库中的字段实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。那么,库表处理单元230,适于对于数据库中的相应库表的相应字段,修改该字段的类型;例如,“Char”类型的字段的数据存储的实际长度为10,而申请的存储空间长度值为500。那么就可以将该字段的类型改为“VarChar”,这里的“VarChar”和“Char”均属于字符串类型,但是“VarChar”可以根据字段的实际存储长度分配给该字段相应的存储长度,占用的数据库空间也是实际存储长度对应的空间。
或者,
如果数据库中的字段实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。那么库表处理单元230,适于对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短;例如,发现所有“Char”类型的字段的数据存储的实际长度都在10或者10以下,但是创建数据库是申请的存储空降长度值为100,就把申请的存储空降长度值改为50。
或者,
如果字段的数据的实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值,那么库表处理单元230,适于对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。例如,“int”类型的数据的字段的实际存储长度为500,但是,创建数据库是申请的存储空降长度值为100,那么就将为该“int”字段申请的存储空间长度值加长到600。还需要说明,在将申请的存储空间长度值加长的时候是在满足数据库存储空间的前提下进行的操作。
本发明方案的实施不需要每时每刻都在进行,为了保证数据库的正常工作以及本发明方案的合理进行,图3示出了根据本发明一个实施例的一种处理数据库的存储空间的装置的解雇示意图。如图3所示,该处理数据库的存储空间的装置300包括:规则定义单元310、库表信息获取单元320、库表处理单元330和周期设定单元340。其中,规则定义单元310、库表信息获取单元320、库表处理单元330与图2所示的规则定义单元210、库表信息获取单元220、库表处理单元230具有对应相同的功能,相同的部分在此不再赘述。
周期设定单元340,适于设定第一周期时间;
库表信息获取单元320和库表处理单元330,适于每隔第一周期时间,执行获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。
例如,可以将第一周期时间设定为1天,即一天进行一次本发明的技术方案。
在本发明的一个实施例中,库表信息获取单元320,进一步适于记录每次处理的数据库的库表标识;每隔第一周期时间,只获取之前未处理过的新增的库表信息。
数据库中的库表很多,如果每隔一天的时间就进行一次,一方面数据量太大;另一方面,有些库表在一天内可能没有更新数据。如果在全部的库表中执行本发明的技术方案,会影响该技术方案的处理时间,降低处理效率,浪费处理时的运行资源。所以,将上一周处理过的库表进行标识,下一周期进行处理的时候就可以不获取带有标识的库表信息,只获取之前未处理过的新增的库表信息。
但是,库表信息还会进行不定期的更新中,较长时间不处理的话还会出现数据库资源浪费或者数据不完整的情况,所以,在本发明的一个实施例中,周期设定单元340,进一步适于设定第二周期时间;第二周期时间大于第一周期时间;
库表信息获取单元320和库表处理单元330,适于每隔第二周期时间,执行获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,库表信息获取单元执行获取数据库的库表信息时,获取数据库中的全部库表信息。
例如,第一周期时间可以设定1天,第二周期时间设定为1个月,即每隔1天获取未标识的新增的库表信息进行处理,每隔一个月的时间获取全部库表信息进行处理。
根据本发明的技术方案,首先定义一个数据库存储空间的处理规则,获取数据库的库表信息,将库表信息与存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以此来提取数据库中存储不合理的库表信息,然后再根据第一信息表中的内容,对数据库中的相应库表进行相应的处理,将数据库中不合理的存储处理后,可以有效减少数据库的存储空间的资源浪费,使数据库资源分配更加合理,同时有效防止数据缺失或不完整。综上所述,本发明可以实现数据库存储空间资源的合理利用,减少存储空间的资源浪费,同时有效防止数据的缺失或不完整。
需要说明的是:
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述,构造这类装置所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的处理数据库的存储空间的装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明公开了A1、一种处理数据库的存储空间的方法,包括:
预定义数据库的存储空间处理规则;
获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
A2、如A1所述的方法,其中,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
A3、如A1所述的方法,其中,所述获取数据库的库表信息包括:
获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;
以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
A4、如A3所述的方法,其中,所述获取数据库中的各库表的各字段的实际存储的数据的最大长度值包括:
遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
A5、如A1所述的方法,其中,在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,该方法进一步包括:
将所述第一信息表发送给使用该于主从式数据库系统的业务端。
A6、如A5所述的方法,其中,所述根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理包括:
接收所述业务端在接收到所述第一信息表后反馈的库表操作信息;根据所述库表操作信息,对数据库中的相应库表进行相应的处理;
和/或,
当所述业务端在预设时间内未反馈信息时,根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
A7、如A1所述的方法,其中,所述对数据库的库表进行相应的处理包括:
对于数据库中的相应库表的相应字段,修改该字段的类型;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。
A8、如A1-A7中任一项所述的方法,其中,该方法进一步包括:
设定第一周期时间;
每隔所述第一周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。
A9、如A8所述的方法,其中,该方法进一步包括:
记录每次处理的数据库的库表标识;
其中,每隔所述第一周期时间,只获取之前未处理过的新增的库表信息。
A10、如A9所述的方法,其中,该方法进一步包括:
设定第二周期时间;第二周期时间大于第一周期时间;
每隔所述第二周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,执行所述获取数据库的库表信息时,获取数据库中的全部库表信息。
本发明还公开了B11、一种处理数据库的存储空间的装置,其中,该装置包括:
规则定义单元,适于预定义数据库的存储空间处理规则;
库表信息获取单元,适于获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
库表处理单元,适于根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
B12、如B11所述的装置,其中,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
B13、如B11所述的装置,其中,
所述库表信息获取单元,适于获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
B14、如B13所述的装置,其中,
所述库表信息获取单元,遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
B15、如B11所述的装置,其中,
所述库表处理单元,进一步适于在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,将所述第一信息表发送给使用该于主从式数据库系统的业务端。
B16、如B15所述的装置,其中,
所述库表处理单元,适于接收所述业务端在接收到所述第一信息表后反馈的库表操作信息;根据所述库表操作信息,对数据库中的相应库表进行相应的处理;
和/或,
所述库表处理单元,适于当所述业务端在预设时间内未反馈信息时,根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
B17、如B11所述的装置,其中,
所述库表处理单元,适于对于数据库中的相应库表的相应字段,修改该字段的类型;或者,对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值缩短;
或者,
对于数据库中的相应库表的相应字段,将为该字段申请的存储空间长度值加长。
B18、如B11-B17中任一项所述的装置,其中,
该装置进一步包括:周期设定单元,适于设定第一周期时间;
所述库表信息获取单元和所述库表处理单元,适于每隔所述第一周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤。
B19、如B18所述的装置,其中,
所述库表信息获取单元,进一步适于记录每次处理的数据库的库表标识;
每隔所述第一周期时间,只获取之前未处理过的新增的库表信息。
B20、如B19所述的装置,其中,
所述周期设定单元,进一步适于设定第二周期时间;第二周期时间大于第一周期时间;
所述库表信息获取单元和所述库表处理单元,适于每隔所述第二周期时间,执行所述获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中,以及根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理的步骤;其中,所述库表信息获取单元执行所述获取数据库的库表信息时,获取数据库中的全部库表信息。

Claims (10)

1.一种处理数据库的存储空间的方法,包括:
预定义数据库的存储空间处理规则;
获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
2.如权利要求1所述的方法,其中,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
3.如权利要求1所述的方法,其中,所述获取数据库的库表信息包括:
获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;
以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
4.如权利要求3所述的方法,其中,所述获取数据库中的各库表的各字段的实际存储的数据的最大长度值包括:
遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
5.如权利要求1所述的方法,其中,在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,该方法进一步包括:
将所述第一信息表发送给使用该于主从式数据库系统的业务端。
6.一种处理数据库的存储空间的装置,其中,该装置包括:
规则定义单元,适于预定义数据库的存储空间处理规则;
库表信息获取单元,适于获取数据库的库表信息,将库表信息与所述存储空间处理规则进行匹配,将符合存储空间处理规则的库表信息输出到第一信息表中;
库表处理单元,适于根据所述第一信息表中的内容,对数据库中的相应库表进行相应的处理。
7.如权利要求6所述的装置,其中,所述存储空间处理规则包括如下中的一种或多种:
对于库表中的一个字段,其实际存储的数据的最大长度值超出了创建该库表时为该字段申请的存储空间长度值;
对于库表中的一个字段,其实际存储的数据的最大长度值比创建该库表时为该字段申请的存储空间长度值小,且差值大于预设值。
8.如权利要求6所述的装置,其中,
所述库表信息获取单元,适于获取数据库中的各库表在创建库表时为各字段所申请的存储空间长度值;以及,获取数据库中的各库表的各字段的实际存储的数据的最大长度值。
9.如权利要求8所述的装置,其中,
所述库表信息获取单元,遍历数据库中的各库表的各字段以获取各字段的实际存储的数据的最大长度值。
10.如权利要求6所述的装置,其中,
所述库表处理单元,进一步适于在根据所述第一信息表中的内容,对数据库的库表进行相应的处理之前,将所述第一信息表发送给使用该于主从式数据库系统的业务端。
CN201611028754.3A 2016-11-18 2016-11-18 一种处理数据库的存储空间的方法和装置 Pending CN106649590A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611028754.3A CN106649590A (zh) 2016-11-18 2016-11-18 一种处理数据库的存储空间的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611028754.3A CN106649590A (zh) 2016-11-18 2016-11-18 一种处理数据库的存储空间的方法和装置

Publications (1)

Publication Number Publication Date
CN106649590A true CN106649590A (zh) 2017-05-10

Family

ID=58807408

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611028754.3A Pending CN106649590A (zh) 2016-11-18 2016-11-18 一种处理数据库的存储空间的方法和装置

Country Status (1)

Country Link
CN (1) CN106649590A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108509639A (zh) * 2018-04-11 2018-09-07 武汉斗鱼网络科技有限公司 表信息管理方法、装置及可读存储介质
CN109564567A (zh) * 2018-10-17 2019-04-02 算丰科技(北京)有限公司 数据存储方法、装置、电子设备及计算机可读存储介质
CN111651404A (zh) * 2020-04-26 2020-09-11 浙江吉利汽车研究院有限公司 传感器数据存储、读取方法及数据存储、读取装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101226553A (zh) * 2008-02-03 2008-07-23 中兴通讯股份有限公司 一种嵌入式数据库变长字段存储的实现方法及装置
CN101241487A (zh) * 2007-02-05 2008-08-13 上海市民办文绮中学 一种减少数据库冗余的方法
CN102799690A (zh) * 2012-08-13 2012-11-28 南京莱斯信息技术股份有限公司 一种利用数据库技术校验网页输入的方法
CN104317836A (zh) * 2014-10-10 2015-01-28 山东中创软件工程股份有限公司 批量生成数据文件的方法及装置
CN104731977A (zh) * 2015-04-14 2015-06-24 海量云图(北京)数据技术有限公司 电话号码数据的发现与分类方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101241487A (zh) * 2007-02-05 2008-08-13 上海市民办文绮中学 一种减少数据库冗余的方法
CN101226553A (zh) * 2008-02-03 2008-07-23 中兴通讯股份有限公司 一种嵌入式数据库变长字段存储的实现方法及装置
CN102799690A (zh) * 2012-08-13 2012-11-28 南京莱斯信息技术股份有限公司 一种利用数据库技术校验网页输入的方法
CN104317836A (zh) * 2014-10-10 2015-01-28 山东中创软件工程股份有限公司 批量生成数据文件的方法及装置
CN104731977A (zh) * 2015-04-14 2015-06-24 海量云图(北京)数据技术有限公司 电话号码数据的发现与分类方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108509639A (zh) * 2018-04-11 2018-09-07 武汉斗鱼网络科技有限公司 表信息管理方法、装置及可读存储介质
CN108509639B (zh) * 2018-04-11 2021-04-23 武汉斗鱼网络科技有限公司 表信息管理方法、装置及可读存储介质
CN109564567A (zh) * 2018-10-17 2019-04-02 算丰科技(北京)有限公司 数据存储方法、装置、电子设备及计算机可读存储介质
CN111651404A (zh) * 2020-04-26 2020-09-11 浙江吉利汽车研究院有限公司 传感器数据存储、读取方法及数据存储、读取装置

Similar Documents

Publication Publication Date Title
CN106991183B (zh) 一种商业智能etl的封装方法及系统
CN107203424A (zh) 一种在分布式集群中调度深度学习作业的方法和装置
EP1862956A1 (en) Systems and methods for assignment generation in a value flow environment
EP1953690A2 (en) Method and system for business process management
Xu et al. Optimal policies in hybrid manufacturing/remanufacturing systems with random price-sensitive product returns
US8626703B2 (en) Enterprise resource planning (ERP) system change data capture
US20060059060A1 (en) Systems and methods for executing planning services
CN107730228A (zh) 账户清结算方法、设备及存储介质
CN104484730A (zh) 配料监控追溯方法及系统
CN105139128A (zh) 一种远程会计处理方法及系统
CN108183933A (zh) 消息推送方法、装置及系统、电子设备和计算机存储介质
CN107967313A (zh) 一种基于字段数据和坐标共性合并不同行业数据的方法
CN110210775B (zh) 一种信息管理平台、应用及其方法
CN107909342A (zh) 一种工程项目管理与工程项目审计一体化系统
CN106649590A (zh) 一种处理数据库的存储空间的方法和装置
CN107292560A (zh) 物资库存管理方法及系统
US11068497B2 (en) Machine for generating unstructured syntax
CN102222285B (zh) 多维度数据联动计算装置和多维度数据联动计算方法
CN106779988A (zh) 一种税控服务器管理系统及方法
CN105654182A (zh) 团队旅客自动时限管理和清座的系统及方法
Dikhanbayeva et al. Analysis of textile manufacturing SMEs in Kazakhstan for industry 4.0
CN105678452A (zh) 一种费用计提的方法及装置
CN104573969A (zh) 一种事项管理系统的生成方法及装置
CN107729305B (zh) 基于数据库及前端显示技术的会议材料自动生成方法
US20150363711A1 (en) Device for rapid operational visibility and analytics automation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510