CN112181936A - 一种数据库检测方法和装置 - Google Patents

Abstract

本发明公开一种数据库检测方法和装置，涉及计算机技术领域。该方法一具体实施方式包括：读取表数据标准规范和字段数据标准规范；获取待检测数据库的数据表信息和数据表的字段信息；按表数据标准规范检测数据表信息及按字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。能检测既有数据库、数据库设计文档是否符合数据标准规范以便整改，使得对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，以及进行新数据库设计时出现的上述不一致情况，可自动检测，提高检测效率和准确率，准确追溯处理情况。

Description

一种数据库检测方法和装置

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据库检测方法和装置。

背景技术

在实际工作中，由于存在多个业务线、多个数据库，各个业务线的各个数据库独立工作，相同含义的相同字段，在各个数据库的字段名、字段类型、字段含义却可能不同。对于数据表的表名或者表注释的含义，有时候也可能发生类似上述情况。比如用户表，在A数据库设计为user，在B数据库可能设计为users。目前只能依靠DBA(数据库管理员)发现记录，并协同变更，由于DBA的记录不在管理系统中，很容易分散而导致难以追溯各种处理情况，对于没有建立数据规范的公司，DBA和研发人员在进行新的数据库设计的时候，也很难避免上述类似情况。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致的情况，只能依靠人工检测，检测效率低，且难以准确追溯各种处理情况，并且DBA和研发人员在进行新的数据库设计时也很难避免上述问题。

发明内容

有鉴于此，本发明实施例提供一种数据库检测方法和装置，能够自动化检测既有数据库是否匹配数据标准规范以便整改，还能够自动化检测数据库设计文档是否符合数据标准规范以便整改，从而使得对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，以及在在进行新的数据库设计时出现的上述不一致情况，均可以实现自动检测，并避免遗漏，提高检测效率和检测准确率，还可以准确追溯各种处理情况。

为实现上述目的，根据本发明实施例的一个方面，提供了一种数据库检测方法。

一种数据库检测方法，包括：读取记录的表数据标准规范和字段数据标准规范，所述表数据标准规范规定了数据库表的数据标准规范，所述字段数据标准规范规定了数据库表中字段的数据标准规范；获取待检测数据库的数据表信息和数据表的字段信息；按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表。

可选地，所述数据表信息包括表名和表名注释，所述字段信息包括字段名、字段类型和字段注释。

可选地，获取待检测数据库的数据表信息和数据表的字段信息的步骤，包括：从远端数据库检测表中获取第一目标检测项目对应的数据库连接信息；通过所述数据库连接信息连接远端数据库，获取所述远端数据库的各数据表的所述表名和表名注释；获取所述各数据表的表结构，所述表结构包括所述字段名、字段类型和字段注释。

可选地，获取待检测数据库的数据表信息和数据表的字段信息的步骤，包括：从数据库设计检测表中获取第二目标检测项目对应的数据库设计文档存储路径；根据所述数据库设计文档存储路径获取数据库设计文档；按照预定的数据库设计文档格式规范，对所述数据库设计文档进行分析，得到数据库设计的数据表的所述表名和表名注释，以及所述字段名、字段类型和字段注释。

可选地，所述预定的数据库设计文档格式规范的内容包括：所述数据库设计文档的格式为特定文件格式，其中，每个数据表第一行的三列分别为特定字符串、表名、表名注释；第二行的三列分别为对字段名、字段类型和字段注释的列描述信息，第三行以及后续各行的三列分别为字段名、字段类型和字段注释。

可选地，所述特定文件格式为逗号分隔值文件格式。

可选地，按照预定的数据库设计文档格式规范，对所述数据库设计文档进行分析，得到数据库设计的数据表的所述表名和表名注释，以及所述字段名、字段类型和字段注释的步骤，包括：逐行分析所述数据库设计文档，其中：如果某行第一列为所述特定字符串，则确定该行为数据库表设计，根据所述特定字符串之后的两列分别得到所述表名和表名注释；如果某行第一列既不是所述特定字符串，也不是对字段名的列描述信息，则确定该行为字段设计，根据该行的三列分别得到所述字段名、字段类型和字段注释。

可选地，按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表的步骤，包括：对于每一数据表信息，检测其中的表名和表名注释是否符合所述表数据标准规范，将表名和表名注释二者之一不符合所述表数据标准规范的数据表的检测结果添加到所述检测结果表；对于每一字段信息，检测其中的字段名、字段类型、字段注释是否符合所述字段数据标准规范，将符合以下两种情况之一的字段的检测结果添加到所述检测结果表：情况一：字段名符合所述字段数据标准规范，但字段类型或字段注释不符合所述字段数据标准规范；情况二：字段注释符合所述字段数据标准规范，但字段名或字段类型不符合所述字段数据标准规范；其中，所述检测结果表包括异常处理记录字段，用于记录对添加到所述检测结果表的检测结果的处理信息。

根据本发明实施例的另一方面，提供了一种数据库检测装置。

一种数据库检测装置，包括：数据标准规范读取模块，用于读取记录的表数据标准规范和字段数据标准规范，所述表数据标准规范规定了数据库表的数据标准规范，所述字段数据标准规范规定了数据库表中字段的数据标准规范；数据库信息获取模块，用于获取待检测数据库的数据表信息和数据表的字段信息；数据库检测模块，用于按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表。

可选地，所述数据库信息获取模块获取的所述数据表信息包括表名和表名注释，所述字段信息包括字段名、字段类型和字段注释。

可选地，所述数据库信息获取模块还用于：从远端数据库检测表中获取第一目标检测项目对应的数据库连接信息；通过所述数据库连接信息连接远端数据库，获取所述远端数据库的各数据表的所述表名和表名注释；获取所述各数据表的表结构，所述表结构包括所述字段名、字段类型和字段注释。

可选地，所述数据库信息获取模块还用于：从数据库设计检测表中获取第二目标检测项目对应的数据库设计文档存储路径；根据所述数据库设计文档存储路径获取数据库设计文档；按照预定的数据库设计文档格式规范，对所述数据库设计文档进行分析，得到数据库设计的数据表的所述表名和表名注释，以及所述字段名、字段类型和字段注释。

可选地，所述预定的数据库设计文档格式规范的内容包括：所述数据库设计文档的格式为特定文件格式，其中，每个数据表第一行的三列分别为特定字符串、表名、表名注释；第二行的三列分别为对字段名、字段类型和字段注释的列描述信息，第三行以及后续各行的三列分别为字段名、字段类型和字段注释。

可选地，所述特定文件格式为逗号分隔值文件格式。

可选地，所述数据库信息获取模块包括设计文档分析子模块，用于：逐行分析所述数据库设计文档，其中：如果某行第一列为所述特定字符串，则确定该行为数据库表设计，根据所述特定字符串之后的两列分别得到所述表名和表名注释；如果某行第一列既不是所述特定字符串，也不是对字段名的列描述信息，则确定该行为字段设计，根据该行的三列分别得到所述字段名、字段类型和字段注释。

可选地，所述数据库检测模块还用于：对于每一数据表信息，检测其中的表名和表名注释是否符合所述表数据标准规范，将表名和表名注释二者之一不符合所述表数据标准规范的数据表的检测结果添加到所述检测结果表；对于每一字段信息，检测其中的字段名、字段类型、字段注释是否符合所述字段数据标准规范，将符合以下两种情况之一的字段的检测结果添加到所述检测结果表：情况一：字段名符合所述字段数据标准规范，但字段类型或字段注释不符合所述字段数据标准规范；情况二：字段注释符合所述字段数据标准规范，但字段名或字段类型不符合所述字段数据标准规范；其中，所述检测结果表包括异常处理记录字段，用于记录对添加到所述检测结果表的检测结果的处理信息。

根据本发明实施例的又一方面，提供了一种电子设备。

一种电子设备，包括：一个或多个处理器；存储器，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现本发明提供的数据库检测方法。

根据本发明实施例的又一方面，提供了一种计算机可读介质。

一种计算机可读介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明提供的数据库检测方法。

上述发明中的一个实施例具有如下优点或有益效果：读取记录的表数据标准规范和字段数据标准规范，表数据标准规范规定了数据库表的数据标准规范，字段数据标准规范规定了数据库表中字段的数据标准规范；获取待检测数据库的数据表信息和数据表的字段信息；按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。待检测数据库的数据表信息和数据表的字段信息可以从远端数据库获取，也可以通过对数据库设计文档进行分析而获得，本发明实施例能够检测既有数据库是否匹配数据标准规范以便整改，还能够检测数据库设计文档是否符合数据标准规范以便整改，从而使得本申请对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，以及在进行新的数据库设计时出现的上述不一致的情况，均可以实现自动检测，并避免遗漏，提高检测效率和检测准确率，还可以准确追溯各种处理情况。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是根据本发明实施例的数据库检测方法的主要步骤示意图；

图2是根据本发明一个实施例的数据库检测流程示意图；

图3是根据本发明实施例的表数据标准规范和字段数据标准规范的示意图；

图4是根据本发明实施例的检测过程记录示意图；

图5是根据本发明实施例的检测结果示意图；

图6是根据本发明另一个实施例的数据库检测流程示意图；

图7是根据本发明实施例的数据库检测装置的主要模块示意图；

图8是本发明实施例可以应用于其中的示例性系统架构图；

图9是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

本领域技术技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本公开可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。

图1是根据本发明实施例的数据库检测方法的主要步骤示意图。

如图1所示，本发明实施例的数据库检测方法主要包括如下的步骤S101至步骤S103。

步骤S101：读取记录的表数据标准规范和字段数据标准规范。

步骤S102：获取待检测数据库的数据表信息和数据表的字段信息。

步骤S103：按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。

其中，表数据标准规范规定了数据库表(即数据库的数据表，可简称数据表)的数据标准规范，包括规定了具体数据库表的表名、表名注释的命名规范；字段数据标准规范规定了数据库表中字段的数据标准规范，包括规定了具体字段的字段名、字段注释的命名规范，以及该字段的具体字段类型。

数据表信息可以包括表名和表名注释，字段信息可以包括字段名、字段类型和字段注释。表名是指数据表的英文名，字段名是指数据字段的英文名，表名注释是指数据表的英文名对应的中文含义，字段注释是指数据字段的英文名对应的中文含义。字段类型是指数据字段的数据类型，例如int、datetime、varchar(255)、text、longtext等。

在实施方式一中，获取待检测数据库的数据表信息和数据表的字段信息的步骤，可以包括：从远端数据库检测表中获取第一目标检测项目对应的数据库连接信息；通过该数据库连接信息连接远端数据库，获取远端数据库的各数据表的表名和表名注释；获取各数据表的表结构，表结构包括字段名、字段类型和字段注释。

对于实施方式一，本发明实施例能够检测既有数据库是否匹配数据标准规范以便整改，使得对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，可以自动检测，避免遗漏，提高检测效率和检测准确率。

在实施方式二中，获取待检测数据库的数据表信息和数据表的字段信息的步骤，可以包括：从数据库设计检测表中获取第二目标检测项目对应的数据库设计文档存储路径；根据数据库设计文档存储路径获取数据库设计文档；按照预定的数据库设计文档格式规范，对数据库设计文档进行分析，得到数据库设计的数据表的表名和表名注释，以及字段名、字段类型和字段注释。

预定的数据库设计文档格式规范的内容可以包括：数据库设计文档的格式为特定文件格式，其中，每个数据表第一行的三列分别为特定字符串、表名、表名注释；第二行的三列分别为对字段名、字段类型和字段注释的列描述信息，第三行以及后续各行的三列分别为字段名、字段类型和字段注释。

特定文件格式为逗号分隔值文件格式。逗号分隔值即CSV(Comma-SeparatedValues，逗号分隔值或称字符分隔值，因为分隔字符也可以不是逗号)，CSV文件以纯文本形式存储表格数据(数字和文本)，纯文本意味着该文件是一个字符序列，不含必须像二进制数字那样被解读的数据。CSV文件由任意数目的记录组成，记录间以某种换行符分隔，每条记录由字段组成，字段间的分隔符是其他字符或字符串，最常见的是逗号或制表符。通常情况下，所有记录都有完全相同的字段序列，通常都是纯文本文件，建议使用WORDPAD(一种写字板工具)或是记事本(NOTE)来开启，或者先另存新档后用EXCEL开启。

特定字符串是预先设定的某个固定词，优选采用表示数据库表的固定词，例如Tablename。

按照预定的数据库设计文档格式规范，对数据库设计文档进行分析，得到数据库设计的数据表的表名和表名注释，以及字段名、字段类型和字段注释的步骤，具体可以包括：逐行分析所述数据库设计文档，其中：

如果某行第一列为特定字符串，则确定该行为数据库表设计，根据特定字符串之后的两列分别得到表名和表名注释；

如果某行第一列既不是特定字符串，也不是对字段名的列描述信息，则确定该行为字段设计，根据该行的三列分别得到字段名、字段类型和字段注释。

对于实施方式二，本发明实施例能够检测数据库设计文档是否符合数据标准规范以便整改，使得在进行新的数据库设计时，也可以避免对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况。

在实施方式三中，获取待检测数据库的数据表信息和数据表的字段信息的步骤可以为实施方式一与实施方式二的结合。

对于实施方式三，本发明实施例在一个检测过程中，既检测既有数据库是否匹配数据标准规范以便整改，又检测数据库设计文档中的新增数据库设计是否符合数据标准规范以便整改，从而对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，以及新的数据库设计时出现的上述不一致的情况，均可以实现自动检测，并避免遗漏，提高检测效率和检测准确率。

第一目标检测项目和第二目标检测项目可以是相同或不同的检测项目。检测项目用于区分检测用途，例如对于电商后台业务，新设计了某个新业务A的若干数据表，则需要创建相应的检测项目：A业务数据表检测，针对的数据库是电商后台数据库，之后把数据库设计文档上传到该检测项目进行检测。而对于小贷(小规模贷款)业务，新设计了某个新业务B的若干数据表，则需要创建相应的检测项目：B业务数据表检测，针对的数据库是小贷数据库，之后把数据库设计文档上传到该检测项目进行检测。

按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表的步骤，具体可以包括：

对于每一数据表信息，检测其中的表名和表名注释是否符合表数据标准规范，将表名和表名注释二者之一不符合表数据标准规范的数据表的检测结果添加到检测结果表；

对于每一字段信息，检测其中的字段名、字段类型、字段注释是否符合所述字段数据标准规范，将符合以下两种情况之一的字段的检测结果添加到检测结果表：

情况一：字段名符合字段数据标准规范，但字段类型或字段注释不符合字段数据标准规范；

情况二：字段注释符合字段数据标准规范，但字段名或字段类型不符合字段数据标准规范。

把检测结果添加到检测结果表即将不符合表数据标准规范的数据表和不符合字段数据标准规范的字段，按照检测结果表的各项添加相应的信息，具体将哪些内容添加到检测结果表参见下文对检测结果表的各项内容的介绍。

检测结果表还包括异常处理记录字段，用于记录对添加到检测结果表的检测结果的处理信息，异常处理记录字段可以包括：指示该问题(即检测结果中的异常)是否已经处理的字段、指示处理该问题的DBA的字段、指示处理方法纪要的字段、DBA处理时间、记录创建时间等字段，异常处理记录字段可以用于准确追溯各种处理情况，在DBA处理完检测结果表中各检测结果的异常之后，将对异常的处理信息按照上述各字段填入检测结果表。从而，在检测结果表中按照上述字段来查找，即可准确追溯到各种处理情况，克服了现有技术DBA的记录不在管理系统中，很容易分散而导致难以追溯各种处理情况的缺陷。

图2是根据本发明一个实施例的数据库检测流程示意图。

本实施例的数据库检测流程包括如下的步骤S201至步骤S206。

步骤S201：读取记录的表数据标准规范和字段数据标准规范。

可以预先构建数据规范表，并按照数据规范表记录表数据标准规范和字段数据标准规范。表数据标准规范和字段数据标准规范是针对所有数据库、所有数据库设计而制定的规范。

数据规范表规定了记录的ID、记录类型、记录英文名、记录中文名、记录具体解释、字段类型属性、创建者、记录创建时间。其中，记录的ID是指记录的某条表数据标准规范或字段数据标准规范的ID，ID按照记录顺序自增；记录类型是指记录的数据标准规范类型，数据标准规范类型包括表数据标准规范、字段数据标准规范两种类型；记录英文名是指数据表或数据字段的英文名，即表名或字段名；记录中文名是指数据表或数据字段的英文名对应的中文含义，即表名注释或字段注释；字段类型属性是指当数据标准规范类型是针对数据字段时该数据字段的数据类型，简称为字段类型；记录具体解释是指对表名或者字段名的备注，可以是诸如字段相关的计算方法之类的备注，也可以是对表名注释或字段注释的进一步具体解释；创建者是指记录人的用户名等标识；记录创建时间即记录表数据标准规范和字段数据标准规范的时间。

数据规范表的各项如表1所示。

表1

按照数据规范表的字段记录表数据标准规范和字段数据标准规范，每条记录的内容包括一条表数据标准规范或一条字段数据标准规范。图3是表数据标准规范和字段数据标准规范的示意图，图3中id为1、3、4对应的为表数据标准规范，id为其他值对应的为字段数据标准规范。表数据标准规范规定了数据库表的数据标准规范，包括规定了具体数据库表的表名、表名注释的命名规范；字段数据标准规范规定了数据库表中字段的数据标准规范，包括规定了具体字段的字段名、字段注释的命名规范，以及该字段的具体字段类型。

步骤S202：从远端数据库检测表中获取目标检测项目对应的数据库连接信息。

远端数据库检测表用于记录要以数据标准规范去检测的远端数据库的信息，其中包括远端数据库的数据库名、IP(网际协议地址)、Port(端口)、账号、密码等数据库连接信息。远端数据库检测表的各项如表2所示。

表2

步骤S203：通过数据库连接信息连接远端数据库。

步骤S204：获得远端数据库的数据表信息和每个数据表的表结构。

以远端数据库为MySQL(一个关系型数据库管理系统)数据库为例，可以通过MySQL语句：show tables获得数据表信息，数据表信息包括表名和表名注释；通过MySQL语句：select COLUMN_NAME,COLUMN_TYPE,COLUMN_COMMENT from information_schema.columnswhere table_schema＝'数据库名'and table_name＝'数据表名'，获得数据表的表结构，表结构包括字段名、字段类型和字段注释。

步骤S205：根据数据表信息和数据表的表结构构建库表数组，库表数组的数组元素包括表名、表名注释，字段名、字段类型和字段注释。

步骤S206：遍历库表数组，按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。

其中，对每个数据表，检测其表名和表名注释是否符合表数据标准规范，具体地，比对其表名和表名注释与表数据标准规范中规定的表名和表名注释是否一致，其中：

如果某数据表的表名与表数据标准规范规定的表名一致，但表名注释不一致的，则将该数据表的检测结果插入到检测结果表中；

如果表名注释与表数据标准规范规定的表名注释一致，但表名不一致的，也将该数据表的检测结果插入到检测结果表中。

对每个字段，检测其字段名、字段类型、字段注释是否符合字段数据标准规范，具体地，比对其字段名、字段类型、字段注释与字段数据标准规范中规定的字段名、字段类型、字段注释是否一致，其中：

如果字段名与字段数据标准规范规定的字段名一致，但字段注释不一致的，则将该字段的检测结果插入到检测结果表中；

如果字段名与字段数据标准规范中规定的字段名一致，但字段类型不一致的，也将该字段的检测结果插入到检测结果表中；

如果字段注释与字段数据标准规范中规定的字段注释一致，但字段名不一致的，也将该字段的检测结果插入到检测结果表中。

如果字段注释与字段数据标准规范中规定的字段注释一致，但字段类型不一致的，也将该字段的检测结果插入到检测结果表中。

检测结果表用于记录数据表、数据字段的检测结果中各种需要变更的情况。检测结果表的各项如表3所示。

表3

按照表3所示的检测结果表中的各项来记录数据表、数据字段的检测结果。表3中，Modify_flag、Modify_dba、Modify_log、Created_at、Modify_at为异常处理记录字段，基于这些字段，即可追溯问题的处理情况。

图4是本发明实施例的检测过程记录示意图，图4记录了对某数据库的各数据表(表名为blood_analysis；blood_problem；blood_save等)、数据表的各字段(字段名为id；creator；product_name等)的检测过程。图5是本发明实施例的检测结果示意图，图5的检测结果的每条记录的各项分别对应检测结果表的各字段，图5中结果记录类型即有异常的数据标准规范类型，记录了是字段不符合数据标准规范还是数据表不符合数据标准规范；存疑结果即存疑检测结果，记录某个字段或数据表的具体不符合相应数据标准规范的内容，例如数据表“user”(表名)中的字段“login”的字段属性(字段属性又称字段类型)“varchar(100)”与数据标准规范中规定的该字段的字段属性“varchar(255)”不一致。

本实施例建立数据表的表数据标准规范和数据字段的字段数据标准规范，并将数据表、数据字段的检测结果中各种需要变更的情况记录到检测结果表，能够检测既有数据库是否匹配数据标准规范以便整改，提高数据库检测的效率和准确率。

图6是根据本发明另一个实施例的数据库检测流程示意图。

本实施例的数据库检测流程包括如下的步骤S601至步骤S605。

步骤S601：读取记录的表数据标准规范和字段数据标准规范。

步骤S602：从数据库设计检测表中获取目标检测项目对应的数据库设计文档存储路径。

数据库设计检测表用于记录每次检测的数据库设计。数据库设计检测表的各项如表4所示。

表4

字段名称	字段类型	说明
			id	int(11)unsigned	ID自增
Project_id	Varchar(255)	检测项目名
			Project_desc	Longtext	本次检测说明
Src_file	varchar(255)	CSV设计文件存储路径

CSV设计文件即数据库设计文档，本发明实施例的数据库设计文档规定以CSV文件形式上传，并且数据库设计文档中每个数据表的第一行第一列必须是Tablename这个固定词，第一行第二列是英文表名(即表名)，第一行第三列是表的中文名(即表名注释)；第二行是固定的列描述：字段名称、字段类型、字段说明三个列描述；从第三行起，第一列是真正的字段名称，第二列是真正的字段类型，第三列是真正的字段说明。字段说明即字段注释。数据库设计文档的内容形式可以如表5所示，表5第二行“字段名称”、“字段类型”、“字段说明”即三个列描述。

表5

Tablename	async_task	异步任务表
			字段名称	字段类型	字段说明
id	int(11)unsigned	ID自增
			queue_name	Varchar(255)	任务队列名

步骤S603：根据数据库设计文档存储路径获取数据库设计文档。

即根据表4中的CSV设计文件存储路径获取数据库设计文档。

步骤S604：按照预定的数据库设计文档格式规范，对数据库设计文档进行分析，得到数据库设计的数据表信息和数据表的字段信息。

数据表信息包括表名和表名注释，字段信息包括字段名、字段类型和字段注释。

当用户上传CSV文件后，建立数据库设计文档检测项目，然后对数据库设计文档进行分析计算，如果某行第一列是tablename，则该行是表设计，那么该行第二列是表的英文名(表名)，该行第三列是表的中文名(表名注释)。

如果某行第一列不是tablename，也不是“字段名称”这四个字，则该行是字段设计，该行第一列是字段的英文名(字段名)，该行第二列是字段的字段类型，该行第三列是字段的中文注释(字段注释)。

通过以上分析，可以得到数据库设计的每个表名、表名注释，字段名、字段类型、字段注释。

步骤S605：按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。

对于数据表，只需要对表名、表名注释检测是否符合表数据标准规范；对于字段，根据数据库设计文档的设计格式，当前检测的字段隶属于最后一个得到的tablename对应的数据表，只需检测字段名、字段类型、字段注释是否符合字段数据标准规范，并把异常的检测结果存入检测结果表，异常的检测结果包括以下的一种或多种：

表名与表数据标准规范规定的表名一致，但表名注释不一致的数据表的检测结果；

表名注释与表数据标准规范规定的表名注释一致，但表名不一致的数据表的检测结果；

字段名与字段数据标准规范规定的字段名一致，但字段注释不一致的字段的检测结果；

字段名与字段数据标准规范中规定的字段名一致，但字段类型不一致的字段的检测结果；

字段注释与字段数据标准规范中规定的字段注释一致，但字段名不一致的字段的检测结果；

字段注释与字段数据标准规范中规定的字段注释一致，但字段类型不一致的字段的检测结果。

把异常的检测结果存入检测结果表即将不符合表数据标准规范的数据表和不符合字段数据标准规范的字段，按照检测结果表的各项添加相应的信息。

本实施例的检测结果表为CSV检测结果表，CSV检测结果表的各项如表6所示。

表6

其中，Modify_flag、Modify_dba、Modify_log、Created_at、Modify_at为异常处理记录字段，这些字段的功能上文已经介绍，此处不再赘述。

本实施例可以远程检测数据库中的设计是否符合定义的数据标准规范，检测维度包括表名和表名注释，字段名、字段类型和字段注释，提高对数据库设计文档中数据库设计的检测效率和检测准确率。

图7是根据本发明实施例的数据库检测装置的主要模块示意图。

本发明实施例的数据库检测装置700主要包括：数据标准规范读取模块701、数据库信息获取模块702、数据库检测模块703。

数据标准规范读取模块701，用于读取记录的表数据标准规范和字段数据标准规范，表数据标准规范规定了数据库表的数据标准规范，字段数据标准规范规定了数据库表中字段的数据标准规范；

数据库信息获取模块702，用于获取待检测数据库的数据表信息和数据表的字段信息；

数据库检测模块703，用于按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。

数据库信息获取模块702获取的数据表信息包括表名和表名注释，字段信息包括字段名、字段类型和字段注释。

在一个实施例中，数据库信息获取模块702具体可以用于：从远端数据库检测表中获取第一目标检测项目对应的数据库连接信息；通过数据库连接信息连接远端数据库，获取远端数据库的各数据表的表名和表名注释；获取各数据表的表结构，表结构包括字段名、字段类型和字段注释。

在另一个实施例中，数据库信息获取模块702具体可以用于：从数据库设计检测表中获取第二目标检测项目对应的数据库设计文档存储路径；根据数据库设计文档存储路径获取数据库设计文档；按照预定的数据库设计文档格式规范，对数据库设计文档进行分析，得到数据库设计的数据表的表名和表名注释，以及字段名、字段类型和字段注释。

其中，预定的数据库设计文档格式规范的内容可以包括：数据库设计文档的格式为特定文件格式，其中，每个数据表第一行的三列分别为特定字符串、表名、表名注释；第二行的三列分别为对字段名、字段类型和字段注释的列描述信息，第三行以及后续各行的三列分别为字段名、字段类型和字段注释。

特定文件格式可以为逗号分隔值文件格式。

并且，数据库信息获取模块702可以包括设计文档分析子模块，用于：逐行分析数据库设计文档，其中：如果某行第一列为特定字符串，则确定该行为数据库表设计，根据特定字符串之后的两列分别得到所述表名和表名注释；如果某行第一列既不是特定字符串，也不是对字段名的列描述信息，则确定该行为字段设计，根据该行的三列分别得到字段名、字段类型和字段注释。

数据库检测模块703具体用于：对于每一数据表信息，检测其中的表名和表名注释是否符合表数据标准规范，将表名和表名注释二者之一不符合表数据标准规范的数据表的检测结果添加到检测结果表；对于每一字段信息，检测其中的字段名、字段类型、字段注释是否符合字段数据标准规范，将符合以下两种情况之一的字段的检测结果添加到所述检测结果表：情况一：字段名符合字段数据标准规范，但字段类型或字段注释不符合字段数据标准规范；情况二：字段注释符合字段数据标准规范，但字段名或字段类型不符合字段数据标准规范。

本发明实施例的检测结果表包括异常处理记录字段，用于记录对添加到检测结果表的检测结果的处理信息。

另外，在本发明实施例中数据库检测装置的具体实施内容，在上面所述数据库检测方法中已经详细说明了，故在此重复内容不再说明。

图8示出了可以应用本发明实施例的数据库检测方法或数据库检测装置的示例性系统架构800。

如图8所示，系统架构800可以包括终端设备801、802、803，网络804和服务器805。网络804用以在终端设备801、802、803和服务器805之间提供通信链路的介质。网络804可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备801、802、803通过网络804与服务器805交互，以接收或发送消息等。终端设备801、802、803上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备801、802、803可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器805可以是提供各种服务的服务器，例如对用户利用终端设备801、802、803所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理，并将处理结果(例如目标推送信息、产品信息--仅为示例)反馈给终端设备。

需要说明的是，本发明实施例所提供的数据库检测方法一般由服务器805执行，相应地，数据库检测装置一般设置于服务器805中。

应该理解，图8中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

下面参考图9，其示出了适于用来实现本申请实施例的终端设备或服务器的计算机系统900的结构示意图。图9示出的终端设备或服务器仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。

如图9所示，计算机系统900包括中央处理单元(CPU)901，其可以根据存储在只读存储器(ROM)902中的程序或者从存储部分908加载到随机访问存储器(RAM)903中的程序而执行各种适当的动作和处理。在RAM 903中，还存储有系统900操作所需的各种程序和数据。CPU 901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。

以下部件连接至I/O接口905：包括键盘、鼠标等的输入部分906；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分907；包括硬盘等的存储部分908；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分909。通信部分909经由诸如因特网的网络执行通信处理。驱动器910也根据需要连接至I/O接口905。可拆卸介质911，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器910上，以便于从其上读出的计算机程序根据需要被安装入存储部分908。

特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分909从网络上被下载和安装，和/或从可拆卸介质911被安装。在该计算机程序被中央处理单元(CPU)901执行时，执行本申请的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：一种处理器包括数据标准规范读取模块、数据库信息获取模块、数据库检测模块。其中，这些模块的名称在某种情况下并不构成对该模块本身的限定，例如，数据标准规范读取模块还可以被描述为“用于读取记录的表数据标准规范和字段数据标准规范的模块”。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备包括：读取记录的表数据标准规范和字段数据标准规范，所述表数据标准规范规定了数据库表的数据标准规范，所述字段数据标准规范规定了数据库表中字段的数据标准规范；获取待检测数据库的数据表信息和数据表的字段信息；按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表。

根据本发明实施例的技术方案，读取记录的表数据标准规范和字段数据标准规范；获取待检测数据库的数据表信息和数据表的字段信息；按照表数据标准规范检测数据表信息，以及按照字段数据标准规范检测字段信息，根据不符合表数据标准规范的数据表信息和不符合字段数据标准规范的字段信息生成检测结果表。待检测数据库的数据表信息和数据表的字段信息可以从远端数据库获取，也可以通过对数据库设计文档进行分析而获得，本发明实施例能够检测既有数据库是否匹配数据标准规范以便整改，还能够检测数据库设计文档是否符合数据标准规范以便整改，从而使得本申请对于同一数据表在不同数据库的表名或表名注释不一致，同一含义字段在不同数据库的字段名、字段类型、字段注释不一致等情况，以及在进行新的数据库设计时出现的上述不一致的情况，均可以实现自动检测，并避免遗漏，提高检测效率和检测准确率，还可以准确追溯各种处理情况。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (10)

1.一种数据库检测方法，其特征在于，包括：

读取记录的表数据标准规范和字段数据标准规范，所述表数据标准规范规定了数据库表的数据标准规范，所述字段数据标准规范规定了数据库表中字段的数据标准规范；

获取待检测数据库的数据表信息和数据表的字段信息；

按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表。

2.根据权利要求1所述的方法，其特征在于，所述数据表信息包括表名和表名注释，所述字段信息包括字段名、字段类型和字段注释，

获取待检测数据库的数据表信息和数据表的字段信息的步骤，包括：

从远端数据库检测表中获取第一目标检测项目对应的数据库连接信息；

通过所述数据库连接信息连接远端数据库，获取所述远端数据库的各数据表的所述表名和表名注释；

获取所述各数据表的表结构，所述表结构包括所述字段名、字段类型和字段注释。

3.根据权利要求1所述的方法，其特征在于，所述数据表信息包括表名和表名注释，所述字段信息包括字段名、字段类型和字段注释，

获取待检测数据库的数据表信息和数据表的字段信息的步骤，包括：

从数据库设计检测表中获取第二目标检测项目对应的数据库设计文档存储路径；

根据所述数据库设计文档存储路径获取数据库设计文档；

按照预定的数据库设计文档格式规范，对所述数据库设计文档进行分析，得到数据库设计的数据表的所述表名和表名注释，以及所述字段名、字段类型和字段注释。

4.根据权利要求3所述的方法，其特征在于，所述预定的数据库设计文档格式规范的内容包括：

所述数据库设计文档的格式为特定文件格式，其中，每个数据表第一行的三列分别为特定字符串、表名、表名注释；第二行的三列分别为对字段名、字段类型和字段注释的列描述信息，第三行以及后续各行的三列分别为字段名、字段类型和字段注释。

5.根据权利要求4所述的方法，其特征在于，所述特定文件格式为逗号分隔值文件格式。

6.根据权利要求4所述的方法，其特征在于，按照预定的数据库设计文档格式规范，对所述数据库设计文档进行分析，得到数据库设计的数据表的所述表名和表名注释，以及所述字段名、字段类型和字段注释的步骤，包括：

逐行分析所述数据库设计文档，其中：

如果某行第一列为所述特定字符串，则确定该行为数据库表设计，根据所述特定字符串之后的两列分别得到所述表名和表名注释；

如果某行第一列既不是所述特定字符串，也不是对字段名的列描述信息，则确定该行为字段设计，根据该行的三列分别得到所述字段名、字段类型和字段注释。

7.根据权利要求2或3所述的方法，其特征在于，按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表的步骤，包括：

对于每一数据表信息，检测其中的表名和表名注释是否符合所述表数据标准规范，将表名和表名注释二者之一不符合所述表数据标准规范的数据表的检测结果添加到所述检测结果表；

对于每一字段信息，检测其中的字段名、字段类型、字段注释是否符合所述字段数据标准规范，将符合以下两种情况之一的字段的检测结果添加到所述检测结果表：

情况一：字段名符合所述字段数据标准规范，但字段类型或字段注释不符合所述字段数据标准规范；

情况二：字段注释符合所述字段数据标准规范，但字段名或字段类型不符合所述字段数据标准规范；

其中，所述检测结果表包括异常处理记录字段，用于记录对添加到所述检测结果表的检测结果的处理信息。

8.一种数据库检测装置，其特征在于，包括：

数据标准规范读取模块，用于读取记录的表数据标准规范和字段数据标准规范，所述表数据标准规范规定了数据库表的数据标准规范，所述字段数据标准规范规定了数据库表中字段的数据标准规范；

数据库信息获取模块，用于获取待检测数据库的数据表信息和数据表的字段信息；

数据库检测模块，用于按照所述表数据标准规范检测所述数据表信息，以及按照所述字段数据标准规范检测所述字段信息，根据不符合所述表数据标准规范的数据表信息和不符合所述字段数据标准规范的字段信息生成检测结果表。

9.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储器，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。

10.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。

Images