CN110716922A - 基于Inception的数据库运维方法、装置、计算机设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种基于Inception的数据库运维方法、装置、计算机设备及存储介质。所述方法应用于部署有Inception的运维服务器中，包括：接收开发人员提交的待执行SQL语句；对所述待执行SQL语句进行审核；若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。通过实施本发明实施例的方法可减少故障率，提高数据库性能及可靠性。

Description

基于Inception的数据库运维方法、装置、计算机设备及存储 介质

技术领域

本发明涉及数据处理技术领域，尤其涉及一种基于Inception的数据库运维方法、装置、计算机设备及存储介质。

背景技术

在项目运行过程中，数据库性能底下、故障频发常来自于操作系统和数据库配置项缺失、表结构、SQL设计不规范；也因为权限混乱、语句编写失误等原因导致数据库误操作不断。因此，为保障数据库稳定性，性能最大化，减少故障概率，数据库管理员需要在研发过程中统一把控，支撑完成如下事项：数据库服务部署、DDL人工审核发布、DML误操作订正、慢查询优化、索引优化、权限管理、故障处理等。当各项目的数据库变动任务并行而至，一方面数据库管理员环节会成为整个流程的瓶颈；另一方面由于数据库从部署到审核都需要遵循规范化，介于语句和环境的复杂性，人工审核和操作难以确保高准确率。因此，目前的数据库运维，随着项目的越来越多、越来越大，数据库的新建、操作DML及语句写法等都需要有统一标准和规范，存在人工审核准确率低，多标准有效落地困难，效率低下的问题。

发明内容

本发明实施例提供了一种基于Inception的数据库运维方法、装置、计算机设备及存储介质，旨在解决现有数据库运维需要人工审核准确率低、效率低，且容易发生故障、可靠性低、运维成本高的问题。

第一方面，本发明实施例提供了一种基于Inception的数据库运维方法，应用于部署有Inception的运维服务器中，其包括：接收开发人员提交的待执行SQL语句；对所述待执行SQL语句进行审核；若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

第二方面，本发明实施例还提供了一种基于Inception的数据库运维装置，应用于部署有Inception的运维服务器中，其包括：接收单元，用于接收开发人员提交的待执行SQL语句；审核单元，用于对所述待执行SQL语句进行审核；执行单元，用于若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；备份单元，用于根据所述待执行SQL语句生成回滚语句并备份。

第三方面，本发明实施例还提供了一种计算机设备，其包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时可实现上述方法。

本发明实施例提供了一种基于Inception的数据库运维方法、装置、计算机设备及存储介质。其中，所述方法包括：接收开发人员提交的待执行SQL语句；对所述待执行SQL语句进行审核；若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。本发明实施例通过Inception接收待执行SQL语句，对待执行SQL语句进行审核，审核通过后执行待执行的SQL语句并备份，可实现减少故障率，提高数据库性能、可靠性的效果。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的基于Inception的数据库运维方法的应用场景示意图；

图2为本发明实施例提供的基于Inception的数据库运维方法的流程示意图；

图3为本发明实施例提供的基于Inception的数据库运维方法的子流程示意图；

图4为本发明实施例提供的基于Inception的数据库运维方法的子流程示意图；

图5为本发明另一实施例提供的基于Inception的数据库运维方法的流程示意图；

图6为本发明又一实施例提供的基于Inception的数据库运维方法的流程示意图；

图7为本发明实施例提供的基于Inception的数据库运维装置的示意性框图；

图8为本发明实施例提供的基于Inception的数据库运维装置的具体单元的示意性框图；以及

图9为本发明实施例提供的计算机设备的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

请参阅图1和图2，图1为本发明实施例提供的基于Inception的数据库运维方法的应用场景示意图。图2为本发明实施例提供的基于Inception的数据库运维方法的示意性流程图。该基于Inception的数据库运维方法应用于运维服务器10中，该运维服务器10中部署有Inception，另外还包括执行服务器20、审核服务器30以及备份服务器40，通过多个服务器之间相互交互实现。

Inception是集审核、执行、回滚于一体的一个自动化运维系统，其是根据MySQL代码修改过来的，用它可以很明确的，详细的，准确的审核MySQL的SQL语句，它的工作模式和MySQL完全相同，可以直接使用MySQL客户端来连接，但不需要验证权限，它相对应用程序(上层审核流程系统等)而言，是一个服务器，在连接时需要指定服务器地址及Inception服务器的端口即可，而它相对要审核或执行的语句所对应的线上MySQL服务器来说，是一个客户端，它在内部需要实时的连接数据库服务器来获取所需要的信息，或者直接在在线上执行相应的语句及获取binlog。因此Inception是一个中间性质的服务。

本发明实施例通过部署有Inception运维服务器进行数据库运维，开发人员完成SQL语句的开发后，将待执行的SQL语句发送至运维服务器，运维服务器中的Inception接收开发人员提交的待执行SQL语句，对待执行SQL语句进行审核，其中，审核包括SQL校验、内容审核以及DBA审核。全部审核通过后则将待执行的SQL语句发送至执行服务器以执行该待执行的SQL语句。在执行完成后，备份待执行的SQL语句，且生成待执行的SQL语句对应的回滚语句，并将回滚语句备份到备份服务器中。

图2是本发明实施例提供的基于Inception的数据库运维方法的流程示意图。如图所示，该方法包括以下步骤S110-S140。

S110、接收开发人员提交的待执行SQL语句。

在一实施例中，开发人员指的是数据库开发人员，数据库开发人员开发完待执行SQL语句后，将待执行SQL语句发送至Inception，Inception接收开发人员提交的待执行SQL语句，由Inception对待执行SQL语句进行审核、执行或者回滚。

S120、对所述待执行SQL语句进行审核。

在一实施例中，对待执行SQL语句的审核包括SQL校验、内容审核以及DBA审核。SQL校验即检查SQL语句是否合法，内容审核即交由人工审核，DBA审核即由数据库管理员审核。在全部审核通过后，即可判定该待执行SQL语句审核通过。

在一实施例中，如图3所示，所述步骤S120可包括步骤S121-S124。

S121、对所述待执行SQL语句进行SQL校验。

在一实施例中，SQL校验即对待执行SQL语句进行语法分析、语义分析、过滤检查以规范化SQL语句。对待执行SQL语句进行SQL校验，若待执行SQL语句合法，则审核通过，若待执行SQL语句不合法则审核不通过，提示出现错误的SQL语句返回给开发人员重新编辑。

S122、若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器。

在一实施例中，内容审核即交由人工审核，如开发人员的上级。审核服务器30包括第一审核服务器和第二审核服务器。待执行SQL语句校验成功后，将待执行SQL语句发送至第一审核服务器进行内容审核，审核人员审核后由第一审核服务器返回审核结果，根据审核结果判定审核通过。若审核不通过则返回给开发人员重新编辑。需要注意的是，第一审核服务器中的审核人员需要登录到账户中进行审核确保为审核人，以避免被攻击或被接口测试工具强行绕过。

S123、若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器。

在一实施例中，DBA(Database Administrator，数据库管理员)是一个负责管理和维护数据库服务器的人，也即数据库管理员。数据库管理员负责全面管理和控制数据库系统，因此开发人员所提交的每份待执行SQL语句，数据库管理员都需要知晓并审核。与内容审核相类似，待执行SQL语句发送到第二审核服务器，数据库管理员审核后第二审核服务器返回审核结果，根据审核结果判定审核通过。若审核不通过则返回给开发人员重新编辑。需要注意的是，DBA审核还可以是通过预设的配置文件进行审核，该配置文件根据实际规范配置。

S124、若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

在一实施例中，SQL校验、内容审核以及DBA审核均通过后，则可判定待执行SQL审核通过。若其中之一审核不通过，则直接将待执行SQL语句返回给开发人员重新编辑，不再进行下一步审核，提高运维效率。

S130、若所述待执行SQL语句审核通过，则执行所述待执行SQL语句。

在一实施例中，待执行SQL语句审核通过后，将待执行SQL语句通过执行服务器执行，该执行服务器是线上数据库服务器，运维服务器与执行服务器连接后，即可通过执行服务器来执行待执行的SQL语句。其中，SQL语句例如为增、删、改、查等。

在一实施例中，如图4所示，所述步骤S130可包括步骤S131。

S131、采用异步回调的方式执行所述待执行SQL语句。

在一实施例中，在执行待执行SQL语句时，采用异步回调的方式来执行待执行SQL语句，以防止出现持续执行中的异常，提高执行效率，提升数据库性能。

S140、若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

在一实施例中，待执行SQL语句执行成功后，则将待执行SQL语句备份到备份服务器中，且同时生成待执行SQL语句对应的回滚语句，并将回滚语句备份到备份服务器。在具体实施中，获取每条待执行SQL语句的binlog，通过解析binlog生成对应的回滚语句，将回滚语句备份到备份服务器中。

在一实施例中，如图5所示，所述步骤S140之后包括步骤S150。

S150、生成所述待执行SQL语句执行成功的邮件，并将所述邮件发送至开发人员的邮箱。

在一实施例中，待执行SQL语句执行成功后，生成执行的邮件，并将邮件发送到开发人员的邮箱中，通知开发人员执行成功。另外，执行成功的消息开课通过Inception对应的Web端显示，开发人员通过该Web端获取执行成功的消息。

在一实施例中，由于每条待执行SQL语句都生成有对应的回滚语句，因此，在需要回滚的时候，则从备份服务器中获取对应的回滚语句，执行回滚语句将数据库恢复到未执行该待执行SQL语句的状态。执行错误之后，直接执行回滚语句回滚，避免出现故障。

在一实施例中，如图6所示，所述步骤S140之后包括步骤S160。

S160、根据所述待执行SQL语句生成错误日志。

在一实施例中，出现执行错误的情况，执行回滚语句回到未执行前的状态后，将待执行SQL语句生成错误日志进行记录，以便于开发人员寻找执行错误的原因，提高工作效率。

图7是本发明实施例提供的一种基于Inception的数据库运维装置200的示意性框图。如图7所示，对应于以上基于Inception的数据库运维方法，本发明还提供一种基于Inception的数据库运维装置200。该基于Inception的数据库运维装置200包括用于执行上述基于Inception的数据库运维方法的单元，该装置可以被配置于运维服务器10中。具体地，请参阅图7，该基于Inception的数据库运维装置200包括：接收单元210、审核单元220、执行单元230以及备份单元240。

接收单元210，用于接收开发人员提交的待执行SQL语句。

审核单元220，用于对所述待执行SQL语句进行审核。

在一实施例中，如图8所示，所述审核单元220包括校验单元221、内容审核单元222、DBA审核单元223以及判定单元224。

校验单元221，用于对所述待执行SQL语句进行SQL校验。

内容审核单元222，用于若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器。

DBA审核单元223，用于若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器。

判定单元224，用于若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

执行单元230，用于若所述待执行SQL语句审核通过，则执行所述待执行SQL语句。

在一实施例中，所述执行单元230还用于执行采用异步回调的方式执行所述待执行SQL语句。

备份单元240，用于若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

在一实施例中，如图8所示，所述基于Inception的数据库运维装置还包括：发送单元250。

发送单元250，用于生成所述待执行SQL语句执行成功的邮件，并将所述邮件发送至开发人员的邮箱。

在一实施例中，如图8所示，所述基于Inception的数据库运维装置还包括：日志单元260。

日志单元260，用于根据所述待执行SQL语句生成错误日志。

需要说明的是，所属领域的技术人员可以清楚地了解到，上述基于Inception的数据库运维装置200和各单元的具体实现过程，可以参考前述方法实施例中的相应描述，为了描述的方便和简洁，在此不再赘述。

上述基于Inception的数据库运维装置可以实现为一种计算机程序的形式，该计算机程序可以在如图9所示的计算机设备上运行。

请参阅图9，图9是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备500可以是服务器，其中，服务器可以是独立的服务器，也可以是多个服务器组成的服务器集群。

参阅图9，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括非易失性存储介质503和内存储器504。

该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032包括程序指令，该程序指令被执行时，可使得处理器502执行一种基于Inception的数据库运维方法。

该处理器502用于提供计算和控制能力，以支撑整个计算机设备500的运行。

该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行一种基于Inception的数据库运维方法。

该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解，图9中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现如下步骤：接收开发人员提交的待执行SQL语句；对所述待执行SQL语句进行审核；若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

在一实施例中，处理器502在实现所述对所述待执行SQL语句进行审核步骤时，具体实现如下步骤：对所述待执行SQL语句进行SQL校验；若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器；若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器；若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

在一实施例中，处理器502在实现所述执行所述待执行SQL语句步骤时，具体实现如下步骤：采用异步回调的方式执行所述待执行SQL语句。

在一实施例中，处理器502在实现所述根据所述待执行SQL语句生成回滚语句并备份步骤之后，还实现如下步骤：根据所述待执行SQL语句生成错误日志。

在一实施例中，处理器502在实现所述执行所述待执行SQL语句步骤之后，还实现如下步骤：生成所述待执行SQL语句执行成功的邮件，并将所述邮件发送至开发人员的邮箱。

应当理解，在本申请实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成。该计算机程序包括程序指令，计算机程序可存储于一存储介质中，该存储介质为计算机可读存储介质。该程序指令被该计算机系统中的至少一个处理器执行，以实现上述方法的实施例的流程步骤。

因此，本发明还提供一种存储介质。该存储介质可以为计算机可读存储介质。该存储介质存储有计算机程序，其中计算机程序包括程序指令。该程序指令被处理器执行时使处理器执行如下步骤：接收开发人员提交的待执行SQL语句；对所述待执行SQL语句进行审核；若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

在一实施例中，所述处理器在执行所述程序指令而实现所述对所述待执行SQL语句进行审核步骤时，具体实现如下步骤：对所述待执行SQL语句进行SQL校验；若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器；若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器；若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

在一实施例中，所述处理器在执行所述程序指令而实现所述执行所述待执行SQL语句步骤时，具体实现如下步骤：采用异步回调的方式执行所述待执行SQL语句。

在一实施例中，所述处理器在执行所述程序指令而实现所述根据所述待执行SQL语句生成回滚语句并备份步骤之后，还实现如下步骤：根据所述待执行SQL语句生成错误日志。

在一实施例中，所述处理器在执行所述程序指令而实现所述执行所述待执行SQL语句步骤之后，还实现如下步骤：生成所述待执行SQL语句执行成功的邮件，并将所述邮件发送至开发人员的邮箱。

所述存储介质可以是U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、磁碟或者光盘等各种可以存储程序代码的计算机可读存储介质。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的。例如，各个单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。

本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本发明实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。

该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，终端，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种基于Inception的数据库运维方法，应用于部署有Inception的运维服务器中，其特征在于，包括：

接收开发人员提交的待执行SQL语句；

对所述待执行SQL语句进行审核；

若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；

若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

2.根据权利要求1所述的基于Inception的数据库运维方法，其特征在于，所述对所述待执行SQL语句进行审核包括：

对所述待执行SQL语句进行SQL校验；

若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器；

若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器；

若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

3.根据权利要求1所述的基于Inception的数据库运维方法，其特征在于，所述执行所述待执行SQL语句，包括：

采用异步回调的方式执行所述待执行SQL语句。

4.根据权利要求1所述的基于Inception的数据库运维方法，其特征在于，所述根据所述待执行SQL语句生成回滚语句并备份之后，还包括：

根据所述待执行SQL语句生成错误日志。

5.根据权利要求1所述的基于Inception的数据库运维方法，其特征在于，所述执行所述待执行SQL语句之后，还包括

生成所述待执行SQL语句执行成功的邮件，并将所述邮件发送至开发人员的邮箱。

6.一种基于Inception的数据库运维装置，应用于部署有Inception的运维服务器中，其特征在于，包括：

接收单元，用于接收开发人员提交的待执行SQL语句；

审核单元，用于对所述待执行SQL语句进行审核；

执行单元，用于若所述待执行SQL语句审核通过，则执行所述待执行SQL语句；

备份单元，用于若所述待执行SQL语句执行成功，则根据所述待执行SQL语句生成回滚语句并备份。

7.根据权利要求6所述的基于Inception的数据库运维装置，其特征在于，所述审核单元包括：

校验单元，用于对所述待执行SQL语句进行SQL校验；

内容审核单元，用于若所述待执行SQL语句SQL校验成功，则将所述待执行SQL语句发送至第一审核服务器；

DBA审核单元，用于若所述待执行SQL语句内容审核通过，则将所述待执行SQL语句发送至第二审核服务器；

判定单元，用于若所述待执行SQL语句DBA审核通过，则判定所述待执行SQL语句审核通过。

8.根据权利要求6所述的基于Inception的数据库运维装置，其特征在于，还包括：

日志单元，用于根据所述待执行SQL语句生成错误日志。

9.一种计算机设备，其特征在于，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-5中任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序当被处理器执行时可实现如权利要求1-5中任一项所述的方法。

Images