CN116991470A - 巡检环境配置数据的方法、装置、计算机设备及存储介质 - Google Patents
巡检环境配置数据的方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN116991470A CN116991470A CN202311245675.8A CN202311245675A CN116991470A CN 116991470 A CN116991470 A CN 116991470A CN 202311245675 A CN202311245675 A CN 202311245675A CN 116991470 A CN116991470 A CN 116991470A
- Authority
- CN
- China
- Prior art keywords
- configuration data
- cloud
- offline
- configuration
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000001360 synchronised effect Effects 0.000 claims abstract description 24
- 230000015654 memory Effects 0.000 claims description 27
- 230000007613 environmental effect Effects 0.000 claims description 16
- 238000013507 mapping Methods 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 2
- 238000007689 inspection Methods 0.000 abstract description 73
- 238000011835 investigation Methods 0.000 abstract 1
- 230000000875 corresponding effect Effects 0.000 description 41
- 238000012360 testing method Methods 0.000 description 31
- 238000004519 manufacturing process Methods 0.000 description 29
- 238000010586 diagram Methods 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 238000009530 blood pressure measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013506 data mapping Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/71—Version control; Configuration management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2289—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing by configuration test
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据巡检技术领域,公开了巡检环境配置数据的方法、装置、计算机设备及存储介质,该方法包括:获取云端的离线数据库中多种环境下的云配置数据;云配置数据为各个环境的数据库中同步至离线数据库的配置数据;判断多个环境下同一种配置所对应的云配置数据是否一致;在云配置数据不一致的情况下,生成报警消息。本发明可自动识别出云配置数据不一致的情况,不需要人工排查,提高了对配置数据的巡检效率,也能够保证巡检的正确性;并且,能够有效降低巡检时对本地数据库造成的读写压力,保证本地数据库稳定运行。
Description
技术领域
本发明涉及数据巡检技术领域,具体涉及巡检环境配置数据的方法、装置、计算机设备及存储介质。
背景技术
随着互联网的普及和发展,互联网公司的规模不断扩大,其环境配置也日益复杂,包括各种软件版本、硬件设备、网络拓扑结构等,这些都对互联网公司的服务质量、稳定性产生重要影响。同时在业务域的项目工程中也存在着很多的配置规则,而这些配置规则在不同的环境(比如测试环境、预发环境、生产环境、压测环境等)下的配置值是存在差异。对于一些新发布的服务,配置初始化的值是否正确也会对系统稳定性和正确性产生比较大的挑战。因此,对不同环境的配置规则进行巡检和管理是各大公司的一项重要任务。
目前,互联网公司通常采用手工巡检的方式来管理不同环境配置,但由于环境配置的复杂性,手工巡检效率低下、易出错。
发明内容
有鉴于此,本发明提供了一种巡检环境配置数据的方法、装置、计算机设备及存储介质,以解决现有巡检配置数据效率较低的问题。
第一方面,本发明提供了一种巡检环境配置数据的方法,应用于云端设备,所述方法包括:
获取云端的离线数据库中多种环境下的云配置数据;所述云配置数据为各个环境的数据库中同步至所述离线数据库的配置数据;
判断多个环境下同一种配置所对应的云配置数据是否一致;
在云配置数据不一致的情况下,生成报警消息。
本发明提供的巡检环境配置数据的方法,各个环境的配置数据会同步至云端的离线数据库,云端设备能够对离散数据库中的不同环境的云配置数据进行巡检,可自动识别出云配置数据不一致的情况,不需要人工排查,提高了对配置数据的巡检效率,也能够保证巡检的正确性。并且,利用离散数据库中的云配置数据进行巡检,可以避免巡检时对各个环境的本地数据库造成影响,且能够有效降低巡检时对本地数据库造成的读写压力,保证本地数据库稳定运行。
在一些可选的实施方式中,所述离线数据库包括每个环境对应的离线表,所述离线表用于存储相应环境的数据库同步的云配置数据。
在一些可选的实施方式中,所述获取云端的离线数据库中多种环境下的云配置数据,包括:获取所述离线数据库中每个所述离线表的全量数据,所述全量数据包括所述离线表中所有的云配置数据。通过对所有的云配置数据进行巡检,可以保证巡检过程的完整性。
在一些可选的实施方式中,所述云配置数据为键值对,且所述云配置数据的键为配置名称,所述云配置数据的值为配置值。所述获取所述离线数据库中每个所述离线表的全量数据,包括:以通配符表示需要获取的配置名称,获取所述离线表中所有的配置名称,以及与配置名称对应的配置值。
本发明获取全量数据时不需要设置每个配置名称,可以方便地实现巡检脚本;并且,在新增配置数据时,也不需要更新或修改该巡检脚本,即可以一次性完成该巡检脚本,利用该巡检脚本即可方便地实现巡检,巡检脚本的通用性较好。
在一些可选的实施方式中,所述判断多个环境下同一种配置所对应的云配置数据是否一致,包括:将多个离线表中同一配置名称的云配置数据进行关联比较;在相互关联的多个云配置数据的配置值相同的情况下,确定云配置数据一致;在相互关联的多个云配置数据的部分配置值不同,或者部分配置值缺失的情况下,确定云配置数据不一致。本发明既能够做到对数据缺失的检查,也能做到对存量数据正确性校验,能够保证巡检结果的准确性。
在一些可选的实施方式中,所述各个环境的数据库按照预设的同步频率将配置数据同步至所述离线数据库;所述获取云端的离线数据库中多种环境下的云配置数据,包括:按照所述同步频率,从所述离线数据库中获取多种环境下的云配置数据。
在一些可选的实施方式中,该方法还包括:获取各个环境的数据库同步的原始配置数据;将同一环境下同一种配置所对应的多个原始配置数据统一映射为一个配置数据,并将统一映射后的配置数据作为云配置数据存储至所述离线数据库。本发明对同一种配置的多个原始配置数据进行统一映射,可以简化存储在云端的云配置数据,方便后续巡检。
第二方面,本发明提供了一种巡检环境配置数据的装置,应用于云端设备,所述装置包括:
离线获取模块,用于获取云端的离线数据库中多种环境下的云配置数据;所述云配置数据为各个环境的数据库中同步至所述离线数据库的配置数据;
判断模块,用于判断多个环境下同一种配置所对应的云配置数据是否一致;
报警模块,用于在云配置数据不一致的情况下,生成报警消息。
第三方面,本发明提供了一种计算机设备,包括:存储器和处理器,存储器和处理器之间互相通信连接,存储器中存储有计算机指令,处理器通过执行计算机指令,从而执行上述第一方面或其对应的任一实施方式的巡检环境配置数据的方法。
第四方面,本发明提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机指令,计算机指令用于使计算机执行上述第一方面或其对应的任一实施方式的巡检环境配置数据的方法。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的巡检环境配置数据的方法的一种应用场景示意图;
图2是根据本发明实施例的巡检环境配置数据的方法的流程示意图;
图3是根据本发明实施例的另一巡检环境配置数据的方法的流程示意图;
图4是根据本发明实施例的再一巡检环境配置数据的方法的流程示意图;
图5是本发明实施例对配置数据进行统一映射并巡检的一种示意图;
图6是根据本发明实施例的巡检环境配置数据的装置的结构框图;
图7是本发明实施例的计算机设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供了一种巡检环境配置数据的方法,设置云端的离线数据库,通过能够获取该离线数据库中数据的云端设备执行数据巡检。图1示出了该方法的一种应用场景示意图。如图1所示,项目工程中,每个环境设有各自的数据库,用于存储相应环境下的配置数据,该配置数据表示相应的配置规则;例如,该配置规则具体可以为开关是否打开、定时周期的大小、切流标记等。可以理解,该数据库是本地的数据库。图1示出了测试环境、预发环境和生产环境的数据库,每个数据库中存储有各自的配置数据。
并且,每个环境的数据库,会将存储的配置数据同步至云端的离线数据库。例如,业务人员在平台上可以按照以往习惯进行配置数据的录入,而在录入配置数据后,可以对在数据库中已经录入的配置数据进行数据同步,从而将本地的配置数据同步到云端的离线数据库,即该离线数据库存储有配置数据。为方便区分,将离线数据库中存储的配置数据称为云配置数据。
云端设备可以获取到离线数据库中各个环境对应的云配置数据,通过对多个环境的云配置数据进行巡检,可以排查每个环境对应的数据库中的配置数据是否正确,实现对本地数据库的巡检。其中,该云端设备可以是云服务器,也可以是能够读取云端离线数据库中数据的其他设备,本发明实施例对云端设备的具体形式不做限定。
根据本发明实施例,提供了一种巡检环境配置数据的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
在本实施例中提供了一种巡检环境配置数据的方法,可用于上述的云端设备,图2是根据本发明实施例的巡检环境配置数据的方法的流程图,如图2所示,该流程包括以下步骤。
步骤S201,获取云端的离线数据库中多种环境下的云配置数据;云配置数据为各个环境的数据库中同步至离线数据库的配置数据。
本实施例中,如上所述,各个环境的数据库中录入配置数据后,可以将该配置数据同步至云端的离线数据库,从而在离线数据库中生成相应的云配置数据。云端设备可以从该离线数据库中获取多个环境下的云配置数据,例如测试环境、预发环境、生产环境等的云配置数据。
可以理解,该离线数据库中存储的云配置数据是一种离线数据,云端设备在读取这些离线数据时,不会对各个环境的本地数据库造成影响,例如不会影响测试环境、预发环境、生产环境等的数据库,可以保证这些本地数据库正常工作,不影响使用本地数据库中的配置数据。
步骤S202,判断多个环境下同一种配置所对应的云配置数据是否一致。
本实施例中,每个云配置数据对应一种配置,且不同环境下的云配置数据可能对应同一种配置;例如,测试环境和生产环境中均存在对应“开关是否打开”的云配置数据。若测试环境对应的云配置数据1和生产环境对应的云配置数据2属于同一种配置,则判断该云配置数据1与云配置数据2是否一致;对于其他环境(例如预发环境、压测环境等)下的云配置数据,也采用相同的判断方式,此处不作详述。
并且,若三个或三个以上的环境下具有同一种配置的云配置数据,则对于这些云配置数据,可以将全部的云配置数据进行比较,或者两两进行比较,以确定这些云配置数据是否一致,本实施例对此不做限定。
例如,若测试环境对应的云配置数据1、生产环境对应的云配置数据2、预发环境的云配置数据3三者属于同一种配置,则需要判断云配置数据1、云配置数据2、云配置数据3三者是否互相一致。
步骤S203,在云配置数据不一致的情况下,生成报警消息。
本实施例中,不同环境下的同一种配置,其配置规则一般是相同的,即配置数据相同;相应地,离散数据库中存储的不同环境下同一种配置所对应的云配置数据也应该是相同的。若这些云配置数据一致,则可说明该种配置是正确无误的;相反,若云配置数据不一致,例如同一种配置的两个云配置数据不同,则可说明在某环境下的配置数据存在异常,此时生成报警消息,以提醒业务人员当前两个环境的配置数据不一致,需要进行人工介入解决。例如,可以配置巡检负责人、负责人邮箱、负责人电话、备用负责人等,云端设备接入邮箱和电话组件,以在需要报警时可以通过邮箱、电话等进行异常数据播报。
本实施例提供的巡检环境配置数据的方法,各个环境的配置数据会同步至云端的离线数据库,云端设备能够对离散数据库中的不同环境的云配置数据进行巡检,可自动识别出云配置数据不一致的情况,不需要人工排查,提高了对配置数据的巡检效率,也能够保证巡检的正确性。并且,利用离散数据库中的云配置数据进行巡检,可以避免巡检时对各个环境的本地数据库造成影响,且能够有效降低巡检时对本地数据库造成的读写压力,保证本地数据库稳定运行。
在本实施例中提供了一种巡检环境配置数据的方法,可用于上述的云端设备,图3是根据本发明实施例的巡检环境配置数据的方法的流程图,如图3所示,该流程包括以下步骤。
步骤S301,获取云端的离线数据库中多种环境下的云配置数据;云配置数据为各个环境的数据库中同步至离线数据库的配置数据。
其中,云端的离线数据库包括每个环境对应的离线表,该离线表用于存储相应环境的数据库同步的云配置数据。相应地,在获取云配置数据时,可以从不同的离线表中获取相应环境的云配置数据。
例如,本实施例涉及测试环境、预发环境和生产环境,则离线数据库中可以为这三种环境分别设置相应的离线表:测试环境离线表、预发环境离线表、生产环境离线表。在获取云配置数据时,可以从测试环境离线表中获取测试环境的云配置数据,从预发环境离线表中获取预发环境的云配置数据,从生产环境离线表中获取生产环境的云配置数据。
具体地,上述步骤S301“获取云端的离线数据库中多种环境下的云配置数据”可以包括以下步骤S3011。
步骤S3011,获取离线数据库中每个离线表的全量数据,该全量数据包括离线表中所有的云配置数据。
本实施例中,在对配置数据巡检时,获取每个离线表的全量数据,即获取离线表中所有的云配置数据,对所有的云配置数据进行巡检。通过对所有的云配置数据进行巡检,可以保证巡检过程的完整性。
其中,可以通过开发巡检脚本,利用巡检脚本获取所需的云配置数据,并判断云配置数据的一致性。在巡检脚本中可以一一配置所有需要巡检的云配置数据,以能够获取离线表的全量数据,但这种配置方式复杂,且在增加新的配置数据后,需要修改巡检脚本。
在一些可选的实施方式中,该云配置数据为键值对,且云配置数据的键为配置名称,云配置数据的值为配置值。并且,上述步骤S3011“获取离线数据库中每个离线表的全量数据”可以包括以下步骤A1。
步骤A1,以通配符表示需要获取的配置名称,获取离线表中所有的配置名称,以及与配置名称对应的配置值。
本实施例中,本地数据库中的配置数据以及云端离线数据库中的云配置数据均是键值对(key-value),云配置数据的键(key)为该云配置数据的配置名称,云配置数据的值(value)为该云配置数据相应的配置值。在需要获取某个离线表中所有的云配置数据时,获取离线表中所有云配置数据的配置名称,进而可以获取到所有云配置数据的配置值,从而获取到该离线表中所有的云配置数据。
其中,本实施例以通配符指代表示所有的配置名称,利用获取配置名称的获取指令,即可获取到离线表中所有的配置名称。本实施例中,获取全量数据时不需要设置每个配置名称,可以方便地实现巡检脚本;并且,在新增配置数据时,也不需要更新或修改该巡检脚本,即可以一次性完成该巡检脚本,利用该巡检脚本即可方便地实现巡检,巡检脚本的通用性较好。
例如,以param_name表示云配置数据的配置名称key,以param_value表示云配置数据的配置值value,以test_table表示测试环境离线表的名称,则巡检脚本中,获取测试环境离线表全量数据的伪代码可表示为:
SELECT param_name,
param_value
FROM test_table
WHERE param_status='normal'
其中,param_status表示云配置数据的配置状态,其是可选项。
步骤S302,判断多个环境下同一种配置所对应的云配置数据是否一致。
详细请参见图2所示实施例的步骤S202,在此不再赘述。
在一些可选的实施方式中,上述步骤S302“判断多个环境下同一种配置所对应的云配置数据是否一致”可以包括以下步骤B1至步骤B3。
步骤B1,将多个离线表中同一配置名称的云配置数据进行关联比较。
本实施例中,对于多个离线表中具有相同配置名称的云配置数据,将这些云配置数据进行关联,以能够比较这些云配置数据的配置值。
例如,若测试环境离线表的云配置数据1和生产环境离线表的云配置数据2具有相同的配置名称,则可将该云配置数据1与云配置数据2进行关联,以比较二者的配置值是否相同。
步骤B2,在相互关联的多个云配置数据的配置值相同的情况下,确定云配置数据一致。
步骤B3,在相互关联的多个云配置数据的部分配置值不同,或者部分配置值缺失的情况下,确定云配置数据不一致。
本实施例中,若相互关联的多个云配置数据的配置值相同,则说明这些云配置数据具有相同的配置名称和配置值,即不同环境下的云配置数据是相同的,故可以确定这些云配置数据一致。相反地,若相互关联的多个云配置数据的部分配置值不同,则说明部分云配置数据的配置名称相同,但配置值不同,即不同环境下的云配置数据是不同的,故可以确定云配置数据不一致。
此外,若在相互关联的多个云配置数据中,部分云配置数据的配置值缺失,则存在缺失的云配置数据的配置值为null,其也与其他云配置数据的配置值不同,此时也可认为云配置数据不一致,需要报警。
例如,若需要对测试环境离线表(test_table)查询的全量数据(testData)与生产环境离线表(prod_table)查询的全量数据(prodData)中的云配置数据进行一致性比对,可以用full join连接这两个离线表,巡检脚本的伪代码具体可以如下:
SELECT
FROM
(SELECT param_name,
param_value
FROM test_table
WHERE param_status='normal' )testData
FULL JOIN
(SELECT param_name,
param_value
FROM prod_table
WHERE param_status='normal )prodData
ON testData.param_name=prodData.param_name
WHERE testData.param_value is null
OR prodData.param_value is null
OR testData.param_value<>prodData.param_value
其中,“”表示通配符;若testData.param_value is null,则可说明测试环境离线表中的云配置数据存在配置值缺失的情况;若prodData.param_value is null,则可说明生产环境离线表中的云配置数据存在配置值缺失的情况;若testData.param_value<>prodData.param_value,则可说明具有相同配置名称的两个云配置数据,二者的配置值不同,即测试环境或生产环境中的某个配置数据存在异常。
本实施例在相互关联的多个云配置数据的部分配置值不同,或者部分配置值缺失的情况下,均确定云配置数据不一致,这样既能够做到对数据缺失的检查,也能做到对存量数据正确性校验,能够保证巡检结果的准确性。
此外,本实施例关联同一配置名称云配置数据的方式,也方便在增加其他环境时进行巡检。具体地,在新增其他环境的巡检任务时,同样获取该新增环境对应的离线表的全量数据,并将该新增环境对应的离线表中,与其他离线表的云配置数据具有相同配置名称的云配置数据进行关联,从而可以在新增其他环境时,仍然可以方便地判断这些环境的云配置数据是否一致。
例如,若在上述对测试环境离线表(test_table)与生产环境离线表(prod_table)中的云配置数据进行一致性比对的基础上,增加对预发环境离线表(pre_table)的巡检,可以用full join连接这三个离线表,巡检脚本的伪代码具体可以如下:
SELECT
FROM
(SELECT param_name,
param_value
FROM test_table
WHERE param_status='normal' )testData
FULL JOIN
(SELECT param_name,
param_value
FROM pre_table
WHERE param_status='normal ) preData
ON testData.param_name=preData.param_name
FULL JOIN
(SELECT param_name,
param_value
FROM prod_table
WHERE param_status='normal )prodData
ON preData.param_name=prodData.param_name
WHERE testData.param_value is null
OR preData.param_value is null
OR prodData.param_value is null
OR testData.param_value<>preData.param_value
OR preData.param_value<>prodData.param_value
其中,preData表示预发环境离线表(pre_table)查询的全量数据。在该巡检脚本中,先关联测试环境离线表(test_table)与预发环境离线表(pre_table)中同一配置名称的云配置数据,再关联预发环境离线表(pre_table)与生产环境离线表(prod_table)中同一配置名称的云配置数据,实现三者的关联。
类似地,若testData.param_value is null,则可说明测试环境离线表中的云配置数据存在配置值缺失的情况;若preData.param_value is null,则可说明预发环境离线表中的云配置数据存在配置值缺失的情况;若prodData.param_value is null,则可说明生产环境离线表中的云配置数据存在配置值缺失的情况。若testData.param_value<>preData.param_value,则可说明测试环境与预发环境中具有相同配置名称的两个云配置数据,二者的配置值不同,即测试环境或预发环境中的某个配置数据存在异常;若preData.param_value<>prodData.param_value,则可说明预发环境与生产环境中具有相同配置名称的两个云配置数据,二者的配置值不同,即预发环境或生产环境中的某个配置数据存在异常。
可以理解,通过比较测试环境离线表(test_table)与预发环境离线表(pre_table),以及预发环境离线表(pre_table)与生产环境离线表(prod_table),即可确定这三个离线表中是否存在不一致的云配置数据,不需要再额外比较测试环境离线表(test_table)与生产环境离线表(prod_table)中是否存在不一致的云配置数据。
此外可选地,巡检脚本可以统计不一致数据的数据量,若该数据量为0,则说明本次巡检没有查询到异常数据;相反地,若数据量不为0,则可说明不同环境的配置数据存在不一致的情况,后续可通过人工介入解决。
步骤S303,在云配置数据不一致的情况下,生成报警消息。
详细请参见图2所示实施例的步骤S203,在此不再赘述。
本实施例提供的一种巡检环境配置数据的方法,在对配置数据巡检时,获取每个离线表的全量数据;通过对所有的云配置数据进行巡检,可以保证巡检过程的完整性。并且,利用通配符获取全量数据,不需要额外设置每个配置名称,可以方便地实现巡检脚本;并且,在新增配置数据时,也不需要更新或修改该巡检脚本,即可以一次性完成该巡检脚本,利用该巡检脚本即可方便地实现巡检,巡检脚本的通用性较好。
在本实施例中提供了一种巡检环境配置数据的方法,可用于上述的云端设备,图4是根据本发明实施例的巡检环境配置数据的方法的流程图,如图4所示,该流程包括以下步骤。
步骤S401,获取各个环境的数据库同步的原始配置数据。
本实施例中,各个环境的本地数据库在需要向云端的离线数据库进行同步时,可以向云端的离线数据库上传本地存储的配置数据,以将该配置数据上传至云端。为方便描述,将本地存储的配置数据称为原始配置数据。
步骤S402,将同一环境下同一种配置所对应的多个原始配置数据统一映射为一个配置数据,并将统一映射后的配置数据作为云配置数据存储至离线数据库。
本实施例中,对于某个环境的数据库所上传的原始配置数据,若其中存在同一种配置的多个原始配置数据,则对该多个原始配置数据进行统一映射,将多个原始配置数据映射为一个配置数据,将统一映射后的配置数据作为需要存储至离线数据库的数据,即云配置数据。具体地,配置数据是键值对形式的数据,若某个数据库上传的原始配置数据中存在键相同的多个原始配置数据,则可对该多个原始配置数据进行统一映射。
例如,参见图5所示,若测试环境的数据库中的三个原始配置数据,其键(key)均是测试配置名称1,值(value)分别为测试配置值A1、测试配置值A2、测试配置值A3,则可将这三个原始配置数据统一映射为一个配置数据,该配置数据的键(key)是测试配置名称1,值(value)是测试配置值A,该配置数据即为存储到离线数据库的云配置数据1,该云配置数据1存储在测试环境离线表中。
此外,如图5所示,若生产环境的数据库中的一个原始配置数据,其键(key)是生产配置名称1,值(value)是生产配置值B,且生产环境的数据库中不存在与其具有相同配置名称的其他配置数据,故可将该原始配置数据直接作为云配置数据2,并存储至离线数据库中的生产环境离线表中。
在巡检时,可以获取到测试环境离线表中的云配置数据1,以及生产环境离线表中的云配置数据2;若上述的测试配置名称1与生产配置名称1相同,则比较测试配置值A与生产配置值B是否一致,从而实现配置数据巡检。
本实施例对同一种配置的多个原始配置数据进行统一映射,可以简化存储在云端的云配置数据,方便后续巡检。
步骤S403,获取云端的离线数据库中多种环境下的云配置数据;云配置数据为各个环境的数据库中同步至离线数据库的配置数据。
详细请参见图2所示实施例的步骤S201,在此不再赘述。
在一些可选的实施方式中,各个环境的数据库按照预设的同步频率将配置数据同步至离线数据库。并且,上述步骤S403“获取云端的离线数据库中多种环境下的云配置数据”可以包括以下步骤C1。
步骤C1,按照同步频率,从离线数据库中获取多种环境下的云配置数据。
本实施例中,本地的数据库可以按照一定的频率,将本地的配置数据同步至云端的离线数据库,该频率称为同步频率。在需要进行巡检时,也按照该同步频率对离线数据库进行巡检,即按照该同步频率获取离线数据库中的云配置数据,之后对这些云配置数据进行巡检。
例如,数据库可以按照小时级的频率进行数据的同步,即同步频率为一小时,则本实施例也可按照一小时的频率进行巡检,即每隔一小时,对离线数据库中的云配置数据进行一次巡检。按照同步频率进行巡检,可以在巡检时确保离线数据库中已经存在需要巡检的数据,且能够及时发现配置数据不一致的问题。
步骤S404,判断多个环境下同一种配置所对应的云配置数据是否一致。
详细请参见图2所示实施例的步骤S202,在此不再赘述。
步骤S405,在云配置数据不一致的情况下,生成报警消息。
详细请参见图2所示实施例的步骤S203,在此不再赘述。
本实施例提供的一种巡检环境配置数据的方法,对同一种配置的多个原始配置数据进行统一映射,可以简化存储在云端的云配置数据,方便后续巡检。并且,按照同步频率进行巡检,可以在巡检时确保离线数据库中已经存在需要巡检的数据,且能够及时发现配置数据不一致的问题。
在本实施例中还提供了一种巡检环境配置数据的装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
本实施例提供一种巡检环境配置数据的装置,应用于云端设备,如图6所示,该装置包括:
离线获取模块601,用于获取云端的离线数据库中多种环境下的云配置数据;所述云配置数据为各个环境的数据库中同步至所述离线数据库的配置数据;
判断模块602,用于判断多个环境下同一种配置所对应的云配置数据是否一致;
报警模块603,用于在云配置数据不一致的情况下,生成报警消息。
在一些可选的实施方式,所述离线数据库包括每个环境对应的离线表,所述离线表用于存储相应环境的数据库同步的云配置数据。
在一些可选的实施方式,所述离线获取模块601获取云端的离线数据库中多种环境下的云配置数据,包括:
获取所述离线数据库中每个所述离线表的全量数据,所述全量数据包括所述离线表中所有的云配置数据。
在一些可选的实施方式,所述云配置数据为键值对,且所述云配置数据的键为配置名称,所述云配置数据的值为配置值;
所述离线获取模块601获取所述离线数据库中每个所述离线表的全量数据,包括:
以通配符表示需要获取的配置名称,获取所述离线表中所有的配置名称,以及与配置名称对应的配置值。
在一些可选的实施方式,所述判断模块602判断多个环境下同一种配置所对应的云配置数据是否一致,包括:
将多个离线表中同一配置名称的云配置数据进行关联比较;
在相互关联的多个云配置数据的配置值相同的情况下,确定云配置数据一致;
在相互关联的多个云配置数据的部分配置值不同,或者部分配置值缺失的情况下,确定云配置数据不一致。
在一些可选的实施方式,所述各个环境的数据库按照预设的同步频率将配置数据同步至所述离线数据库;
所述离线获取模块601获取云端的离线数据库中多种环境下的云配置数据,包括:
按照所述同步频率,从所述离线数据库中获取多种环境下的云配置数据。
在一些可选的实施方式,该装置还包括:统一映射模块;
所述统一映射模块用于,获取各个环境的数据库同步的原始配置数据;将同一环境下同一种配置所对应的多个原始配置数据统一映射为一个配置数据,并将统一映射后的配置数据作为云配置数据存储至所述离线数据库。
上述各个模块和单元的更进一步的功能描述与上述对应实施例相同,在此不再赘述。
本实施例中的巡检环境配置数据的装置是以功能单元的形式来呈现,这里的单元是指ASIC(Application Specific Integrated Circuit,专用集成电路)电路,执行一个或多个软件或固定程序的处理器和存储器,和/或其他可以提供上述功能的器件。
本发明实施例还提供一种计算机设备,具有上述图6所示的巡检环境配置数据的装置。
请参阅图7,图7是本发明可选实施例提供的一种计算机设备的结构示意图,如图7所示,该计算机设备包括:一个或多个处理器10、存储器20,以及用于连接各部件的接口,包括高速接口和低速接口。各个部件利用不同的总线互相通信连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在计算机设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在一些可选的实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个计算机设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图7中以一个处理器10为例。
处理器10可以是中央处理器,网络处理器或其组合。其中,处理器10还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路,可编程逻辑器件或其组合。上述可编程逻辑器件可以是复杂可编程逻辑器件,现场可编程逻辑门阵列,通用阵列逻辑或其任意组合。
其中,所述存储器20存储有可由至少一个处理器10执行的指令,以使所述至少一个处理器10执行实现上述实施例示出的方法。
存储器20可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器20可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些可选的实施方式中,存储器20可选包括相对于处理器10远程设置的存储器,这些远程存储器可以通过网络连接至该计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
存储器20可以包括易失性存储器,例如,随机存取存储器;存储器也可以包括非易失性存储器,例如,快闪存储器,硬盘或固态硬盘;存储器20还可以包括上述种类的存储器的组合。
该计算机设备还包括输入装置30和输出装置40。处理器10、存储器20、输入装置30和输出装置40可以通过总线或者其他方式连接,图7中以通过总线连接为例。
输入装置30可接收输入的数字或字符信息,以及产生与该计算机设备的用户设置以及功能控制有关的键信号输入,例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等。输出装置40可以包括显示设备、辅助照明装置(例如,LED)和触觉反馈装置(例如,振动电机)等。上述显示设备包括但不限于液晶显示器,发光二极管,显示器和等离子体显示器。在一些可选的实施方式中,显示设备可以是触摸屏。
本发明实施例还提供了一种计算机可读存储介质,上述根据本发明实施例的方法可在硬件、固件中实现,或者被实现为可记录在存储介质,或者被实现通过网络下载的原始存储在远程存储介质或非暂时机器可读存储介质中并将被存储在本地存储介质中的计算机代码,从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件的存储介质上的这样的软件处理。其中,存储介质可为磁碟、光盘、只读存储记忆体、随机存储记忆体、快闪存储器、硬盘或固态硬盘等;进一步地,存储介质还可以包括上述种类的存储器的组合。可以理解,计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件,当软件或计算机代码被计算机、处理器或硬件访问且执行时,实现上述实施例示出的方法。
虽然结合附图描述了本发明的实施例,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。
Claims (10)
1.一种巡检环境配置数据的方法,其特征在于,应用于云端设备,所述方法包括:
获取云端的离线数据库中多种环境下的云配置数据;所述云配置数据为各个环境的数据库中同步至所述离线数据库的配置数据;
判断多个环境下同一种配置所对应的云配置数据是否一致;
在云配置数据不一致的情况下,生成报警消息。
2.根据权利要求1所述的方法,其特征在于,所述离线数据库包括每个环境对应的离线表,所述离线表用于存储相应环境的数据库同步的云配置数据。
3.根据权利要求2所述的方法,其特征在于,所述获取云端的离线数据库中多种环境下的云配置数据,包括:
获取所述离线数据库中每个所述离线表的全量数据,所述全量数据包括所述离线表中所有的云配置数据。
4.根据权利要求3所述的方法,其特征在于,所述云配置数据为键值对,且所述云配置数据的键为配置名称,所述云配置数据的值为配置值;
所述获取所述离线数据库中每个所述离线表的全量数据,包括:
以通配符表示需要获取的配置名称,获取所述离线表中所有的配置名称,以及与配置名称对应的配置值。
5.根据权利要求3所述的方法,其特征在于,所述判断多个环境下同一种配置所对应的云配置数据是否一致,包括:
将多个离线表中同一配置名称的云配置数据进行关联比较;
在相互关联的多个云配置数据的配置值相同的情况下,确定云配置数据一致;
在相互关联的多个云配置数据的部分配置值不同,或者部分配置值缺失的情况下,确定云配置数据不一致。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述各个环境的数据库按照预设的同步频率将配置数据同步至所述离线数据库;
所述获取云端的离线数据库中多种环境下的云配置数据,包括:
按照所述同步频率,从所述离线数据库中获取多种环境下的云配置数据。
7.根据权利要求1至5任一项所述的方法,其特征在于,还包括:
获取各个环境的数据库同步的原始配置数据;
将同一环境下同一种配置所对应的多个原始配置数据统一映射为一个配置数据,并将统一映射后的配置数据作为云配置数据存储至所述离线数据库。
8.一种巡检环境配置数据的装置,其特征在于,应用于云端设备,所述装置包括:
离线获取模块,用于获取云端的离线数据库中多种环境下的云配置数据;所述云配置数据为各个环境的数据库中同步至所述离线数据库的配置数据;
判断模块,用于判断多个环境下同一种配置所对应的云配置数据是否一致;
报警模块,用于在云配置数据不一致的情况下,生成报警消息。
9.一种计算机设备,其特征在于,包括:
存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行权利要求1至7中任一项所述的巡检环境配置数据的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机指令,所述计算机指令用于使计算机执行权利要求1至7中任一项所述的巡检环境配置数据的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311245675.8A CN116991470A (zh) | 2023-09-26 | 2023-09-26 | 巡检环境配置数据的方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311245675.8A CN116991470A (zh) | 2023-09-26 | 2023-09-26 | 巡检环境配置数据的方法、装置、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116991470A true CN116991470A (zh) | 2023-11-03 |
Family
ID=88528711
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311245675.8A Pending CN116991470A (zh) | 2023-09-26 | 2023-09-26 | 巡检环境配置数据的方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116991470A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101414926A (zh) * | 2007-10-16 | 2009-04-22 | 鸿富锦精密工业(深圳)有限公司 | Pro/Engineer标准设计环境管理系统及方法 |
CN108696372A (zh) * | 2017-04-06 | 2018-10-23 | 阿里巴巴集团控股有限公司 | 一种保持系统配置一致性的方法和系统 |
CN109284301A (zh) * | 2018-08-31 | 2019-01-29 | 阿里巴巴集团控股有限公司 | 数据核对方法及装置 |
US10467426B1 (en) * | 2018-12-26 | 2019-11-05 | BetterCloud, Inc. | Methods and systems to manage data objects in a cloud computing environment |
CN112052285A (zh) * | 2020-08-27 | 2020-12-08 | 深圳乐信软件技术有限公司 | 一种业务数据的记账管理方法、系统和介质 |
CN114661423A (zh) * | 2022-04-08 | 2022-06-24 | 平安资产管理有限责任公司 | 集群配置检测方法、装置、计算机设备及存储介质 |
-
2023
- 2023-09-26 CN CN202311245675.8A patent/CN116991470A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101414926A (zh) * | 2007-10-16 | 2009-04-22 | 鸿富锦精密工业(深圳)有限公司 | Pro/Engineer标准设计环境管理系统及方法 |
CN108696372A (zh) * | 2017-04-06 | 2018-10-23 | 阿里巴巴集团控股有限公司 | 一种保持系统配置一致性的方法和系统 |
CN109284301A (zh) * | 2018-08-31 | 2019-01-29 | 阿里巴巴集团控股有限公司 | 数据核对方法及装置 |
US10467426B1 (en) * | 2018-12-26 | 2019-11-05 | BetterCloud, Inc. | Methods and systems to manage data objects in a cloud computing environment |
CN112052285A (zh) * | 2020-08-27 | 2020-12-08 | 深圳乐信软件技术有限公司 | 一种业务数据的记账管理方法、系统和介质 |
CN114661423A (zh) * | 2022-04-08 | 2022-06-24 | 平安资产管理有限责任公司 | 集群配置检测方法、装置、计算机设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104252481B (zh) | 主从数据库一致性的动态校验方法和装置 | |
US9569325B2 (en) | Method and system for automated test and result comparison | |
JP7289334B2 (ja) | コードをテストするための方法及び装置、電子機器、記憶媒体並びにコンピュータプログラム | |
CN111694612A (zh) | 配置检查方法、装置、计算机系统及存储介质 | |
CN109271313A (zh) | 代码测试方法、装置及计算机可读存储介质 | |
CN112948233A (zh) | 一种接口测试方法、装置、终端设备及介质 | |
CN116089258A (zh) | 数据迁移测试方法、装置、设备、存储介质及程序产品 | |
CN110134598B (zh) | 一种批量处理方法、装置及系统 | |
CN116991470A (zh) | 巡检环境配置数据的方法、装置、计算机设备及存储介质 | |
CN110543394A (zh) | 服务器sensor信息一致性测试方法、系统、终端及存储介质 | |
CN107678917B (zh) | 测试机自动化管理方法、装置、设备及存储介质 | |
JP5905313B2 (ja) | 情報処理装置、情報処理方法、情報処理システム、及び、プログラム | |
CN113849404A (zh) | 对接口测试相关信息的管理方法、装置及存储介质 | |
CN114138762A (zh) | 数据加工方法、装置、存储介质以及终端 | |
CN113821369A (zh) | 一种内存巡检的方法、装置及介质 | |
CN113238940A (zh) | 一种接口测试结果的比对方法、装置、设备和存储介质 | |
CN108959508B (zh) | Sql数据生成方法及装置 | |
CN113238953A (zh) | Ui自动化测试方法、装置、电子设备和存储介质 | |
CN117538672B (zh) | 一种针对目标电容屏的测试方法、装置以及电子设备 | |
CN116521536A (zh) | 一种代码覆盖率确定方法、装置、电子设备及存储介质 | |
CN115599668A (zh) | 一种接口测试用例生成方法、装置及电子设备 | |
CN115904446A (zh) | 一种软件升级方法、装置、电子设备及存储介质 | |
CN114281853A (zh) | 大数据平台高可用服务巡检方法、系统、终端及存储介质 | |
CN117538672A (zh) | 一种针对目标电容屏的测试方法、装置以及电子设备 | |
CN117132208A (zh) | 一种成品bom的搭建系统、方法、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |