CN110765011A - 一种配置库内测试运维数据自动获取和校验装置及方法 - Google Patents

一种配置库内测试运维数据自动获取和校验装置及方法 Download PDF

Info

Publication number
CN110765011A
CN110765011A CN201910979198.5A CN201910979198A CN110765011A CN 110765011 A CN110765011 A CN 110765011A CN 201910979198 A CN201910979198 A CN 201910979198A CN 110765011 A CN110765011 A CN 110765011A
Authority
CN
China
Prior art keywords
configuration library
data
module
feature code
task
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910979198.5A
Other languages
English (en)
Other versions
CN110765011B (zh
Inventor
张弛
吕鑫
史建友
张瑞
徐建华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casco Signal Ltd
Original Assignee
Casco Signal Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casco Signal Ltd filed Critical Casco Signal Ltd
Priority to CN201910979198.5A priority Critical patent/CN110765011B/zh
Publication of CN110765011A publication Critical patent/CN110765011A/zh
Application granted granted Critical
Publication of CN110765011B publication Critical patent/CN110765011B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3604—Software analysis for verifying properties of programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及一种配置库内测试运维数据自动获取和校验装置及方法。配置库内测试运维数据自动获取和校验装置包括依次连接的任务流程处理解析模块、配置库操作模块和特征码校验部署模块，配置库操作模块通过版本控制工具与配置库连接。配置库内测试运维数据自动获取和校验方法用于上述装置，实现了配置库内测试运维数据的自动获取和校验。与现有技术相比，本发明具有缩短操作时间、提高执行效率、降低测试和运维风险、自动化程度高等优点。

Description

一种配置库内测试运维数据自动获取和校验装置及方法
技术领域
本发明涉及运维技术领域，尤其是涉及一种基于任务流程发布的配置库内测试运维数据自动获取和校验装置及方法。
背景技术
在全生命周期中的测试和运维发布阶段，由于数据和的更新较为频繁，数据和版本众多，对应关系复杂，不同项目的差异化需求导致一款分支出不同版本，对应各自特定数据信息。因此，众多项目、版本、数据版本互相组合，导致测试人员和运维人员搭建测试和运维环境时，待测对象和待部署对象的获取流程变得较为复杂，如果单纯使用人工从配置库中检出和数据的方法，操作繁琐，执行效率低下，而且很容易因为操作人员的疏漏导致错误。
为了验证人工从配置库中检出的和数据的正确性，通常采用的方法是，开发人员在将数据或程序检入配置库后，计算入库文件的MD5或SHA-1特征码并随发布任务一起流转给测试和运维人员。相关人员在手工从配置库中检出文件后，计算检出文件的特征码来确认取出文件的正确性。此步骤虽能识别操作人员的疏漏从而补救问题，但是却增加了操作步骤，降低了执行效率。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种缩短操作时间、提高执行效率、降低测试和运维风险的配置库内测试运维数据自动获取和检验装置及方法。
本发明的目的可以通过以下技术方案来实现：
一种配置库内测试运维数据自动获取和校验装置，包括依次连接的任务流程处理解析模块、配置库操作模块和特征码校验部署模块；
所述的任务流程处理解析模块用于从既有任务流程控制系统中获取任务发布单据，将其解析为结构化数据，然后从结构化数据中提取出连接配置库和检出数据所需的文件信息并传给配置库操作模块；
所述的配置库操作模块通过版本控制工具与配置库连接；所述的版本控制工具按照文件信息的要求将配置库内的文件检出并存储在存储器内，然后传给特征码校验部署模块；
所述的特征码校验部署模块用于对配置库操作模块检出的文件进行特征码计算并与任务流程处理解析模块所提取出特征值进行比较，以判断检出操作的结果是否正确。
优选地，所述的文件信息包括任务名称、任务类型、由系统或子系统发布、发布包含的数据和名称、版本号、配置库内标签以及MD5特征码或SHA-1特征码。
优选地，所述的结构化数据的格式为XML格式、Json格式或YAML格式。
优选地，所述的配置库操作模块通过SSH协议与版本控制工具连接，利用SSH协议可以有效防止远程管理过程中的信息泄露问题，增加安全性。
优选地，所述的配置库操作模块检出的文件设有时间戳，用于保证文件不被覆盖或替换其他文件。
优选地，所述的特征码检验部署模块在存储器出现故障导致检出文件特征码与结构化数据解析出的特征码不一致时，废弃检出的文件并记录故障信息。
一种配置库内测试运维数据自动获取和校验方法，包括以下步骤：
步骤1：任务流程处理解析模块获取任务流程编号；
步骤2：连接既有的任务流程控制系统获取任务流程编号所对应的任务发布单据；
步骤3：获取结构化数据，数据格式为XML格式、Json格式或YAML格式；
步骤4：解析结构化数据，提取发布数据文件信息，包括任务名称、任务类型、由系统或子系统发布、发布包含的数据和名称、版本号、配置库内标签以及MD5特征码或SHA-1特征码；
步骤5：配置库操作模块调用命令连接配置库，并通过版本控制工具根据文件信息检出配置库内文件存储在本地存储器或网络存储器；
步骤6：特征码检验部署模块计算检出文件的特征码；
步骤7：判断计算所得的特征码与结构化数据解析得到的特征码是否一致，若是，则执行步骤8，否则，执行步骤9；
步骤8：将获取的文件移动至预先配置的路径，然后调用部署工具进行环境部署，然后执行步骤10；
步骤9：记录错误并提示操作人员，然后执行步骤10；
步骤10：结束本轮处理逻辑。
优选地，所述的步骤3具体为：通过既有任务流程控制系统中的接口或内网爬虫获取结构化数据。
与现有技术相比，本发明具有以下优点：
一、有效缩短操作时间，提高执行效率：本发明实现了配置库内测试运维数据获取和校验的自动化，相较现有技术中的人工操作方式，有效缩短了操作时间，提高了执行效率。
二、降低测试和运维风险：本发明将配置库内测试运维数据的获取和校验过程更加细化，并且通过计算机处理，避免了因人为疏忽等原因可能出现的软件、数据获取侧或从而导致的测试或部署无线的问题，从而降低了测试和运维的风险，提高了软件的生命周期整体质量。
三、自动化程度高：本发明中的任务流程处理解析模块与既有任务流程控制系统相连，在开发人员完成了测试或运维任务提交后，任务流程处理解析模块自动获取流程编号等信息，省去了测试或运维人员手动流转任务、获得任务单据号的操作，整个数据获取和校验流程不需要人工操作，自动化程度高。
附图说明
图1为本发明中数据自动获取和校验装置的结构示意图；
图2为本发明中数据自动获取和校验方法的流程图。
图中标号所示：
1、任务流程处理解析模块，2、配置库操作模块，3、特征码校验部署模块。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都应属于本发明保护的范围。
如图1所示，配置库内测试运维数据自动获取和校验装置包括三大模块：
任务流程处理解析模块1：用于从既有任务流程控制系统(流程发布平台或Jenkins等集成平台)获取任务发布单据，并将其解析为结构化数据，然后从结构化数据中提取出连接配置库和检出软件数据所需要的版本号、标签内容等文本信息。
配置库操作模块2：通过版本控制工具(VersionControlSystem，包括但不限于ClearCase、Subversion、git等)进行连接，版本控制工具按照文本信息的要求将配置库内的文件检出并存储在存储器内。
特征码计算校验部署模块3：用于对配置库操作模块2检出的文件进行特征码计算并与任务流程处理解析模块所提取出的文件信息内的特征值进行比较，以判断判断检出操作的结果是否正确以及是否开展部署。
如图2所示，配置库内测试运维数据自动获取和校验方法包括以下步骤：
步骤1：在开发人员完成测试或运维任务并提交后，任务流程处理解析模块1获取任务流程编号；
步骤2：任务流程处理解析模块1连接既有的任务流程控制系统获取任务流程编号所对应的任务发布单据；
步骤3：获取结构化数据，数据格式为XML格式、Json格式或YAML格式；
针对不同的实际场景，可以使用多种接口，例如web service接口，或者内网爬虫来直接爬取结构化数据；
步骤4：解析结构化数据，提取发布数据文件信息，包括任务名称、任务类型、由系统或子系统发布、发布包含的数据和名称、版本号、配置库内标签以及MD5特征码或SHA-1特征码。
步骤5：配置库操作模块2调用命令连接配置库并根据文件信息检出配置库内文件存储在本地存储器或网络存储器；本地存储器包括磁盘存储器件、固态硬盘器件、闪存器件等存储设备。
通常情况下，检出的对应文件在workspace文件夹下不存在同名文件。如果同时进行多个文件获取工作、或者workspace文件夹下被操作人员误放入某文件，导致和被检出的文件重名，程序可根据当前系统时间对检出的文件添加时间戳来确保获取的文件不会覆盖或替换其他文件，也不会被其他同名文件覆盖。
步骤6：特征码检验部署模块3计算检出文件的特征码，特征码类型为MD5或SHA-1。
步骤7：判断计算所得的特征码与结构化数据解析得到的特征码是否一致，若是，则执行步骤8，否则，执行步骤9；
步骤8：将获取的文件移动至预先配置的路径，然后调用部署工具进行环境部署，然后执行步骤10；
步骤9：记录错误并提示操作人员，然后执行步骤10；
步骤10：结束本轮处理逻辑。
在具体应用场景下，此实施例中的配置库内测试运维数据自动获取和校验系统可以和自动部署工具、自动测试脚本等集成，在将检出文件移动到目标路径后，调用自动部署工具进行环境部署，运行自动测试脚本对软件和数据进行测试。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种配置库内测试运维数据自动获取和校验装置，其特征在于，包括依次连接的任务流程处理解析模块(1)、配置库操作模块(2)和特征码校验部署模块(3)；
所述的任务流程处理解析模块(1)用于从既有任务流程控制系统中获取任务发布单据，将其解析为结构化数据，然后从结构化数据中提取出连接配置库和检出数据所需的文件信息并传给配置库操作模块(2)；
所述的配置库操作模块(2)通过版本控制工具与配置库连接；所述的版本控制工具按照文件信息的要求将配置库内的文件检出并存储在存储器内，然后传给特征码校验部署模块(3)；
所述的特征码校验部署模块(3)用于对配置库操作模块(2)检出的文件进行特征码计算并与任务流程处理解析模块(1)所提取出特征值进行比较，以判断检出操作的结果是否正确。
2.根据权利要求1所述的一种配置库内测试运维数据自动获取和校验装置，其特征在于，所述的文件信息包括任务名称、任务类型、由系统或子系统发布、发布包含的数据和名称、版本号、配置库内标签以及MD5特征码或SHA-1特征码。
3.根据权利要求1所述的一种配置库内测试运维数据自动获取和校验装置，其特征在于，所述的结构化数据的格式为XML格式、Json格式或YAML格式。
4.根据权利要求1所述的一种配置库内测试运维数据自动获取和校验装置，其特征在于，所述的配置库操作模块(2)通过SSH协议与版本控制工具连接。
5.根据权利要求1所述的一种配置库内测试运维数据自动获取和校验装置，其特征在于，所述的配置库操作模块(2)检出的文件设有时间戳，用于保证文件不被覆盖或替换其他文件。
6.根据权利要求1所述的一种配置库内测试运维数据自动获取和校验装置，其特征在于，所述的特征码检验部署模块(3)在存储器出现故障导致检出文件特征码与结构化数据解析出的特征码不一致时，废弃检出的文件并记录故障信息。
7.一种用于如权利要求1所述的获取和校验装置的配置库内测试运维数据自动获取和校验方法，其特征在于，包括以下步骤：
步骤1：任务流程处理解析模块(1)获取任务流程编号；
步骤2：连接既有的任务流程控制系统获取任务流程编号所对应的任务发布单据；
步骤3：获取结构化数据，数据格式为XML格式、Json格式或YAML格式；
步骤4：解析结构化数据，提取发布数据文件信息，包括任务名称、任务类型、由系统或子系统发布、发布包含的数据和名称、版本号、配置库内标签以及MD5特征码或SHA-1特征码；
步骤5：配置库操作模块(2)调用命令连接配置库，并通过版本控制工具根据文件信息检出配置库内文件存储在本地存储器或网络存储器；
步骤6：特征码检验部署模块(3)计算检出文件的特征码；
步骤7：判断计算所得的特征码与结构化数据解析得到的特征码是否一致，若是，则执行步骤8，否则，执行步骤9；
步骤8：将获取的文件移动至预先配置的路径，然后调用部署工具进行环境部署，然后执行步骤10；
步骤9：记录错误并提示操作人员，然后执行步骤10；
步骤10：结束本轮处理逻辑。
8.根据权利要求7所述的一种配置库内测试运维数据自动获取和校验方法，其特征在于，所述的步骤3具体为：通过既有任务流程控制系统中的接口或内网爬虫获取结构化数据。
CN201910979198.5A 2019-10-15 2019-10-15 一种配置库内测试运维数据自动获取和校验装置及方法 Active CN110765011B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910979198.5A CN110765011B (zh) 2019-10-15 2019-10-15 一种配置库内测试运维数据自动获取和校验装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910979198.5A CN110765011B (zh) 2019-10-15 2019-10-15 一种配置库内测试运维数据自动获取和校验装置及方法

Publications (2)

Publication Number Publication Date
CN110765011A true CN110765011A (zh) 2020-02-07
CN110765011B CN110765011B (zh) 2023-04-07

Family

ID=69332139

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910979198.5A Active CN110765011B (zh) 2019-10-15 2019-10-15 一种配置库内测试运维数据自动获取和校验装置及方法

Country Status (1)

Country Link
CN (1) CN110765011B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4553201A (en) * 1983-03-28 1985-11-12 Honeywell Information Systems Inc. Decoupling apparatus for verification of a processor independent from an associated data processing system
US20030149756A1 (en) * 2002-02-06 2003-08-07 David Grieve Configuration management method and system
CN101515232A (zh) * 2008-02-21 2009-08-26 卓望数码技术（深圳）有限公司 一种软件持续集成系统及方法
CN103792448A (zh) * 2014-01-22 2014-05-14 国家电网公司 一种数字化保护装置自动测试控制系统及其控制方法
CN104182347A (zh) * 2014-09-05 2014-12-03 上海斐讯数据通信技术有限公司 一种基于自动化测试平台的测试需求自动分析方法
EP3073390A1 (en) * 2015-03-26 2016-09-28 Fujitsu Limited Document checking device, method, and program
CN106104467A (zh) * 2014-06-30 2016-11-09 北京新媒传信科技有限公司 一种自动化部署方法和终端
CN106502883A (zh) * 2016-10-09 2017-03-15 武汉斗鱼网络科技有限公司 自动化测试时客户端与服务端的数据库同步方法及系统
CN107391112A (zh) * 2017-06-23 2017-11-24 江苏艾科半导体有限公司 一种文件版本检测方法及其专用装置
CN108628749A (zh) * 2018-05-15 2018-10-09 福建天晴在线互动科技有限公司 Web工程自动化校验的测试方法、存储介质
CN109033205A (zh) * 2018-06-29 2018-12-18 上海精密计量测试研究所 基于数据输入行为分析的航天测试数据校核模型
CN109725911A (zh) * 2017-10-31 2019-05-07 北京国双科技有限公司 一种多环境项目部署方法、装置、存储介质及处理器
CN109947458A (zh) * 2019-03-22 2019-06-28 广东电网有限责任公司 一种离线源代码安全持续集成方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4553201A (en) * 1983-03-28 1985-11-12 Honeywell Information Systems Inc. Decoupling apparatus for verification of a processor independent from an associated data processing system
US20030149756A1 (en) * 2002-02-06 2003-08-07 David Grieve Configuration management method and system
CN101515232A (zh) * 2008-02-21 2009-08-26 卓望数码技术（深圳）有限公司 一种软件持续集成系统及方法
CN103792448A (zh) * 2014-01-22 2014-05-14 国家电网公司 一种数字化保护装置自动测试控制系统及其控制方法
CN106104467A (zh) * 2014-06-30 2016-11-09 北京新媒传信科技有限公司 一种自动化部署方法和终端
CN104182347A (zh) * 2014-09-05 2014-12-03 上海斐讯数据通信技术有限公司 一种基于自动化测试平台的测试需求自动分析方法
EP3073390A1 (en) * 2015-03-26 2016-09-28 Fujitsu Limited Document checking device, method, and program
CN106502883A (zh) * 2016-10-09 2017-03-15 武汉斗鱼网络科技有限公司 自动化测试时客户端与服务端的数据库同步方法及系统
CN107391112A (zh) * 2017-06-23 2017-11-24 江苏艾科半导体有限公司 一种文件版本检测方法及其专用装置
CN109725911A (zh) * 2017-10-31 2019-05-07 北京国双科技有限公司 一种多环境项目部署方法、装置、存储介质及处理器
CN108628749A (zh) * 2018-05-15 2018-10-09 福建天晴在线互动科技有限公司 Web工程自动化校验的测试方法、存储介质
CN109033205A (zh) * 2018-06-29 2018-12-18 上海精密计量测试研究所 基于数据输入行为分析的航天测试数据校核模型
CN109947458A (zh) * 2019-03-22 2019-06-28 广东电网有限责任公司 一种离线源代码安全持续集成方法

Also Published As

Publication number Publication date
CN110765011B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
US11281570B2 (en) Software testing method, system, apparatus, device medium, and computer program product
US9824002B2 (en) Tracking of code base and defect diagnostic coupling with automated triage
US20120030658A1 (en) Software development assistant method and system
US10120785B2 (en) Automatic generation of data coupling and control coupling test conditions
WO2016138953A1 (en) A method for identifying a cause for a failure of a test
CN111045944A (zh) 回归测试方法、装置、系统及计算机可读存储介质
Santana et al. RAIDE: a tool for Assertion Roulette and Duplicate Assert identification and refactoring
CN112988594A (zh) 用于代码质量评估的集成检测方法及系统
CN111611157B (zh) Gms持续集成构建自动化测试方法及系统
US8327189B1 (en) Diagnosing an incident on a computer system using a diagnostics analyzer database
CN112527312B (zh) 一种嵌入式系统的测试方法和测试装置
KR20140088963A (ko) 애플리케이션 개발을 위한 런타임 에러 테스팅 시스템 및 방법
CN110765011B (zh) 一种配置库内测试运维数据自动获取和校验装置及方法
CN111831554A (zh) 一种代码检查方法及装置
CN109271309B (zh) 自动化测试软件的方法及装置、服务器、设备和存储介质
CN112035356A (zh) 一种web应用兼容性的自动化测试方法及系统
CN108845932B (zh) 一种网络库的单元测试方法、装置、存储介质及终端
CN110825645A (zh) 一种流水线式全流程自动化测试方法
CN111752823A (zh) 一种车载电源应用软件的测试方法、装置及设备
CN118276919A (zh) 基于Jenkins的软件开发处理方法、装置及终端
CN109144866B (zh) 基于家用电器的软件测试方法及软件测试装置
CN112052175A (zh) 一种自动化测试应用程序的方法、装置及电子设备
Shcherbina et al. Testing Processes Automation
CN117056161A (zh) 机箱检修方法、系统、电子设置及存储介质
CN116820961A (zh) 车载软件测试方法、装置、设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant