CN101894217A - 标准一致性测试系统及其测试方法 - Google Patents
标准一致性测试系统及其测试方法 Download PDFInfo
- Publication number
- CN101894217A CN101894217A CN2010102349841A CN201010234984A CN101894217A CN 101894217 A CN101894217 A CN 101894217A CN 2010102349841 A CN2010102349841 A CN 2010102349841A CN 201010234984 A CN201010234984 A CN 201010234984A CN 101894217 A CN101894217 A CN 101894217A
- Authority
- CN
- China
- Prior art keywords
- test
- standard
- testing
- questionnaire
- preprocessor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明提供了标准一致性测试系统及其测试方法，该系统包括前置处理器和后置处理器；其中，前置处理器负责标准的录入和一致性测试的准备工作，后置处理器负责对前置处理器中生成的可执行测试套件进行系统的自动测试、结果判定、生成测试报告并对测试日志和标准进行管理；前置处理器和后置处理器还通过数据库进行数据的存取。本发明可以检验被测标准是否忠实满足于其所声明与其保持一致的标准所规定的要求和规范，可以方便灵活地对现有不同级别的标准进行一致性方面的测试，还可以通过连接数据库对标准进行存储和管理。
Description
技术领域
本发明涉及标准一致性测试与管理技术。具体地说，是一种针对地理信息标准的一致性测试的方法及系统实现。
背景技术
随着我国地理信息国家标准与ISO国际标准的逐步接轨，地理信息标准化显得尤为重要，地理信息领域的一致性测试也逐渐的提上了日程。标准支持软件工具是自然资源和地理空间基础信息库标准化建设和管理的软件工具，是项目标准化工作技术支撑体系的重要组成部分。在自然资源和地理空间基础信息库的建设中，为了确保信息共享和业务协同，确定项目标准体系69个标准之间的一致性，需要开发一个标准化、实用化的一致性测试软件工具，以满足自然资源和地理空间基础信息库标准体系项目关于一致性测试的需求。
目前，针对地理信息一致性测试方面的研究与应用并无先例。
发明内容
本发明要解决的技术问题是：提供一种标准一致性测试系统及其测试方法，本发明可以检验被测标准是否忠实满足于其所声明与其保持一致的标准所规定的要求和规范，可以方便灵活地对现有不同级别的标准进行一致性方面的测试，还可以通过连接数据库对标准进行存储和管理。
本发明所采用的技术方案是：该系统包括前置处理器和后置处理器；其中，前置处理器负责标准的录入和一致性测试的准备工作，后置处理器负责对前置处理器中生成的可执行测试套件进行系统的自动测试、结果判定、生成测试报告并对测试日志和标准进行管理；前置处理器和后置处理器还通过数据库进行数据的存取。
上述标准一致性测试系统的测试方法，依次包括以下步骤：
201)将可测标准、被测标准的描述信息导入前置处理器；设计实现一致性声明问卷，提供实现测试的补充材料问卷；
202)构建测试模型，然后填写实现一致性声明问卷和实现测试的补充材料问卷，录入被测标准目录和抽象测试套件；
203)进行自动测试，并根据需要进行人工干预；
204)进行结果判定；
205)生成测试报告。
本发明的有益效果是：本发明的标准一致性测试软件工具提供一种有效测试标准间一致性的方法，并从软件的设计中可以体现出一致性测试系统的系统特性，它不局限于标准之间的关系有多复杂，凡是有一致性关系的，都可以进行一致性测试。同时前置处理器可发到标准编写单位，可以帮助标准和抽象测试套件(ATS)的标准化。另外测试结果的判定过程也表现出如下优点：
1.结果的可重现性：做到了执行一个完整的可执行测试套件而得到的结果与另一次运行的结果等同。
2.结果的可比较性：所有与一致性测试有关的规程的标准化均会产生一份与被测标准相应的可比较的总体概要。
3.结果的可审核性：无论结果分析是人工或自动方式完成，所有的输人和输出都会被每一个所执行的测试用例记录下来，并体现在测试报告中。
附图说明
图1是本发明的测试系统实现的功能结构框图。
图2是本发明的测试方法的流程图。
图3是本发明实施例的详细流程图。
具体实施方式
本发明的测试系统作为标准支持软件工具之一，是依据项目的标准规范——《自然资源与基础地理空间信息库标准信息库一致性测试》和《ISO 19105地理信息一致性与测试》来开发的。本发明的开发目的是满足自然资源和地理空间基础信息库标准体系项目关于一致性测试的需求，确定待测标准的一致性实现程度，确保标准间的协调一致性，避免出现不必要的交叉、重复乃至矛盾，保证69项由不同参建单位编制的标准之间的一致性和协调性，从而有效地支持自然资源和地理空间基础信息库的标准化建设和管理。
下面结合附图和具体标准测试实施例对本发明作进一步说明，以使本领域的技术人员可以更好的理解本发明并能予以实施，但所举实例不作为本发明的限定。
如图1所示，标准一致性测试系统包括前置处理器101和后置处理器102，共同完成一致性测试评价过程的整个流程。其中，前置处理器101负责标准的录入和一致性测试的准备工作，后置处理器102负责对前置处理器101中生成的可执行测试套件ETS进行系统的自动测试、结果判定、生成测试报告并对测试日志和标准进行管理，后置处理器102是核心部件。前置处理器101和后置处理器102还通过数据库进行数据的存取。
在优选的实施方式中，前置处理器101通过测试模型管理模块实现标准录入和一致性测试的准备工作的功能，其最终生成可执行测试套件ETS。前置处理器101工作于测试准备阶段。
在优选的实施方式中，后置处理器102包括测试分析模块、测试报告生成模块和基本管理模块，测试分析模块对ICS问卷、IXIT问卷以及一致性测试日志进行分析，对可执行测试套件ETS进行自动测试和结果判定。测试报告生成模块实现生成测试报告的功能，基本管理模块实现对测试日志和标准进行管理的功能。测试分析模块是一致性测试的核心模块。
上述各功能模块实现的硬件环境为电子计算机。
如图2所示，本发明的测试方法包括以下步骤：
201)从测试实验室导出测试依据，将可测标准、被测标准的描述信息导入前置处理器101。
进一步地，根据被测标准与第三方测试机构针对被测标准的一致性要求，设计实现一致性声明ICS问卷。根据被测标准的测试环境要求，由测试实验室提供对被测标准实现测试的补充材料IXIT问卷。
202)根据与被测标准声明一致的可测标准内容构建测试模型，然后填写系统自动生成的实现一致性声明ICS问卷和实现测试的补充材料IXIT问卷。
进一步地，录入被测标准目录、抽象测试套件ATS，将准备阶段设计的实现一致性声明ICS问卷导入前置处理器中，生成可执行测试套件ETS，导出前置处理数据包。
203)进行自动测试，并根据需要进行人工干预。
具体而言，系统自动对可执行测试套件ETS进行自动测试，在文本比对测试无法判定结果时，需进行人工干预，对无法判定的结论进行人工修改。
204)进行结果判定，通过交叉认证后，进行结果分析，生成测试结论。
205)生成测试报告，并可以预览打印。
实施例：
下面详细说明本发明的标准一致性测试方法的整个流程及工作原理：
301)导入可测标准：将被测标准声明了与其具有一致性的可测标准，导入到前置处理器101中。
302)录入被测标准基本描述信息，包括标准名称、标准类型、标准撰写单位、标准录入人名称。
303)设计实现一致性声明ICS问卷：根据被测标准声明了与其具有一致性的可测标准，与第三方测试机构共同设计ICS问卷。
304)根据被测标准的测试环境要求，测试实验室提供实现测试的补充材料IXIT问卷。
305)构建测试模型：针对不同的标准，构建不同的测试模型，产生不同的实现一致性声明ICS问卷，以测试其一致性实现程度。
具体构建方法：根据实现一致性声明ICS填写相应的参数，然后系统自动检验所有声明与自然资源和地理空间基础信息库系列项目标准相一致的规范(包括专用标准和功能标准)是否具有一致性条款，最后建立文本比对测试模型。
306)对系统自动生成的实现一致性声明ICS问卷进行填写：只有在构建测试模型之后系统才自动生成ICS问卷以供用户填写，这是一个参数赋值过程，ICS问卷填写完毕之后需用户和测试实验室之间进行相互确认、签字。
307)填写由测试实验室提供的实现补充性材料IXIT问卷。
308)录入标准目录，可手动或程序自动导入标准的目录信息，为一致性测试做标准。
进一步地，录入被测标准的抽象测试套件ATS，此套件可自动导入。
进一步地，将实现一致性声明ICS问卷导入前置处理器101。
309)生成可执行测试套件ETS，导出前置处理数据包。
310)对已成功赋值过的可执行测试套件(ETS)进行自动测试，测试该被测标准实现中的错误。自动测试过程包括对ICS问卷和IXIT问卷以及一致性测试日志的分析。
具体测试方法：一般执行证伪测试，即根据某实现特定的可执行测试套件(ETS)，根据每项与被测标准声明相一致的规范进行测试，若某项规范的测试失败，则判定该实现不符合该规范。证伪测试是根据一项标准，为一个实现开发特定的测试集合或套件，以检测该实现中的错误的一种方法。通过将测试集中在一项标准的关键内容上，证伪测试试图为一个具有需求能力的实现提供可信度。用这种手段，一个在特定测试或特定测试集合中失败的实现，能够被判定不符合标准。然而，即使一个实现已经在完整测试套件中产生了正确的结果，仍不能完全确信该实现符合标准。
当这种自动测试过于复杂且(或者)需要人为判断时、或者自动测试行不通的情况下，就需要进行人工测试。
311)判断是否需要人工干预，当自动测试过于复杂或需要人为判断时，则执行312)，否则执行313)的结果判定。
312)对被测标准进行人工测试：最终被测标准实现所要求的测试人工干预的部分在一致性测试日志中会观察到，并体现在一致性测试报告中。
在人工测试中，为了执行测试，客户和一致性测试人员可以共同检查输出，并依据输入进行比较。在人工测试中，需要有用于决定测试判定的明确准则。
313)结果判定：综合一致性测试日志情况，对自动测试，或自动测试与人工干预的一致性测试结果进行结果判定，并给出一致性测试的概要叙述和每个测试项的详细信息说明。
314)测试报告生成：测试报告以问卷的形式呈现给用户，用户可根据具体需求配置测试报告的组成部分，最终从问卷生成一致性测试报告。
315)测试报告打印或导出：系统提供接口，可对测试报告进行打印预览，对于不当之处做出修改，最终可导出一致性测试报告，送到专家处审核签字。
上述步骤301～309在测试模型管理模块中执行，310～313由测试分析模块执行，314、315由测试报告生成模块执行。
Claims (7)
1.标准一致性测试系统，其特征在于：该系统包括前置处理器(101)和后置处理器(102)；
其中，前置处理器(101)负责标准的录入和一致性测试的准备工作，后置处理器(102)负责对前置处理器(101)中生成的可执行测试套件进行系统的自动测试、结果判定、生成测试报告并对测试日志和标准进行管理；前置处理器(101)和后置处理器(102)还通过数据库进行数据的存取。
2.根据权利要求1所述的测试系统，其特征在于：前置处理器(101)通过测试模型管理模块实现标准录入和一致性测试的准备工作的功能。
3.根据权利要求1所述的测试系统，其特征在于：后置处理器(102)包括测试分析模块、测试报告生成模块和基本管理模块，测试分析模块实现自动测试和结果判定的功能，测试报告生成模块实现生成测试报告的功能，基本管理模块实现对测试日志和标准进行管理的功能。
4.根据权利要求1～3中任一项所述的标准一致性测试系统的测试方法，其特征在于依次包括以下步骤：
201)将可测标准、被测标准的描述信息导入前置处理器(101)；设计实现一致性声明(ICS)问卷，提供实现测试的补充材料(IXIT)问卷；
202)构建测试模型，然后填写实现一致性声明(ICS)问卷和实现测试的补充材料(IXIT)问卷，录入被测标准目录和抽象测试套件(ATS)；
203)进行自动测试，并根据需要进行人工干预；
204)进行结果判定；
205)生成测试报告。
5.根据权利要求4所述的测试方法，其特征在于具体包括以下步骤：
301)将被测标准声明了与其具有一致性的可测标准导入到前置处理器(101)中；
302)录入被测标准描述信息，包括标准名称、标准类型、标准撰写单位、标准录入人名称；
303)根据可测标准，与第三方测试机构共同设计实现一致性声明(ICS)问卷；
304)根据被测标准的测试环境要求，提供实现测试的补充材料(IXIT)问卷；
305)针对不同的标准，构建不同的测试模型；
306)对系统自动生成的实现一致性声明(ICS)问卷进行填写；
307)填写实现测试的补充材料(IXIT)问卷；
308)录入被测标准目录、抽象测试套件(ATS)，将实现一致性声明(ICS)问卷导入前置处理器(101)；
309)生成可执行测试套件(ETS)，导出前置处理数据包；
310)对已成功赋值过的可执行测试套件(ETS)进行自动测试，测试该被测标准实现中的错误；
311)判断是否需要人工干预，当自动测试过于复杂或需要人为判断时，则执行312)，否则执行313)；
312)对被测标准进行人工测试，检查输出，并依据输入进行比较；
313)综合一致性测试日志情况，对一致性测试结果进行结果判定，并给出一致性测试的概要叙述和每个测试项的详细信息说明；
314)将测试报告以问卷的形式呈现给用户；
315)系统提供接口，对测试报告进行打印预览，对于不当之处做出修改，最终导出一致性测试报告。
6.根据权利要求5所述的测试方法，其特征在于步骤305)构建测试模型的方法为：根据实现一致性声明(ICS)填写相应的参数，然后系统自动检验所有声明与被测标准相一致的规范是否具有一致性条款，最后建立文本比对测试模型。
7.根据权利要求5所述的测试方法，其特征在于步骤310)自动测试的方法为：执行证伪测试，即根据某实现特定的可执行测试套件(ETS)，根据每项与被测标准声明相一致的规范进行测试，若某项规范的测试失败，则判定该实现不符合该规范。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010102349841A CN101894217A (zh) | 2010-07-23 | 2010-07-23 | 标准一致性测试系统及其测试方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010102349841A CN101894217A (zh) | 2010-07-23 | 2010-07-23 | 标准一致性测试系统及其测试方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101894217A true CN101894217A (zh) | 2010-11-24 |
Family
ID=43103407
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2010102349841A Pending CN101894217A (zh) | 2010-07-23 | 2010-07-23 | 标准一致性测试系统及其测试方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101894217A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103017815A (zh) * | 2012-12-30 | 2013-04-03 | 陕西海泰电子有限责任公司 | 一种可视化的通用测试系统及测试方法 |
| CN110619475A (zh) * | 2019-09-20 | 2019-12-27 | 深圳歌力思服饰股份有限公司 | 服装吊牌和洗水唛的管理方法及装置 |
-
2010
- 2010-07-23 CN CN2010102349841A patent/CN101894217A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103017815A (zh) * | 2012-12-30 | 2013-04-03 | 陕西海泰电子有限责任公司 | 一种可视化的通用测试系统及测试方法 |
| CN110619475A (zh) * | 2019-09-20 | 2019-12-27 | 深圳歌力思服饰股份有限公司 | 服装吊牌和洗水唛的管理方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2572294B1 (en) | System and method for sql performance assurance services | |
| CN102236672B (zh) | 一种数据导入方法及装置 | |
| CN109118123B (zh) | 水利水电工程施工质量评定bim管理方法 | |
| CN108345532A (zh) | 一种自动化测试用例生成方法和装置 | |
| Lipman et al. | Assessment of conformance and interoperability testing methods used for construction industry product models | |
| CN111309581B (zh) | 一种数据库升级场景下的应用性能检测方法及装置 | |
| CN109491642A (zh) | 一种基于场景的需求建模系统及方法、信息数据处理终端 | |
| Parvan | Estimating the impact of building information modeling (BIM) utilization on building project performance | |
| Hjelseth | Public BIM-based model checking solutions: lessons learned from Singapore and Norway | |
| CN103955429B (zh) | 确定回归测试范围的方法及装置 | |
| CN114004518A (zh) | 一种基于bim模型的质量验评信息获取方法及系统 | |
| CN108573365B (zh) | 面向服务和流程的综合测试状态数字化管理方法 | |
| CN105653445B (zh) | 一种满足do‑178c测试结果的实现方法 | |
| CN101894217A (zh) | 标准一致性测试系统及其测试方法 | |
| CN104182829A (zh) | 仪器研制可靠性管理与保障系统 | |
| CN111966665A (zh) | 数据迁移测试方法及装置 | |
| CN106155665B (zh) | 符合性举证系统及方法 | |
| Staron et al. | Using models to develop measurement systems: a method and its industrial use | |
| CN112348454B (zh) | 一种电气设备交接试验智能管控系统及方法 | |
| CN103017815A (zh) | 一种可视化的通用测试系统及测试方法 | |
| CN107992417B (zh) | 基于存储过程的测试方法、装置及设备、可读存储介质 | |
| Ekyalimpa et al. | A prototype for project management game development using high level architecture | |
| Andaloussi et al. | A test specification method for software interoperability tests in offshore scenarios: a case study | |
| CN103678636A (zh) | 一种构件软件系统可靠性的提高系统及方法 | |
| CN104699960B (zh) | 标准一致性测试方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20101124 |