CN108228989A - 基于外部真实设备的故障插入系统 - Google Patents

基于外部真实设备的故障插入系统 Download PDF

Info

Publication number
CN108228989A
CN108228989A CN201711421146.3A CN201711421146A CN108228989A CN 108228989 A CN108228989 A CN 108228989A CN 201711421146 A CN201711421146 A CN 201711421146A CN 108228989 A CN108228989 A CN 108228989A
Authority
CN
China
Prior art keywords
test
failure
message
failure insertion
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711421146.3A
Other languages
English (en)
Other versions
CN108228989B (zh
Inventor
王海腾
张�浩
赵琳
武鹏
徐德龙
陈亮
朱晓琳
吕方瑶
许加龙
徐强
尹青
于建洁
王龙生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Academy of Railway Sciences Corp Ltd CARS
Signal and Communication Research Institute of CARS
Beijing Ruichi Guotie Intelligent Transport Systems Engineering Technology Co Ltd
Beijing Huatie Information Technology Development Corp
Original Assignee
China Academy of Railway Sciences Corp Ltd CARS
Signal and Communication Research Institute of CARS
Beijing Ruichi Guotie Intelligent Transport Systems Engineering Technology Co Ltd
Beijing Huatie Information Technology Development Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Academy of Railway Sciences Corp Ltd CARS, Signal and Communication Research Institute of CARS, Beijing Ruichi Guotie Intelligent Transport Systems Engineering Technology Co Ltd, Beijing Huatie Information Technology Development Corp filed Critical China Academy of Railway Sciences Corp Ltd CARS
Priority to CN201711421146.3A priority Critical patent/CN108228989B/zh
Publication of CN108228989A publication Critical patent/CN108228989A/zh
Application granted granted Critical
Publication of CN108228989B publication Critical patent/CN108228989B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • Maintenance And Management Of Digital Transmission (AREA)

Abstract

本发明公开了一种基于外部真实设备的故障插入系统,包括:测试自动执行框架,用于获取测试案例管理系统下发的测试脚本,并下发给自动执行适配单元,以及将执行结果反馈给测试案例管理系统;修改执行模块,用于捕获真实陪测设备的逻辑处理单元产生的通信数据,并按照测试脚本中的执行命令对通信数据做相应的故障插入处理后再通过真实陪测设备的安全通信单元发送给被测设备。该系统系统保证了通信交互数据与真实情况的近似性,也达到了故障插入测试的目的。

Description

基于外部真实设备的故障插入系统
技术领域
本发明涉及轨道交通技术领域,尤其涉及一种基于外部真实设备的故障插入系统。
背景技术
列车运行控制系统是保障高速铁路行车安全、提高运输效率的核心,是高速铁路的“神经中枢”。我国制定了CTCS技术规范,它是以分级形式满足不同线路运输需求的技术规范。我国300km/h以上的高速铁路已确定采用以车载速度信号显示为主的高可靠、高安全的CTCS-3级列车运行控制系统作为统一技术平台。为了保证列车能够安全、可靠的运行,必须保证CTCS-3级列车运行控制系统的可靠性。因此,高速铁路列车控制系统装机前的动态测试试验是比不可少的。
高可靠性的列控系统的仿真测试平台是提高列控系统安全性的基本保障。
在仿真测试系统搭建完成后,系统可能存在潜在的危险。RBC、TCC、GSM-R通信设备等都有可能成为危险源。为了保证列车运行的安全,使系统符合安全技术要求,需要对系统进行安全分析。一般来说,通过分析信号系统中存在的潜在危险和薄弱环节、发生事故的概率和可能的严重程度,确定系统能否满足安全要求并达到设定的安全目标。
CTCS-3级列车运行控制系统作为一个安全相关系统,要做到系统的安全能够得到接受和论证,必须经过质量管理、安全管理、功能和技术安全措施等步骤。
在对CTCS-3级列控系统的安全性分析工作中,将CTCS-3级列控系统功能需求规范作为顶级设计的基础。根据系统功能规范,对系统中可能存在的危险源进行详实、全面的分析,找出系统可能存在的所有安全隐患和危险源。包括轨旁与TCC通信故障、TCC与临时限速服务器通信故障、RBC故障、RBC与车站联锁设备通信故障、GSM-R通信中断、车载设备故障等。
在CTCS-3级列控系统仿真测试系统中故障注入方法选择是提高仿真系统的可靠性提高的重要保障。
故障注入技术(Fault Injection)是系统测试性、安全性以及功能验证研究的重要方面,是验证工作得以实现的基础。故障注入技术按照事先选定的故障模型,采取某种策略认为的、有意识的将故障注入目标系统,用以加速该系统错误和失效的发生,同时观测反馈系统对所注入故障的相应信息,通过分析,对系统进行验证和评价的过程。
故障注入的位置与故障注入的类型有关,对于处于物理层的软件故障注入和硬件故障注入并不是故障注入的重点,为了测试设备失效对安全性的影响,故障注入的位置以设备为基本单位,从而构成设备及、单系统级、多系统级的故障注入方案。
故障注入方法是一种测评容错机制有效的试验方法,他通过有意识地向系统中引入故障来加速测评容错机制的试验过程。
目前故障注入方法主要是通过系统内设备的仿真软件,将故障注入实现系统的测试验证。以CTCS-3级列控系统RBC设备系统的测试为例,RBC作为测试对象时,测试车地、相邻RBC消息交互的功能,车载ATP和相邻RBC作为陪测设备。按照测试需求,需要很多故障场景,如果车载ATP和相邻RBC作为采用纯仿真设备或者基于真实逻辑的程序进行修改,由于故障场景需要复杂的消息交互,仿真程序一个是很难模拟,而是即使模拟出了也很难保证正确性。
发明内容
本发明的目的是提供一种基于外部真实设备的故障插入系统,保证了通信交互数据与真实情况的近似性,也达到了故障插入测试的目的。
本发明的目的是通过以下技术方案实现的:
一种基于外部真实设备的故障插入系统,包括:
测试自动执行框架,用于获取测试案例管理系统下发的测试脚本,并下发给自动执行适配单元,以及将执行结果反馈给测试案例管理系统;
修改执行模块,用于捕获真实陪测设备的逻辑处理单元产生的通信数据,并按照测试脚本中的执行命令对通信数据做相应的故障插入处理后再通过真实陪测设备的安全通信单元发送给被测设备。
该故障插入系统还包括:
消息修改模块,用于执行测试脚本中的命令,解析被测系统与相关安全通信单元之间的通信协议,并将相应的故障插入处理方式及相关参数传输至修改执行模块。
该故障插入系统还包括:
自动执行适配单元,用于对测试脚本的语言适配为消息修改模块所能识别的语言。
该故障插入系统还包括:第一与第二消息解析组包模块;其中:
第一消息解析组包模块,用于将逻辑处理单元产生的二进制的通信数据解析为系统内部可处理的结构化数据,并传输至修改执行模块;
第二消息解析组包模块,用于将修改执行模块输出的故障插入处理后的通信数据组包为二进制数据,再传输给真实陪测设备的安全通信单元。
故障插入处理方式包括:
丢弃消息、修改消息中变量、增加消息中信息包、延迟消息发送中的一种或多种。
由上述本发明提供的技术方案可以看出,外部陪测设备为真实设备,通过修改外部真实设备与被测对象的通信数据,保证了通信交互数据逻辑与数据的可信性,也达到了故障插入测试的目的。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图。
图1为本发明实施例提供的一种基于外部真实设备的故障插入系统的示意图。
具体实施方式
下面结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明的保护范围。
CTCS-3列车运行控制系统是一个相对特殊的复杂系统,许多安全攸关的故障测试不能在真实环境中验证,只能在实验室中创建相应的故障注入测试场景进行测试。一般来说,对于被测设备与外部设备间交互信息的故障注入,普遍采用基于仿真的故障注入方法,即采用仿真的外部陪测设备创造各种故障数据。但是由于CTCS-3系统的复杂性,尤其是RBC-ATP交互消息、RBC-RBC交互消息,交互信息量大,涉及到很多系统逻辑与数据,仿真的外部设备在编制过程中一般不会像安全攸关软件那样进行严格的设计编码、单元测试、子系统测试,仿真的外部设备尚不能保证自身逻辑与数据的正确性,更无法保证用来测试被测设备的正确性。
本发明提出了一种基于外部真实设备的故障插入系统。将外部陪测设备为真实设备,通过修改外部真实设备与被测对象的通信数据,保证了通信交互数据逻辑与数据的可信性,也达到了故障插入测试的目的。
本故障插入系统中,捕获的是真实陪测设备(ATP、相邻RBC)逻辑处理单元发往安全通信单元的通信数据,根据测试脚本中的执行命令进行相应的处理,如丢弃消息、修改消息中变量、增加消息中信息包、延迟消息发送等操作,之后再通过安全通信单元发往被测设备。通过对被测设备的维护单元中的数据进行监测来判断本次测试的执行结果与预期结果是否一致。通过测试自动执行框架与测试管理系统的结合,可将测试案例、测试脚本、测试执行单元、测试人员、被测结果各部分有机结合起来。
如图1所示,为基于外部真实设备的故障插入系统的示意图,其主要包括:
1、测试自动执行框架,用于获取测试案例管理系统下发的测试脚本,并下发给自动执行适配单元,以及将执行结果反馈给测试案例管理系统。可以采用python编写的功能自动化测试框架。具备良好的可扩展性,支持关键字驱动,可以同时测试多种类型的客户端或者接口,可以进行分布式测试执行。
2、修改执行模块,用于捕获真实陪测设备的逻辑处理单元产生的通信数据,并按照测试脚本中的执行命令对通信数据做相应的故障插入处理后再通过真实陪测设备的安全通信单元发送给被测设备。
3、测试案例管理系统,用于管理测试脚本形式的测试案例,提供测试人员操作的界面。是测试脚本、测试人员、自动测试执行、测试结果各个模块的连接单元。收到执行结果后,会判断是否与预期结果一致,从而输出测试结果。
其中,测试脚本是测试案例的体现,以关键字驱动的形式包含了各种操作,如对消息的丢弃,还包括测试预期结果。测试脚本中的内容,主要为通过消息编辑工具对已有的车地、相邻RBC原始消息进行修改,生成的相关内容。
4、消息修改模块,用于执行测试脚本中的命令,解析被测系统与相关安全通信单元之间的通信协议,并将相应的故障插入处理方式及相关参数传输至修改执行模块。
修改过程是通过修改执行模块来执行,消息修改模块主要是确定相应的处理方式。例如,对于一些实时性相关的变量进行自动处理,如T_Train、T_RBC等。
5、自动执行适配单元,用于对测试脚本的语言适配为消息修改模块所能识别的语言。
举例来说,因测试脚本为Python语言、消息修改模块为.Net语言,所以有自动执行适配单元来进行协议转换。
6、第一与第二消息解析组包模块。
其中,第一消息解析组包模块,用于将逻辑处理单元产生的二进制的通信数据解析为系统内部可处理的结构化数据,并传输至修改执行模块;
第二消息解析组包模块,用于将修改执行模块输出的故障插入处理后的通信数据组包为二进制数据,再传输给真实陪测设备的安全通信单元。
本发明实施例中,故障插入处理方式包括:丢弃消息、修改消息中变量、增加消息中信息包、延迟消息发送中的一种或多种。
本发明实施例上述方案,外部陪测设备为真实设备,通过修改外部真实设备与被测对象的通信数据,保证了通信交互数据逻辑与数据的可信性,也达到了故障插入测试的目的。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明披露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书的保护范围为准。

Claims (5)

1.一种基于外部真实设备的故障插入系统,其特征在于,包括:
测试自动执行框架,用于获取测试案例管理系统下发的测试脚本,并下发给自动执行适配单元,以及将执行结果反馈给测试案例管理系统;
修改执行模块,用于捕获真实陪测设备的逻辑处理单元产生的通信数据,并按照测试脚本中的执行命令对通信数据做相应的故障插入处理后再通过真实陪测设备的安全通信单元发送给被测设备。
2.根据权利要求1所述的一种基于外部真实设备的故障插入系统,其特征在于,该故障插入系统还包括:
消息修改模块,用于执行测试脚本中的命令,解析被测系统与相关安全通信单元之间的通信协议,并将相应的故障插入处理方式及相关参数传输至修改执行模块。
3.根据权利要求2所述的一种基于外部真实设备的故障插入系统,其特征在于,该故障插入系统还包括:
自动执行适配单元,用于对测试脚本的语言适配为消息修改模块所能识别的语言。
4.根据权利要求1所述的一种基于外部真实设备的故障插入系统,其特征在于,该故障插入系统还包括:第一与第二消息解析组包模块;其中:
第一消息解析组包模块,用于将逻辑处理单元产生的二进制的通信数据解析为系统内部可处理的结构化数据,并传输至修改执行模块;
第二消息解析组包模块,用于将修改执行模块输出的故障插入处理后的通信数据组包为二进制数据,再传输给真实陪测设备的安全通信单元。
5.根据权利要求1所述的一种基于外部真实设备的故障插入系统,其特征在于,故障插入处理方式包括:
丢弃消息、修改消息中变量、增加消息中信息包、延迟消息发送中的一种或多种。
CN201711421146.3A 2017-12-25 2017-12-25 基于外部真实设备的故障插入系统 Active CN108228989B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711421146.3A CN108228989B (zh) 2017-12-25 2017-12-25 基于外部真实设备的故障插入系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711421146.3A CN108228989B (zh) 2017-12-25 2017-12-25 基于外部真实设备的故障插入系统

Publications (2)

Publication Number Publication Date
CN108228989A true CN108228989A (zh) 2018-06-29
CN108228989B CN108228989B (zh) 2021-12-28

Family

ID=62647958

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711421146.3A Active CN108228989B (zh) 2017-12-25 2017-12-25 基于外部真实设备的故障插入系统

Country Status (1)

Country Link
CN (1) CN108228989B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111309533A (zh) * 2020-02-10 2020-06-19 北京交大微联科技有限公司 自动化测试系统
CN114697238A (zh) * 2022-03-30 2022-07-01 四川九州电子科技股份有限公司 一种测试通信设备系统健壮性的系统及方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103164328A (zh) * 2011-12-12 2013-06-19 中国移动通信集团陕西有限公司 一种业务功能的回归测试方法、装置及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103164328A (zh) * 2011-12-12 2013-06-19 中国移动通信集团陕西有限公司 一种业务功能的回归测试方法、装置及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
刘磊: "基于故障注入的CTCS-3级列控系统仿真测试的研究", 《铁路计算机应用》 *
李晔: "基于混合故障注入的列控车载设备测试方法研究", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111309533A (zh) * 2020-02-10 2020-06-19 北京交大微联科技有限公司 自动化测试系统
CN111309533B (zh) * 2020-02-10 2023-04-07 北京交大微联科技有限公司 自动化测试系统
CN114697238A (zh) * 2022-03-30 2022-07-01 四川九州电子科技股份有限公司 一种测试通信设备系统健壮性的系统及方法
CN114697238B (zh) * 2022-03-30 2023-04-28 四川九州电子科技股份有限公司 一种测试通信设备系统健壮性的系统及方法

Also Published As

Publication number Publication date
CN108228989B (zh) 2021-12-28

Similar Documents

Publication Publication Date Title
CN106802862B (zh) 列车运行控制系统安全关键软件自动测试平台
US10296685B2 (en) Failure logic modeling method for a high-speed railway train operation control on-board system
CN103744781B (zh) 一种联锁软件的测试方法和测试系统
CN112000557B (zh) 轨道交通信号系统自动化测试装置
CN103941240B (zh) 一种基于雷达系统通信分机检测装置的检测方法
CN103257650B (zh) 一种用于列车控制系统功能测试的校验系统
CN104731085B (zh) 用于轨旁联锁系统的测试平台及其测试方法
CN112631932A (zh) 基于接口的自动列车监控系统的子功能独立测试方法
CN105138455A (zh) 一种列控车载设备的测试系统和测试方法
CN109086197A (zh) 城市轨道交通cbtc系统的验收测试方法及系统
CN106951556A (zh) 离线环境下配电网图模的一致性校验方法和系统
CN111858372A (zh) 对tsrs系统的自动化测试体系与方式
CN112000558A (zh) 轨道交通信号系统自动化测试用例生成方法
CN108228989A (zh) 基于外部真实设备的故障插入系统
CN114385494A (zh) 一种数据解析方法、装置、设备和介质
CN105701014A (zh) 铁路信号计算机联锁系统的自动化测试方法
CN111766845B (zh) 列控系统信号设备的测试方法、测试系统以及测试装置
CN108945007B (zh) 一种ctcs-4级列控系统地面设备的现场验证系统
CN110667654B (zh) 一种cbtc系统应答器信息一致性室内测试方法及装置
Yong et al. STPA based safety analysis of regional data center in CTCS-1 train control system
CN114691488A (zh) 一种联锁系统自动化测试系统及方法
CN111274124B (zh) 用于互联互通cbtc系统室内测试的故障注入装置及方法
Wu Verifiable design of a satellite-based train control system with petri nets
Li et al. Safety-oriented Testing for High-speed Rail Onboard Equipment Using Petri Nets
Liu et al. Research on the method of interoperability test for the onboard equipment of CTCS-3 train control system of chinese railway

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant