CN114301812A - 报文处理结果的监控方法、装置、设备以及存储介质 - Google Patents

报文处理结果的监控方法、装置、设备以及存储介质 Download PDF

Info

Publication number
CN114301812A
CN114301812A CN202111644047.8A CN202111644047A CN114301812A CN 114301812 A CN114301812 A CN 114301812A CN 202111644047 A CN202111644047 A CN 202111644047A CN 114301812 A CN114301812 A CN 114301812A
Authority
CN
China
Prior art keywords
message
expected
target
actual
matched
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111644047.8A
Other languages
English (en)
Inventor
刘金强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Wuxin Technology Co ltd
Original Assignee
Beijing Wuxin Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Wuxin Technology Co ltd filed Critical Beijing Wuxin Technology Co ltd
Priority to CN202111644047.8A priority Critical patent/CN114301812A/zh
Publication of CN114301812A publication Critical patent/CN114301812A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例公开了一种报文处理结果的监控方法、装置、设备以及存储介质。其中,获取实际报文和期望报文;将各实际报文、各期望报文、以及与实际报文和期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。通过上述方法,提高了监控器在复杂发包场景中的报文监控能力。

Description

报文处理结果的监控方法、装置、设备以及存储介质
技术领域
本发明实施例涉及网络通信技术,尤其涉及一种报文处理结果的监控方法、装置、设备以及存储介质。
背景技术
在互联网与通信领域中,大多需要通过报文来进行通信交互。一般来说,报文在通信网络的传输过程中,会经过各类交换设备的报文处理,例如,交换机对接收到的报文进行检测过滤或者存储转发等操作。为了保证报文传输过程中的可靠有效,需要对各类交换设备的报文处理结果进行有效监控。
现有技术中,主要使用监控器实现对报文处理结果的监控,具体监控方式是,在将原始报文输入至一个待测设备的同时,将该原始报文同样输入至一个标准模型中,通过对待测设备和标准模型的输出结果进行比对,可以对待测设备的异常处理或者异常丢弃的报文进行有效监控。
发明人在实现本发明的过程中,发现现有技术的缺陷为:现有的监控器通常能够进行报文的一对一比对,简单显示报文比对结果,但是,当该监控器应用在复杂发包场景时,无法进行报文的有效比对;此外,现有的报文比对方式的比对形式单一,仅能对报文内容进行简单比对,无法满足人们日益增长的个性化、便捷化的报文比对需求。
发明内容
本发明实施例提供了一种报文处理结果的监控方法、装置、设备以及存储介质,以提高监控器在复杂发包场景中的报文检测能力。
第一方面,本发明实施例提供了一种报文处理结果的监控方法,其中,该方法包括:
获取实际报文和期望报文;
将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;
根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;
根据比对结果,生成对被测设备的报文处理监控结果。
第二方面,本发明实施例提供了一种报文处理结果的监控装置,该报文处理结果的监控装置包括:
实际报文和期望报文获取模块,用于获取实际报文和期望报文;
存储队列存储模块,用于将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;
联合比对模块,用于根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;
报文处理监控结果生成模块,用于根据比对结果,生成对被测设备的报文处理监控结果。
第三方面,本发明实施例还提供了一种计算机设备,包括存储装置、一个或多个处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述一个或多个处理器执行所述计算机程序时实现如本发明任意实施例所述的报文处理结果的监控方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,其中,该计算机程序被处理器执行时实现如本发明任意实施例所述的报文处理结果的监控方法。
本发明实施例所提供的技术方案,通过获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。通过将实际报文和期望报文进行缓存的方式,可以在预先配置的不同的报文比对模式,对两者进行适应性的比对,提高了监控器在复杂发包场景中的报文检测能力,提高了监控器的通用性和适应性;此外,通过获取报文的关联描述参数进行联合比对,丰富了报文的比对形式,满足了人们个性化、便捷化的报文比对需求。
附图说明
图1是本发明实施例一提供的一种报文处理结果的监控方法的流程图;
图2是本发明实施例二提供的另一种报文处理结果的监控方法的流程图;
图3是本发明实施例三提供的另一种报文处理结果的监控方法的流程图;
图4是本发明实施例四提供的一种报文处理结果的监控装置的结构示意图;
图5是本发明实施例五提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明实施例,而非对本发明实施例的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明实施例相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种报文处理结果的监控方法的流程图。本实施例可适用于监控器预先配置的报文比对模式,对待测设备输出的实际报文和标准模型输出的期望报文进行对比的情况。本实施例的方法可以由报文处理结果的监控装置执行,该装置可以通过软件和/或硬件的方式实现,并一般可以集成在监控器中。
相应的,该方法具体包括如下步骤:
S110、获取实际报文和期望报文。
其中,实际报文可以是原始报文经过被测设备的处理后得到的实际处理结果。其中,被测设备可以是需要进行报文处理结果的监控的设备,具体的,将原始报文输入至被测设备之后,通过被测设备对各原始报文进行处理之后,可以得到相应的实际报文。
期望报文可以是原始报文经过标准模型的处理后得到的理想化的报文处理结果。其中,标准模型可以是与被测设备的硬件处理逻辑相适配的软件模型,其反映了被测设备的理想的报文处理状态。具体的,将原始报文输入至标准模型之后,通过标准模型对各原始报文进行处理之后,可以得到相应的期望报文。
相应的,通过将与同一原始报文对应的实际报文和期望报文进行匹配,可以验证出被测设备是否能够正常工作。
S120、将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中。
其中,关联描述参数可以是对实际报文和期望报文的报文状态进行描述的参数,可以包括报文入队时间戳、报文入队编号或者报文大小等参数。存储队列可以是存储实际报文、期望报文以及关联描述参数等参数的队列,可选的,可以将不同类型的报文,存储于不同的存储队列中。
可选的,所述关联描述参数包括:报文入队时间戳、报文入队编号或者报文入队时间戳和报文入队编号的组合。
其中,报文入队时间戳可以包括:实际报文入队时间戳以及期望报文入队时间戳。实际报文入队时间戳,可以为将实际报文存储于匹配的存储队列(典型的,实际报文存储队列)时的时间点,期望报文入队时间戳可以为将期望报文存储于匹配的存储队列(典型的,期望报文存储队列)时的时间点。
相应的,可以将实际报文入队时间戳存储于实际报文时间戳存储队列中,并将期望报文入队时间戳存储于期望报文时间戳存储队列。
相类似的,报文入队编号可以包括:实际报文入队编号以及期望报文入队编号。实际报文入队编号,可以为将实际报文存储于匹配的存储队列(典型的,实际报文存储队列)时,实际报文存储队列为该实际报文所分配的存储编号,该实际报文入队编号与实际报文存储队列中当前已存储的实际报文数量相匹配;期望报文入队编号可以为将期望报文存储于匹配的存储队列(典型的,期望报文存储队列)时,期望报文存储队列为该期望报文所分配的存储编号,该期望报文入队编号与期望报文存储队列中当前已存储的期望报文数量相匹配。
相应的,可以将实际报文入队编号存储于实际报文编号存储队列中,并将期望报文入队编号存储于期望报文编号存储队列。
这样设置的好处在于:监控器除了对实际报文与期望报文进行缓存之外,进一步缓存了实际报文的一项或者多项关联描述参数,进而,监控器在比对实际报文与期望报文之间的匹配关系的同时,还可以进一步对比实际报文的关联描述参数,与期望报文的关键描述参数之间的匹配关系,丰富了实际报文与期望报文之间的比对形式,可以从多个维度对实际报文进行比对验证,从而保证了监控结果的准确性。
S130、根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对。
其中,报文比对模式可以是实际报文和期望报文进行比对的方式,可以包括顺序比对模式和乱序比对模式。队列内容可以是存储队列中存储的内容,队列内容可以由报文内容和关键描述参数等构成。联合比对可以是在进行实际报文和期望报文的报文内容对比的同时,对实际报文和期望报文的关键描述参数进行对比。
顺序比对模式,主要应用在被测设备对依次接收到的原始报文,顺序进行处理并输出的标准应用场景中。例如,如果原始报文按照原始报文1、原始报文2以及原始报文3的顺序输入至被测设备,则被测设备按照实际报文1、实际报文2以及实际报文3的顺序输出处理结果,其中,实际报文1是对原始报文1的处理结果,实际报文2是对原始报文2的处理结果,实际报文3是对原始报文3的处理结果。针对上述应用场景,可以每当获取到实际报文存储队列中的一个实际报文时,将该实际报文与期望报文存储队列中存储的首个期望报文进行比对,即可保证实际报文与期望报文之间的匹配关系不混乱。将上述实际报文与期望报文进行匹配时,可以获取上述两者匹配成功或者匹配失败的比对结果。
乱序比对模式,主要应用在被测设备对依次接收到的原始报文,乱序进行处理并输出的复杂应用场景中。例如,如果原始报文按照原始报文1、原始报文2以及原始报文3的顺序输入至被测设备,则被测设备按照实际报文3、实际报文1以及实际报文2的顺序输出处理结果,其中,实际报文1是对原始报文1的处理结果,实际报文2是对原始报文2的处理结果,实际报文3是对原始报文3的处理结果。针对上述应用场景,可以每当获取到实际报文存储队列中的一个实际报文时,将该实际报文与期望报文存储队列中存储的全部期望报文分别进行比对,才能保证实际报文与期望报文之间的匹配关系不混乱。上述比对过程,可以获取原始报文与一个期望报文匹配成功的比对结果,或者获取原始报文与任一期望报文均不匹配的比对结果。
相应的,在不同的报文比对模式下,获取匹配成功的实际报文和期望报文之后,可以进一步获取上述两个报文的至少一项关键描述参数进行联合比对。
S140、根据比对结果,生成对被测设备的报文处理监控结果。
其中,在进行S130的比对过程中,可能出现下述几种情况的比对结果,一种是获取到了具有匹配关系(或者说匹配成功)的原始报文和期望报文,进而可以得到上述匹配的原始报文与期望报文之间的关键描述参数的比对结果,另一种是获取到为未匹配成功的实际报文,或者,还可能获取到未匹配成功的期望报文。
进而,在得到上述比对结果后,可以根据比对结果,生成对所述被测设备的报文处理监控结果,以判断该被测设备是否被正确的配置,或者是否存在软硬件故障等。
具体的,当实际报文和期望报文的报文内容进行对比,实际报文的报文内容和期望报文的报文内容是否能够匹配的上,如果能够匹配,则实际报文属于正常的;如果不能够匹配,则实际报文属于不正常的。
进一步的,根据报文内容,确定实际报文属于正常的。接着需要判断,当实际报文和期望报文的关键描述参数进行对比,判断实际报文是否正常。当实际报文和期望报文的关键描述参数进行对比,实际报文的关键描述参数和期望报文的关键描述参数是否能够匹配的上,如果能够匹配,则实际报文属于正常的;如果不能够匹配,则实际报文属于不正常的。
本发明实施例所提供的技术方案,通过获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。通过将实际报文和期望报文进行缓存的方式,可以在预先配置的不同的报文比对模式,对两者进行适应性的比对,提高了监控器在复杂发包场景中的报文检测能力,提高了监控器的通用性和适应性;此外,通过获取报文的关联描述参数进行联合比对,丰富了报文的比对形式,满足了人们个性化、便捷化的报文比对需求。
实施例二
图2为本发明实施例二提供的另一种报文处理结果的监控方法的流程图。本实施例以上述各实施例为基础进行细化,在本实施例中,对根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对进一步细化,并且预先配置的报文比对模式为顺序比对模式。
相应的,该方法具体包括如下步骤:
S210、获取实际报文和期望报文。
S220、将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中。
S230、根据预先配置的顺序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,从期望报文存储队列中获取首个期望报文,作为目标期望报文。
其中,顺序比对模式可以是在检测到有目标实际报文存储于实际报文存储队列时,从期望报文存储队列中获取首个期望报文,作为目标期望报文,将目标实际报文与目标期望报文进行对比的方式。
具体的,也就是原始报文通过被测设备进行处理后,得到首个输出的实际报文,也即为目标实际报文;以及原始报文通过标准模型进行处理后,得到首个输出的期望报文,也即为目标期望报文。进一步地,将目标实际报文和目标期望报文进行对比。
S240、将所述目标实际报文与目标期望报文进行比对。
具体的,得到目标实际报文与目标期望报文,从而将二者进行顺序对比。
S250、如果确定目标实际报文与目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对。
可选的,从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对,可以包括:
从实际报文编号存储队列中获取与目标实际报文对应的实际报文入队编号,从期望报文编号存储队列获取与目标期望报文对应的期望报文入队编号,并对比所述实际报文入队编号与所述期望报文入队编号的编号差是否超过预设的最大编号差阈值;和/或从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳,并对比所述实际报文入队时间戳与所述期望报文入队时间戳的时间差是否超过预设的最大时间差阈值。
最大编号差阈值可以是根据被测设备类型,在监控器上设置的最大的编号差阈值。
具体的,可以通过计算实际报文入队编号与期望报文入队编号的编号差的方式,判断二者之间的编号差是否超过预设的最大编号差阈值。如果编号差超过最大编号差阈值,则实际报文属于不正常的;如果编号差不超过最大编号差阈值,则实际报文属于正常的。
其中,最大时间差阈值可以是被测设备设置的最大的时间差阈值。
其中,实际报文入队时间戳可以是将实际报文存储于匹配的实际报文存储队列中,可以得到相应的实际报文的入队时间。同理可知,期望报文入队时间戳可以包括:将期望报文存储于匹配的期望报文存储队列中,可以得到相应的期望报文的入队时间。最大时间差阈值可以是根据被测设备类型,在监控器上设置的最大的时间差阈值。
这样设置的好处在于:通过判断实际报文入队编号与期望报文入队编号的编号差是否超过预设的最大编号差阈值;以及进一步地判断实际报文入队时间戳与期望报文入队时间戳的时间差是否超过预设的最大时间差阈值,从而可以判别实际报文是否正常。这样可以更加准确地对报文进行判断,进一步地准确对被测设备进行判别。
示例性的,当确定目标实际报文与目标期望报文相匹配,则需要进一步地从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对,也即需要进行目标实际报文和目标期望报文分别对应的报文入队时间戳和报文入队编号进行比对。
本实施例的另一个可选的实施方式,假设根据被测设备类型,在监控器上设置的最大时间差阈值为3s。具体的,从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳为7s,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳为5s,可以计算出实际报文入队时间戳与期望报文入队时间戳的时间差为2s。进一步的,对比实际报文入队时间戳与期望报文入队时间戳的时间差是否超过预设的最大时间差阈值,由于时间差为2s,并且最大时间差阈值为3s,所以时间差不超过最大时间差阈值,则实际报文属于正常的。进一步地,需要进行目标实际报文和目标期望报文分别对应的报文入队编号进行比对。假设根据被测设备类型,在监控器上设置的最大编号差阈值为5。具体的,从实际报文编号存储队列中获取与目标实际报文对应的实际报文入队编号为10,从期望报文编号存储队列获取与目标期望报文对应的期望报文入队编号为6,可以计算出实际报文入队编号与期望报文入队编号的编号差为4。进一步的,对比实际报文入队编号与期望报文入队编号的编号差是否超过预设的最大编号差阈值,由于编号差为4,并且最大编号差阈值为5,所以编号差不超过最大编号差阈值,则实际报文属于正常的。相应的,可以确定目标实际报文与目标期望报文能够匹配。
本实施例的另一个可选的实施方式,假设根据被测设备类型,在监控器上设置的最大时间差阈值为3s。具体的,从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳为7s,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳为5s,可以计算出实际报文入队时间戳与期望报文入队时间戳的时间差为2s。进一步的,对比实际报文入队时间戳与期望报文入队时间戳的时间差是否超过预设的最大时间差阈值,由于时间差为2s,并且最大时间差阈值为3s,所以时间差不超过最大时间差阈值,则实际报文属于正常的。进一步地,需要进行目标实际报文和目标期望报文分别对应的报文入队编号进行比对。进一步的,假设根据被测设备类型,在监控器上设置的最大编号差阈值为5。具体的,从实际报文编号存储队列中获取与目标实际报文对应的实际报文入队编号为10,从期望报文编号存储队列获取与目标期望报文对应的期望报文入队编号为3,可以计算出实际报文入队编号与期望报文入队编号的编号差为7。进一步的,对比实际报文入队编号与期望报文入队编号的编号差是否超过预设的最大编号差阈值,由于编号差为7,并且最大编号差阈值为5,所以编号差超过最大编号差阈值,则实际报文属于不正常的。相应的,可以确定目标实际报文与目标期望报文不能够匹配。
本实施例的另一个可选的实施方式,示例性的,假设根据被测设备类型,在监控器上设置的最大时间差阈值为3s。具体的,从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳为10s,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳为5s,可以计算出实际报文入队时间戳与期望报文入队时间戳的时间差为5s。进一步的,对比实际报文入队时间戳与期望报文入队时间戳的时间差是否超过预设的最大时间差阈值,由于时间差为5s,并且最大时间差阈值为3s,所以时间差超过最大时间差阈值,则实际报文属于不正常的。因此,不需要再进行目标实际报文和目标期望报文分别对应的报文入队编号进行比对。相应的,可以确定目标实际报文与目标期望报文不能够匹配。
可选的,当确定目标实际报文与目标期望报文不能够匹配,接着需要根据被测设备的异常场景导致的丢包的情况进行分析,并判断丢包是否处于正常情况。由于被测设备可以存在下面情况,当原始报文输入至被测设备中,由于被测设备的类型配置,可以没有相应的实际报文进行输出。因此,该丢包的情况属于正常的情况。进一步的可以确定目标实际报文与目标期望报文能够匹配。
S260、在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
续前例,当确定目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数能够匹配,则在比对结束后,可以将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数,从匹配的存储队列中进行滤除操作。
进一步的,当确定目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数不能够匹配,则在比对结束后,可以将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数,从匹配的存储队列中进行滤除操作。
S270、根据比对结果,生成对被测设备的报文处理监控结果。
可选的,根据比对结果,生成对所述被测设备的报文处理监控结果,包括:根据各原始报文、与匹配成功的实际报文与期望报文相应的最大编号差阈值和最大时间差阈值之间的比对结果、未匹配成功的实际报文,以及未匹配成功的期望报文,生成对所述被测设备的报文处理监控结果。
其中,报文处理监控结果可以在监控器屏幕上进行呈现,或者以文件的形式发送给相关工作人员。具体的,报文处理监控结果可以包括各原始报文、与匹配成功的实际报文与期望报文对应的最大编号差阈值和最大时间差阈值之间的比对结果、未匹配成功的实际报文,以及未匹配成功的期望报文等参数。
这样设置的好处在于:可以更加清晰直观地将报文处理监控结果呈现给相关工作人员,从而可以使得工作人员能清晰明确地得到监测结果,从而进行进一步的处理操作。
本发明实施例所提供的技术方案,通过获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的顺序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,从期望报文存储队列中获取首个期望报文,作为目标期望报文;将所述目标实际报文与目标期望报文进行比对;如果确定目标实际报文与目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除;根据比对结果,生成对被测设备的报文处理监控结果。可以实现监控器顺序对比报文,进一步地能够将目标实际报文和目标期望报文进行顺序比对,能够更加准确的进行报文的顺序比较,从而可以提高监控器对报文的检测能力。
实施例三
图3为本发明实施例三提供的另一种报文处理结果的监控方法的流程图。本实施例以上述各实施例为基础进行细化,在本实施例中,对根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对进一步细化,并且预先配置的报文比对模式为乱序比对模式。
相应的,该方法具体包括如下步骤:
S310、获取实际报文和期望报文。
S320、将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中。
S330、根据预先配置的乱序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对。
其中,乱序比对模式可以是在检测到有目标实际报文存储于实际报文存储队列时,将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对的方式。
具体的,也就是原始报文通过被测设备进行处理后,得到相应的目标实际报文;以及原始报文通过标准模型进行处理后,得到相应的期望报文,也即为目标期望报文。进一步地,将目标实际报文和目标期望报文进行对比。由于原始报文分别通过标准模型和被测设备,从标准模型得到各目标期望报文所用的时间远远小于从被测设备得到各目标实际报文,所以可以将目标实际报文与任一期望报文进行对比操作。
S340、如果确定所述目标实际报文与所述期望报文存储队列中的目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对。
同理,当确定目标实际报文与期望报文存储队列中的目标期望报文相匹配之后,进一步地,需要从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对,从而可以判别目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数是否能够匹配。
S350、在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
具体的,当确定目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数能够匹配,则在比对结束后,可以将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数,从匹配的存储队列中进行滤除操作。
进一步的,当确定目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数不能够匹配,则在比对结束后,可以将目标实际报文以及与目标实际报文对应的关键描述参数,从匹配的存储队列中进行滤除操作。
S360、根据比对结果,生成对被测设备的报文处理监控结果。
可选的,在将所述目标实际报文与目标期望报文进行比对之后,还包括:如果确定目标实际报文与目标期望报文不匹配,则将所述目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除;和/或在将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对之后,还包括:如果确定目标实际报文与任一期望报文均不匹配,则将所述目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除。
在本实施例与前述顺序比对模式的实施例的区别在于,前述实施例在根据预先配置的顺序比对模式,确定目标实际报文与目标期望报文不匹配时,将目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除的同时,还将目标期望报文以及与目标期望报文对应的关键描述参数从匹配的存储队列中滤除。相对照在,在本实施例中,当根据预先配置的乱序比对模式,确定目标实际报文与任一期望报文均不匹配,将目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除。
之所以有这种区别的原因,是因为顺序比对模式下获取的目标实际报文与目标期望报文具有明确的时序对应关系,该目标期望报文如果不与目标实际报文相匹配,只会说明被测设备处理原始报文时出现了处理异常,因此处理结果与实际期望的处理结果不匹配,进而该目标期望报文无需与其他的实际报文进行匹配,因此,可以直接从存储队列中滤除,而乱序比对模式下与目标实际报文进行比对的各期望报文,即使无法与目标实际报文相匹配,也无法明确确定出具体是哪个期望报文是应该与该目标实际报文匹配的,进而,都应该进行保留,并与后续的各目标实际报文继续进行匹配,直至匹配结束时,才能确定出存储队列中的哪些期望报文是未匹配成功的期望报文。
这样设置的好处在于:可以根据预先配置的顺序比对模式和乱序比对模式,当确定目标实际报文与目标期望报文不匹配时,进行相应的滤除处理操作。这样可以能够更加准确地进行报文比对,避免无意义的匹配。
本发明实施例所提供的技术方案,通过获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的乱序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对;如果确定所述目标实际报文与所述期望报文存储队列中的目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;在比对结束后,根据目标实际报文对应的关键描述参数与目标期望报文对应的关键描述参数的对比结果,对目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中进行滤除操作;根据比对结果,生成对被测设备的报文处理监控结果。可以实现监控器乱序对比报文,进一步地能够将目标实际报文和任一期望报文进行乱序比对,能够更加准确的进行报文的比较,从而可以提高监控器对报文的检测能力。
实施例四
图4是本发明实施例四提供的一种报文处理结果的监控装置的结构示意图。本实施例所提供的一种报文处理结果的监控装置可以通过软件和/或硬件来实现。可配置于服务器和终端设备中来实现本发明实施例中的一种报文处理结果的监控方法。如图4所示,该装置具体可包括:实际报文和期望报文获取模块410、存储队列存储模块420、联合比对模块430和报文处理监控结果生成模块440。
其中,实际报文和期望报文获取模块410,用于获取实际报文和期望报文;
存储队列存储模块420,用于将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;
联合比对模块430,用于根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;
报文处理监控结果生成模块440,用于根据比对结果,生成对被测设备的报文处理监控结果。
本发明实施例所提供的技术方案,通过获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。通过将实际报文和期望报文进行缓存的方式,可以在预先配置的不同的报文比对模式,对两者进行适应性的比对,提高了监控器在复杂发包场景中的报文检测能力,提高了监控器的通用性和适应性;此外,通过获取报文的关联描述参数进行联合比对,丰富了报文的比对形式,满足了人们个性化、便捷化的报文比对需求。
在上述各实施例的基础上,联合比对模块430,可以具体用于:根据预先配置的顺序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,从期望报文存储队列中获取首个期望报文,作为目标期望报文;将所述目标实际报文与目标期望报文进行比对;如果确定目标实际报文与目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
在上述各实施例的基础上,联合比对模块430,可以具体用于:根据预先配置的乱序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对;如果确定所述目标实际报文与所述期望报文存储队列中的目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
在上述各实施例的基础上,还包括,滤除模块,可以具体用于:在将所述目标实际报文与目标期望报文进行比对之后,如果确定目标实际报文与目标期望报文不匹配,则仅将所述目标实际报文从实际报文存储队列中滤除;和/或在将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对之后,如果确定目标实际报文与任一期望报文均不匹配,则仅将所述目标实际报文从实际报文存储队列中滤除。
在上述各实施例的基础上,存储队列存储模块420,可以具体用于:所述关联描述参数包括:报文入队时间戳和/或报文入队编号。
在上述各实施例的基础上,联合比对模块430,可以具体用于:从实际报文编号存储队列中获取与目标实际报文对应的实际报文入队编号,从期望报文编号存储队列获取与目标期望报文对应的期望报文入队编号,并对比所述实际编号与所述期望报文入队编号的编号差是否超过预设的最大编号差阈值;和/或从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳,并对比所述实际报文入队时间戳与所述期望报文入队时间戳的时间差是否超过预设的最大时间差阈值。
在上述各实施例的基础上,报文处理监控结果生成模块440,可以具体用于:根据各原始报文、与匹配成功的实际报文与期望报文相应的最大编号差阈值和最大时间差阈值之间的比对结果、未匹配成功的实际报文,以及未匹配成功的期望报文,生成对所述被测设备的报文处理监控结果。
上述报文处理结果的监控装置可执行本发明任意实施例所提供的报文处理结果的监控方法,具备执行方法相应的功能模块和有益效果。
实施例五
图5是本发明实施例五提供的一种计算机设备的结构图。如图5所示,该设备包括处理器510、存储器520、输入装置530和输出装置540;设备中处理器510的数量可以是一个或多个,图5中以一个处理器510为例;设备中的处理器510、存储器520、输入装置530和输出装置540可以通过总线或其他方式连接,图5中以通过总线连接为例。
存储器520作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的报文处理结果的监控方法对应的程序指令/模块(例如,实际报文和期望报文获取模块410、存储队列存储模块420、联合比对模块430和报文处理监控结果生成模块440)。处理器510通过运行存储在存储器520中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的报文处理结果的监控方法,该方法包括:获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。
存储器520可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器520可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器520可进一步包括相对于处理器510远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置530可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置540可包括显示屏等显示设备。
实施例六
本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现本发明任意实施例所述方法。当然,本发明实施例所提供的一种计算机可读存储介质,其可以执行本发明任意实施例所提供的一种报文处理结果的监控方法。也即,该计算机程序被处理器执行时实现。该方法包括:获取实际报文和期望报文;将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;根据比对结果,生成对被测设备的报文处理监控结果。
当然,本发明实施例所提供的一种计算机可读存储介质,其计算机程序不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的报文处理结果的监控方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述报文处理结果的监控装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种报文处理结果的监控方法,其特征在于,包括:
获取实际报文和期望报文;
将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;
根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;
根据比对结果,生成对被测设备的报文处理监控结果。
2.根据权利要求1所述的方法,其特征在于,根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对,包括:
根据预先配置的顺序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,从期望报文存储队列中获取首个期望报文,作为目标期望报文;
将所述目标实际报文与目标期望报文进行比对;
如果确定目标实际报文与目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;
在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
3.根据权利要求1所述的方法,其特征在于,根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对,包括:
根据预先配置的乱序比对模式,在检测到有目标实际报文存储于实际报文存储队列时,将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对;
如果确定所述目标实际报文与所述期望报文存储队列中的目标期望报文相匹配,则继续从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对;
在比对结束后,将目标实际报文、目标期望报文以及与目标实际报文和目标期望报文分别对应的关键描述参数从匹配的存储队列中滤除。
4.根据权利要求2或3所述的方法,其特征在于,在将所述目标实际报文与目标期望报文进行比对之后,还包括:
如果确定目标实际报文与目标期望报文不匹配,则将所述目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除;和/或
在将期望报文存储队列中当前存储的各期望报文,分别与目标实际报文进行比对之后,还包括:
如果确定目标实际报文与任一期望报文均不匹配,则将所述目标实际报文以及与目标实际报文对应的关键描述参数从匹配的存储队列中滤除。
5.根据权利要求1任一项所述的方法,其特征在于,所述关联描述参数包括:报文入队时间戳和/或报文入队编号。
6.根据权利要求5所述的方法,其特征在于,从匹配的存储队列中获取与目标实际报文和目标期望报文分别对应的关键描述参数进行比对,包括:
从实际报文编号存储队列中获取与目标实际报文对应的实际报文入队编号,从期望报文编号存储队列获取与目标期望报文对应的期望报文入队编号,并对比所述实际报文入队编号与所述期望报文入队编号的编号差是否超过预设的最大编号差阈值;和/或
从实际报文时间戳存储队列中获取与目标实际报文对应的实际报文入队时间戳,从期望报文时间戳存储队列获取与目标期望报文对应的期望报文入队时间戳,并对比所述实际报文入队时间戳与所述期望报文入队时间戳的时间差是否超过预设的最大时间差阈值。
7.根据权利要求6所述的方法,其特征在于,根据比对结果,生成对被测设备的报文处理监控结果,包括:
根据各原始报文、与匹配成功的实际报文与期望报文对应的最大编号差阈值和最大时间差阈值之间的比对结果、未匹配成功的实际报文,以及未匹配成功的期望报文,生成对所述被测设备的报文处理监控结果。
8.一种报文处理结果的监控装置,其特征在于,包括:
实际报文和期望报文获取模块,用于获取实际报文和期望报文;
存储队列存储模块,用于将各所述实际报文、各所述期望报文、以及与所述实际报文和所述期望报文分别对应的至少一项关联描述参数,分别存储于匹配的存储队列中;
联合比对模块,用于根据预先配置的报文比对模式,从各所述存储队列中分别获取匹配的队列内容进行报文内容和关键描述参数的联合比对;
报文处理监控结果生成模块,用于根据比对结果,生成对被测设备的报文处理监控结果。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-7中任一项所述的报文处理结果的监控方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1-7中任一所述的报文处理结果的监控方法。
CN202111644047.8A 2021-12-29 2021-12-29 报文处理结果的监控方法、装置、设备以及存储介质 Pending CN114301812A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111644047.8A CN114301812A (zh) 2021-12-29 2021-12-29 报文处理结果的监控方法、装置、设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111644047.8A CN114301812A (zh) 2021-12-29 2021-12-29 报文处理结果的监控方法、装置、设备以及存储介质

Publications (1)

Publication Number Publication Date
CN114301812A true CN114301812A (zh) 2022-04-08

Family

ID=80971552

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111644047.8A Pending CN114301812A (zh) 2021-12-29 2021-12-29 报文处理结果的监控方法、装置、设备以及存储介质

Country Status (1)

Country Link
CN (1) CN114301812A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115002005A (zh) * 2022-05-18 2022-09-02 百果园技术(新加坡)有限公司 一种丢包率计算方法、装置、设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1964250A (zh) * 2006-11-23 2007-05-16 华为技术有限公司 一种数据帧类型的识别方法及装置
CN103647726A (zh) * 2013-12-11 2014-03-19 华为技术有限公司 一种报文调度方法及装置
CN103944783A (zh) * 2014-04-23 2014-07-23 中国人民解放军信息工程大学 基于后验特征的流识别方法
US20170351788A1 (en) * 2016-06-06 2017-12-07 International Business Machines Corporation Automated checker generation
US20180212846A1 (en) * 2017-01-23 2018-07-26 International Business Machines Corporation Network interface port management
CN110430103A (zh) * 2019-09-18 2019-11-08 光大兴陇信托有限责任公司 一种报文监测方法
CN110768873A (zh) * 2019-10-31 2020-02-07 广州酷旅旅行社有限公司 分布式心跳检测方法、系统、装置和计算机设备
CN113076227A (zh) * 2021-04-28 2021-07-06 深圳市汇春科技股份有限公司 Mcu验证方法、系统和终端设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1964250A (zh) * 2006-11-23 2007-05-16 华为技术有限公司 一种数据帧类型的识别方法及装置
CN103647726A (zh) * 2013-12-11 2014-03-19 华为技术有限公司 一种报文调度方法及装置
CN103944783A (zh) * 2014-04-23 2014-07-23 中国人民解放军信息工程大学 基于后验特征的流识别方法
US20170351788A1 (en) * 2016-06-06 2017-12-07 International Business Machines Corporation Automated checker generation
US20180212846A1 (en) * 2017-01-23 2018-07-26 International Business Machines Corporation Network interface port management
CN110430103A (zh) * 2019-09-18 2019-11-08 光大兴陇信托有限责任公司 一种报文监测方法
CN110768873A (zh) * 2019-10-31 2020-02-07 广州酷旅旅行社有限公司 分布式心跳检测方法、系统、装置和计算机设备
CN113076227A (zh) * 2021-04-28 2021-07-06 深圳市汇春科技股份有限公司 Mcu验证方法、系统和终端设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115002005A (zh) * 2022-05-18 2022-09-02 百果园技术(新加坡)有限公司 一种丢包率计算方法、装置、设备及存储介质
CN115002005B (zh) * 2022-05-18 2023-12-12 百果园技术(新加坡)有限公司 一种丢包率计算方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN107294808B (zh) 接口测试的方法、装置和系统
CN112887274B (zh) 命令注入攻击的检测方法、装置、计算机设备和存储介质
CN109347705B (zh) 一种环路检测方法及装置
US11856426B2 (en) Network analytics
CN112333044B (zh) 分流设备性能测试方法、装置、系统、电子设备以及介质
CN106921518B (zh) 监控视图展示方法及装置
CN111554219A (zh) 一种显示设备的测试方法、装置、电子产品及存储介质
CN114095258A (zh) 攻击防御方法、装置、电子设备及存储介质
CN107204924B (zh) 链路发现方法及装置
CN113067810A (zh) 网络抓包方法、装置、设备和介质
CN110806965A (zh) 自动测试方法、装置、设备和介质
CN112653693A (zh) 一种工控协议分析方法、装置、终端设备及可读存储介质
CN114301812A (zh) 报文处理结果的监控方法、装置、设备以及存储介质
CN108391120B (zh) 一种摄像头开启测试方法、装置、设备和存储介质
CN103001822A (zh) 网络异常的处理方法及装置
CN111190761B (zh) 日志输出方法、装置、存储介质及电子设备
CN108156052B (zh) 一种设备稳定性测试的方法及系统
CN115865734A (zh) 一种故障检测方法、数据生成方法、装置、设备及介质
CN112612670B (zh) 一种会话信息统计方法、装置、交换设备及存储介质
US11947507B2 (en) Traffic monitoring device, traffic monitoring method, and traffic monitoring program
CN108427615A (zh) 一种消息监控方法及装置
CN111106977B (zh) 数据流检测方法、装置及存储介质
CN112069027A (zh) 一种接口数据处理方法、装置、电子设备及存储介质
CN108874530B (zh) 对报文转发设备的业务板进行扩容、缩容的方法和装置
CN106850245B (zh) 一种诊断测试消息处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination