CN114492554A - 一种采控平台多专业可配置采集方法及装置 - Google Patents

Abstract

本发明公开一种采控平台多专业可配置采集方法及装置，其中，该方法包括：采控平台根据设备配置的采集指标项下发采控源信息，包括采控源ID和采集模板ID；采集层在采控平台中提前注册好采集服务并做心跳上报；采集层接收到采控平台下发的采控源信息后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。该方法及装置提供多专业的指标采集配置能力，新增指标只需简单配置即可做到指标采集能力，进而达到成本控制目的。

Description

一种采控平台多专业可配置采集方法及装置

技术领域

本发明涉及采控平台采集指标领域，尤其是一种采控平台多专业可配置采集方法及装置。

背景技术

目前电信集团建设采控平台，采控平台下层的采集层大多通过黑盒方式(不可配置采集指标及采集方式)提供采集能力，此种方法无法满足运营商日益繁多的指标采集以及成本控制(新增指标采集面临新的需求和新的工作量，成本将会增加)。

发明内容

为解决上述的问题，本发明提供一种采控平台多专业可配置采集方法及装置，提供多专业的指标采集配置能力，新增指标只需简单配置即可做到指标采集能力，进而达到成本控制目的。

为实现上述目的，本发明采用下述技术方案：

在本发明一实施例中，提出了一种采控平台多专业可配置采集方法，该方法包括：

采控平台根据设备配置的采集指标项下发采控源信息，包括采控源ID和采集模板ID；

采集层在采控平台中提前注册好采集服务并做心跳上报；

采集层接收到采控平台下发的采控源信息后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。

进一步地，采集层支持分布式部署，支持多个服务实例存在。

进一步地，每个采集指标项对应一个虚指令，虚指令对应多个实指令。

进一步地，在虚指令中配置规则映射，支持包括原始值采集、字典映射、正则表达式匹配和模板映射，该映射规则是指实指令结果到虚指令结果的映射规则。

进一步地，在实指令中配置规则映射，支持包括原始值采集、字典映射、函数映射、正则表达式匹配和模板映射，该映射规则用于处理实指令结果。

在本发明一实施例中，还提出了一种采控平台多专业可配置采集装置，该装置包括：

采集能力提供模块，用于在采控平台中提前注册好采集服务并做心跳上报；

采控源相关信息获取模块，用于接收到采控平台下发的采控源信息，包括采控源ID和采集模板ID后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；

采集指标项结果生成模块，用于根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。

进一步地，该装置支持分布式部署，支持多个服务实例存在。

进一步地，每个采集指标项对应一个虚指令，虚指令对应多个实指令。

进一步地，在虚指令中配置规则映射，支持包括原始值采集、字典映射、正则表达式匹配和模板映射，该映射规则是指实指令结果到虚指令结果的映射规则。

进一步地，在实指令中配置规则映射，支持包括原始值采集、字典映射、函数映射、正则表达式匹配和模板映射，该映射规则用于处理实指令结果。

在本发明一实施例中，还提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现前述采控平台多专业可配置采集方法。

在本发明一实施例中，还提出了一种计算机可读存储介质，计算机可读存储介质存储有执行采控平台多专业可配置采集方法的计算机程序。

有益效果：

1.本发明提供灵活指标采集配置方法，新增采集指标，只需通过配置即可实现采集。

2.本发明降低了运营商使用成本，不再需要新增一个指标采集花费大量成本。

3.本发明装置支持分布式部署，稳定性高。

4.本发明采集层和上层应用分离，采集层只负责根据配置采集指标结果。

附图说明

图1是本发明一实施例的采控平台多专业可配置采集方法流程示意图；

图2是本发明一实施例的采控平台多专业可配置采集装置结构示意图；

图3是本发明一实施例的计算机设备结构示意图。

具体实施方式

下面将参考若干示例性实施方式来描述本发明的原理和精神，应当理解，给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。

本领域技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本公开可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。

根据本发明的实施方式，提出了一种采控平台多专业可配置采集方法及装置，采控平台(电信规范的采集控制平台，以下简称采控平台)的指标采集都会下沉到采集服务层(本装置实现的内容，以下简称采集层)，采集层需要提供注册服务、心跳上报和采集设备(运营商网络设备，包括路由器交换机等)指标(包括配置指标和性能指标等)等能力；采控平台在调度采集指标项时批量下发采控源信息(包括采控源(设备地址和采集协议构成)和采集模板等)，采集层接收采控源信息后，从采控平台获取采控源详细信息、采集模板对应的采集指标项(对应虚指令和实指令，虚指令指虚拟指令标识，用于屏蔽设备厂商差异，可以对应多个实指令，以下简称虚指令；实指令指实指令内容，可以实际在设备上执行的指令，包括snmp/ssh/telnet指令等，以下简称实指令)及各采集指标项对应的指标采集方式(或称为规则映射，其包括原始值采集，正则表达式匹配，字典映射，函数映射，模板映射等)，根据不同采集指标项对应的指标采集方式，下发其采集指标项对应的实指令至设备并获取返回结果，再根据返回结果和指标采集方式处理生成对应的目标采集指标项结果。上述采集指标项和指标采集方式可以支持多专业(IP城域网，IP骨干网，IPRAN，PON接入网等各种专业)的可配置化。

下面参考本发明的若干代表性实施方式，详细阐释本发明的原理和精神。

图1是本发明一实施例的采控平台多专业可配置采集方法流程示意图。如图1所示，该方法详细实现步骤如下：

1、采控平台下发采控源ID和采集模板ID

采控平台根据设备配置的采集指标项，下发指标采集的采控源ID和采集模板ID，采控源包括：设备地址和采集协议(snmp/telnet/ssh等)；

2、采集层接收采控源ID和采集模板ID

采集层在采控平台中提前注册好采集服务并做心跳上报。上报心跳保证服务可用。采集层支持分布式部署，支持多个服务实例存在。采集层接收到采控平台下发的采控源ID和采集模板ID后，从采控平台中获取采控源详细信息(步骤4)及采集模板信息(步骤3)。

3、采集模板信息查询

采集层根据采控平台下发的采控源ID和采集模板ID，从采控平台获取对应的采集指标列表，如设备CPU利用率，设备内存利用率，设备温度等，每个采集指标项都对应一个虚指令，虚指令可以对应多个实指令，如下步骤5和步骤6。

4、采控源详细信息查询

根据采控源ID，从采控平台获取采控源详细信息，包含设备登录信息(如snmp协议需要查询snmp口令，ssh/telnet协议需要查询用户名密码等)，设备所属专业(IP城域网，IP骨干网，IPRAN，PON接入网等各种专业)，设备域(设备归属域，分域是为了区分设备和服务的网络隔离及分布式部署)，网元类型(路由器，交换机，SR或MSE等)，设备所属厂商，设备软件版本号(实指令配置需要关联该版本号，不同软件版本设备配置的指令可能会不同)，设备详细型号等。

5、虚指令配置

虚指令，采集指标项对应虚拟指令标识，可以配置网元类型(如城域网CR，城域网MSE等网元设备的属性)和实指令，及实指令映射规则，映射规则包括原始值采集，正则表达式匹配，函数映射，模板映射等。

6、实指令配置

实指令，指实指令内容，可以实际在设备上执行的指令，包括snmp/ssh/telnet指令等。一个虚指令可以对应多个实指令。

7、实指令规则映射

实指令获取到设备原始结果，根据实指令规则映射，分别做不同的处理，处理完成的结果给虚指令对应的规则映射继续处理。处理规则方法：

原始值采集：默认值，即指令采集到的原始值。

字典映射：即原始值映射，如一些端口状态采集，采集的原始值为1或2，通过字典可以映射为up和down，作为归一化处理的依据。

函数映射：即内置常用处理方法，如端口流量采集(通过本次采集原始值-上次值/时间得到流速)等常用采集方式，根据业务需求可以内置一些通用处理方法，配置时根据需要选择。

正则表达式匹配：即正则表达式，用于截取需要的字符串。

模板映射：复杂逻辑处理，使用解释型语言编写，可以是perl或python等，复杂处理逻辑等无法通过其他规则实现的内容，可以通过编写模板(即简单的程序，模板可以动态加载)处理返回规定的格式，运维人员通过简单学习即可掌握配置方法。

8、虚指令规则映射

虚指令获取其对应的所有实指令通过规则映射处理后的结果，再根据虚指令规则映射继续处理结果得到对应的指标结果。处理规则方法：

原始值采集：默认值，即实指令处理后的结果。

函数映射：即内置常用处理方法，如索引转换(例如端口状态和端口名称的映射函数)等算法，根据实指令处理的结果再做一次函数运算。函数根据业务需求可以内置一些通用处理方法，配置时根据需要选择。

正则表达式匹配：即正则表达式，根据实指令处理结果，截取需要的字符串。

模板映射：复杂逻辑处理，处理其对应的所有实指令结果，可以在模板混合计算所有实指令结果得到指标结果。使用解释型语言编写，可以是perl或python等，复杂处理逻辑等无法通过其他规则实现的内容，可以通过编写模板(即简单的程序，模板可以动态加载)处理返回规定的格式，运维人员通过简单学习即可掌握配置方法。

9、指标采集结果

采集结果生成文件，根据需要可以上传到指定服务器或入到指定数据库。

需要说明的是，尽管在上述实施例及附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

为了对上述一种采控平台多专业可配置采集方法进行更为清楚的解释，下面结合一个具体的实施例来进行说明，然而值得注意的是该实施例仅是为了更好地说明本发明，并不构成对本发明不当的限定。

采集层根据采集指标项的虚指令，实指令及映射规则处理获取到采集结果后，生成文件，文件名为采控源ID和采集时间构成(如NE40E_123456.20201020152010.123,NE40E_123456为设备标识,20201020152010.123为时间序列，精确到毫秒，保证采集结果文件不会重复)，内容包括采集指标项，指标参数和指标值的JSON格式化结果(如设备CPU利用率：

{"B_CPURatio":{"-1":"30.32"}}，如端口管理状态{"B_PortAdminStatus":{"GigabitEthernet1/0/1":"up","GigabitEthernet1/0/2":"down"}}

)。根据需要该结果文件可以上传到指定服务器或入到指定数据库。

基于同一发明构思，本发明还提出一种采控平台多专业可配置采集装置。该装置的实施可以参见上述方法的实施，重复之处不再赘述。以下所使用的术语“模块”，可以是实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图2是本发明一实施例的一种采控平台多专业可配置采集装置结构示意图。如图2所示，该装置包括：

采集能力提供模块101，用于在采控平台中提前注册好采集服务并做心跳上报；

采控源相关信息获取模块102，用于接收到采控平台下发的采控源信息，包括采控源ID和采集模板ID后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；

每个采集指标项对应一个虚指令，虚指令对应多个实指令；

在虚指令中配置规则映射，支持包括原始值采集、字典映射、正则表达式匹配和模板映射，该映射规则是指实指令结果到虚指令结果的映射规则；

在实指令中配置规则映射，支持包括原始值采集、字典映射、函数映射、正则表达式匹配和模板映射，该映射规则用于处理实指令结果；

采集指标项结果生成模块103，用于根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。

应当注意，尽管在上文详细描述中提及了一种采控平台多专业可配置采集装置的若干模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多模块的特征和功能可以在一个模块中具体化。反之，上文描述的一个模块的特征和功能可以进一步划分为由多个模块来具体化。

基于前述发明构思，如图3所示，本发明还提出一种计算机设备200，包括存储器210、处理器220及存储在存储器210上并可在处理器220上运行的计算机程序230，处理器220执行计算机程序230时实现前述采控平台多专业可配置采集方法。

基于前述发明构思，本发明还提出一种计算机可读存储介质，计算机可读存储介质存储有执行前述采控平台多专业可配置采集方法的计算机程序。

本发明提供灵活指标采集配置方法，新增采集指标，只需通过配置即可实现采集；降低了运营商使用成本，不再需要新增一个指标采集花费大量成本；该装置支持分布式部署，稳定性高；采集层和上层应用分离，采集层只负责根据配置采集指标结果。

虽然已经参考若干具体实施方式描述了本发明的精神和原理，但是应该理解，本发明并不限于所公开的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合以进行受益，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包含的各种修改和等同布置。

对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (12)

1.一种采控平台多专业可配置采集方法，其特征在于，该方法包括：

采控平台根据设备配置的采集指标项下发采控源信息，包括采控源ID和采集模板ID；

采集层在采控平台中提前注册好采集服务并做心跳上报；

采集层接收到采控平台下发的采控源信息后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。

2.根据权利要求1所述的采控平台多专业可配置采集方法，其特征在于，所述采集层支持分布式部署，支持多个服务实例存在。

3.根据权利要求1所述的采控平台多专业可配置采集方法，其特征在于，每个所述采集指标项对应一个虚指令，虚指令对应多个实指令。

4.根据权利要求3所述的采控平台多专业可配置采集方法，其特征在于，在所述虚指令中配置规则映射，支持包括原始值采集、函数映射、正则表达式匹配和模板映射，该映射规则是指实指令结果到虚指令结果的映射规则。

5.根据权利要求3所述的采控平台多专业可配置采集方法，其特征在于，在所述实指令中配置规则映射，支持包括原始值采集、字典映射、函数映射、正则表达式匹配和模板映射，该映射规则用于处理实指令结果。

6.一种采控平台多专业可配置采集装置，其特征在于，该装置包括：

采集能力提供模块，用于在采控平台中提前注册好采集服务并做心跳上报；

采控源相关信息获取模块，用于接收到采控平台下发的采控源信息，包括采控源ID和采集模板ID后，从采控平台中获取采控源详细信息、采集模板对应的采集指标项及各采集指标项对应的规则映射；

采集指标项结果生成模块，用于根据不同的采集指标项对应的规则映射，下发其采集指标项对应的实指令至设备，根据返回结果和规则映射处理，最终生成对应的采集指标项结果。

7.根据权利要求6所述的采控平台多专业可配置采集装置，其特征在于，所述装置支持分布式部署，支持多个服务实例存在。

8.根据权利要求6所述的采控平台多专业可配置采集装置，其特征在于，每个所述采集指标项对应一个虚指令，虚指令对应多个实指令。

9.根据权利要求8所述的采控平台多专业可配置采集装置，其特征在于，在所述虚指令中配置规则映射，支持包括原始值采集、字典映射、正则表达式匹配和模板映射，该映射规则是指实指令结果到虚指令结果的映射规则。

10.根据权利要求8所述的采控平台多专业可配置采集装置，其特征在于，在所述实指令中配置规则映射，支持包括原始值采集、字典映射、函数映射、正则表达式匹配和模板映射，该映射规则用于处理实指令结果。

11.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-5任一项所述方法。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1-5任一项所述方法的计算机程序。

Images