CN102970177B - 一种计算机监控系统通讯数据误码分析和过滤方法 - Google Patents
一种计算机监控系统通讯数据误码分析和过滤方法 Download PDFInfo
- Publication number
- CN102970177B CN102970177B CN201210398681.2A CN201210398681A CN102970177B CN 102970177 B CN102970177 B CN 102970177B CN 201210398681 A CN201210398681 A CN 201210398681A CN 102970177 B CN102970177 B CN 102970177B
- Authority
- CN
- China
- Prior art keywords
- data
- check
- inspection
- return data
- return
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Computer And Data Communications (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种计算机监控系统通讯数据误码分析和过滤方法,监控点是分布在不同地理位置的基站/机房中的智能设备,智能设备预先设置相应的设备地址、波特率、数据位、停止位和校验,配用的动态数据策略库包括设定的检查与校验用的标准数据,其包括地址冲突检查、长度检查、数据校验、特征码检查、值域检查、关联值检查、黑名单字符集,以及全字符检查用的标准数据,其特征在于依次有以下步骤:1)服务端与设备建立通讯,采集数据;2)设备返回数据;3)数据分析;4)过滤处理。本发明的方法是对监控系统的设备通讯数据采用可扩展的误码分析和过滤方法,生成的通讯数据误码率低,监控系统可以对所有智能设备进行统一的有效管理与实时监控。
Description
技术领域
本发明涉及数据通讯,特别是涉及一种计算机监控系统通讯数据误码分析和过滤方法。
背景技术
为加强统筹管理,通信运营商将分布在不同地理位置的基站/机房中逐年大幅度增加的智能设备作为监控点,通过不同的网络连接方式接入到网管中心,组成集中监控系统。如何对多种多样的大量的监控点的原始数据进行解析,实现对所有智能设备进行统一有效的管理,是衡量集中监控系统性能的核心指标之一。导致原始数据错误的原因包括校验错误、地址冲突、长度错误、特征码错误,以及返回数据中某些值超过标准值。例如,现有的对英国依顿福兰(Eaton-Williams)公司出品的空调的通讯数据的误码分析和过滤方法,采用标准Modbus通讯协议,直接对返回的数据进行数据公式换算,未进行地址检查和16位循环冗余校验(Cyclic RedundancyCheck,缩略词为CRC)码即CRC 16校验,存在的不足是,如果监控的设备比较多,接线比较复杂,会导致设备地址发生冲突,发送的是监控某一设备的命令,收到的返回数据却是另一设备的;而且由于没有进行CRC16校验,返回数据可能与实际数据不一致。又例如,现有的对科华公司出品的三相380V输入、三相380V输出的三进三出型不间断电源(Uninterruptible Power System,缩略词为UPS)的通讯数据误码分析和过滤方法,采用ASCII方式的通讯协议,是直接将收到的返回数据和实际中的数据对应,未进行特征码检查和长度检查,存在的不足是,如果返回数据过短或者由于没有进行特征码检查,返回数据也可能与实际数据不一致。
发明内容
本发明所要解决的技术问题是弥补上述现有技术的缺陷,提供一种计算机监控系统通讯数据误码分析和过滤方法。
本发明的技术问题通过以下技术方案予以解决。
这种计算机监控系统通讯数据误码分析和过滤方法,监控点是分布在不同地理位置的基站/机房中的智能设备,所述智能设备预先设置相应的设备地址、波特率、数据位、停止位和校验,所述校验是奇校验、偶校验和无校验位中的一种,配用的动态数据策略库包括设定的检查与校验用的标准数据,所述设定的检查与校验用的标准数据包括地址冲突检查、长度检查、数据校验、特征码检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查用的标准数据。
这种计算机监控系统通讯数据误码分析和过滤方法的特点是:
依次有以下步骤:
1)服务端与设备建立通讯,采集数据
服务端根据智能设备的通讯协议向通过IP总线或RS485/RS422/RS232串口连接的相应智能设备发送相应命令,采集数据,所述相应命令包括十六进制命令和ASCII码命令;
2)设备返回数据
所述智能设备收到服务端根据智能设备的通讯协议发送的相应命令后返回采集数据;
3)数据分析
分析返回数据是否为正常数据,包括地址冲突检查、长度检查、数据校验、特征码检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查;
4)过滤处理
如果返回数据是正常数据,即校验通过,经过分析的返回数据和实际数据一致,不是乱码或/和无效数据,则对返回数据进行加工;
如果返回数据是非正常数据,即校验未通过,经过分析的返回数据和实际数据不一致,是乱码或/和无效数据,则丢弃,退出程序。
本发明的技术问题通过以下进一步的技术方案予以解决。
所述步骤3)分析返回数据是否为正常数据,是程序员根据相应智能设备的通讯协议,调用相关动态数据策略库中的相应的方法进行分析。
所述步骤3)分析返回数据,智能设备的通讯协议为标准Modbus通讯协议的,包括以下分步骤:
3·1·1)调用动态数据策略库中的地址冲突检查方法arrSend(0)<>arrRec(0),检查发送命令的设备地址和返回数据的设备地址是否发生冲突,调用sCmdDataType.ToUpper<>”HEX”方法,判断数据类型是否是十六进制(HEX);
3·1·2)调用动态数据策略库中的bitCRCn方法进行CRC16校验。
所述步骤3)分析返回数据,智能设备的通讯协议为ASCII方式的通讯协议的,包括以下分步骤:
3·2·1)调用动态数据策略库中的长度检查,检查返回数据的长度是否在设定的标准值范围;
3·2·2)调用动态数据策略库中的sSource.substring(0,1)方法进行特征码检查,检查返回数据中是否包含“!”和“/”。
所述步骤3)分析返回数据,智能设备的通讯协议为电总通讯协议的,包括以下分步骤:
3·3·1)调用动态数据策略库中的特征码检查,检查返回数据的特征码是否包含“~”;
3·3·2)调用动态数据策略库中的Check7ECode方法进行和校验。
本发明的技术问题通过以下再进一步的技术方案予以解决。
所述步骤3)的地址冲突检查,是检查智能设备地址是否发生冲突。
所述步骤3)的长度检查,是检查返回数据的长度是否在设定的标准值范围。
所述步骤3)的数据校验,包括CRC校验,以及和校验,所述CRC校验是16位循环冗余校验,所述和校验是通讯协议为电总协议才进行的校验,是除图像开始代码(Start of Image,缩略词为SOI)、图像结束代码(Endof Image,缩略词为EOI)以及校验和(Check Sum,缩略词为CHKSUM)外,将其他字符ASCII码值累加求和,所得结果模65536余数取反加1。所述步骤3)的特征码检查,是检查某些通讯协议的基本格式中的起始标志位是否正确,如果不正确,返回数据即为无效数据,数据类型是ASCII码;包括检查!、$、^、:、~。
所述步骤3)的值域检查,是检查返回数据中某些值是否在设定的标准值范围,如果不是在设定的标准值范围内,返回数据即为乱码。例如某UPS的输入线电压设定的标准值范围是(0,420),如果采集的返回数据中输入线电压的值不是在设定的标准值范围内,返回数据为乱码。
所述步骤3)的关联值检查,是检查当某一返回数据达到要求时,与其相关联的另一返回数据是否有关联值,如果不是有关联值,返回数据即为无效数据。例如某UPS的A相输出电压有值,A相输出电流有值,但是A相负载率为0,由于负载率=电流/额定电流,负载率应该有值,返回数据中A相负载率为0,返回数据为无效数据。
所述步骤3)的黑名单字符集检查,是检查返回数据中是否包含绝对不可能包括的字符,如果包含,返回数据即为无效数据,例如通讯协议为标准Modbus通讯协议中发送命令的功能码为03,返回数据中的功能码为83,返回数据为无效数据。
本发明与现有技术相比的有益效果是:本发明的方法是对监控系统的设备通讯数据采用可扩展的误码分析和过滤方法,生成的通讯数据误码率低,监控系统可以对所有智能设备进行统一的有效管理与实时监控。
附图说明
图1是本发明具体实施方式一、二的步骤简示图;
图2是图1中的调用动态数据策略库的组成示意图;
图3是本发明具体实施方式一的部分步骤详示图;
图4是本发明具体实施方式二的部分步骤详示图。
具体实施方式
下面结合具体实施方式并对照附图对本发明进行说明。
具体实施方式一
一种如图1、2、3所示的计算机监控系统通讯数据误码分析和过滤方法,监控点是分布在不同地理位置的基站/机房中的英国依顿福兰(Eaton-Williams)公司出品的多台空调,采用Modbus RTU方式的通讯协议,预先设置相应的设备地址为“01”、波特率为9600、数据位为8、停止位为1和无校验位,配用的动态数据策略库包括设定的检查与校验用的标准数据,所述设定的检查与校验用的标准数据包括地址冲突检查、数据校验、特征码检查、长度检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查用的标准数据。
依次有以下步骤:
1)服务端与设备建立通讯,采集数据
服务端根据空调采用Modbus RTU方式的通讯协议向通过IP总线或RS485/RS422/RS232串口连接的空调发送相应的十六进制命令,采集数据,
十六进制命令:0 03000100069408;
2)设备返回数据
空调收到服务端发送的相应命令后返回采集数据;
0103 0C 00DA000000000000000001DB 5BA0
3)数据分析
程序员根据相应智能设备的通讯协议,调用相关动态数据策略库中的相应的方法分析返回数据是否为正常数据,包括地址冲突检查、数据校验;
3·1·1)调用动态数据策略库中的地址冲突检查的方法arrSend(0)<>arrRec(0),检查发送命令的设备地址和返回数据的设备地址是否发生冲突,调用sCmdDataType.ToUpper<>”HEX”方法,判断数据类型是否是十六进制(HEX),发送命令中设备地址为“01”,返回数据中设备地址为“01”,设备地址未发生冲突;
3·1·2)调用动态数据策略库中的方法:bitCRCn校验进行CRC16校验,采用上述步骤可以防止在监控的空调多,接线复杂情况下可能导致设备地址发生冲突,不会出现发送监控某一台空调的命令,返回的却是另一台空调的数据的情况;而且由于进行了CRC 16校验,如果返回数据CRC校验不通过,就可以避免返回数据和实际数据不一致即返回数据错误的情况;
4)过滤处理
如果返回数据是正常数据,即校验通过,经过分析的返回数据和实际数据一致,不是乱码或/和无效数据,则对返回数据进行加工;
如果返回数据是非正常数据,即校验未通过,经过分析的返回数据和实际数据不一致,是乱码或/和无效数据,则丢弃,退出程序。
具体实施方式二
一种如图1、2、4所示的计算机监控系统通讯数据误码分析和过滤方法,监控点是分布在不同地理位置的基站/机房中的科华公司出品的三相380V输入、三相380V输出的三进三出型多台UPS,采用ASCII方式的通讯协议,预先设置相应的设备地址为“01”、波特率为9600、数据位为8、停止位为1和无校验位,配用的动态数据策略库包括设定的检查与校验用的标准数据,所述设定的检查与校验用的标准数据包括地址冲突检查、数据校验、特征码检查、长度检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查用的标准数据。
依次有以下步骤:
1)服务端与设备建立通讯,采集数据
服务端根据UPS的ASCII方式的通讯协议向通过IP总线或RS485/RS422/RS232串口连接的UPS发送相应的ASCII码命令,采集数据,
ASCII码命令:G3;
2)设备返回数据
UPS收到服务端根据智能设备的通讯协议发送的相应命令后返回采集数据:
!224.0/223.0/222.0 223.0/224.0/224.0 221.0/219.0/221.0 012.0/018.0/016.0;
3)数据分析
程序员根据相应智能设备的通讯协议,调用相关动态数据策略库中的相应的方法分析返回数据是否为正常数据,包括长度检查、特征码检查;
3·2·1)调用动态数据策略库中的长度检查sSource.Length<5,检查返回数据的长度是否小于5,在设定的标准值范围;
3·2·2)调用动态数据策略库中的方法sSource.IndexOf(“!”)<>0进行特征码检查,检查返回数据中是否包含“!”,采用上述步骤,可以避免返回数据中如果不含有这些特征符号,校验不通过,就可以避免返回数据和实际数据不一致即返回数据错误的情况;
4)过滤处理
如果返回数据是正常数据,即校验通过,经过分析的返回数据和实际数据一致,不是乱码或/和无效数据,则对返回数据进行加工;
如果返回数据是非正常数据,即校验未通过,经过分析的返回数据和实际数据不一致,是乱码或/和无效数据,则丢弃,退出程序。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。本发明技术领域的普通技术人员在不脱离本发明构思的前提下做出若干等同替代或明显变型,而且性能或用途相同,都应当视为属于本发明的权利要求保护范围。
Claims (4)
1.一种计算机监控系统通讯数据误码分析和过滤方法,监控点是分布在不同地理位置的基站/机房中的智能设备,所述智能设备预先设置相应的设备地址、波特率、数据位、停止位和校验,所述校验是奇校验、偶校验和无校验位中的一种,配用的动态数据策略库包括设定的检查与校验用的标准数据,所述设定的检查与校验用的标准数据包括地址冲突检查、长度检查、数据校验、特征码检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查用的标准数据,其特征在于:
依次有以下步骤:
1)服务端与设备建立通讯,采集数据
服务端根据智能设备的通讯协议向通过IP总线或RS485/RS422/RS232串口连接的相应智能设备发送相应命令,采集数据,所述相应命令包括十六进制命令和ASCII码命令;
2)设备返回数据
所述智能设备收到服务端根据智能设备的通讯协议发送的相应命令后返回采集数据;
3)数据分析
程序员根据相应智能设备的通讯协议,调用相关动态数据策略库中的相应的方法,分析返回数据是否为正常数据,包括地址冲突检查、长度检查、数据校验、特征码检查、值域检查、关联值检查、黑名单字符集检查,以及全字符检查,以避免返回数据和实际数据不一致即返回数据错误的情况;
所述地址冲突检查,是检查智能设备地址是否发生冲突;
所述长度检查,是检查返回数据的长度是否在设定的标准值范围;
所述数据校验,包括CRC校验,以及和校验,所述CRC校验是16位循环冗余校验,所述和校验是通讯协议为电总协议才进行的校验,是除图像开始代码SOI、图像结束代码EOI以及校验和CHKSUM外,将其他字符ASCII码值累加求和,所得结果模65536余数取反加1;
所述值域检查,是检查返回数据中某些值是否在设定的标准值范围,如果不是在设定的标准值范围内,返回数据即为乱码;
所述关联值检查,是检查当某一返回数据达到要求时,与其相关联的另一返回数据是否有关联值,如果不是有关联值,返回数据即为无效数据;
所述特征码检查,是检查某些通讯协议的基本格式中的起始标志位是否正确,如果不正确,返回数据即为无效数据;
所述黑名单字符集检查,是检查返回数据中是否包含绝对不可能包括的字符,如果包含,返回数据即为无效数据;
4)过滤处理
如果返回数据是正常数据,即校验通过,经过分析的返回数据和实际数据一致,不是乱码或/和无效数据,则对返回数据进行加工;
如果返回数据是非正常数据,即校验未通过,经过分析的返回数据和实际数据不一致,是乱码或/和无效数据,则丢弃,退出程序。
2.如权利要求1所述的计算机监控系统通讯数据误码分析和过滤方法,其特征在于:
所述步骤3)分析返回数据,智能设备的通讯协议为标准Modbus通讯协议的,包括以下分步骤:
3·1·1)调用动态数据策略库中的地址冲突检查arrSend(0)<>arrRec(0),检查发送命令的设备地址和返回数据的设备地址是否发生冲突,调用sCmdDataType.ToUpper<>”HEX”方法,判断数据类型是否是十六进制(HEX);
3·1·2)调用动态数据策略库中的bitCRCn方法进行CRC16校验。
3.如权利要求1所述的计算机监控系统通讯数据误码分析和过滤方法,其特征在于:
所述步骤3)分析返回数据,智能设备的通讯协议为ASCII方式的通讯协议的,包括以下分步骤:
3·2·1)调用动态数据策略库中的长度检查,检查返回数据的长度是否在设定的标准值范围;
3·2·2)调用动态数据策略库中的sSource.substring(0,1)方法进行特征码检查,检查返回数据中是否包含“!”和“/”。
4.如权利要求1所述的计算机监控系统通讯数据误码分析和过滤方法,其特征在于:
所述步骤3)分析返回数据,智能设备的通讯协议为电总通讯协议的,包括以下分步骤:
3·3·1)调用动态数据策略库中的特征码检查,检查返回数据的特征码是否包含“~”;
3·3·2)调用动态数据策略库中的方法Check7ECode进行和校验。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210398681.2A CN102970177B (zh) | 2012-10-19 | 2012-10-19 | 一种计算机监控系统通讯数据误码分析和过滤方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210398681.2A CN102970177B (zh) | 2012-10-19 | 2012-10-19 | 一种计算机监控系统通讯数据误码分析和过滤方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102970177A CN102970177A (zh) | 2013-03-13 |
CN102970177B true CN102970177B (zh) | 2015-08-26 |
Family
ID=47800068
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210398681.2A Active CN102970177B (zh) | 2012-10-19 | 2012-10-19 | 一种计算机监控系统通讯数据误码分析和过滤方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102970177B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106888185B (zh) * | 2015-12-15 | 2019-12-06 | 北京网御星云信息技术有限公司 | 一种基于串行链路的工业网络安全防护方法 |
CN108259130A (zh) * | 2017-12-29 | 2018-07-06 | 伟乐视讯科技股份有限公司 | 一种波特率奇偶校验位自适应的Modbus传输系统及方法 |
CN110061896B (zh) * | 2019-05-06 | 2021-04-13 | 浙江明度智控科技有限公司 | 一种modbus-rtu总线地址冲突检测方法 |
CN111443791B (zh) * | 2020-03-24 | 2022-04-29 | 深信服科技股份有限公司 | 基于云平台的ups监控方法、设备、存储介质及装置 |
CN112165411B (zh) * | 2020-09-18 | 2022-04-29 | 广东中认华南检测技术有限公司 | 一种基于控制器对传输数据进行监控的方法及系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101576742B (zh) * | 2009-06-19 | 2011-06-22 | 西安交通大学 | 一种数控切纸机远程监控与故障诊断系统及其实现方法 |
CN101771700B (zh) * | 2010-01-06 | 2012-07-25 | 哈尔滨工业大学 | 基于FPGA的Modbus协议通信节点 |
CN102375437A (zh) * | 2010-08-06 | 2012-03-14 | 欧阳光明 | 基于ieee802.15.4协议和plc的无线生产过程数据采集和传输的装置和方法 |
CN201976125U (zh) * | 2010-12-09 | 2011-09-14 | 广东高新兴通信股份有限公司 | 一种对实时监控数据流的分布式解析系统 |
CN202067122U (zh) * | 2011-03-18 | 2011-12-07 | 浙江天工自信科技工程有限公司 | 一种基于Modbus规约I/O通讯电厂输煤监控系统 |
CN102591271A (zh) * | 2012-01-10 | 2012-07-18 | 中国铁道科学研究院电子计算技术研究所 | 机房环境监控系统及方法 |
-
2012
- 2012-10-19 CN CN201210398681.2A patent/CN102970177B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN102970177A (zh) | 2013-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102970177B (zh) | 一种计算机监控系统通讯数据误码分析和过滤方法 | |
US8451753B2 (en) | Systems and methods for the configuration of substation remote terminals with a central controller | |
CN102768705B (zh) | 一种基于iec61968的配电网模型互操作及功能验证方法 | |
CN109120464A (zh) | 智能变电站二次设备配置信息远程在线管控装置 | |
CN113066276B (zh) | 用电信息采集系统通信故障监测方法、设备及存储介质 | |
CN102708196B (zh) | 一种基于e语言的变电站端与调度端模型协调共享方法 | |
CN103926917A (zh) | 一种变电站总控装置智能测试系统及其测试方法 | |
CN109038824B (zh) | 一种分布式馈线自动化方法 | |
CN103326465A (zh) | 一种基于iec61850标准的配电网终端接入方法 | |
CN101609407A (zh) | 基于发布者/订阅者模式的全站模型文件匹配的检测方法 | |
CN103730894B (zh) | 能量管理系统图形检查方法及装置 | |
CN113364120B (zh) | 智能变电站控制过程校核方法、装置、设备及存储介质 | |
CN102916489B (zh) | 基于区域电网一次系统结构的虚端子自动连线方法 | |
CN104579797A (zh) | 智能变电站交换机信息流自动配置方法 | |
CN104730397A (zh) | 一种配电自动化终端之间互操作测试系统和方法 | |
CN109767056A (zh) | 主子站一体化图形管理方法、系统及存储介质 | |
CN111274206B (zh) | 基于最小子crc码变电站改扩建检修测试边界确定方法 | |
CN111931012A (zh) | 一种基于故障管理子系统的数据模型自适应方法和装置 | |
CN104579817A (zh) | 基于goose逻辑的通信回路测试方法 | |
CN105099810A (zh) | 一种面向采样值接口的通信测试方法及系统 | |
CN103647760A (zh) | 一种智能变电站数字保护装置的mms通讯平台及其访问方法 | |
CN103543730A (zh) | 一种贴片机故障诊断系统 | |
CN112711841A (zh) | 一种微网智能变电站协同创新平台装置 | |
CN103516055B (zh) | 智能变电站合并单元状态的监测方法 | |
Li et al. | Research on designing methods of the secondary system in digital substation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |