CN104142827B - 一种轨道交通数据通信系统性能的快速分析方法 - Google Patents
一种轨道交通数据通信系统性能的快速分析方法 Download PDFInfo
- Publication number
- CN104142827B CN104142827B CN201410367373.2A CN201410367373A CN104142827B CN 104142827 B CN104142827 B CN 104142827B CN 201410367373 A CN201410367373 A CN 201410367373A CN 104142827 B CN104142827 B CN 104142827B
- Authority
- CN
- China
- Prior art keywords
- communication system
- analysis
- csv
- daily record
- name
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Train Traffic Observation, Control, And Security (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了一种轨道交通数据通信系统性能的快速分析方法,包括步骤:输入需要处理的日志文件名称;对日志分析,筛选出包含车载电台信息的日志文件,放置到名为SA_Analysis_日志名.csv文件中;将SA_Analysis_日志名.csv表格中MAC地址替换为接入点名称;接入点名称和MAC地址对应表文件中读取的每一个接入点名称,读取修改完成的SA_Analysis_日志名.csv表格,筛选每一个接入点的最大值和最小值;查询AP的数量,绘制数据透视表;将数据透视表作为动态数据源,绘制数据透视图。本发明能对数据通信系统每天所产生的日志信息进行分析处理,满足高效性、便捷性及直观性的要求。
Description
技术领域
本发明涉及通信领域,尤其涉及通信系统性能的分析方法。
背景技术
轨道交通数据通信系统需要对沿线通信系统设备进行24小时的监控,在这一过程中网络管理服务器会按照一定的时间间隔轮训全线所有信号设备的状态。因此,每一天都会生成记录所有信号设备状态的日志文件,由于数据量的巨大,如何从这些状态信息中准确提取需要的内容并分析数据通信系统的性能,便成为了一个亟待解决的问题。
随着运营时间段的扩展、列车数量的增加,数据通信系统每天所产生的信息量面临进一步增加的可能,所以,如何实现一种方法,使维护人员快速准确地对系统产生的状态信息进行处理和分析就变得越来越紧迫,并且能够满足数据通信系统状态信息处理的方法需要满足以下的几项要求:
高效性,数据通信系统产生的信息量巨大,每天产生的信息条目有近百万条,所以需要快速准确的对大数据进行筛选和处理。现有方法主要是使用文本编辑器对于信息进行人工处理,这种处理方法速度慢,且由于涉及到人工部分较多,容易出现误操作,导致最终结果不准确。
便捷性,维护人员并不一定是专业的数据通信系统设计工程师,所以对于数据通信系统信息的处理方法需要简单便捷,使得只需进行简单培训就可直接使用,方便维保人员进行数据的分析。现采用文本编辑器人工分析方法,操作步骤多,操作要求高,导致操作时间长,误操作的可能性大。
直观性,能够生成图表的形式,直观的展示出设备全天的工作情况,并便于维护人员对设备的状态进行准确判断。
发明内容
本发明的目的在于提供一种轨道交通数据通信系统性能的快速分析方法,能对数据通信系统每天所产生的日志信息进行分析处理,满足高效性、便捷性及直观性的要求。
实现上述目的的技术方案是:
一种轨道交通数据通信系统性能的快速分析方法,包括下列步骤:
步骤S101,所述轨道交通数据通信系统产生各个日志文件,在应用Ruby(一种面向对象程序设计的脚本语言)脚本语言编写的脚本程序中输入需要处理的日志文件名称;
步骤S102,利用Ruby脚本语言编写的脚本程序对日志进行分析,筛选出包含车载电台(SA)的日志文件,并将其放置到名为SA_Analysis_日志名.csv文件中;
步骤S103,按照接入点名称和MAC(Media Access Control)地址对应表(APMAC_MAPPING_TABLE.csv)文件将SA_Analysis_日志名.csv表格中MAC地址替换为接入点名称;
步骤S104,接入点名称和MAC地址对应表文件中读取的每一个接入点名称,读取步骤S103中修改完成的SA_Analysis_日志名.csv表格,筛选每一个接入点的最大值和最小值;
步骤S105,利用VBA(Visual Basic Application)语言编写的脚本程序,查询AP(地面接入点)的数量,绘制数据透视表;
步骤S106,利用VBA语言编写的脚本程序驱动Excel表格(Microsoft office的组件之一)将数据透视表作为动态数据源,绘制数据透视图。
进一步地,所述步骤S101包括步骤:
步骤S1,提示输入需要处理的日志名;
步骤S2,检索判断所输入名称的日志是否存在,若是,进入步骤S3;若否,返回步骤S1,重新运行程序;
步骤S3,判断存放结果的Result子文件夹存在,若是,进入步骤S4;若否,新建Result子文件夹后进入步骤S4。
进一步地,所述步骤S102包括步骤:
步骤S4,在Result子文件夹下新建名为SA_Analysis_日志名的csv文件;
步骤S5,遍历日志文件的每一行,筛选出为车载电台(SA)信息的行,进入步骤S6;
步骤S6,分别提取出SA信息中的SA名、漫游时间、漫游前AP地址、漫游后AP地址以及漫游前RSSI(接收信号强度指示)、漫游后RSSI的数据;将各项数据分别存入SA_Analysis_日志名.csv文件的各列中。
进一步地,所述步骤S103包括步骤:
步骤S7,打开名为APMAC_MAPPING_TABLE的AP和MAC地址对应表格(APMAC_MAPPING_TABLE.csv);
步骤S8,遍历SA_Analysis_日志名.csv每一行的MAC地址列,判断MAC地址是否在APMAC_MAPPING_TABLE表中,若否,进入步骤S9;若是,进入步骤S10;
步骤S9,MAC地址列信息保持不变;
步骤S10,将SA_Analysis_日志名.csv的MAC地址替换为所对应的AP名。
进一步地,所述步骤S104包括步骤:
步骤S11,新建名为Max_Min_Rssi_日志名的csv文件;
步骤S12,遍历APMAC_MAPPING_TABLE中AP名,代入SA_Analysis_日志名.csv中,判断第一行是否含有该AP,若否,进入步骤S13;若是,进入步骤S14;
步骤S13,判断下一行是否含有该AP,若是,进入步骤S14;若否,重新运行步骤S13;
步骤S14,判断RSSI是否为对应AP的RSSI最大值或最小值,若是,进入步骤S15;若否,返回步骤S13;
步骤S15,若是最大值,将AP名和最大值分别存入Max_Min_Rssi_日志名.csv中相应列中;若是最小值也将最小值存入相应的列中。
进一步地,所述步骤S105包括步骤:
步骤S16,查询AP数量,将数量赋给i;
步骤S17,根据i的值绘制数据透视表。
进一步地,所述步骤S106包括步骤:
步骤S18,判断导入的数据是否为空,若为空,终止在数据透视表添加条目;若不为空,将数据动态写入透视表,并进入步骤S19;
步骤S19,将透视表作为动态数据源,绘制透视图。
本发明的有益效果是:本发明利用脚本语言编写相关程序对系统性能信息按照设备类型和报警类型进行分类处理,再将处理结果导入电子表格,利用应用程序视觉化脚本自动汇总并生成各种报警的透视图表,从而满足上述高效性、便捷性及直观性的要求,对数据通信系统系能的分析有重大意义。
附图说明
图1是本发明的轨道交通数据通信系统性能的快速分析方法的流程图;
图2是本发明的轨道交通数据通信系统性能的快速分析方法的一具体实施例的流程图。
具体实施方式
下面将结合附图对本发明作进一步说明。
请参阅图1和图2,本发明的轨道交通数据通信系统性能的快速分析方法,是使用脚本语言对数据通信系统每天所产生的日志信息进行分析处理,具体包括下列步骤:
步骤S101,双击脚本语言程序(使用Ruby脚本语言编写),弹出DOS界面提示输入需要处理的日志文件名称,此时输入需要处理的日志名称(包含日志扩展名),具体包括如下S1~S3步骤:
步骤S1,提示输入需要处理的日志名;
步骤S2,检索判断所输入名称的日志是否存在,若是,进入步骤S3;若否,返回步骤S1,重新运行程序;
步骤S3,判断存放结果的Result子文件夹存在,若是,进入步骤S4;若否,新建Result子文件夹后进入步骤S4;
步骤S102,脚本对日志进行分析,得出轨道交通维保所需求的个各种状态信息,再根据日志所提供的设备状态信息得出车载电台的漫游信息、接收信号强度指示(RSSI)极值、地面接入点(AP)每天的关联次数、设备的每日热重启次数、设备的每日冷重启次数、设备的各个接口的连接情况,筛选出包含车载电台信息的日志文件,并将其放置到名为SA_Analysis_日志名.csv文件中,具体包括如下S4~S6步骤:
步骤S4,在Result子文件夹下新建名为SA_Analysis_日志名的csv文件;
步骤S5,遍历日志文件的每一行,筛选出为SA信息的行,进入步骤S6;
步骤S6,分别提取出车载电台(SA)信息中的车载电台(SA)名、漫游时间、漫游前AP地址、漫游后AP地址以及漫游前RSSI、漫游后RSSI的数据;将各项数据分别存入SA_Analysis_日志名.csv文件的各列中;
步骤S103,按照接入点名称和MAC地址对应表(APMAC_MAPPING_TABLE.csv)文件将SA_Analysis_日志名.csv表格中MAC地址替换为接入点名称,具体包括如下S7~S10步骤:
步骤S7,打开名为APMAC_MAPPING_TABLE的AP和MAC地址对应表格;
步骤S8,遍历SA_Analysis_日志名.csv每一行的MAC地址列,判断MAC地址是否在APMAC_MAPPING_TABLE表中,若否,进入步骤S9;若是,进入步骤S10;
步骤S9,MAC地址列信息保持不变;
步骤S10,将SA_Analysis_日志名.csv的MAC地址替换为所对应的AP名;
步骤S104,APMAC_MAPPING_TABLE中读取的每一个接入点名称,读取步骤S103中修改完成的SA_Analysis_日志名.csv表格,筛选每一个接入点的最大值和最小值,具体包括如下S11~S15步骤:
步骤S11,新建名为Max_Min_Rssi_日志名的csv文件;
步骤S12,遍历APMAC_MAPPING_TABLE中AP名,代入SA_Analysis_日志名.csv中,判断第一行是否含有该AP,若否,进入步骤S13;若是,进入步骤S14;
步骤S13,判断下一行是否含有该AP,若是,进入步骤S14;若否,重新运行步骤S13;
步骤S14,判断RSSI是否为对应AP的RSSI最大值或最小值,若是,进入步骤S15;若否,返回步骤S13;
步骤S15,若是最大值,将AP名和最大值分别存入Max_Min_Rssi_日志名.csv中相应列中;若是最小值也将最小值存入相应的列中;
步骤S105,将.csv文件按照类别分别导入Chart_Result的相关标签页里,查询AP的数量,绘制数据透视表,具体包括如下S16~S17步骤:
步骤S16,查询AP数量,将数量赋给i;
步骤S17,根据i的值绘制数据透视表;
步骤S106,将数据透视表作为动态数据源,绘制数据透视图,具体包括如下S18~S19步骤:
步骤S18,判断导入的数据是否为空,若为空,终止在数据透视表添加条目;若不为空,将数据动态写入透视表,并进入步骤S19;
步骤S19,将透视表作为动态数据源,绘制透视图。
步骤S105、S106,即:使用VBA编写脚本程序,使Excel表格对Ruby筛选出的日志绘制图表,自动生成关于各种设备和故障的统计图表或者生成一份汇总的统计图表。
综上所述,通过采用Ruby语言,增加了数据通信系统状态信息处理的自动化程度,使得状态信息处理的效率得到提高,并且在程序编写过程中采用了模块化方法,使操作者可以根据不同的需求自主选择需要分析的项目,设可以灵活组合各个分析项目;同时,操作人员只需要点击程序后,输入待分析的日志名称,随后程序可以自动将最终的结果输出,减少了操作步骤,使得实际操作者只需要短暂的培训即可熟练使用;最后,使用VBA语言处理数据并生成数据透视图表,把数据变成图表的形式,使各个设备的状态情况直观的展示,操作者可以对各个设备的情况有一个准确的了解,不必人工统计某类故障数量,大大提高了分析效率,使得故障分析和判断更加方便。
以上实施例仅供说明本发明之用,而非对本发明的限制,有关技术领域的技术人员,在不脱离本发明的精神和范围的情况下,还可以作出各种变换或变型,因此所有等同的技术方案也应该属于本发明的范畴,应由各权利要求所限定。
Claims (7)
1.一种轨道交通数据通信系统性能的快速分析方法,其特征在于,包括下列步骤:
步骤S101,所述轨道交通数据通信系统产生各个日志文件,在应用Ruby脚本语言编写的脚本程序中输入需要处理的日志文件名称;
步骤S102,利用Ruby脚本语言编写的脚本程序对日志进行分析,筛选出包含车载电台信息的日志文件,并将其放置到名为SA_Analysis_日志名.csv文件中;
步骤S103,按照接入点名称和MAC地址对应表文件将SA_Analysis_日志名.csv表格中MAC地址替换为接入点名称;
步骤S104,接入点名称和MAC地址对应表文件中读取的每一个接入点名称,读取步骤S103中修改完成的SA_Analysis_日志名.csv表格,筛选每一个接入点的最大值和最小值;
步骤S105,利用VBA语言编写的脚本程序,查询地面接入点的数量,绘制数据透视表;
步骤S106,利用VBA语言编写的脚本程序驱动Excel表格将数据透视表作为动态数据源,绘制数据透视图。
2.根据权利要求1所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S101包括步骤:
步骤S1,提示输入需要处理的日志名;
步骤S2,检索判断所输入名称的日志是否存在,若是,进入步骤S3;若否,返回步骤S1,重新运行程序;
步骤S3,判断存放结果的Result子文件夹存在,若是,进入步骤S102;若否,新建Result子文件夹后进入步骤S102。
3.根据权利要求2所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S102包括步骤:
步骤S4,在Result子文件夹下新建名为SA_Analysis_日志名的csv文件;
步骤S5,遍历日志文件的每一行,筛选出为车载电台信息的行,进入步骤S6;
步骤S6,分别提取出车载电台信息中的车载电台名、漫游时间、漫游前地面接入点地址、漫游后地面接入点地址以及漫游前RSSI、漫游后RSSI的数据;将各项数据分别存入SA_Analysis_日志名.csv文件的各列中。
4.根据权利要求3所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S103包括步骤:
步骤S7,打开名为APMAC_MAPPING_TABLE的地面接入点和MAC地址对应表格;
步骤S8,遍历SA_Analysis_日志名.csv每一行的MAC地址列,判断MAC地址是否在APMAC_MAPPING_TABLE表中,若否,进入步骤S9;若是,进入步骤S10;
步骤S9,MAC地址列信息保持不变;
步骤S10,将SA_Analysis_日志名.csv的MAC地址替换为所对应的地面接入点名。
5.根据权利要求4所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S104包括步骤:
步骤S11,新建名为Max_Min_Rssi_日志名的csv文件;
步骤S12,遍历APMAC_MAPPING_TABLE中地面接入点名,代入SA_Analysis_日志名.csv中,判断第一行是否含有该AP,若否,进入步骤S13;若是,进入步骤S14;
步骤S13,判断下一行是否含有该地面接入点,若是,进入步骤S14;若否,重新运行步骤S13;
步骤S14,判断RSSI是否为对应地面接入点的RSSI最大值或最小值,若是,进入步骤S15;若否,返回步骤S13;
步骤S15,若是最大值,将地面接入点名和最大值分别存入Max_Min_Rssi_日志名.csv中相应列中;若是最小值也将最小值存入相应的列中。
6.根据权利要求5所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S105包括步骤:
步骤S16,查询地面接入点数量,将数量赋给i;
步骤S17,根据i的值绘制数据透视表。
7.根据权利要求6所述的轨道交通数据通信系统性能的快速分析方法,其特征在于,所述步骤S106包括步骤:
步骤S18,判断导入的数据是否为空,若为空,终止在数据透视表添加条目;若不为空,将数据动态写入透视表,并进入步骤S19;
步骤S19,将透视表作为动态数据源,绘制透视图。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410367373.2A CN104142827B (zh) | 2014-07-29 | 2014-07-29 | 一种轨道交通数据通信系统性能的快速分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410367373.2A CN104142827B (zh) | 2014-07-29 | 2014-07-29 | 一种轨道交通数据通信系统性能的快速分析方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104142827A CN104142827A (zh) | 2014-11-12 |
CN104142827B true CN104142827B (zh) | 2017-12-19 |
Family
ID=51852009
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410367373.2A Active CN104142827B (zh) | 2014-07-29 | 2014-07-29 | 一种轨道交通数据通信系统性能的快速分析方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104142827B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107679028B (zh) * | 2017-10-17 | 2018-11-16 | 中铁西北科学研究院有限公司 | 探地雷达层数据文件处理与制图的方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103034652A (zh) * | 2011-09-28 | 2013-04-10 | 海洋王照明科技股份有限公司 | 一种数据分析处理方法及系统 |
CN103279409A (zh) * | 2013-06-03 | 2013-09-04 | 上海华力微电子有限公司 | 比特失效模式统计方法及装置 |
CN103399925A (zh) * | 2013-08-05 | 2013-11-20 | 河海大学 | 一种基于水文数据的降雨多维分析系统及其实现方法 |
-
2014
- 2014-07-29 CN CN201410367373.2A patent/CN104142827B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103034652A (zh) * | 2011-09-28 | 2013-04-10 | 海洋王照明科技股份有限公司 | 一种数据分析处理方法及系统 |
CN103279409A (zh) * | 2013-06-03 | 2013-09-04 | 上海华力微电子有限公司 | 比特失效模式统计方法及装置 |
CN103399925A (zh) * | 2013-08-05 | 2013-11-20 | 河海大学 | 一种基于水文数据的降雨多维分析系统及其实现方法 |
Non-Patent Citations (1)
Title |
---|
"数据透视表在统计汇总城市饮用水水质卫生指标检测数据中的应用";刘悦等;《中国管理信息化》;20120131;第15卷(第2期);第67-70页 * |
Also Published As
Publication number | Publication date |
---|---|
CN104142827A (zh) | 2014-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107818150B (zh) | 一种日志审计方法及装置 | |
CN105049247A (zh) | 一种网络安全日志模板抽取方法及装置 | |
CN106815125A (zh) | 一种日志审计方法及平台 | |
CN104993964B (zh) | 一种基于正则算法的ptn l3网络数据配置合规核查方法 | |
CN107748782A (zh) | 查询语句处理方法及装置 | |
CN104796300B (zh) | 一种数据包特征提取方法及装置 | |
CN113242159B (zh) | 应用访问关系确定方法及装置 | |
CN106600457B (zh) | 一种变电站微机五防主接线图分析系统 | |
WO2021088517A1 (zh) | 一种配电自动化缺陷管理系统及方法 | |
CN107479540A (zh) | 故障诊断方法以及系统 | |
CN113505048A (zh) | 基于应用系统画像的统一监控平台及实现方法 | |
CN106250471A (zh) | 一种用于列车atp的数据自动提取与存储系统及方法 | |
CN103400220A (zh) | 一种网络设备信息的采集、分类以及固定标识的方法 | |
CN105719195A (zh) | 智能变电站事件序列分析的步渐式表达方法及系统 | |
CN104142827B (zh) | 一种轨道交通数据通信系统性能的快速分析方法 | |
CN108279013A (zh) | 电子地图增量数据的检查纠错方法和装置、以及导航系统 | |
CN107742162B (zh) | 一种基于配调监控信息的多维特征关联分析方法 | |
CN104516953B (zh) | 一种用于电力调度自动化海量报文的黑匣子系统 | |
CN104113866A (zh) | 无线控制器日志的处理方法及装置 | |
CN105991322B (zh) | 一种采集适配器管理系统的处理方法和装置 | |
CN104331426B (zh) | 一种基于浏览器的电力系统检索器的快速检索方法 | |
CN107220146A (zh) | 一种文件扫描恢复方法及装置 | |
CN116032725A (zh) | 故障根因定位模型的生成方法及装置 | |
CN111371574A (zh) | 一种机房监控的运维管理系统平台 | |
CN105630873B (zh) | 站场内揭示的图形化辅助编辑方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: 201206 Shanghai City, Pudong New Area Jinhai Road No. 1000 Building No. 28 Patentee after: Shanghai electric traffic automation system Co., Ltd. Address before: 201206 Shanghai City, Pudong New Area Jinhai Road No. 1000 Building No. 28 Patentee before: Shanghai is from instrument Tai Leizi traffic automation System Co., Ltd |