CN104618948B - 一种监控上传文件的方法和系统 - Google Patents
一种监控上传文件的方法和系统 Download PDFInfo
- Publication number
- CN104618948B CN104618948B CN201510077189.9A CN201510077189A CN104618948B CN 104618948 B CN104618948 B CN 104618948B CN 201510077189 A CN201510077189 A CN 201510077189A CN 104618948 B CN104618948 B CN 104618948B
- Authority
- CN
- China
- Prior art keywords
- file
- data acquisition
- acquisition subsystem
- time range
- statistical time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000012544 monitoring process Methods 0.000 title claims abstract description 24
- 238000012545 processing Methods 0.000 claims abstract description 13
- 230000002159 abnormal effect Effects 0.000 claims abstract description 8
- 230000003442 weekly effect Effects 0.000 claims description 6
- 230000008030 elimination Effects 0.000 abstract description 5
- 238000003379 elimination reaction Methods 0.000 abstract description 5
- 230000007257 malfunction Effects 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 6
- 238000012423 maintenance Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Abstract
本发明公开了一种监控上传文件的方法，该方法包括：获取统计时段内数据采集子系统的文件上传信息；根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；在判定所述数据采集子系统运行不正常时，进行告警处理。本发明能够自动监控数据采集子系统的文件上传处理是否运行正常，提高数据采集系统故障排查的实时性和准确性。本发明还公开了一种监控上传文件的系统。
Description
技术领域
本发明涉及通信技术领域，尤其涉及的是一种监控上传文件的方法和系统。
背景技术
随着移动互联网业务的发展，采用智能终端上网的用户越来越多，如图1所示，移动用户上网记录查询分析系统可以实现移动终端3G上网数据的存储和查询，为用户提供上网计费话单凭证，以及为市场营销提供数据支撑。该上网记录查询分析系统分为数据采集子系统(省级)以及总部集中化系统，其中总部集中化系统又包括数据入库子系统、数据存储子系统以及数据查询和分析子系统。
数据采集子系统通过分光器获取流经SGSN(Serving GPRS Support Node，服务GPRS支持节点)和GGSN(Gateway GPRS Support Node，网关GPRS支持节点)的移动终端上网数据流，生成上网记录文件并通过FTP服务器发送给总部数据入库子系统。每个上网记录文件可以包括以下信息中的一种或多种：移动终端用户号码、终端类型、上网时间信息、上网流量信息、上网协议类型、源地址信息、目的地址信息。
数据入库子系统是多台FTP(File Transfer Protocal，文件传输协议)服务器，负责接收各个省上传来的上网记录文件，并通过部署在上面的入库程序对记录文件进行解析，实时写入数据存储子系统。
数据存储子系统是由多台高性能存储服务器构成的分布式Hadoop集群，用来保存全国汇总来的近3个月的上网记录信息。
数据查询和分析子系统除了对全国31个省的客服人员提供查询界面，还可以在其上执行MapReduce统计脚本，为总部经分系统提供统计报表、上网用户行为分析等服务。
上网记录文件作为上网记录查询分析系统的数据源，该文件上传的实时性和准确性直接关系到上网记录查询分析系统的精确程度。例如，网建部需要根据某一地区的基站上网流量作为网络建设的数据依据，如果该地区的上网记录文件没有及时上传到数据库则会误导建设部门的决策。
然而，由于数据采集子系统是在现网上通过分光实时采集数据，受制于各省份分系统网络升级、系统割接等客观情况，经常会发生采集不到数据或者延迟采集的情况。各省份分系统下属多个采集节点，任何一个出现故障，就会导致采集文件的缺失。FTP服务器由于需要实时进行大量文件的上传、接收，频繁的读写操作使得硬盘损坏在所难免。另外整套文件上传的流程中，涉及到的网元环节较多，很容易因为某段网络不通导致文件不能及时上传。
目前，通过维护人员人工监控方式进行上网记录文件上传监控，维护人员定期去查看FTP服务器每小时的日志信息，了解各省在上一个时段(比如，上个小时)一共上传了多少个文件，通过和历史同期(比如，上周该时段)的文件数进行对比来判断上传文件的数量是否正常，如不正常，则再通过电话联系省份分系统采集系统负责人进行故障排查。
但是，人工监控上网记录文件上传存在以下缺点：
1)问题发现不及时：很多网络故障以及系统割接往往发生在夜里，维护人员通常要等到第二天早晨才能发现文件没有上传过来。
2)漏检空文件：当省份分系统采集机端口发生故障的时候，虽然采集不到有效的上网记录数据，但是仍然可能会按照程序生成一个小于1k内容为空的记录文件。所以单纯检查上传文件数量，难以发现底层故障。
3)人工判断省分采集系统的文件上传量是否正常，或者辨识省分采集系统是否出现文件上传积压，费时费力，而且不精确。
发明内容
本发明所要解决的技术问题是提供一种监控上传文件的方法和系统，能够自动监控数据采集子系统的文件上传处理是否运行正常，提高数据采集系统故障排查的实时性和准确性。
为了解决上述技术问题，本发明提供了一种监控上传文件的方法，该方法包括：
获取统计时段内数据采集子系统的文件上传信息；
根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
在判定所述数据采集子系统运行不正常时，进行告警处理。
进一步地，该方法还包括下述特点：
获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
进一步地，该方法还包括下述特点：
所述文件上传信息包含以下信息的一种或多种：
文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息。
进一步地，该方法还包括下述特点：
所述根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量。
进一步地，该方法还包括下述特点：
所述根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
进一步地，该方法还包括下述特点：
所述数据采集子系统在历史同期内上传的文件总数的均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值S，ai是加权系数。
进一步地，该方法还包括下述特点：
所述进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人。
进一步地，该方法还包括下述特点：
所述文件包括：上网记录文件。
为了解决上述技术问题，本发明提供了一种监控上传文件的系统，包括：
统计模块，用于获取统计时段内数据采集子系统的文件上传信息；
判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
告警模块，用于在判定所述数据采集子系统运行不正常时，进行告警处理。
进一步地，该系统还包括下述特点：
统计模块，用于获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
进一步地，该系统还包括下述特点：
所述文件上传信息包含以下信息的一种或多种：
文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息。
进一步地，该系统还包括下述特点：
统计模块，用于根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量。
进一步地，该系统还包括下述特点：
判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
进一步地，该系统还包括下述特点：
所述数据采集子系统在历史同期内上传的文件总数的均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值ai是加权系数。
进一步地，该系统还包括下述特点：
告警模块，用于进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人。
进一步地，该系统还包括下述特点：
所述文件包括：上网记录文件。
与现有技术相比，本发明提供的一种监控上传文件的方法和系统，通过有效鉴别空文件、文件数量偏差、本地文件积压，能够自动监控数据采集子系统的文件上传处理是否运行正常，提高数据采集系统故障排查的实时性和准确性。
附图说明
图1为现有技术中移动用户上网记录查询分析系统的结构示意图。
图2为本发明实施例的一种监控上传文件的方法的流程图。
图3为本发明实施例的一种监控上传文件的系统的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
如图2所示，本发明实施例提供了一种监控上传文件的方法，该方法包括：
S10，获取统计时段内数据采集子系统的文件上传信息；
S20，根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
S30，在判定所述数据采集子系统运行不正常时，进行告警处理。
所述监控上传文件的方法还可以包括下述特点：
其中，如图1所示，在数据入库子系统上采用本发明的监控上传文件的方法。数据入库子系统是多台FTP服务器，负责接收各个省上传来的上网记录文件，对记录文件进行解析，实时写入数据存储子系统；
其中，所述文件包括：上网记录文件；
其中，所述上网记录文件携带以下信息中的一种或多种：移动终端用户号码、终端类型、上网时间信息、上网流量信息、上网协议类型、源地址信息、目的地址信息；
其中，所述数据采集子系统为：省份分系统数据采集子系统；
其中，所述数据采集子系统通过文件传输协议FTP服务器上传文件；
其中，获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
其中，所述文件上传信息包含以下信息的一种或多种：文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息；
其中，文件的接收时间是指总部系统接收到省份分系统上传文件的服务器系统时间；
其中，文件创建时间信息可以包含在文件名信息中，比如，文件名信息的前14位分别代表年、月、日、小时、分钟、秒；
比如，2014092410325900336097007.txt.gz的文件名，前14位“20140924103259”代表的含义是：2014年9月24日10点32分59秒。
其中，生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息，包括：
由文件传输协议FTP服务器根据接收到的文件自动生成日志信息，所述日志信息保存有所述FTP服务器接收到的每一个文件的上传信息；
如下表1所示，所述文件上传记录包括下列关键信息：
| 记录数据 | 参数名称 |
| Thu Sep 609:07:482014 | 服务器当前时间 |
| 7 | 传输时间(秒数) |
| 192.168.57.1 | 省分FTP地址 |
| 4323279 | 上传文件大小(byte) |
| 2014092410325900336097007.txt.gz | 文件名 |
| hlj_fdr | 用户名(省分名称) |
| ftp | 服务名 |
| c | 完成状态(已完成) |
表1
其中，所述根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量；
其中，所述根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
其中，所述数据采集子系统在历史同期内上传的文件总数的均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值S，ai是加权系数；
例如，当需要判断周六上午9点钟的文件上传数量时，可以从历史记录表中选取近三个月每周六早晨9点钟的文件上传数，计算所述选取的近三个月每周六早晨9点钟的文件上传数的加权平均值，以此作为该时间段的历史同期的均值。
其中，历史同期文件数记录表格式如下表2所示：
| 日期 | 星期 | 0点 | 1点 | 2点 | 3点 | …… | 23点 |
| 20140924 | 周三 | 434 | 390 | 378 | 359 | …… | 460 |
| 20140925 | 周四 | 440 | 387 | 368 | 349 | …… | 455 |
其中，进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人；
其中，将所述数据采集子系统的运行告警信息通知给所述选定的联系人，包括：
向所述选定的联系人发送短信，其中携带所述数据采集子系统的运行告警信息；
如图3所示，本发明实施例提供了一种监控上传文件的系统，包括：
统计模块，用于获取统计时段内数据采集子系统的文件上传信息；
判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
告警模块，用于在判定所述数据采集子系统运行不正常时，进行告警处理。
所述监控上传文件的系统还可以包括下述特点：
其中，统计模块，用于获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
其中，所述文件上传信息包含以下信息的一种或多种：
文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息。
其中，统计模块，用于根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量。
其中，判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
其中，所述数据采集子系统在历史同期内上传的文件总数的均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值S，ai是加权系数。
其中，告警模块，用于进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人。
其中，所述文件包括：上网记录文件。
上述实施例提供的一种监控上传文件的方法和系统，通过鉴别数据采集子系统是否上传空文件来判断数据采集机是否出现故障，通过参考历史同期上传文件数的均值来确定数据采集子系统上传文件数是否在该时段正常文件数的范围内，通过检查新生成的文件数占所有上传文件数的比率来判断数据采集子系统是否存在文件积压，当检查出上述三类运行异常中的任意一类后，通过联系人列表自动向联系人(维护人员)发送通知短信，上述方法和系统能够自动监控数据采集子系统的文件上传处理是否运行正常，提高数据采集系统故障排查的实时性和准确性。
本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成，所述程序可以存储于计算机可读存储介质中，如只读存储器、磁盘或光盘等。可选地，上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现，相应地，上述实施例中的各模块/单元可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。
需要说明的是，本发明还可有其他多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (14)
1.一种监控上传文件的方法，该方法包括：
获取统计时段内数据采集子系统的文件上传信息；
根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
在判定所述数据采集子系统运行不正常时，进行告警处理；
所述根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
2.如权利要求1所述的方法，其特征在于：
获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
3.如权利要求2所述的方法，其特征在于：
所述文件上传信息包含以下信息的一种或多种：
文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息。
4.如权利要求3所述的方法，其特征在于：
所述根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量。
5.如权利要求4所述的方法，其特征在于：
所述数据采集子系统在历史同期内上传的文件总数的加权平均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值S，ai是加权系数。
6.如权利要求1所述的方法，其特征在于：
所述进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人。
7.如权利要求1-6中任一项所述的方法，其特征在于：
所述文件包括：上网记录文件。
8.一种监控上传文件的系统，包括：
统计模块，用于获取统计时段内数据采集子系统的文件上传信息；
判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常；
告警模块，用于在判定所述数据采集子系统运行不正常时，进行告警处理；
判断模块，用于根据获取的信息判断所述数据采集子系统在所述统计时段内是否运行正常，包括：
如所述数据采集子系统在统计时段内上传的空文件数量超过第二阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内上传的文件总数N与所述数据采集子系统在历史同期内上传的文件总数的加权平均值S的差的绝对值|N-S|超过第三阈值，则判定所述数据采集子系统运行异常；和/或
如所述数据采集子系统在统计时段内新生成并上传的文件的数量M与所述数据采集子系统在统计时段内上传的文件总数N的比值M/N的值小于第四阈值，则判定所述数据采集子系统存在文件积压，属于运行异常。
9.如权利要求8所述的系统，其特征在于：
统计模块，用于获取统计时段内数据采集子系统的文件上传信息，包括：
生成文件接收记录，所述文件接收记录中的每一条记录对应一个文件的上传信息；
根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况。
10.如权利要求9所述的系统，其特征在于：
所述文件上传信息包含以下信息的一种或多种：
文件的接收时间信息、上传文件的服务器的地址信息、文件大小信息和文件的创建时间信息。
11.如权利要求10所述的系统，其特征在于：
统计模块，用于根据所述文件接收记录确定统计时段内数据采集子系统的文件上传情况，包括：
根据所述文件接收记录检查所述数据采集子系统在统计时段内上传的文件的文件大小，将所述文件大小小于第一阈值的文件判定为空文件，对空文件的数量进行统计；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内上传的文件的总数；和/或
根据所述文件接收记录统计所述数据采集子系统在统计时段内新生成并上传的文件的数量。
12.如权利要求11所述的系统，其特征在于：
所述数据采集子系统在历史同期内上传的文件总数的加权平均值S，是指所述数据采集子系统在最近m周内每周的该时段上传的文件总数Si的加权平均值S，ai是加权系数。
13.如权利要求8所述的系统，其特征在于：
告警模块，用于进行告警处理，包括：
从所述数据采集子系统的联系人列表中选定联系人，将所述数据采集子系统的运行告警信息通知给所述选定的联系人。
14.如权利要求8-13中任一项所述的系统，其特征在于：
所述文件包括：上网记录文件。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510077189.9A CN104618948B (zh) | 2015-02-12 | 2015-02-12 | 一种监控上传文件的方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510077189.9A CN104618948B (zh) | 2015-02-12 | 2015-02-12 | 一种监控上传文件的方法和系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104618948A CN104618948A (zh) | 2015-05-13 |
| CN104618948B true CN104618948B (zh) | 2018-09-28 |
Family
ID=53153174
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510077189.9A Active CN104618948B (zh) | 2015-02-12 | 2015-02-12 | 一种监控上传文件的方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104618948B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106341441B (zh) * | 2015-07-15 | 2020-04-03 | 腾讯科技（深圳）有限公司 | 数据传输方法、接入设备和校验设备 |
| CN105187513B (zh) * | 2015-08-14 | 2019-01-11 | 中国联合网络通信集团有限公司 | 一种实现上网流量记录预处理的方法及装置 |
| CN108064054B (zh) * | 2016-11-09 | 2020-10-02 | 大唐移动通信设备有限公司 | 一种lte系统中的ftp文件传输监控方法及系统 |
| CN106686107A (zh) * | 2017-01-10 | 2017-05-17 | 南方电网科学研究院有限责任公司 | 基于计量自动化系统的自动抄表率指标的监控方法及装置 |
| CN107169084A (zh) * | 2017-05-11 | 2017-09-15 | 深圳市茁壮网络股份有限公司 | 一种数据处理方法、分布式文件系统及数据服务器 |
| CN109461254B (zh) * | 2017-08-31 | 2021-08-24 | 惠州市诺坚五金制品有限公司 | 自动售货机现金流监控方法 |
| CN113627940A (zh) * | 2021-08-27 | 2021-11-09 | 中国银行股份有限公司 | 一种交易量异常的告警方法及装置 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1645336A (zh) * | 2005-01-20 | 2005-07-27 | 上海复旦光华信息科技股份有限公司 | 基于模板的异构日志信息自动提取与分析方法 |
| CN102510568A (zh) * | 2011-11-22 | 2012-06-20 | 联通宽带业务应用国家工程实验室有限公司 | 移动终端上网数据的处理系统和方法 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100464147B1 (ko) * | 2000-10-30 | 2004-12-31 | 엘지전자 주식회사 | 로딩 서버를 사용한 교환기 시스템 로딩 에러 처리장치 및방법 |
| US8378817B2 (en) * | 2009-01-28 | 2013-02-19 | Applied Capital, Inc. | Premises monitoring system |
| JP5593744B2 (ja) * | 2010-03-10 | 2014-09-24 | 富士ゼロックス株式会社 | 情報記録装置及び情報記録プログラム |
| CN102541683B (zh) * | 2010-12-31 | 2015-07-15 | 北大方正集团有限公司 | 一种数据文件备份方法及装置 |
| US9076319B2 (en) * | 2012-11-29 | 2015-07-07 | Tyco Fire & Security Gmbh | User interface broker for fire alarm systems |
| CN103248707B (zh) * | 2013-05-22 | 2016-12-28 | 北京奇虎科技有限公司 | 文件访问方法、系统以及设备 |
| CN103678604B (zh) * | 2013-12-13 | 2017-02-08 | 深圳市博实结电子有限公司 | 基于预分配fat文件系统的坏簇处理方法及装置 |
-
2015
- 2015-02-12 CN CN201510077189.9A patent/CN104618948B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1645336A (zh) * | 2005-01-20 | 2005-07-27 | 上海复旦光华信息科技股份有限公司 | 基于模板的异构日志信息自动提取与分析方法 |
| CN102510568A (zh) * | 2011-11-22 | 2012-06-20 | 联通宽带业务应用国家工程实验室有限公司 | 移动终端上网数据的处理系统和方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104618948A (zh) | 2015-05-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104618948B (zh) | 一种监控上传文件的方法和系统 | |
| US11178029B2 (en) | Systems and methods of specifying service level criteria | |
| CN110213068B (zh) | 一种消息中间件的监控方法及相关设备 | |
| Williams et al. | Population dynamics across geographical ranges: time‐series analyses of three small game species | |
| CN108170580A (zh) | 一种基于规则的日志报警方法、装置及系统 | |
| CN104834582B (zh) | 一种监控事件展示方法 | |
| CN105871574A (zh) | 一种基于软件开发工具包监控日志的方法、装置及系统 | |
| CN105610648A (zh) | 一种运维监控数据的采集方法及服务器 | |
| US20130031238A1 (en) | Health and welfare monitoring of network server operations | |
| CN107730647A (zh) | 一种基于scada的智能手机巡检系统及其巡检方法 | |
| CN110706030A (zh) | 一种广告投放方法、装置、系统及存储介质 | |
| CN111371672A (zh) | 消息推送方法及装置 | |
| CN112152823A (zh) | 网站运行错误监控方法、装置及计算机存储介质 | |
| CN112260858A (zh) | 一种可自动化检测的告警方法及终端 | |
| CN106815223B (zh) | 一种海量图片管理方法和装置 | |
| CN110428513A (zh) | 考勤处理方法、装置、电子设备及存储介质 | |
| CN102045697B (zh) | 一种确定目标用户的系统和方法 | |
| CN109729054A (zh) | 访问数据监测方法及相关设备 | |
| CN109522349B (zh) | 跨类型数据计算及共享方法、系统、设备 | |
| CN108830658B (zh) | 信息推送的数据处理方法、装置、电子设备与存储介质 | |
| CN105607983B (zh) | 数据异常监控方法和装置 | |
| CN109218062B (zh) | 基于置信区间的互联网业务报警方法和装置 | |
| CN113676509A (zh) | Http接口健康状态主动探测方法及系统 | |
| CN112995243A (zh) | 一种基于大数据的政策信息推送方法和系统 | |
| CN116628048B (zh) | 一种基于时间轴的资产数据管理方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |