CN106294852A - 一种对存储数据的长期监控方法 - Google Patents

一种对存储数据的长期监控方法 Download PDF

Info

Publication number
CN106294852A
CN106294852A CN201610703054.3A CN201610703054A CN106294852A CN 106294852 A CN106294852 A CN 106294852A CN 201610703054 A CN201610703054 A CN 201610703054A CN 106294852 A CN106294852 A CN 106294852A
Authority
CN
China
Prior art keywords
data
storage data
monitoring
file
analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610703054.3A
Other languages
English (en)
Inventor
龚丹莉
邵雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Huali Microelectronics Corp
Original Assignee
Shanghai Huali Microelectronics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Huali Microelectronics Corp filed Critical Shanghai Huali Microelectronics Corp
Priority to CN201610703054.3A priority Critical patent/CN106294852A/zh
Publication of CN106294852A publication Critical patent/CN106294852A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种对存储数据的长期监控方法，包括：下载数据至本地；对存储数据进行格式转换，同时进行参数统计值计算，生成存储数据监控系统文件；将该存储数据监控系统文件上传至FTP服务器中；通过同步脚本定时获取FTP服务器中的文件，导入后台数据库；通过C++通讯库建立用于监控的文件，并且进行数据监控分析；生成报告本发明有效的解决了现有系统无法进行存储数据长期分析及监控问题。通过C++通讯库建立存储数据监控文件，建立定时运行机制，无需人为进行操作。系统分析一个月的存储数据从获取到完成图表绘制等工作时间大大缩短，有效的提高了工程师的工作效率，且系统化的数据分析方式确保了数据的准确性。

Description

一种对存储数据的长期监控方法
技术领域
本发明涉及半导体技术领域，具体涉及一种对存储数据的长期监控方法。
背景技术
现有存储数据(SP数据)都是经过外部测试后回传，经过格式化后再导入至ACE(Adaptive Communication Environment)数据库，ACE数据库是一套C++的通信库。这些数据都未经过处理，一批次的存储数据回传的数据一般可达1946496个数据点内容。因此，当用户通过ACE程序进行存储数据长期统计分析时会面临软件无法处理的问题。用户只能通过ACE程序进行源数据处理，由于软件局限性及数据量过大，一天的存储数据通过ACE需要1小时才能完成处理，无法达到数据长期监控的效果。
发明内容
为了克服以上问题，本发明旨在从数据源头进行监控统计值预处理，导入至后台数据库，再经过一种C++通信库进行数据处理，实现存储数据长期监控。
为了达到上述目的，本发明对存储数据的长期监控方法，包括：
步骤01：下载数据至本地；
步骤02：对存储数据进行格式转换，同时进行参数统计值计算，生成存储数据监控系统文件；
步骤03：将该存储数据监控系统文件上传至FTP服务器中；
步骤04：通过同步脚本定时获取FTP服务器中的文件，导入后台数据库；
步骤05：通过C++通信库建立用于监控的文件，并且进行数据监控分析；
步骤06：生成报告。
优选地，所述步骤02中，将各参数值从小到大排序，从而得到一组参数统计值。
优选地，所述步骤01中，通过与外部联络的模块下载数据至本地。
优选地，所述步骤04中，通过本地通讯模块获取FTP服务器中的文件。
优选地，所述步骤04中，导入后台数据库之后，还包括建立后台数据表，便于监控。
本发明有效的解决了现有系统无法进行存储数据长期分析及监控问题。通过C++通信库建立存储数据的监控文件(Recipe)，建立定时运行机制，无需认为进行操作。系统分析1个月的存储数据从获取到完成图表绘制等工作时间大大缩短，有效的提高了工程师的工作效率，且系统化的数据分析方式确保了数据的准确性。
附图说明
图1为本发明的一个较佳实施例的对存储数据的长期监控方法的流程示意图
具体实施方式
为使本发明的内容更加清楚易懂，以下结合说明书附图，对本发明的内容作进一步说明。当然本发明并不局限于该具体实施例，本领域内的技术人员所熟知的一般替换也涵盖在本发明的保护范围内。
以下结合附图1和具体实施例对本发明作进一步详细说明。需说明的是，附图均采用非常简化的形式、使用非精准的比例，且仅用以方便、清晰地达到辅助说明本实施例的目的。
请参阅图1，本实施例的对存储数据的长期监控方法，包括：
步骤01：下载数据至本地；这里，通过与外部联络的模块下载数据至本地。
步骤02：对存储数据进行格式转换，同时进行参数统计值计算，生成存储数据监控系统文件；
具体的，将各参数值从小到大排序，从而得到一组参数统计值。
步骤03：将该存储数据监控系统文件上传至FTP服务器中；
这里，FTP服务器可以根据实际环境来建立。
步骤04：通过同步脚本定时获取FTP服务器中的文件，导入后台数据库；
这里，通过本地通讯模块获取FTP服务器中的文件。导入后台数据库之后，还包括建立后台数据表，便于监控。
步骤05：通过C++通信库建立用于监控的文件，并且进行数据监控分析；
这里，通过C++通信库可以采用常规的ACE程序等。通过用于监控的文件(Recipe文件)来进行数据监控分析，包括：根据用户需求，基于前面步骤04得到的文件和C++通信库，来建立Recipe文件，以便工程师可以系统化的分析监控数据。
步骤06：生成报告。
虽然本发明已以较佳实施例揭示如上，然所述实施例仅为了便于说明而举例而已，并非用以限定本发明，本领域的技术人员在不脱离本发明精神和范围的前提下可作若干的更动与润饰，本发明所主张的保护范围应以权利要求书所述为准。

Claims (5)

1.一种对存储数据的长期监控方法，包括：
步骤01：下载数据至本地；
步骤02：对存储数据进行格式转换，同时进行参数统计值计算，生成存储数据监控系统文件；
步骤03：将该存储数据监控系统文件上传至FTP服务器中；
步骤04：通过同步脚本定时获取FTP服务器中的文件，导入后台数据库；
步骤05：通过C++通信库建立用于监控的文件，并且进行数据监控分析；
步骤06：生成报告。
2.根据权利要求1所述的方法，其特征在于，所述步骤02中，将各参数值从小到大排序，从而得到一组参数统计值。
3.根据权利要求1所述的方法，其特征在于，所述步骤01中，通过与外部联络的模块下载数据至本地。
4.根据权利要求1所述的方法，其特征在于，所述步骤04中，通过本地通讯模块获取FTP服务器中的文件。
5.根据权利要求1所述的方法，其特征在于，所述步骤04中，导入后台数据库之后，还包括建立后台数据表，便于监控。
CN201610703054.3A 2016-08-22 2016-08-22 一种对存储数据的长期监控方法 Pending CN106294852A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610703054.3A CN106294852A (zh) 2016-08-22 2016-08-22 一种对存储数据的长期监控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610703054.3A CN106294852A (zh) 2016-08-22 2016-08-22 一种对存储数据的长期监控方法

Publications (1)

Publication Number Publication Date
CN106294852A true CN106294852A (zh) 2017-01-04

Family

ID=57661137

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610703054.3A Pending CN106294852A (zh) 2016-08-22 2016-08-22 一种对存储数据的长期监控方法

Country Status (1)

Country Link
CN (1) CN106294852A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109495556A (zh) * 2018-10-31 2019-03-19 海南高灯科技有限公司 一种文件处理方法及装置
CN109710605A (zh) * 2017-10-25 2019-05-03 卓望数码技术（深圳）有限公司 一种设备信息自动化采集装置以及方法
CN112612811A (zh) * 2020-12-24 2021-04-06 航天信息股份有限公司 一种数据导入方法、装置、电子设备及存储介质
CN114500232A (zh) * 2022-01-24 2022-05-13 上海华力微电子有限公司 一种工厂网络中间件监控系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1346461A (zh) * 1999-03-24 2002-04-24 诺基亚网络有限公司 应用最后出现和滑动窗口技术确定最小和最大值的系统和方法
CN101626521A (zh) * 2009-08-11 2010-01-13 广州杰赛科技股份有限公司 电视网络监控方法、监控终端及监控系统
US20100049745A1 (en) * 2008-08-21 2010-02-25 Russell Aebig Method of implementing an organization's policy on spreadsheet documents monitored using a spreadsheet risk reconnaissance network
CN104268173A (zh) * 2014-09-15 2015-01-07 中国工商银行股份有限公司 集中式数据监控方法、装置及系统
CN104778551A (zh) * 2015-04-15 2015-07-15 国网湖南省电力公司 一种可视化电网设计与分析方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1346461A (zh) * 1999-03-24 2002-04-24 诺基亚网络有限公司 应用最后出现和滑动窗口技术确定最小和最大值的系统和方法
US20100049745A1 (en) * 2008-08-21 2010-02-25 Russell Aebig Method of implementing an organization's policy on spreadsheet documents monitored using a spreadsheet risk reconnaissance network
CN101626521A (zh) * 2009-08-11 2010-01-13 广州杰赛科技股份有限公司 电视网络监控方法、监控终端及监控系统
CN104268173A (zh) * 2014-09-15 2015-01-07 中国工商银行股份有限公司 集中式数据监控方法、装置及系统
CN104778551A (zh) * 2015-04-15 2015-07-15 国网湖南省电力公司 一种可视化电网设计与分析方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109710605A (zh) * 2017-10-25 2019-05-03 卓望数码技术（深圳）有限公司 一种设备信息自动化采集装置以及方法
CN109710605B (zh) * 2017-10-25 2022-12-16 卓望数码技术（深圳）有限公司 一种设备信息自动化采集装置以及方法
CN109495556A (zh) * 2018-10-31 2019-03-19 海南高灯科技有限公司 一种文件处理方法及装置
CN109495556B (zh) * 2018-10-31 2021-04-16 深圳高灯计算机科技有限公司 一种文件处理方法及装置
CN112612811A (zh) * 2020-12-24 2021-04-06 航天信息股份有限公司 一种数据导入方法、装置、电子设备及存储介质
CN114500232A (zh) * 2022-01-24 2022-05-13 上海华力微电子有限公司 一种工厂网络中间件监控系统

Similar Documents

Publication Publication Date Title
CN110147411B (zh) 数据同步方法、装置、计算机设备及存储介质
CN106294852A (zh) 一种对存储数据的长期监控方法
CN110737594A (zh) 自动生成测试用例的数据库标准符合性测试方法及装置
CN104215853B (zh) 一种电能质量监测系统数据采集方法
US20150227577A1 (en) Method and device for guaranteeing consistency of planning data
CN103984769A (zh) 一种用例数据管理存储方法
CN103955647A (zh) 一种系统漏洞扫描方法
CN105574032A (zh) 规则匹配运算方法及装置
CN104268050A (zh) 一种简便的测试内存带宽的方法
CN105446824B (zh) 表增量获取方法及异地数据备份方法
CN105302616A (zh) 软件远程即时更新升级系统及方法
CN107168883B (zh) 一种api数据自动化测试方法
CN109583710A (zh) 一种用于核电厂变更的标准化管理方法和系统
CN104376086A (zh) 数据处理方法和装置
CN103473654A (zh) 一种用于电力erp系统的资产数据清理辅助方法及系统
CN103617171A (zh) 一种海量历史数据快速查询系统
CN111736568A (zh) 一种实时数据库的故障快速诊断方法及系统
CN102377580A (zh) 性能数据的上传方法和设备
CN103457957B (zh) 一种具有自适应功能的网络渗透测试系统及方法
CN105510883A (zh) 二次雷达数字化询问编码实现方法
CN103078766A (zh) 网络流量的审计方法、装置及网络设备
CN203261361U (zh) 一种基于SQL服务器和.Net技术的数据库系统
CN112612811A (zh) 一种数据导入方法、装置、电子设备及存储介质
CN101887455B (zh) 多版本报表数据管理方法和系统
CN105653207A (zh) 一种闪存接口信息的实时解析方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170104

RJ01 Rejection of invention patent application after publication