CN108763040B - 数据采集方法及数据采集装置 - Google Patents
数据采集方法及数据采集装置 Download PDFInfo
- Publication number
- CN108763040B CN108763040B CN201810380364.5A CN201810380364A CN108763040B CN 108763040 B CN108763040 B CN 108763040B CN 201810380364 A CN201810380364 A CN 201810380364A CN 108763040 B CN108763040 B CN 108763040B
- Authority
- CN
- China
- Prior art keywords
- acquired
- data acquisition
- starting time
- data
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
Abstract
本发明提供了一种数据采集方法及数据采集装置,其中,数据采集方法包括获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;获取每个所述待采集设备的标示信息;根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集。通过本发明的技术方案,实现了对设备数据的自动采集,提高了数据采集的精度和效率。
Description
技术领域
本发明涉及数据采集技术领域,具体而言,涉及一种数据采集方法和一种数据采集装置。
背景技术
随着信息技术的发展,数据中心的设备越来越多。为了保证各个设备的正常运行,需对各个设备的工作状态进行实时监控,通常会根据各个设备上的数据来监控其工作状态。目前,在对设备的数据进行采集时,需要运维人员逐个登陆设备,对各个设备上的数据进行采集。由于数据中心的设备较多,需要采集的数据量较大,人为进行数据采集不仅效率较低,且容易出错。
发明内容
本发明正是基于上述技术问题至少之一,提出了一种新的数据采集方案,实现了对设备数据的自动采集,提高了数据采集的精度和效率。
有鉴于此,本发明提出了一种新的数据采集方法,包括:获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;获取每个所述待采集设备的标示信息;根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集。
在该技术方案中,通过获取包含有至少一个待采集设备和每个待采集设备的待采集数据,以及获取每个待采集设备的标示信息,并根据每个待采集设备的标示信息和待采集数据,来确定每个待采集设备的数据采集启动时间,并按照每个待采集设备的数据采集启动时间,对每个待采集设备的待采集数据进行采集,实现了设备数据的自动化采集,无需人为一一登录设备进行采集,有效避免了人为操作带来的误差,提高了数据采集的精度和效率。
在上述技术方案中,优选地,所述根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间的步骤,具体包括:根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;获取每个所述待采集设备的待采集数据对应的优先级等级;对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
在上述任一项技术方案中,优选地,还包括:检测处于同一数据采集启动时间的待采集设备的数量;若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集;若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
在该技术方案中,考虑到若处于同一数据采集启动时间的待采集设备较多时,可能会加重系统负荷,所以检测到处于同一数据采集启动时间的待采集设备的数量大于等于预定数量时,采用分批次对待采集设备进行数据采集,有效避免系统负荷过重,当检测到处于同一数据采集启动时间的待采集设备的数量小于预定数量时,同时对待采集设备进行数据采集,确保数据采集效率。
在上述任一项技术方案中,优选地,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
根据本发明的第二方面,提出了一种数据采集装置,包括:第一获取单元,用于获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;第二获取单元,用于获取每个所述待采集设备的标示信息;确定单元,用于根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;采集单元,用于根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集。
在该技术方案中,通过获取包含有至少一个待采集设备和每个待采集设备的待采集数据,以及获取每个待采集设备的标示信息,并根据每个待采集设备的标示信息和待采集数据,来确定每个待采集设备的数据采集启动时间,并按照每个待采集设备的数据采集启动时间,对每个待采集设备的待采集数据进行采集,实现了设备数据的自动化采集,无需人为一一登录设备进行采集,有效避免了人为操作带来的误差,提高了数据采集的精度和效率。
在上述技术方案中,优选地,所述确定单元,具体用于:根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;获取每个所述待采集设备的待采集数据对应的优先级等级;对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
在上述任一项技术方案中,优选地,还包括:检测单元,用于检测处于同一数据采集启动时间的待采集设备的数量;所述采集单元,具体用于若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集,若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
在该技术方案中,考虑到若处于同一数据采集启动时间的待采集设备较多时,可能会加重系统负荷,所以检测到处于同一数据采集启动时间的待采集设备的数量大于等于预定数量时,采用分批次对待采集设备进行数据采集,有效避免系统负荷过重,当检测到处于同一数据采集启动时间的待采集设备的数量小于预定数量时,同时对待采集设备进行数据采集,确保数据采集效率。
在上述任一项技术方案中,优选地,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
通过以上技术方案,实现了对设备数据的自动采集,提高了数据采集的精度和效率。
附图说明
图1示出了根据本发明的实施例的数据采集方法的示意流程图;
图2示出了根据本发明的实施例的数据采集装置的示意框图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
图1示出了根据本发明的实施例的数据采集方法的示意流程图。
如图1所示,根据本发明的实施例的数据采集方法,包括:
步骤102,获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据。
步骤104,获取每个所述待采集设备的标示信息。
步骤106,根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间。
步骤108,根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集。
在该技术方案中,通过获取包含有至少一个待采集设备和每个待采集设备的待采集数据,以及获取每个待采集设备的标示信息,并根据每个待采集设备的标示信息和待采集数据,来确定每个待采集设备的数据采集启动时间,并按照每个待采集设备的数据采集启动时间,对每个待采集设备的待采集数据进行采集,实现了设备数据的自动化采集,无需人为一一登录设备进行采集,有效避免了人为操作带来的误差,提高了数据采集的精度和效率。
在上述技术方案中,优选地,所述根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间的步骤,具体包括:根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;获取每个所述待采集设备的待采集数据对应的优先级等级;对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
在上述任一项技术方案中,优选地,还包括:检测处于同一数据采集启动时间的待采集设备的数量;若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集;若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
在该技术方案中,考虑到若处于同一数据采集启动时间的待采集设备较多时,可能会加重系统负荷,所以检测到处于同一数据采集启动时间的待采集设备的数量大于等于预定数量时,采用分批次对待采集设备进行数据采集,有效避免系统负荷过重,当检测到处于同一数据采集启动时间的待采集设备的数量小于预定数量时,同时对待采集设备进行数据采集,确保数据采集效率。
在上述任一项技术方案中,优选地,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
图2示出了根据本发明的实施例的数据采集装置的示意框图。
如图2所示,根据本发明的实施例的数据采集装置200,包括:第一获取单元202、第二获取单元204、确定单元206和采集单元208。
其中,第一获取单元202用于获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;第二获取单元204用于获取每个所述待采集设备的标示信息;确定单元206用于根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;采集单元208用于根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集。
在该技术方案中,通过获取包含有至少一个待采集设备和每个待采集设备的待采集数据,以及获取每个待采集设备的标示信息,并根据每个待采集设备的标示信息和待采集数据,来确定每个待采集设备的数据采集启动时间,并按照每个待采集设备的数据采集启动时间,对每个待采集设备的待采集数据进行采集,实现了设备数据的自动化采集,无需人为一一登录设备进行采集,有效避免了人为操作带来的误差,提高了数据采集的精度和效率。
在上述技术方案中,优选地,所述确定单元206具体用于:根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;获取每个所述待采集设备的待采集数据对应的优先级等级;对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
在上述任一项技术方案中,优选地,还包括:检测单元210用于检测处于同一数据采集启动时间的待采集设备的数量;所述采集单元208具体用于若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集,若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
在该技术方案中,考虑到若处于同一数据采集启动时间的待采集设备较多时,可能会加重系统负荷,所以检测到处于同一数据采集启动时间的待采集设备的数量大于等于预定数量时,采用分批次对待采集设备进行数据采集,有效避免系统负荷过重,当检测到处于同一数据采集启动时间的待采集设备的数量小于预定数量时,同时对待采集设备进行数据采集,确保数据采集效率。
在上述任一项技术方案中,优选地,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
以上结合附图详细说明了本发明的技术方案,本发明的技术方案提出了一种新的数据采集方案,实现了对设备数据的自动采集,提高了数据采集的精度和效率。
上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (6)
1.一种数据采集方法,其特征在于,包括:
获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;
获取每个所述待采集设备的标示信息;
根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;
根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集;所述根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间的步骤,具体包括:
根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;
获取每个所述待采集设备的待采集数据对应的优先级等级;
对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
2.根据权利要求1所述的数据采集方法,其特征在于,还包括:
检测处于同一数据采集启动时间的待采集设备的数量;
若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集;
若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
3.根据权利要求1或2所述的数据采集方法,其特征在于,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
4.一种数据采集装置,其特征在于,包括:
第一获取单元,用于获取数据采集任务,其中,所述数据采集任务包括至少一个待采集设备和每个所述待采集设备的待采集数据;
第二获取单元,用于获取每个所述待采集设备的标示信息;
确定单元,用于根据每个所述待采集设备的标示信息和每个所述待采集设备的待采集数据,确定每个所述待采集设备的数据采集启动时间;
采集单元,用于根据每个所述待采集设备的数据采集启动时间,对每个所述待采集设备的待采集数据进行采集;
所述确定单元,具体用于:
根据预存储的标示信息与加权值之间的关联关系,查找与每个所述待采集设备的标示信息对应的加权值;
获取每个所述待采集设备的待采集数据对应的优先级等级;
对于每个所述待采集设备,计算其标示信息对应的加权值与其待采集数据对应的优先级等级之间的目标乘积值,并根据预存储的乘积值与数据采集启动时间之间的关联关系,查找所述目标乘积值对应的数据采集启动时间,以作为每个所述待采集设备的数据采集启动时间。
5.根据权利要求4所述的数据采集装置,其特征在于,还包括:
检测单元,用于检测处于同一数据采集启动时间的待采集设备的数量;
所述采集单元,具体用于若处于同一数据采集启动时间的待采集设备的数量大于等于预定数量,则分批次对处于同一数据采集启动时间的待采集设备进行数据采集,若处于同一数据采集启动时间的待采集设备的数量小于预定数量,则同时对处于同一数据采集启动时间的待采集设备进行数据采集。
6.根据权利要求4或5所述的数据采集装置,其特征在于,每个所述待采集设备的标示信息包括设备名称或设备IP地址信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810380364.5A CN108763040B (zh) | 2018-04-25 | 2018-04-25 | 数据采集方法及数据采集装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810380364.5A CN108763040B (zh) | 2018-04-25 | 2018-04-25 | 数据采集方法及数据采集装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108763040A CN108763040A (zh) | 2018-11-06 |
CN108763040B true CN108763040B (zh) | 2021-07-16 |
Family
ID=64011763
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810380364.5A Active CN108763040B (zh) | 2018-04-25 | 2018-04-25 | 数据采集方法及数据采集装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108763040B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109742810A (zh) * | 2019-01-11 | 2019-05-10 | 北京京运通科技股份有限公司 | 风电集中监控管理系统及管理方法 |
WO2021102838A1 (zh) * | 2019-11-28 | 2021-06-03 | 西门子股份公司 | 确定采集频率的方法、装置、计算设备和存储介质 |
CN112968789B (zh) * | 2019-12-12 | 2024-02-27 | 中兴通讯股份有限公司 | 数据采集方法、装置、计算机设备及计算机可读介质 |
CN111984420A (zh) * | 2020-09-02 | 2020-11-24 | 深圳市玄羽科技有限公司 | 数据采集方法及系统、云平台 |
CN115374100A (zh) * | 2022-10-25 | 2022-11-22 | 山东恒远智能科技有限公司 | 基于数据中台技术的智慧生产数据管理系统与方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101808007A (zh) * | 2010-02-22 | 2010-08-18 | 烽火通信科技股份有限公司 | 网管实时性能数据采集的方法 |
CN105282094A (zh) * | 2014-06-16 | 2016-01-27 | 北京神州泰岳软件股份有限公司 | 一种数据采集方法和系统 |
CN106686619A (zh) * | 2015-11-06 | 2017-05-17 | 大唐移动通信设备有限公司 | 一种性能评估方法和设备 |
CN106875646A (zh) * | 2015-12-11 | 2017-06-20 | 华为技术有限公司 | 数据采集方法和设备 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9202174B2 (en) * | 2013-01-28 | 2015-12-01 | Daniel A Dooley | Automated tracker and analyzer |
-
2018
- 2018-04-25 CN CN201810380364.5A patent/CN108763040B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101808007A (zh) * | 2010-02-22 | 2010-08-18 | 烽火通信科技股份有限公司 | 网管实时性能数据采集的方法 |
CN105282094A (zh) * | 2014-06-16 | 2016-01-27 | 北京神州泰岳软件股份有限公司 | 一种数据采集方法和系统 |
CN106686619A (zh) * | 2015-11-06 | 2017-05-17 | 大唐移动通信设备有限公司 | 一种性能评估方法和设备 |
CN106875646A (zh) * | 2015-12-11 | 2017-06-20 | 华为技术有限公司 | 数据采集方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108763040A (zh) | 2018-11-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108763040B (zh) | 数据采集方法及数据采集装置 | |
CN106250258B (zh) | 一种磁盘故障定位方法及装置 | |
CN110207784B (zh) | 变压器油位告警方法、装置及终端设备 | |
US20170142148A1 (en) | Method and system for obtaining and analyzing forensic data in a distributed computer infrastructure | |
JP2018519586A5 (zh) | ||
EP3173763A1 (en) | Machine component diagnosis system and server thereof | |
WO2017051631A1 (ja) | 故障診断装置、故障診断方法、及び故障診断プログラム | |
CN105549508B (zh) | 一种基于信息合并的报警方法及装置 | |
CN107770805B (zh) | 终端的标识信息的判定方法及装置 | |
CN105872118A (zh) | Dns网络中节点服务器的检测方法及设备 | |
CN114387762A (zh) | 一种楼宇数据管理的方法、装置、设备及存储介质 | |
CN101226501A (zh) | 一种监控测试的方法和监控测试装置 | |
CN111934906A (zh) | 等级保护的人工智能测评方法、客户端及系统 | |
CN114061659A (zh) | 设备监测方法、装置、电子设备、存储介质及程序产品 | |
CN109725220B (zh) | 一种变压器油冷却回路的检测方法、系统及装置 | |
CN110874311A (zh) | 数据库检测方法、装置、计算机设备和存储介质 | |
CN112637888B (zh) | 覆盖空洞区域识别方法、装置、设备及可读存储介质 | |
CN108629310B (zh) | 一种工程管理监督方法及装置 | |
CN111832983A (zh) | 一种资产录入信息的检测方法、装置及系统 | |
SE532568C2 (sv) | Metod för att identifiera en mobiltelefon | |
CN111654405B (zh) | 通信链路的故障节点方法、装置、设备及存储介质 | |
CN110069382B (zh) | 软件监控方法、服务器、终端设备、计算机设备及介质 | |
JP2016197309A (ja) | 中継装置及びプログラム | |
JP2006268515A (ja) | Pciカ−ド障害管理方式 | |
CN107247871A (zh) | 项目检测时间核查预警方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |