CN115314426A - 数据采集方法、系统、电子设备和存储介质 - Google Patents

数据采集方法、系统、电子设备和存储介质 Download PDF

Info

Publication number
CN115314426A
CN115314426A CN202210825773.8A CN202210825773A CN115314426A CN 115314426 A CN115314426 A CN 115314426A CN 202210825773 A CN202210825773 A CN 202210825773A CN 115314426 A CN115314426 A CN 115314426A
Authority
CN
China
Prior art keywords
acquisition
data
data acquisition
network device
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210825773.8A
Other languages
English (en)
Inventor
刘爱军
朱道彦
杨春晖
王艳辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visionvera Information Technology Co Ltd
Original Assignee
Visionvera Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visionvera Information Technology Co Ltd filed Critical Visionvera Information Technology Co Ltd
Priority to CN202210825773.8A priority Critical patent/CN115314426A/zh
Publication of CN115314426A publication Critical patent/CN115314426A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/12Network monitoring probes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例提供了一种数据采集方法和装置。所述方法包括:确定目标业务中各个网络设备的设备类型,获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息,接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到,使得针对目标业务中的各个网络设备,根据其在目标业务中的设备类型对应的采集操作包,自动采集数据,从而实现在目标业务中自动触发采集,并仅采集设备类型对应的数据,实现了数据采集的智能化和自动化,提高了采集数据的实时性,有效性。

Description

数据采集方法、系统、电子设备和存储介质
技术领域
本发明涉及数据处理技术领域,特别是涉及一种数据采集方法、一种数据采集系统、一种电子设备以及一种计算机可读存储介质。
背景技术
随着企业网络环境中的服务器和终端设备的增加,给运维工作带来了更多挑战。每起重大事件的背后,必然有着更多起比较严重的故障,和很多个隐藏故障。
传统运维工作过分依赖技术人员,技能成熟度越高,收集信息和分析越全面,对问题处理和反应速度就越快,反之会延长故障恢复时间。随着视联网的飞速发展,网内设备海量增加,随着规模的不断扩大,运维工作量也将呈几何级增长。
在出现异常情况时,运维人员不得不登录到每一台服务器和设备上去查看日志,占用大量人力和物力资源,数据采集的智能化和自动化程度偏低。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种数据采集方法、相应的一种数据采集系统、一种电子设备以及一种计算机可读存储介质。
为了解决上述问题,本发明实施例公开了一种数据采集方法,应用于服务器端,包括:
确定目标业务中各个网络设备的设备类型;
获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到。
可选地,所述网络设备包括第一网络设备,在所述接收数据采集结果之前,所述方法还包括:
将所述采集操作包发送给所述各个网络设备;
所述接收数据采集结果包括:
接收所述第一网络设备采集的第一数据采集结果。
可选地,所述网络设备还包括第二网络设备,在所述接收所述第一网络设备采集的第一数据采集结果之后,所述接收数据采集结果还包括:
根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息;
向所述第二网络设备发送所述第一采集指令信息;
接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
可选地,所述网络设备包括终端设备和除终端设备之外的网络设备,所述确定目标业务中各个网络设备的设备类型包括:
获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型;
根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
本发明实施例还公开了一种数据采集方法,应用于网络设备,包括:
接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
根据所述采集操作包,执行所述采集指令信息采集数据。
可选地,所述网络设备包括第一网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据包括:
所述第一网络设备根据所述触发规则信息执行监测操作,在所述第一网络设备满足所述触发规则信息的触发条件的情况下,执行采集指令信息;
根据所述采集指令信息,执行数据采集操作,获得第一数据采集结果;
将所述第一数据采集结果作为数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据还包括:
所述第二网络设备接收第一采集指令信息,其中,所述第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的;
所述第二网络设备根据所述第一采集指令信息,执行采集数据操作,获得第二数据采集结果;
将所述第二数据采集结果作为数据采集结果。
本发明实施例还公开了一种数据采集系统,所述系统包括:服务器端和至少一个网络设备;
所述服务器端包括:
类型确定模块,用于确定目标业务中各个网络设备的设备类型;
操作包生成模块,用于获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
结果接收模块,用于接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到;
所述网络设备包括:
操作包接收模块,用于接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
数据采集模块,用于根据所述采集操作包,执行所述采集指令信息采集数据,发送所述数据采集结果。
可选地,所述网络设备包括第一网络设备,所述装置还包括:
操作包发送模块,用于在所述接收数据采集结果之前,将所述采集操作包发送给所述各个网络设备;
所述结果接收模块包括:
第一结果接收子模块,用于接收所述第一网络设备采集的第一数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述结果接收模块还包括:
信息确定子模块,用于在所述接收所述第一网络设备采集的第一数据采集结果之后,根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息;
信息发送子模块,用于向所述第二网络设备发送所述第一采集指令信息;
第二结果接收子模块,用于接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
可选地,所述网络设备包括终端设备和除终端设备之外的网络设备,所述类型确定模块包括:
模式获取子模块,用于获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型;
类型确定子模块,用于根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
可选地,所述网络设备包括第一网络设备,所述数据采集模块包括:
触发子模块,用于所述第一网络设备根据所述触发规则信息执行监测操作,在所述第一网络设备满足所述触发规则信息的触发条件的情况下,执行采集指令信息;
结果获得子模块,用于根据所述采集指令信息,执行数据采集操作,获得第一数据采集结果;
第一结果作为子模块,用于将所述第一数据采集结果作为数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述数据采集模块还包括:
信息接收子模块,用于所述第二网络设备接收第一采集指令信息,其中,所述第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的;
采集执行子模块,用于所述第二网络设备根据所述第一采集指令信息,执行采集数据操作,获得第二数据采集结果;
第二结果作为子模块,用于将所述第二数据采集结果作为数据采集结果。
本发明实施例还公开了一种电子设备,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当由所述一个或多个处理器执行时,使得所述装置执行如上所述任一项所述的数据采集方法。
本发明实施例还公开了一种计算机可读存储介质,其存储的计算机程序使得处理器执行如上所述任一项所述的数据采集方法。
本发明实施例包括以下优点:
本发明实施例确定目标业务中各个网络设备的设备类型,获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息,接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到,使得针对目标业务中的各个网络设备,根据其在目标业务中的设备类型对应的采集操作包,自动采集数据,从而实现在目标业务中自动触发采集,并仅采集设备类型对应的数据,实现了数据采集的智能化和自动化,提高了采集数据的实时性,有效性。
附图说明
图1是本发明的一种数据采集方法实施例的步骤流程图;
图2是数据采集系统的示意图;
图3是本发明的又一种数据采集方法实施例的步骤流程图;
图4是本发明的一种数据采集系统实施例的结构框图;
图5是根据一示例性实施例示出的一种用于数据采集的电子设备的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明的一种数据采集方法实施例的步骤流程图,应用于服务器端,该方法具体可以包括如下步骤:
步骤101,确定目标业务中各个网络设备的设备类型。
在本发明实施例中,服务器端是用来对业务中各个网络设备进行数据采集的服务端。在一些实施例中,除了数据采集之外,服务器端还可以对采集的数据进行分析,以便确定业务中出现的问题,或者网络设备出现的问题,进一步还可以给出问题的解决方案,例如,根据采集的数据,从数据库中查找匹配的问题及其解决方案。
在本发明实施例中,网络设备是连接到网络中的物理实体,例如,终端设备、服务器、交换机等,或者其他任意适用的网络设备,本发明实施例对此不做限制。业务是指由多个网络设备参与的活动,例如,视频会议、在线教学等,或者其他任意适用的业务,本发明实施例对此不做限制。本发明实施例提出针对目标业务进行数据采集的方法。
在本发明实施例中,网络设备的设备类型是指网络设备在目标业务中的类型,也就是说,一个网络设备在一个业务中的设备类型可以与在另一个业务中的设备类型不同。设备类型可以有多种,例如,以视频会议业务为例,终端设备的设备类型可以有主席、发言人、听众等,具体可以包括任意适用的设备类型,本发明实施例对此不做限制。网络设备的设备类型可以直接获取到,也可以根据多个终端设备的设备类型,确定服务端的设备类型,或者其他任意适用的实现方式,本发明实施例对此不做限制。
步骤102,获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息。
在本发明实施例中,预先存储有各种设备类型对应的采集规则包,以便服务器端根据网络设备的设备类型,获取对应的采集规则包。采集规则包包括触发规则信息和采集指令信息。
其中,触发规则信息是指在出现何种情况时触发采集的规则信息。例如,网络设备的处理器占用达到预设值,或者日志数据出现预设错误代码,则触发采集。采集指令信息是指指示网络设备进行采集的指令信息。例如,采集的日志数据的路径,采集日志数据中的哪些数据的指令。
在本发明实施例中,采集操作包是目标业务中的网络设备执行数据采集的操作包。采集操作包是由采集规则包形成的。具体实现时,每个网络设备分别有自身的设备类型对应的一个采集操作包,或者目标业务有一个采集操作包,该采集操作包中记录有各种设备类型和采集规则包及其对应关系。
例如,如图2所示的数据采集系统的示意图。规则库中存储不同设备类型进行采集的采集规则包。采集规则包中包括出现异常时对应的处理方案的逻辑规则、算法用到的正则表达式等。服务器端的分析模块对网络设备的设备类型和规则库中的信息进行匹配,得到不同设备类型的采集操作包,采集操作包包括触发规则信息和采集指令信息。根据网络设备及其设备类型,从规则库中查找出目标业务中各种设备类型进行采集的采集规则包,从而生成采集操作包。
步骤103,接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到。
在本发明实施例中,目标业务中的一个或多个网络设备根据采集操作包采集,得到数据采集结果,再上传到服务器端,服务器端接收数据采集结果。
依据本发明实施例,通过确定目标业务中各个网络设备的设备类型,获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息,接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到,使得针对目标业务中的各个网络设备,根据其在目标业务中的设备类型对应的采集操作包,自动采集数据,从而实现在目标业务中自动触发采集,并仅采集设备类型对应的数据,实现了数据采集的智能化和自动化,提高了采集数据的实时性,有效性。
在本发明的一种可选实施例中,网络设备包括第一网络设备,在接收数据采集结果之前,还可以包括:将所述采集操作包发送给所述各个网络设备;相应的,接收数据采集结果包括:接收所述第一网络设备采集的第一数据采集结果。
具体实现时,若每个网络设备分别有自身的设备类型对应的一个采集操作包,则根据各个网络设备的设备类型,发送对应的采集包。若目标业务有一个采集操作包,该采集操作包中记录有各种设备类型和采集规则包及其对应关系,则将该采集操作包发送给各个网络设备。
第一网络设备可以是一个或多个。第一网络设备在触发采集后,采集数据,得到第一数据采集结果。将第一数据采集结果发送给服务器端。服务器端接收第一数据采集结果。
例如,各个网络设备实时对自身进行监测,检测是否出现符合设备类型对应的触发规则信息中的触发条件的情况。其中,触发规则信息可以包括多种触发条件。网络设备可以监测到符合设备类型对应的触发规则信息中的一种或多种触发条件的情况。将监测到符合触发条件的情况的网络设备,记为第一网络设备。如图2所示,终端设备或服务器端的诊测模块实时监测生成的日志,诊断和检测到符合触发规则信息中触发条件的情况。终端设备或其他网络设备上激活自采集模块,使用spell(Streaming Parsing of System EventLogs,系统事件日志的流式分析)算法根据采集执行信息,执行采集指令,采集符合采集规则的日志数据。只采集匹配到的条目,上传最小有效信息到信息存储库。并发送本次符合的触发条件到调度模块。其中,spell算法是一种基于最长公共子序列的在线流处理日志解析方法,用于事件日志的结构化流式解析,实现了动态接受日志输入,实时处理输入,不断生成新的日志模板。此方法的优点是可以实现在线实时动态的解析日志,并且即使对于每条实时输入的日志,其检测效率也很高。
这样,当第一网络设备监测到符合触发条件,则执行自采集,实现了出现异常网络设备的实时自动采集,并只采集符合触发采集条件的有效数据。这样网络设备只需要上传匹配条目的数据,大大缩小了数据上传压力,避免每次检测到网络设备故障时需要收集庞大的原始日志数据,导致网络负担过大的问题。
在本发明的一种可选实施例中,网络设备还包括第二网络设备,在接收所述第一网络设备采集的第一数据采集结果之后,接收数据采集结果还可以包括:根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息,向所述第二网络设备发送所述第一采集指令信息,接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
第二网络设备可以是一个设备或者是同一种类型的多个设备亦或是不同种类型的多个设备。第一网络设备将第一数据采集结果发送给服务器端后,服务器端可以根据第一数据采集结果,确定目标业务中需进行采集的一个或多个第二网络设备以及第一采集指令信息。第一采集指令信息是指示第二网络设备进行采集的指令信息。
根据第一数据采集结果,确定目标业务中需进行采集的一个或多个第二网络设备以及第一采集指令信息的实现方式可以包括多种。例如,解析第一数据采集结果,得到第一数据采集结果的数据中包含一个或多个第二网络设备的设备标识,以及第一网络设备采集第一数据采集结果所使用的采集指令信息,根据第一数据采集结果的数据中包含一个或多个第二网络设备的设备标识,确定一个或多个第二网络设备,将第一网络设备采集第一数据采集结果所使用的采集指令信息作为第一采集指令信息。又例如,预先存储数据采集结果和对应的需进行采集的网络设备,对应的采集指令信息,根据第一数据采集结果查找匹配的需进行采集的网络设备,对应的采集指令信息,作为第二网络设备和第一采集指令信息。具体可以包括任意适用的实现方式,本发明实施例对此不做限制。
向第二网络设备发送第一采集指令信息。当接收第一采集指令信息的为多个第二网络设备时,有可能多个第二网络设备的第一采集指令信息都相同,则将第一采集指令信息发送给各个第二网络设备,也有可能各个第二网络设备各自有对应的第一采集指令信息,则向各个第二网络设备发送对应的第一采集指令信息。第二网络设备根据第一采集指令信息,采集数据,得到第二数据采集结果,将第二数据采集结果发送给服务器端。服务器端接收第二数据采集结果。
例如,经验库中存储以前出现过的异常的日志数据和对应的处理方案,还可以存储专家经验推断出的会出现的日志数据和对应的处理方案。处理方案中包括需进行采集的网络设备,以及采集指令信息。如图2所示,服务器端上的分析模块接收到信息存储库中接收到的第一数据采集结果。对第一数据采集结果和经验库中的数据进行匹配,在目标业务所有涉及的网络设备中选择经验库中的第二网络设备。再使用dijkstra(迪杰斯特拉)最优路径算法计算分析本次涉及最少数目的网络设备,并匹配到相应的采集指令信息,生成第二网络设备需要的采集指令信息。第二网络设备上激活自采集模块,使用spell算法执行采集指令,采集符合采集规则的日志数据。只采集匹配到的条目,上传最小有效信息到信息存储库。
这样,出现异常的第一网络设备采集数据后,确定其他需要采集的第二网络设备以及采集指令信息,让其他需要采集的网络设备自动采集,并只采集与第一数据采集结果相关的有效数据。只对与第一数据采集结果相关的网络设备进行采集,避免对所有设备都进行采集,采集范围更准确,而且第二网络设备也只需要上传匹配条目的数据,避免每次检测到网络设备故障时需要收集所有网络设备的原始日志数据,导致网络负担过大的问题。
在本发明的一种可选实施例中,所述网络设备包括终端设备和除终端设备之外的网络设备,确定目标业务中各个网络设备的设备类型的一种具体实现方式中,可以包括:获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型,根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
业务可以分为多种业务场景模式。例如,以视频会议业务为例,会议模式包括大会模式、会商模式等,其中,会商模式指的是四方会议,最多支持四个发言人,其他参会方能同时听见发言人声音以及可以看到发言人画面,大会模式最多支持三个发言人,在默认分屏模式下其他参会方能听见主席和第一发言人的声音,同时可以看见第一发言人的画面。
终端设备是指用于用户信息的输入以及处理结果的输出等的网络设备。例如,视频会议中参数者使用的个人电脑,移动终端等为终端设备。除终端设备之外的网络设备可以是服务器、交换机等。终端标识包括终端号码、终端名称等,或者其他任意适用的标识,用于标识终端设备,本发明实施例对此不做限制。终端设备的设备类型,记为终端设备类型。
在某种业务场景模式下,需要用到的除终端设备外的网络设备通常是固定的,而终端设备则是与目标业务相关的。例如,每次参加视频会议的终端设备不同,但一种会议模式下,所用的服务器、交换机是固定的。
各个终端设备的终端标识和各个终端设备类型,以及业务场景模式是可以直接获取到的。另外还需要根据各个终端设备的终端标识和各个终端设备类型,以及业务场景模式,确定目标业务中除终端设备之外的网络设备及其设备类型。
例如,如图2所示,业务管理端是管理业务的服务器端。在业务管理端发起目标业务时,业务管理端的场景信息采集模块可以采集目标业务的相关信息,即各个终端设备的终端标识和各个终端设备类型,以及业务场景模式等。场景库中存储所有业务场景模式下除终端设备外的网络设备。服务器端的分析模块接收到目标业务的各个终端设备的终端标识和各个终端设备类型,以及业务场景模式。通过对业务场景模式和场景库中的数据的匹配,可以得到目标业务中的除终端设备之外的网络设备及其设备类型。根据终端设备及其终端设备类型,和其他网络设备及其设备类型,生成逻辑关系信息。逻辑关系信息包括目标业务中所有的网络设备及其设备类型。服务器端的调度模块根据逻辑关系信息,下发触发规则信息和采集指令信息到终端设备的采集模块1-N,以及其他网络设备的采集模块。终端设备或其他网络设备的采集模块接收并更新触发规则信息和采集指令信息。
参照图3,示出了本发明的又一种数据采集方法实施例的步骤流程图,应用于网络设备,该方法具体可以包括如下步骤:
步骤201,接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到。
在本发明实施例中,服务器端将采集操作包发送给各个网络设备。网络设备接收采集操作包。
步骤202,根据所述采集操作包,执行所述采集指令信息采集数据,发送所述数据采集结果。
在本发明实施例中,各个网络设备各自根据采集操作包。在满足触发规则信息时,执行采集指令信息,采集数据,得到数据采集结果。网络设备将数据采集结果发送给服务器端。
在本发明的一种可选实施例中,网络设备包括第一网络设备,根据所述采集操作包,执行所述采集指令信息采集数据的一种具体实现方式中,包括:第一网络设备根据所述触发规则信息执行监测操作,在第一网络设备满足触发规则信息的触发条件的情况下,执行采集指令信息;根据采集指令信息,执行数据采集操作,获得第一数据采集结果;将第一数据采集结果作为数据采集结果。具体实现方式可以参见前述实施例中的描述,此处不另赘述。
在本发明的一种可选实施例中,网络设备还包括第二网络设备,根据所述采集操作包,执行所述采集指令信息采集数据的一种具体实现方式中,还包括:第二网络设备接收第一采集指令信息,其中,第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的。第二网络设备根据第一采集指令信息,执行采集数据操作,获得第二数据采集结果,将第二数据采集结果作为数据采集结果。具体实现方式可以参见前述实施例中的描述,此处不另赘述。
依据本发明实施例,通过接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到,根据所述采集操作包,执行所述采集指令信息采集数据,发送所述数据采集结果,使得针对目标业务中的各个网络设备,根据其在目标业务中的设备类型对应的采集操作包,自动采集数据,从而实现在目标业务中自动触发采集,并仅采集设备类型对应的数据,实现了数据采集的智能化和自动化,提高了采集数据的实时性,有效性。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图4示出了本发明的一种数据采集系统实施例的结构框图,数据采集系统具体可以包括:
服务器端301和至少一个网络设备302;
所述服务器端301包括:
类型确定模块3011,用于确定目标业务中各个网络设备的设备类型;
操作包生成模块3012,用于获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
结果接收模块3013,用于接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到;
所述网络设备302包括:
操作包接收模块3021,用于接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
数据采集模块3022,用于根据所述采集操作包,执行所述采集指令信息采集数据,发送所述数据采集结果。
可选地,所述网络设备包括第一网络设备,所述装置还包括:
操作包发送模块,用于在所述接收数据采集结果之前,将所述采集操作包发送给所述各个网络设备;
所述结果接收模块包括:
第一结果接收子模块,用于接收所述第一网络设备采集的第一数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述结果接收模块还包括:
信息确定子模块,用于在所述接收所述第一网络设备采集的第一数据采集结果之后,根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息;
信息发送子模块,用于向所述第二网络设备发送所述第一采集指令信息;
第二结果接收子模块,用于接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
可选地,所述网络设备包括终端设备和除终端设备之外的网络设备,所述类型确定模块包括:
模式获取子模块,用于获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型;
类型确定子模块,用于根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
可选地,所述网络设备包括第一网络设备,所述数据采集模块包括:
触发子模块,用于所述第一网络设备根据所述触发规则信息执行监测操作,在所述第一网络设备满足所述触发规则信息的触发条件的情况下,执行采集指令信息;
结果获得子模块,用于根据所述采集指令信息,执行数据采集操作,获得第一数据采集结果;
第一结果作为子模块,用于将所述第一数据采集结果作为数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述数据采集模块还包括:
信息接收子模块,用于所述第二网络设备接收第一采集指令信息,其中,所述第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的;
采集执行子模块,用于所述第二网络设备根据所述第一采集指令信息,执行采集数据操作,获得第二数据采集结果;
第二结果作为子模块,用于将所述第二数据采集结果作为数据采集结果。
依据本发明实施例,通过确定目标业务中各个网络设备的设备类型,获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息,接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到,使得针对目标业务中的各个网络设备,根据其在目标业务中的设备类型对应的采集操作包,自动采集数据,从而实现在目标业务中自动触发采集,并仅采集设备类型对应的数据,实现了数据采集的智能化和自动化,提高了采集数据的实时性,有效性。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
图5是根据一示例性实施例示出的一种用于数据采集的电子设备600的结构框图。例如,电子设备600可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图5,电子设备600可以包括以下一个或多个组件:处理组件602,存储器604,电源组件606,多媒体组件608,音频组件610,输入/输出(I/O)的接口612,传感器组件614,以及通信组件616。
处理组件602通常控制电子设备600的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器420来执行指令,以完成上述的停炉控制方法的全部或部分步骤。此外,处理组件602可以包括一个或多个模块,便于处理组件602和其他组件之间的交互。例如,处理部件602可以包括多媒体模块,以方便多媒体组件608和处理组件602之间的交互。
存储器604被配置为存储各种类型的数据以支持在设备600的操作。这些数据的示例包括用于在电子设备600上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件604为电子设备600的各种组件提供电力。电力组件604可以包括电源管理系统,一个或多个电源,及其他与为电子设备600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述电子设备600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件608包括一个前置摄像头和/或后置摄像头。当电子设备600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如,音频组件610包括一个麦克风(MIC),当电子设备600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中,音频组件610还包括一个扬声器,用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器,用于为电子设备600提供各个方面的状态评估。例如,传感器组件614可以检测到设备600的打开/关闭状态,组件的相对定位,例如所述组件为电子设备600的显示器和小键盘,传感器组件614还可以检测电子设备600或电子设备600一个组件的位置改变,用户与电子设备600接触的存在或不存在,电子设备600方位或加速/减速和电子设备600的温度变化。传感器组件614可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件614还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件616被配置为便于电子设备600和其他设备之间有线或无线方式的通信。电子设备600可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信部件614经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信部件614还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述停炉控制方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器604,上述指令可由电子设备600的处理器420执行以完成上述停炉控制方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种数据采集方法,应用于服务器端,所述方法包括:
确定目标业务中各个网络设备的设备类型;
获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到。
可选地,所述网络设备包括第一网络设备,在所述接收数据采集结果之前,所述方法还包括:
将所述采集操作包发送给所述各个网络设备;
所述接收数据采集结果包括:
接收所述第一网络设备采集的第一数据采集结果。
可选地,所述网络设备还包括第二网络设备,在所述接收所述第一网络设备采集的第一数据采集结果之后,所述接收数据采集结果还包括:
根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息;
向所述第二网络设备发送所述第一采集指令信息;
接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
可选地,所述网络设备包括终端设备和除终端设备之外的网络设备,所述确定目标业务中各个网络设备的设备类型包括:
获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型;
根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种数据采集方法,应用于网络设备,所述方法包括:
接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
根据所述采集操作包,执行所述采集指令信息采集数据。
可选地,所述网络设备包括第一网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据包括:
所述第一网络设备根据所述触发规则信息执行监测操作,在所述第一网络设备满足所述触发规则信息的触发条件的情况下,执行采集指令信息;
根据所述采集指令信息,执行数据采集操作,获得第一数据采集结果;
将所述第一数据采集结果作为数据采集结果。
可选地,所述网络设备还包括第二网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据还包括:
所述第二网络设备接收第一采集指令信息,其中,所述第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的;
所述第二网络设备根据所述第一采集指令信息,执行采集数据操作,获得第二数据采集结果;
将所述第二数据采集结果作为数据采集结果。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种数据采集方法和一种数据采集装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种数据采集方法,其特征在于,应用于服务器端,所述方法包括:
确定目标业务中各个网络设备的设备类型;
获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到。
2.根据权利要求1所述的方法,其特征在于,所述网络设备包括第一网络设备,在所述接收数据采集结果之前,所述方法还包括:
将所述采集操作包发送给所述各个网络设备;
所述接收数据采集结果包括:
接收所述第一网络设备采集的第一数据采集结果。
3.根据权利要求2所述的方法,其特征在于,所述网络设备还包括第二网络设备,在所述接收所述第一网络设备采集的第一数据采集结果之后,所述接收数据采集结果还包括:
根据所述第一数据采集结果,确定所述目标业务中需进行采集的至少一个所述第二网络设备以及第一采集指令信息;
向所述第二网络设备发送所述第一采集指令信息;
接收所述第二网络设备根据所述第一采集指令信息采集的第二数据采集结果。
4.根据权利要求1所述的方法,其特征在于,所述网络设备包括终端设备和除终端设备之外的网络设备,所述确定目标业务中各个网络设备的设备类型包括:
获取所述目标业务的业务场景模式,以及所述各个终端设备的终端标识和所述各个终端设备类型;
根据所述各个终端设备的终端标识和所述各个终端设备类型,以及所述业务场景模式,确定所述目标业务中除终端设备之外的网络设备及其设备类型。
5.一种数据采集方法,其特征在于,应用于网络设备,所述方法包括:
接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
根据所述采集操作包,执行所述采集指令信息采集数据。
6.根据权利要求5所述的方法,其特征在于,所述网络设备包括第一网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据包括:
所述第一网络设备根据所述触发规则信息执行监测操作,在所述第一网络设备满足所述触发规则信息的触发条件的情况下,执行采集指令信息;
根据所述采集指令信息,执行数据采集操作,获得第一数据采集结果;
将所述第一数据采集结果作为数据采集结果。
7.根据权利要求6所述的方法,其特征在于,所述网络设备还包括第二网络设备,所述根据所述采集操作包,执行所述采集指令信息采集数据还包括:
所述第二网络设备接收第一采集指令信息,其中,所述第二网络设备和第一采集指令信息是服务器端根据所述第一数据采集结果确定的;
所述第二网络设备根据所述第一采集指令信息,执行采集数据操作,获得第二数据采集结果;
将所述第二数据采集结果作为数据采集结果。
8.一种数据采集系统,其特征在于,所述系统包括:服务器端和至少一个网络设备;
所述服务器端包括:
类型确定模块,用于确定目标业务中各个网络设备的设备类型;
操作包生成模块,用于获取所述各个网络设备的设备类型的采集规则包,生成所述目标业务的采集操作包;其中,所述采集操作包包括触发规则信息和采集指令信息;
结果接收模块,用于接收数据采集结果,其中,所述数据采集结果为至少一个所述网络设备根据所述采集操作包采集得到;
所述网络设备包括:
操作包接收模块,用于接收采集操作包;所述采集操作包包括触发规则信息和采集指令信息;其中,所述采集操作包通过获取所述各个网络设备的设备类型的采集规则包生成,所述采集规则包通过确定所述目标业务中各个网络设备的设备类型得到;
数据采集模块,用于根据所述采集操作包,执行所述采集指令信息采集数据,发送所述数据采集结果。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当由所述一个或多个处理器执行时,使得所述装置执行如权利要求1至7任一项所述的数据采集方法。
10.一种计算机可读存储介质,其特征在于,其存储的计算机程序使得处理器执行如权利要求1至7任一项所述的数据采集方法。
CN202210825773.8A 2022-07-14 2022-07-14 数据采集方法、系统、电子设备和存储介质 Pending CN115314426A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210825773.8A CN115314426A (zh) 2022-07-14 2022-07-14 数据采集方法、系统、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210825773.8A CN115314426A (zh) 2022-07-14 2022-07-14 数据采集方法、系统、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN115314426A true CN115314426A (zh) 2022-11-08

Family

ID=83857700

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210825773.8A Pending CN115314426A (zh) 2022-07-14 2022-07-14 数据采集方法、系统、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN115314426A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116600153A (zh) * 2023-07-17 2023-08-15 腾讯科技(深圳)有限公司 设备管理方法和装置、存储介质及电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116600153A (zh) * 2023-07-17 2023-08-15 腾讯科技(深圳)有限公司 设备管理方法和装置、存储介质及电子设备
CN116600153B (zh) * 2023-07-17 2024-04-09 腾讯科技(深圳)有限公司 设备管理方法和装置、存储介质及电子设备

Similar Documents

Publication Publication Date Title
CN108877837B (zh) 音频信号异常识别方法、装置和存储介质
CN106919629B (zh) 在群聊中实现信息筛选的方法及装置
CN108989076B (zh) 一种故障分析方法、装置和电子设备
CN110502444B (zh) 一种图像处理算法的测试方法及测试装置
CN113259226B (zh) 信息同步方法、装置、电子设备及存储介质
CN108965611B (zh) 拍摄界面的切换方法、装置、设备及存储介质
CN115314426A (zh) 数据采集方法、系统、电子设备和存储介质
CN116069612A (zh) 一种异常定位方法、装置和电子设备
CN112486770A (zh) 客户端打点上报方法、装置、电子设备和存储介质
CN112256563A (zh) 安卓应用稳定性测试方法、装置、电子设备及存储介质
CN111651627A (zh) 数据处理方法及装置、电子设备和存储介质
CN113067757B (zh) 信息发送和存储方法、装置和介质
CN114417133A (zh) 业务数据处理方法、装置、电子设备及计算机存储介质
CN110866147B (zh) 对直播应用程序进行分类的方法、装置及存储介质
CN107517128B (zh) 数据传输方法、装置和设备
CN114157520A (zh) 项目状态获取方法、装置、电子设备及存储介质
CN109981406B (zh) 测试方法、装置、系统和计算机可读存储介质
CN111354356B (zh) 一种语音数据处理方法及装置
CN111611470A (zh) 一种数据处理方法、装置和电子设备
CN108132882A (zh) 信息获取方法、装置及电子设备
CN113473233B (zh) 一种日志拼接方法、装置、电子设备、存储介质及产品
CN112346968B (zh) 一种多媒体文件清晰度的自动化检测方法及装置
CN111198800B (zh) Cpu占有率检测方法、cpu占有率检测装置及电子设备
CN110213524B (zh) 视联网会议异常处理方法及装置
CN116680157A (zh) 一种信息的处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination