CN117014353A - 一种数据分析的方法、装置和计算设备集群 - Google Patents
一种数据分析的方法、装置和计算设备集群 Download PDFInfo
- Publication number
- CN117014353A CN117014353A CN202310801918.5A CN202310801918A CN117014353A CN 117014353 A CN117014353 A CN 117014353A CN 202310801918 A CN202310801918 A CN 202310801918A CN 117014353 A CN117014353 A CN 117014353A
- Authority
- CN
- China
- Prior art keywords
- network element
- network
- list
- mapping relation
- mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000007405 data analysis Methods 0.000 title claims abstract description 49
- 238000013507 mapping Methods 0.000 claims abstract description 167
- 238000004364 calculation method Methods 0.000 claims description 51
- 230000015654 memory Effects 0.000 claims description 35
- 238000004458 analytical method Methods 0.000 claims description 7
- 238000012360 testing method Methods 0.000 abstract description 65
- 238000007726 management method Methods 0.000 description 33
- 238000010586 diagram Methods 0.000 description 24
- 238000004891 communication Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 12
- 238000013500 data storage Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000012423 maintenance Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 229920003245 polyoctenamer Polymers 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0823—Errors, e.g. transmission errors
- H04L43/0829—Packet loss
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/20—Arrangements for monitoring or testing data switching networks the monitoring system or the monitored elements being virtualised, abstracted or software-defined entities, e.g. SDN or NFV
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Data Mining & Analysis (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请公开了一种数据分析的方法、装置和计算设备集群,用于提升新增网元的拨测策略制定效率。包括:获取第一对应关系清单、第一映射关系清单和第一网元的网元类型,第一对应关系清单包括第一网元类型和第一网络服务的对应关系,第一映射关系清单包括第一网络服务与第一元数据实例之间的映射关系。第一网元的网元类型为第一网元类型,第一网元为第一网络中的新增网元。根据第一网元的网元类型、第一对应关系清单和第一映射关系清单,生成第一网元与第一元数据实例之间的第一映射关系,以便后续网络运行中取用。通过创建新增网元和当前已存的网络模型的映射关系,在后续有拨测需求的时候,可以高效的根据该映射关系生成拨测策略,降低人力成本。
Description
技术领域
本申请实施例涉及云计算领域,尤其涉及一种数据分析的方法、装置和计算设备集群。
背景技术
随着云计算技术的应用范围不断扩大,云网络服务生态也日渐繁荣,网络服务的种类层出不穷。云数据中心网络下网元种类繁多,其承载的网络服务也多种多样,提高了云网络的运维管理难度。
为了实现对云数据中心网络的管理和应用,技术人员在采集到云数据中心网络的网络服务运行情况后,基于该网络服务运行情况来指定云数据中心网络的拨测策略。由于云数据中心网络运营的版本演进,云数据中心网络在新增网络服务或网元节点时,拨测策略的更新完全依赖技术人员。当技术人员对当前的运维系统或云数据中心网络不熟悉时,需要消耗大量的时间进行云数据中心网络的拨测策略的制定,如何消除技术人员对云数据中心网络熟悉程度带来的拨测策略制定效率波动就成了当前亟待解决的问题。
发明内容
本申请实施例提供了一种数据分析的方法、装置和计算设备集群。用于实现新增网元的业务类型和当前网络模型的自动化适配,实现新增网元的拨测策略制定和下发,降低了人力成本。
本申请实施例第一方面提供了一种数据分析的方法,包括:获取第一对应关系清单和第一映射关系清单,第一对应关系清单包括第一网元类型与第一网络服务的对应关系,第一映射关系清单包括第一网络服务与第一元数据实例之间的映射关系;获取第一网元的网元类型,第一网元的网元类型为第一网元类型,第一网元第一时刻包含于第一网络,第一网元第二时刻不包含于第一网络,第一时刻在第二时刻之后;根据第一网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
本申请实施例中,在获取第一对应关系清单和第一映射关系清单后,获取第一网元的网元类型,由于第一对应关系清单中包括第一网元类型和第一网络服务的对应关系,第一映射关系清单包括第一网络服务与第一元数据实例之间的映射关系。并且,第一网元的网元类型为第一网元类型,第一网元为在第一时刻包含于第一网络,第二时刻不包含于第一网络的网元,第二时刻在第一时刻之前。因此可以根据第一网元的网元类型、第一对应关系清单和第一映射关系清单,生成第一网元与第一元数据实例之间的第一映射关系。以便后续网络运行中取用,通过创建新增网元的网元类型和当前已存的网络模型的映射关系,在后续有拨测需求的时候,可以高效的根据该映射关系生成拨测策略,降低了人力成本。
在第一方面一种可能的实施方式中,获取第一网元的网元类型包括:若第一网元类型包含于第一对应关系清单,获取第一网元的网元类型。
本申请实施例中,获取第一网元的网元类型时,当第一网元的网元类型在第一对应关系清单中存在时,获取第一网元的网元类型并进行后续处理。当第一网元的网元类型在第一对应关系清单中不存在时,无需进行后续操作。通过限制仅处理预存过对应关系的网元类型对应的网元,避免了对无需进行拨测的网元进行冗余验证,提升了方案的灵活性和效率。
在第一方面一种可能的实施方式中,根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系,包括:在第一对应关系清单中查找第一网元的网元类型获得与第一网元类型存在对应关系的第一网络服务;在第一映射关系清单中查找第一网络服务,获得第一元数据实例,第一元数据实例与第一网络服务之间存在映射关系;生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
本申请实施例中,根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系具体可以通过如下步骤实现:在第一对应关系清单中查找第一网元的网元类型,获得与第一网元类型存在对应关系的第一网络服务;进一步的,在第一映射关系清单中查找第一网络服务,获得与第一网络服务存在映射关系的第一元数据实例。生成第一网元与第一元数据实例之间的第一映射关系。通过利用第一对应关系清单,确定第一网元对应的第一网络服务后,再利用第一映射关系清单确定第一网络服务对应的第一元数据实例。可以高效的实现新增网元的拨测策略匹配。
在第一方面一种可能的实施方式中,在第一映射关系清单中查找第一网络服务,获得第一元数据实例包括:若第一网络中不存在计算节点为第一网络服务提供算力,在第一映射关系清单中查找第一网络服务,获得第一元数据实例。
本申请实施例中,在第一映射关系清单中查找第一网络服务时,还可以预先判断第一网络中是否存在计算节点为第一网络服务提供算力,若不存在,在第一映射关系清单中查找第一网络服务,获得与第一网络服务存在映射关系的第一元数据实例。通过预先判断第一网络中是否存在计算节点为第一网络服务提供算力,避免对已经具有稳定计算能力的网络服务重复进行拨测,进一步提升了拨测效率,节约了网络的计算资源。
在第一方面一种可能的实施方式中,第一元数据实例指示第一计算节点执行第一计算;方法还包括:生成第一报文,第一报文指示第一计算节点执行第一计算;向第一计算节点发送第一报文;获取第一计算节点发送的第一计算结果,第一计算结果指示第一计算节点是否成功执行第一计算。
本申请实施例中,当第一元数据实例指示第一计算节点执行第一计算时,还可以在生成第一映射关系后,根据第一映射关系生成第一报文,第一报文指示第一计算节点执行第一计算;向第一计算节点发送第一报文后,获取第一计算节点发送的第一计算结果,其中,第一计算结果指示第一计算节点是否成功执行第一计算。通过生成第一报文,并向第一计算节点发送第一报文,获取第一计算节点发送的第一计算结果,充分利用匹配得到的拨测策略执行拨测,提升了拨测效率。
在第一方面一种可能的实施方式中,方法还包括:分析第一计算结果获得第一网元的丢包率和第一网元的延时数据。本申请实施例通过分析第一计算结果获得第一网元的丢包率和第一网元的延时数据,提升了方案的完整性。
在第一方面一种可能的实施方式中,第一元数据实例包括第一源IP元数据实例、第一目的IP元数据实例和第一网络服务元数据实例。
本申请实施例第二方面提供了一种数据分析的装置,包括:
获取单元,用于获取第一对应关系清单和第一映射关系清单,第一对应关系清单包括第一网元类型与第一网络服务的对应关系,第一映射关系清单包括第一网络服务与第一元数据实例之间的映射关系;
获取单元,还用于获取第一网元的网元类型,第一网元的网元类型为第一网元类型,第一网元第一时刻包含于第一网络,第一网元第二时刻不包含于第一网络,第一时刻在第二时刻之后;
生成单元,用于根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
在第二方面一种可能的实施方式中,获取单元,具体用于若第一网元类型包含于第一对应关系清单,获取第一网元的网元类型。
在第二方面一种可能的实施方式中,生成单元,具体用于:
在第一对应关系清单中查找第一网元的网元类型获得与第一网元类型存在对应关系的第一网络服务;
在第一映射关系清单中查找第一网络服务,获得第一元数据实例,第一元数据实例与第一网络服务之间存在映射关系;
生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
在第二方面一种可能的实施方式中,生成单元,具体用于第一网络中不存在计算节点为第一网络服务提供算力,在第一映射关系清单中查找第一网络服务,获得第一元数据实例。
在第二方面一种可能的实施方式中,第一元数据实例指示第一计算节点执行第一计算;
生成单元,还用于生成第一报文,第一报文指示第一计算节点执行第一计算;
装置还包括发送单元,用于向第一计算节点发送第一报文;
获取单元,还用于获取第一计算节点发送的第一计算结果,第一计算结果指示第一计算节点是否成功执行第一计算。
在第二方面一种可能的实施方式中,装置还包括:
分析单元,用于分析第一计算结果获得第一网元的丢包率和第一网元的延时数据。
在第二方面一种可能的实施方式中,第一元数据实例包括第一源IP元数据实例、第一目的IP元数据实例和第一网络服务元数据实例。
本申请实施例第三方面提供了一种数据分析的装置,包括处理器和存储器,存储器用于存储指令,处理器用于执行指令,当处理器执行指令时,执行如前述第一方面或第一方面任一种实施方式中的方法。
本申请实施例第四方面提供了一种计算机可读存储介质,其特征在于,包括程序,当其在计算机上运行时,使得计算机执行如前述第一方面或第一方面任一种实施方式中的方法。
本申请实施例第五方面提供了一种计算设备集群,其特征在于,包括至少一个计算设备,每个计算设备包括处理器和存储器;
至少一个计算设备的处理器用于执行至少一个计算设备的存储器中存储的指令,以使得计算设备集群执行如前述第一方面或第一方面任一种实施方式中的方法。
附图说明
图1为本申请提供的云数据中心网络的一种结构示意图;
图2为本申请实施例提供的数据分析的方法的一种示意图;
图3为本申请实施例提供的第一对应关系清单的一种示意图;
图4为本申请实施例提供的第一映射关系清单的一种示意图;
图5为本申请实施例提供的第一映射关系清单的另一种示意图;
图6为本申请实施例提供的第一映射关系清单的另一种示意图;
图7为本申请实施例提供的数据分析的方法的另一种示意图;
图8为本申请实施例提供的数据分析的装置的一种结构示意图;
图9为本申请实施例提供的数据分析的装置的另一种结构示意图;
图10为本申请实施例提供的计算设备集群的一种结构示意图;
图11为本申请实施例提供的计算设备集群的另一种结构示意图;
图12为本申请实施例提供的数据分析的装置的另一种结构示意图。
具体实施方式
下面结合本申请实施例中的附图对本申请实施例进行描述。本申请的实施方式部分使用的术语仅用于对本申请的具体实施例进行解释,而非旨在限定本申请。本领域普通技术人员可知,随着技术的发展和新场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换,这仅仅是描述本申请的实施例中对相同属性的对象在描述时所采用的区分方式。此外,术语“包括”和“具有”以及他们的任何变形,其目的在于覆盖不排他的包含,以便包含一系列单元的过程、方法、系统、产品或设备不必限于那些单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它单元。
随着云计算技术的应用范围不断扩大,云网络服务生态也日渐繁荣,网络服务的种类层出不穷。云数据中心网络下网元种类繁多,其承载的网络服务也多种多样,提高了云网络的运维管理难度。
为了实现对云数据中心网络的管理和应用,技术人员在采集到云数据中心网络的网络服务运行情况后,基于该网络服务运行情况来指定云数据中心网络的拨测策略。由于云数据中心网络运营的版本演进,云数据中心网络在新增网络服务或网元节点时,拨测策略的更新完全依赖技术人员。当技术人员对当前的运维系统或云数据中心网络不熟悉时,需要消耗大量的时间进行云数据中心网络的拨测策略的制定,如何消除技术人员对云数据中心网络熟悉程度带来的拨测策略指定效率波动就成了当前亟待解决的问题。
基于以上问题,本申请提出可以在云数据中心网络中预置网元类型与网元类型对应的网络服务的对应关系清单和网络服务与网络服务元数据对应关系清单,利用云数据中心的控制器对云数据中心的配置管理数据库(configuration management database,CMDB)进行周期性检测,当检测到CMDB中有新增的网元节点时,根据该新增的网元节点携带的网元节点类型,查询网元类型与网元类型对应的网络服务的对应关系清单,获得该新增的网元节点对应的网络服务。再根据该新增的网元节点对应的网络服务查询网络服务与网络服务元数据对应关系清单,获得该新增的网络节点对应的网络服务元数据。根据该新增的网络节点对应的网络服务元数据,生成拨测任务,并向拨测任务中的相关网元发送该拨测任务,以实现对云数据中心网络的网络服务管理,消除了技术人员对云数据中心网络的熟悉程度带来的拨测策略制定效率影响。
首先对本申请应用的云数据中心网络进行介绍,请参阅图1,图1为本申请提供的云数据中心网络的一种结构示意图。
云数据中心网络包括展示UI、配置管理数据库(configuration managementdatabase,CMDB)、控制器、物理交换机、计算节点和网元节点。
控制器中的网元类型识别模块,用于定期检查CMDB中的新增网元,若CMDB中有新增的网元,根据新增的网元确定该网元的网元类型,并进一步查询该网元关联的网络服务。
控制器中的网元类型与网络服务管理模块,用于维护网元类型和与该网元关联的网络服务之间的对应关系清单,该清单由用户通过配置文件预置于网元类型与网络服务管理模块,以便根据新增的网元的网络类型和网元类型和与该网元关联的网络服务之间的对应关系清单,确定新增的网元关联的网络服务。
控制器中的网络服务元数据管理模块,用于定义创建网络资源的元数据,计算节点可以通过执行元数据来创建网络资源。
控制器中的网络服务元数据实例管理模块,用于创建拨测策略需要的五元组相关数据,具体包括源IP相关资源、目的IP相关资源和网络服务相关资源。
控制器中的拨测节点管理模块,用于识别云网络中所有的计算节点和计算节点连接的接入交换机(top of rack,TOR)资源。网络服务元数据实例管理模块根据拨测节点管理模块提供的计算节点分析获得需要制定拨测策略的节点。
控制器中的拨测策略制定模块,用于网络服务元数据实例根据网络服务元数据实力管理模块提供的网络制定拨测策略。
控制器中的任务管理模块,用于将拨测策略制定模块生成的拨测任务下发至拨测系统。
控制器中的拨测结果分析模块,用于收集拨测系统针对拨测任务下发的响应报文,并分析拨测任务的拨测结果,生成拨测链路的丢包率和时延数据,进而获得计算节点的丢包率和时延数据。
物理交换机、计算节点和网元节点在接收到控制器发送的拨测任务后,执行拨测任务,并根据拨测结果向控制器发送拨测任务的响应报文。
本申请基于以上思路和云数据中心网络结构,提供了发现网络中新增网元后自动为其匹配合适的拨测策略的方案,由于网络环境千变万化,本方案有不同的实施手段,下面结合附图分别对本申请提供的方案进行介绍。
首先,对在较为简单的网络环境下,本申请提供的方案进行介绍。请参阅图2,图2为本申请实施例提供的数据分析的方法的一种示意图。
201、控制器获取第一对应关系清单;
控制器获取第一对应关系清单,第一对应关系清单中包括第一网元类型与第一网络服务之间的对应关系。
示例性的,第一对应关系清单可以如图3所示,图3为本申请实施例提供的第一对应关系清单的一种示意图。
当网元的网元类型为私有网络(virtual private cloud,VPC)转发网元时,该网元的网络服务可以为虚拟私有云对等体连接(VPC-peering)或专线(direct connect,DC)或弹性负载均衡(elastic load balance,ELB)或弹性公网IP(elastic IP,EIP)。
当网元的网络类型为边界路由网元时,网络服务可以为EIP或网络地址转换(network address translation,NAT)。
当网元的网络类型为NAT网元时,网络服务可以为NAT。
当网元的网络类型为负载均衡网元时,网络服务可以为ELB。
需要注意的是,此处对第一对应关系清单的描述仅为示例,在实际应用中,第一对应关系清单中包括至少一个网元类型与至少一个网络服务之间的对应关系即可,其具体形式和内容应结合具体的应用场景进行设置,此处不做限制。
具体的,控制器可以通过交互界面获取用户配置的第一对应关系清单,还可以通过网络接口从其他节点获取到其他节点中存储的第一对应关系清单。
在一些具体的情况下,还可以从多个网元节点中学习其网元类型和预先配置好的网络服务,生成第一对应关系清单,此处不做限制。
可以理解的是,步骤201与步骤202和步骤203没有明确的先后顺序,此处的说明仅为示例,在实际应用中应结合具体的应用场景进行设置。
202、控制器获取第一网元的网元类型;
控制器周期性的检查CMDB中是否存在新增的网元节点,若存在,控制器获取第一网元的网元类型,其中,第一网元第一时刻包含于第一网络,第一网元第二时刻不包含于第一网络,第一时刻在第二时刻之后,也就是第一网元为第一网络中新增的网元节点。
具体的,参阅图1所示云数据中心网络结构,控制器中的网元节点识别模块定期检查CMDB中的网元节点的是否有更新。
若CMDB中存在新增的网元节点,控制器读取新增的网元节点的节点类型获得到第一网元的网元类型后,执行步骤203。
若CMDB中不存在新增的网元节点,控制器周期性执行步骤202。
可以理解的是,步骤202与步骤201和步骤203没有明确的先后顺序,此处的说明仅为示例,在实际应用中应结合具体的应用场景进行设置。
203、控制器获取第一映射关系清单;
控制器获取第一映射关系清单,第一映射关系清单包括第一网络服务和第一元数据实例之间的映射关系。
具体的,第一元数据实例可以包括第一源IP元数据实例,第一目的IP元数据实例和第一网络服务元数据实例,具体实施情况中不做限制。
示例性的,第一映射关系清单可以如图4所示,图4为本申请实施例提供的第一映射关系清单的一种示意图。
图4中以第一网络服务为VPC-peering和Eip为例,对第一映射关系清单可能的表述形式进行介绍。如图4所示,第一映射关系清单中的服务类型包括VPC-peering和Eip。
VPC-peering的源IP元数据为:
Create vpc1
Create 192.168.1.0/24//在192.168.1.0/24创建VPC-peering服务
Create compute//在任意分配的网络地址创建VPC-peering虚拟机网络端口资源
VPC-peering的目的IP元数据为:
Create vpc2
Create 192.169.1.0/24//在192.169.1.0/24创建VPC-peering服务
Create compute//在任意分配的网络地址创建VPC-peering服务计算任务
VPC-peering的网络服务元数据为:
VPC-peering
POST/api/vpc1,parameters
Eip的源IP元数据为:
Create vpc1
Create 192.168.1.0/24//在192.168.1.0/24创建Eip服务
Create compute//在任意分配的网络地址创建Eip服务计算任务
Create floating
Eip的目的IP元数据为:
Create 192.168.1.1//在192.168.1.1创建Eip服务
Eip的网络服务元数据为:
Eip
POST/api/vpc1,parameters
可以理解的是,此处对第一映射关系的描述仅为示例,在实际应用中,应结合具体应用场景进行内容上的设定和调整,此处不做限制。
在一种可能的情况下,第一映射关系清单中还可以包括网络服务源IP和目的IP的资源元数据的字段描述和字段扩充说明,更进一步的,第一元数据实例可以指示第一计算节点执行第一计算,第一计算节点的IP为第一源IP或第一目的IP。
示例性的,请参阅图5,图5为本申请实施例提供的第一映射关系清单的另一种示意图。
由图5可知,不同的元数据中可以包含一些针对不同字段的描述,示例如下:
VPC元数据中包括vpc_operation字段和vpc_name字段,其中,vpc_operation字段用于描述执行的操作,如,create。vpc_name字段用于描述创建实例的名称,如,VPC1。
Subnet元数据中包括subnet_operation字段和subnet_cidr字段,其中,subnet_operation字段用于描述执行的操作,如,create。subnet_cidr字段用于创建子网的网段,如,192.168.1.0/24。
Port元数据中包括port_operation字段和port_type字段,其中,port_operation字段用于描述执行的操作,如,create。port_type字段用于描述创建端口的类型,如,compute。
可以理解的是,此处对第一映射关系清单的描述仅为示例,在实际应用中,应结合具体应用场景进行内容上的设定和调整,此处不做限制。
在另一种可能情况下,第一映射关系清单中还可以包括网络服务元数据的字段描述和字段扩充说明,具体请参阅图6,图6为本申请实施例提供的第一映射关系清单的另一种示意图。
网络服务元数据中包括servicetype字段和list<API>字段,其中,servicetype字段用于描述网络服务名称,如,eip或vpc-peering等。list<API>字段用于描述网络服务创建依赖的接口列表。
API中包括restful_api字段、operation字段和parameter字段。其中,restful_api字段用于描述网络服务创建依赖的接口。operation字段用于描述api的操作类型,如,post、get、update或delete。parameter字段用于描述网络服务创建依赖接口的参数。
可以理解的是,此处对第一映射关系清单的描述仅为示例,在实际应用中,应结合具体应用场景进行内容上的设定和调整,此处不做限制。
需要说明的是,图5和图6中对第一映射关系清单的描述均为基于图4所示的第一映射关系清单的补充,在实际应用中,根据具体的情况不同,第一映射关系清单在图4所示的第一映射关系清单的基础上补充图5和/或图6中类似的内容,此处不做限制。
具体的,控制器可以通过交互界面获取用户配置的第一映射关系清单,还可以通过网络接口从其他节点获取到其他节点中存储的第一映射关系清单。
在一些具体的情况下,还可以从多个网元节点中学习其网元类型和预先配置好的网络服务,生成第一映射关系清单,此处不做限制。
可以理解的是,步骤203与步骤201和步骤202没有明确的先后顺序,此处的说明仅为示例,在实际应用中应结合具体的应用场景进行设置。
204、控制器根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系;
控制器根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。其中,第一网元的网元类型为第一网元类型。
具体的,控制器的网元节点识别模块在获取到第一网元的网元类型后,调用网元类型与网络服务管理模块查询第一关系清单中第一网元的网元类型,获得第一网元类型与第一网络服务之间的对应关系,调用网元类型与网络服务管理模块向网络服务元数据模块下发网络服务拨测请求。网络服务元数据模块读取第一网络服务与第一元数据实例之间的映射关系。生成第一网元与第一元数据实例之间的第一映射关系。
需要说明的是,此处对控制器根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系的具体操作的说明仅为示例,在实际应用中,还可以按照不同的顺序进行操作,此处不做限制。
205、控制器根据第一映射关系生成第一报文;
控制器在生成第一映射关系后,根据第一映射关系生成第一报文,第一报文指示第一计算节点执行第一计算。
控制器为新增的第一网元制定拨测策略。由于第一映射关系指示第一网元与第一元数据实例对应,控制器根据第一元数据实例生成第一报文,第一报文为第一网元拨测策略载体,第一报文指示第一计算节点执行第一计算。
206、控制器向第一计算节点发送第一报文;
控制器生成第一报文后,根据第一报文的目的节点ID向第一计算节点发送第一报文。
207、第一计算节点执行第一计算获得第一计算结果;
第一计算节点获取到控制器发送的第一报文后,根据第一报文的内容执行第一计算。
示例性的,第一计算可以为第一计算节点调用网络服务元数据模块中的基础网络资源接口或通过网络接口创建拨测相关网络资源。例如,创建轻量级网络资源,如,vpc、subnet、port等资源。其中,拨测探针port只需要下发网络port资源即可,无需绑定计算资源和存储资源。
可以理解的是,此处对第一计算节点执行第一计算的说明仅为示例,在实际应用中,第一节点执行的具体操作应结合具体的应用场景进行设置,此处不做限制。
208、第一计算节点向控制器发送第一计算结果;
第一计算节点在执行第一计算后,向控制器发送第一计算结果,第一计算结果指示第一计算执行是否成功。
示例性的,当第一计算为向第二网元发送网络port资源,且第一计算节点成功向第二网元发送网络port资源后,第一计算节点生成第一计算结果,第一计算结果指示第一计算执行成功。
或,当第一计算为向第二网元发送网络port资源,且第一计算节点向第二网元发送网络port资源失败,第一计算节点生成第一计算结果,第一计算结果指示第一计算执行失败。
可以理解的是,此处对第一计算结果和第一计算的内容的描述仅为示例,在实际应用中,应结合具体的应用场景进行设置,此处不做限制。
209、控制器根据第一计算结果生成第一检测结果。
控制器在获取到第一计算节点发送的第一计算结果后,控制器根据第一计算结果生成第一检测结果,第一检测结果包括第一网络服务可用,或,第一网络服务不可用。
更进一步的,控制器可以根据第一检测结果通过交互界面向用于反馈网络服务的可用情况,此处不做限制。
可以理解的是,控制器与计算节点之间可能有一个或多个转发节点,本申请实施例中控制器向计算节点发送第一报文和计算节点向控制器发送第一计算结果均可以经由一个或多个转发节点进行报文转发实现,在实际应用中应结合具体的应用场景进行设置,此处不做限制。
本申请实施例中,通过获取第一对应关系清单和第一映射关系清单,其中吗,第一对应关系包括第一网元类型与第一网元服务之间的对应关系,第一映射关系清单包括第一网元服务与第一元数据实例之间的对应关系。在检测到云数据网络中心存在新增的第一网元,获知第一网元的网元类型为第一网元类型后,根据第一对应关系清单和第一映射关系清单生成第一网元与第一元数据实例之间的第一映射关系。并根据第一映射关系生成第一报文,第一报文用于指示第一计算节点进行第一计算。利用第一对应关系清单和第二映射关系清单实现新增网元的业务类型和当前网络模型的自动化适配,实现新增网元的拨测策略制定和下发,降低了人力成本,还避免了随着网络不断升级带来的人为拨测策略制定的难度指数提升的问题。
由于网络环境的多样性,下面对较为复杂的网络环境中,本申请提供的方案进行介绍。请参阅图7,图7为本申请实施例提供的数据分析的方法的另一种示意图。
701、控制器获取第一对应关系清单;
702、控制器获取第一网元的网元类型;
703、控制器获取第一映射关系清单;
可以理解的是,步骤701至步骤703与前述图2中的步骤201至步骤203的实施方式类似,请参阅图2中步骤201至步骤203,此处不再赘述。
704、控制器判断第一对应关系清单中是否存在第一网元的网元类型;
控制器在获取到第一网元的网元类型后,判断第一对应关系清单中是否存在第一网元的网元类型。
若不存在,在第一周期后执行步骤702。
若存在,执行步骤705。
本申请实施例中,通过在获取到网络中新增网元的网元类型后,判断该新增网元的网元类型是否存在于预先配置的第一对应关系清单,通过限制控制器仅对第一对应关系清单中存在的网元类型进行后续处理,实现了管控进行拨测的网元的网元类型的限制,避免不必要的拨测,提升了方案的执行效率和灵活性。
705、控制器在第一对应关系清单中查询第一网元的网元类型获得第一网络服务;
控制器判断第一对应关系清单中存在第一网元的网元类型后,在第一对应关系清单中查询第一网元的网元类型,获得第一网络服务。
706、控制器判断第一网络中是否存在计算节点为第一网络服务提供算力;
控制器在获取到与第一网元的网元类型对应的第一网络服务后,对第一网络进行检测,判断第一网络中是否存在计算节点为第一网络服务提供算力。
若第一网络中存在计算节点为第一网络服务提供算力,执行步骤702。
若第一网络中不存在计算节点为第一网络服务提供算力,执行步骤707。
具体的,控制器可以利用设置于控制器的拨测节点管理模块识别云数据网络中心的所有计算节点和计算节点连接的TOR资源,网络服务元数据实例拨测节点管理模块提供的计算节点,分析根据当前云数据网络中心运行状态下第一网元对应的第一网络服务是否需要制定拨测策略。
例如,当第一计算节点与第一TOR连接,第一TOR中任一计算节点为第一网络服务提供算力,且新增的第一网元对应的网络服务为第一网络服务时,执行702。
当第一计算节点与第一TOR连接,第一TOR中无计算节点为第一网络服务提供算力,且新增的第一网元对应的网络服务为第一网络服务时,执行步骤707。
可以理解的是,此处对控制器针对云网络数据中心的计算节点和计算节点连接的TOR资源进行分析的方案的说明以及判断第一网络中是否存在计算节点为第一网络服务提供算力的操作时机的说明仅为示例,在实际应用中,可以结合具体的应用场景决定采用该方案的时机,如在控制器获取到第一网元的网元类型与第一网络服务之间的对应关系后,或,在控制器生成第一映射关系后,生成第一报文前执行此步骤,此处不作限制。
707、控制器在第一映射关系清单中查询第一网络服务获得第一元数据实例;
控制器在判断第一网络中不存在计算节点为第一网络服务提供算力后,在第一映射关系清单中查询第一网络服务,获得与第一网络服务存在映射关系的第一元数据实例。
708、控制器生成第一网元与第一元数据实例之间的第一映射关系;
控制器在查询到第一网络服务与第一元数据实例之间的映射关系后,生成第一网元与第一元数据实例之间的第一映射关系。
709、控制器根据第一映射关系生成第一报文;
710、控制器向第一计算节点发送第一报文;
711、第一计算节点执行第一计算获得第一计算结果;
712、第一计算节点向控制器发送第一计算结果;
713、控制器根据第一计算结果生成第一检测结果。
可以理解的是,步骤709至步骤713与前述图2中的步骤205至步骤209的实施方式类似,请参阅图2中步骤205至步骤209,此处不再赘述。
可以理解的是,控制器与计算节点之间可能有一个或多个转发节点,本申请实施例中控制器向计算节点发送第一报文和计算节点向控制器发送第一计算结果均可以经由一个或多个转发节点进行报文转发实现,在实际应用中应结合具体的应用场景进行设置,此处不做限制。
本申请实施例中,在第一映射关系清单中查找第一网络服务时,还可以预先判断第一网络中是否存在计算节点为第一网络服务提供算力,若不存在,在第一映射关系清单中查找第一网络服务,获得与第一网络服务存在映射关系的第一元数据实例。通过预先判断第一网络中是否存在计算节点为第一网络服务提供算力,避免对已经具有稳定计算能力的网络服务重复进行拨测,进一步提升了拨测效率,节约了网络的计算资源。
以上对本申请提出的数据分析的方法进行了介绍,下面结合附图对本申请实施例提供的装置进行介绍:
请参阅图8,图8为本申请实施例提供的数据分析的装置的一种结构示意图。
一种数据分析的装置,包括:
获取单元801,用于获取第一对应关系清单和第一映射关系清单,第一对应关系清单包括第一网元类型与第一网络服务的对应关系,第一映射关系清单包括第一网络服务与第一元数据实例之间的映射关系;
获取单元801,还用于获取第一网元的网元类型,第一网元的网元类型为第一网元类型,第一网元第一时刻包含于第一网络,第一网元第二时刻不包含于第一网络,第一时刻在第二时刻之后;
生成单元802,用于根据第一网元的网元类型、第一对应关系清单和第一映射关系清单生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
可选的,获取单元801,具体用于若第一网元类型包含于第一对应关系清单,获取第一网元的网元类型。
可选的,生成单元802,具体用于:
在第一对应关系清单中查找第一网元的网元类型获得与第一网元类型存在对应关系的第一网络服务;
在第一映射关系清单中查找第一网络服务,获得第一元数据实例,第一元数据实例与第一网络服务之间存在映射关系;
生成第一映射关系,第一映射关系为第一网元与第一元数据实例之间的映射关系。
可选的,生成单元802,具体用于若第一网络中不存在计算节点为第一网络服务提供算力,在第一映射关系清单中查找第一网络服务,获得第一元数据实例。
可选的,第一元数据实例指示第一计算节点执行第一计算;
生成单元802,还用于生成第一报文,第一报文指示第一计算节点执行第一计算;
装置还包括发送单元803,用于向第一计算节点发送第一报文;
获取单元801,还用于获取第一计算节点发送的第一计算结果,第一计算结果指示第一计算节点是否成功执行第一计算。
可选的,装置还包括:
分析单元804,用于分析第一计算结果获得第一网元的丢包率和第一网元的延时数据。
可选的,第一元数据实例包括第一源IP元数据实例、第一目的IP元数据实例和第一网络服务元数据实例。
请参阅图9,图9为本申请实施例提供的数据分析的装置的另一种结构示意图。
数据分析的装置900包括:总线902、处理器904、存储器906和通信接口908。处理器904、存储器906和通信接口908之间通过总线902通信。数据分析的装置900可以是服务器或终端设备。应理解,本申请不限定数据分析的装置900中的处理器904、存储器906的个数。
总线902可以是外设部件互连标准(peripheral component interconnect,PCI)总线或扩展工业标准结构(extended industry standard architecture,EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一条线表示,但并不表示仅有一根总线或一种类型的总线。总线902可包括在数据分析的装置900各个部件(例如,存储器906、处理器904、通信接口908)之间传送信息的通路。
处理器904可以包括中央处理器(central processing unit,CPU)、图形处理器(graphics processing unit,GPU)、微处理器(micro processor,MP)或者数字信号处理器(digital signal processor,DSP)等处理器中的任意一种或多种。
存储器906可以包括易失性存储器(volatile memory),例如随机存取存储器(random access memory,RAM)。处理器904还可以包括非易失性存储器(non-volatilememory),例如只读存储器(read-only memory,ROM),快闪存储器,机械硬盘(hard diskdrive,HDD)或固态硬盘(solid state drive,SSD)。
存储器906中存储有可执行的程序代码,处理器904执行该可执行的程序代码以分别实现前述获取单元801、生成单元802、发送单元803和分析单元804的功能,从而实现数据存储方法中的任一项方法。也即,存储器906上存有用于执行数据分析的方法中任一项方法的指令。
或者,存储器906中存储有可执行的代码,处理器904执行该可执行的代码以分别实现前述接入点的功能,从而实现数据存储方法中的任一项方法。也即,存储器906上存有用于执行数据存储方法中任一项方法的指令。
通信接口908使用例如但不限于网络接口卡、收发器一类的收发模块,来实现数据分析的装置900与其他设备或通信网络之间的通信。
请参阅图10,图10为本申请实施例提供的计算设备集群的一种结构示意图。
该计算设备集群包括至少一台数据分析的装置。该数据分析的装置900可以是服务器,例如是中心服务器、边缘服务器,或者是本地数据中心中的本地服务器。在一些实施例中,计算设备也可以是台式机、笔记本电脑或者智能手机等终端设备。
如图10所示,计算设备集群包括至少一个数据分析的装置900。计算设备集群中的一个或多个数据分析的装置900中的存储器906中可以存有相同的用于执行数据存储的方法中任一项方法的指令。
在一些可能的实现方式中,该计算设备集群中的一个或多个数据分析的装置900的存储器906中也可以分别存有用于执行数据存储的方法中的任一项方法的部分指令。换言之,一个或多个数据分析的装置900的组合可以共同执行用于执行数据存储的方法中任一项方法的指令。
需要说明的是,计算设备集群中的不同的数据分析的装置900中的存储器906可以存储不同的指令,分别用于执行云管理平台的部分功能。也即,不同的数据分析的装置900中的存储器906存储的指令可以实现获取单元801、生成单元802、发送单元803和分析单元804中的一个或多个单元的功能。
在一些可能的实现方式中,计算设备集群中的一个或多个数据存储的设备可以通过网络连接。其中,网络可以是广域网或局域网等等。
请参阅图11,图11为本申请实施例提供的计算设备集群的另一种结构示意图。
如图11所示,两个数据分析的装置900A和900B之间通过网络进行连接。具体地,通过各个计算设备中的通信接口与网络进行连接。在这一类可能的实现方式中,数据分析的装置900A中的存储器906中存有执行获取单元801和生成单元802的功能的指令。同时,数据分析的装置900B中的存储器906中存有执行发送单元803和分析单元804的功能的指令。
应理解,图11中示出的数据分析的装置900A的功能也可以由多个数据分析的装置900完成。同样,数据分析的装置900B的功能也可以由多个数据分析的装置900完成。
本申请实施例还提供了另一种计算设备集群。该计算设备集群中各计算设备之间的连接关系可以类似的参考图10和图11计算设备集群的连接方式。不同的是,该计算设备集群中的一个或多个数据分析的装置900中的存储器906中可以存有相同的用于执行数据存储的方法中任一项方法的指令。
在一些可能的实现方式中,该计算设备集群中的一个或多个数据分析的装置900的存储器906中也可以分别存有用于执行数据存储的方法中任一项方法的部分指令。换言之,一个或多个数据分析的装置900的组合可以共同执行用于执行数据存储的方法中任一项方法的指令。
需要说明的是,计算设备集群中的不同的数据分析的装置900中的存储器906可以存储不同的指令,用于执行数据分析的装置的部分功能。
结合具体的使用方法,本申请实施例还提供了数据分析的装置的另一种结构示意图。如图12所示,数据分析的装置包括网元节点识别模块、网元类型与网络服务管理模块、网络服务元数据实例管理模块和网络服务元数据管理模块。
网元节点识别模块,用于定期检查配置管理数据库中是否有新增的网元节点,当存在时,想网元类型与网络服务管理模块查询新增网元对应的网络服务;
网络类型与网络服务管理模块,用于进行网元类型与网络服务的对应关系的管理,定期检查配置文件中网元与网络服务之间对应关系的更新情况。
网元节点识别模块在确定新增网元对应的网络服务后,向网络服务元数据实例管理模块发送网络服务拨测请求。
网络服务元数据实例管理模块,用于读取网络服务元数据实例,确定网络服务对应的源IP元数据实例、目的IP元数据实例和网络服务元数据实例从而进行拨测资源创建策略的制定和拨测资源创建策略的管理,还可以通过定期检查配置文件,对网络服务元数据实例和网元类型之间的对应关系进行更新。在确定网元对应的网络服务元数据实例后,根据创建策略调用接口创建资源,实现网络服务元数据管理模块中对基础网络资源接口和通用网络接口的拨测。还根据拨测资源创建策略定制拨测策略、下发拨测策略、收集拨测结果并分析拨测结果。
需要说明的是,图12中所描述的数据分析的装置的具体结构和工作内容仅为一种可能的情况,在实际应用中,应结合具体的应用场景设置功能模块实现具体步骤和功能,此处不做限制。
本申请实施例还提供一种计算机可读存储介质,包括计算机可读指令,当计算机可读指令在计算机上运行时,使得计算机执行如前述方法实施例所示任一项实现方式。
本申请实施例还提供的一种计算机程序产品,计算机程序产品包括计算机程序或指令,当计算机程序或指令在计算机上运行时,使得计算机执行如前述方法实施例所示任一项实现方式。
本申请还提供一种芯片或芯片系统,该芯片可包括处理器。该芯片还可包括存储器(或存储模块)和/或收发器(或通信模块),或者,该芯片与存储器(或存储模块)和/或收发器(或通信模块)耦合,其中,收发器(或通信模块)可用于支持该芯片进行有线和/或无线通信,存储器(或存储模块)可用于存储程序或一组指令,该处理器调用该程序或该组指令可用于实现上述方法实施例、方法实施例的任意一种可能的实现方式中由终端或者网络设备执行的操作。该芯片系统可包括以上芯片,也可以包含上述芯片和其他分立器件,如存储器(或存储模块)和/或收发器(或通信模块)。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,read-onlymemory)、随机存取存储器(RAM,random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (17)
1.一种数据分析的方法,其特征在于,包括:
获取第一对应关系清单和第一映射关系清单,所述第一对应关系清单包括第一网元类型与第一网络服务的对应关系,所述第一映射关系清单包括所述第一网络服务与第一元数据实例之间的映射关系;
获取第一网元的网元类型,所述第一网元的网元类型为所述第一网元类型,所述第一网元第一时刻包含于第一网络,所述第一网元第二时刻不包含于所述第一网络,所述第一时刻在所述第二时刻之后;
根据所述第一网元的网元类型、所述第一对应关系清单和所述第一映射关系清单生成第一映射关系,所述第一映射关系为所述第一网元与所述第一元数据实例之间的映射关系。
2.根据权利要求1所述的方法,其特征在于,获取第一网元的网元类型包括:
若所述第一网元的网元类型包含于所述第一对应关系清单,获取第一网元的网元类型。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一网元的网元类型、所述第一对应关系清单和所述第一映射关系清单生成第一映射关系,包括:
在所述第一对应关系清单中查找所述第一网元的网元类型获得与所述第一网元类型存在对应关系的所述第一网络服务;
在所述第一映射关系清单中查找所述第一网络服务,获得所述第一元数据实例,所述第一元数据实例与所述第一网络服务之间存在映射关系;
生成第一映射关系,所述第一映射关系为所述第一网元与所述第一元数据实例之间的映射关系。
4.根据权利要求3所述的方法,其特征在于,所述在所述第一映射关系清单中查找所述第一网络服务,获得所述第一元数据实例包括:
若所述第一网络中不存在计算节点为所述第一网络服务提供算力,在所述第一映射关系清单中查找所述第一网络服务,获得所述第一元数据实例。
5.根据权利要求1至4任一所述的方法,其特征在于,所述第一元数据实例指示第一计算节点执行第一计算;
所述方法还包括:
生成第一报文,所述第一报文指示所述第一计算节点执行第一计算;
向所述第一计算节点发送所述第一报文;
获取所述第一计算节点发送的第一计算结果,所述第一计算结果指示所述第一计算节点是否成功执行所述第一计算。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
分析所述第一计算结果获得所述第一网元的丢包率和所述第一网元的延时数据。
7.根据权利要求1至6任一所述的方法,其特征在于,所述第一元数据实例包括第一源IP元数据实例、第一目的IP元数据实例和第一网络服务元数据实例。
8.一种数据分析的装置,其特征在于,包括:
获取单元,用于获取第一对应关系清单和第一映射关系清单,所述第一对应关系清单包括第一网元类型与第一网络服务的对应关系,所述第一映射关系清单包括所述第一网络服务与第一元数据实例之间的映射关系;
所述获取单元,还用于获取第一网元的网元类型,所述第一网元的网元类型为所述第一网元类型,所述第一网元第一时刻包含于第一网络,所述第一网元第二时刻不包含于所述第一网络,所述第一时刻在所述第二时刻之后;
生成单元,用于根据所述第一网元的网元类型、所述第一对应关系清单和所述第一映射关系清单生成第一映射关系,所述第一映射关系为所述第一网元与所述第一元数据实例之间的映射关系。
9.根据权利要求8所述的装置,其特征在于,所述获取单元,具体用于若所述第一网元的网元类型包含于所述第一对应关系清单,获取第一网元的网元类型。
10.根据权利要求8或9所述的装置,其特征在于,所述生成单元,具体用于:
在所述第一对应关系清单中查找所述第一网元的网元类型获得与所述第一网元类型存在对应关系的所述第一网络服务;
在所述第一映射关系清单中查找所述第一网络服务,获得所述第一元数据实例,所述第一元数据实例与所述第一网络服务之间存在映射关系;
生成第一映射关系,所述第一映射关系为所述第一网元与所述第一元数据实例之间的映射关系。
11.根据权利要求10所述的装置,其特征在于,所述生成单元,具体用于若所述第一网络中不存在计算节点为所述第一网络服务提供算力,在所述第一映射关系清单中查找所述第一网络服务,获得所述第一元数据实例。
12.根据权利要求8至11任一所述的装置,其特征在于,所述第一元数据实例指示第一计算节点执行第一计算;
所述生成单元,还用于生成第一报文,所述第一报文指示所述第一计算节点执行第一计算;
所述装置还包括发送单元,用于向所述第一计算节点发送所述第一报文;
所述获取单元,还用于获取所述第一计算节点发送的第一计算结果,所述第一计算结果指示所述第一计算节点是否成功执行所述第一计算。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
分析单元,用于分析所述第一计算结果获得所述第一网元的丢包率和所述第一网元的延时数据。
14.根据权利要求8至13任一所述的装置,其特征在于,所述第一元数据实例包括第一源IP元数据实例、第一目的IP元数据实例和第一网络服务元数据实例。
15.一种数据分析的装置,其特征在于,包括处理器和存储器,所述存储器用于存储指令,所述处理器用于执行所述指令,当所述处理器执行所述指令时,执行如权利要求1至7中任一项所述的方法。
16.一种计算机可读存储介质,其特征在于,包括程序,当其在计算机上运行时,使得计算机执行如权利要求1至7中任一项所述的方法。
17.一种计算设备集群,其特征在于,包括至少一个计算设备,每个计算设备包括处理器和存储器;
所述至少一个计算设备的处理器用于执行所述至少一个计算设备的存储器中存储的指令,以使得所述计算设备集群执行如权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310801918.5A CN117014353A (zh) | 2023-06-30 | 2023-06-30 | 一种数据分析的方法、装置和计算设备集群 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310801918.5A CN117014353A (zh) | 2023-06-30 | 2023-06-30 | 一种数据分析的方法、装置和计算设备集群 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117014353A true CN117014353A (zh) | 2023-11-07 |
Family
ID=88561090
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310801918.5A Pending CN117014353A (zh) | 2023-06-30 | 2023-06-30 | 一种数据分析的方法、装置和计算设备集群 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117014353A (zh) |
-
2023
- 2023-06-30 CN CN202310801918.5A patent/CN117014353A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106489251B (zh) | 应用拓扑关系发现的方法、装置和系统 | |
CN107431651B (zh) | 一种网络服务的生命周期管理方法及设备 | |
US20120002549A1 (en) | Network system | |
CN110445886B (zh) | 一种实现域名访问加速的方法和系统 | |
CN103430150A (zh) | 在云计算系统中创建资源的技术 | |
US20210037105A1 (en) | Dynamic Discovery of Available Storage Servers | |
CN113961312A (zh) | 目标服务的部署方法、装置和电子设备 | |
CN106790131B (zh) | 一种参数修改方法、装置及分布式平台 | |
CN109104368B (zh) | 一种请求连接方法、装置、服务器及计算机可读存储介质 | |
CN112187574A (zh) | 使用虚拟机进行网络压力测试的方法、系统和存储介质 | |
CN112699219A (zh) | 日志搜索方法及装置 | |
CN109684093A (zh) | 数据处理方法及系统 | |
CN114398397A (zh) | 数据处理方法、装置、存储介质以及系统 | |
CN113687940A (zh) | 负载均衡方法、装置及物理机 | |
CN117014353A (zh) | 一种数据分析的方法、装置和计算设备集群 | |
CN115952003A (zh) | 一种集群服务器负载均衡的方法、装置、设备及存储介质 | |
CN115495023A (zh) | 一种数据请求方法、装置、设备及存储介质 | |
CN107453950A (zh) | 一种信息处理方法及监控系统 | |
CN110928679B (zh) | 一种资源分配方法及装置 | |
CN110781001B (zh) | 一种基于Kubernetes的容器环境变量查看方法 | |
US20080140687A1 (en) | Socket structure simultaneously supporting both toe and ethernet network interface card and method of forming the socket structure | |
CN115729693A (zh) | 数据处理方法、装置、计算机设备及计算机可读存储介质 | |
CN117251297B (zh) | 一种设备分配方法及电子设备和存储介质 | |
CN110059125B (zh) | 一种代理合约调用的方法及相关设备 | |
CN112748981B (zh) | 虚拟网络功能的软件镜像的处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |