CN116582501B - 一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 - Google Patents
一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 Download PDFInfo
- Publication number
- CN116582501B CN116582501B CN202310521432.6A CN202310521432A CN116582501B CN 116582501 B CN116582501 B CN 116582501B CN 202310521432 A CN202310521432 A CN 202310521432A CN 116582501 B CN116582501 B CN 116582501B
- Authority
- CN
- China
- Prior art keywords
- priority
- resource
- event
- dynamic
- resource event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000000694 effects Effects 0.000 title abstract description 11
- 230000008859 change Effects 0.000 claims abstract description 31
- 230000001960 triggered effect Effects 0.000 claims abstract description 19
- 230000008569 process Effects 0.000 claims abstract description 14
- 230000009191 jumping Effects 0.000 claims description 12
- 238000010200 validation analysis Methods 0.000 claims description 11
- 230000000737 periodic effect Effects 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/62—Queue scheduling characterised by scheduling criteria
- H04L47/625—Queue scheduling characterised by scheduling criteria for service slots or service orders
- H04L47/6275—Queue scheduling characterised by scheduling criteria for service slots or service orders based on priority
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
- H04L41/082—Configuration setting characterised by the conditions triggering a change of settings the condition being updates or upgrades of network functionality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0893—Assignment of logical groups to network elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/29—Flow control; Congestion control using a combination of thresholds
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及虚拟网络实现技术领域，提供了一种基于动态优先级解决Vpc‑agent网络配置生效慢的方法，包括以下步骤：S1：建立用于存储所有资源事件的动态优先级队列；S2：所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。通过动态优先级队列的方式，实现了etc dwatcher触发的事件，即用户操作的资源变更，能够及时得到处理，不需要等待其他低优先级事件完全处理完，比如周期同步触发的事件。
Description
技术领域
本发明涉及虚拟网络实现的技术领域，尤其涉及一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统。
背景技术
VPC(Virtual Private Cloud)虚拟网络的实现，主要包括数据面和控制面两部分，其中，数据面主要是对网络报文的操作，比如报文的解析、转发、地址转换、匹配路由规则、安全规则、丢弃等；控制面主要是为网络管理员提供数据面报文操作规则的管理能力，比如路由规则、安全规则等的配置，并且为管理员提供统一的管理入口，屏蔽具体数据面实现的复杂性，将数据流抽象为逻辑流，语义更易于管理员理解。
如图1所示，VPC虚拟网络服务架构具体包括：
(1)Vpc-controller
Vpc-controller是云计算提供商用于管理虚拟私有云(VPC)网络架构的软件组件。VPC Controller主要负责VPC中网络架构的创建、配置和管理，例如用户配置的包括VPC的路由表、子网、安全组在内元数据等，并将处理后的数据存储到etcd中。
其中，etcd是一种开源的分布式键值存储系统，常用于在分布式系统中存储共享配置、服务发现信息和状态数据等。在云计算中，etcd可以被用于实现虚拟私有云(VPC)网络的配置和管理。在VPC中，etcd可以用于存储和同步VPC网络的配置信息，如路由表、安全组规则、子网信息等。当VPC网络中的配置信息发生变化时，etcd会自动同步这些变化到VPC中的各个节点，从而保持整个VPC网络的一致性和可靠性。同时，etcd还可以与其他云计算服务进行集成，如Kubernetes等，以实现更加复杂的分布式系统管理和部署。
(2)Vpc-agent
Vpc-agent是用于管理虚拟私有云(VPC)网络的软件组件，在VPC中的每个虚拟机实例上运行。VPC Agent的主要功能是处理虚拟机实例和VPC网络之间的网络通信，包括虚拟网络接口的配置和管理、安全组规则的应用、VPC路由表的更新等。通过VPC Agent，虚拟机实例可以与VPC网络进行安全、可靠的通信，同时也可以方便地管理和配置VPC网络的各种网络服务。
监听etcd中网络数据的变化，并将其翻译成ovs的配置，下发到ovs中；监听ovs-bridge变更，并完成网络配置。
其中，ovs(Open vSwitch)是一个开源的虚拟交换机软件，用于在虚拟化环境中连接、管理和安全地隔离虚拟机和物理网络之间的数据通信。
(3)Ovs-bridge
OVS Bridge是Open vSwitch(OVS)中的一个概念，表示OVS中的虚拟交换机，用于在虚拟化环境中连接和管理虚拟机和物理网络之间的数据通信。OVS Bridge可以看作是一种虚拟交换机，它有自己的MAC地址和端口，可以接收和转发数据包。通过OVS Bridge，可以将虚拟机连接到物理网络上，并支持多种网络协议和高级网络功能，如QoS、VLAN和隧道等。在OVS中，可以创建多个OVS Bridge，每个OVS Bridge可以包含多个端口，每个端口对应一个虚拟机接口。这些端口可以隔离不同的虚拟机之间的通信，同时也可以控制虚拟机的网络访问权限和带宽限制。实现vpc具体的数据流处理，从而实现网络功能。
Vpc-agent处理流程如图2所示，启动时，会启动四个并发线程，分别实现监听etcd资源变化、监听ovs-bridge网桥变化、进行周期资源对账、处理消息队列中资源事件等功能。
如图3所示，Vpc-agent线程模型包括：
etcd watcher:责监听etcd中资源的变更，比如vpc、vnic等，然后封装相应资源事件，添加到相应资源的队列中。
periodic sync:负责周期同步校验etcd中的数据，与本地数据是否一致，比如启动时，就会触发一次资源的同步，分别从etcd、ovs中获取期望和实际的本地配置，然后为每类资源构造事件，添加到相应资源的队列中。
Ovs watcher:负责监听ovs-bridge数据的变更，比如ovs port的增删等，然后封装相应的资源事件，添加到相应的资源队列中。
资源队列：比如vnic queue、vpc queue等，每类资源都有自己的事件队列，每个资源队列有相应的processor pool(线程池)，负责并发处理资源的业务逻辑，比如：将vnic的etcd中的配置翻译成ovs-bridge中的规则，并下发到ovs-bridge中。
现有技术中，主要存在的问题是：当本地资源数量较多时，由于周期同步的任务，向资源队列中添加了所有本地资源的同步处理事件，导致用户通过vpc-controller触发的资源变更，不能及时生效，即etcd watcher触发的资源事件，不能得到及时的处理，最差情况需要等到周期同步的事件完成之后，用户变更才会生效。
不同资源之间有依赖关系，比如vnic(网卡)的操作，依赖其所属的vpc数据，需要vpc-agent已经同步完vpc资源，而当前vpc-agent没有对不同资源的事件处理进行区分，导致资源事件的无效处理，尤其是在vpc-ag ent启动或周期同步时，会批量添加所有本地资源的事件。
发明内容
针对上述问题，本发明的目的在于提供一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统，通过动态优先级队列的方式，实现了etcd watcher触发的事件，即用户操作的资源变更，能够及时得到处理，不需要等待其他低优先级事件完全处理完，比如周期同步触发的事件。
本发明的上述发明目的是通过以下技术方案得以实现的：
一种基于动态优先级解决Vpc-agent网络配置生效慢的方法，包括以下步骤：
S1：建立用于存储所有资源事件的动态优先级队列；
S2：所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。
进一步地，在步骤S2中，向所述动态优先级队列添加所述资源事件，采用事件初始优先级进行添加，所述事件初始优先级，具体为：
所述事件初始优先级综合考虑所述资源事件的包括任务类型、资源类型在内的因素，所述事件初始优先级Pe为：
其中，Pt为所述任务类型的优先级标识，wt为所述任务类型的优先级权重标识，Pr为所述资源类型的优先级标识，wr为所述资源类型的优先级权重标识。
进一步地，在步骤S2中，周期性更新所述动态优先级队列中所述资源事件的优先级，采用动态变化优先级进行更新，所述动态变化优先级，具体为：
所述动态变化优先级综合考虑所述资源事件的包括等待时间、重试次数在内的因素，所述动态变化优先级Pe为：
若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
其中，Tt为所述等待时间的阈值，Tr为所述重试次数的阈值，Pmax为所述资源事件优先级的最大值，Pmin为所述资源事件优先级的最小值。
进一步地，所述资源类型的优先级，具体为：
在Vpc-agent中，按照来源将所述资源类型分为3类：
ovs：虚拟机相关的网络配置变更，ovs watcher监听触发的事件；
rpc:用户操作的网络配置变更，etcd watcher监听触发的事件；
sync:对应于虚拟机服务的周期性检测，保证网络配置的最终一致，periodicsync触发的事件；
其中，ovs>rpc>sync；
在Vpc-agent中，按照网络将所述资源类型分为3类：
base：基础网络资源，主要包括vpc，subnet等基础的网络信息；
device：网络设备资源，主要包括vnic，port等网络设备相关的信息；
policy：网络策略资源，主要包括路由表，安全组等网络策略相关的信息；
其中，base>device>policy。
进一步地，在步骤S2中，向所述动态优先级队列添加所述资源事件，具体为：
S211:判断是否需要添加所述资源事件，若是执行步骤S212，若否执行步骤S217；
S212：判断需要添加的所述资源事件是否为重试事件，若是执行步骤S214，若否执行步骤S213；
S213：计算所述资源事件的所述初始优先级；
S214：判断所述动态优先级队列中是否有相同ID的所述资源事件，若是执行步骤S215，若否执行步骤S216；
S215：将所述动态优先级队列中相同ID的所述资源事件与新增的所述资源事件的优先级对比，若新增的所述资源事件的优先级大于所述动态优先级队列中已有的相同ID的所述资源事件的优先级，则更新所述资源事件到所述动态优先级队列中，否则不更新所述资源事件，进入步骤S217；
S216：添加更新所述资源事件到所述动态优先级队列，进入步骤S217；
S217：判断所述动态优先级队列是否停止服务，若否跳转步骤S211，否则结束流程。
进一步地，在步骤S2中，周期性更新所述动态优先级队列中所述资源事件的优先级，具体为：
S221：判断所述动态优先级队列是否到达优先级更新周期，若是跳转步骤S222，若否调整步骤S227；
S222：遍历所述动态优先级队列中的所述资源事件；
S223：判断所述资源事件的所述等待时间是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
S224：判断所述资源事件的所述重试次数是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
S225：判断所述资源事件的优先级是否大于最大优先值，将所述资源事件的优先级更新为最大优先值；
S226：判断所述资源事件的优先级是否小于最小优先值，将所述资源事件的优先级更新为最小优先值；
S227：判断所述动态优先级队列是否停止服务，若否跳转步骤S221，否则结束流程。
进一步地，在步骤S2中，按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理，具体为：
S231：判断所述动态优先级队列中是否仍有所述资源事件，若是，执行步骤S232，若否，执行步骤S236；
S232：按照优先级从高到低的顺序获取所述资源事件，从线程池中获取线程处理所述资源事件；
S234：判断所述资源事件是否处理成功，若是，进入步骤S236，若否，进入步骤S235；
S235：更新所述资源事件的创建时间为当前时间，将所述资源事件的重试次数+1，将所述资源事件添加到所述动态优先级队列中；
S236：判断所述动态优先级队列是否停止服务，若否跳转步骤S231，否则结束流程。
一种用于执行如上述的基于动态优先级解决Vpc-agent网络配置生效慢的方法的基于动态优先级解决Vpc-agent网络配置生效慢的系统，包括：
优先级队列建立模块，用于建立用于存储所有资源事件的动态优先级队列；
优先级队列执行模块，用于提供给所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。
一种计算机设备，包括存储器和一个或多个处理器，所述存储器中存储有计算机代码，所述计算机代码被所述一个或多个处理器执行时，使得所述一个或多个处理器执行如上述的方法。
一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如上述的方法被执行。
与现有技术相比，本发明包括以下至少一种有益效果是：
(1)通过动态优先级队列的方式，实现了优先级高的etcd watcher触发的事件，即用户操作的资源变更，能够及时得到处理，不需要等待其他低优事件完全处理完，比如周期同步触发的事件；以vpc-agent启动时为例：假设当前本地资源数量为M,etcd中预期的本地资源数量为N，此时，用户通过vpc-controller操作资源变更，则此变更需要再M+N个资源事件处理之后才能生效。因为vpc-agent启动时，一定要进行一次资源的同步校验，此时如果有用户变更操作，则现有技术，需要等到同步完成，才能进行用户变更事件的处理，本地资源越多，用户变更的生效时间越晚。而使用优先级队列的方式，可以使用户变更的事件得到及时的处理，因为vpc-controller操作资源变更触发的事件优先级大于启动时的同步操作触发的事件优先级。
(2)通过资源类型的优先级配置，实现了存在依赖关系的资源事件，可以按照依赖顺序进行处理，从而避免了无效的事件处理操作，从而降低了配置生效的时间。
(3)动态优先级队列保证，同一个资源的事件，在队列中至多只存在一个，因此避免了同一资源多次处理的情况，减少不必要的消耗，尤其是在事件积压的情况下，比如服务刚启动时，虽然当前本地资源数量为M,etcd中预期的本地资源数量为N，但实际触发的资源事件数量为(M∩N)≤(M+N)。
(4)动态计算事件的优先级，增加自动升降级策略，避免了高优事件过多，或者高优事件异常等导致的低优事件饿死的情况。
附图说明
图1为现有技术中VPN虚拟网络服务架构示意图；
图2为现有技术中Vpc-agent处理流程示意图；
图3为现有技术中vpc-agent线程模型示意图；
图4本发明动态优先级队列的线程模型示意图；
图5为本发明基于动态优先级解决Vpc-agent网络配置生效慢的方法的整体流程图；
图6为本发明动态优先级队列的操作示意图；
图7为本发明基于动态优先级解决Vpc-agent网络配置生效慢的方法的整体结构图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。
如图4所示，本专利通过实现动态优先级队列来解决资源生效慢的问题，所有资源事件都放到同一动态优先级队列中，资源事件中包含任务类型、资源类型、创建时间、重试次数、资源详情等信息。线程池中的线程根据优先级从高到低依次从队列中获取事件，进行相应的处理；并且队列中事件的优先级是动态变化的，入队列时，根据任务类型、资源类型，计算初始优先级；动态优先级队列会周期根据事件的等待时间、重试次数等重新计算优先级。
使用动态优先级队列，增加队列事件的优先级维度排序和动态变更，保证：
(1)优先级高的事件能够得到及时处理；
(2)优先级低的事件不会饿死，当等待时间超过阈值时，会自动升高优先级；
(3)异常的高优先级事件不会持续占用资源，当重试次数超过阈值时，会自动降低优先级；
(4)同一资源的事件在队列中不会重复。
以下通过具体实施例进行说明：
第一实施例
如图5所示，本实施例提供了一种基于动态优先级解决Vpc-agent网络配置生效慢的方法，包括以下步骤：
S1：建立用于存储所有资源事件的动态优先级队列。
具体的，在本实施例中，采用动态优先级队列的形式对所有的资源事件进行存储，后续根据资源事件在动态优先级队列中的优先级对资源事件进行处理。
S2：所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。
具体的，本发明的动态优先级队列的优先级由两种计算方式：
(1)向所述动态优先级队列添加所述资源事件，采用事件初始优先级进行添加，所述事件初始优先级，具体为：
所述事件初始优先级综合考虑所述资源事件的包括任务类型、资源类型在内的因素，所述事件初始优先级Pe为：
其中，Pt为所述任务类型的优先级标识，wt为所述任务类型的优先级权重标识，Pr为所述资源类型的优先级标识，wr为所述资源类型的优先级权重标识。
(2)周期性更新所述动态优先级队列中所述资源事件的优先级，采用动态变化优先级进行更新，所述动态变化优先级，具体为：
所述动态变化优先级综合考虑所述资源事件的包括等待时间、重试次数在内的因素，所述动态变化优先级Pe为：
若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
其中，Tt为所述等待时间的阈值，Tr为所述重试次数的阈值，Pmax为所述资源事件优先级的最大值，Pmin为所述资源事件优先级的最小值。
进一步地，对于所述资源类型的优先级划分，具体为：
在Vpc-agent中，按照来源将所述资源类型分为3类：
(1)ovs：虚拟机相关的网络配置变更，ovs watcher监听触发的事件。
(2)rpc:用户操作的网络配置变更，etcd watcher监听触发的事件。
(3)sync:对应于虚拟机服务的周期性检测，保证网络配置的最终一致，periodicsync触发的事件。
其中，ovs>rpc>sync；
在Vpc-agent中，按照网络将所述资源类型分为3类：
(1)base：基础网络资源，主要包括vpc，subnet等基础的网络信息；
(2)device：网络设备资源，主要包括vnic，port等网络设备相关的信息；
(3)policy：网络策略资源，主要包括路由表，安全组等网络策略相关的信息；
其中，base>device>policy。
如图6所示，对于动态优先级队列，具体包括并列执行的以下操作：
(1)向所述动态优先级队列添加所述资源事件，具体为：
S211:判断是否需要添加所述资源事件，若是执行步骤S212，若否执行步骤S217；
S212：判断需要添加的所述资源事件是否为重试事件，若是执行步骤S214，若否执行步骤S213；
S213：计算所述资源事件的所述初始优先级；
S214：判断所述动态优先级队列中是否有相同ID的所述资源事件，若是执行步骤S215，若否执行步骤S216；
S215：将所述动态优先级队列中相同ID的所述资源事件与新增的所述资源事件的优先级对比，若新增的所述资源事件的优先级大于所述动态优先级队列中已有的相同ID的所述资源事件的优先级，则更新所述资源事件到所述动态优先级队列中，否则不更新所述资源事件，进入步骤S217；
S216：添加更新所述资源事件到所述动态优先级队列，进入步骤S217；
S217：判断所述动态优先级队列是否停止服务，若否跳转步骤S211，否则结束流程。
(2)周期性更新所述动态优先级队列中所述资源事件的优先级，具体为：
S221：判断所述动态优先级队列是否到达优先级更新周期，若是跳转步骤S222，若否调整步骤S227；
S222：遍历所述动态优先级队列中的所述资源事件；
S223：判断所述资源事件的所述等待时间是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
S224：判断所述资源事件的所述重试次数是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
S225：判断所述资源事件的优先级是否大于最大优先值，将所述资源事件的优先级更新为最大优先值；
S226：判断所述资源事件的优先级是否小于最小优先值，将所述资源事件的优先级更新为最小优先值；
S227：判断所述动态优先级队列是否停止服务，若否跳转步骤S221，否则结束流程。
(3)按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理，具体为：
S231：判断所述动态优先级队列中是否仍有所述资源事件，若是，执行步骤S232，若否，执行步骤S236；
S232：按照优先级从高到低的顺序获取所述资源事件，从线程池中获取线程处理所述资源事件；
S234：判断所述资源事件是否处理成功，若是，进入步骤S236，若否，进入步骤S235；
S235：更新所述资源事件的创建时间为当前时间，将所述资源事件的重试次数+1，将所述资源事件添加到所述动态优先级队列中；
S236：判断所述动态优先级队列是否停止服务，若否跳转步骤S231，否则结束流程。
进一步地，在本实施例中，还可以通过增加资源队列的方式，解决同步事件阻塞用户变更事件的问题，但这样会对同一资源进行多次处理。也可以通过增加线程池容量的方式，来解决队列中事件积压的问题，但这样需要占用更多的cpu、内存资源。
第二实施例
如图7所示，本实施例提供了一种用于执行如上述的基于动态优先级解决Vpc-agent网络配置生效慢的方法的基于动态优先级解决Vpc-agent网络配置生效慢的系统，包括：
优先级队列建立模块1，用于建立用于存储所有资源事件的动态优先级队列；
优先级队列执行模块2，用于提供给所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。
一种计算机可读存储介质，计算机可读存储介质存储有计算机代码，当计算机代码被执行时，如上述方法被执行。本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁盘或光盘等。
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
应当说明的是，上述实施例均可根据需要自由组合。以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，包括以下步骤：
S1：建立用于存储所有资源事件的动态优先级队列；
S2：所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作；
在步骤S2中，向所述动态优先级队列添加所述资源事件，采用事件初始优先级进行添加，所述事件初始优先级，具体为：所述事件初始优先级综合考虑所述资源事件的包括任务类型、资源类型在内的因素；
在步骤S2中，周期性更新所述动态优先级队列中所述资源事件的优先级，采用动态变化优先级进行更新，所述动态变化优先级，具体为：所述动态变化优先级综合考虑所述资源事件的包括等待时间、重试次数在内的因素。
2.根据权利要求1所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，所述事件初始优先级Pe为：
其中，Pt为所述任务类型的优先级标识，wt为所述任务类型的优先级权重标识，Pr为所述资源类型的优先级标识，wr为所述资源类型的优先级权重标识。
3.根据权利要求1所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，所述动态变化优先级Pe为：
若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
其中，Tt为所述等待时间的阈值，Tr为所述重试次数的阈值，Pmax为所述资源事件优先级的最大值，Pmin为所述资源事件优先级的最小值。
4.根据权利要求2所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，所述资源类型的优先级，具体为：
在Vpc-agent中，按照来源将所述资源类型分为3类：
ovs：虚拟机相关的网络配置变更，ovs watcher监听触发的事件；
rpc:用户操作的网络配置变更，etcd watcher监听触发的事件；
sync:对应于虚拟机服务的周期性检测，保证网络配置的最终一致，pe riodic sync触发的事件；
其中，ovs>rpc>sync；
在Vpc-agent中，按照网络将所述资源类型分为3类：
base：基础网络资源，主要包括vpc，subnet等基础的网络信息；
device：网络设备资源，主要包括vnic，port等网络设备相关的信息；
policy：网络策略资源，主要包括路由表，安全组等网络策略相关的信息；
其中，base>device>policy。
5.根据权利要求2所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，在步骤S2中，向所述动态优先级队列添加所述资源事件，具体为：
S211:判断是否需要添加所述资源事件，若是执行步骤S212，若否执行步骤S217；
S212：判断需要添加的所述资源事件是否为重试事件，若是执行步骤S214，若否执行步骤S213；
S213：计算所述资源事件的所述初始优先级；
S214：判断所述动态优先级队列中是否有相同ID的所述资源事件，若是执行步骤S215，若否执行步骤S216；
S215：将所述动态优先级队列中相同ID的所述资源事件与新增的所述资源事件的优先级对比，若新增的所述资源事件的优先级大于所述动态优先级队列中已有的相同ID的所述资源事件的优先级，则更新所述资源事件到所述动态优先级队列中，否则不更新所述资源事件，进入步骤S217；
S216：添加更新所述资源事件到所述动态优先级队列，进入步骤S217；
S217：判断所述动态优先级队列是否停止服务，若否跳转步骤S211，否则结束流程。
6.根据权利要求3所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，在步骤S2中，周期性更新所述动态优先级队列中所述资源事件的优先级，具体为：
S221：判断所述动态优先级队列是否到达优先级更新周期，若是跳转步骤S222，若否调整步骤S227；
S222：遍历所述动态优先级队列中的所述资源事件；
S223：判断所述资源事件的所述等待时间是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若(当前时间-所述资源事件的创建时间)>Tt,则Pe＝min(Pmax,Pe+1)；
S224：判断所述资源事件的所述重试次数是否超过阈值，则根据所述动态变化优先级的公式更新所述资源事件的优先级，即若所述资源事件的重试次数>Tr，则Pe＝max(Pmin,Pe-1)；
S225：判断所述资源事件的优先级是否大于最大优先值，将所述资源事件的优先级更新为最大优先值；
S226：判断所述资源事件的优先级是否小于最小优先值，将所述资源事件的优先级更新为最小优先值；
S227：判断所述动态优先级队列是否停止服务，若否跳转步骤S221，否则结束流程。
7.根据权利要求1所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法，其特征在于，在步骤S2中，按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理，具体为：
S231：判断所述动态优先级队列中是否仍有所述资源事件，若是，执行步骤S232，若否，执行步骤S236；
S232：按照优先级从高到低的顺序获取所述资源事件，从线程池中获取线程处理所述资源事件；
S234：判断所述资源事件是否处理成功，若是，进入步骤S236，若否，进入步骤S235；
S235：更新所述资源事件的创建时间为当前时间，将所述资源事件的重试次数+1，将所述资源事件添加到所述动态优先级队列中；
S236：判断所述动态优先级队列是否停止服务，若否跳转步骤S231，否则结束流程。
8.一种用于执行如权利要求1-7中任一项所述的基于动态优先级解决Vpc-agent网络配置生效慢的方法的基于动态优先级解决Vpc-agent网络配置生效慢的系统，其特征在于，包括：
优先级队列建立模块，用于建立用于存储所有资源事件的动态优先级队列；
优先级队列执行模块，用于提供给所述动态优先级队列并发执行包括向所述动态优先级队列添加所述资源事件、周期性更新所述动态优先级队列中所述资源事件的优先级、按照优先级从所述动态优先级队列中获取所述资源事件并获取线程池中的线程对所述资源事件进行处理在内的操作。
9.一种计算机设备，包括存储器和一个或多个处理器，所述存储器中存储有计算机代码，所述计算机代码被所述一个或多个处理器执行时，使得所述一个或多个处理器执行如权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如权利要求1至7中任一项所述的方法被执行。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310521432.6A CN116582501B (zh) | 2023-05-10 | 2023-05-10 | 一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310521432.6A CN116582501B (zh) | 2023-05-10 | 2023-05-10 | 一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116582501A CN116582501A (zh) | 2023-08-11 |
| CN116582501B true CN116582501B (zh) | 2024-02-09 |
Family
ID=87542569
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310521432.6A Active CN116582501B (zh) | 2023-05-10 | 2023-05-10 | 一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116582501B (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015143998A (ja) * | 2015-02-27 | 2015-08-06 | テレフオンアクチーボラゲット エル エム エリクソン（パブル） | 電気通信ネットワークにおけるイベントを処理するための装置および方法 |
| CN106201665A (zh) * | 2015-04-20 | 2016-12-07 | 青岛海信电器股份有限公司 | 一种动态队列布置方法及设备 |
| CN110532076A (zh) * | 2019-08-09 | 2019-12-03 | 济南浪潮数据技术有限公司 | 一种云资源创建的方法、系统、设备及可读存储介质 |
| CN111949424A (zh) * | 2020-09-18 | 2020-11-17 | 成都精灵云科技有限公司 | 一种处理声明式事件的队列的实现方法 |
| CN114666212A (zh) * | 2022-03-25 | 2022-06-24 | 阿里云计算有限公司 | 配置数据下发方法 |
| CN115391058A (zh) * | 2022-08-05 | 2022-11-25 | 江苏安超云软件有限公司 | 一种基于sdn的资源事件处理方法、资源创建方法及系统 |
| CN116095145A (zh) * | 2023-01-04 | 2023-05-09 | 北京志凌海纳科技有限公司 | 一种vpc集群的数据控制方法和系统 |
-
2023
- 2023-05-10 CN CN202310521432.6A patent/CN116582501B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015143998A (ja) * | 2015-02-27 | 2015-08-06 | テレフオンアクチーボラゲット エル エム エリクソン（パブル） | 電気通信ネットワークにおけるイベントを処理するための装置および方法 |
| CN106201665A (zh) * | 2015-04-20 | 2016-12-07 | 青岛海信电器股份有限公司 | 一种动态队列布置方法及设备 |
| CN110532076A (zh) * | 2019-08-09 | 2019-12-03 | 济南浪潮数据技术有限公司 | 一种云资源创建的方法、系统、设备及可读存储介质 |
| CN111949424A (zh) * | 2020-09-18 | 2020-11-17 | 成都精灵云科技有限公司 | 一种处理声明式事件的队列的实现方法 |
| CN114666212A (zh) * | 2022-03-25 | 2022-06-24 | 阿里云计算有限公司 | 配置数据下发方法 |
| CN115391058A (zh) * | 2022-08-05 | 2022-11-25 | 江苏安超云软件有限公司 | 一种基于sdn的资源事件处理方法、资源创建方法及系统 |
| CN116095145A (zh) * | 2023-01-04 | 2023-05-09 | 北京志凌海纳科技有限公司 | 一种vpc集群的数据控制方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116582501A (zh) | 2023-08-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10205603B2 (en) | System and method for using a packet process proxy to support a flooding mechanism in a middleware machine environment | |
| Miao et al. | Silkroad: Making stateful layer-4 load balancing fast and cheap using switching asics | |
| US10686890B2 (en) | Keep-alive scheduler in a network device | |
| US10169060B1 (en) | Optimization of packet processing by delaying a processor from entering an idle state | |
| US11716256B2 (en) | Intent execution method and apparatus | |
| DE102020132078A1 (de) | Ressourcenzuteilung basierend auf anwendbarem service level agreement | |
| US11973338B2 (en) | Chip-level software and hardware cooperative relay protection device | |
| WO2018121334A1 (zh) | 一种提供网页应用服务的方法、装置、电子设备及系统 | |
| US10841160B2 (en) | System and method for processing messages during a reboot of a network device | |
| CN109960634A (zh) | 一种应用程序监控方法、装置及系统 | |
| EP4109251A1 (en) | Vnf instantiation method and device | |
| EP4068708A1 (en) | Network operation method, apparatus, and device and storage medium | |
| CN112073330A (zh) | 一种云平台容器网络限流方法 | |
| US11573819B2 (en) | Computer-implemented method for reducing service disruption times for a universal customer premise equipment, uCPE, device with resource constraint in a network functions virtualization, NFV, network infrastructure | |
| CN112003794B (zh) | 一种浮动ip限流方法、系统、终端及存储介质 | |
| US9705698B1 (en) | Apparatus and method for network traffic classification and policy enforcement | |
| CN116582501B (zh) | 一种基于动态优先级解决Vpc-agent网络配置生效慢的方法及系统 | |
| CN113472886B (zh) | 分布式集群系统及其控制方法 | |
| CN111614763B (zh) | 一种动态调整应用服务器负载的方法、设备、存储介质 | |
| US20240163213A1 (en) | Expanding connection tables in smart switches in sdn networks | |
| US20240231979A9 (en) | Suspension and disabling of faulting devices powered through power over ethernet | |
| US20240134729A1 (en) | Suspension and disabling of faulting devices powered through power over ethernet | |
| Argyroulis | Recent Advancements In Distributed System Communications | |
| Ji et al. | Research on Virtualization Technology of Power Information Network Security Access |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 8b, building 1, No. 48, Zhichun Road, Haidian District, Beijing 100098 Patentee after: Beijing Zhiling Haina Technology Co.,Ltd. Country or region after: China Address before: 8b, building 1, No. 48, Zhichun Road, Haidian District, Beijing 100098 Patentee before: Beijing zhilinghaina Technology Co.,Ltd. Country or region before: China |
|
| CP03 | Change of name, title or address |