CN114584627A - 一种具有网络监控功能的中台调度系统及方法 - Google Patents

一种具有网络监控功能的中台调度系统及方法 Download PDF

Info

Publication number
CN114584627A
CN114584627A CN202210495737.XA CN202210495737A CN114584627A CN 114584627 A CN114584627 A CN 114584627A CN 202210495737 A CN202210495737 A CN 202210495737A CN 114584627 A CN114584627 A CN 114584627A
Authority
CN
China
Prior art keywords
task
node
preset
information
preset fog
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210495737.XA
Other languages
English (en)
Other versions
CN114584627B (zh
Inventor
田野
唐灵勇
何海霞
杨晓强
李东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Tianyue Communication Technology Development Co ltd
Original Assignee
Guangzhou Tianyue Communication Technology Development Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Tianyue Communication Technology Development Co ltd filed Critical Guangzhou Tianyue Communication Technology Development Co ltd
Priority to CN202210495737.XA priority Critical patent/CN114584627B/zh
Publication of CN114584627A publication Critical patent/CN114584627A/zh
Application granted granted Critical
Publication of CN114584627B publication Critical patent/CN114584627B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5072—Grid computing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y30/00—IoT infrastructure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/50—Indexing scheme relating to G06F9/50
    • G06F2209/508—Monitor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/101—Server selection for load balancing based on network conditions
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种具有网络监控功能的中台调度系统及方法，涉及计算机技术领域。包括云服务节点和多个预设雾节点；每一预设雾节点，接收所管理的物联网设备的第一任务请求发送给云服务节点；并向云服务节点发送节点信息；云服务节点解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和任务信息对各个第一任务进行调度；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。通过监控各个预设雾节点的节点信息，云服务节点可以根据任务信息和节点信息进行任务调度，增强该系统任务请求响应的时效性，充分利用各个雾计算节点的运算资源，提高运算资源利用率。

Description

一种具有网络监控功能的中台调度系统及方法
技术领域
本发明涉及计算机技术领域，具体涉及一种具有网络监控功能的中台调度系统及方法。
背景技术
随着计算机技术的快速发展，云雾计算成为针对高度多样化需求的新兴服务的解决方案。
现有技术中，物联网(IoT)设备可以向云或雾计算节点发起任务请求，云或雾计算节点响应该任务请求，执行计算任务。但由于云计算服务器处理任务的数据量级在不断扩大，且物联网设备与云计算服务器在物理距离上很远，导致使用云计算服务器响应任务请求的延迟较大；而雾计算节点的运算资源有限，通过雾计算节点响应任务请求可能使同一雾计算节点任务请求过多，而一些雾计算节点运算资源保持空闲状态。因此导致任务请求响应的时效性差，且雾计算节点的运算资源利用率低。
发明内容
本发明的目的就在于解决上述背景技术的问题，而提出一种具有网络监控功能的中台调度系统及方法。
本发明的目的可以通过以下技术方案实现：
本发明实施例第一方面，首先提供了一种具有网络监控功能的中台调度系统，包括云服务节点和多个预设雾节点；其中：
每一预设雾节点，用于接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给所述云服务节点；还用于向所述云服务节点发送该预设雾节点的节点信息；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；
所述云服务节点，用于解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
本发明实施例第二方面，还提供了一种具有网络监控功能的中台调度方法，所述方法应用于所述云服务节点，所述方法包括：
接收每一预设雾节点发送的第一任务请求和节点信息；第一任务请求为该预设雾节点所管理的物联网设备发出的任务请求；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；
解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间；
根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度。
可选地，各个第一任务的任务信息还包括第一任务请求的运算源地址和运算目的地址；
解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，包括：
针对预设时间段内接收到的每一第一任务请求，解析该第一任务请求的语法，确定该第一任务请求的运算源地址、运算目的地址和运算操作类型；
根据所述运算操作类型确定该第一任务请求所需的运算资源，作为运算资源量；
根据所述运算源地址确定执行该第一任务请求的计算数据量；
将所述运算资源量和所述计算数据量输入预设的任务时间预估模型，得到该第一任务请求的预估执行时间。
可选地，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度，包括：
根据各个第一任务的运算源地址和运算目的地址对第一任务进行分组，得到多个目标任务组；
针对每一目标任务组，确定该目标任务组的所需的总运算资源量和总预估执行时间，作为任务组信息；
根据各个预设雾节点的节点信息和各个第一任务的任务组信息对各个第一任务进行调度。
可选地，根据各个第一任务的运算源地址和运算目的地址对第一任务进行分组，得到多个目标任务组，包括：
根据各个第一任务的运算源地址和运算目的地址，若任一第一任务的运算目的地址和其他第一任务的运算源地址相同，则确定该两个第一任务为相关联，并确定该两个第一任务的执行顺序；
将相关联的第一任务划分为一组，得到多个目标任务组。
可选地，针对每一目标任务组，确定该目标任务组的所需的总运算资源量和总预估执行时间，作为任务组信息，包括：
针对每一目标任务组，根据该目标任务组中各个第一任务的执行顺序、运算资源量和预估执行时间，确定该目标任务组所需的总运算资源量和总预估执行时间。
可选地，根据各个预设雾节点的节点信息和各个第一任务的任务组信息对各个第一任务进行调度，包括：
将所有目标任务组按照总预估执行时间由大到小进行排序，得到目标任务调度顺序；
根据所述目标任务调度顺序依次对每一目标任务组进行调度；
针对每一目标任务组，根据该目标任务组对应的预设雾节点与其他预设雾节点之间的传输时延，按照传输时延由小到大将各个预设雾节点进行排序，得到雾节点调度顺序；
将该目标任务组所需的总运算资源量，按照所述雾节点调度顺序依次和各个预设雾节点进行匹配；若预设雾节点满足该目标任务组所需的总运算资源量，则将该目标任务组调度为该预设雾节点响应。
本发明实施例第三方面，还提供了一种具有网络监控功能的中台调度方法，应用于中台调度系统的多个预设雾节点中的任一预设雾节点，所述方法包括：
接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给云服务节点；向所述云服务节点发送该预设雾节点的节点信息；以使所述云服务节点接收各个预设雾节点的第一任务请求，解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
可选地，第一任务请求为分时任务，所述方法还包括：
接收该预设雾节点所管理的物联网设备的第二任务请求；所述第二任务请求为实时任务；
响应第二任务请求。
可选地，向所述云服务节点发送该预设雾节点的节点信息，包括：
当预设雾节点的执行任务开始和执行任务结束时，向所述云服务节点发送该预设雾节点当前剩余的运算资源；
按照预设周期检测该预设雾节点到各个其他预设雾节点的传输时延，并向所述云服务节点发送。
基于本发明实施例提供的一种具有网络监控功能的中台调度系统，包括云服务节点和多个预设雾节点；其中，每一预设雾节点，用于接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给云服务节点；还用于向云服务节点发送该预设雾节点的节点信息；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；云服务节点，用于解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和任务信息对各个第一任务进行调度；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。通过监控各个预设雾节点的节点信息，云服务节点可以根据任务信息和节点信息进行任务调度，增强该系统任务请求响应的时效性，充分利用各个雾计算节点的运算资源，提高运算资源利用率。
附图说明
下面结合附图对本发明作进一步的说明。
图1为本发明实施例提供了一种具有网络监控功能的中台调度系统的网络架构图。
图2为本发明实施例提供的一种具有网络监控功能的中台调度方法的流程图。
图3为本发明实施例提供的另一种具有网络监控功能的中台调度方法的流程图。
图4为本发明实施例提供的又一种具有网络监控功能的中台调度方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本发明实施例提供了一种具有网络监控功能的中台调度系统。参见图1，图1为本发明实施例提供了一种具有网络监控功能的中台调度系统的网络架构图。包括云服务节点、多个预设雾节点（预设雾节点一、预设雾节点二和预设雾节点三）以及各个预设雾节点所管理的物联网设备（物联网设备一、物联网设备二、物联网设备三、物联网设备四、物联网设备五和物联网设备六），本发明仅以包含三个预设雾节点和六个物联网设备为例，但实际情况并不限于此。其中：
每一预设雾节点，用于接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给云服务节点；还用于向云服务节点发送该预设雾节点的节点信息；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；
云服务节点，用于解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和任务信息对各个第一任务进行调度；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
基于本发明实施例提供的一种具有网络监控功能的中台调度系统，通过监控各个预设雾节点的节点信息，云服务节点可以根据任务信息和节点信息进行任务调度，增强该系统任务请求响应的时效性，充分利用各个雾计算节点的运算资源，提高运算资源利用率。
基于相同的发明构思本发明实施例还提供了一种具有网络监控功能的中台调度方法。参见图2，图2为本发明实施例提供的一种具有网络监控功能的中台调度方法的流程图。该方法应用于云服务节点，可以包括以下步骤：
S201，接收每一预设雾节点发送的第一任务请求和节点信息。
S202，解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息。
S203，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度。
第一任务请求为该预设雾节点所管理的物联网设备发出的任务请求；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
基于本发明实施例提供的一种具有网络监控功能的中台调度方法，通过监控各个预设雾节点的节点信息，云服务节点可以根据任务信息和节点信息进行任务调度，增强该系统任务请求响应的时效性，充分利用各个雾计算节点的运算资源，提高运算资源利用率。
在一个实施例中，各个第一任务的任务信息还包括第一任务请求的运算源地址和运算目的地址。参见图3，在图2的基础上步骤S202包括：
S2021，针对预设时间段内接收到的每一第一任务请求，解析该第一任务请求的语法，确定该第一任务请求的运算源地址、运算目的地址和运算操作类型。
S2022，根据运算操作类型确定该第一任务请求所需的运算资源，作为运算资源量。
S2023，根据运算源地址确定执行该第一任务请求的计算数据量。
S2024，将运算资源量和计算数据量输入预设的任务时间预估模型，得到该第一任务请求的预估执行时间。
一种实现方式中，根据第一任务请求的请求信息，建立该第一任务请求的抽象语法树，解析该抽象语法树即可获得该第一任务请求的运算源地址、运算目的地址和运算操作类型。
一种实现方式中，预设的任务时间预估模型可以有技术人员根据实际需求进行设置，在此不作限定。
在一个实施例中，参见图4，在图3的基础上步骤S203包括：
S2031，根据各个第一任务的运算源地址和运算目的地址对第一任务进行分组，得到多个目标任务组。
S2032，针对每一目标任务组，确定该目标任务组的所需的总运算资源量和总预估执行时间，作为任务组信息。
S2033，根据各个预设雾节点的节点信息和各个第一任务的任务组信息对各个第一任务进行调度。
一种实现方式中，每一第一任务的执行结果可以作为其他第一任务的原始运算数据，因此，各个第一任务之间可以具有一定的执行顺序。通过各个第一任务的运算源地址和运算目的地址，可以确定各个第一任务之间的执行顺序。将具有执行顺序的第一任务分为一个目标任务组，当该目标任务组内全部的第一任务执行完成，该目标任务组才执行完成。
在一个实施例中，步骤S2031包括：
步骤一，根据各个第一任务的运算源地址和运算目的地址，若任一第一任务的运算目的地址和其他第一任务的运算源地址相同，则确定该两个第一任务为相关联，并确定该两个第一任务的执行顺序。
步骤二，将相关联的第一任务划分为一组，得到多个目标任务组。
一种实现方式中，目标任务组可以包括至少一个第一任务，同一目标任务组中的多个第一任务可以依次执行，或者同时并行执行。例如一个目标任务组包括第一任务A、B、C、D和E，保存A和B的执行结果的运算目的地址为C的运算源地址，保存C的执行结果的运算目的地址为D和E的运算源地址，则该目标任务组的执行顺序为：A和B首先并行执行，A和B全部执行完成后，C开始执行，C执行完成后，D和E并行执行，D和E全部执行完成则该目标任务组执行完成。
在一个实施例中，步骤S2032具体为：
针对每一目标任务组，根据该目标任务组中各个第一任务的执行顺序、运算资源量和预估执行时间，确定该目标任务组所需的总运算资源量和总预估执行时间。
一种实现方式中，根据目标任务组中各个第一任务的执行顺序和运算资源量，可以确定该目标任务组所需的总运算资源量。同样以上述目标任务组包括第一任务A、B、C、D和E为例，将A+B的运算资源量、C的运算资源量和D+E的运算资源量对比，将其中最大的运算资源量作为该目标任务组所需的总运算资源量。
一种实现方式中，根据目标任务组中各个第一任务的执行顺序和预估执行时间，可以确定该目标任务组所需的总预估执行时间。同样以上述目标任务组包括第一任务A、B、C、D和E为例，对比A和B的预估执行时间，将其中较大的作为A和B的并行执行时间1，使用相同的方法确定D和E的并行执行时间2，则该目标任务组所需的总预估执行时间为并行执行时间1、并行执行时间2和C的预估执行时间的和值。
在一个实施例中，步骤S2033包括：
步骤一，将所有目标任务组按照总预估执行时间由大到小进行排序，得到目标任务调度顺序。
步骤二，根据目标任务调度顺序依次对每一目标任务组进行调度。
步骤三，针对每一目标任务组，根据该目标任务组对应的预设雾节点与其他预设雾节点之间的传输时延，按照传输时延由小到大将各个预设雾节点进行排序，得到雾节点调度顺序。
步骤四，将该目标任务组所需的总运算资源量，按照所述雾节点调度顺序依次和各个预设雾节点进行匹配，若预设雾节点满足该目标任务组所需的总运算资源量，则将该目标任务组调度为该预设雾节点响应。
一种实现方式中，目标任务组对应的预设雾节点，即为上传该目标任务组中各第一任务的预设雾节点，该预设雾节点的传输时延默认为0。
基于相同的发明构思本发明实施例还提供了一种具有网络监控功能的中台调度方法。该方法应用于中台调度系统的多个预设雾节点中的任一预设雾节点，该方法包括：
接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给云服务节点，向云服务节点发送该预设雾节点的节点信息，以使云服务节点接收各个预设雾节点的第一任务请求，解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度。
节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
基于本发明实施例提供的一种具有网络监控功能的中台调度方法，通过监控各个预设雾节点的节点信息，云服务节点可以根据任务信息和节点信息进行任务调度，增强该系统任务请求响应的时效性，充分利用各个雾计算节点的运算资源，提高运算资源利用率。
在一个实施例中，第一任务请求为分时任务，该方法还包括：
接收该预设雾节点所管理的物联网设备的第二任务请求，响应第二任务请求。第二任务请求为实时任务。
一种实现方式中，预设雾节点可以判断物联网设备发送的任务请求的类型，若为实时任务，则表明该任务时效性要求高，则立即响应该任务；若为分时任务，则表明该任务时效性要求低，则向云服务节点发送该任务。
在一个实施例中，向云服务节点发送该预设雾节点的节点信息，包括：
步骤一，当预设雾节点的执行任务开始和执行任务结束时，向云服务节点发送该预设雾节点当前剩余的运算资源。
步骤二，按照预设周期检测该预设雾节点到各个其他预设雾节点的传输时延，并向云服务节点发送。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线（例如同轴电缆、光纤、数字用户线（DSL））或无线（例如红外、无线、微波等）方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质（例如固态硬盘Solid State Disk (SSD)）等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (10)

1.一种具有网络监控功能的中台调度系统，其特征在于，包括云服务节点和多个预设雾节点；其中：
每一预设雾节点，用于接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给所述云服务节点；还用于向所述云服务节点发送该预设雾节点的节点信息；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；
所述云服务节点，用于解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
2.一种基于权利要求1所述的中台调度系统的调度方法，其特征在于，所述方法应用于所述云服务节点，所述方法包括：
接收每一预设雾节点发送的第一任务请求和节点信息；第一任务请求为该预设雾节点所管理的物联网设备发出的任务请求；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；
解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间；
根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度。
3.根据权利要求2所述的中台调度方法，其特征在于，各个第一任务的任务信息还包括第一任务请求的运算源地址和运算目的地址；
解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，包括：
针对预设时间段内接收到的每一第一任务请求，解析该第一任务请求的语法，确定该第一任务请求的运算源地址、运算目的地址和运算操作类型；
根据所述运算操作类型确定该第一任务请求所需的运算资源，作为运算资源量；
根据所述运算源地址确定执行该第一任务请求的计算数据量；
将所述运算资源量和所述计算数据量输入预设的任务时间预估模型，得到该第一任务请求的预估执行时间。
4.根据权利要求3所述的中台调度方法，其特征在于，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度，包括：
根据各个第一任务的运算源地址和运算目的地址对第一任务进行分组，得到多个目标任务组；
针对每一目标任务组，确定该目标任务组的所需的总运算资源量和总预估执行时间，作为任务组信息；
根据各个预设雾节点的节点信息和各个第一任务的任务组信息对各个第一任务进行调度。
5.根据权利要求4所述的中台调度方法，其特征在于，根据各个第一任务的运算源地址和运算目的地址对第一任务进行分组，得到多个目标任务组，包括：
根据各个第一任务的运算源地址和运算目的地址，若任一第一任务的运算目的地址和其他第一任务的运算源地址相同，则确定该两个第一任务为相关联，并确定该两个第一任务的执行顺序；
将相关联的第一任务划分为一组，得到多个目标任务组。
6.根据权利要求5所述的中台调度方法，其特征在于，针对每一目标任务组，确定该目标任务组的所需的总运算资源量和总预估执行时间，作为任务组信息，包括：
针对每一目标任务组，根据该目标任务组中各个第一任务的执行顺序、运算资源量和预估执行时间，确定该目标任务组所需的总运算资源量和总预估执行时间。
7.根据权利要求6所述的中台调度方法，其特征在于，根据各个预设雾节点的节点信息和各个第一任务的任务组信息对各个第一任务进行调度，包括：
将所有目标任务组按照总预估执行时间由大到小进行排序，得到目标任务调度顺序；
根据所述目标任务调度顺序依次对每一目标任务组进行调度；
针对每一目标任务组，根据该目标任务组对应的预设雾节点与其他预设雾节点之间的传输时延，按照传输时延由小到大将各个预设雾节点进行排序，得到雾节点调度顺序；
将该目标任务组所需的总运算资源量，按照所述雾节点调度顺序依次和各个预设雾节点进行匹配；若预设雾节点满足该目标任务组所需的总运算资源量，则将该目标任务组调度为该预设雾节点响应。
8.一种基于权利要求1所述的中台调度系统的中台调度方法，其特征在于，应用于中台调度系统的多个预设雾节点中的任一预设雾节点，所述方法包括：
接收该预设雾节点所管理的物联网设备的第一任务请求，将该第一任务请求发送给云服务节点；
向所述云服务节点发送该预设雾节点的节点信息；以使所述云服务节点接收各个预设雾节点的第一任务请求，解析预设时间段内接收到的各个第一任务请求，得到各个第一任务请求的任务信息，根据各个预设雾节点的节点信息和各个第一任务的任务信息对各个第一任务进行调度；节点信息包括该预设雾节点当前剩余的运算资源和该预设雾节点到各个其他预设雾节点的传输时延；各个第一任务的任务信息包括第一任务执行时所需的运算资源量和预估执行时间。
9.根据权利要求8所述的中台调度方法，其特征在于，第一任务请求为分时任务，所述方法还包括：
接收该预设雾节点所管理的物联网设备的第二任务请求；所述第二任务请求为实时任务；
响应第二任务请求。
10.根据权利要求9所述的中台调度方法，其特征在于，向所述云服务节点发送该预设雾节点的节点信息，包括：
当预设雾节点的执行任务开始和执行任务结束时，向所述云服务节点发送该预设雾节点当前剩余的运算资源；
按照预设周期检测该预设雾节点到各个其他预设雾节点的传输时延，并向所述云服务节点发送。
CN202210495737.XA 2022-05-09 2022-05-09 一种具有网络监控功能的中台调度系统及方法 Active CN114584627B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210495737.XA CN114584627B (zh) 2022-05-09 2022-05-09 一种具有网络监控功能的中台调度系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210495737.XA CN114584627B (zh) 2022-05-09 2022-05-09 一种具有网络监控功能的中台调度系统及方法

Publications (2)

Publication Number Publication Date
CN114584627A true CN114584627A (zh) 2022-06-03
CN114584627B CN114584627B (zh) 2022-09-06

Family

ID=81769288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210495737.XA Active CN114584627B (zh) 2022-05-09 2022-05-09 一种具有网络监控功能的中台调度系统及方法

Country Status (1)

Country Link
CN (1) CN114584627B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117544513A (zh) * 2024-01-02 2024-02-09 杭州海康威视数字技术股份有限公司 基于雾资源的新型物联网定制化服务提供方法及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109656699A (zh) * 2018-12-14 2019-04-19 平安医疗健康管理股份有限公司 分布式计算方法、装置、系统、设备及可读存储介质
CN109710407A (zh) * 2018-12-21 2019-05-03 浪潮电子信息产业股份有限公司 分布式系统实时任务调度方法、装置、设备及存储介质
CN110888734A (zh) * 2019-10-17 2020-03-17 国网浙江省电力有限公司 一种雾计算资源处理方法、装置、电子设备及存储介质
CN111124662A (zh) * 2019-11-07 2020-05-08 北京科技大学 一种雾计算负载均衡方法及系统
CN112948111A (zh) * 2021-02-26 2021-06-11 北京奇艺世纪科技有限公司 一种任务分配方法、装置、设备及计算机可读介质
CN113411369A (zh) * 2020-03-26 2021-09-17 山东管理学院 一种云服务资源协同优化调度方法、系统、介质及设备
CN113420097A (zh) * 2021-06-23 2021-09-21 网易（杭州）网络有限公司 一种数据分析方法、装置、存储介质及服务器
CN114416329A (zh) * 2021-11-30 2022-04-29 中国联合网络通信集团有限公司 计算任务部署方法、装置、电子设备及存储介质
CN114428674A (zh) * 2022-01-25 2022-05-03 北京百度网讯科技有限公司 任务调度方法、装置、设备以及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109656699A (zh) * 2018-12-14 2019-04-19 平安医疗健康管理股份有限公司 分布式计算方法、装置、系统、设备及可读存储介质
CN109710407A (zh) * 2018-12-21 2019-05-03 浪潮电子信息产业股份有限公司 分布式系统实时任务调度方法、装置、设备及存储介质
CN110888734A (zh) * 2019-10-17 2020-03-17 国网浙江省电力有限公司 一种雾计算资源处理方法、装置、电子设备及存储介质
CN111124662A (zh) * 2019-11-07 2020-05-08 北京科技大学 一种雾计算负载均衡方法及系统
CN113411369A (zh) * 2020-03-26 2021-09-17 山东管理学院 一种云服务资源协同优化调度方法、系统、介质及设备
CN112948111A (zh) * 2021-02-26 2021-06-11 北京奇艺世纪科技有限公司 一种任务分配方法、装置、设备及计算机可读介质
CN113420097A (zh) * 2021-06-23 2021-09-21 网易（杭州）网络有限公司 一种数据分析方法、装置、存储介质及服务器
CN114416329A (zh) * 2021-11-30 2022-04-29 中国联合网络通信集团有限公司 计算任务部署方法、装置、电子设备及存储介质
CN114428674A (zh) * 2022-01-25 2022-05-03 北京百度网讯科技有限公司 任务调度方法、装置、设备以及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
曾鹏等: "基于雾计算的智能工厂实时任务调度架构", 《无线电工程》 *
龚建锋: "云雾计算场景下的异构环境资源调度机制研究", 《电脑编程技巧与维护》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117544513A (zh) * 2024-01-02 2024-02-09 杭州海康威视数字技术股份有限公司 基于雾资源的新型物联网定制化服务提供方法及装置
CN117544513B (zh) * 2024-01-02 2024-04-02 杭州海康威视数字技术股份有限公司 基于雾资源的新型物联网定制化服务提供方法及装置

Also Published As

Publication number Publication date
CN114584627B (zh) 2022-09-06

Similar Documents

Publication Publication Date Title
CN109376155B (zh) Id生成方法及装置、存储介质及电子设备
CN109117252B (zh) 基于容器的任务处理的方法、系统及容器集群管理系统
US20210200806A1 (en) Method and apparatus for parallel processing of information
CN113760674A (zh) 信息生成方法、装置、电子设备和计算机可读介质
CN110708212A (zh) 分布式系统中调用链路的追踪方法及装置
CN109298948A (zh) 分布式计算方法和系统
CN114584627B (zh) 一种具有网络监控功能的中台调度系统及方法
CN111865622A (zh) 基于规则引擎集群的云服务计量计费方法及系统
WO2022257604A1 (zh) 一种用户标签的确定方法和装置
CN110245014B (zh) 数据处理方法和装置
CN110737655A (zh) 用于上报数据的方法和装置
KR102543838B1 (ko) 정보 획득 방법 및 장치
CN110362583A (zh) 一种用于多数据源的数据处理方法和装置
CN111444148A (zh) 基于MapReduce的数据传输方法和装置
CN113282489B (zh) 一种接口测试方法和装置
CN114090268B (zh) 容器管理方法及容器管理系统
CN114035906B (zh) 虚拟机迁移方法、装置、电子设备及存储介质
CN115220131A (zh) 气象数据质检方法及系统
CN113114612B (zh) 分布式系统调用链的确定方法和装置
CN111625866A (zh) 一种权限管理方法、系统、设备及存储介质
CN114492844A (zh) 机器学习工作流的构建方法、装置、电子设备及存储介质
CN112749204A (zh) 一种读取数据的方法和装置
CN112367634B (zh) 报文发送方法及装置
US12112331B2 (en) Rule based machine learning for precise fraud detection
CN113778978B (zh) 一种大数据质量管控方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A middle platform scheduling system and method with network monitoring function

Effective date of registration: 20231222

Granted publication date: 20220906

Pledgee: Societe Generale Bank Limited by Share Ltd. Guangzhou branch

Pledgor: GUANGZHOU TIANYUE COMMUNICATION TECHNOLOGY DEVELOPMENT Co.,Ltd.|GUANGZHOU TIANYUE ELECTRONIC TECHNOLOGY Co.,Ltd.

Registration number: Y2023980073707

PE01 Entry into force of the registration of the contract for pledge of patent right