CN115361285A - 实现离在线业务混合部署的方法、装置、设备及介质 - Google Patents

实现离在线业务混合部署的方法、装置、设备及介质 Download PDF

Info

Publication number
CN115361285A
CN115361285A CN202210846756.2A CN202210846756A CN115361285A CN 115361285 A CN115361285 A CN 115361285A CN 202210846756 A CN202210846756 A CN 202210846756A CN 115361285 A CN115361285 A CN 115361285A
Authority
CN
China
Prior art keywords
information
resource
application
cluster
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210846756.2A
Other languages
English (en)
Other versions
CN115361285B (zh
Inventor
董杰雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hainan Chezhiyi Communication Information Technology Co ltd
Original Assignee
Hainan Chezhiyi Communication Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hainan Chezhiyi Communication Information Technology Co ltd filed Critical Hainan Chezhiyi Communication Information Technology Co ltd
Priority to CN202210846756.2A priority Critical patent/CN115361285B/zh
Publication of CN115361285A publication Critical patent/CN115361285A/zh
Application granted granted Critical
Publication of CN115361285B publication Critical patent/CN115361285B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
    • H04L41/0816—Configuration setting characterised by the conditions triggering a change of settings the condition being an adaptation, e.g. in response to network events
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0246—Exchanging or transporting network management information using the Internet; Embedding network management web servers in network elements; Web-services-based protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/04—Network management architectures or arrangements
    • H04L41/042—Network management architectures or arrangements comprising distributed management centres cooperatively managing the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/085—Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853—Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种实现离在线业务混合部署的方法，包括步骤：获取集群管理平台的相关资源定义参数；依据集群管理平台的资源定义参数和信息发布请求，获取统一发布服务平台各业务资源相适应的配置信息；依据所述集群管理平台的资源定义参数，及统一发布服务平台的配置信息，获取主机的相关资源配置参数；依据所述集群管理平台的资源定义参数，及主机的资源配置参数，获取多个集群资源的部署信息；依据所述多个集群资源的部署信息，获取监控指标数据，并调整统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。本申请能够根据应用属性动态建模，保障高优先级应用，实现离在线混合部署，利用离在线应用潮汐特性，提升资源利用率。

Description

实现离在线业务混合部署的方法、装置、设备及介质
技术领域
本发明涉及数据处理技术领域，尤其是一种实现离在线业务混合部署的方法、装置、电子设备及存储介质。
背景技术
网络发布平台发布数据包括在线数据发布业务和离线数据发布业务，在现有技术中，离线数据发布业务和在线数据发布业务的集群均为专用集群，两者相互隔离，资源不共线，两种业务具有潮汐特性，离线任务多为晚间运行，在线业务多为白天运行，为保证在线业务的稳定性，一般会预留较多空闲扩展资源池用于临时扩容，同时，为了提高在线数据发布业务的效率，一般对在线应用设置等级定义，但在集群中无优先级差别，这些问题导致离在线集群资源无法共享，资源利用率较低，应用无优先级定义，在集群资源过载时无法优先保证高优先级应用的可用性。
因此，需要一种能够实现离在线业务混合部署的方法，提升集群资源整体利用效率，并能够保证在线业务的稳定性。
发明内容
为此，本发明提供了一种实现离在线业务混合部署的方法、装置、电子设备及存储介质，以力图解决或者至少缓解上面存在的至少一个问题。
根据本发明的一个方面，提供了一种实现离在线业务混合部署的方法，该方法通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，所述方法包括步骤：
获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器；
依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布；
依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务；
依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；
依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
可选的，所述获取集群管理平台的相关资源定义参数的步骤包括：
依据集群资源的标签、污点信息，获取集群资源的标识节点资源特性信息；
依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息；
依据所述发布请求的数据信息，获取在所述发布请求数据资源过载时，驱离或调整资源配置策略的资源协调器定义信息。
可选的，所述依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息包括：
使用的资源类型信息，所述使用的资源类型包括中央处理器CPU、存储器memory、图形处理器GPU；
节点选择器信息；
Node节点亲和性信息；
Pod节点亲和性和pod节点反亲和性信息；
容忍性特性信息。
可选的，所述依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息的步骤包括：
获取信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数；
依据所述信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数，获取所述信息发布请求的应用识别信息，所述应用识别信息包括应用类型信息、应用级别信息、状态存储信息、固定IP信息；
依据所述信息发布请求的应用识别信息，以及，应用建模配置规则及node资源使用指标，获取应用建模配置信息及对应的标准维度信息，所述应用建模配置信息包括应用优先级信息、维度信息、超配比例信息；
依据所述应用建模配置信息及对应的标准维度信息，以及应用模板匹配规则，获取匹配的应用模板，及所述应用编排所需参数信息，所述应用编排所需参数包括：node选择器、node亲和性、pod亲和性、pod反亲和性、容忍度；
依据所述匹配的应用模板，及所述应用编排所需参数信息，获取所述应用发布生成的信息发布请求信息。
可选的，所述应用模板匹配规则包括：
获取所述应用建模配置信息对应的标准维度信息；
依据所述应用建模配置信息对应的标准维度信息，获取每一个维度所匹配的应用模板配置列表；
依据每一个维度所匹配的应用模板配置列表，获取合并每一个维度所匹配的应用模板配置列表后的匹配应用模板。
可选的，所述依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取主机的API接口服务的配置信息；
依据所述主机的API接口服务的配置信息，获取所述统一发布服务平台的应用发布生成的信息发布请求信息；
依据所述统一发布服务平台的应用发布生成的信息发布请求信息，获取基于所述信息发布请求的所述主机的列表服务的配置信息；
依据所述主机的列表服务的配置信息，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数。
可选的，所述依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取所述多个集群资源的配置参数；
依据所述多个集群资源的配置参数，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数；
依据所述信息发布请求的信息发布控制参数，获取所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况；
依据所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况，获取所述pod资源限制与驱逐指标。。
根据本发明的又一方面，公开了一种实现离在线业务混合部署的装置，该装置通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，所述装置包括：
获取模块，用于获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器；
配置模块，用于依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
根据本发明的又一方面，提供了一种计算设备，包括：一个或多个处理器；和存储器；一个或多个程序，其中所述一个或多个程序存储在存储器中并被配置为由一个或多个处理器执行，所述一个或多个程序包括用于执行如上所述实现离在线业务混合部署的方法中的任一方法的指令。
根据本发明的又一方面，提供了一种存储一个或多个程序的计算机可读存储介质，所述一个或多个程序包括指令，所述指令当计算设备执行时，使得计算设备执行如上所述实现离在线业务混合部署的方法中的任一方法。
根据本发明的实现离在线业务混合部署的方案，通过获取集群管理平台的相关资源定义参数；依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。本申请能够根据应用属性动态建模，具有一定的系统柔性，减少编码工作，实现应用优先级，保障高优先级应用，实现离在线混合部署，利用离在线应用潮汐特性，提升资源利用率。
附图说明
为了实现上述以及相关目的，本文结合下面的描述和附图来描述某些说明性方面，这些方面指示了可以实践本文所公开的原理的各种方式，并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述，本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开，相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的应用场景示意图；以及
图2示出了根据本发明一个实施例的计算设备100的构造示意图；以及
图3示出了根据本发明一个实施例的实现离在线业务混合部署的方法应用的架构图；以及
图4示出了根据本发明一个实施例的实现离在线业务混合部署的方法200的流程图；以及
图5示出了根据本发明一个实施例的实现离在线业务混合部署的装置300的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
图1是本发明一个实施例的应用场景示意图，本申请提供的实现离在线业务混合部署的方法，可以应用于如图1所示的应用环境中。该实现离在线业务混合部署的方法应用于实现离在线业务混合部署的装置中。该实现离在线业务混合部署的装置配置在服务器010中，或者部分配置在终端020，部分配置在服务器010中，由终端020与服务器010交互完成实现离在线业务混合部署的方法。
其中，终端020与服务器010可以通过网络进行通信。
其中，终端020可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，本申请的服务器010可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
图2是示例计算设备100的框图。在基本的配置102中，计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。
取决于期望的配置，处理器104可以是任何类型的处理，包括但不限于：微处理器(μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用，或者在一些实现中，存储器控制器118可以是处理器104的一个内部部分。
取决于期望的配置，系统存储器106可以是任意类型的存储器，包括但不限于：易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。在一些实施方式中，应用122可以布置为在操作系统上利用程序数据124进行操作。在一些实施例中，计算设备100被配置为执行实现离在线业务混合部署的方法200，该方法200通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，程序数据124中包含了用于执行该方法200的指令。
计算设备100还可以包括有助于从各种接口设备(例如，输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156，它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如，键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160，其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块，并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号，它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例，通信介质可以包括诸如有线网络或者专线网络之类的有线介质，以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。在一些实施例中，计算机可读介质中存储一个或多个程序，这一个或多个程序中包括执行某些方法的指令，如根据本发明的实施例，计算设备100通过所述指令来执行实现离在线业务混合部署的方法200。
计算设备100可以实现为小尺寸便携(或者移动)电子设备的一部分，这些电子设备可以是诸如蜂窝电话、个人数字助理(PDA)、个人媒体播放器设备、无线网络浏览设备、个人头戴设备、应用专用设备、或者可以包括上面任何功能的混合设备。计算设备100还可以实现为包括桌面计算机和笔记本计算机配置的个人计算机。
图3示出了根据本发明一个实施例的实现离在线业务混合部署的方法200应用的架构图。如图3所示，该架构包括集群管理平台、统一发布服务平台、主机、集群、发布系统、集群资源监控指标，集群管理平台包括的功能模块有：集群资源定义、应用模块定义、资源协调器定义；统一发布服务平台包括的功能模块有：应用识别、应用建模、应用编排、应用发布；主机包括的功能模块有：API接口服务、列表服务、控制服务；集群包括：Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；发布系统包括的功能模块有：在线发布和离线发布。
通过设置所述集群管理平台的集群资源定义、应用模块定义、资源协调器定义的相关参数，完成节点资源特征的标识及维度划分、定义应用模板、设置资源过载时的资源调整策略；在完成集群管理平台的相关参数设置后，控制所述统一发布服务平台及主机完成相应参数设置，在发布系统发送相关数据发布请求后，统一发布服务平台完成应用属性建模、调度、编排、发布的数据服务工作，并通过主机将相应的数据发布请求发布；集群对主机发布的数据提供相应的数据集群服务，并实时采集集群中实时的node指标与pod资源使用情况，作为集群资源监控指标的数据依据，然后通过集群资源监控指标获取控制器周期获取资源使用率，依据资源协调器定义的规则进行pod资源限制与驱逐。
图4示出了根据本发明一个实施例的实现离在线业务混合部署的方法200的流程图，如图4所示，该方法200方法通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，方法200始于步骤S210，获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器。
具体的，本申请实施例的集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义。
具体的，集群资源定义是定义集群的标签、污点等，用于标识节点资源特性，集群资源按照如下维度进行划分：按照节点类型包括Kubernetes节点、混部节点；按照支持的资源划分包括cpu、gpu、lvm、glusterfs；按中间件划分包括ASR、KYLIN、ES/JKS、FLINK；应用模板定义是根据业务需求定义应用模板，当发布应用时，按照应用特征匹配相应的模板；资源协调器定义是用于定义在资源过载时的策略，用于驱离或者调整资源配额。
具体的，在本申请的一个实施例中，所述获取集群管理平台的相关资源定义参数的步骤包括：
依据集群资源的标签、污点信息，获取集群资源的标识节点资源特性信息；具体的，通过定义集群资源的标签、污点信息，可以标识节点资源特性，并进行维度划分，因此，在获取了集群资源的标签、污点信息以后，就可以获取集群资源的标识节点资源特性，并进行维度划分；
依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息；具体的，应用模板定义是根据业务需求进行应用模板的定义，当发布请求时，需按照应用特征匹配相应的模板；
依据所述发布请求的数据信息，获取在所述发布请求数据资源过载时，驱离或调整资源配置策略的资源协调器定义信息。具体的，在发布请求时，如果发布请求的数据信息存在资源过载，需要定义在资源过载时的策略，此时需要通过资源协调器资源来驱离或者调整资源配额。
具体的，在本申请的一个实施例中，所述依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息包括：
应用模板定义的主要配置项定义为：
使用的资源类型信息，所述使用的资源类型包括中央处理器CPU、存储器memory、图形处理器GPU；
节点选择器信息；
Node节点亲和性信息；
Pod节点亲和性和pod节点反亲和性信息；
容忍性特性信息。
通过步骤S220，依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布。
具体的，在所述集群管理平台对相关资源定义的参数设置完成之后，该集群管理平台将依据设定的参数控制统一发布服务平台各业务资源的工作，统一发布服务平台的主要功能是对离线信息发布请求和在线信息发布请求提供相应的信息发布业务服务，用于完成应用属性建模、调度、编排和发布等功能。
具体的，在本申请的一个实施例中，所述依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息的步骤包括：
获取信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数；具体的，信息发布请求包括在线信息发布请求和离线信息发布请求，在信息发布请求的类型及相应数据获取以后，即可根据集群管理平台设置的相关资源定义参数，获取统一发布服务平台的相应信息发布服务。在具体的应用中，在线信息发布请求和离线信息发布请求是通过两个独立的信息发布系统进行信息发布，但是二者可以通过统一的发布服务进行应用发布。
依据所述信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数，获取所述信息发布请求的应用识别信息，所述应用识别信息包括应用类型信息、应用级别信息、状态存储信息、固定IP信息；具体的，应用标识信息是统一发布服务平台在接收到信息发布请求以后，从所述信息发布请求中获取的应用标识，应用标识信息的识别包括识别信息发布请求中的应用类型信息、应用级别信息、状态存储信息及固定IP信息，对于一个信息发布请求而言，其应用类型信息用于判断是在线信息发布请求还是离线信息发布请求，应用级别信息是指信息发布请求的优先级信息，也就是在信息资源过载时，进行驱离或调整资源配额的优先级，状态存储信息是当前信息发布请求的是否有存储状态，固定IP信息是当前信息发布请求是否有固定的IP地址，如果有固定的IP地址，那么这个固定IP地址是什么。
依据所述信息发布请求的应用识别信息，以及，应用建模配置规则及node资源使用指标，获取应用建模配置信息及对应的标准维度信息，所述应用建模配置信息包括应用优先级信息、维度信息、超配比例信息；具体的，当识别了信息发布请求的应用识别以后，可以根据信息发布请求的应用特征，以及统一发布服务平台的内置模型规则、node资源使用指标，获取应用建模的配置信息，这个应用建模的配置信息是对应于当前信息发布请求的应用建模，根据应用建模的配置信息可以获取该信息发布请求应用的优先级维度信息、超配比例信息等，通过将信息发布请求应用的维度转换为标准的维度信息，就可以实现最终的当前信息发布请求应用的建模。具体的，信息发布请求应用的建模可以分为应用优先级建模和超配比例建模，优先级建模是设置信息发布请求应用的在线信息发布请求和离线信息发布请求的各个等级权重，通过权重来计算信息发布请求的优先级；超比例建模是设置在线信息发布请求和离线信息发布请求的不同资源类型的系数，来构建超配比例模型。
依据所述应用建模配置信息及对应的标准维度信息，以及应用模板匹配规则，获取匹配的应用模板，及所述应用编排所需参数信息，所述应用编排所需参数包括：node选择器、node亲和性、pod亲和性、pod反亲和性、容忍度；具体的，对于建模后的信息发布请求应用，根据信息发布请求应用建模后的应用维度，匹配定义的应用模板，生成相应的应用编排参数。
依据所述匹配的应用模板，及所述应用编排所需参数信息，获取所述应用发布生成的信息发布请求信息。具体的，当统一发布服务平台的各个模块的参数设置完毕以后，统一发布服务平台即将需要发布的信息发布请求的应用发送给主机，由主机通过服务器的相应数据和网络服务，将信息发布请求发送到互联网网络。
具体的，在本申请的一个实施例中，所述应用模板匹配规则包括：
获取所述应用建模配置信息对应的标准维度信息；
依据所述应用建模配置信息对应的标准维度信息，获取每一个维度所匹配的应用模板配置列表；
依据每一个维度所匹配的应用模板配置列表，获取合并每一个维度所匹配的应用模板配置列表后的匹配应用模板。
通过步骤S230，依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务。
具体的，主机是进行信息发布请求的网络服务器，统一发布服务平台将需要发布的信息发布请求发送到主机，由主机根据信息发布请求的需求发布到相应的网络空间，主机通过API接口服务与统一发布服务平台连接，接收信息发布请求信息，并通过列表服务将信息发布请求建立网络服务列表，通过控制服务控制信息发布请求按照设定的规则发布到网络空间。
具体的，在本申请的一个实施例中，所述依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取主机的API接口服务的配置信息；具体的，主机的API接口服务的配置信息依据集群管理平台的相关资源定义参数来设置，主机的API接口服务用于接收统一发布服务平台的信息发布请求，并根据信息发布请求中的请求信息发布信息，主机的API接口服务配置参数需要与统一发布服务平台的接口相适应，以能够正确接收统一发布服务平台的相关数据请求。
依据所述主机的API接口服务的配置信息，获取所述统一发布服务平台的应用发布生成的信息发布请求信息；
依据所述统一发布服务平台的应用发布生成的信息发布请求信息，获取基于所述信息发布请求的所述主机的列表服务的配置信息；具体的，当主机的API接口服务接收到统一发布服务平台的信息发布请求以后，根据接收到的信息发布请求的接收顺序，按照设定的规则构建数据列表，具体的，主机的列表服务的配置信息依据接收的信息发布请求和所述集群管理平台的相关资源定义参数相关。
依据所述主机的列表服务的配置信息，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数。
通过步骤S240，依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源。
具体的，集群资源是一个开源的容器集群管理系统，可以实现容器集群的自动化部署、自动扩缩容、维护等功能，它能对信息发布请求的数据提供集群服务，在实际的应用中，一般可以区分为在线集群资源和离线集群资源，对于在线信息发布请求的请求信息，一般将在线信息发布请求的相关应用发布到Kubernetes在线集群资源，对于离线信息发布请求的请求信息，一般将离线信息发布请求的相关应用发布到Hadoop离线集群资源。
具体的，在本申请的一个实施例中，所述依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取所述多个集群资源的配置参数；
依据所述多个集群资源的配置参数，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数；
依据所述信息发布请求的信息发布控制参数，获取所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况；
依据所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况，获取所述pod资源限制与驱逐指标。
具体的，混合集群包括Resource-coordinator模块和Node-expoter模块，Node-expoter模块用于获取实时的node指标与pod资源使用情况，作为pod资源限制与驱逐的依据，Resource-coordinator模块用于监控控制器周期获取资源使用率，依据资源协调器定义的规则进行pod资源限制与驱逐。
通过步骤S250，依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
具体的，由于Node-expoter模块获取实时的node指标与pod资源使用情况，并将采集的实时的node指标与pod资源使用情况发送给集群资源监控指标，然后由集群资源监控指标发送至主机的控制服务进行参数调整，使监控控制器的控制服务周期获取资源使用率，依据资源协调器定义的规则进行pod资源限制与驱逐。从而实现了依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
根据本发明的实现离在线业务混合部署的方案，通过获取集群管理平台的相关资源定义参数；依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。本申请能够根据应用属性动态建模，具有一定的系统柔性，减少编码工作，实现应用优先级，保障高优先级应用，实现离在线混合部署，利用离在线应用潮汐特性，提升资源利用率。
应该理解的是，虽然图4的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图4中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，如图5所示，提供了一种实现离在线业务混合部署的装置300，所述装置300通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，所述装置300包括：获取模块、配置模块。
获取模块，用于获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器；
配置模块，用于依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
具体的，在本申请的另一个实施例中，所述获取模块用于依据集群资源的标签、污点信息，获取集群资源的标识节点资源特性信息；依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息；依据所述发布请求的数据信息，获取在所述发布请求数据资源过载时，驱离或调整资源配置策略的资源协调器定义信息。
具体的，在本申请的另一个实施例中，所述配置模块用于获取信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数；依据所述信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数，获取所述信息发布请求的应用识别信息，所述应用识别信息包括应用类型信息、应用级别信息、状态存储信息、固定IP信息；依据所述信息发布请求的应用识别信息，以及，应用建模配置规则及node资源使用指标，获取应用建模配置信息及对应的标准维度信息，所述应用建模配置信息包括应用优先级信息、维度信息、超配比例信息；依据所述应用建模配置信息及对应的标准维度信息，以及应用模板匹配规则，获取匹配的应用模板，及所述应用编排所需参数信息，所述应用编排所需参数包括：node选择器、node亲和性、pod亲和性、pod反亲和性、容忍度；依据所述匹配的应用模板，及所述应用编排所需参数信息，获取所述应用发布生成的信息发布请求信息。
具体的，在本申请的另一个实施例中，所述配置模块用于获取所述应用建模配置信息对应的标准维度信息；依据所述应用建模配置信息对应的标准维度信息，获取每一个维度所匹配的应用模板配置列表；依据每一个维度所匹配的应用模板配置列表，获取合并每一个维度所匹配的应用模板配置列表后的匹配应用模板。
具体的，在本申请的另一个实施例中，所述配置模块用于依据所述集群管理平台的相关资源定义参数，获取主机的API接口服务的配置信息；依据所述主机的API接口服务的配置信息，获取所述统一发布服务平台的应用发布生成的信息发布请求信息；依据所述统一发布服务平台的应用发布生成的信息发布请求信息，获取基于所述信息发布请求的所述主机的列表服务的配置信息；依据所述主机的列表服务的配置信息，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数。
具体的，在本申请的另一个实施例中，所述配置模块用于依据所述集群管理平台的相关资源定义参数，获取所述多个集群资源的配置参数；依据所述多个集群资源的配置参数，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数；依据所述信息发布请求的信息发布控制参数，获取所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况；依据所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况，获取所述pod资源限制与驱逐指标。
根据本发明的实现离在线业务混合部署的方案，通过获取模块获取集群管理平台的相关资源定义参数；配置模块依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。本申请能够根据应用属性动态建模，具有一定的系统柔性，减少编码工作，实现应用优先级，保障高优先级应用，实现离在线混合部署，利用离在线应用潮汐特性，提升资源利用率。
应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中，或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外，所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此，具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外，装置实施例的在此所述的元素是如下装置的例子：该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样，除非另行规定，使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例，并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明，但是受益于上面的描述，本技术领域内的技术人员明白，在由此描述的本发明的范围内，可以设想其它实施例。此外，应当注意，本说明书中使用的语言主要是为了可读性和教导的目的而选择的，而不是为了解释或者限定本发明的主题而选择的。因此，在不偏离所附权利要求书的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围，对本发明所做的公开是说明性的，而非限制性的，本发明的范围由所附权利要求书限定。

Claims (10)

1.一种实现离在线业务混合部署的方法，所述方法通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，所述方法包括步骤：
获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器；
依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布；
依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务；
依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；
依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
2.如权利要求1所述的方法，其中，所述获取集群管理平台的相关资源定义参数的步骤包括：
依据集群资源的标签、污点信息，获取集群资源的标识节点资源特性信息；
依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息；
依据所述发布请求的数据信息，获取在所述发布请求数据资源过载时，驱离或调整资源配置策略的资源协调器定义信息。
3.如权利要求2所述的方法，其中，所述依据信息发布请求的类型，按照应用特性匹配参数，获取应用模板定义信息包括：
使用的资源类型信息，所述使用的资源类型包括中央处理器CPU、存储器memory、图形处理器GPU；
节点选择器信息；
Node节点亲和性信息；
Pod节点亲和性和pod节点反亲和性信息；
容忍性特性信息。
4.如权利要求1所述的方法，其中，所述依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息的步骤包括：
获取信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数；
依据所述信息发布请求的类型及数据信息，以及所述集群管理平台的相关资源定义参数，获取所述信息发布请求的应用识别信息，所述应用识别信息包括应用类型信息、应用级别信息、状态存储信息、固定IP信息；
依据所述信息发布请求的应用识别信息，以及，应用建模配置规则及node资源使用指标，获取应用建模配置信息及对应的标准维度信息，所述应用建模配置信息包括应用优先级信息、维度信息、超配比例信息；
依据所述应用建模配置信息及对应的标准维度信息，以及应用模板匹配规则，获取匹配的应用模板，及所述应用编排所需参数信息，所述应用编排所需参数包括：node选择器、node亲和性、pod亲和性、pod反亲和性、容忍度；
依据所述匹配的应用模板，及所述应用编排所需参数信息，获取所述应用发布生成的信息发布请求信息。
5.如权利要求4所述的方法，其中，所述应用模板匹配规则包括：
获取所述应用建模配置信息对应的标准维度信息；
依据所述应用建模配置信息对应的标准维度信息，获取每一个维度所匹配的应用模板配置列表；
依据每一个维度所匹配的应用模板配置列表，获取合并每一个维度所匹配的应用模板配置列表后的匹配应用模板。
6.如权利要求1所述的方法，其中，所述依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取主机的API接口服务的配置信息；
依据所述主机的API接口服务的配置信息，获取所述统一发布服务平台的应用发布生成的信息发布请求信息；
依据所述统一发布服务平台的应用发布生成的信息发布请求信息，获取基于所述信息发布请求的所述主机的列表服务的配置信息；
依据所述主机的列表服务的配置信息，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数。
7.如权利要求1所述的方法，其中，所述依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息的步骤包括：
依据所述集群管理平台的相关资源定义参数，获取所述多个集群资源的配置参数；
依据所述多个集群资源的配置参数，获取所述主机的控制服务对所述信息发布请求的信息发布控制参数；
依据所述信息发布请求的信息发布控制参数，获取所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况；
依据所述Kubernetes在线集群资源及Hadoop离线集群资源的信息发布服务信息，及混合集群的实时node资源使用情况和pod资源使用情况，获取所述pod资源限制与驱逐指标。
8.一种实现离在线业务混合部署的装置，所述装置通过集群管理平台实现对集群资源定义、应用模板定义和资源协调器定义，通过统一发布服务平台实现应用属性建模、调度、编排和发布工作，所述装置包括：
获取模块，用于获取集群管理平台的相关资源定义参数，所述集群管理平台的相关资源包括：集群资源、应用模板、资源协调器；
配置模块，用于依据所述集群管理平台的相关资源定义参数和信息发布请求的类型及数据，获取统一发布服务平台各业务资源相适应的配置信息，所述信息发布请求的类型包括在线发布请求、离线发布请求，所述统一发布服务平台各业务资源包括：应用识别、应用建模、应用编排、应用发布；依据所述集群管理平台的相关资源定义参数，及所述统一发布服务平台各业务资源相适应的配置信息，获取主机的相关资源配置参数，所述主机的相关资源包括：API接口服务、列表服务、控制服务；依据所述集群管理平台的相关资源定义参数，及主机的相关资源配置参数，获取多个集群资源的部署信息，所述多个集群资源包括Kubernetes在线集群资源、Hadoop离线集群资源、混合集群资源；依据所述多个集群资源的部署信息，获取多个集群资源的监控指标数据，并调整所述统一发布服务平台的相关资源定义参数，和主机的相关资源配置参数。
9.一种电子设备，包括：
一个或多个处理器；和
存储器；
一个或多个程序，其中所述一个或多个程序存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序包括用于执行根据权利要求1-7所述的方法中的任一方法的指令。
10.一种存储一个或多个程序的计算机可读存储介质，所述一个或多个程序包括指令，所述指令当计算设备执行时，使得所述计算设备执行根据权利要求1-7所述的方法中的任一方法。
CN202210846756.2A 2022-07-05 2022-07-05 实现离在线业务混合部署的方法、装置、设备及介质 Active CN115361285B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210846756.2A CN115361285B (zh) 2022-07-05 2022-07-05 实现离在线业务混合部署的方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210846756.2A CN115361285B (zh) 2022-07-05 2022-07-05 实现离在线业务混合部署的方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN115361285A true CN115361285A (zh) 2022-11-18
CN115361285B CN115361285B (zh) 2024-02-23

Family

ID=84031574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210846756.2A Active CN115361285B (zh) 2022-07-05 2022-07-05 实现离在线业务混合部署的方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN115361285B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108809722A (zh) * 2018-06-13 2018-11-13 郑州云海信息技术有限公司 一种部署Kubernetes集群的方法、装置和存储介质
CN111405055A (zh) * 2020-03-23 2020-07-10 北京达佳互联信息技术有限公司 多集群管理方法、系统、服务器、存储介质
CN111984270A (zh) * 2020-08-20 2020-11-24 第四范式（北京）技术有限公司 应用部署方法和系统
WO2020238751A1 (zh) * 2019-05-28 2020-12-03 阿里巴巴集团控股有限公司 无服务器架构下的资源访问方法、设备、系统及存储介质
CN112199194A (zh) * 2020-10-14 2021-01-08 广州虎牙科技有限公司 基于容器集群的资源调度方法、装置、设备和存储介质
CN112214330A (zh) * 2020-11-04 2021-01-12 腾讯科技（深圳）有限公司 集群中主节点的部署方法、装置及计算机可读存储介质
US10896060B1 (en) * 2020-01-14 2021-01-19 Capital One Services, Llc Resource monitor for monitoring long-standing computing resources
CN112346846A (zh) * 2019-08-06 2021-02-09 陆明 对云资源进行分析和编排的方法、装置以及存储介质
CN113641456A (zh) * 2021-08-18 2021-11-12 中国联合网络通信集团有限公司 数据集群的部署方法、装置及系统
CN113687912A (zh) * 2021-07-30 2021-11-23 济南浪潮数据技术有限公司 容器集群管理方法、装置、系统、电子设备及存储介质
CN113886009A (zh) * 2021-09-24 2022-01-04 济南浪潮数据技术有限公司 一种云服务平台部署大数据集群的系统及方法
WO2022105589A1 (zh) * 2020-11-20 2022-05-27 上海连尚网络科技有限公司 资源调度方法、装置、电子设备和计算机可读介质
CN114579298A (zh) * 2022-01-27 2022-06-03 浙江大华技术股份有限公司 资源管理方法、资源管理器和计算机可读存储介质
CN114666333A (zh) * 2022-04-02 2022-06-24 国网江苏省电力有限公司信息通信分公司 一种基于多租户理论面向云计算资源调度问题的控制方法

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108809722A (zh) * 2018-06-13 2018-11-13 郑州云海信息技术有限公司 一种部署Kubernetes集群的方法、装置和存储介质
WO2020238751A1 (zh) * 2019-05-28 2020-12-03 阿里巴巴集团控股有限公司 无服务器架构下的资源访问方法、设备、系统及存储介质
CN112346846A (zh) * 2019-08-06 2021-02-09 陆明 对云资源进行分析和编排的方法、装置以及存储介质
US10896060B1 (en) * 2020-01-14 2021-01-19 Capital One Services, Llc Resource monitor for monitoring long-standing computing resources
CN111405055A (zh) * 2020-03-23 2020-07-10 北京达佳互联信息技术有限公司 多集群管理方法、系统、服务器、存储介质
CN111984270A (zh) * 2020-08-20 2020-11-24 第四范式（北京）技术有限公司 应用部署方法和系统
CN112199194A (zh) * 2020-10-14 2021-01-08 广州虎牙科技有限公司 基于容器集群的资源调度方法、装置、设备和存储介质
CN112214330A (zh) * 2020-11-04 2021-01-12 腾讯科技（深圳）有限公司 集群中主节点的部署方法、装置及计算机可读存储介质
WO2022105589A1 (zh) * 2020-11-20 2022-05-27 上海连尚网络科技有限公司 资源调度方法、装置、电子设备和计算机可读介质
CN113687912A (zh) * 2021-07-30 2021-11-23 济南浪潮数据技术有限公司 容器集群管理方法、装置、系统、电子设备及存储介质
CN113641456A (zh) * 2021-08-18 2021-11-12 中国联合网络通信集团有限公司 数据集群的部署方法、装置及系统
CN113886009A (zh) * 2021-09-24 2022-01-04 济南浪潮数据技术有限公司 一种云服务平台部署大数据集群的系统及方法
CN114579298A (zh) * 2022-01-27 2022-06-03 浙江大华技术股份有限公司 资源管理方法、资源管理器和计算机可读存储介质
CN114666333A (zh) * 2022-04-02 2022-06-24 国网江苏省电力有限公司信息通信分公司 一种基于多租户理论面向云计算资源调度问题的控制方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ABDELKHALIK MOSA; TAMAS KISS; GABRIELE PIERANTONI; JAMES DESLAURIERS; DIMITRIOS KAGIALIS; GABOR TERSTYANSZKY: "Towards a Cloud Native Big Data Platform using MiCADO", IEEE *
潘佳艺;王芳;杨静怡;谭支鹏;: "异构Hadoop集群下的负载自适应反馈调度策略", 计算机工程与科学, no. 03 *
葛浙奉;王济伟;蒋从锋;张纪林;俞俊;林江彬;闫龙川;任祖杰;万健;: "混部集群资源利用分析", 计算机学报, no. 06 *

Also Published As

Publication number Publication date
CN115361285B (zh) 2024-02-23

Similar Documents

Publication Publication Date Title
WO2020199487A1 (zh) 访问请求的响应方法、装置、设备及存储介质
CN107688492B (zh) 资源的控制方法、装置和集群资源管理系统
CN109582448B (zh) 一种面向关键度和时效性的边缘计算任务调度方法
CN110968366B (zh) 一种基于有限mec资源的任务卸载方法、装置及设备
CN105103506A (zh) 用于为云计算网络中的非均匀带宽请求分配带宽的方法和系统
WO2021227999A1 (zh) 云计算服务系统和方法
WO2024016596A1 (zh) 容器集群调度的方法、装置、设备及存储介质
CN112925607A (zh) 一种系统扩缩容方法及装置、电子设备
CN110806928A (zh) 一种作业提交方法及系统
CN111901490A (zh) 资源共享方法、装置、计算机装置及存储介质
CN114327811A (zh) 一种任务调度方法、装置、设备及可读存储介质
CN111611076B (zh) 任务部署约束下移动边缘计算共享资源公平分配方法
US20220229701A1 (en) Dynamic allocation of computing resources
CN111796933A (zh) 资源调度方法、装置、存储介质和电子设备
CN112422450A (zh) 计算机设备、服务请求的流量控制方法及装置
WO2022062981A1 (zh) 资源调度方法和系统、电子设备及计算机可读存储介质
CN111158893B (zh) 应用于雾计算网络的任务卸载方法、系统、设备及介质
CN106856441A (zh) Nfvo中的vim选择方法和装置
CN104166581A (zh) 一种面向增量制造设备的虚拟化方法
CN115361285B (zh) 实现离在线业务混合部署的方法、装置、设备及介质
CN116755829A (zh) 主机PCIe拓扑结构的生成方法和容器资源分配方法
CN114003238B (zh) 一种基于转码卡的容器部署方法、装置、设备及存储介质
Guo et al. PARA: Performability‐aware resource allocation on the edges for cloud‐native services
US8379525B2 (en) Techniques to support large numbers of subscribers to a real-time event
Awasare et al. Survey and comparative study on resource allocation strategies in cloud computing environment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant