CN106445675A - 一种b2b平台分布式应用调度与资源分配方法 - Google Patents

一种b2b平台分布式应用调度与资源分配方法 Download PDF

Info

Publication number
CN106445675A
CN106445675A CN201610916506.6A CN201610916506A CN106445675A CN 106445675 A CN106445675 A CN 106445675A CN 201610916506 A CN201610916506 A CN 201610916506A CN 106445675 A CN106445675 A CN 106445675A
Authority
CN
China
Prior art keywords
resource
queue
scheduling
application
usage amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610916506.6A
Other languages
English (en)
Other versions
CN106445675B (zh
Inventor
徐飞
房鹏展
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Focus Technology Co Ltd
Original Assignee
Focus Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Focus Technology Co Ltd filed Critical Focus Technology Co Ltd
Priority to CN201610916506.6A priority Critical patent/CN106445675B/zh
Publication of CN106445675A publication Critical patent/CN106445675A/zh
Application granted granted Critical
Publication of CN106445675B publication Critical patent/CN106445675B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种B2B平台分布式应用调度与资源分配方法，包括如下步骤：定时任务，系统可使用消息传递代替部分使用作业的场景；将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处理；将B2B平台的日志处理资源分配，对B2B平台所有的日志处理与数据处理时，资源的调度和程序的统一运行达到了统一的分配；所有输入的程序先向该全局资源管理器申请资源，申请成功之后，再由集群的节点中的自身的调度器决定资源交由哪个可用的节点，并分配任务使用；通过三种调度器的调度，按照先进先出的方式处理应用；队列设定最大提交的应用数量和占用资源的百分比；在分布式应用调度与自动资源分配上有显著的效果。

Description

一种B2B平台分布式应用调度与资源分配方法
技术领域
本发明涉及网站平台分布式应用调度计算与存储等资源分配的方法，尤其是一种B2B平台分布式应用调度与资源分配方法。
背景技术
电子商务发展至今，各运营系统已经产生海量的数据日志，我们需要对这些数据分析的同时，也在考虑集群的资源调度情况。
国内现有的用调度与资源分配方法，特别是针对B2B平台的分布式用调度与资源分配，以及在大数据用调度与资源分配中，海量数据调度的情况下，容易出现很多问题或者无法保证实时性，比如：
中国专利CN201210155124.8，给出了一种使用多点协作传输技术的通信系统中。该方法包括步骤：S1，染色体编码；S2，初始化设置；S3，计算适应度值；S4，判断最优解是否优于精英，若是进行精英更新执行S5；否则跳到S5；S5，判断是否已产生预定代种群，若否执行S6；否则跳到S8；S6，参加繁殖过程产生两个子染色体个体；S7，判断是否已产生预定个子染色体个体，若是跳到S3重新计算；否则转S6继续繁殖；S8，依据精英对应的解进行调度和资源分配。本发明的方法可在满足调度限制及功率限制条件下，联合地进行调度和资源分配，以较低的计算复杂度可靠高效地优化系统性能。该方法属于在网络通讯方面的数据传输技术，无法适用于网页以及B2B的网站中。
中国专利CN200810216675.4，提出的方法包括：一、根据UE的反馈信息，生成重传UE序列和新传UE序列；二、对所述重传UE序列进行排序，得到的重传UE优先级顺序；并计算所有重传UE所需的资源块的总数，判断所述资源块总数是否大于等于调度周期内可用资源块总数，若是，则执行步骤四；否则，执行步骤三；三、计算新传UE的公平因子，并对所述新传UE进行排序，按照得到的优先级顺序，依次为所述新传UE分配资源块并进行调度；四、按照所述重传UE优先级顺序，依次为每个重传UE分配资源块并进行调度。本发明兼顾了UE的业务类型，将调度与资源分配相对独立化，提高了系统性能。。该方法主要解决网络通讯中的调度与分配的方法，以及仅针对对LTE FDD系统，在B2B网站中无法实施该内容。
发明内容
发明目的：为了解决B2B网站在大数据集群分析中各程序之间运行资源分配与执行的调度与资源分配，本发明提供一种B2B平台分布式应用调度与资源分配方法，针对B2B网站平台集群的分布式调用，以及自动资源分配的方法。针对各运营系统已经产生海量的数据日志，我们需要对这些数据分析的同时，也在考虑集群的资源调度情况。通过B2B平台的海量日志文件在各分布式运用平台上的调用与资源分配，包括实时计算等运用，并且通过该方法高效的解决了该问题。
本发明的技术方案是，一种B2B平台分布式应用调度与资源分配方法，其特征在于：包括如下步骤：
(1)定时任务，B2B平台系统使用消息传递代替部分使用作业的场景；消息传递时通过队列列表，将待处理的数据放入队列表，然后使用消息中间件的定时任务拉取队列表的数据并处理；这种情况使用消息中间件的推送模式更好的处理实时性数据；而且基于数据库的消息存储吞吐量远远小于基于文件的顺序追加消息的存储量；将B2B平台系统的日志处理资源分配：对B2B平台所有的日志处理与数据处理时，资源的调度和程序的统一运行达到了统一的分配；
(2)B2B平台系统中所有输入的程序(节点)先向该全局资源管理器申请资源，申请成功之后，再由平台系统集群的节点调度器,所述节点调度器是由当前节点的资源占有率来决定资源交由哪个可用的节点，并分配任务使用，包括内存，CPU，网络IO等不同资源，所有程序运行在同一个集群中，通过资源隔离容器软件模块的设定避免任务之间由资源争用导致效率下降，采用静态的资源分配，将所有输入的程序、各种资源的框架部署到同一个集群中，进行统一管理和调度，由于各种作业交错且作业提交频率大幅度升高，所以提高了资源利用率；
(3)通过三种调度器的调度，第一种，按照先进先出的方式处理应用，对先进入队列的数据具有最高优先级，第二种，按照容量大小进行调度，队列进入容易大的和容量小的，按不同容量大小的数据进行并发处理，第三种，通过公平调度原则，当前队列自动根据所需资源大小进行分配并发调度；
(4)队列可以设定最大提交的应用数量和占用资源的百分比。占用资源的百分比这个配置是用来计算队列的最大活跃应用数量。调度器中最大活跃应用数量＝占用资源的百分比*队列最大可使用资源量/最小的容器分配额度。配置文件中会配置内存额度会比最小容器分配额度大，最大活跃应用数量高，加入不同的计算框架,分配会不同，使用最小容器分配额度来计算。并且计算内存使用量来控制；
(5)不同队列之间，按照队列的资源使用比排序。同一队列中的应用按照应用id排序，也就是先进先出。当调度次数小于本地延迟调度次数的时候不接受机架调度。本地延迟调度次数进行配置，默认是-1，不开启延迟调度。任意调度的延迟调度上限是应用申请的机器的数量。
(6)计算比较是否需要资源；资源使用量小于资源需求量且小于最小共享量；如果两者都需要资源，计算资源分配比＝资源使用量/Min(资源需求量，最小共享量)；资源分配比较小的优先；如果一个需要，一个不需要，需要的优先；如果两者都不需要资源，计算使用权值比＝资源使用量/权值；使用权值比较小的优先；
具体而言，各步骤的具体化：(1)定时任务，定义队列列表，将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处理。这种情况使用消息中间件的推送模式可更好的处理实时性数据。
(2)所有输入的程序先向该全局资源管理器申请资源，申请成功之后，再由集群的节点中的自身的调度器决定资源交由哪个可用的节点，并分配任务使用；通过资源隔离容器避免任务之间由资源争用导致效率下降；
(3)通过三种调度器的调度，按照先进先出的方式处理应用；只有一个队列可提交应用，所有用户提交到这个队列；针对这个队列设置ACL；没有应用优先级可以配置。
多队列调度，设置当前限制资源使用量。队列间的资源分配按使用量进行排列，使得容量小的队列有竞争优势，尤其是队列间的资源分配以使用量作排列依据，使得使用量在200M以下的队列有竞争优势；如果平台系统集群整体吞吐较大，延迟调度机制使得应用可以放弃跨机器或者跨机架的调度机会，进行本地调度。
多队列多用户共享资源，设置特有的客户端创建队列的特性，使得进行权限控制。根据队列设定的最小共享量或者权重等参数，按比例共享资源。判断延迟调度机制的目标对象相等。如果存在资源抢占特性，当前调度器能够依据公平资源共享，计算每个队列应得的资源，将超额资源的队列的部分容器进行释放。
(4)队列设定最大提交的应用数量和AM占用资源的百分比；AM占用资源的百分比这个配置是用来计算队列的最大活跃应用数量；
(5)计算比较体是否需要资源；即资源使用量是否小于资源需求量且小于最小共享量。
有益效果：为了解决B2B网站在大数据集群分析中各程序之间运行资源分配与执行的调度与资源分配，针对各运营系统已经产生海量的数据日志，我们需要对这些数据分析的同时，也在考虑集群的资源调度情况。包括实时计算等运用，并且通过该方法高效的解决了该问题。本发明多队列多用户共享资源，设置特有的客户端创建队列的特性，使得进行权限控制。根据队列设定的最小共享量或者权重等参数，按比例共享资源。
附图说明
图1为本发明方法的实施流程图。
具体实施方式
一种B2B平台分布式应用调度与资源分配方法，包括如下步骤：
(1)定时任务，系统可使用消息传递代替部分使用作业的场景。定义队列列表，将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处理。这种情况使用消息中间件的推送模式可更好的处理实时性数据。而且基于数据库的消息存储吞吐量远远小于基于文件的顺序追加消息存储。将B2B平台的日志处理资源分配，对B2B平台所有的日志处理与数据处理时，资源的调度和程序的统一运行达到了统一的分配；
(2)所有输入的程序先向该全局资源管理器申请资源，申请成功之后，再由集群的节点中的自身的调度器决定资源交由哪个可用的节点，并分配任务使用，包括资源的内存，CPU，网络IO等不同，所有程序运行在同一个集群中，通过资源隔离容器避免任务之间由资源争用导致效率下降，采用静态资源分配，将各种框架部署到同一个集群中，进行统一管理和调度，由于各种作业交错且作业提交频率大幅度升高，所以提高了资源利用率；
(3)通过三种调度器的调度，按照先进先出的方式处理应用。只有一个队列可提交应用，所有用户提交到这个队列。可以针对这个队列设置ACL。没有应用优先级可以配置。
多队列调度，设置当前限制资源使用量。队列间的资源分配按使用量进行排列，使得容量小的队列有竞争优势。如果集群整体吞吐较大，延迟调度机制使得应用可以放弃，跨机器或者跨机架的调度机会，进行本地调度。
多队列多用户共享资源，设置特有的客户端创建队列的特性，使得进行权限控制。根据队列设定的最小共享量或者权重等参数，按比例共享资源。判断延迟调度机制的目标对象相等。如果存在资源抢占特性，当前调度器能够依据公平资源共享，计算每个队列应得的资源，将超额资源的队列的部分容器进行释放。
(4)队列可以设定最大提交的应用数量和占用资源的百分比。占用资源的百分比这个配置是用来计算队列的最大活跃应用数量。调度器中最大活跃应用数量＝占用资源的百分比*队列最大可使用资源量/最小的容器分配额度。配置文件中会配置内存额度会比最小容器分配额度大，最大活跃应用数量高，加入不同的计算框架,分配会不同，使用最小容器分配额度来计算。并且计算内存使用量来控制；
(5)不同队列之间，按照队列的资源使用比排序。同一队列中的应用按照应用id排序，也就是先进先出。当调度次数小于本地延迟调度次数的时候不接受机架调度。本地延迟调度次数进行配置，默认是-1，不开启延迟调度。任意调度的延迟调度上限是应用申请的机器的数量。
(6)计算比较体是否需要资源。即资源使用量是否小于资源需求量且小于最小共享量。如果两者都需要资源，计算资源分配比＝资源使用量/资源需求量。资源分配比较小的优先。如果一个需要，一个不需要，需要的优先。如果两者都不需要资源，计算使用权值比＝资源使用量/权值。使用权值比较小的优先。

Claims (7)

1.一种B2B平台分布式应用调度与资源分配方法，其特征在于：包括如下步骤：
(1)定时任务，系统可使用消息传递代替部分使用作业的场景；通过队列列表；将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处理；这种情况使用消息中间件的推送模式可更好的处理实时性数据；而且基于数据库的消息存储吞吐量远远小于基于文件的顺序追加消息存储；将B2B平台的日志处理资源分配，对B2B平台所有的日志处理与数据处理时，资源的调度和程序的统一运行达到了统一的分配；
(2)所有输入的程序先向该全局资源管理器申请资源，申请成功之后，再由集群的节点中的自身的调度器决定资源交由哪个可用的节点，并分配任务使用，包括资源的内存、CPU、网络IO不同；所有程序运行在同一个集群中，通过资源隔离容器避免任务之间由资源争用导致效率下降；采用静态资源分配，将各种框架部署到同一个集群中，进行统一管理和调度，因各种作业交错且作业提交频率大幅度升高，所以提高了资源利用率；
(3)通过三种调度器的调度，按照先进先出的方式处理应用；当只有一个队列提交应用，所有用户提交到这个队列；针对这个队列设置ACL，没有应用优先级能够配置；多队列调度，每个队列限制资源使用量；但是，队列间的资源分配以使用量作排列依据，使得容量小的队列有竞争优势；集群整体吞吐较大；延迟调度机制使得应用可以放弃，跨机器或者跨机架的调度机会，争取本地调度；
(4)队列设定最大提交的应用数量和占用资源的百分比；如果加入不同的计算框架,AM的分配会不一致，所以这里使用最小容器分配额度来计算；计算AM的内存使用量来控制；
(5)不同队列之间，按照队列的资源使用比排序；同一队列中的应用按照应用id排序，也就是先进先出；当调度次数小于本地延迟调度次数的时候不接受机架调度；本地延迟调度次数，默认是-1，不开启延迟调度；任意调度的延迟调度上限是应用申请的机器的数量；
(6)计算比较是否需要资源，即资源使用量小于资源需求量且小于最小共享量；如果两者都需要资源，计算资源分配比＝资源使用量/Min；资源分配比较小的优先；如果一个需要，一个不需要，需要的优先；如果两者都不需要资源，计算使用权值比＝资源使用量/权值；使用权值比较小的优先。
2.根据权利要求1的方法，其特征是，步骤(1)定时任务中，定义队列列表，将待处理的数据放入队列表，然后使用频率极短的定时任务拉取队列表的数据并处理；这种情况使用消息中间件的推送模式能更好的处理实时性数据。
3.根据权利要求1的方法，其特征是，步骤(2)所有输入的程序先向该全局资源管理器申请资源，申请成功之后，再由集群的节点中的自身的调度器决定资源交由哪个可用的节点，并分配任务使用；通过资源隔离容器避免任务之间由资源争用导致效率下降。
4.根据权利要求1的方法，其特征是，步骤(3)通过三种调度器的调度，按照先进先出的方式处理应用；只有一个队列可提交应用，所有用户提交到这个队列；针对这个队列设置ACL；没有应用优先级可以配置。
5.根据权利要求1的方法，其特征是，步骤(3)多队列调度，设置当前限制资源使用量。队列间的资源分配按使用量进行排列，使得容量小的队列有竞争优势，尤其是队列间的资源分配以使用量作排列依据，使得使用量在200M以下的队列有竞争优势；如果平台系统集群整体吞吐较大，延迟调度机制使得应用可以放弃跨机器或者跨机架的调度机会，进行本地调度。
6.根据权利要求1的方法，其特征是，步骤(3)多队列多用户共享资源，设置特有的客户端创建队列的特性，使得进行权限控制。根据队列设定的最小共享量或者权重等参数，按比例共享资源。判断延迟调度机制的目标对象相等。如果存在资源抢占特性，当前调度器能够依据公平资源共享，计算每个队列应得的资源，将超额资源的队列的部分容器进行释放。
7.根据权利要求1的方法，其特征是，步骤(4)队列设定最大提交的应用数量和AM占用资源的百分比；AM占用资源的百分比这个配置是用来计算队列的最大活跃应用数量；步骤(5)计算比较体是否需要资源；即资源使用量是否小于资源需求量且小于最小共享量。
CN201610916506.6A 2016-10-20 2016-10-20 一种b2b平台分布式应用调度与资源分配方法 Active CN106445675B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610916506.6A CN106445675B (zh) 2016-10-20 2016-10-20 一种b2b平台分布式应用调度与资源分配方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610916506.6A CN106445675B (zh) 2016-10-20 2016-10-20 一种b2b平台分布式应用调度与资源分配方法

Publications (2)

Publication Number Publication Date
CN106445675A true CN106445675A (zh) 2017-02-22
CN106445675B CN106445675B (zh) 2019-12-31

Family

ID=58176381

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610916506.6A Active CN106445675B (zh) 2016-10-20 2016-10-20 一种b2b平台分布式应用调度与资源分配方法

Country Status (1)

Country Link
CN (1) CN106445675B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107391271A (zh) * 2017-05-17 2017-11-24 阿里巴巴集团控股有限公司 一种基于消息队列系统的延时任务触发方法和装置
CN107544888A (zh) * 2017-07-11 2018-01-05 新华三技术有限公司 一种日志处理方法及系统
CN108388469A (zh) * 2018-01-10 2018-08-10 北京思特奇信息技术股份有限公司 一种进程调度方法及系统
CN108897627A (zh) * 2018-07-23 2018-11-27 南京叠嘉信息科技有限公司 针对典型容器的Docker动态调度算法
CN109298949A (zh) * 2018-12-04 2019-02-01 国网辽宁省电力有限公司大连供电公司 一种分布式文件系统的资源调度系统
CN109814987A (zh) * 2017-11-20 2019-05-28 北京京东尚科信息技术有限公司 任务处理方法、系统、电子设备和计算机可读介质
CN111913791A (zh) * 2020-07-02 2020-11-10 北京和瑞精准医学检验实验室有限公司 任务调度方法、装置、设备和计算机可读存储介质
CN112019453A (zh) * 2019-05-29 2020-12-01 潘仲光 资源重分配方法、设备及存储介质
CN112052093A (zh) * 2020-09-08 2020-12-08 哈尔滨工业大学 基于消息队列技术的实验类大数据资源分配管理系统
CN112667348A (zh) * 2020-12-19 2021-04-16 前海飞算科技(深圳)有限公司 一种MySQL容器化的方法、系统及计算机设备
CN113204433A (zh) * 2021-07-02 2021-08-03 上海钐昆网络科技有限公司 一种集群资源的动态分配方法、装置、设备及存储介质
CN117453378A (zh) * 2023-12-25 2024-01-26 北京卡普拉科技有限公司 多应用程序间i/o请求调度方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101069161A (zh) * 2004-12-01 2007-11-07 索尼计算机娱乐公司 调度方法、调度装置和多处理器系统
US20100333102A1 (en) * 1999-09-30 2010-12-30 Sivaram Balasubramanian Distributed Real-Time Operating System
CN102708003A (zh) * 2011-03-28 2012-10-03 闫德莹 一种云平台下的资源分配方法
US20140064077A1 (en) * 2012-08-30 2014-03-06 Taqua Wbh, Llc Opportunistic wireless resource utilization using dynamic traffic shaping
CN104657214A (zh) * 2015-03-13 2015-05-27 华存数据信息技术有限公司 一种基于多队列和多优先级的大数据任务管理系统和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100333102A1 (en) * 1999-09-30 2010-12-30 Sivaram Balasubramanian Distributed Real-Time Operating System
CN101069161A (zh) * 2004-12-01 2007-11-07 索尼计算机娱乐公司 调度方法、调度装置和多处理器系统
CN102708003A (zh) * 2011-03-28 2012-10-03 闫德莹 一种云平台下的资源分配方法
US20140064077A1 (en) * 2012-08-30 2014-03-06 Taqua Wbh, Llc Opportunistic wireless resource utilization using dynamic traffic shaping
CN104657214A (zh) * 2015-03-13 2015-05-27 华存数据信息技术有限公司 一种基于多队列和多优先级的大数据任务管理系统和方法

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107391271A (zh) * 2017-05-17 2017-11-24 阿里巴巴集团控股有限公司 一种基于消息队列系统的延时任务触发方法和装置
CN107391271B (zh) * 2017-05-17 2020-10-20 创新先进技术有限公司 一种基于消息队列系统的延时任务触发方法和装置
CN107544888A (zh) * 2017-07-11 2018-01-05 新华三技术有限公司 一种日志处理方法及系统
CN107544888B (zh) * 2017-07-11 2020-09-08 新华三技术有限公司 一种日志处理方法及系统
CN109814987A (zh) * 2017-11-20 2019-05-28 北京京东尚科信息技术有限公司 任务处理方法、系统、电子设备和计算机可读介质
CN108388469B (zh) * 2018-01-10 2021-06-18 北京思特奇信息技术股份有限公司 一种进程调度方法及系统
CN108388469A (zh) * 2018-01-10 2018-08-10 北京思特奇信息技术股份有限公司 一种进程调度方法及系统
CN108897627A (zh) * 2018-07-23 2018-11-27 南京叠嘉信息科技有限公司 针对典型容器的Docker动态调度算法
CN109298949A (zh) * 2018-12-04 2019-02-01 国网辽宁省电力有限公司大连供电公司 一种分布式文件系统的资源调度系统
CN112019453A (zh) * 2019-05-29 2020-12-01 潘仲光 资源重分配方法、设备及存储介质
CN111913791A (zh) * 2020-07-02 2020-11-10 北京和瑞精准医学检验实验室有限公司 任务调度方法、装置、设备和计算机可读存储介质
CN111913791B (zh) * 2020-07-02 2023-10-13 北京和瑞精湛医学检验实验室有限公司 任务调度方法、装置、设备和计算机可读存储介质
CN112052093A (zh) * 2020-09-08 2020-12-08 哈尔滨工业大学 基于消息队列技术的实验类大数据资源分配管理系统
CN112667348A (zh) * 2020-12-19 2021-04-16 前海飞算科技(深圳)有限公司 一种MySQL容器化的方法、系统及计算机设备
CN113204433A (zh) * 2021-07-02 2021-08-03 上海钐昆网络科技有限公司 一种集群资源的动态分配方法、装置、设备及存储介质
CN113204433B (zh) * 2021-07-02 2021-10-22 上海钐昆网络科技有限公司 一种集群资源的动态分配方法、装置、设备及存储介质
CN117453378A (zh) * 2023-12-25 2024-01-26 北京卡普拉科技有限公司 多应用程序间i/o请求调度方法、装置、设备及介质
CN117453378B (zh) * 2023-12-25 2024-03-19 北京卡普拉科技有限公司 多应用程序间i/o请求调度方法、装置、设备及介质

Also Published As

Publication number Publication date
CN106445675B (zh) 2019-12-31

Similar Documents

Publication Publication Date Title
CN106445675A (zh) 一种b2b平台分布式应用调度与资源分配方法
Kliazovich et al. CA-DAG: Modeling communication-aware applications for scheduling in cloud computing
Dogar et al. Decentralized task-aware scheduling for data center networks
Page et al. Framework for task scheduling in heterogeneous distributed computing using genetic algorithms
CN108345501A (zh) 一种分布式资源调度方法和系统
CN104657207B (zh) 远程授权请求的调度方法、业务服务器和调度系统
CN105975334A (zh) 任务分布式调度方法及系统
CN106209682A (zh) 业务调度方法、装置和系统
CN111782355B (zh) 一种基于混合负载的云计算任务调度方法及系统
Zhang et al. A load-aware resource allocation and task scheduling for the emerging cloudlet system
CN105791371B (zh) 一种云存储服务系统及方法
CN111913784B (zh) 任务调度方法及装置、网元、存储介质
Mahato et al. Balanced task allocation in the on‐demand computing‐based transaction processing system using social spider optimization
CN102025652B (zh) 服务总线以及消息处理方法
CN103023980A (zh) 一种云平台处理用户服务请求的方法和系统
CN103595654A (zh) 基于多核CPU的HQoS实现方法、装置及网络设备
CN104917839A (zh) 一种用于云计算环境下的负载均衡方法
CN104052677A (zh) 单一数据源的软负载均衡方法和装置
CN106201681A (zh) Hadoop平台下基于预释放资源列表的任务调度算法
Hamzeh et al. A new approach to calculate resource limits with fairness in kubernetes
Sharma et al. A Dynamic optimization algorithm for task scheduling in cloud computing with resource utilization
CN108768865A (zh) 支持多播业务的时间触发业务调度表生成方法
CN111222810B (zh) 一种实时分配格口的方法和装置
Hu et al. Joint deployment and request routing for microservice call graphs in data centers
CN104158860A (zh) 一种作业调度方法及作业调度系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant