CN110990129A - 一种基于智能启发式算法的分布式存储系统调度方法 - Google Patents

一种基于智能启发式算法的分布式存储系统调度方法 Download PDF

Info

Publication number
CN110990129A
CN110990129A CN201910987891.7A CN201910987891A CN110990129A CN 110990129 A CN110990129 A CN 110990129A CN 201910987891 A CN201910987891 A CN 201910987891A CN 110990129 A CN110990129 A CN 110990129A
Authority
CN
China
Prior art keywords
scheduling
queue
node
storage node
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910987891.7A
Other languages
English (en)
Inventor
郑朝晖
王健翔
江婧婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Highguard Networks Inc
Original Assignee
Highguard Networks Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Highguard Networks Inc filed Critical Highguard Networks Inc
Priority to CN201910987891.7A priority Critical patent/CN110990129A/zh
Publication of CN110990129A publication Critical patent/CN110990129A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083Techniques for rebalancing the load in a distributed system

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明揭示了一种基于智能启发式算法的分布式存储系统调度方法,包括存储节点上线,调度节点下发租约至存储节点;获取存储节点各项运行指标,并通过智能启发式算法对选择符合条件的存储节点进行排序,生成双候选队列;调度节点接收客户端的任务请求,进一步从双候选队列中选择合适的存储节点,并将任务请求下发至被选择的存储节点执行;判断客户端执行任务请求是否成功,若成功,则返回成功信息至调度节点,否则,调度节点继续从双候选队列中选择合适的存储节点执行任务请求。本发明能够提高调度效率的同时极大降低了任务执行时间。

Description

一种基于智能启发式算法的分布式存储系统调度方法
技术领域
本发明涉及存储技术领域,尤其是涉及一种基于智能启发式算法的分布式存储系统调度方法。
背景技术
最近几年来,分布式存储系统成为了存储领域的热点,而在分布式系统中重要的组成部分就是调度系统,分布式调度的两大任务:任务调度和资源调度。任务调度处理大量的计算任务如何切分、数据如何分割运算、监控运算状态等;资源调度负责供给方、不同业务间的平衡资源、支持优先级抢占等。而在资源调度方面,是一个非确定性的多项式问题,而传统的资源调度时调度效率低的问题,因此,继续一种解决分布式存储系统资源调度效率低下的问题的方法。
发明内容
本发明的目的在于克服现有技术的缺陷,提供一种基于智能启发式算法的分布式存储系统调度方法,提高调度效率的同时极大降低了任务执行时间。
为实现上述目的,本发明提出如下技术方案:一种基于智能启发式算法的分布式存储系统调度方法,包括如下步骤:
步骤S100,存储节点上线,调度节点下发租约至存储节点;
步骤S200,获取存储节点各项运行指标,并通过智能启发式算法对选择符合条件的存储节点进行排序,生成双候选队列;
步骤S300,调度节点接收客户端的任务请求,进一步从双候选队列中选择合适的存储节点,并将任务请求下发至被选择的存储节点执行;
步骤S400,判断客户端执行任务请求是否成功,若成功,则返回任务执行成功信息至调度节点,否则,调度节点继续从双候选队列中选择合适的存储节点执行任务请求。
优选地,调度节点下发租约包括如下步骤:
步骤S101,调度节点获取存储节点租约请求;
步骤S102,调度节点判断存储节点是否存在于租约表中,若存在,则执行步骤S103,否则,否则,直接创建新的租约并添加至租约表中,进一步将租约下发至该存储节点;
步骤S103,从租约表中删除该存储节点,创建新的租约并添加至租约表中,进一步将租约下发至该存储节点
优选地,所述双候选队列包括调度队列和候选队列,所述双候选队列的生成包括如下步骤:
步骤S201,根据模拟退火算法,从调度节点的租约表中选择合适的N个存储节点,形成初始化存储节点集合;
步骤S202,判断调度队列是否存在,若不存在,则执行步骤S203,否则,直接检查候选队列是否满队列,并在不满队列时从初始化存储节点集合中选择合适的存储节点放入候选队列中,直至候选队列满队列,并对候选队列中的存储节点进行排序;
步骤S203,从初始化存储节点集合中选择第一预设数量的存储节点放入调度队列中,进一步再从初始化存储节点集合中选择第二预设数量的存储节点放入候选队列中,对调度队列和候选队列中的存储节点分别进行排序。
优选地,在步骤S300中,存储节点的选择包括如下步骤:
步骤S301,获取调度队列和候选队列的存储节点数据,调度队列中存储节点个数减一后,告知存储节点并判断是否接收到存储节点返回的确认消息,若是,将任务请求下发至被选择的存储节点执行,否则,执行步骤S302;
步骤S302,判断调度队列是否为空,并在调度队列为空时进一步判断候选队列是否为空,若候选队列不为空,则从候选队列选择存储节点,候选队列中存储节点个数减少,并将任务请求下发至被选择的存储节点执行,若候选队列为空,则通过模拟退火向候选队列中添加存储节点。
优选地,在步骤S400中,任务请求执行成功后,还需执行如下步骤:
步骤S401,计算调度队列中存储节点的个数,进一步判断候选队列中存储节点的个数是否大于调度队列中所需的存储节点个数,若是,则从候选队列中获取所需要的存储节点放入调度队列中,否则,执行步骤S402;
步骤S402,通过模拟退火算法,向候选队列和调度队列中添加存储节点并重启任务请求,进一步从候选队列中获取所需要的存储节点放入调度队列中。
优选地,还包括:
步骤S500,调度节点接收存储节点的冗余备份或删除请求,调度节点根据冗余备份或删除请求选择合适的存储节点执行文件备份或文件删除。
优选地,在步骤S500中,冗余备份包括:
获取待备份文件的编号,及存储待备份文件的存储节点的编号,并计算待备份文件在备份表中执行备份的次数;
判断待备份文件的编号是否存在于备份表中,若存在,则进一步判断执行备份的次数加一后是否大于第一预设值,并在小于第一预设值时执行文件备份,若不存在,则选择最远最优的存储节点进行备份。
优选地,删除文件包括:
获取待删除文件的编号,及存储待删除文件的存储节点的编号,并计算待删除文件在删除表中执行删除的次数;
判断待删除文件的编号是否存在于删除表中,若存在,则进一步判断执行删除的次数加一后是否大于第二预设值,并在小于第二预设值时执行文件删除,若不存在,则选择距离请求的存储节点最近最优的存储节点执行删除任务。
优选地,在步骤S500中,对备份表和删除表进行周期性删除,并且每次删除备份表及删除表的前一半数据。
优选地,删除表的周期性删除时间大于备份表的周期性删除时间。
本发明的有益效果是:
(1)通过使用双候选队列,当调度任务到达时,直接从双候选队列中一次选择存储节点即可,极大的减少寻找时间,降低任务执行时间。
(2)通过模拟退火算法选择存储节点,将存储节点排序存入候选节点,并有效解决冗余备份与冲突问题。
附图说明
图1是本发明的调度节点整体流程示意图;
图2是本发明的租约下发流程图示意图;
图3是本发明的周期性检查租约流程图示意图;
图4是本发明的双候选队列生成流程图示意图;
图5是本发明的任务调度流程图示意图;
图6是本发明的备份与删除文件流程图示意图;
图7是本发明的周期性删除备份表或删除表流程图示意图。
具体实施方式
下面将结合本发明的附图,对本发明实施例的技术方案进行清楚、完整的描述。
本发明所揭示的一种基于智能启发式算法的分布式存储系统调度方法,通过基于智能启发式算法进行存储节点排序,进而建立双候选队列,调度节点在接收任务请求后从双候选队列选择存储节点,并下发任务请求至选择的存储节点执行,提高调度效率的同时极大降低了任务执行时间。
结合图1~图7所示,本发明所述的一种基于智能启发式算法的分布式存储系统调度方法,包括如下步骤:
步骤S100,存储节点上线,调度节点下发租约至存储节点;
具体地,如图2所示,存储节点上线后,调度节点需向存储节点下发租约。下发租约时,调度节点首先获取存储节点租约请求,进一步判断租约表中是否存在该存储节点,实施时,可通过判断租约表中是否存在存储节点的编号(ID)片段存储节点是否存在租约表中。若租约表中存在该存储节点,则从租约表中删除该存储节点,创建新的租约并添加至租约表中,进一步将租约下发至该存储节点;然而,当租约表中不存在该存储节点时,直接创建新的租约并添加至租约表中,进一步将租约下发至该存储节点。
实施时,
进一步地,如图3所示,为了使调度节点在调度时可灵活的选择在线的存储节点,还需周期性校验租约表,筛选出所有租约到期的存储节点,视为该存储节点下线,并从租约表中删除租约到期的存储节点。
步骤S200,获取存储节点的各项运行指标,并通过智能启发式算法对选择符合条件的存储节点进行排序,生成双候选队列;
具体地,基于智能启发式算法对选择符合条件的存储节点进行排序包括:系统启动后,首先完成初始化,建立初始存储节点候选队列,基于初始存储节点候选队列使用模拟退火算法进行筛选排序,将排序结果存储至双候选队列中。通过如下选择条件生成初始存储节点:预选节点生成初始集合;租约表中租约未到期,在一定限制范围内的存储节点。其中,初始集合通过如下步骤获得:调度节点向存储节点发送请求,要求存储节点返回各自的综合分值,如下表所示,且设置时间段,超过该时间段的消息接收。
Figure BDA0002237281930000061
存储节点将综合分值返回返回调度节点时,同时标记以发送,生成初始集合。
进一步地,如图4所示,双候选队列包括调度队列和候选队列,调度队列和候选队列通过如下步骤获得:
首先,根据模拟退火算法,从调度节点的租约表中选择合适的N个存储节点,形成初始化存储节点集合;本实施例中,N为36,当然,在其他实施例中,存储节点的数量可根据实际需求选择。
其次,判断调度队列是否存在,若不存在,则表示为初始化任务,此时调度队列与候选队列均不存在,继而模拟退火:先从初始化存储节点集合中选择第一预设数量的存储节点放入调度队列中,进一步再从初始化存储节点集合中选择第二预设数量的存储节点放入候选队列中。当调度队列和候选队列均放入存储节点后,进一步对调度队列和候选队列中的存储节点进行排序,最终得到有序且相对最优的调度队列和候选队列。
当调度队列存在时,则直接检查候选队列是否满队列,也即候选队列中存储节点的数量是否达第二预设数量。当候选队列处于满队列时,则无需选择存储节点放入候选队列中;当候选队列处于未满队列时,继而模拟退火:从初始化存储节点集合中选择合适的存储节点放入候选队列中,直至候选队列中满足第二预设数量即可,当候选队列中的存储节点数量达到第二预设数量时,对候选队列中的存储节点进行排序。
本实施例中,第一预设数量和第二预设数量均为6个,当然,在其他实施例中,存储节点的数量可根据实际需求选择。
本发明中调度队列与候选队列的生成方法可极大程度的保证任务调度时,有合适的候选节点可调,从而减少调度时间。
步骤S300,调度节点接收客户端的任务请求,进一步从双候选队列中选择合适的存储节点,并将任务请求下发至被选择的存储节点执行;
步骤S400,判断客户端执行任务请求是否成功,若成功,则返回成功信息至调度节点,否则,调度节点继续从双候选队列中选择合适的存储节点执行任务请求。
具体地,当客户端或存储节点向调度节点发送任务请求时,触发调度流程,也即:如图5所示,首先,获取调度队列和候选队列的存储节点数据,从调度队列中选择一存储节点,并告知该存储节点;进一步判断是否接收到存储节点返回的确认消息,若接受到,则表明调度队列中存在存储节点,进一步将任务下发至该存储节点执行。若未接收到,则判断调度队列是否为空,若调度队列为空,则进一步判断候选队列是否为空,若候选队列不为空,则从候选队列选择存储节点,候选队列中存储节点个数减少,并将任务请求下发至被选择的存储节点执行。若候选队列为空,则通过模拟退火向候选队列中添加存储节点。
当任务请求执行成功后,计算调度队列中存储节点的个数,进一步判断候选队列中存储节点的个数是否大于调度队列中所需的存储节点个数。当候选队列中存储节点的个数大于调度队列中所需的存储节点个数时,从候选队列中获取所需要的存储节点放入调度队列中;当候选队列中存储节点的个数小于调度队列中所需的存储节点个数时,通过模拟退火算法,向候选队列和调度队列中添加存储节点个数并重启任务,进一步向从候选队列中获取所需要的存储节点放入调度队列中。
当从候选队列中获取所需要的存储节点放入调度队列中后,判断调度队列中存储节点的数量是否小于第一预设数量,若是,则结束;否则,继续从候选队列中获取所需要的存储节点。
如图6所示,存储节点还需对本地文件进行维护,其向调度节点发送备份文件请求或删除文件请求,调度节点根据备份文件请求或删除文件请求执行文件备份或删除文件。
具体地,调度节点获取存储节点的备份请求或删除请求,进一步判断该任务是否被标记为备份任务,若是,则从任务请求中获取备份文件的编号(ID)及存储节点的编号(ID),进一步计算该备份任务在备份表中执行备份的次数,同时判断备份文件是否存在于备份表中,若备份文件存在于备份表中,并且执行备份次数加一后大于第一预设值,若是,则拒绝备份任务,否则,也即备份文件不存在于备份表中,则选择最远最优的存储节点进行备份。当存储节点返回备份成功信息至调度节点时,执行备份次数加一,否则,继续选择最远最优的存储节点执行备份任务。
当任务不是被标记为备份任务时,也即任务请求为删除文件请求,则从任务请求中获取待删除文件的编号(ID)及存储节点的编号(ID),进一步计算该删除任务在删除表中的执行次数,同时判断待删除文件的编号(ID)是否已存在于删除表中,若待删除文件存在于删除表中,并且执行删除次数加一后大于第二预设值,若是,则拒绝删除任务,否则,也即待删除文件不存在于删除表中,则选择距离请求的存储节点最近最优的存储节点执行删除任务。当存储节点返回删除成功信息至调度节点时,执行删除文件次数加一,否则,继续选择距离请求的存储节点最近最优的存储节点执行删除任务。
本发明通过设置备份表和删除表以解决备份请求或删除请求冲突的问题,备份表和删除表中分别存储一个周期时间内,备份或删除文件的编号与备份或删除问阿金所在的存储节点的编号。同时,如图7所示,为了保证文件的可靠性,需分别为备份表和删除表设置周期性删除时间,当到达备份表删除时间时,扫描备份表,进一步删除备份表的前一半数据信息;当到达删除表删除时间时,扫描删除表,进一步删除删除表的前一半数据信息。
本实施例中,删除表的周期性删除时间大于备份表的周期性删除时间,如删除表每隔10分钟删除一次,则备份表每隔5分钟删除一次。
本发明的技术内容及技术特征已揭示如上,然而熟悉本领域的技术人员仍可能基于本发明的教示及揭示而作种种不背离本发明精神的替换及修饰,因此,本发明保护范围应不限于实施例所揭示的内容,而应包括各种不背离本发明的替换及修饰,并为本专利申请权利要求所涵盖。

Claims (10)

1.一种基于智能启发式算法的分布式存储系统调度方法,其特征在于,包括如下步骤:
步骤S100,存储节点上线,调度节点下发租约至存储节点;
步骤S200,获取存储节点各项运行指标,并通过智能启发式算法对选择符合条件的存储节点进行排序,生成双候选队列;
步骤S300,调度节点接收客户端的任务请求,进一步从双候选队列中选择合适的存储节点,并将任务请求下发至被选择的存储节点执行;
步骤S400,判断客户端执行任务请求是否成功,若成功,则返回任务执行成功信息至调度节点,否则,调度节点继续从双候选队列中选择合适的存储节点执行任务请求。
2.根据权利要求1所述的方法,其特征在于,调度节点下发租约包括如下步骤:
步骤S101,调度节点获取存储节点租约请求;
步骤S102,调度节点判断存储节点是否存在于租约表中,若存在,则执行步骤S103,否则,直接创建新的租约并添加至租约表中,进一步将租约下发至该存储节点;
步骤S103,从租约表中删除该存储节点,创建新的租约并添加至租约表中,进一步将租约下发至该存储节点。
3.根据权利要求1所述的方法,其特征在于,所述双候选队列包括调度队列和候选队列,所述双候选队列的生成包括如下步骤:
步骤S201,根据模拟退火算法,从调度节点的租约表中选择合适的N个存储节点,形成初始化存储节点集合,N为整数;
步骤S202,判断调度队列是否存在,若不存在,则执行步骤S203,否则,直接检查候选队列是否满队列,并在不满队列时从初始化存储节点集合中选择合适的存储节点放入候选队列中,直至候选队列满队列,并对候选队列中的存储节点进行排序;
步骤S203,从初始化存储节点集合中选择第一预设数量的存储节点放入调度队列中,进一步再从初始化存储节点集合中选择第二预设数量的存储节点放入候选队列中,对调度队列和候选队列中的存储节点分别进行排序。
4.根据权利要求1所述的方法,其特征在于,在步骤S300中,存储节点的选择包括如下步骤:
步骤S301,获取调度队列和候选队列的存储节点数据,调度队列中存储节点个数减一后,告知存储节点并判断是否接收到存储节点返回的确认消息,若是,将任务请求下发至被选择的存储节点执行,否则,执行步骤S302;
步骤S302,判断调度队列是否为空,并在调度队列为空时进一步判断候选队列是否为空,若候选队列不为空,则从候选队列选择存储节点,候选队列中存储节点个数减少,并将任务请求下发至被选择的存储节点执行,若候选队列为空,则通过模拟退火向候选队列中添加存储节点。
5.根据权利要求1所述的方法,其特征在于,在步骤S400中,任务请求执行成功后,还需执行如下步骤:
步骤S401,计算调度队列中存储节点的个数,进一步判断候选队列中存储节点的个数是否大于调度队列中所需的存储节点个数,若是,则从候选队列中获取所需要的存储节点放入调度队列中,否则,执行步骤S402;
步骤S402,通过模拟退火算法,向候选队列和调度队列中添加存储节点并重启任务请求,进一步从候选队列中获取所需要的存储节点放入调度队列中。
6.根据权利要求1所述的方法,其特征在于,还包括:
步骤S500,调度节点接收存储节点的冗余备份或删除请求,调度节点根据冗余备份或删除请求选择合适的存储节点执行文件备份或文件删除。
7.根据权利要求6所述的方法,其特征在于,在步骤S500中,冗余备份包括:
获取待备份文件的编号,及存储待备份文件的存储节点的编号,并计算待备份文件在备份表中执行备份的次数;
判断待备份文件的编号是否存在于备份表中,若存在,则进一步判断执行备份的次数加一后是否大于第一预设值,并在小于第一预设值时执行文件备份,若不存在,则选择最远最优的存储节点进行备份。
8.根据权利要求7所述的方法,其特征在于,删除文件包括:
获取待删除文件的编号,及存储待删除文件的存储节点的编号,并计算待删除文件在删除表中执行删除的次数;
判断待删除文件的编号是否存在于删除表中,若存在,则进一步判断执行删除的次数加一后是否大于第二预设值,并在小于第二预设值时执行文件删除,若不存在,则选择距离请求的存储节点最近最优的存储节点执行删除任务。
9.根据权利要求8所述的方法,其特征在于,在步骤S500中,对备份表和删除表进行周期性删除,并且每次删除备份表及删除表的前一半数据。
10.根据权利要求8所述的方法,其特征在于,删除表的周期性删除时间大于备份表的周期性删除时间。
CN201910987891.7A 2019-10-17 2019-10-17 一种基于智能启发式算法的分布式存储系统调度方法 Pending CN110990129A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910987891.7A CN110990129A (zh) 2019-10-17 2019-10-17 一种基于智能启发式算法的分布式存储系统调度方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910987891.7A CN110990129A (zh) 2019-10-17 2019-10-17 一种基于智能启发式算法的分布式存储系统调度方法

Publications (1)

Publication Number Publication Date
CN110990129A true CN110990129A (zh) 2020-04-10

Family

ID=70082134

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910987891.7A Pending CN110990129A (zh) 2019-10-17 2019-10-17 一种基于智能启发式算法的分布式存储系统调度方法

Country Status (1)

Country Link
CN (1) CN110990129A (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895576A (zh) * 2010-07-09 2010-11-24 浙江省公众信息产业有限公司 一种具有较小启动时延的p2p分布式流媒体直播方法
CN102136003A (zh) * 2011-03-25 2011-07-27 上海交通大学 大规模分布式存储系统
CN103795781A (zh) * 2013-12-10 2014-05-14 西安邮电大学 一种基于文件预测的分布式缓存模型
CN103942112A (zh) * 2013-01-22 2014-07-23 深圳市腾讯计算机系统有限公司 磁盘容错方法、装置及系统
CN104391930A (zh) * 2014-11-21 2015-03-04 用友软件股份有限公司 分布式文件存储装置和方法
CN104853004A (zh) * 2015-05-26 2015-08-19 湖南傻蛋科技有限公司 一种域名的分布式智能解析方法
CN108737484A (zh) * 2017-04-21 2018-11-02 杭州海康威视数字技术股份有限公司 媒体数据存储方法及系统
CN108900379A (zh) * 2018-07-09 2018-11-27 广东神马搜索科技有限公司 分布式网络业务调度方法、装置、计算设备和存储介质
CN109617992A (zh) * 2018-12-29 2019-04-12 杭州趣链科技有限公司 一种基于区块链的边缘计算节点动态选举方法
CN109656713A (zh) * 2018-11-30 2019-04-19 河海大学 一种基于边缘计算框架的容器调度方法
CN109857445A (zh) * 2017-11-30 2019-06-07 株式会社日立制作所 存储系统和控制软件配置方法
CN110247699A (zh) * 2019-06-24 2019-09-17 中国空间技术研究院 一种在天地一体化网络中实现天地间资源协同调度的方法

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895576A (zh) * 2010-07-09 2010-11-24 浙江省公众信息产业有限公司 一种具有较小启动时延的p2p分布式流媒体直播方法
CN102136003A (zh) * 2011-03-25 2011-07-27 上海交通大学 大规模分布式存储系统
CN103942112A (zh) * 2013-01-22 2014-07-23 深圳市腾讯计算机系统有限公司 磁盘容错方法、装置及系统
CN103795781A (zh) * 2013-12-10 2014-05-14 西安邮电大学 一种基于文件预测的分布式缓存模型
CN104391930A (zh) * 2014-11-21 2015-03-04 用友软件股份有限公司 分布式文件存储装置和方法
CN104853004A (zh) * 2015-05-26 2015-08-19 湖南傻蛋科技有限公司 一种域名的分布式智能解析方法
CN108737484A (zh) * 2017-04-21 2018-11-02 杭州海康威视数字技术股份有限公司 媒体数据存储方法及系统
CN109857445A (zh) * 2017-11-30 2019-06-07 株式会社日立制作所 存储系统和控制软件配置方法
CN108900379A (zh) * 2018-07-09 2018-11-27 广东神马搜索科技有限公司 分布式网络业务调度方法、装置、计算设备和存储介质
CN109656713A (zh) * 2018-11-30 2019-04-19 河海大学 一种基于边缘计算框架的容器调度方法
CN109617992A (zh) * 2018-12-29 2019-04-12 杭州趣链科技有限公司 一种基于区块链的边缘计算节点动态选举方法
CN110247699A (zh) * 2019-06-24 2019-09-17 中国空间技术研究院 一种在天地一体化网络中实现天地间资源协同调度的方法

Similar Documents

Publication Publication Date Title
US11210185B2 (en) Method and system for data recovery in a data system
CN111897558A (zh) 容器集群管理系统Kubernetes升级方法和装置
CN111784329A (zh) 业务数据的处理方法和装置、存储介质、电子装置
CN113157411A (zh) 一种基于Celery的可靠可配置任务系统及装置
CN112995262B (zh) 分布式事务提交方法、系统及计算设备
CN111258726A (zh) 任务调度方法和装置
CN114564281A (zh) 容器调度方法、装置、设备及存储介质
CN111125240B (zh) 一种分布式事务实现方法、装置、电子设备及存储介质
CN113703929B (zh) 一种任务调度方法、系统、计算设备和存储介质
CN103577588A (zh) 一种云数据库中分布式事务的实现方法
CN110990129A (zh) 一种基于智能启发式算法的分布式存储系统调度方法
CN111831408A (zh) 异步任务处理方法、装置、电子设备及介质
CN107172149A (zh) 大数据即时调度方法
CN107577547B (zh) 一种高性能集群的紧急作业续算方法以及系统
CN113297318B (zh) 数据处理方法、装置、电子设备及存储介质
US8615769B2 (en) Data processing system, data processing method, and data processing program
CN111324668B (zh) 数据库数据同步处理方法、装置及存储介质
CN114691781A (zh) 一种数据同步方法、系统、装置、设备及介质
CN112732414A (zh) 一种oltp模式的分布式事务处理方法、系统及相关组件
CN116821250B (zh) 一种分布式图数据处理方法和系统
CN115934428B (zh) 一种mysql数据库的主灾备切换方法、装置及电子设备
CN116401005A (zh) 一种信息处理方法、装置、设备和计算机可读存储介质
CN116089248B (zh) 一种写i/o突发分布预测方法、装置、设备及存储介质
CN115640109B (zh) 一种任务调度方法、系统及客户端
CN110618834B (zh) I/o栈请求响应方法、系统和i/o栈请求响应控制方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200410