CN110647395A - 一种任务处理方法及系统、装置、计算机存储介质 - Google Patents

一种任务处理方法及系统、装置、计算机存储介质 Download PDF

Info

Publication number
CN110647395A
CN110647395A CN201910817807.7A CN201910817807A CN110647395A CN 110647395 A CN110647395 A CN 110647395A CN 201910817807 A CN201910817807 A CN 201910817807A CN 110647395 A CN110647395 A CN 110647395A
Authority
CN
China
Prior art keywords
container
distributed
task
target
cache data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910817807.7A
Other languages
English (en)
Inventor
于连宇
马鹏程
王晓勇
李志刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201910817807.7A priority Critical patent/CN110647395A/zh
Publication of CN110647395A publication Critical patent/CN110647395A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • G06F9/5088—Techniques for rebalancing the load in a distributed system involving task migration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • Retry When Errors Occur (AREA)
  • Hardware Redundancy (AREA)

Abstract

本申请公开了一种任务处理方法及系统、装置、计算机存储介质，其中，所述方法包括：检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。

Description

一种任务处理方法及系统、装置、计算机存储介质
技术领域
本发明涉及数据处理技术，具体涉及一种任务处理方法及系统、装置、计算机存储介质。
背景技术
Spark是一种应用广泛的分布式内存计算引擎。Spark的内存计算是指在分布式运算中，当内存够用的情况下，尽量使用内存而不将数据溢出磁盘。这种计算模型大大提升了分布式运算的性能，尤其是操作的所有数据都预先缓存在内存中时，即时查询性能的优势更加明显。
预先缓存是指在计算前内存中已经缓存了要计算的数据在分布式容器中，计算时只需要从本地读取并且进行用户指定的运算。这种方法有一个明显的漏洞就是分布式容器程序有可能因某些原因停止运行，比如计算过程中大量未预期的内存使用而使内存超出设定值溢出，再比如单纯的硬件故障，而当分布式容器非正常退出时，Spark的内存计算提供的查询性能是低效的。
发明内容
有鉴于此，本发明提供一种任务处理方法及系统、装置、计算机存储介质，能降低容器非正常退出时对Spark的内存计算的影响。
为达到上述目的，本发明的技术方案是这样实现的：
本申请的技术方案是这样实现的：
本申请实施例还提供了一种任务处理方法，包括：
检测到有分布式容器非正常退出时，确定目标分布式容器；
确定所述目标分布式容器的可替代容器；
从分布式存储服务器中获取所述目标分布式容器的缓存数据；
控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
上述方案中，可选地，所述确定所述目标分布式容器的可替代容器，包括：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
上述方案中，可选地，所述从分布式存储服务器中获取所述目标分布式容器的缓存数据，包括：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
上述方案中，可选地，所述控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务，包括：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
上述方案中，可选地，所述控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，所述方法还包括：
通知内存管理器。
本申请实施例还提供了一种任务处理系统，包括：
分布式存储服务器，用于存储缓存数据；
分布式计算引擎，用于检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
上述方案中，可选地，所述分布式计算引擎，还用于：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
上述方案中，可选地，所述分布式计算引擎，还用于：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
本申请实施例还提供了一种任务处理装置，包括：
第一确定模块，用于检测到有分布式容器非正常退出时，确定目标分布式容器；
第二确定模块，用于确定所述目标分布式容器的可替代容器；
获取模块，用于从分布式存储服务器中获取所述目标分布式容器的缓存数据；
控制模块，用于控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
本申请实施例还提供了一种计算机存储介质，所述计算机存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行本申请实施例所述的任务处理方法。
采用本申请实施例的技术方案，检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务；如此，有分布式容器非正常退出时，确定其可替代容器；控制该可替代容器基于已知的原容器的缓存数据完成原容器的任务，能降低容器非正常退出时对Spark的内存计算的影响。
附图说明
图1为本申请实施例提供的任务处理方法的实现流程示意图；
图2为本申请实施例提供的预先缓存的流程示意图；
图3为本申请实施例提供的容器重建的流程示意图；
图4为本申请实施例提供的任务处理系统的结构示意图；
图5为本申请实施例提供的任务处理装置的结构示意图。
具体实施方式
为了能够更加详尽地了解本申请的特点与技术内容，下面结合附图对本申请的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本申请。
下面结合附图和具体实施例对本申请的技术方案进一步详细阐述。
实施例一
本实施例提供了一种任务处理方法，应用于Spark计算引擎，如图1所示，所述任务处理方法包括以下步骤：
步骤101：检测到有分布式容器非正常退出时，确定目标分布式容器。
示例性地，多个分布式容器均在执行计算任务，若检测到有分布式容器非正常退出，则将该非正常退出的分布式容器确定为目标分布式容器。
这里，所述的非正常退出可以是指未完成被分配的任务而退出。
上述方案中，所述方法还包括：
每个分布式容器在完成初始化工作后，将初始化后数据备份至所述分布式存储服务器中。
这里，所述的初始化后的数据，也即可以直接用于计算的数据，能避免可替代容器需要再次初始化而增加任务处理时间。
如此，能为后续可替代容器快速获取目标分布式容器的初始化数据提供数据支持。
步骤102：确定所述目标分布式容器的可替代容器。
作为一种实施方式，所述确定所述目标分布式容器的可替代容器，包括：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
在一些实施方式中，有分布式容器服务停止后，在持久化缓存本地性好的服务器中新启动一个容器，作为该停止容器的完全复制容器。
步骤103：从分布式存储服务器中获取所述目标分布式容器的缓存数据。
作为一种实施方式，所述从分布式存储服务器中获取所述目标分布式容器的缓存数据，包括：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
步骤104：控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
在一些实施方式中，所述控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务，包括：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
由于该缓存数据可以由该可替代容器直接用于任务计算，避免该可替代容器再次执行目标分布式容器的初始化工作，能节省任务处理时间。
在一些实施方式中，所述控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，所述方法还包括：
通知内存管理器。
如此，使该内存管理器将应由目标分布式容器做的任务发给该可替代容器来做。
本实施例所述技术方案，检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务；如此，当有分布式容器非正常退出时，能找到可替代容器快速恢复服务，将分布式容器非正常退出时的影响降到最低。
示例性地，A、B、C、D、E五个分布式容器共同完成一项计算任务，其中，分布式容器A负责该项计算任务中的第一部分，分布式容器B负责该项计算任务中的第二部分，分布式容器C负责该项计算任务中的第三部分，分布式容器A负责该项计算任务中的第四部分，分布式容器D负责该项计算任务中的第一部分，分布式容器E负责该计算任务中的第五部分；A、B、C、D、E五个分布式容器同时执行各自被分配的任务，若分布式容器B非正常退出，则为该分布式容器B确定可替代容器B’，可替代容器B’从分布式存储服务器中直接获取分布式容器B的初始化后的数据，可替代容器B’直接基于该初始化后的数据执行该第一部分的计算任务，避免可替代容器B’再次进行初始化而耽误任务处理时间，也不会因分布式容器B非正常原因退出而对该项计算任务的整个计算周期造成大的影响。
实施例二
图2示出了预先缓存的流程示意图，如图2所示，发起缓存调用的流程包括：驱动程序(Driver)将缓存数据划分成多个分区(partition)，对每一个分区进行标识，调用执行容器(executor)执行；执行容器根据发过来的代码和标识partition_id进行计算，读取数据；执行容器读取完成后，进行内存展开(Enroll)，写入本地内存；执行容器判断写入完成，通知驱动程序(Driver)；驱动程序将各个执行容器的内存partition_id记录到缓存管理器(Block Manager)，由该缓存管理器统一管理分布式内存；执行容器将内存按序列化方法导出，直接生成文件，保存到分布式存储服务之中；该文件被备用管理器(Repli Manager)进行管理。
应理解，上述的预先缓存的流程示意图仅仅是示意性的，本申请对此不做限定。
实施例三
图3示出了容器重建的流程示意图，如图3所示，容器重建的流程包括：接收到执行容器服务停止(executor lost)消息，查找到该服务停止的执行容器；对分布式文件所记录的服务器进行排序，以更快读取到该分布式文件中的服务器排名；发起方(Master)根据可启动服务器的优先级列表，最终确定一个最合适的服务器资源；驱动程序(Driver)发起新执行容器的启动；由工作进程(worker)进行启动资源的分配；该新执行容器最终启动；定位该新执行容器本次需要重建的所有文件的位置；该新执行容器进行文件读取；该新执行容器将文件在本地内存进行重建；该新执行容器重建完成后，通知内存管理器。
应理解，上述的容器重建的流程示意图仅仅是示意性的，本申请对此不做限定。
实施例四
本申请实施例还提供了一种任务处理系统，如图4所示，所述系统包括：
分布式存储服务器10，用于存储缓存数据；
分布式计算引擎20，用于检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
在一些实施方式中，所述分布式计算引擎20，还用于：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
在一些实施方式中，所述分布式计算引擎20，还用于：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器10中。
在一些实施方式中，所述分布式计算引擎20，还用于：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
本实施例所述任务处理系统，当有分布式容器非正常退出时，能找到可替代容器快速恢复服务，将分布式容器非正常退出时的影响降到最低。
实施例五
本申请实施例还提供了一种任务处理装置，如图5所示，所述装置包括：
第一确定模块51，用于检测到有分布式容器非正常退出时，确定目标分布式容器；
第二确定模块52，用于确定所述目标分布式容器的可替代容器；
获取模块53，用于从分布式存储服务器中获取所述目标分布式容器的缓存数据；
控制模块54，用于控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
在一些可选实施方式中，所述获取模块53，还用于：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
在一些可选实施方式中，所述控制模块54，还用于：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
在一些可选实施方式中，所述控制模块54，还用于：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，通知内存管理器。
需要说明的是：上述实施例提供的任务处理装置在执行任务处理时，仅以上述各程序模块的划分进行举例说明，实际应用中，可以根据需要而将上述处理分配由不同的程序模块完成，即将任务处理装置或任务处理装置所属设备的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的任务处理装置与任务处理方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本实施例中，所述第一确定模块51、第二确定模块52、获取模块53和控制模块54，在实际应用中均可由所述任务处理装置或所述任务处理装置所属设备中的中央处理器(CPU，Central Processing Unit)、数字信号处理器(DSP，Digital Signal Processor)、微控制单元(MCU，Microcontroller Unit)或可编程门阵列(FPGA，Field－ProgrammableGate Array)等实现。
本实施例所述任务处理装置，当有分布式容器非正常退出时，能找到可替代容器快速恢复服务，将分布式容器非正常退出时的影响降到最低。
实施例六
本申请实施例提供了一种任务处理装置，，所述任务处理装置包括：
处理器，用于检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务；
存储器，至少用于存储可用服务器的优先级列表。
在一些可选实施方式中，所述处理器，还用于：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
在一些可选实施方式中，所述处理器，还用于：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据。
在一些可选实施方式中，所述处理器，还用于：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
在一些可选实施方式中，所述处理器，还用于：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，通知内存管理器。
本实施例所述任务处理装置，当有分布式容器非正常退出时，能找到可替代容器快速恢复服务，将分布式容器非正常退出时的影响降到最低。
实施例七
本实施例提供的计算机存储介质，其上存储有计算机指令，该指令被处理器执行时实现：
检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
作为一种实施方式，该指令被处理器执行时实现：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
作为一种实施方式，该指令被处理器执行时实现：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据。
作为一种实施方式，该指令被处理器执行时实现：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
作为一种实施方式，该指令被处理器执行时实现：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，通知内存管理器。
本领域技术人员应当理解，本实施例的计算机存储介质中各程序的功能，可参照前述各实施例所述的任务处理方法的相关描述而理解，在此不再赘述。
本申请各实施例所记载的技术方案之间，在不冲突的情况下，可以任意组合。
在本申请所提供的几个实施例中，应该理解到，所揭露的服务器和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本申请各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者，本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种任务处理方法，包括：
检测到有分布式容器非正常退出时，确定目标分布式容器；
确定所述目标分布式容器的可替代容器；
从分布式存储服务器中获取所述目标分布式容器的缓存数据；
控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
2.根据权利要求1所述的方法，其特征在于，所述确定所述目标分布式容器的可替代容器，包括：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
3.根据权利要求1所述的方法，其特征在于，所述从分布式存储服务器中获取所述目标分布式容器的缓存数据，包括：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
4.根据权利要求1所述的方法，其特征在于，所述控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务，包括：
控制所述可替代容器基于所述缓存数据在本地内存进行任务重建。
5.根据权利要求4所述的方法，其特征在于，所述控制所述可替代容器基于所述缓存数据在本地内存进行任务重建之后，所述方法还包括：
通知内存管理器。
6.一种任务处理系统，包括：
分布式存储服务器，用于存储缓存数据；
分布式计算引擎，用于检测到有分布式容器非正常退出时，确定目标分布式容器；确定所述目标分布式容器的可替代容器；从分布式存储服务器中获取所述目标分布式容器的缓存数据；控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
7.根据权利要求6所述的系统，其特征在于，所述分布式计算引擎，还用于：
根据可用服务器的优先级列表，确定一个可用服务器作为可替代容器。
8.根据权利要求6所述的系统，其特征在于，所述分布式计算引擎，还用于：
定位重建所述目标分布式容器任务需要的所有文件的位置；
控制所述可替代容器从所述位置读取所述文件以获取所述目标分布式容器在所述分布式存储服务器中的缓存数据；
其中，所述目标分布式容器在完成初始化工作后，将初始化后数据作为缓存数据备份至所述分布式存储服务器中。
9.一种任务处理装置，包括：
第一确定模块，用于检测到有分布式容器非正常退出时，确定目标分布式容器；
第二确定模块，用于确定所述目标分布式容器的可替代容器；
获取模块，用于从分布式存储服务器中获取所述目标分布式容器的缓存数据；
控制模块，用于控制所述可替代容器基于所述缓存数据完成所述目标分布式容器的任务。
10.一种计算机存储介质，其特征在于，所述计算机存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行权1至权5任一项所述的任务处理方法。
CN201910817807.7A 2019-08-30 2019-08-30 一种任务处理方法及系统、装置、计算机存储介质 Pending CN110647395A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910817807.7A CN110647395A (zh) 2019-08-30 2019-08-30 一种任务处理方法及系统、装置、计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910817807.7A CN110647395A (zh) 2019-08-30 2019-08-30 一种任务处理方法及系统、装置、计算机存储介质

Publications (1)

Publication Number Publication Date
CN110647395A true CN110647395A (zh) 2020-01-03

Family

ID=69009974

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910817807.7A Pending CN110647395A (zh) 2019-08-30 2019-08-30 一种任务处理方法及系统、装置、计算机存储介质

Country Status (1)

Country Link
CN (1) CN110647395A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103516736A (zh) * 2012-06-20 2014-01-15 中兴通讯股份有限公司 分布式缓存系统的数据恢复方法及装置
CN105933137A (zh) * 2015-12-21 2016-09-07 中国银联股份有限公司 一种资源管理方法、装置及系统
CN108255619A (zh) * 2017-12-28 2018-07-06 新华三大数据技术有限公司 一种数据处理方法及装置
US20180270125A1 (en) * 2017-03-17 2018-09-20 Verizon Patent And Licensing Inc. Deploying and managing containers to provide a highly available distributed file system
CN109582487A (zh) * 2018-11-30 2019-04-05 北京百度网讯科技有限公司 用于发送信息的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103516736A (zh) * 2012-06-20 2014-01-15 中兴通讯股份有限公司 分布式缓存系统的数据恢复方法及装置
CN105933137A (zh) * 2015-12-21 2016-09-07 中国银联股份有限公司 一种资源管理方法、装置及系统
US20180270125A1 (en) * 2017-03-17 2018-09-20 Verizon Patent And Licensing Inc. Deploying and managing containers to provide a highly available distributed file system
CN108255619A (zh) * 2017-12-28 2018-07-06 新华三大数据技术有限公司 一种数据处理方法及装置
CN109582487A (zh) * 2018-11-30 2019-04-05 北京百度网讯科技有限公司 用于发送信息的方法和装置

Similar Documents

Publication Publication Date Title
US11397648B2 (en) Virtual machine recovery method and virtual machine management device
EP3410288B1 (en) Online upgrade method, device and system
US9319281B2 (en) Resource management method, resource management device, and program product
US8850156B2 (en) Method and system for managing virtual machine storage space and physical host
CN112131099B (zh) 一种版本升级测试方法及装置
CN110597635B (zh) 图形处理资源分配方法、装置、计算机设备及存储介质
CN112596960A (zh) 一种分布式存储服务切换方法及装置
CN110609749B (zh) 一种分布式任务运行方法、系统及设备
CN108475201B (zh) 一种虚拟机启动过程中的数据获取方法和云计算系统
CN112383610A (zh) 区块链状态数据的同步处理方法及系统
CN111143031A (zh) 一种虚拟机的容量更改方法及装置
CN107391303B (zh) 数据处理方法、装置、系统、服务器及计算机存储介质
CN114564281A (zh) 容器调度方法、装置、设备及存储介质
CN112631994A (zh) 数据迁移方法及系统
CN110647395A (zh) 一种任务处理方法及系统、装置、计算机存储介质
CN108833532B (zh) 基于物联网的服务处理方法、装置和系统
CN111176827A (zh) 一种数据预热的方法及相关装置
CN115438021A (zh) 一种数据库服务器的资源配置方法及装置
CN114756527A (zh) Redis集群的扩容方法、装置、电子设备和存储介质
CN114443295A (zh) 一种异构云资源管理调度方法、装置及系统
CN113986450A (zh) 一种虚拟机备份方法及装置
JP2018538632A (ja) ノードの再起動後にデータを処理する方法及びデバイス
CN112685334A (zh) 一种分块缓存数据的方法、装置及存储介质
CN113760485A (zh) 定时任务的调度方法、装置、设备及存储介质
CN112711444A (zh) 一种电网监控服务单元的虚拟化方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination