CN113127164B - 管理应用节点中的任务的方法、设备和计算机程序产品 - Google Patents

管理应用节点中的任务的方法、设备和计算机程序产品 Download PDF

Info

Publication number
CN113127164B
CN113127164B CN202010042349.7A CN202010042349A CN113127164B CN 113127164 B CN113127164 B CN 113127164B CN 202010042349 A CN202010042349 A CN 202010042349A CN 113127164 B CN113127164 B CN 113127164B
Authority
CN
China
Prior art keywords
objects
task
predetermined task
predetermined
address range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010042349.7A
Other languages
English (en)
Other versions
CN113127164A (zh
Inventor
骆渊
卓佳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC IP Holding Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC IP Holding Co LLC filed Critical EMC IP Holding Co LLC
Priority to CN202010042349.7A priority Critical patent/CN113127164B/zh
Priority to US16/888,302 priority patent/US11513870B2/en
Publication of CN113127164A publication Critical patent/CN113127164A/zh
Application granted granted Critical
Publication of CN113127164B publication Critical patent/CN113127164B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1415—Saving, restoring, recovering or retrying at system level
    • G06F11/1438—Restarting or rejuvenating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • G06F9/5088—Techniques for rebalancing the load in a distributed system involving task migration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开涉及管理应用节点中的任务的方法、设备和计算机程序产品。在一种用于管理应用节点中的任务的方法中，基于将要针对应用节点中的数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围。按照一组对象的地址的顺序，针对一组对象执行预定任务。创建进度指示符以用于指示一组对象中的当前正在被处理的对象的地址。基于进度指示符来管理预定任务。利用上述方法，可以基于进度指示符来指示当前正在被处理的对象的地址，以便在后续操作中可以基于进度指示符，以更为简单并且有效的方式来管理预定任务。进一步，提供了相应的设备和计算机程序产品。

Description

管理应用节点中的任务的方法、设备和计算机程序产品
技术领域
本公开的各实现方式涉及任务管理，更具体地，涉及用于管理应用节点中的任务的方法、设备和计算机程序产品。
背景技术
随着计算机技术和网络技术的发展，目前已经出现了大量应用节点。应用节点可以独立地或者以与其他应用节点相结合的方式执行任务。随着应用节点中的数据对象中的数据量的增大，执行任务的时间也相应地变长。由于应用节点中该可能会出现故障并且面临重启，这导致任务不得不被中断。因而，在执行任务期间如何管理数据对象以确保顺利地执行任务，成为一个研究热点。
发明内容
因而，期望能够开发并实现一种以更为有效的方式来管理应用节点中的任务的技术方案。期望该技术方案能够与现有的应用节点相兼容，并且通过改造现有应用节点的各种配置，来以更为有效的方式执行任务。
根据本公开的第一方面，提供了一种用于管理应用节点中的任务的方法中。在该方法中，基于将要针对应用节点中的数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围。按照一组对象的地址的顺序，针对一组对象执行预定任务。创建进度指示符以用于指示一组对象中的当前正在被处理的对象的地址。基于进度指示符来管理预定任务。
根据本公开的第二方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器耦合的存储器，存储器具有存储于其中的指令，指令在被至少一个处理器执行时使得设备执行用于管理应用节点中的任务的动作。该动作包括：基于将要针对应用节点中的数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围；按照一组对象的地址的顺序，针对一组对象执行预定任务；创建进度指示符以用于指示一组对象中的当前正在被处理的对象的地址；以及基于进度指示符来管理预定任务。
根据本公开的第三方面，提供了一种计算机程序产品，计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令，机器可执行指令用于执行根据本公开的第一方面的方法。
附图说明
结合附图并参考以下详细说明，本公开各实现方式的特征、优点及其他方面将变得更加明显，在此以示例性而非限制性的方式示出了本公开的若干实现方式。在附图中：
图1示意性示出了其中可以实现根据本发明的示例性实现方式的应用环境的框图；
图2示意性示出了根据本公开的示例性实现方式的用于管理应用节点中的任务的过程的框图；
图3示意性示出了根据本公开的示例性实现方式的用于管理应用节点中的任务的方法的流程图；
图4示意性示出了根据本公开的示例性实现方式的数据对象的索引的框图；
图5示意性示出了根据本公开的示例性实现方式的进度指示符的框图；
图6示意性示出了根据本公开的示例性实现方式的用于将未处理地址范围划分为第一部分和第二部分的过程的框图；
图7A示意性示出了根据本公开的示例性实现方式的应用节点中的处理资源的队列的框图；
图7B示意性示出了根据本公开的示例性实现方式的利用处理资源来处理预定任务的框图；
图8示意性示出了根据本公开的示例性实现方式的划分前后的未被处理的对象的框图；
图9示意性示出了根据本公开的示例性实现方式的在不同时间点的文件划分的框图；以及
图10示意性示出了根据本公开的示例性实现的用于管理应用节点中的任务的设备的框图。
具体实施方式
下面将参照附图更详细地描述本公开的优选实现。虽然附图中显示了本公开的优选实现，然而应该理解，可以以各种形式实现本公开而不应被这里阐述的实现所限制。相反，提供这些实现是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
在本文中使用的术语“包括”及其变形表示开放性包括，即“包括但不限于”。除非特别申明，术语“或”表示“和/或”。术语“基于”表示“至少部分地基于”。术语“一个示例实现”和“一个实现”表示“至少一个示例实现”。术语“另一实现”表示“至少一个另外的实现”。术语“第一”、“第二”等等可以指代不同的或相同的对象。下文还可能包括其他明确的和隐含的定义。
目前已经存在多种类型的应用节点。用户可以在应用节点之中或者跨越不同应用节点来针对数据对象执行预定任务。图1示意性示出了其中可以实现根据本发明的示例性实现方式的应用环境100的框图。在图1中，应用环境100可以包括应用节点120、130、…、以及140，并且上述应用节点经由云110来进行通信。
应用节点可以用于执行多种功能，并且可以包括一个或多个数据对象。例如，应用节点120可以包括数据对象122。该数据对象可以包括树状存储结构，例如，数据对象122可以包括目录和/或文件。在一个示例中，数据对象122可以包括一个或多个目录，该目录可以包括多个子目录并且每个子目录包括图像文件。可以针对该数据对象122执行同步任务以便将该数据对象122的全部数据同步至应用节点130。还可以针对数据对象122执行处理任务，以便将处理后的图像文件存储在本地或者应用节点130。
在执行预定任务期间，应用节点120可能会出现故障，这导致预定任务被中断并且不得不重新启动应用节点120。假设预定任务从应用节点120向应用节点130同步数据对象122，并且应用节点120在任务结束前被重启，此时数据对象122中仅有一部分被同步至应用节点130，并且在应用节点130中形成了不完整的数据对象132(虚线框所示的部分未被同步)。当应用节点120被重启之后，不得不重新开始执行同步任务，这将导致在时间和计算资源方面的大量开销。
为了解决上述技术方案中的缺陷，本公开的示例性实现方式提出了进度指示符，该指示符可以指向被执行预定任务的地址范围(基于预定任务的类型来确定)内的正在被处理的对象。以此方式，可以记录预定任务被执行的状态，继而基于进度指示符来管理预定任务。在下文中，首先参见图2描述有关本公开的示例性实现方式的概要。图2示意性示出了根据本公开的示例性实现方式的用于管理应用节点中的任务的过程的框图200。
如图2所示，可以首先确定预定任务220的任务类型222，并且可以基于任务类型222来确定数据对象210中的将要被执行预定任务220的一组对象212的地址范围230。
可以按照一组对象212的地址的顺序，针对一组对象212执行预定任务220。在执行预定任务220期间，可以创建进度指示符240以用于指示一组对象212中的当前正在被处理的对象的地址，并且在后续执行预定任务220的过程中，可以基于进度指示符240来执行预定任务220。
根据本公开的示例性实现方式，预定任务220针对数据对象210执行不同的处理操作。在一个简单示例中，预定任务220可以包括同步任务，该同步任务用于从一个应用节点向另一应用节点同步数据。例如，数据对象210可以包括目录和文件中的至少任一项，将要被同步的数据对象210可以包括目录，并且该目录可以进一步包括一个或多个目录和文件。此时，同步任务需要将数据对象210下的全部目录和文件从应用节点120同步至应用节点120。
在另一示例中，预定任务220可以包括处理任务，该处理任务的具体步骤可以由函数来定义。例如，处理任务可以包括图像处理任务(例如，去除图像中的噪声、调整对比度和/或者其他)。该处理任务用于处理一个应用节点中的目录中的图像文件，并且将处理结果传输至另一应用节点。为方便描述起见，在下文中仅以同步任务为示例来描述本公开的示例性实现的更多细节。
在下文中，将参见图3描述有关本公开的示例性实现方式的更多细节。图3示意性示出了根据本公开的示例性实现方式的用于管理应用节点中的任务的方法300的流程图。在框310处，可以基于将要针对数据对象210执行的预定任务220的类型，确定数据对象210中的将要被执行预定任务220的一组对象212的地址范围230。
在下文中，将参见不同类型的预定任务220来描述如何确定一组对象212的地址范围230。根据本公开的示例性实现方式，预定任务220的类型可以包括遍历任务，该遍历任务表示将要针对数据对象210中的全部对象执行预定任务220。如上文所述，数据对象210可以包括目录和/或文件。当数据对象210为目录时，则遍历任务需要遍历数据对象210中的每个对象(包括目录和/或对象)，并且针对每个对象来执行预定任务220。
将会理解，在执行预定任务220时可能存在两种情况：初始情况和后续情况。在下文中，将参见从应用节点120向应用节点130同步一个目录中的全部对象进行描述。在初始情况下，用户之前从未从应用节点120向应用节点120执行同步操作，则此时需要将数据对象210中的全部对象同步至应用节点130。在后续情况下，如果用户之前已经向应用节点130执行了同步操作，则此时不需要将数据对象210中的全部对象同步至应用节点130，而是只需要将两次同步之间被改变的部分同步至应用节点130。
首先描述有关初始情况的示例，在初始情况下，需要将数据对象210所在目录下的全部子目录和文件同步至应用节点130。此时，可以获取描述数据对象210的层级结构的索引，并且基于索引来确定地址范围230。在下文中，将参见图4描述有关索引的更多细节。图4示意性示出了根据本公开的示例性实现方式的数据对象210的索引400的框图。
将会理解，图4仅示意性示出了索引400的示例，该索引400可以包括多个索引节点。索引节点410为数据对象210的根节点410，该根节点可以对应于数据对象210所在的目录。索引节点410可以包括两个子节点：索引节点420和索引节点422，进一步，索引节点420还可以包括直接或者间接相关的子节点：索引节点430、432、434以及436。
如图4所示，索引400可以以二叉树方式存储，每个索引节点可以利用相应的对象的哈希来表示。在此每个索引节点中所记载的数值可以表示对象的哈希。例如，数据对象210的根目录的哈希可以为“800”(对应于索引节点410)，数据对象210中的一个文件的哈希可以为“600”(对应于索引节点430)。将会理解，图4仅以二叉树的方式示意性示出了索引400的一个示例，根据本公开的示例性实现方式，还可以以其他的数据结构，例如，二叉树、多叉树、B+树等方式构建索引。
根据本公开的示例性实现方式，可以按照深度优先的规则来遍历索引400中的各个节点，并且可以排列索引400中的多个索引节点。如图4所示，由于索引400以二叉树表示并且作为根的索引节点410的哈希值为800。基于二叉树的规则，可以将哈希值小于800的索引节点420作为索引节点410的左侧子节点，并且将哈希值大于或者等于800的索引节点422作为索引节点410的右侧子节点，以此类推。
如图4所示，基于遍历索引400可知，将要被同步的数据对象210中的各个对象的哈希值的范围为600至1000，因而可以确定数据对象210中的将要被执行所述预定任务220的一组对象212的地址范围为600至1000。假设每个叶节点分别对应于数据对象210中的一个数据对象210，则将要被处理的一组对象212包括：由索引节点430表示的对象、由索引节点432表示的对象、由索引节点434表示的对象以及由索引节点436表示的对象。
在上文中已经参见图4描述了初始情况下的操作，在下文中，将参见图5描述有关在后续情况下执行增量操作的细节。根据本公开的示例性实现方式，增量任务表示将要针对数据对象210中的已经被改变的一组对象212执行预定任务220。如果确定预定任务220的类型为增量任务，可以获取数据对象210中的已经被改变的一组对象，并且基于已经被改变的一组对象来确定地址范围。
继续上文参见图4描述的示例，假设已经从应用节点120向应用节点130同步了如图4所示的索引400相关的数据对象210。在经过一段时间后，由索引节点432和434表示的对象已经被改变，并且期望向应用节点130再次执行同步任务。此时，由于仅有由索引节点432和434表示的对象已经被改变，因而仅需要向应用节点130传输与这两个索引节点相关联的对象。此时，可以基于被改变的两个对象来确定地址范围。
根据本公开的示例性实现方式，可以基于被改变的对象的哈希来确定地址范围。此时，可以将地址范围以枚举方式表示为哈希700和哈希800。根据本公开的示例性实现方式，可以基于被改变的两个对象的标识符来确定地址范围。根据本公开的示例性实现方式，可以将已经被改变的对象的对象标识符存储至列表中。此时，列表可以包括两个对象标识符，即分别由索引节点432和434表示的对象的标识符。此时，可以利用对象标识符所在的位置来确定地址范围。例如，地址范围可以表示为整数0至1。
在上文中已经描述了当数据对象210为目录时的相关实现方式，将会理解，数据对象210还可以包括文件。此时，预定任务220的类型还可以是文件任务，并且该类型表示数据对象210为文件并且将要针对文件执行预定任务220。根据本公开的示例性实现方式，根据确定预定任务220的类型为文件任务，可以获取数据对象210的大小，并且可以基于文件的大小来确定地址范围。例如，假设待处理的文件的大小为10TB，则此时的地址范围可以被设置为[0,10TB)。
上文已经分别描述了如何基于预定任务220的类型来确定数据对象210中的将要被执行预定任务220的一组对象212的地址范围。在已经确定了一组对象212的地址范围的情况下，可以按照地址的顺序来排序将要被处理的一组对象212。返回图3，在框320处，可以按照一组对象212的地址的顺序，针对一组对象212执行预定任务220。将会理解，当预定任务220的类型不同时，地址的表示方式可以不同，因而此时可以按照不同的方式来排列一组对象212。
根据本公开的示例性实现方式，当预定任务220为遍历任务时，可以按照一组对象212的哈希来进行排序。例如，继续参见图4的示例，每个叶节点分别表示将要被处理的对象的索引节点，因而可以按照哈希的数值来排序一组对象212：由索引节点430表示的对象、由索引节点432表示的对象、由索引节点434表示的对象、以及由索引节点436表示的对象。根据本公开的示例性实现方式，当预定任务220为增量任务时并且被改变的数据仅包括两个对象时，可以按照被改变的对象的哈希来排序一组对象212：由索引节点432表示的对象以及由索引节点434表示的对象。根据本公开的示例性实现方式，当预定任务220为文件任务时，可以将文件中的各个数据块(例如，按照存储系统的存储单元来划分)按照地址的顺序进行排序。
可以按顺序逐一处理一组对象212中的每个对象。返回图3，在框330处，可以创建进度指示符以用于指示一组对象212中的当前正在被处理的对象的地址。图5示意性示出了根据本公开的示例性实现方式的进度指示符的框图500。如图5所示，可以逐一处理每个对象。图5中以条带图例示出了一组对象212中的已经被处理的对象510、以菱形图例示出了一组对象212中的当前正在被处理的对象520、以空白图例示出了一组对象212中的尚未被处理的对象530。可以设置进度指示符240来指向当前正在被处理的对象520。
将会理解，在此的进度指示符240可以描述预定任务220当前已经被执行的状态，并且在后续执行期间可以基于进度指示符240来以更为简单和有效的方式管理预定任务220。返回图3，在框340处，可以基于进度指示符240来执行预定任务220。
根据本公开的示例性实现方式，如果确定在应用节点120中出现故障，可以重新启动应用节点120。将会理解，由于进度指示符240记录了当前正在被执行预定任务220的对象，因而在重新启动应用节点120之后，不必从头开始处理数据对象210中的全部对象，而是可以基于进度指示符240继续执行预定任务220。
参见图5，假设当进度指示符240指向对象520时应用节点120中出现故障，在重新启动应用节点120之后，可以针对对象520和对象530来执行同步，并不需要在应用节点120和130之间重新同步对象510。利用本公开的示例性实现方式，可以提高同步任务的效率并且避免针对已经被处理的部分重新执行同步的情况。将会理解，尽管在图5中仅以一个方块示出了已处理对象520和未被处理的对象530，在此的对象520和530可以包括一个或多个对象。
上文已经描述了以串行方式来针对一组对象212执行同步任务的示例。将会理解，当待处理数据对象210的数据量较大时，为了提高处理效率，还可以将未被处理的多个对象进行分组，并且以并行方式针对多个分组执行同步任务。根据本公开的示例性实现方式，如果确定在预定时间段内未完成预定任务220，将一组对象212中的尚未被处理的部分划分为至少第一部分和第二部分，并且可以分别针对第一部分和第二部分执行预定任务220。利用本公开的示例性实现方式，可以充分利用更多的处理资源来并行地处理数据对象210中的各个部分。
图6示意性示出了根据本公开的示例性实现方式的用于将未处理地址范围划分为第一部分和第二部分的过程的框图600。图6示出了按照地址排序的未被处理的一组对象(包括对象610、612、…、以及614)。可以将一组对象划分为第一部分620和第二部分622。将会理解，尽管图6仅示意性示出了两个部分，根据本公开的示例性实现方式，还可以将一组对象212划分为更多的部分。继而，可以向每个部分分配处理资源。
根据本公开的示例性实现方式，预定时间段指定执行划分操作的周期，预定时间段越大则执行划分操作的周期越长。具体而言，如果预定时间段过长，则可能会出现完成预定任务的时间早于预定时间的到期，此时并不能充分利用并行处理的优势。如果预定时间段过短，则可能会出现预定时间段在完成处理一个对象之前到期，此时将立刻启动划分操作。因而，可以基于数据对象的数据量和估计的处理时间来设置和调整预定时间段的数值。
根据本公开的示例性实现方式，应用节点中可以包括多个处理资源。图7A示意性示出了根据本公开的示例性实现方式的应用节点120中的处理资源的队列的框图700A。应用节点120可以包括处理资源的队列，并且该队列可以包括多个处理资源710、712、714、…、以及716。根据本公开的示例性实现方式，可以将预定时间段设置为1分钟。在初始阶段，在应用节点120处可以分配处理资源710来执行同步。相应地，在应用节点130处可以利用处理资源来接收来自应用节点120的同步数据。
如果在预定时间段内没有针对数据对象210中的全部数据完成同步任务，则可以将一组对象212中的未被同步的部分划分为第一部分和第二部分，并且可以从资源队列中分配下一处理资源。图7B示意性示出了根据本公开的示例性实现方式的利用处理资源来处理预定任务220的框图700B。如图7B所示，处理资源710可以针对第一部分执行同步任务，而处理资源712可以针对第二部分执行同步任务。相应地，在应用节点130处，可以分别由处理资源720和722来接收来自应用节点120的同步数据。利用本公开的示例性实现方式，在应用节点130处可以根据应用节点120处已经分配的处理资源的数量，来相应地启动处理资源。以此方式，可以按照工作负载来调度应用节点130处的处理资源。根据本公开的示例性实现方式，可以利用唯一的标识符来表示处理资源。
根据本公开的示例性实现方式，可以基于进度指示符240和地址范围230，确定一组对象212中的尚未被处理的部分的未处理地址范围。图8示意性示出了根据本公开的示例性实现方式的划分前后的未被处理的对象的框图800。如图8所示，应用节点120中的处理资源可以串行地向应用节点130同步各个对象。进度指示符240指向正在被处理的对象520，并且该对象520的地址位于整个地址范围的30％处。当在预定时间内未完成同步任务时，可以将未处理地址范围划分为至少第一部分620和第二部分622。未被处理的对象的比例为1-30％＝70％，第一部分620和第二部分622可以分别包括70％/2＝35％的未被处理的对象。
继而，可以由应用节点120中的两个处理资源来分别处理两个部分620和622。具体地，可以以并行方式分别针对第一部分和第二部分执行预定任务220。根据本公开的示例性实现方式，可以将第一部分620作为独立的数据对象210来执行上文参见图3描述的方法300，同时可以将第二部分622作为独立的数据对象210来执行上文参见图3描述的方法300。在此，针对两个部分执行预定任务220的方式是相同的，因而将仅描述如何针对第一部分执行预定任务220。可以创建第一进度指示符以用于指示第一部分620中的当前正在被处理的对象的地址，并且可以基于第一进度指示符来针对第一部分620执行预定任务220。
根据本公开的示例性实现方式，可以针对不同类型的预定任务220来执行相应的处理。在下文中，将返回图4描述有关从应用节点120向应用节点130同步目录的任务的更多细节。如果在预定时间段内没有完成同步任务，则可以基于地址范围来将未被处理的对象划分为两个部分。例如，假设已经同步和由索引节点430表示的对象，此时可以确定划分边界为(700+1000)/2＝850。此时，可以将由索引节432和434表示的对象(哈希小于850)作为第一部分，并且将由索引节点436表示的对象(哈希大于或者等于850)作为第二部分。
根据本公开的示例性实现方式，还可以基于未被处理的对象的数量来平均划分。根据本公开的示例性实现方式，还可以基于将要被处理的对象的数据量来进行划分。例如，可以使得第一部分620和第二部分622中的对象的总数据量相似。
对于增量任务而言，假设在预定时间段内没有完成从应用节点120向应用节点130同步由索引节点430和432表示的对象，则可以将未被处理的对象划分为两部分。此时，每部分可以包括一个对象。对于文件任务而言，假设在预定时间段内没有完成从应用节点120向应用节点130同步文件，则可以将文件的待同步部分划分为两个或者更多部分。
图9示意性示出了根据本公开的示例性实现方式的在不同时间点的文件划分的框图900。假设文件的标识符为LIN1000384b，可以在多个时间点执行多次划分。例如，在初始时间点T0处开始同步文件。在时间点T1处，可以将该文件划分为两部分，此时第一部分的地址范围为[00000000，62914560)、并且第二部分的地址范围为[62914560，125829120)。在时间点T2处，可以分别针对第一部分和第二部分来进行进一步划分。换言之，可以将每个部分划分为两个部分以便形成4个部分。在时间点T3处，可以分别针对在时间点T2处获得的4个部分来进行进一步划分，以便形成8个部分。
根据本公开的示例性实现方式，具有全局唯一文件标识符的文件被划分为多个部分，可以针对多个部分中的每个部分设置唯一标识符。根据本公开的示例性实现方式，可以利用处理资源的全局唯一标识符和文件标识符两者的组合来唯一地标识每个部分。根据本公开的示例性实现方式，可以利用文件划分相关的时间戳和文件标识符的组合来唯一地标识每个部分。备选地和/或附加地，可以基于以上各项的组合来为每个部分设置标识符。
在上文中已经参见图2至图9详细描述了根据本公开的方法的示例，在下文中将描述相应的装置的实现。具体地，提供了一种用于管理应用节点中的任务的装置。该装置包括：确定模块，配置用于基于将要针对应用节点中的数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围；执行模块，配置用于按照一组对象的地址的顺序，针对一组对象执行预定任务；创建模块，配置用于创建进度指示符以用于指示一组对象中的当前正在被处理的对象的地址；以及管理模块，配置用于基于进度指示符来管理预定任务。
根据本公开的示例性实现方式，管理模块包括：重启模块，配置用于根据确定在应用节点中出现故障，重新启动应用节点；以及执行模块进一步配置用于基于进度指示符，继续执行预定任务。
根据本公开的示例性实现方式，管理模块包括：划分模块，配置用于根据确定在预定时间段内未完成预定任务，将一组对象中的尚未被处理的部分划分为至少第一部分和第二部分；以及执行模块进一步配置用于分别针对第一部分和第二部分执行预定任务。
根据本公开的示例性实现方式，划分模块包括：范围确定模块，配置用于基于进度指示符和地址范围，确定一组对象中的尚未被处理的部分的未处理地址范围；以及部分划分模块，配置用于将未处理地址范围划分为至少第一部分和第二部分。
根据本公开的示例性实现方式，执行模块进一步包括第一执行模块，配置用于针对第一部分执行预定任务；创建第一进度指示符以用于指示第一部分中的当前正在被处理的对象的地址；以及基于第一进度指示符来针对第一部分执行预定任务。
根据本公开的示例性实现方式，确定模块包括：索引获取模块，配置用于根据确定预定任务的类型为遍历任务，获取描述数据对象的层级结构的索引，遍历任务表示将要针对数据对象中的全部对象执行预定任务；以及范围确定模块，配置用于基于索引来确定地址范围。
根据本公开的示例性实现方式，确定模块包括：改变获取模块，配置用于根据确定预定任务的类型为增量任务，获取数据对象中的已经被改变的一组对象，增量任务表示将要针对数据对象中的已经被改变的一组对象执行预定任务；以及范围确定模块，配置用于基于已经被改变的一组对象来确定地址范围。
根据本公开的示例性实现方式，确定模块包括：大小获取模块，配置用于根据确定预定任务的类型为文件任务，获取数据对象的大小，文件任务表示数据对象为文件并且将要针对文件执行预定任务；以及范围确定模块，配置用于基于文件的大小来确定地址范围。
根据本公开的示例性实现方式，应用节点包括多个处理资源，以及预定处理任务由多个处理资源中的一个或多个处理资源来执行。
根据本公开的示例性实现方式，预定任务包括以下中的至少任一项：将数据对象从应用节点同步至另一应用节点；以及处理数据对象以及将处理数据对象的结果传输至另一应用节点。
图10示意性示出了根据本公开的示例性实现的用于管理备份系统的设备1000的框图。如图所示，设备1000包括通用处理单元(CPU)1001，其可以根据存储在只读存储器(ROM)1002中的计算机程序指令或者从存储单元1008加载到随机访问存储器(RAM)1003中的计算机程序指令，来执行各种适当的动作和处理。在RAM 1003中，还可存储设备1000操作所需的各种程序和数据。CPU 1001、ROM1002以及RAM 1003通过总线1004彼此相连。输入/输出(I/O)接口1005也连接至总线1004。
设备1000中的多个部件连接至I/O接口1005，包括：输入单元1006，例如键盘、鼠标等；输出单元1007，例如各种类型的显示器、扬声器等；存储单元1008，例如磁盘、光盘等；以及通信单元1009，例如网卡、调制解调器、无线通信收发机等。通信单元1009允许设备1000通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
上文所描述的各个过程和处理，例如方法300，可由处理单元1001执行。例如，在一些实现中，方法300可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元1008。在一些实现中，计算机程序的部分或者全部可以经由ROM 1002和/或通信单元1009而被载入和/或安装到设备1000上。当计算机程序被加载到RAM 1003并由CPU 1001执行时，可以执行上文描述的方法300的一个或多个步骤。备选地，在其他实现中，CPU 1001也可以以其他任何适当的方式被配置以实现上述过程/方法。
根据本公开的示例性实现方式，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器耦合的存储器，存储器具有存储于其中的指令，指令在被至少一个处理器执行时使得设备执行用于管理应用节点中的任务的动作。该动作包括：基于将要针对应用节点中的数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围；按照一组对象的地址的顺序，针对一组对象执行预定任务；创建进度指示符以用于指示一组对象中的当前正在被处理的对象的地址；以及基于进度指示符来管理预定任务。
根据本公开的示例性实现方式，基于进度指示符来管理预定任务包括：根据确定在应用节点中出现故障，重新启动应用节点；以及基于进度指示符，继续执行预定任务。
根据本公开的示例性实现方式，基于进度指示符来管理预定任务包括：根据确定在预定时间段内未完成预定任务，将一组对象中的尚未被处理的部分划分为至少第一部分和第二部分；以及分别针对第一部分和第二部分执行预定任务。
根据本公开的示例性实现方式，将一组对象中的尚未被处理的部分划分为至少第一部分和第二部分包括：基于进度指示符和地址范围，确定一组对象中的尚未被处理的部分的未处理地址范围；以及将未处理地址范围划分为至少第一部分和第二部分。
根据本公开的示例性实现方式，分别针对第一部分和第二部分执行预定任务包括：针对第一部分执行预定任务；创建第一进度指示符以用于指示第一部分中的当前正在被处理的对象的地址；以及基于第一进度指示符来针对第一部分执行预定任务。
根据本公开的示例性实现方式，基于将要针对数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围包括：根据确定预定任务的类型为遍历任务，获取描述数据对象的层级结构的索引，遍历任务表示将要针对数据对象中的全部对象执行预定任务；以及基于索引来确定地址范围。
根据本公开的示例性实现方式，基于将要针对数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围包括：根据确定预定任务的类型为增量任务，获取数据对象中的已经被改变的一组对象，增量任务表示将要针对数据对象中的已经被改变的一组对象执行预定任务；基于已经被改变的一组对象来确定地址范围。
根据本公开的示例性实现方式，基于将要针对数据对象执行的预定任务的类型，确定数据对象中的将要被执行预定任务的一组对象的地址范围包括：根据确定预定任务的类型为文件任务，获取数据对象的大小，文件任务表示数据对象为文件并且将要针对文件执行预定任务；以及基于文件的大小来确定地址范围。
根据本公开的示例性实现方式，应用节点包括多个处理资源，以及预定处理任务由多个处理资源中的一个或多个处理资源来执行。
根据本公开的示例性实现方式，预定任务包括以下中的至少任一项：将数据对象从应用节点同步至另一应用节点；以及处理数据对象以及将处理数据对象的结果传输至另一应用节点。
根据本公开的示例性实现，提供了一种计算机程序产品，计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令，机器可执行指令用于执行根据本公开的方法。
根据本公开的示例性实现，提供了一种计算机可读介质。计算机可读介质上存储有机器可执行指令，当机器可执行指令在被至少一个处理器执行时，使得至少一个处理器实现根据本公开方法。
本公开可以是方法、设备、系统和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于执行本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实现中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这里参照根据本公开实现的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理单元，从而生产出一种机器，使得这些指令在通过计算机或其他可编程数据处理装置的处理单元执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其他可编程数据处理装置、或其他设备上，使得在计算机、其他可编程数据处理装置或其他设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其他可编程数据处理装置、或其他设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实现的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实现，上述说明是示例性的，并非穷尽性的，并且也不限于所公开的各实现。在不偏离所说明的各实现的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实现的原理、实际应用或对市场中的技术的改进，或者使本技术领域的其他普通技术人员能理解本文公开的各实现。

Claims (18)

1.一种用于管理应用节点中的任务的方法，包括：
基于将要针对所述应用节点中的数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的一组对象的地址范围；
在基于所述数据对象的数据量而确定的预定时间段内按照所述一组对象的地址的顺序，针对所述一组对象执行所述预定任务；
创建进度指示符以用于指示所述一组对象中的当前正在被处理的对象的地址；
基于所述进度指示符来管理所述预定任务，包括：
根据确定在预定时间段内未完成所述预定任务，将所述一组对象中的尚未被处理的部分划分为至少第一部分和第二部分；以及
分别针对所述第一部分和所述第二部分执行所述预定任务。
2.根据权利要求1所述的方法，其中基于所述进度指示符来管理所述预定任务包括：
根据确定在所述应用节点中出现故障，重新启动所述应用节点；以及
基于所述进度指示符，继续执行所述预定任务。
3.根据权利要求1所述的方法，其中将所述一组对象中的尚未被处理的所述部分划分为至少所述第一部分和所述第二部分包括：
基于所述进度指示符和所述地址范围，确定所述一组对象中的尚未被处理的所述部分的未处理地址范围；以及
将所述未处理地址范围划分为至少所述第一部分和所述第二部分。
4.根据权利要求1所述方法，其中分别针对所述第一部分和所述第二部分执行所述预定任务包括：
针对所述第一部分执行所述预定任务；
创建第一进度指示符以用于指示所述第一部分中的当前正在被处理的对象的地址；以及
基于所述第一进度指示符来针对所述第一部分执行所述预定任务。
5.根据权利要求1所述的方法，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为遍历任务，获取描述所述数据对象的层级结构的索引，所述遍历任务表示将要针对所述数据对象中的全部对象执行所述预定任务；以及
基于所述索引来确定所述地址范围。
6.根据权利要求1所述的方法，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为增量任务，获取所述数据对象中的已经被改变的一组对象，所述增量任务表示将要针对所述数据对象中的已经被改变的所述一组对象执行所述预定任务；以及
基于已经被改变的所述一组对象来确定所述地址范围。
7.根据权利要求1所述的方法，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为文件任务，获取所述数据对象的大小，所述文件任务表示所述数据对象为文件并且将要针对所述文件执行所述预定任务；以及
基于所述文件的所述大小来确定所述地址范围。
8.根据权利要求1所述的方法，其中所述应用节点包括多个处理资源，以及所述预定处理任务由所述多个处理资源中的一个或多个处理资源来执行。
9.根据权利要求1所述的方法，其中所述预定任务包括以下中的至少任一项：
将所述数据对象从所述应用节点同步至另一应用节点；以及
处理所述数据对象以及将处理所述数据对象的结果传输至另一应用节点。
10.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器耦合的存储器，所述存储器具有存储于其中的指令，所述指令在被所述至少一个处理器执行时使得所述设备执行用于管理应用节点中的任务的动作，所述动作包括：
基于将要针对所述应用节点中的数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的一组对象的地址范围；
在基于所述数据对象的数据量而确定的预定时间段内按照所述一组对象的地址的顺序，针对所述一组对象执行所述预定任务；
创建进度指示符以用于指示所述一组对象中的当前正在被处理的对象的地址；
基于所述进度指示符来管理所述预定任务，包括：
根据确定在预定时间段内未完成所述预定任务，将所述一组对象中的尚未被处理的部分划分为至少第一部分和第二部分；以及
分别针对所述第一部分和所述第二部分执行所述预定任务。
11.根据权利要求10所述的设备，其中基于所述进度指示符来管理所述预定任务包括：
根据确定在所述应用节点中出现故障，重新启动所述应用节点；以及
基于所述进度指示符，继续执行所述预定任务。
12.根据权利要求10所述的设备，其中将所述一组对象中的尚未被处理的所述部分划分为至少所述第一部分和所述第二部分包括：
基于所述进度指示符和所述地址范围，确定所述一组对象中的尚未被处理的所述部分的未处理地址范围；以及
将所述未处理地址范围划分为至少所述第一部分和所述第二部分。
13.根据权利要求10所述设备，其中分别针对所述第一部分和所述第二部分执行所述预定任务包括：
针对所述第一部分执行所述预定任务；
创建第一进度指示符以用于指示所述第一部分中的当前正在被处理的对象的地址；以及
基于所述第一进度指示符来针对所述第一部分执行所述预定任务。
14.根据权利要求10所述的设备，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为遍历任务，获取描述所述数据对象的层级结构的索引，所述遍历任务表示将要针对所述数据对象中的全部对象执行所述预定任务；以及
基于所述索引来确定所述地址范围。
15.根据权利要求10所述的设备，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为增量任务，获取所述数据对象中的已经被改变的一组对象，所述增量任务表示将要针对所述数据对象中的已经被改变的所述一组对象执行所述预定任务；以及
基于已经被改变的所述一组对象来确定所述地址范围。
16.根据权利要求10所述的设备，其中基于将要针对所述数据对象执行的预定任务的类型，确定所述数据对象中的将要被执行所述预定任务的所述一组对象的所述地址范围包括：
根据确定所述预定任务的所述类型为文件任务，获取所述数据对象的大小，所述文件任务表示所述数据对象为文件并且将要针对所述文件执行所述预定任务；以及
基于所述文件的所述大小来确定所述地址范围。
17.根据权利要求10所述的设备，其中所述应用节点包括多个处理资源，以及所述预定处理任务由所述多个处理资源中的一个或多个处理资源来执行。
18.一种计算机可读存储介质，存储有机器可执行指令，所述机器可执行指令用于执行根据权利要求1-9中的任一项所述的方法。
CN202010042349.7A 2020-01-15 2020-01-15 管理应用节点中的任务的方法、设备和计算机程序产品 Active CN113127164B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010042349.7A CN113127164B (zh) 2020-01-15 2020-01-15 管理应用节点中的任务的方法、设备和计算机程序产品
US16/888,302 US11513870B2 (en) 2020-01-15 2020-05-29 Method, device, and computer program product for managing a task in an application node

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010042349.7A CN113127164B (zh) 2020-01-15 2020-01-15 管理应用节点中的任务的方法、设备和计算机程序产品

Publications (2)

Publication Number Publication Date
CN113127164A CN113127164A (zh) 2021-07-16
CN113127164B true CN113127164B (zh) 2024-03-26

Family

ID=76764228

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010042349.7A Active CN113127164B (zh) 2020-01-15 2020-01-15 管理应用节点中的任务的方法、设备和计算机程序产品

Country Status (2)

Country Link
US (1) US11513870B2 (zh)
CN (1) CN113127164B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1811685A (zh) * 2005-01-24 2006-08-02 微软公司 以文档为中心的软件应用程序的面向任务的用户界面模型
CN102567438A (zh) * 2010-09-28 2012-07-11 迈塔斯威士网络有限公司 对分布式存储系统中的数据项进行访问的方法
CN110392084A (zh) * 2018-04-20 2019-10-29 伊姆西Ip控股有限责任公司 在分布式系统中管理地址的方法、设备和计算机程序产品
CN110582750A (zh) * 2017-04-28 2019-12-17 北京嘀嘀无限科技发展有限公司 用于任务调度和设备管理的系统和方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6275953B1 (en) * 1997-09-26 2001-08-14 Emc Corporation Recovery from failure of a data processor in a network server
US6778697B1 (en) * 1999-02-05 2004-08-17 Samsung Electronics Co., Ltd. Color image processing method and apparatus thereof
US20060044582A1 (en) * 2004-08-27 2006-03-02 Seaman Mark D Interface device for coupling image-processing modules
US7848835B2 (en) * 2006-06-02 2010-12-07 Cymer, Inc. High power laser flat panel workpiece treatment system controller
JP5233608B2 (ja) * 2008-11-19 2013-07-10 株式会社リコー 画像形成装置、画像データ転送方法、及びプログラム
JP2012124832A (ja) * 2010-12-10 2012-06-28 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
US9904585B1 (en) * 2015-10-06 2018-02-27 Amazon Technologies, Inc. Error handling in executing workflow state machines
US10668990B2 (en) * 2017-07-16 2020-06-02 Lone Gull Holdings, Ltd. Self-powered computing buoy
US11593315B2 (en) * 2018-06-26 2023-02-28 Hulu, LLC Data cluster migration using an incremental synchronization

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1811685A (zh) * 2005-01-24 2006-08-02 微软公司 以文档为中心的软件应用程序的面向任务的用户界面模型
CN102567438A (zh) * 2010-09-28 2012-07-11 迈塔斯威士网络有限公司 对分布式存储系统中的数据项进行访问的方法
CN110582750A (zh) * 2017-04-28 2019-12-17 北京嘀嘀无限科技发展有限公司 用于任务调度和设备管理的系统和方法
CN110392084A (zh) * 2018-04-20 2019-10-29 伊姆西Ip控股有限责任公司 在分布式系统中管理地址的方法、设备和计算机程序产品

Also Published As

Publication number Publication date
US11513870B2 (en) 2022-11-29
US20210216379A1 (en) 2021-07-15
CN113127164A (zh) 2021-07-16

Similar Documents

Publication Publication Date Title
CN110147411B (zh) 数据同步方法、装置、计算机设备及存储介质
CN108509462B (zh) 一种同步活动事务表的方法及装置
EP3125501B1 (en) File synchronization method, server, and terminal
CN109032796B (zh) 一种数据处理方法和装置
CN109144785B (zh) 用于备份数据的方法和装置
US9026493B1 (en) Multi-master RDBMS improvements for distributed computing environment
CN118113663A (zh) 用于管理存储系统的方法、设备和计算机程序产品
US20180276267A1 (en) Methods and system for efficiently performing eventual and transactional edits on distributed metadata in an object storage system
CN113420026A (zh) 数据库表结构变更方法、装置、设备及存储介质
CN115587118A (zh) 任务数据的维表关联处理方法及装置、电子设备
CN111459913B (zh) 分布式数据库的容量扩展方法、装置及电子设备
CN114490509A (zh) 跟踪改变数据捕获日志历史
CN112948494A (zh) 数据同步方法、装置、电子设备和计算机可读介质
CN113127164B (zh) 管理应用节点中的任务的方法、设备和计算机程序产品
CN113761052A (zh) 数据库同步方法和装置
CN116842244A (zh) 搜索引擎数据同步方法、系统、设备和存储介质
CN110990360A (zh) 基于网络存储设备的文件同步方法及相关组件
US20230101740A1 (en) Data distribution in data analysis systems
CN111147226A (zh) 数据存储方法、装置及存储介质
CN115189931A (zh) 一种分布式密钥管理方法、装置、设备、存储介质
CN114817234A (zh) 用于管理存储系统的索引的方法、设备和程序产品
CN111104787B (zh) 用于比较文件的方法、设备和计算机程序产品
CN111177162A (zh) 一种数据同步方法及装置
CN112685331B (zh) 用于存储管理的方法、设备和计算机程序产品
CN118012952B (zh) 一种数据处理方法和装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant