CN103780635A - 云环境中的分布式异步任务队列执行系统和方法 - Google Patents
云环境中的分布式异步任务队列执行系统和方法 Download PDFInfo
- Publication number
- CN103780635A CN103780635A CN201210395517.6A CN201210395517A CN103780635A CN 103780635 A CN103780635 A CN 103780635A CN 201210395517 A CN201210395517 A CN 201210395517A CN 103780635 A CN103780635 A CN 103780635A
- Authority
- CN
- China
- Prior art keywords
- task
- user
- equipment
- parallel
- queue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
Abstract
本发明提出一种云环境中的分布式异步任务队列执行系统和方法，其中系统包括：接口设备，用于接收用户提交的执行任务的请求，验证用户的配额是否超限并且在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；任务队列设备，用于判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列；以及多个任务执行设备，用于执行任务队列设备推送的并行任务和串行任务，其中任务执行设备推送的是并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。本发明的任务执行效率高，性能好。
Description
技术领域
本发明涉及互联网技术领域，尤其涉及一种云环境中的分布式异步任务队列执行系统和方法。
背景技术
在代理云环境中，用户（如开发者）经常需要执行自己的任务，由于受到执行引擎的时间限制，同步执行多个任务会造成任务执行超时，因此支持异步提交任务队列对于用户来说就显得十分重要，分布式任务队列支持用户通过队列提交一系列任务，由系统保证任务不被丢失。
目前，采用分布式任务队列执行任务主要存在以下问题：任务执行器采用主动拉取模式，在出现大规模队列的情况下容易造成扫描代价高，影响系统的整体性能，同时部分需求不能支持，例如成功回调、对单个任务状态的查询。
发明内容
本发明旨在至少解决上述技术问题之一。
为此，本发明的一个目的在于提出一种云环境中的分布式异步任务队列执行系统，该系统任务执行效率高，性能好。
本发明的另一目的在于提出一种云环境中的分布式异步任务队列执行方法。
为了实现上述目的，根据本发明第一方面的实施例的云环境中的分布式异步任务队列执行系统包括：接口设备，所述接口设备用于接收用户提交的执行任务的请求，验证所述用户的配额是否超限并且在所述用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；任务队列设备，所述任务队列设备用于判断所述用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将所述用户提交的任务相应地放入并行任务队列和串行任务队列；以及多个任务执行设备，所述多个任务执行设备用于执行所述任务队列设备推送的并行任务和串行任务，其中所述任务队列设备推送的是并行任务时，判断并发度是否超过所述用户的限制，在并发度没有超过所述用户的限制的情况下执行所述并行任务。
根据本发明实施例的云环境中的分布式异步任务队列执行系统，通过任务队列设备实现异步任务队列的任务推送并通过任务执行设备执行任务，满足用户期望，提高任务执行效率，特别是在大规模任务队列的情况下，可以保证任务的及时执行，同时大幅提升系统性能。
为了实现上述目的，根据本发明第二方面的实施例的云环境中的分布式异步任务队列执行方法包括以下步骤：接收用户提交的执行任务的请求；验证所述用户的配额是否超限；在所述用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；判断所述用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将所述用户提交的任务相应地放入并行任务队列和串行任务队列；以及使用多个任务执行设备执行所述并行任务和所述串行任务，其中在执行所述并行任务时，判断并发度是否超过所述用户的限制，在并发度没有超过所述用户的限制的情况下执行所述并行任务。
根据本发明实施例的云环境中的分布式异步任务队列执行方法，通过多个任务执行设备执行分类的并行任务和串行任务，满足用户期望，提高任务执行效率，特别是在大规模任务队列的情况下，可以保证任务的及时执行，同时大幅提升系统性能。
本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中，
图1是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图；
图2是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图；
图3是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图；
图4是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图；
图5是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图；
图6是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图；以及
图7是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。相反，本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
在本发明的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。此外，在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
下面参考附图描述根据本发明实施例的云环境中的分布式异步任务队列执行系统和方法。
一种云环境中的分布式异步任务队列执行系统，包括：接口设备，接口设备用于接收用户提交的执行任务的请求，验证用户的配额是否超限并且在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；任务队列设备，任务队列设备用于判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列；以及多个任务执行设备，多个任务执行设备用于执行任务队列设备推送的并行任务和串行任务，其中任务执行设备推送的是并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。
图1是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图。
如图1所示，云环境中的分布式异步任务队列执行系统包括：接口设备10、任务队列设备20和多个任务执行设备30。
具体地，接口设备10用于接收用户提交的执行任务的请求，验证用户的配额是否超限并且在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。更具体地，接口设备10可以是对外提供的http openapi（Open ApplicationProgramming Interface，开放的应用程序编程接口），并可以将其封装为多语言版本的sdk（Software Development Kit，软件开发工具包）便于用户使用，用户通过云代理提供的管理界面和sdk可以完成任务的提交。其中，接口设备10通过判断用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
其中，在用户提交的任务通过接口设备10各种验证之后将对应的任务基本信息写入数据库。在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
任务队列设备20用于判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
多个任务执行设备30用于执行任务队列设备20推送的并行任务和串行任务，其中任务队列设备20推送的是并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务，如果并发度超过用户的限制则拒绝执行所推送的任务。
根据本发明实施例的云环境中的分布式异步任务队列执行系统，通过任务队列设备实现异步任务队列的任务推送并通过任务执行设备执行任务，满足用户期望，提高任务执行效率，特别是在大规模任务队列的情况下，可以保证任务的及时执行，同时大幅提升系统性能。
在本发明的一个实施例中，任务执行设备30通过读取并行任务队列中正在执行的任务数来判断任务数是否达到用户的限制，如果是，则拒绝接受并行任务队列中的新任务直到并行任务队列中有任务被执行完。更具体地，任务队列设备20推送任务到某个任务执行设备30后，任务执行设备30读取当前任务队列中正在执行的任务数目，如果正在执行的任务数目达到上限值则拒绝接受该新推送的任务，只到该任务队列中的某个或者几个任务完成时，通知任务队列设备20推送一个或者几个新任务。由此实现并发度的控制。
在本发明的一个实施例中，任务执行设备30通知数据库将正在执行的任务的状态修改为“进行中”同时标记执行正在执行的任务执行设备30。具体地，当任务执行设备30接收到任务队列设备20推送的任务之后，将数据库中对应的任务基本信息改为“进行中”，同时标记执行该任务的任务执行设备30的编号，由此，在任务执行设备30重启之后，可以检查到自己曾经未完成的任务并继续重试，保证任务不被丢失。
在本发明的一个实施例中，接口设备10进一步用于验证用户的身份，由此保证安全性。进一步地，接口设备10还用于对系统进行防攻击保护以及对用户提交的执行任务的请求和任务所对应的参数进行校验。
图2是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图。
如图2所示，云环境中的分布式异步任务队列执行系统包括：接口设备10、任务队列设备20、多个任务执行设备30和任务统计设备40。
具体地，具体地，接口设备10用于接收用户提交的执行任务的请求，验证用户的配额是否超限并且在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。更具体地，接口设备10可以是对外提供的http openapi，并可以将其封装为多语言版本的sdk便于用户使用，用户通过云代理提供的管理界面和sdk可以完成任务的提交。其中，接口设备10通过判断用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
其中，在用户提交的任务通过接口设备10各种验证之后将对应的任务基本信息写入数据库。在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
任务队列设备20用于判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
多个任务执行设备30用于执行任务队列设备20推送的并行任务和串行任务，其中任务队列设备20推送的是并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务，如果并发度超过用户的限制则拒绝执行所推送的任务。
任务统计设备40用于统计任务信息以及多个任务执行设备30的信息，任务统计设备40还可以统计任务队列信息，例如名称和长度上限等。更具体地，任务信息包括任务的状态、任务的内容以及执行任务的任务执行设备30的编号，多个任务执行设备30的信息包括多个任务执行设备30的编号以及上次启动时间。任务的状态包括等待、执行、成功、失败、取消。任务执行设备40是无状态的。
根据本发明实施例的云环境中的分布式异步任务队列执行系统，通过任务统计设备实现信息统计，方便查询、控制，例如可以查询某个任务的状态。
图3是根据本发明一个实施例的云环境中的分布式异步任务队列执行系统的结构框图。
如图3所示，云环境中的分布式异步任务队列执行系统包括：接口设备10、任务队列设备20、多个任务执行设备30、任务统计设备40和反馈设备50。
具体地，具体地，接口设备10用于接收用户提交的执行任务的请求，验证用户的配额是否超限并且在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。更具体地，接口设备10可以是对外提供的http openapi，并可以将其封装为多语言版本的sdk便于用户使用，用户通过云代理提供的管理界面和sdk可以完成任务的提交。其中，接口设备10通过判断用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
其中，在用户提交的任务通过接口设备10各种验证之后将对应的任务基本信息写入数据库。在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
任务队列设备20用于判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
多个任务执行设备30用于执行任务队列设备20推送的并行任务和串行任务，其中任务队列设备20推送的是并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务，如果并发度超过用户的限制则拒绝执行所推送的任务。
任务统计设备40用于统计任务信息以及多个任务执行设备30的信息，任务统计设备40还可以统计任务队列信息，例如名称和长度上限等。更具体地，任务信息包括任务的状态、任务的内容以及执行任务的任务执行设备30的编号，多个任务执行设备30的信息包括多个任务执行设备30的编号以及上次启动时间。任务的状态包括等待、执行、成功、失败、取消。任务执行设备40是无状态的。
反馈设备50用于将用户消耗的资源返回接口设备10。
在本发明的一个实施例中，任务统计设备40是可选的。
根据本发明实施例的云环境中的分布式异步任务队列执行系统，通过对用户消耗的资源进行反馈用于验证用户的配额，便于系统部署。
为了实现上述实施例，本发明还提出一种云环境中的分布式异步任务队列执行方法。
一种云环境中的分布式异步任务队列执行方法，包括以下步骤：接收用户提交的执行任务的请求；验证用户的配额是否超限；在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列；以及使用多个任务执行设备执行并行任务和串行任务，其中在执行并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。
图4是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图。
如图4所示，云环境中的分布式异步任务队列执行方法，包括下述步骤。
步骤S101，接收用户提交的执行任务的请求。
具体地，用户可以通过http openapi封装成的多语言版本sdk提交执行任务的请求。
步骤S102，验证用户的配额是否超限。
其中，通过验证用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
步骤S103，在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。其中，用户可以通过sdk提交任务。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
步骤S104，判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
步骤S105，使用多个任务执行设备执行并行任务和串行任务，其中在执行并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。其中，如果并发度超过用户的限制则拒绝执行。
在本发明的一个实施例中，任务执行设备通过读取并行任务队列中正在执行的任务数来判断任务数是否达到用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到并行任务队列中有任务被执行完，由此实现并发度的控制。
在本发明的一个实施例中，任务执行设备通知数据库将正在执行的任务的状态修改为“进行中”同时标记执行正在执行的任务执行设备。具体地，当任务执行设备接收任务之后，将数据库中对应的任务基本信息改为“进行中”，同时标记执行该任务的任务执行设备的编号，由此，在任务执行设备重启之后，可以检查到自己曾经未完成的任务并继续重试，保证任务不被丢失。
根据本发明实施例的云环境中的分布式异步任务队列执行方法，通过多个任务执行设备执行分类的并行任务和串行任务，满足用户期望，提高任务执行效率，特别是在大规模任务队列的情况下，可以保证任务的及时执行，同时大幅提升系统性能。
图5是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图。
如图5所示，云环境中的分布式异步任务队列执行方法，包括下述步骤。
步骤S201，接收用户提交的执行任务的请求。
具体地，用户可以通过http openapi封装成的多语言版本sdk提交执行任务的请求。
步骤S202，验证用户的配额是否超限。
其中，通过验证用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
步骤S203，在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。其中，用户可以通过sdk提交任务。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
步骤S204，判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
步骤S205，使用多个任务执行设备执行并行任务和串行任务，其中在执行并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。其中，如果并发度超过用户的限制则拒绝执行。
步骤S206，统计任务信息以及多个任务执行设备的信息。
具体地，任务信息包括任务的状态、任务的内容以及执行任务的任务执行设备的编号，多个任务执行设备的信息包括多个任务执行设备的编号以及上次启动时间。还可以统计任务队列信息，例如名称和长度上限等。任务的状态包括等待、执行、成功、失败、取消。任务执行设备40是无状态的。
在本发明的一个实施例中，任务执行设备通过读取并行任务队列中正在执行的任务数来判断任务数是否达到用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到并行任务队列中有任务被执行完，由此实现并发度的控制。
在本发明的一个实施例中，任务执行设备通知数据库将正在执行的任务的状态修改为“进行中”同时标记执行正在执行的任务执行设备。具体地，当任务执行设备接收任务之后，将数据库中对应的任务基本信息改为“进行中”，同时标记执行该任务的任务执行设备的编号，由此，在任务执行设备重启之后，可以检查到自己曾经未完成的任务并继续重试，保证任务不被丢失。
根据本发明实施例的云环境中的分布式异步任务队列执行方法，通过信息统计，可以方便查询、控制，例如可以查询某个任务的状态。
图6是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图。
如图6所示，云环境中的分布式异步任务队列执行方法，包括下述步骤。
步骤S301，接收用户提交的执行任务的请求。
具体地，用户可以通过http openapi封装成的多语言版本sdk提交执行任务的请求。
步骤S302，验证用户的配额是否超限。
其中，通过验证用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
步骤S303，在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。其中，用户可以通过sdk提交任务。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
步骤S304，判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
步骤S305，使用多个任务执行设备执行并行任务和串行任务，其中在执行并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。其中，如果并发度超过用户的限制则拒绝执行。
步骤S306，统计任务信息以及多个任务执行设备的信息。
具体地，任务信息包括任务的状态、任务的内容以及执行任务的任务执行设备的编号，多个任务执行设备的信息包括多个任务执行设备的编号以及上次启动时间。还可以统计任务队列信息，例如名称和长度上限等。任务的状态包括等待、执行、成功、失败、取消。任务执行设备40是无状态的。
步骤S307，将用户消耗的资源返回用于判断用户的配额是否超限。
在本发明的一个实施例中，任务执行设备通过读取并行任务队列中正在执行的任务数来判断任务数是否达到用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到并行任务队列中有任务被执行完，由此实现并发度的控制。
在本发明的一个实施例中，任务执行设备通知数据库将正在执行的任务的状态修改为“进行中”同时标记执行正在执行的任务执行设备。具体地，当任务执行设备接收任务之后，将数据库中对应的任务基本信息改为“进行中”，同时标记执行该任务的任务执行设备的编号，由此，在任务执行设备重启之后，可以检查到自己曾经未完成的任务并继续重试，保证任务不被丢失。
根据本发明实施例的云环境中的分布式异步任务队列执行方法，通过对用户消耗的资源进行反馈用于验证用户的配额，便于系统部署。
图7是根据本发明一个实施例的云环境中的分布式异步任务队列执行方法的流程图。
如图7所示，云环境中的分布式异步任务队列执行方法，包括下述步骤。
步骤S401，接收用户提交的执行任务的请求。
具体地，用户可以通过http openapi封装成的多语言版本sdk提交执行任务的请求。
步骤S402，验证用户的身份。
步骤S403，验证用户的配额是否超限。
其中，通过验证用户的配额是否超限可以对任务执行量较大的用户进行限制，提高执行效率。
步骤S404，在用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库。其中，用户可以通过sdk提交任务。
在本发明的一个实施例中，用户提交的任务包括提取网页任务或离线下载任务。例如，如果是网页任务，则用户可以将任务代码挂接在云环境中，通过http请求访问，由此实现很好的解耦，通过访问网页可以触发用户的任务代码；如果是离线下载任务，用户可以将其他站点中属于自己的资源离线转移到云环境中，方便用户将建站资源部署在云环境中。
在本发明的一个实施例中，任务基本信息包括任务的状态，例如，任务的状态可以包括等待执行、执行中和执行结束等。
步骤S405，判断用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将用户提交的任务相应地放入并行任务队列和串行任务队列。
步骤S406，使用多个任务执行设备执行并行任务和串行任务，其中在执行并行任务时，判断并发度是否超过用户的限制，在并发度没有超过用户的限制的情况下执行并行任务。其中，如果并发度超过用户的限制则拒绝执行。
步骤S407，统计任务信息以及多个任务执行设备的信息。
具体地，任务信息包括任务的状态、任务的内容以及执行任务的任务执行设备的编号，多个任务执行设备的信息包括多个任务执行设备的编号以及上次启动时间。还可以统计任务队列信息，例如名称和长度上限等。任务的状态包括等待、执行、成功、失败、取消。任务执行设备40是无状态的。
步骤S408，将用户消耗的资源返回用于判断用户的配额是否超限。
在本发明的一个实施例中，任务执行设备通过读取并行任务队列中正在执行的任务数来判断任务数是否达到用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到并行任务队列中有任务被执行完，由此实现并发度的控制。
在本发明的一个实施例中，任务执行设备通知数据库将正在执行的任务的状态修改为“进行中”同时标记执行正在执行的任务执行设备。具体地，当任务执行设备接收任务之后，将数据库中对应的任务基本信息改为“进行中”，同时标记执行该任务的任务执行设备的编号，由此，在任务执行设备重启之后，可以检查到自己曾经未完成的任务并继续重试，保证任务不被丢失。
根据本发明实施例的云环境中的分布式异步任务队列执行方法，通过用户的身份验证保证安全性。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列（PGA），现场可编程门阵列（FPGA）等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同限定。
Claims (20)
1.一种云环境中的分布式异步任务队列执行系统，其特征在于，包括：
接口设备，所述接口设备用于接收用户提交的执行任务的请求，验证所述用户的配额是否超限并且在所述用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；
任务队列设备，所述任务队列设备用于判断所述用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将所述用户提交的任务相应地放入并行任务队列和串行任务队列；以及
多个任务执行设备，所述多个任务执行设备用于执行所述任务队列设备推送的并行任务和串行任务，其中所述任务队列设备推送的是并行任务时，判断并发度是否超过所述用户的限制，在并发度没有超过所述用户的限制的情况下执行所述并行任务。
2.根据权利要求1所述的系统，其特征在于，进一步包括：
任务统计设备，所述任务统计设备用于统计任务信息以及所述多个任务执行设备的信息。
3.根据权利要求2所述的系统，其特征在于，所述任务基本信息包括所述任务的状态，所述任务信息包括所述任务的状态、所述任务的内容以及执行所述任务的任务执行设备的编号，所述多个任务执行设备的信息包括所述多个任务执行设备的编号以及上次启动时间。
4.根据权利要求3所述的系统，其特征在于，所述任务的状态包括：等待、执行、成功、失败、取消。
5.根据权利要求1至4中任一项所述的系统，其特征在于，进一步包括：
反馈设备，所述反馈设备用于将所述用户消耗的资源返回所述接口设备。
6.根据权利要求1至4中任一项所述的系统，其特征在于，所述任务执行设备通过读取所述并行任务队列中正在执行的任务数来判断所述任务数是否达到所述用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到所述并行任务队列中有任务被执行完。
7.根据权利要求1至4中任一项所述的系统，其特征在于，所述任务执行设备通知所述数据库将正在执行的任务的状态修改为“进行中”同时标记执行所述正在执行的任务执行设备。
8.根据权利要求1至4中任一项所述的系统，其特征在于，所述用户提交的任务包括提取网页任务或离线下载任务。
9.根据权利要求1至4中任一项所述的系统，其特征在于，所述接口设备进一步用于验证所述用户的身份。
10.根据权利要求1至4中任一项所述的系统，其特征在于，所述多个任务执行设备是无状态的。
11.一种云环境中的分布式异步任务队列执行方法，其特征在于，包括：
接收用户提交的执行任务的请求；
验证所述用户的配额是否超限；
在所述用户的配额没有超限的情况下接收用户提交的任务并将任务基本信息写入数据库；
判断所述用户提交的任务是需要并行执行的任务还是需要串行执行的任务并将所述用户提交的任务相应地放入并行任务队列和串行任务队列；以及
使用多个任务执行设备执行所述并行任务和所述串行任务，其中在执行所述并行任务时，判断并发度是否超过所述用户的限制，在并发度没有超过所述用户的限制的情况下执行所述并行任务。
12.根据权利要求11所述的方法，其特征在于，进一步包括：
统计任务信息以及所述多个任务执行设备的信息。
13.根据权利要求12所述的方法，其特征在于，所述任务基本信息包括所述任务的状态，所述任务信息包括所述任务的状态、所述任务的内容以及执行所述任务的任务执行设备的编号，所述多个执行设备的信息包括所述多个执行设备的编号以及上次启动时间。
14.根据权利要求13所述的方法，其特征在于，所述任务的状态包括：等待、执行、成功、失败、取消。
15.根据权利要求11至14中任一项所述的方法，其特征在于，进一步包括步骤：
将所述用户消耗的资源返回用于判断所述用户的配额是否超限。
16.根据权利要求11至14中任一项所述的方法，其特征在于，所述任务执行设备通过读取所述并行任务队列中正在执行的任务数来判断所述任务数是否达到所述用户的限制，如果是，则拒绝接受所述并行任务队列中的新任务直到所述并行任务队列中有任务被执行完。
17.根据权利要求11至14中任一项所述的方法，其特征在于，所述任务执行设备通知所述数据库将正在执行的任务的状态修改为“进行中”同时标记执行所述正在执行的任务执行设备。
18.根据权利要求11至14中任一项所述的方法，其特征在于，所述用户提交的任务包括提取网页任务或离线下载任务。
19.根据权利要求11至14中任一项所述的方法，其特征在于，进一步包括步骤：
验证所述用户的身份。
20.根据权利要求11至14中任一项所述的方法，其特征在于，所述多个任务执行设备是无状态的。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210395517.6A CN103780635B (zh) | 2012-10-17 | 2012-10-17 | 云环境中的分布式异步任务队列执行系统和方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210395517.6A CN103780635B (zh) | 2012-10-17 | 2012-10-17 | 云环境中的分布式异步任务队列执行系统和方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103780635A true CN103780635A (zh) | 2014-05-07 |
| CN103780635B CN103780635B (zh) | 2017-08-18 |
Family
ID=50572463
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210395517.6A Active CN103780635B (zh) | 2012-10-17 | 2012-10-17 | 云环境中的分布式异步任务队列执行系统和方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103780635B (zh) |
Cited By (63)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104077701A (zh) * | 2014-06-09 | 2014-10-01 | 中国建设银行股份有限公司 | 用于电商平台的任务处理方法及装置 |
| CN104318381A (zh) * | 2014-10-21 | 2015-01-28 | 中国建设银行股份有限公司 | 一种后台审核任务分发方法和装置 |
| CN105068912A (zh) * | 2015-07-29 | 2015-11-18 | 北京京东尚科信息技术有限公司 | 用于执行网页任务的方法和装置 |
| CN105373428A (zh) * | 2015-12-09 | 2016-03-02 | 北京奇虎科技有限公司 | 一种任务调度方法和系统 |
| CN105491012A (zh) * | 2015-11-20 | 2016-04-13 | 北京奇虎科技有限公司 | 一种消息存放方法和装置 |
| CN105740065A (zh) * | 2016-01-20 | 2016-07-06 | 浪潮(北京)电子信息产业有限公司 | 一种控制异步任务执行的方法及装置 |
| CN108255820A (zh) * | 2016-12-28 | 2018-07-06 | 阿里巴巴集团控股有限公司 | 分布式系统中数据入库的方法、装置以及电子设备 |
| CN108322471A (zh) * | 2016-05-11 | 2018-07-24 | 甲骨文国际公司 | 多租户身份和数据安全性管理云服务 |
| CN108613681A (zh) * | 2018-05-14 | 2018-10-02 | 河海大学常州校区 | 大数据环境下基于迭代计算的路径规划分布式计算方法 |
| US10200358B2 (en) | 2016-05-11 | 2019-02-05 | Oracle International Corporation | Microservices based multi-tenant identity and data security management cloud service |
| US10218705B2 (en) | 2016-05-11 | 2019-02-26 | Oracle International Corporation | Multi-tenant identity and data security management cloud service |
| US10255061B2 (en) | 2016-08-05 | 2019-04-09 | Oracle International Corporation | Zero down time upgrade for a multi-tenant identity and data security management cloud service |
| US10263947B2 (en) | 2016-08-05 | 2019-04-16 | Oracle International Corporation | LDAP to SCIM proxy service |
| US10261836B2 (en) | 2017-03-21 | 2019-04-16 | Oracle International Corporation | Dynamic dispatching of workloads spanning heterogeneous services |
| US10341410B2 (en) | 2016-05-11 | 2019-07-02 | Oracle International Corporation | Security tokens for a multi-tenant identity and data security management cloud service |
| US10341354B2 (en) | 2016-09-16 | 2019-07-02 | Oracle International Corporation | Distributed high availability agent architecture |
| US10348858B2 (en) | 2017-09-15 | 2019-07-09 | Oracle International Corporation | Dynamic message queues for a microservice based cloud service |
| US10425386B2 (en) | 2016-05-11 | 2019-09-24 | Oracle International Corporation | Policy enforcement point for a multi-tenant identity and data security management cloud service |
| US10445395B2 (en) | 2016-09-16 | 2019-10-15 | Oracle International Corporation | Cookie based state propagation for a multi-tenant identity cloud service |
| US10454940B2 (en) | 2016-05-11 | 2019-10-22 | Oracle International Corporation | Identity cloud service authorization model |
| US10454915B2 (en) | 2017-05-18 | 2019-10-22 | Oracle International Corporation | User authentication using kerberos with identity cloud service |
| US10484382B2 (en) | 2016-08-31 | 2019-11-19 | Oracle International Corporation | Data management for a multi-tenant identity cloud service |
| US10484243B2 (en) | 2016-09-16 | 2019-11-19 | Oracle International Corporation | Application management for a multi-tenant identity cloud service |
| US10505941B2 (en) | 2016-08-05 | 2019-12-10 | Oracle International Corporation | Virtual directory system for LDAP to SCIM proxy service |
| US10511589B2 (en) | 2016-09-14 | 2019-12-17 | Oracle International Corporation | Single logout functionality for a multi-tenant identity and data security management cloud service |
| US10530578B2 (en) | 2016-08-05 | 2020-01-07 | Oracle International Corporation | Key store service |
| US10567364B2 (en) | 2016-09-16 | 2020-02-18 | Oracle International Corporation | Preserving LDAP hierarchy in a SCIM directory using special marker groups |
| US10581820B2 (en) | 2016-05-11 | 2020-03-03 | Oracle International Corporation | Key generation and rollover |
| US10585682B2 (en) | 2016-08-05 | 2020-03-10 | Oracle International Corporation | Tenant self-service troubleshooting for a multi-tenant identity and data security management cloud service |
| US10594684B2 (en) | 2016-09-14 | 2020-03-17 | Oracle International Corporation | Generating derived credentials for a multi-tenant identity cloud service |
| US10616224B2 (en) | 2016-09-16 | 2020-04-07 | Oracle International Corporation | Tenant and service management for a multi-tenant identity and data security management cloud service |
| US10693861B2 (en) | 2016-05-11 | 2020-06-23 | Oracle International Corporation | Task segregation in a multi-tenant identity and data security management cloud service |
| WO2020124524A1 (zh) * | 2018-12-21 | 2020-06-25 | 深圳鲲云信息科技有限公司 | 一种资源平台独享资源的方法、装置及电子设备 |
| US10705823B2 (en) | 2017-09-29 | 2020-07-07 | Oracle International Corporation | Application templates and upgrade framework for a multi-tenant identity cloud service |
| US10715564B2 (en) | 2018-01-29 | 2020-07-14 | Oracle International Corporation | Dynamic client registration for an identity cloud service |
| US10735394B2 (en) | 2016-08-05 | 2020-08-04 | Oracle International Corporation | Caching framework for a multi-tenant identity and data security management cloud service |
| US10764273B2 (en) | 2018-06-28 | 2020-09-01 | Oracle International Corporation | Session synchronization across multiple devices in an identity cloud service |
| US10791087B2 (en) | 2016-09-16 | 2020-09-29 | Oracle International Corporation | SCIM to LDAP mapping using subtype attributes |
| US10798165B2 (en) | 2018-04-02 | 2020-10-06 | Oracle International Corporation | Tenant data comparison for a multi-tenant identity cloud service |
| US10831789B2 (en) | 2017-09-27 | 2020-11-10 | Oracle International Corporation | Reference attribute query processing for a multi-tenant cloud service |
| US10834137B2 (en) | 2017-09-28 | 2020-11-10 | Oracle International Corporation | Rest-based declarative policy management |
| US10846390B2 (en) | 2016-09-14 | 2020-11-24 | Oracle International Corporation | Single sign-on functionality for a multi-tenant identity and data security management cloud service |
| CN112000449A (zh) * | 2020-07-27 | 2020-11-27 | 新华三大数据技术有限公司 | 一种异步任务处理方法及系统 |
| US10878079B2 (en) | 2016-05-11 | 2020-12-29 | Oracle International Corporation | Identity cloud service authorization model with dynamic roles and scopes |
| US10904074B2 (en) | 2016-09-17 | 2021-01-26 | Oracle International Corporation | Composite event handler for a multi-tenant identity cloud service |
| US10931656B2 (en) | 2018-03-27 | 2021-02-23 | Oracle International Corporation | Cross-region trust for a multi-tenant identity cloud service |
| US11012444B2 (en) | 2018-06-25 | 2021-05-18 | Oracle International Corporation | Declarative third party identity provider integration for a multi-tenant identity cloud service |
| CN112905314A (zh) * | 2021-01-27 | 2021-06-04 | 北京百度网讯科技有限公司 | 异步处理方法、装置、电子设备、存储介质、及路侧设备 |
| US11061929B2 (en) | 2019-02-08 | 2021-07-13 | Oracle International Corporation | Replication of resource type and schema metadata for a multi-tenant identity cloud service |
| US11165634B2 (en) | 2018-04-02 | 2021-11-02 | Oracle International Corporation | Data replication conflict detection and resolution for a multi-tenant identity cloud service |
| US11258775B2 (en) | 2018-04-04 | 2022-02-22 | Oracle International Corporation | Local write for a multi-tenant identity cloud service |
| US11271969B2 (en) | 2017-09-28 | 2022-03-08 | Oracle International Corporation | Rest-based declarative policy management |
| US11321187B2 (en) | 2018-10-19 | 2022-05-03 | Oracle International Corporation | Assured lazy rollback for a multi-tenant identity cloud service |
| US11321343B2 (en) | 2019-02-19 | 2022-05-03 | Oracle International Corporation | Tenant replication bootstrap for a multi-tenant identity cloud service |
| US11356454B2 (en) | 2016-08-05 | 2022-06-07 | Oracle International Corporation | Service discovery for a multi-tenant identity and data security management cloud service |
| US11423111B2 (en) | 2019-02-25 | 2022-08-23 | Oracle International Corporation | Client API for rest based endpoints for a multi-tenant identify cloud service |
| US11611548B2 (en) | 2019-11-22 | 2023-03-21 | Oracle International Corporation | Bulk multifactor authentication enrollment |
| US11651357B2 (en) | 2019-02-01 | 2023-05-16 | Oracle International Corporation | Multifactor authentication without a user footprint |
| US11669321B2 (en) | 2019-02-20 | 2023-06-06 | Oracle International Corporation | Automated database upgrade for a multi-tenant identity cloud service |
| US11687378B2 (en) | 2019-09-13 | 2023-06-27 | Oracle International Corporation | Multi-tenant identity cloud service with on-premise authentication integration and bridge high availability |
| US11693835B2 (en) | 2018-10-17 | 2023-07-04 | Oracle International Corporation | Dynamic database schema allocation on tenant onboarding for a multi-tenant identity cloud service |
| US11792226B2 (en) | 2019-02-25 | 2023-10-17 | Oracle International Corporation | Automatic api document generation from scim metadata |
| US11870770B2 (en) | 2019-09-13 | 2024-01-09 | Oracle International Corporation | Multi-tenant identity cloud service with on-premise authentication integration |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1577305A (zh) * | 2003-07-28 | 2005-02-09 | 华为技术有限公司 | 一种并行处理的方法及系统 |
| CN101262352A (zh) * | 2008-03-04 | 2008-09-10 | 浙江大学 | 一体化安全管理中数据统一加速处理方法 |
| CN101419615A (zh) * | 2008-12-10 | 2009-04-29 | 阿里巴巴集团控股有限公司 | 一种前后台数据库的同步方法及装置 |
| CN102012808A (zh) * | 2010-11-10 | 2011-04-13 | 上海光芒科技有限公司 | 云计算环境下的基于soa的可扩展的分布式架构 |
| CN102331923A (zh) * | 2011-10-13 | 2012-01-25 | 西安电子科技大学 | 一种基于多核多线程处理器的功能宏流水线实现方法 |
| CN102567084A (zh) * | 2010-12-31 | 2012-07-11 | 新奥特（北京）视频技术有限公司 | 一种多任务并行调度机制 |
-
2012
- 2012-10-17 CN CN201210395517.6A patent/CN103780635B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1577305A (zh) * | 2003-07-28 | 2005-02-09 | 华为技术有限公司 | 一种并行处理的方法及系统 |
| CN101262352A (zh) * | 2008-03-04 | 2008-09-10 | 浙江大学 | 一体化安全管理中数据统一加速处理方法 |
| CN101419615A (zh) * | 2008-12-10 | 2009-04-29 | 阿里巴巴集团控股有限公司 | 一种前后台数据库的同步方法及装置 |
| CN102012808A (zh) * | 2010-11-10 | 2011-04-13 | 上海光芒科技有限公司 | 云计算环境下的基于soa的可扩展的分布式架构 |
| CN102567084A (zh) * | 2010-12-31 | 2012-07-11 | 新奥特（北京）视频技术有限公司 | 一种多任务并行调度机制 |
| CN102331923A (zh) * | 2011-10-13 | 2012-01-25 | 西安电子科技大学 | 一种基于多核多线程处理器的功能宏流水线实现方法 |
Non-Patent Citations (1)
| Title |
|---|
| APPLE INC.: "《IOS并发编程指南》", 《IOS并发编程指南》 * |
Cited By (79)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104077701A (zh) * | 2014-06-09 | 2014-10-01 | 中国建设银行股份有限公司 | 用于电商平台的任务处理方法及装置 |
| CN104318381A (zh) * | 2014-10-21 | 2015-01-28 | 中国建设银行股份有限公司 | 一种后台审核任务分发方法和装置 |
| CN105068912A (zh) * | 2015-07-29 | 2015-11-18 | 北京京东尚科信息技术有限公司 | 用于执行网页任务的方法和装置 |
| CN105491012B (zh) * | 2015-11-20 | 2019-12-24 | 北京奇虎科技有限公司 | 一种消息存放方法和装置 |
| CN105491012A (zh) * | 2015-11-20 | 2016-04-13 | 北京奇虎科技有限公司 | 一种消息存放方法和装置 |
| CN105373428A (zh) * | 2015-12-09 | 2016-03-02 | 北京奇虎科技有限公司 | 一种任务调度方法和系统 |
| CN105373428B (zh) * | 2015-12-09 | 2020-02-11 | 北京奇虎科技有限公司 | 一种任务调度方法和系统 |
| CN105740065A (zh) * | 2016-01-20 | 2016-07-06 | 浪潮(北京)电子信息产业有限公司 | 一种控制异步任务执行的方法及装置 |
| US10218705B2 (en) | 2016-05-11 | 2019-02-26 | Oracle International Corporation | Multi-tenant identity and data security management cloud service |
| US10200358B2 (en) | 2016-05-11 | 2019-02-05 | Oracle International Corporation | Microservices based multi-tenant identity and data security management cloud service |
| US10581820B2 (en) | 2016-05-11 | 2020-03-03 | Oracle International Corporation | Key generation and rollover |
| CN108322471A (zh) * | 2016-05-11 | 2018-07-24 | 甲骨文国际公司 | 多租户身份和数据安全性管理云服务 |
| US10454940B2 (en) | 2016-05-11 | 2019-10-22 | Oracle International Corporation | Identity cloud service authorization model |
| US10848543B2 (en) | 2016-05-11 | 2020-11-24 | Oracle International Corporation | Security tokens for a multi-tenant identity and data security management cloud service |
| US10341410B2 (en) | 2016-05-11 | 2019-07-02 | Oracle International Corporation | Security tokens for a multi-tenant identity and data security management cloud service |
| US10878079B2 (en) | 2016-05-11 | 2020-12-29 | Oracle International Corporation | Identity cloud service authorization model with dynamic roles and scopes |
| US11088993B2 (en) | 2016-05-11 | 2021-08-10 | Oracle International Corporation | Policy enforcement point for a multi-tenant identity and data security management cloud service |
| US10425386B2 (en) | 2016-05-11 | 2019-09-24 | Oracle International Corporation | Policy enforcement point for a multi-tenant identity and data security management cloud service |
| US10693861B2 (en) | 2016-05-11 | 2020-06-23 | Oracle International Corporation | Task segregation in a multi-tenant identity and data security management cloud service |
| US11356454B2 (en) | 2016-08-05 | 2022-06-07 | Oracle International Corporation | Service discovery for a multi-tenant identity and data security management cloud service |
| US10530578B2 (en) | 2016-08-05 | 2020-01-07 | Oracle International Corporation | Key store service |
| US11601411B2 (en) | 2016-08-05 | 2023-03-07 | Oracle International Corporation | Caching framework for a multi-tenant identity and data security management cloud service |
| US10735394B2 (en) | 2016-08-05 | 2020-08-04 | Oracle International Corporation | Caching framework for a multi-tenant identity and data security management cloud service |
| US10505941B2 (en) | 2016-08-05 | 2019-12-10 | Oracle International Corporation | Virtual directory system for LDAP to SCIM proxy service |
| US10585682B2 (en) | 2016-08-05 | 2020-03-10 | Oracle International Corporation | Tenant self-service troubleshooting for a multi-tenant identity and data security management cloud service |
| US10263947B2 (en) | 2016-08-05 | 2019-04-16 | Oracle International Corporation | LDAP to SCIM proxy service |
| US10579367B2 (en) | 2016-08-05 | 2020-03-03 | Oracle International Corporation | Zero down time upgrade for a multi-tenant identity and data security management cloud service |
| US10255061B2 (en) | 2016-08-05 | 2019-04-09 | Oracle International Corporation | Zero down time upgrade for a multi-tenant identity and data security management cloud service |
| US10721237B2 (en) | 2016-08-05 | 2020-07-21 | Oracle International Corporation | Hierarchical processing for a virtual directory system for LDAP to SCIM proxy service |
| US11258797B2 (en) | 2016-08-31 | 2022-02-22 | Oracle International Corporation | Data management for a multi-tenant identity cloud service |
| US10484382B2 (en) | 2016-08-31 | 2019-11-19 | Oracle International Corporation | Data management for a multi-tenant identity cloud service |
| US10846390B2 (en) | 2016-09-14 | 2020-11-24 | Oracle International Corporation | Single sign-on functionality for a multi-tenant identity and data security management cloud service |
| US11258786B2 (en) | 2016-09-14 | 2022-02-22 | Oracle International Corporation | Generating derived credentials for a multi-tenant identity cloud service |
| US10511589B2 (en) | 2016-09-14 | 2019-12-17 | Oracle International Corporation | Single logout functionality for a multi-tenant identity and data security management cloud service |
| US10594684B2 (en) | 2016-09-14 | 2020-03-17 | Oracle International Corporation | Generating derived credentials for a multi-tenant identity cloud service |
| US10445395B2 (en) | 2016-09-16 | 2019-10-15 | Oracle International Corporation | Cookie based state propagation for a multi-tenant identity cloud service |
| US10484243B2 (en) | 2016-09-16 | 2019-11-19 | Oracle International Corporation | Application management for a multi-tenant identity cloud service |
| US10616224B2 (en) | 2016-09-16 | 2020-04-07 | Oracle International Corporation | Tenant and service management for a multi-tenant identity and data security management cloud service |
| US10341354B2 (en) | 2016-09-16 | 2019-07-02 | Oracle International Corporation | Distributed high availability agent architecture |
| US10791087B2 (en) | 2016-09-16 | 2020-09-29 | Oracle International Corporation | SCIM to LDAP mapping using subtype attributes |
| US11023555B2 (en) | 2016-09-16 | 2021-06-01 | Oracle International Corporation | Cookie based state propagation for a multi-tenant identity cloud service |
| US10567364B2 (en) | 2016-09-16 | 2020-02-18 | Oracle International Corporation | Preserving LDAP hierarchy in a SCIM directory using special marker groups |
| US10904074B2 (en) | 2016-09-17 | 2021-01-26 | Oracle International Corporation | Composite event handler for a multi-tenant identity cloud service |
| CN108255820A (zh) * | 2016-12-28 | 2018-07-06 | 阿里巴巴集团控股有限公司 | 分布式系统中数据入库的方法、装置以及电子设备 |
| US10261836B2 (en) | 2017-03-21 | 2019-04-16 | Oracle International Corporation | Dynamic dispatching of workloads spanning heterogeneous services |
| US10454915B2 (en) | 2017-05-18 | 2019-10-22 | Oracle International Corporation | User authentication using kerberos with identity cloud service |
| US10348858B2 (en) | 2017-09-15 | 2019-07-09 | Oracle International Corporation | Dynamic message queues for a microservice based cloud service |
| US10831789B2 (en) | 2017-09-27 | 2020-11-10 | Oracle International Corporation | Reference attribute query processing for a multi-tenant cloud service |
| US11308132B2 (en) | 2017-09-27 | 2022-04-19 | Oracle International Corporation | Reference attributes for related stored objects in a multi-tenant cloud service |
| US10834137B2 (en) | 2017-09-28 | 2020-11-10 | Oracle International Corporation | Rest-based declarative policy management |
| US11271969B2 (en) | 2017-09-28 | 2022-03-08 | Oracle International Corporation | Rest-based declarative policy management |
| US10705823B2 (en) | 2017-09-29 | 2020-07-07 | Oracle International Corporation | Application templates and upgrade framework for a multi-tenant identity cloud service |
| US11463488B2 (en) | 2018-01-29 | 2022-10-04 | Oracle International Corporation | Dynamic client registration for an identity cloud service |
| US10715564B2 (en) | 2018-01-29 | 2020-07-14 | Oracle International Corporation | Dynamic client registration for an identity cloud service |
| US10931656B2 (en) | 2018-03-27 | 2021-02-23 | Oracle International Corporation | Cross-region trust for a multi-tenant identity cloud service |
| US11528262B2 (en) | 2018-03-27 | 2022-12-13 | Oracle International Corporation | Cross-region trust for a multi-tenant identity cloud service |
| US11165634B2 (en) | 2018-04-02 | 2021-11-02 | Oracle International Corporation | Data replication conflict detection and resolution for a multi-tenant identity cloud service |
| US11652685B2 (en) | 2018-04-02 | 2023-05-16 | Oracle International Corporation | Data replication conflict detection and resolution for a multi-tenant identity cloud service |
| US10798165B2 (en) | 2018-04-02 | 2020-10-06 | Oracle International Corporation | Tenant data comparison for a multi-tenant identity cloud service |
| US11258775B2 (en) | 2018-04-04 | 2022-02-22 | Oracle International Corporation | Local write for a multi-tenant identity cloud service |
| CN108613681A (zh) * | 2018-05-14 | 2018-10-02 | 河海大学常州校区 | 大数据环境下基于迭代计算的路径规划分布式计算方法 |
| US11012444B2 (en) | 2018-06-25 | 2021-05-18 | Oracle International Corporation | Declarative third party identity provider integration for a multi-tenant identity cloud service |
| US10764273B2 (en) | 2018-06-28 | 2020-09-01 | Oracle International Corporation | Session synchronization across multiple devices in an identity cloud service |
| US11411944B2 (en) | 2018-06-28 | 2022-08-09 | Oracle International Corporation | Session synchronization across multiple devices in an identity cloud service |
| US11693835B2 (en) | 2018-10-17 | 2023-07-04 | Oracle International Corporation | Dynamic database schema allocation on tenant onboarding for a multi-tenant identity cloud service |
| US11321187B2 (en) | 2018-10-19 | 2022-05-03 | Oracle International Corporation | Assured lazy rollback for a multi-tenant identity cloud service |
| WO2020124524A1 (zh) * | 2018-12-21 | 2020-06-25 | 深圳鲲云信息科技有限公司 | 一种资源平台独享资源的方法、装置及电子设备 |
| CN112840320A (zh) * | 2018-12-21 | 2021-05-25 | 深圳鲲云信息科技有限公司 | 一种资源平台独享资源的方法、装置及电子设备 |
| US11651357B2 (en) | 2019-02-01 | 2023-05-16 | Oracle International Corporation | Multifactor authentication without a user footprint |
| US11061929B2 (en) | 2019-02-08 | 2021-07-13 | Oracle International Corporation | Replication of resource type and schema metadata for a multi-tenant identity cloud service |
| US11321343B2 (en) | 2019-02-19 | 2022-05-03 | Oracle International Corporation | Tenant replication bootstrap for a multi-tenant identity cloud service |
| US11669321B2 (en) | 2019-02-20 | 2023-06-06 | Oracle International Corporation | Automated database upgrade for a multi-tenant identity cloud service |
| US11423111B2 (en) | 2019-02-25 | 2022-08-23 | Oracle International Corporation | Client API for rest based endpoints for a multi-tenant identify cloud service |
| US11792226B2 (en) | 2019-02-25 | 2023-10-17 | Oracle International Corporation | Automatic api document generation from scim metadata |
| US11687378B2 (en) | 2019-09-13 | 2023-06-27 | Oracle International Corporation | Multi-tenant identity cloud service with on-premise authentication integration and bridge high availability |
| US11870770B2 (en) | 2019-09-13 | 2024-01-09 | Oracle International Corporation | Multi-tenant identity cloud service with on-premise authentication integration |
| US11611548B2 (en) | 2019-11-22 | 2023-03-21 | Oracle International Corporation | Bulk multifactor authentication enrollment |
| CN112000449A (zh) * | 2020-07-27 | 2020-11-27 | 新华三大数据技术有限公司 | 一种异步任务处理方法及系统 |
| CN112905314A (zh) * | 2021-01-27 | 2021-06-04 | 北京百度网讯科技有限公司 | 异步处理方法、装置、电子设备、存储介质、及路侧设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103780635B (zh) | 2017-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103780635A (zh) | 云环境中的分布式异步任务队列执行系统和方法 | |
| CN107430528B (zh) | 机会性资源迁移以优化资源放置 | |
| RU2429526C2 (ru) | Статически проверяемые допускающие межпроцессный обмен изолированные процессы | |
| CN107251486B (zh) | 一种扩展联动的方法、装置及系统 | |
| CN104239148A (zh) | 一种分布式任务调度方法及装置 | |
| CN104461747A (zh) | 一种分布式任务调度系统 | |
| US9229794B1 (en) | Signaling service interface module | |
| CN110309108A (zh) | 数据采集及储存方法、装置、电子设备、存储介质 | |
| CN103092602A (zh) | 软件开发套件以及终端装置 | |
| Lin et al. | Performance evaluation of job schedulers on Hadoop YARN | |
| CN107977260B (zh) | 任务提交方法及装置 | |
| CN110532106A (zh) | 进程间的通讯方法、装置、设备和存储介质 | |
| CN112416512A (zh) | 一种镜像构建方法、服务器、客户机、存储介质及系统 | |
| White et al. | R&D challenges and solutions for highly complex distributed systems: a middleware perspective | |
| Kunnappilly et al. | From UML modeling to UPPAAL model checking of 5G dynamic service orchestration | |
| CN116325705A (zh) | 边缘计算环境中的管理任务流 | |
| CN100426241C (zh) | 一种面向服务体系结构中消息层软中断处理方法 | |
| Krishna et al. | Real‐Time CORBA Middleware | |
| CN103617077A (zh) | 智能型云端化移转的方法与系统 | |
| Li | An integrated web service framework for mobile device hosted web service and its performance analysis | |
| Machado et al. | Integration of embedded devices through web services: requirements, challenges and early results | |
| Mezzadri et al. | Job submission and control on a generic batch system: the BLAH experience | |
| Chrabakh et al. | Gridsat: Design and implementation of a computational grid application | |
| CN102681881A (zh) | 跨机调度方法及其系统 | |
| Górski | Performance analysis of selected frameworks for an integration platform development |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |