CN110780977B - 基于云计算的任务下发方法、装置、系统及可读存储介质 - Google Patents

基于云计算的任务下发方法、装置、系统及可读存储介质 Download PDF

Info

Publication number
CN110780977B
CN110780977B CN201911024511.6A CN201911024511A CN110780977B CN 110780977 B CN110780977 B CN 110780977B CN 201911024511 A CN201911024511 A CN 201911024511A CN 110780977 B CN110780977 B CN 110780977B
Authority
CN
China
Prior art keywords
task
issuing
application
subtasks
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911024511.6A
Other languages
English (en)
Other versions
CN110780977A (zh
Inventor
郭金伟
范渊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DBAPPSecurity Co Ltd
Original Assignee
DBAPPSecurity Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DBAPPSecurity Co Ltd filed Critical DBAPPSecurity Co Ltd
Priority to CN201911024511.6A priority Critical patent/CN110780977B/zh
Publication of CN110780977A publication Critical patent/CN110780977A/zh
Application granted granted Critical
Publication of CN110780977B publication Critical patent/CN110780977B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/50—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
    • G06F21/52—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems during program execution, e.g. stack integrity ; Preventing unwanted data erasure; Buffer overflow
    • G06F21/53—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems during program execution, e.g. stack integrity ; Preventing unwanted data erasure; Buffer overflow by executing in a restricted environment, e.g. sandbox or secure virtual machine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种基于云计算的任务下发方法，将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，并对生成的层级应用基于基本组件划分规则进行任务分解，采用细颗粒度任务拆分，大的任务通过分治策略拆分成小的任务执行，从而计算力弱的普通计算机同样可以参与到大型计算中，可以有效整合个人、公司、学校等普通PC机与云机房中的服务器，形成更加强大的公共云服务，实现全民范围的处理器、内存、硬盘、显卡、带宽等物理资源的最大化应用，解决云服务厂商对计算机设备的单一依赖，避免主机硬件资源购买过剩导致浪费和过少导致压力过大等问题。本发明还公开了基于云计算的任务下发装置、系统及可读存储介质，具有上述有益效果。

Description

基于云计算的任务下发方法、装置、系统及可读存储介质
技术领域
本发明涉及电子技术领域，特别涉及一种基于云计算的任务下发方法、装置、系统及可读存储介质。
背景技术
云服务是基于互联网的相关服务的增加、使用和交互模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。
随着云技术的发展，越来越多的企业选择使用云平台承载业务。目前笔记本电脑、台式电脑已经成为生活、办公必需品，但很多机器在购买之后并没有发挥其应有的价值，目前市场上有众多的云服务平台，如阿里巴巴的阿里云、腾讯的腾讯云、华为的华为云等，都可以实现普通计算机整合企业云服务，即通过云平台实现架设那些闲置或没有发挥其最大性能的计算机，以提升系统的计算能力。
由于普通计算机毕竟只是用于日常需要，硬件配置远不如商用服务器，所以处理能力会低很多，从而造成总体云服务的处理时间增长，另外，由于普通计算机可能并没有专业运行环境，或者并没有足够的空间用于大型计算处理，又或者普通计算机的处理器能力确实有限导致无法满足运行需要，所以一些运行在独特底层架构之上的、需要较大运行空间的、需要高精度以及高复杂度的等等比较专业的计算应用运行在普通计算机上会有很多问题需要逐一解决。
发明内容
本发明的目的是提供一种基于云计算的任务下发方法，该方法可以有效的解决云服务厂商对计算机设备的单一依赖，避免主机硬件资源购买过剩导致浪费和过少导致压力过大等问题，同时对于普通用户而言实现购买计算机后将其发挥实际价值，真正实现计算机的“计算”价值；本发明的另一目的是提供一种基于云计算的任务下发装置、系统及可读存储介质。
为解决上述技术问题，本发明提供一种基于云计算的任务下发方法，包括：
将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；
对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
将所述子任务根据区域调度机制下发至对应的执行客户端。
可选地，将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
将所述子任务的相关内存映射出快照，得到内存快照；
将所述内存快照下发至对应的执行客户端进行持续计算。
可选地，所述客户端使用虚拟化技术将任务执行组件通过镜像以及容器的方式保存在客户端中，生成通用微型的虚拟操作系统；
则相应地，将所述子任务根据区域调度机制下发至对应的执行客户端，包括：将所述子任务下发至对应的执行客户端中的虚拟操作系统。
可选地，所述基于云计算的任务下发方法还包括：对所述虚拟操作系统建立沙箱运行。
可选地，所述基于云计算的任务下发方法还包括：
监控所述执行客户端在任务执行过程中的硬件状态，得到监控信息；
根据所述监控信息进行任务执行进度反馈调节。
可选地，将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
根据冗余任务下发机制确定执行所述子任务的若干执行客户端；
将所述子任务根据区域调度机制下发至对应的执行客户端。
可选地，根据所述冗余任务下发机制确定执行所述子任务的若干执行客户端，包括：
获取客户端运行信息；
从所述运行信息中提取目标因素下的目标数据；
根据所述目标数据在连接客户端中筛选出所述待执行客户端。
本发明公开一种基于云计算的任务下发装置，包括：
层级应用拆分单元，用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；
任务分解单元，用于对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
下发单元，用于将所述子任务根据区域调度机制下发至对应的执行客户端。
本发明公开一种基于云计算的任务下发系统，包括：
云服务中心，用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
区域任务调度中心，用于根据区域调度机制确定所述子任务对应的用户层客户端中的执行客户端；将所述子任务根据区域调度机制下发至对应的执行客户端；
用户层客户端，用于根据所述区域任务调度中心的任务调度进行任务执行。
本发明公开一种可读存储介质，所述可读存储介质上存储有程序，所述程序被处理器执行时实现所述基于云计算的任务下发方法的步骤。
本发明所提供的基于云计算的任务下发方法，通过将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用，并对层级应用基于基本组件划分规则进行任务分解，采用细颗粒度任务拆分，从而大的任务通过分治策略拆分成小的任务执行，以至于计算力弱的普通计算机同样可以参与到大型计算中，从而可以有效整合个人、公司、学校等普通PC机与云机房中的服务器，形成更加强大的公共云服务，实现全民范围的处理器、内存、硬盘、显卡、带宽等物理资源的最大化应用，从而可以有效的解决云服务厂商对计算机设备的单一依赖，避免主机硬件资源购买过剩导致浪费和过少导致压力过大等问题，同时对于普通用户而言实现购买计算机后将其发挥实际价值，真正实现计算机的“计算”价值。
本发明还公开了一种基于云计算的任务下发装置、系统及一种可读存储介质，具有上述有益效果，在此不再赘述。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的基于云计算的任务下发方法的流程图；
图2为本发明实施例提供的基于云计算的任务下发装置的结构框图；
图3为本发明实施例提供的基于云计算的任务下发系统的结构框图；
图4为本发明实施例提供的基于云计算的任务下发系统的结构示意图。
具体实施方式
本发明的核心是提供一种基于云计算的任务下发方法，该方法可以有效的解决云服务厂商对计算机设备的单一依赖，避免主机硬件资源购买过剩导致浪费和过少导致压力过大等问题，同时对于普通用户而言实现购买计算机后将其发挥实际价值，真正实现计算机的“计算”价值；本发明的另一核心是提供一种基于云计算的任务下发装置、系统及可读存储介质。
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
随着云技术的发展，越来越多的企业选择使用云平台承载业务，与之同时云平台的基础设施建设也面临着挑战，另一方面笔记本电脑、台式电脑已经成为生活、办公必需品，但很多机器在购买之后并没有发挥其应有的价值，这时需要一种技术来架设那些闲置或没有发挥其最大性能的计算机与云平台所需要的计算力之间桥梁，达到二者的互利共赢。
目前市场上有众多的云服务平台，如阿里巴巴、腾讯、华为等公司的阿里云、腾讯云、华为云，可见云服务已经占有很大的市场比例并且成为今后软件服务的必然趋势，伴随着云服务的发展，基础设施也就是计算机硬件设备的需求同样水涨船高，大大小小的机房在全国各地都有分布。
目前各行各业无不在进行数字化转型，一部分已经完成转型另一部分正在进行转型中，所以对计算机设备需求的趋势为总体上升。目前家庭计算机拥有率高达80多台/百户，公司近乎1台/人，结合中国人口的基数，将会是一个巨大的计算量，足以媲美任何云服务系统。
目前各大云服务厂商的云服务解决方案都可以实现普通计算机整合企业云服务。本发明通过客户端、服务端模式和用户提供计算机计算力给云服务公司的关系，帮助普通计算机用户与云服务公司达成合作关系，解决云服务厂商对计算机设备的单一依赖，真正实现计算机的“计算”价值。
本发明提出了一种基于云计算的任务下发方法，请参考图1，图1为本实施例提供的基于云计算的任务下发方法的流程图；该方法主要包括：
步骤s110、将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；
具体地，待执行应用计算过程拆分成层级应用计算过程可以按照硬件-编译器-操作系统-应用框架级别建立，创建层级应用的过程可以参照docker的实现方式，即相似的程序或应用具有相同的基本组件，例如java程序都运行于JVM之上，所以只需要提取JVM之上的层级这里为war包或class文件进行再分解。
步骤s120、对层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
一般企业、单位或个人等部署在云上的应用很庞大，单一PC机是无法直接运行的，大型应用拆分成独立模块形成单独功能从而将任务细化为功能调用，拆分成很小的“任务“以便客户端运行，服务端采用细颗粒度任务拆分，从而大的任务通过分治策略拆分成小的任务执行，以至于计算力弱的普通计算机同样可以参与到大型计算中。
需要说明的是，层级应用以及任务的单一职责分解从大到小对应用进行分解，具体实现方式，不同的应用拆分过程不同，需要逐一适配，例如C++/JAVA代表的应用底层编译和运行原理不同，实现过程需要为C++、JAVA单独设计应用拆分过程。单一职责归类的主要灵感来源于微服务，第一步抽取出的代码一般过于庞大，可以将一部分独立，异步的逻辑抽取出来。
步骤s130、将子任务根据区域调度机制下发至对应的执行客户端。
在已具备以上任务下发的前提，下发任务时大致的分发机制需考虑几点因素：网络延迟，网速，客户端硬件，客户端运行资源剩余量，区域负载，客户端可用率，客户端执行正确率等，以上即为几种区域调度机制。根据区域调度机制从用户层客户端中确定可以承载各子任务的客户端作为执行客户端，并对各执行客户端进行任务下发，控制各执行客户端执行子任务，即可实现大型应用计算过程的拆分执行。
基于上述技术方案，本实施例所提供的基于云计算的任务下发方法，通过将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用，并对层级应用基于基本组件划分规则进行任务分解，采用细颗粒度任务拆分，从而大的任务通过分治策略拆分成小的任务执行，以至于计算力弱的普通计算机同样可以参与到大型计算中，从而可以有效整合个人、公司、学校等普通PC机与云机房中的服务器，形成更加强大的公共云服务，实现全民范围的处理器、内存、硬盘、显卡、带宽等物理资源的最大化应用，从而可以有效的解决云服务厂商对计算机设备的单一依赖，避免主机硬件资源购买过剩导致浪费和过少导致压力过大等问题，同时对于普通用户而言实现购买计算机后将其发挥实际价值，真正实现计算机的“计算”价值。
基于上述实施例，本实施例中介绍一种将子任务根据区域调度机制下发至对应的执行客户端的实现过程，具体执行步骤如下：
(1)将子任务的相关内存映射出快照，得到内存快照；
(2)将内存快照下发至对应的执行客户端进行持续计算。
一般情况下不同的程序运行环境会有差异，客户端运行云上的代码需要获取云上运行的环境，内存快照可以理解为任务的开始状态，以便于客户端可以从开始状态继续运行且完成任务。通过内存快照将应用进行分解，可以避免不同客户端的程序运行环境对于不同子任务执行过程的影响，提升任务执行效果。
需要说明的是，内存快照的实现过程可以参照上述步骤s110以及s120的执行实现过程，在此不再赘述。
基于上述实施例，本实施例中介绍一种客户端任务接收机制，具体地，客户端可以使用虚拟化技术将任务执行组件通过镜像以及容器的方式保存在客户端中，生成通用微型的虚拟操作系统；则相应地，上述实施例中步骤s130将子任务根据区域调度机制下发至对应的执行客户端具体可以为：将子任务下发至对应的执行客户端中的虚拟操作系统。
在普通计算机中安装虚拟化层，客户端使用虚拟化技术，将任务所需的最小、最核心的组件通过镜像以及容器的方式保存在客户端中，虚拟化层与用户系统空间共享计算机硬件资源。在运行时虚拟化技术保证云服务计算不影响、不侵入用户计算机。构建一个通用的微型的虚拟操作系统以最小的代价实现程序的运行，构建的虚拟操作系统可以是一个引擎，可以理解为一种脚本引擎，同时他的样子可以是一个镜像类似于docker镜像，也可以是一个程序类似于JVM，本实施例中对于虚拟操作系统的系统形式不做限定。默认每个客户端包含的组件是通用的，可以胜任云平台发来的一切任务，因此每次执行任务的时候不需要确定组件，无需确定计算机中是否包含当前子任务所需的组件，大大简化了任务调用机制的实现步骤。
同时传统的云平台对于普通计算机计算能力的整合实现过程一般均运行在客户端，所以执行过程、结果可能会被主动或被动的修改，所以存在安全性问题。本实施例中通过构建虚拟操作系统并将任务执行机制转移至虚拟操作系统，可以避免运行于客户端时客户端用户对计算过程的干预，提升了计算过程的安全性。
另外，可选地，还可以对虚拟操作系统建立沙箱运行。建立沙箱运行，不干扰用户正常使用计算机，不被用户操作干扰计算执行，不因计算失败对用户空间进行破坏。具体的建立沙箱的实现方式可参照相关技术，在此不再赘述。
基于上述实施例，为在不影响用户计算机体验的前提下执行云计算任务，可选地，可以进一步监控执行客户端在任务执行过程中的硬件状态，得到监控信息；并根据监控信息进行任务执行进度反馈调节。
实时监控硬件信息，避免任务执行过程对计算机客户端的硬件资源的过多占用，比如可以控制处理器内存和硬盘的使用状态不高于90％。
进一步地，为增加客户端的任务执行积极度，还可以进一步对执行任务的客户端进行相应的奖励机制，具体地可以参照以下步骤执行：
(1)获取执行客户端的任务执行贡献信息；
任务执行贡献信息比如任务执行时间、计算量、持续在线等，各部分数据的权重以及可添加至任务执行贡献程度的数据类型均可根据实际情况而定，本实施例对此不做限定。
(2)根据任务执行贡献信息根据任务执行奖励机制确定待发放奖励；
任务执行奖励机制具体可以针对贡献程度给予相应的虚拟货币或人民币奖励，具体奖励机制在此不做限定，可以根据客户端类型以及任务执行程度进行设定。
(3)向执行客户端发送待发放奖励。
由于普通计算机的使用情况视用户习惯而决定，某些机器可以每天开启，某些机器只在使用时开启，某些会时而开启时而关闭，造成中心调度与任务分发中心无法与该机器取得联系，从而导致任务的失效或延时，为了避免该种情况对任务执行过程产生的影响，可选地，上述步骤s130中将子任务根据区域调度机制下发至对应的执行客户端具体可以按照以下执行：
根据冗余任务下发机制确定执行子任务的若干执行客户端；
将子任务根据区域调度机制下发至对应的执行客户端。
当客户端足够多的情况下，即使节点不稳定，也依然能够保证大量活性用户，本实施例中使用冗余任务下发保证计算的高可用性，即一个任务分发给多个用户，任务执行客户端的数量远大于任务的数量，既解决了节点不稳定性同时保证了计算安全性。
例如部署在某云服务上的一个应用其中一程序的子任务是解密一段加密文本，则云平台将子任务发送给40个客户端(具体数值根据实际情况而定，这里40代表一个大概的区间)，40个客户端解密时间可能会有快有慢，当有大于5个相同的结果返回时判定该任务下发完成并处理正确。需要说明的是，一个子任务可以发送给多个客户端以实现冗余任务执行，一个客户端也可以接收并执行多个子任务，以实现客户端计算能力的充分调用。
而其中根据冗余任务下发机制确定执行子任务的若干执行客户端的过程可以根据用户层各客户端的实际运行情况进行选择，以实现对用户层性能优良的客户端的调用，提升任务执行效率，具体地，该步骤具体可以包括以下子步骤：
获取客户端运行信息；
从运行信息中提取目标因素下的目标数据；
根据目标数据在连接客户端中筛选出待执行客户端。
筛选待执行客户端可以综合考虑网络延时、带宽、用户基数等因素，按实时性，工作量等任务特点调度分发，进行最合理的任务安排。例如，任务从云端准备下发，云平台与调度节点通讯，如果某调度节点任务很多，负载很高，则选择负载相对较低的，同时距离相对较近的更加优先，这里节点的“负载”和“距离”权重可以根据实际情况而调整；下发到调度节点后，调度节点与周边客户端通讯，获取客户端状态，客户端硬件设备较好的可以分发计算力需求大的任务，客户端运行资源剩余量大的可以分发空间需求大的任务，同时优先选择延迟低带宽高的客户端，通过历史计算的结果，得到计算执行率(处理的任务数/下发的任务数)、计算正确率(正确的结果/下发的任务数)，优先选择执行率高，正确率高的，“硬件”、“运行资源”、“网络”、“历史记录”等权重可以根据实际情况调整，但是原则上，“运行资源”权重最高，因为不能影响客户端使用体验，其次“硬件”，“网络”等，具体的判定因素以及各判定因素的权重可以根据实际计算机使用情况进行设定，本实施例中仅以上述为例进行介绍，其它因素下的任务分发机制均可参照本实施例的介绍，在此不再赘述。
请参考图2，图2为本实施例提供的基于云计算的任务下发装置的结构框图；该装置可以包括：层级应用拆分单元210、任务分解单元220以及下发单元230。本实施例提供的基于云计算的任务下发装置可与上述基于云计算的任务下发方法可相互对照，在此不再赘述。
其中，层级应用拆分单元210主要用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；
任务分解单元220主要用于对层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
下发单元230主要用于将子任务根据区域调度机制下发至对应的执行客户端。
本实施例提供的基于云计算的任务下发装置可以有效的解决云服务厂商对计算机设备的单一依赖，提升应用执行效果。
请参考图3，图3为本实施例提供的基于云计算的任务下发系统的结构框图；该设备可以包括：云服务中心310、区域任务调度中心320以及用户层客户端330。任务下发设备可参照上述基于云计算的任务下发方法的介绍。上面图1所描述的基于云计算的任务下发方法中的步骤可以由本实施例提供的基于云计算的任务下发系统的结构实现。
云服务中心310主要用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；对层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
区域任务调度中心320主要用于根据区域调度机制确定子任务对应的用户层客户端中的执行客户端；将子任务根据区域调度机制下发至对应的执行客户端；
用户层客户端330主要用于根据区域任务调度中心的任务调度进行任务执行。
图4所示为一种基于云计算的任务下发系统的结构示意图，云服务中心层中可以包含多个云服务，多个云服务相互间可以通讯，组成可自由伸缩扩展的总体对外服务。
我国国土面积大，网络通信具有延迟性，区域任务调度层中的区域调度节点可以平衡时空造成的差异性，区域调度可以相互通讯，相互同步并对外服务。
用户层中，各客户端(普通计算机)可以通过与区域任务调度层通讯达到任务的领取与交付的目的。
图4所示仅为一种可行的层级连接示意，其它组合形式以及其他层级连接方式均可参照本实施例的介绍，在此不再赘述。
本实施例公开了一种可读存储介质，可读存储介质上存储有程序，程序被处理器执行时实现基于云计算的任务下发方法的步骤，其中，基于云计算的任务下发方法可参照图1对应的实施例，在此不再赘述。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
该可读存储介质具体可以为U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可存储程序代码的可读存储介质。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的基于云计算的任务下发方法、装置、系统及可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (9)

1.一种基于云计算的任务下发方法，其特征在于，包括：
将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；所述框架级别为硬件-编译器-操作系统-应用的框架级别，并且所述层级应用为与所述框架级别对应的具有相同基本组件的应用；
对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
将所述子任务根据区域调度机制下发至对应的执行客户端；
其中，所述将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
将所述子任务的相关内存映射出快照，得到内存快照；
将所述内存快照下发至对应的执行客户端进行持续计算。
2.如权利要求1所述的基于云计算的任务下发方法，其特征在于，所述客户端使用虚拟化技术将任务执行组件通过镜像以及容器的方式保存在客户端中，生成通用微型的虚拟操作系统；
则相应地，将所述子任务根据区域调度机制下发至对应的执行客户端，包括：将所述子任务下发至对应的执行客户端中的虚拟操作系统。
3.如权利要求2所述的基于云计算的任务下发方法，其特征在于，还包括：对所述虚拟操作系统建立沙箱运行。
4.如权利要求1所述的基于云计算的任务下发方法，其特征在于，还包括：
监控所述执行客户端在任务执行过程中的硬件状态，得到监控信息；
根据所述监控信息进行任务执行进度反馈调节。
5.如权利要求1至4任一项所述的基于云计算的任务下发方法，其特征在于，将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
根据冗余任务下发机制确定执行所述子任务的若干执行客户端；
将所述子任务根据区域调度机制下发至对应的执行客户端。
6.如权利要求5所述的基于云计算的任务下发方法，其特征在于，根据所述冗余任务下发机制确定执行所述子任务的若干执行客户端，包括：
获取客户端运行信息；
从所述运行信息中提取目标因素下的目标数据；
根据所述目标数据在连接客户端中筛选出所述待执行客户端。
7.一种基于云计算的任务下发装置，其特征在于，包括：
层级应用拆分单元，用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；所述框架级别为硬件-编译器-操作系统-应用的框架级别，并且所述层级应用为与所述框架级别对应的具有相同基本组件的应用；
任务分解单元，用于对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
下发单元，用于将所述子任务根据区域调度机制下发至对应的执行客户端；
其中，所述将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
内存快照确定子单元，用于将所述子任务的相关内存映射出快照，得到内存快照；
内存快照下发子单元，用于将所述内存快照下发至对应的执行客户端进行持续计算。
8.一种基于云计算的任务下发系统，其特征在于，包括：
云服务中心，用于将待执行应用计算过程按照框架级别建立拆分成层级应用计算过程，生成层级应用；所述框架级别为硬件-编译器-操作系统-应用的框架级别，并且所述层级应用为与所述框架级别对应的具有相同基本组件的应用；对所述层级应用基于基本组件划分规则进行任务分解，得到细颗粒度的若干子任务；
区域任务调度中心，用于根据区域调度机制确定所述子任务对应的用户层客户端中的执行客户端；将所述子任务根据区域调度机制下发至对应的执行客户端；
用户层客户端，用于根据所述区域任务调度中心的任务调度进行任务执行；
其中，所述将所述子任务根据区域调度机制下发至对应的执行客户端，包括：
将所述子任务的相关内存映射出快照，得到内存快照；
将所述内存快照下发至对应的执行客户端进行持续计算。
9.一种可读存储介质，其特征在于，所述可读存储介质上存储有程序，所述程序被处理器执行时实现如权利要求1至6任一项所述基于云计算的任务下发方法的步骤。
CN201911024511.6A 2019-10-25 2019-10-25 基于云计算的任务下发方法、装置、系统及可读存储介质 Active CN110780977B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911024511.6A CN110780977B (zh) 2019-10-25 2019-10-25 基于云计算的任务下发方法、装置、系统及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911024511.6A CN110780977B (zh) 2019-10-25 2019-10-25 基于云计算的任务下发方法、装置、系统及可读存储介质

Publications (2)

Publication Number Publication Date
CN110780977A CN110780977A (zh) 2020-02-11
CN110780977B true CN110780977B (zh) 2022-06-03

Family

ID=69386628

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911024511.6A Active CN110780977B (zh) 2019-10-25 2019-10-25 基于云计算的任务下发方法、装置、系统及可读存储介质

Country Status (1)

Country Link
CN (1) CN110780977B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113645262A (zh) * 2020-05-11 2021-11-12 中兴通讯股份有限公司 云计算服务系统和方法
CN113051458A (zh) * 2021-02-04 2021-06-29 北京达佳互联信息技术有限公司 数据处理方法、装置、电子设备及存储介质
CN115242700B (zh) * 2021-04-23 2024-03-22 网联清算有限公司 一种通信传输方法、装置及系统
CN113485819A (zh) * 2021-08-03 2021-10-08 北京八分量信息科技有限公司 异构任务的预处理方法、装置及相关产品

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130086589A1 (en) * 2011-09-30 2013-04-04 Elwha Llc Acquiring and transmitting tasks and subtasks to interface
CN103942098A (zh) * 2014-04-29 2014-07-23 国家电网公司 一种任务处理系统和方法
CN105843685A (zh) * 2016-03-17 2016-08-10 哈尔滨理工大学 基于任务分配的移动终端计算卸载方法
CN106569887B (zh) * 2016-11-04 2020-04-24 东南大学 一种云环境下细粒度任务调度方法
CN107608795A (zh) * 2017-09-19 2018-01-19 百度在线网络技术（北京）有限公司 云计算方法和装置
CN107797863B (zh) * 2017-09-29 2020-07-28 西安交通大学 一种云计算平台中细粒度资源匹配方法

Also Published As

Publication number Publication date
CN110780977A (zh) 2020-02-11

Similar Documents

Publication Publication Date Title
CN110780977B (zh) 基于云计算的任务下发方法、装置、系统及可读存储介质
US11593252B2 (en) Agentless distributed monitoring of microservices through a virtual switch
CN102946409B (zh) 从多个服务器向客户机递送单个终端用户体验
US20200084106A1 (en) Hybrid cloud integration fabric and ontology for integration of data, applications, and information technology infrastructure
US9086897B2 (en) Method and architecture for virtual desktop service
US8904005B2 (en) Indentifying service dependencies in a cloud deployment
US10025627B2 (en) On-demand cloud computing environments
Caron et al. Cloud computing resource management through a grid middleware: A case study with diet and eucalyptus
US20100057831A1 (en) Systems and methods for promotion of calculations to cloud-based computation resources
CN102917018A (zh) 端点的负载平衡
Padhy et al. Evolution of cloud computing and enabling technologies
US20230300086A1 (en) On-demand resource capacity in a serverless function-as-a-service infrastructure
US20050060360A1 (en) Method, system and program product for managing system resources
Panzieri et al. Distributed computing in the 21st century: Some aspects of cloud computing
EP3387816B1 (en) Connecting and retrieving security tokens based on context
Kumar et al. A load balancing based cloud computing techniques and challenges
US20220413933A1 (en) Liaison System and Method for Cloud Computing Environment
Jayapandian et al. The online control framework on computational optimization of resource provisioning in cloud environment
Mehta et al. Design of infrastructure as a service (IAAS) framework with report generation mechanism
US11340952B2 (en) Function performance trigger
Luo et al. Constructing a virtual computer laboratory based on OpenStack
Duncan et al. The Structure of the New IT Frontier: Cloud Computing–Part I
Pendyala et al. Cloud as a computer
OS Virtual desktop infrastructure (VDI)
Shanmugam et al. Improving Energy Efficiency and Impairing Environmental Impacts on Cloud Centers by Transforming Virtual Machine into Self-Adaptive Resource Container

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant