CN104506620A - 一种可扩展的自动化计算服务平台及其构建方法 - Google Patents
一种可扩展的自动化计算服务平台及其构建方法 Download PDFInfo
- Publication number
- CN104506620A CN104506620A CN201410812058.6A CN201410812058A CN104506620A CN 104506620 A CN104506620 A CN 104506620A CN 201410812058 A CN201410812058 A CN 201410812058A CN 104506620 A CN104506620 A CN 104506620A
- Authority
- CN
- China
- Prior art keywords
- platform
- task
- layer
- resource
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/566—Grouping or aggregating service requests, e.g. for unified processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种可扩展的自动化计算服务平台及其构建方法,包括物力资源层、虚拟资源层、平台管理层以及业务服务层;本发明将计算任务的计算和计算工具运行环境的自动创建统一起来,方便用户快速,便捷的构建适合运算任务的计算工具运行环境。实现异构资源的统一管理,通过虚拟化技术对异构资源进行抽象统一,实现计算资源的同构化,为用户提供统一的资源调用。封装良好的对外接口,通过对任务相关的功能接口进行封装,极大的简化了用户的使用难度,便于用户编程实现资源调用和任务自动化计算。平台采用服务化的分层架构,具有良好的扩展性,可以方便的扩展计算资源。
Description
技术领域
本发明属于计算机科学与技术领域,特别涉及一种可扩展的自动化计算服务平台及其构建方法。
背景技术
目前,随着计算问题的日趋复杂,计算数据的数据量呈现几何级增长,由此带来了计算密集、数据密集、通信密集等一系列的空间信息科学计算问题。运用并行计算技术解决计算问题是最为重要的方式之一。并行计算原理简单、计算能力强,灵活方便等优点,但是各并行计算工具也具有资源利用率低、扩展性差等缺陷,尤其是对于计算环境异构、计算资源需求不均等问题。面对这些问题,现有的解决方式大多是从购置专用平台、提升物理服务器性能等角度进行,往往具有购置成本高、维护复杂等不足。
而云计算技术通过将分布式的异构资源抽象为虚拟化资源池为用户提供按需服务,实现了高效的资源利用。如能采用云计算技术,不同的计算任务和计算工具可以集中的共享资源基础架构设施。通过将计算工具和计算任务托管在专业的第三方基础设施服务运营商,实现基础设施的高效资源利用。这样合并复用后的数据中心,其服务器性能就可以通过分时复用满足多个计算任务不同方面的资源峰值,而非仅仅预留给单个应用的资源峰值。当计算任务需求变化时,只需妥善调度,就可以让任务之间彼此衔接,资源复用。随着资源利用率的提升,现有的设备足以满足复杂多变的需求,从而避免对设备垂直扩展的需求。设备数量的下降会降低软硬件环境维护、占地和能源消耗等方面的花销。
随着技术的发展和积累,大量优秀的云计算平台被开发出来。发起于加州大学圣芭芭拉分校的Eucalyptus项目是最早的以亚马逊AWS为蓝本进行开发的开源IaaS平台,架构服务化良好,以JAVA和C语言为开发语言。最早由Cloud.com开发的CloudStack平台在由Apache基金会接管后,迅速被业界多家著名公司选作基础设施服务平台,采用分层架构,API封装较好。IBM的SKC基于PowerVM虚拟化技术和VMControl自动化管理功能强大,安装简单。OpenStack开源云计算平台采用模块化设计,扩展性良好,以Python语言进行开发。然而,这些主流的云计算平台主要存在如下缺点:
1.Eucalyptus缺乏API层设计,计算、存储、网络服务未分开,使用不便,对插件支持不足,扩展性不好,对用户的支持不好。
2.CloudStack没有采用面向服务的架构设计,同样没有将计算、存储、网络独立设计,平台横向扩展过程复杂,容易出错。
3.IBM的SKC不是开源产品,实施比较复杂。
4.OpenStack安装复杂,API接口略混乱,新版本往往变化很大,难以升级维护。
5.所有云计算平台均不支持计算环境和计算任务的自动化配置和运行,对计算服务使用者负担较大。
因此,在计算平台领域更加需要一种能够提供大规模计算工具环境创建和管理的服务平台,并进一步使其具备一定的自动化计算任务的应用能力,便捷直接地提供可扩展的计算服务。
发明内容
本发明的目的在于解决上述现有技术的缺陷,提出一种利用虚拟化技术构建分布式系统平台的可扩展的自动化计算服务平台及其构建方法,服务平台及其构建方法能够提供一种层次化、可伸缩且能够进行任务运行管理和计算资源环境自动部署的计算服务,可用于分布式异构计算环境下的自动化计算。
为了实现上述目的,本发明所采用的技术方案是:
一种可扩展的自动化计算服务平台,包括物理资源层、虚拟资源层、平台管理层以及业务服务层;
物理资源层包括存储设备、计算设备以及网络设备;
虚拟资源层利用OpenStack的相关组件对底层的物理资源整合成逻辑上的云,然后通过虚拟化技术构建虚拟机资源池,提供计算资源池;
平台管理层层利用Web服务器进行消息转发和接收,与虚拟资源层控制器利用HTTP协议进行通信,利用JSON文本为标准数据交互格式,对通信功能进行封装,成为通信模块;
业务服务层用于计算任务的管理、执行、计算资源环境配置,并最终为用户提供标准软件接口。
所述虚拟资源层对各虚拟机提供创建、删除、迁移、重启、修改以及远程桌面功能;利用网络虚拟化技术,提供虚拟网络和虚拟路由器的创建、删除以及修改功能。
所述平台管理层对各虚拟资源池的计算资源实现统一调用,并将包括计算、存储和网络方面资源的调用封装为资源服务模块;平台管理层对平台中广域分布的多虚拟资源集群进行统一管理,实现多集群管理模块。
本发明还公开了一种自动化计算服务平台的构建方法,包括以下步骤:
(1)平台服务提供者构建基于对象存储的数据管理系统物理存储节点,用于存储和处理高性能计算中的模型文件和初始数据并提供分析、索引和查询功能;
(2)平台服务提供者构建关系型数据库用于对集群信息数据进行持久化,并提供索引和查询功能;
(3)平台服务提供者搭建虚拟资源层,用于利用虚拟化技术对平台资源整合使用,提供基础的云计算设施;
(4)平台服务提供者构建基于Web服务的平台管理层,实现基础的资源调用封装、数据库管理、多集群管理、资源监控和平台各组件之间的通信功能;
(5)平台服务提供者构建平台业务服务层,实现对外标准软件接口、任务提交、任务信息管理、任务状态管理、任务结果管理以及任务结果下载功能;
(6)平台服务提供者构建任务算法运行镜像,在镜像中配置任务执行模块,实现任务执行环境配置、任务算法运行、任务算法状态监控以及任务运行结果保存功能;
(7)普通用户向平台业务服务层提交创建高性能计算任务所需的硬件需求;
(8)用户通过平台对外标准软件接口向平台业务服务层提交创建高性能计算任务所需计算资源的请求描述;
(9)平台业务服务层根据用户所提交的请求描述,分析并产生调度结果,调用平台管理层创建计算资源;
(10)平台管理层根据调度结果,启动虚拟机节点,并配置相应的网络环境;
(11)平台根据用户所提交的请求描述,待虚拟机启动完成后,启动任务计算;
(12)平台在任务计算完成后,将任务计算结果存入对象存储节点,并通过HTTP请求告知业务服务管理层,任务计算结束,业务服务管理层向用户返回运行结果。
所述步骤(3)中,平台虚拟资源层的搭建采用以下步骤进行:
(3a)搭建计算节点,计算节点上承载具体的计算虚拟化技术的Hypervisor;
(3b)基于SDN架构搭建网络节点;
(3c)搭建控制节点,控制节点用于对所有服务进行整合,并接受调度;
所述步骤(7)中,硬件需求包括内存、CPU、硬盘大小以及操作系统类型。
所述步骤(8)中,计算资源的请求描述包括任务模型、输入文件及任务描述文件。
所述任务描述文件包括任务执行命令,以及包含硬件需求和服务节点数目的JSON文件。
用户向平台业务服务层提交请求描述的提交文件全部存入平台对象存储节点。
与现有技术相比,本发明具有以下有益效果:
1.将计算任务的计算和计算工具运行环境的自动创建统一起来,方便用户快速,便捷的构建适合运算任务的计算工具运行环境。
2.自动化处理任务计算过程,使用户专注于科学计算本身而无需过多考虑任务执行过程中的运行问题。
3.为计算任务提供动态可扩展的计算资源,针对不同的计算任务,不同时刻对不同计算资源的不同需求,合理调度,实现资源复用,提高资源利用率。
4.实现异构资源的统一管理,通过虚拟化技术对异构资源进行抽象统一,实现计算资源的同构化,为用户提供统一的资源调用。
5.封装良好的对外接口,通过对任务相关的功能接口进行封装,极大的简化了用户的使用难度,便于用户编程实现资源调用和任务自动化计算。
6.平台采用服务化的分层架构,具有良好的扩展性,可以方便的扩展计算资源。
附图说明
图1为本发明的平台整体架构图;
图2为本发明的平台逻辑架构图;
图3为本发明的任务提交时序图;
图4为本发明的虚拟资源调度时序图;
图5为本发明的计算资源创建流程图;
图6为本发明的虚拟资源组织示意图。
具体实施方式
下面结合附图,对本发明的做进一步详细的说明。
参见图1至图4,本发明可扩展的自动化计算服务平台,包括物理资源层、虚拟资源层、平台管理层以及业务服务层;
物理资源层包括存储设备、计算设备以及网络设备;
虚拟资源层利用OpenStack的相关组件对底层的物理资源整合成逻辑上的云,然后通过虚拟化技术构建虚拟机资源池,提供计算资源池;虚拟资源层对各虚拟机提供创建、删除、迁移、重启、修改以及远程桌面功能;利用网络虚拟化技术,提供虚拟网络和虚拟路由器的创建、删除以及修改功能。
平台管理层层利用Web服务器进行消息转发和接收,与虚拟资源层控制器利用HTTP协议进行通信,利用JSON文本为标准数据交互格式,对通信功能进行封装,成为通信模块;平台管理层对各虚拟资源池的计算资源实现统一调用,并将包括计算、存储和网络方面资源的调用封装为资源服务模块;平台管理层对平台中广域分布的多虚拟资源集群进行统一管理,实现多集群管理模块。
业务服务层用于计算任务的管理、执行、计算资源环境配置,并最终为用户提供标准软件接口。
如图5和图6所示,本发明可扩展的自动化计算服务平台的构建方法,包括以下步骤:
(1)平台服务提供者构建基于对象存储的数据管理系统物理存储节点,用于存储和处理高性能计算中的模型文件和初始数据并提供分析、索引和查询功能。存储节点通常位于各本地集群中,采用主从结构,主节点用于接受用户的各种请求,各从节点进行具体的存储。存储节点与其他服务的结合参照图5。
(2)平台服务提供者构建关系型数据库用于对集群信息数据进行持久化,并提供索引和查询功能。关系型数据库可选用Mysql,数据库位于各子中心控制节点和主控制节点。
(3)平台服务提供者搭建虚拟资源层,用于利用虚拟化技术对平台资源整合使用,提供基础的云计算设施。参照图6,平台虚拟资源层的搭建分为如下几步:
(3a)搭建计算节点,计算节点上承载具体的计算虚拟化技术的Hypervisor。
(3b)搭建网络节点,网络节点基于SDN(Software Defined Network)思想。
(3c)搭建控制节点,控制节点用于对所有服务进行整合,并接受调度。
(4)平台服务提供者构建基于Web服务的平台管理层,实现基础的资源调用封装,数据库管理,多集群管理,资源监控和平台各组件之间的通信功能;
(5)平台服务提供者构建平台业务服务层,实现对外标准软件接口,任务提交,任务信息管理,任务状态管理,任务结果管理,任务结果下载等功能。
(6)平台服务提供者构建任务算法运行镜像,在镜像中配置任务执行模块,实现任务执行环境配置,任务算法运行,任务算法状态监控,任务运行结果保存等功能。
(7)完成上述六个步骤之后,参照图3,普通用户向平台业务服务层提交创建高性能计算任务所需的硬件需求,前述的所需的硬件需求包括内存、CPU、硬盘大小以及操作系统类型;
(8)用户通过平台对外标准软件接口向平台业务服务层提交创建高性能计算任务所需计算资源的请求描述,所述的请求描述包括任务模型、输入文件及任务描述文件,所述的任务描述文件包括任务执行命令,以及包含步骤(7)中所述的硬件需求和服务节点数目的JSON文件。所述的提交文件全部存入平台对象存储节点。
(9)平台业务服务层根据步骤(8)中用户所提交的请求,分析并产生调度结果,参照图4,调用平台管理层创建计算资源。
(10)平台管理层根据调度结果,参照图5,启动虚拟机节点,并配置相应的网络环境;
(11)平台根据步骤(8)中用户所提交的请求,待虚拟机启动完成后,启动任务计算;
(12)平台在任务计算完成后,将任务计算结果存入对象存储节点,并通过HTTP请求告知业务服务管理层,任务计算结束,业务服务管理层向用户返回运行结果。
本发明可扩展的自动化计算服务平台的虚拟资源层主要基于OpenStack平台完成对虚拟化技术的整合使用。利用OpenStack的相关组件对底层的物理资源整合成逻辑上的云,然后通过虚拟化技术构建虚拟机资源池,提供计算资源池。对各虚拟机提供创建、删除、迁移、重启、修改、远程桌面等功能。利用网络虚拟化技术,提供虚拟网络和虚拟路由器的创建、删除、修改等功能。
本发明可扩展的自动化计算服务平台的平台管理层利用Web服务器进行消息转发和接收,与虚拟资源层控制器利用HTTP协议进行通信,利用JSON文本为标准数据交互格式,对通信功能进行封装,成为通信模块。对基于ORM技术的数据库管理相关功能进行封装,形成数据库管理模块。对各虚拟资源池的计算资源实现统一调用,并将包括计算、存储和网络等方面资源的调用封装为资源服务模块。另外,对平台中广域分布的多虚拟资源集群进行统一管理,实现多集群管理模块。
本发明可扩展的自动化计算服务平台的业务服务层用于计算任务的管理、执行、计算资源环境配置,并最终为用户提供标准软件接口。因为任务的管理涉及到任务执行部分和任务控制部分两部分,任务的执行、管理和环境配置采取主从结构的软件体系架构,一部分是服务端主要完成任务提交,任务管理,任务分发等一系列工作,这里是对外接口和任务信息处理的主要部分。另一部分是执行端位于虚拟机镜像中,随虚拟机镜像启动而启动,执行端启动后会向服务端请求任务,在任务开始执行前完成必要的运行环境配置,然后开始执行任务,在任务结束后将计算结果保存至数据库,并告知服务端任务结束。
以上内容仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明权利要求书的保护范围之内。
Claims (9)
1.一种可扩展的自动化计算服务平台,其特征在于:包括物理资源层、虚拟资源层、平台管理层以及业务服务层;
物理资源层包括存储设备、计算设备以及网络设备;
虚拟资源层利用OpenStack的相关组件对底层的物理资源整合成逻辑上的云,然后通过虚拟化技术构建虚拟机资源池,提供计算资源池;
平台管理层层利用Web服务器进行消息转发和接收,与虚拟资源层控制器利用HTTP协议进行通信,利用JSON文本为标准数据交互格式,对通信功能进行封装,成为通信模块;
业务服务层用于计算任务的管理、执行、计算资源环境配置,并最终为用户提供标准软件接口。
2.根据权利要求1所述的可扩展的自动化计算服务平台,其特征在于:所述虚拟资源层对各虚拟机提供创建、删除、迁移、重启、修改以及远程桌面功能;利用网络虚拟化技术,提供虚拟网络和虚拟路由器的创建、删除以及修改功能。
3.根据权利要求1所述的可扩展的自动化计算服务平台,其特征在于:所述平台管理层对各虚拟资源池的计算资源实现统一调用,并将包括计算、存储和网络方面资源的调用封装为资源服务模块;平台管理层对平台中广域分布的多虚拟资源集群进行统一管理,实现多集群管理模块。
4.一种如权利要求1所述可扩展的自动化计算服务平台的构建方法,其特征在于,包括以下步骤:
(1)平台服务提供者构建基于对象存储的数据管理系统物理存储节点,用于存储和处理高性能计算中的模型文件和初始数据并提供分析、索引和查询功能;
(2)平台服务提供者构建关系型数据库用于对集群信息数据进行持久化,并提供索引和查询功能;
(3)平台服务提供者搭建虚拟资源层,用于利用虚拟化技术对平台资源整合使用,提供基础的云计算设施;
(4)平台服务提供者构建基于Web服务的平台管理层,实现基础的资源调用封装、数据库管理、多集群管理、资源监控和平台各组件之间的通信功能;
(5)平台服务提供者构建平台业务服务层,实现对外标准软件接口、任务提交、任务信息管理、任务状态管理、任务结果管理以及任务结果下载功能;
(6)平台服务提供者构建任务算法运行镜像,在镜像中配置任务执行模块,实现任务执行环境配置、任务算法运行、任务算法状态监控以及任务运行结果保存功能;
(7)普通用户向平台业务服务层提交创建高性能计算任务所需的硬件需求;
(8)用户通过平台对外标准软件接口向平台业务服务层提交创建高性能计算任务所需计算资源的请求描述;
(9)平台业务服务层根据用户所提交的请求描述,分析并产生调度结果,调用平台管理层创建计算资源;
(10)平台管理层根据调度结果,启动虚拟机节点,并配置相应的网络环境;
(11)平台根据用户所提交的请求描述,待虚拟机启动完成后,启动任务计算;
(12)平台在任务计算完成后,将任务计算结果存入对象存储节点,并通过HTTP请求告知业务服务管理层,任务计算结束,业务服务管理层向用户返回运行结果。
5.根据权利要求4所述可扩展的自动化计算服务平台的构建方法,其特征在于:所述步骤(3)中,平台虚拟资源层的搭建采用以下步骤进行:
(3a)搭建计算节点,计算节点上承载具体的计算虚拟化技术的Hypervisor;
(3b)基于SDN架构搭建网络节点;
(3c)搭建控制节点,控制节点用于对所有服务进行整合,并接受调度。
6.根据权利要求4所述可扩展的自动化计算服务平台的构建方法,其特征在于:所述步骤(7)中,硬件需求包括内存、CPU、硬盘大小以及操作系统类型。
7.根据权利要求6所述可扩展的自动化计算服务平台的构建方法,其特征在于:所述步骤(8)中,计算资源的请求描述包括任务模型、输入文件及任务描述文件。
8.根据权利要求7所述可扩展的自动化计算服务平台的构建方法,其特征在于:所述任务描述文件包括任务执行命令,以及包含硬件需求和服务节点数目的JSON文件。
9.根据权利要求4或7或8所述可扩展的自动化计算服务平台的构建方法,其特征在于:用户向平台业务服务层提交请求描述的提交文件全部存入平台对象存储节点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410812058.6A CN104506620A (zh) | 2014-12-23 | 2014-12-23 | 一种可扩展的自动化计算服务平台及其构建方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410812058.6A CN104506620A (zh) | 2014-12-23 | 2014-12-23 | 一种可扩展的自动化计算服务平台及其构建方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104506620A true CN104506620A (zh) | 2015-04-08 |
Family
ID=52948335
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410812058.6A Pending CN104506620A (zh) | 2014-12-23 | 2014-12-23 | 一种可扩展的自动化计算服务平台及其构建方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104506620A (zh) |
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104796466A (zh) * | 2015-04-09 | 2015-07-22 | 南京华讯方舟通信设备有限公司 | 一种云计算平台网络调度方法及系统 |
CN105049419A (zh) * | 2015-06-19 | 2015-11-11 | 中国人民解放军信息工程大学 | 基于异构多样性的拟态网络逐级交换路由系统 |
CN105607903A (zh) * | 2015-12-15 | 2016-05-25 | 国云科技股份有限公司 | 一种部署openstack组件的方法 |
CN106020970A (zh) * | 2016-05-11 | 2016-10-12 | 广东浪潮大数据研究有限公司 | 一种私有云环境下的异构虚拟化平台管理框架 |
CN106682199A (zh) * | 2016-12-29 | 2017-05-17 | 北京奇虎科技有限公司 | 一种实现Mongos集群自动化扩容的方法和装置 |
CN106790324A (zh) * | 2015-11-20 | 2017-05-31 | 华为技术有限公司 | 内容分发方法、虚拟服务器管理方法、云平台和系统 |
CN106856485A (zh) * | 2015-12-08 | 2017-06-16 | 阿里巴巴集团控股有限公司 | 数据服务的发布方法和装置 |
CN107037985A (zh) * | 2017-02-14 | 2017-08-11 | 中山大学 | 一种超融合一体机系统及其横向和纵向扩容方法 |
CN107343041A (zh) * | 2017-06-29 | 2017-11-10 | 三峡大学 | 一种基于云计算的精准扶贫管理系统与方法 |
CN107391688A (zh) * | 2017-07-25 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种基于web的虚拟化网络管理平台的构建方法与装置 |
CN107562120A (zh) * | 2016-06-30 | 2018-01-09 | 无锡十月中宸科技有限公司 | 一种基于混合资源的拟态科学计算卡 |
CN107707663A (zh) * | 2017-10-17 | 2018-02-16 | 长沙准光里电子科技有限公司 | 一种虚拟化资源整合平台 |
CN108055305A (zh) * | 2017-12-06 | 2018-05-18 | 深圳市智物联网络有限公司 | 一种存储扩展方法及存储扩展装置 |
CN108256052A (zh) * | 2018-01-15 | 2018-07-06 | 成都初联创智软件有限公司 | 基于tri-training的汽车行业潜在客户识别方法 |
CN108845878A (zh) * | 2018-05-08 | 2018-11-20 | 南京理工大学 | 基于无服务器计算的大数据处理方法及装置 |
CN109376084A (zh) * | 2018-09-29 | 2019-02-22 | 郑州云海信息技术有限公司 | 一种测试环境构建方法和系统 |
CN109542057A (zh) * | 2018-11-14 | 2019-03-29 | 中国电子工程设计院有限公司 | 基于虚拟机结构的远程运维模型及其构建方法 |
CN109787792A (zh) * | 2017-11-10 | 2019-05-21 | 阿里巴巴集团控股有限公司 | 一种管理分布式业务集群的系统 |
CN110187869A (zh) * | 2019-05-14 | 2019-08-30 | 上海直真君智科技有限公司 | 一种大数据异构存储计算模型间的统一互操作系统及方法 |
CN110719206A (zh) * | 2019-10-21 | 2020-01-21 | 中国科学院空间应用工程与技术中心 | 天基fpga虚拟化计算服务系统、方法和可读存储介质 |
CN110795219A (zh) * | 2019-10-24 | 2020-02-14 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 适用于多种计算框架的资源调度方法及系统 |
CN111212116A (zh) * | 2019-12-24 | 2020-05-29 | 湖南舜康信息技术有限公司 | 一种基于容器云的高性能计算集群创建方法和系统 |
CN111369173A (zh) * | 2020-03-20 | 2020-07-03 | 中国船舶重工集团公司第七一六研究所 | 一种制造资源虚拟化和服务封装方法 |
CN111522624A (zh) * | 2020-04-17 | 2020-08-11 | 成都安恒信息技术有限公司 | 一种基于虚拟化技术的报文转发性能弹性扩展系统及其扩展方法 |
CN112347105A (zh) * | 2020-11-06 | 2021-02-09 | 中国电子科技集团公司第三十八研究所 | 一种基于资源树的通用数据服务平台 |
CN112463323A (zh) * | 2020-11-25 | 2021-03-09 | 医渡云(北京)技术有限公司 | 基于云计算平台的信息处理方法、云计算平台及介质 |
CN112988695A (zh) * | 2019-12-13 | 2021-06-18 | 北京市计算中心 | 一种超融合混合架构计算材料平台 |
CN113176875A (zh) * | 2021-05-12 | 2021-07-27 | 同济大学 | 一种基于微服务的资源共享服务平台架构 |
CN113254151A (zh) * | 2021-05-17 | 2021-08-13 | 清华大学 | 超级计算机系统虚拟化方法和装置 |
CN113504982A (zh) * | 2021-05-18 | 2021-10-15 | 北京中科院软件中心有限公司 | 一种分布式科技服务资源池构建方法 |
CN113589782A (zh) * | 2021-07-08 | 2021-11-02 | 重庆长安汽车股份有限公司 | 整车运算平台系统架构设计方法及整车运算平台系统架构 |
CN113708965A (zh) * | 2021-08-24 | 2021-11-26 | 北京计算机技术及应用研究所 | 一种高性能构件化的数据包处理框架 |
CN114268671A (zh) * | 2021-11-18 | 2022-04-01 | 航天信息股份有限公司 | 一种基于OpenStack私有云异构资源管理方法及系统 |
WO2022109932A1 (zh) * | 2020-11-26 | 2022-06-02 | 深圳晶泰科技有限公司 | 基于slurm计算平台的多任务提交系统 |
CN116028233A (zh) * | 2023-03-29 | 2023-04-28 | 北京大数据先进技术研究院 | 一种ai计算资源的数字对象组织与共享方法和装置 |
CN118363900A (zh) * | 2024-06-18 | 2024-07-19 | 中电科申泰信息科技有限公司 | 一种具备扩展性和灵活性的数据流加速设备及方法 |
-
2014
- 2014-12-23 CN CN201410812058.6A patent/CN104506620A/zh active Pending
Non-Patent Citations (4)
Title |
---|
孙隽: "OpenStack构架下计算机实验中学云平台的设计", 《中国远程教员》 * |
李知杰: "OpenStack开源云计算平台", 《软件导刊》 * |
李英壮: "基于OpenStack开发云平台的设计与实现", 《武汉大学学报(理学版)》 * |
赵少卡: "基于OpenStack的清华云平台构建与调度方案设计", 《计算机应用》 * |
Cited By (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104796466A (zh) * | 2015-04-09 | 2015-07-22 | 南京华讯方舟通信设备有限公司 | 一种云计算平台网络调度方法及系统 |
CN104796466B (zh) * | 2015-04-09 | 2018-05-25 | 南京华讯方舟通信设备有限公司 | 一种云计算平台网络调度方法及系统 |
CN105049419A (zh) * | 2015-06-19 | 2015-11-11 | 中国人民解放军信息工程大学 | 基于异构多样性的拟态网络逐级交换路由系统 |
CN105049419B (zh) * | 2015-06-19 | 2018-09-11 | 中国人民解放军信息工程大学 | 基于异构多样性的拟态网络逐级交换路由系统 |
US11431791B2 (en) | 2015-11-20 | 2022-08-30 | Huawei Technologies Co., Ltd. | Content delivery method, virtual server management method, cloud platform, and system |
CN106790324A (zh) * | 2015-11-20 | 2017-05-31 | 华为技术有限公司 | 内容分发方法、虚拟服务器管理方法、云平台和系统 |
US10911530B2 (en) | 2015-11-20 | 2021-02-02 | Huawei Technologies Co., Ltd. | Content delivery method, virtual server management method, cloud platform, and system |
CN106790324B (zh) * | 2015-11-20 | 2020-06-16 | 华为技术有限公司 | 内容分发方法、虚拟服务器管理方法、云平台和系统 |
CN106856485A (zh) * | 2015-12-08 | 2017-06-16 | 阿里巴巴集团控股有限公司 | 数据服务的发布方法和装置 |
CN105607903A (zh) * | 2015-12-15 | 2016-05-25 | 国云科技股份有限公司 | 一种部署openstack组件的方法 |
CN106020970A (zh) * | 2016-05-11 | 2016-10-12 | 广东浪潮大数据研究有限公司 | 一种私有云环境下的异构虚拟化平台管理框架 |
CN107562120A (zh) * | 2016-06-30 | 2018-01-09 | 无锡十月中宸科技有限公司 | 一种基于混合资源的拟态科学计算卡 |
CN106682199A (zh) * | 2016-12-29 | 2017-05-17 | 北京奇虎科技有限公司 | 一种实现Mongos集群自动化扩容的方法和装置 |
CN106682199B (zh) * | 2016-12-29 | 2020-09-01 | 北京奇虎科技有限公司 | 一种实现Mongos集群自动化扩容的方法和装置 |
CN107037985A (zh) * | 2017-02-14 | 2017-08-11 | 中山大学 | 一种超融合一体机系统及其横向和纵向扩容方法 |
CN107343041A (zh) * | 2017-06-29 | 2017-11-10 | 三峡大学 | 一种基于云计算的精准扶贫管理系统与方法 |
CN107343041B (zh) * | 2017-06-29 | 2020-05-19 | 三峡大学 | 一种基于云计算的精准扶贫管理系统与方法 |
CN107391688A (zh) * | 2017-07-25 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种基于web的虚拟化网络管理平台的构建方法与装置 |
CN107707663A (zh) * | 2017-10-17 | 2018-02-16 | 长沙准光里电子科技有限公司 | 一种虚拟化资源整合平台 |
CN109787792B (zh) * | 2017-11-10 | 2022-05-13 | 阿里巴巴集团控股有限公司 | 一种管理分布式业务集群的系统 |
CN109787792A (zh) * | 2017-11-10 | 2019-05-21 | 阿里巴巴集团控股有限公司 | 一种管理分布式业务集群的系统 |
CN108055305B (zh) * | 2017-12-06 | 2020-11-17 | 深圳市智物联网络有限公司 | 一种存储扩展方法及存储扩展装置 |
CN108055305A (zh) * | 2017-12-06 | 2018-05-18 | 深圳市智物联网络有限公司 | 一种存储扩展方法及存储扩展装置 |
CN108256052B (zh) * | 2018-01-15 | 2023-07-11 | 成都达拓智通科技有限公司 | 基于tri-training的汽车行业潜在客户识别方法 |
CN108256052A (zh) * | 2018-01-15 | 2018-07-06 | 成都初联创智软件有限公司 | 基于tri-training的汽车行业潜在客户识别方法 |
CN108845878A (zh) * | 2018-05-08 | 2018-11-20 | 南京理工大学 | 基于无服务器计算的大数据处理方法及装置 |
CN109376084A (zh) * | 2018-09-29 | 2019-02-22 | 郑州云海信息技术有限公司 | 一种测试环境构建方法和系统 |
CN109542057A (zh) * | 2018-11-14 | 2019-03-29 | 中国电子工程设计院有限公司 | 基于虚拟机结构的远程运维模型及其构建方法 |
CN109542057B (zh) * | 2018-11-14 | 2023-11-07 | 中国电子工程设计院有限公司 | 基于虚拟机结构的远程运维系统及其构建方法 |
CN110187869A (zh) * | 2019-05-14 | 2019-08-30 | 上海直真君智科技有限公司 | 一种大数据异构存储计算模型间的统一互操作系统及方法 |
CN110719206A (zh) * | 2019-10-21 | 2020-01-21 | 中国科学院空间应用工程与技术中心 | 天基fpga虚拟化计算服务系统、方法和可读存储介质 |
CN110719206B (zh) * | 2019-10-21 | 2022-05-03 | 中国科学院空间应用工程与技术中心 | 天基fpga虚拟化计算服务系统、方法和可读存储介质 |
CN110795219A (zh) * | 2019-10-24 | 2020-02-14 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 适用于多种计算框架的资源调度方法及系统 |
CN110795219B (zh) * | 2019-10-24 | 2022-03-18 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 适用于多种计算框架的资源调度方法及系统 |
CN112988695B (zh) * | 2019-12-13 | 2023-09-12 | 北京市计算中心有限公司 | 一种超融合混合架构计算材料平台 |
CN112988695A (zh) * | 2019-12-13 | 2021-06-18 | 北京市计算中心 | 一种超融合混合架构计算材料平台 |
CN111212116A (zh) * | 2019-12-24 | 2020-05-29 | 湖南舜康信息技术有限公司 | 一种基于容器云的高性能计算集群创建方法和系统 |
CN111369173A (zh) * | 2020-03-20 | 2020-07-03 | 中国船舶重工集团公司第七一六研究所 | 一种制造资源虚拟化和服务封装方法 |
CN111522624A (zh) * | 2020-04-17 | 2020-08-11 | 成都安恒信息技术有限公司 | 一种基于虚拟化技术的报文转发性能弹性扩展系统及其扩展方法 |
CN111522624B (zh) * | 2020-04-17 | 2023-10-20 | 成都安恒信息技术有限公司 | 一种基于虚拟化技术的报文转发性能弹性扩展系统及其扩展方法 |
CN112347105A (zh) * | 2020-11-06 | 2021-02-09 | 中国电子科技集团公司第三十八研究所 | 一种基于资源树的通用数据服务平台 |
CN112463323A (zh) * | 2020-11-25 | 2021-03-09 | 医渡云(北京)技术有限公司 | 基于云计算平台的信息处理方法、云计算平台及介质 |
WO2022109932A1 (zh) * | 2020-11-26 | 2022-06-02 | 深圳晶泰科技有限公司 | 基于slurm计算平台的多任务提交系统 |
CN113176875A (zh) * | 2021-05-12 | 2021-07-27 | 同济大学 | 一种基于微服务的资源共享服务平台架构 |
CN113176875B (zh) * | 2021-05-12 | 2024-01-12 | 同济大学 | 一种基于微服务的资源共享服务平台架构 |
CN113254151A (zh) * | 2021-05-17 | 2021-08-13 | 清华大学 | 超级计算机系统虚拟化方法和装置 |
CN113504982A (zh) * | 2021-05-18 | 2021-10-15 | 北京中科院软件中心有限公司 | 一种分布式科技服务资源池构建方法 |
CN113589782A (zh) * | 2021-07-08 | 2021-11-02 | 重庆长安汽车股份有限公司 | 整车运算平台系统架构设计方法及整车运算平台系统架构 |
CN113708965A (zh) * | 2021-08-24 | 2021-11-26 | 北京计算机技术及应用研究所 | 一种高性能构件化的数据包处理框架 |
CN114268671A (zh) * | 2021-11-18 | 2022-04-01 | 航天信息股份有限公司 | 一种基于OpenStack私有云异构资源管理方法及系统 |
CN114268671B (zh) * | 2021-11-18 | 2024-06-11 | 航天信息股份有限公司 | 一种基于OpenStack私有云异构资源管理方法及系统 |
CN116028233A (zh) * | 2023-03-29 | 2023-04-28 | 北京大数据先进技术研究院 | 一种ai计算资源的数字对象组织与共享方法和装置 |
CN118363900A (zh) * | 2024-06-18 | 2024-07-19 | 中电科申泰信息科技有限公司 | 一种具备扩展性和灵活性的数据流加速设备及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104506620A (zh) | 一种可扩展的自动化计算服务平台及其构建方法 | |
Nastic et al. | A serverless real-time data analytics platform for edge computing | |
CN109643312B (zh) | 托管查询服务 | |
Shu et al. | Cloud-integrated cyber-physical systems for complex industrial applications | |
US11110601B2 (en) | Scheduling robots for robotic process automation | |
US9367359B2 (en) | Optimized resource management for map/reduce computing | |
CN109284184A (zh) | 一种基于容器化技术的分布式机器学习平台的搭建方法 | |
CN105577779A (zh) | 一种容器化部署大企业私有云的方法和系统 | |
CN104579792A (zh) | 多适配方式实现多种类型虚拟资源集中管理架构及方法 | |
US9092272B2 (en) | Preparing parallel tasks to use a synchronization register | |
CN108255539B (zh) | 基于云计算和数据虚拟化的气象卫星数据处理系统 | |
Lumpkins | The internet of things meets cloud computing [standards corner] | |
CN106293847B (zh) | 一种虚拟化平台服务支撑的方法 | |
CN110888736A (zh) | 一种基于容器云平台的应用管理方法、系统及相关组件 | |
CN114691050B (zh) | 基于kubernetes的云原生存储方法、装置、设备及介质 | |
CN104468759A (zh) | PaaS平台中实现应用迁移的方法和装置 | |
US10944814B1 (en) | Independent resource scheduling for distributed data processing programs | |
Justino et al. | Outsourcing resource-intensive tasks from mobile apps to clouds: Android and aneka integration | |
CN105100180A (zh) | 集群节点动态加载的方法、装置及系统 | |
CN110532060A (zh) | 一种混合网络环境数据采集方法及系统 | |
CN106856441A (zh) | Nfvo中的vim选择方法和装置 | |
WO2018188607A1 (zh) | 流处理方法及装置 | |
CN107528871A (zh) | 存储系统中的数据分析 | |
JP6326062B2 (ja) | 異なる環境どうし間でのジョブ実行依頼のトランスペアレントなルーティング | |
CN105208123A (zh) | 一种虚拟桌面的实现方法及其系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150408 |
|
WD01 | Invention patent application deemed withdrawn after publication |