CN103491158A - 一种就近计算的云计算架构 - Google Patents

一种就近计算的云计算架构 Download PDF

Info

Publication number
CN103491158A
CN103491158A CN201310429848.1A CN201310429848A CN103491158A CN 103491158 A CN103491158 A CN 103491158A CN 201310429848 A CN201310429848 A CN 201310429848A CN 103491158 A CN103491158 A CN 103491158A
Authority
CN
China
Prior art keywords
cloud computing
data
node
stored
dispatch server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310429848.1A
Other languages
English (en)
Inventor
周维波
李光亚
陈诚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WANDA INFORMATION CO Ltd
Original Assignee
WANDA INFORMATION CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WANDA INFORMATION CO Ltd filed Critical WANDA INFORMATION CO Ltd
Priority to CN201310429848.1A priority Critical patent/CN103491158A/zh
Publication of CN103491158A publication Critical patent/CN103491158A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种改进云计算系统整体效能的系统架构模型,其特征在于:云计算节点按照规则存储数据,相同的数据可以在不同的节点上存储备份;云计算调度服务器根据所接收请求的数据范围和存储节点的系统负载状况将请求分解到不同的节点服务器上进行处理。最终完成云计算服务。本发明的优点是:充分利用节点服务器的计算和存储能力,处理请求时,计算节点只访问本地存储的数据,避免传统模型下的网络数据访问过程,提高系统的资源利用率和整体效能。

Description

一种就近计算的云计算架构
技术领域
本发明涉及一种经过改进的云计算架构模型,针对特定应用需求,采用就近计算的架构,可以提高云计算平台的资源利用率和系统效能。
背景技术
现有的云计算平台由两部分组成:存储平台和计算平台,其逻辑结构如图1所示。在现有的云计算平台结构中,一个标准的云服务过程包括:
1、首先访问计算资源调度服务器,将计算任务分解到计算资源池中的服务群进行计算;
2、计算资源池访问存储资源调度服务器,获取存储资源的位置;
3、计算资源池访问存储资源池,获取所需要的数据进行计算,结果汇集完成云计算服务。
在一个云服务请求中,计算资源池需要通过网络两次访问存储资源:首先访问存储资源调度,获取数据的存放位置,然后再次访问存储资源池,获取数据。这种模式对一些高负载云服务系统——比如谷歌的搜索引擎等——是合理的结构。但在我们的大多数应用中,并没有像谷歌搜索那么高的负载,一个突出的表现就计算资源池中,CPU的利用率较高,但I/O利用率很低;而存储资源中,I/O利用率较高,但CPU的利用率较低。同时计算资源池每一次访问云存储的数据都要发起两次网络连接,降低了系统的反应速度。综合上述因素,最终导致系统在中等负载的情况下整体效能降低。
发明内容
本发明的目的是提供一种改进的云计算架构,在中等负载的情况下提高系统的整体效能。在数百个节点的云计算平台中降低系统内网络消耗,提高节点的利用效率。
为了达到上述目的,本发明的技术方案是提供了一种就近计算的云计算架构,其包括云计算资源调度服务器和云计算节点,其特征在于:
云计算节点负责存储数据,完成分解服务的计算任务并将结果反馈,数据在不同的云计算节点上存储,互为备份,云计算节点完成分解后的计算任务时只访问本机所存储数据;
云计算资源调度服务器负责分解云计算服务请求,任务分解时,云计算资源调度服务器根据存放所请求数据的云计算节点和存储该数据的云计算节点的负载状况将任务分解为子任务,最终云计算节点所需要完成的子任务只需要访问本节点所存储的数据。
优选地,若同一份数据在多个所述云计算节点存储,则所述云计算资源调度服务器根据存储该数据的云计算节点负载状况对该份数据的处理任务进一步分解到多个云计算节点上进行处理。
优选地,所述云计算资源调度服务器根据所存储的数据中经验的业务数据和知识来优化地分解云计算服务请求。
优选地,所述云计算节点通过网络访问相关的配置信息。
优选地,云计算服务分解处理和云数据存储在同一云计算节点上进行,对业务数据的处理不产生网络访问。
采用本发明,相比于传统的云计算架构模型,在系统整体效能上有明显提高,降低了平台内部的网络I/O流量,提高了系统的响应速度,云计算平台的节点同时提高计算和存储资源,提高了设备的利用率,在系统效能和设备利用率、功耗方面具有较大优势。
附图说明
图1为现有云计算平台逻辑结构;
图2为改进的云计算架构。
具体实施方式
为使本发明更明显易懂,兹以优选实施例,并配合附图作详细说明如下。
结合图2,本发明提供了一种就近计算的云计算架构,其包括云计算资源调度服务器和云计算节点:
云计算节点负责存储数据,完成分解服务的计算任务并将结果反馈,数据在不同的云计算节点上存储,互为备份,云计算节点完成分解后的计算任务时只访问本机所存储数据。云计算节点可以通过网络访问计算、存储任务等相关的配置信息。
云计算资源调度服务器负责分解云计算服务请求,任务分解时,云计算资源调度服务器根据存放所请求数据的云计算节点和存储该数据的云计算节点的负载状况将任务分解为子任务,最终云计算节点所需要完成的子任务只需要访问本节点所存储的数据。云计算资源调度服务器根据所存储的数据中经验的业务数据和知识来优化地分解云计算服务请求。若同一份数据在多个所述云计算节点存储,则所述云计算资源调度服务器根据存储该数据的云计算节点负载状况对该份数据的处理任务进一步分解到多个云计算节点上进行处理。
在本发明中,云计算服务分解处理和云数据存储在同一云计算节点上进行,对业务数据的处理不产生网络访问。

Claims (5)

1.一种就近计算的云计算架构,其包括云计算资源调度服务器和云计算节点,其特征在于:
云计算节点负责存储数据,完成分解服务的计算任务并将结果反馈,数据在不同的云计算节点上存储,互为备份,云计算节点完成分解后的计算任务时只访问本机所存储数据;
云计算资源调度服务器负责分解云计算服务请求,任务分解时,云计算资源调度服务器根据存放所请求数据的云计算节点和存储该数据的云计算节点的负载状况将任务分解为子任务,最终云计算节点所需要完成的子任务只需要访问本节点所存储的数据。
2.如权利要求1所述的一种就近计算的云计算架构,其特征在于:若同一份数据在多个所述云计算节点存储,则所述云计算资源调度服务器根据存储该数据的云计算节点负载状况对该份数据的处理任务进一步分解到多个云计算节点上进行处理。
3.如权利要求1所述的一种就近计算的云计算架构,其特征在于:所述云计算资源调度服务器根据所存储的数据中经验的业务数据和知识来优化地分解云计算服务请求。
4.如权利要求1所述的一种就近计算的云计算架构,其特征在于:所述云计算节点通过网络访问相关的配置信息。
5.如权利要求1所述的一种就近计算的云计算架构,其特征在于:云计算服务分解处理和云数据存储在同一云计算节点上进行,对业务数据的处理不产生网络访问。
CN201310429848.1A 2013-09-18 2013-09-18 一种就近计算的云计算架构 Pending CN103491158A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310429848.1A CN103491158A (zh) 2013-09-18 2013-09-18 一种就近计算的云计算架构

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310429848.1A CN103491158A (zh) 2013-09-18 2013-09-18 一种就近计算的云计算架构

Publications (1)

Publication Number Publication Date
CN103491158A true CN103491158A (zh) 2014-01-01

Family

ID=49831111

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310429848.1A Pending CN103491158A (zh) 2013-09-18 2013-09-18 一种就近计算的云计算架构

Country Status (1)

Country Link
CN (1) CN103491158A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107707663A (zh) * 2017-10-17 2018-02-16 长沙准光里电子科技有限公司 一种虚拟化资源整合平台
WO2020192649A1 (zh) * 2019-03-27 2020-10-01 上海德衡数据科技有限公司 一种数据中心管理系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101753608A (zh) * 2008-12-09 2010-06-23 中国移动通信集团公司 分布式系统的调度方法及系统
CN101950297A (zh) * 2010-09-10 2011-01-19 北京大学 一种海量语义数据的存储和查询方法及装置
CN101977242A (zh) * 2010-11-16 2011-02-16 西安电子科技大学 一种分层分布式云计算体系结构及服务提供方法
CN201985895U (zh) * 2010-09-07 2011-09-21 北京市国路安信息技术有限公司 一种ldap云存储服务系统
CN102664747A (zh) * 2012-03-27 2012-09-12 易云捷讯科技(北京)有限公司 一种云计算平台系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101753608A (zh) * 2008-12-09 2010-06-23 中国移动通信集团公司 分布式系统的调度方法及系统
CN201985895U (zh) * 2010-09-07 2011-09-21 北京市国路安信息技术有限公司 一种ldap云存储服务系统
CN101950297A (zh) * 2010-09-10 2011-01-19 北京大学 一种海量语义数据的存储和查询方法及装置
CN101977242A (zh) * 2010-11-16 2011-02-16 西安电子科技大学 一种分层分布式云计算体系结构及服务提供方法
CN102664747A (zh) * 2012-03-27 2012-09-12 易云捷讯科技(北京)有限公司 一种云计算平台系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107707663A (zh) * 2017-10-17 2018-02-16 长沙准光里电子科技有限公司 一种虚拟化资源整合平台
WO2020192649A1 (zh) * 2019-03-27 2020-10-01 上海德衡数据科技有限公司 一种数据中心管理系统
US11431827B2 (en) 2019-03-27 2022-08-30 Shanghai Data Center Science Co., Ltd Data center management system

Similar Documents

Publication Publication Date Title
CN109213600B (zh) 一种基于ai云的gpu资源调度方法和装置
CN107193911B (zh) 一种基于bim模型的三维可视化引擎及web应用程序调用方法
CN105159610B (zh) 大规模数据处理系统及方法
CN102142006B (zh) 分布式文件系统的文件处理方法及装置
CN104751359B (zh) 用于支付清算的系统及方法
CN103227838B (zh) 一种多重负载均衡处理装置与方法
CN102271145A (zh) 一种虚拟计算机集群及其实施方法
CN102891896B (zh) 用于物联网海量存储的云计算基础架构系统
CN105653204A (zh) 一种基于磁盘的分布式图计算方法
CN112000703B (zh) 数据入库处理方法、装置、计算机设备和存储介质
US8903981B2 (en) Method and system for achieving better efficiency in a client grid using node resource usage and tracking
CN103106249A (zh) 一种基于Cassandra的数据并行处理系统
CN105007337A (zh) 集群系统负载均衡的方法和系统
CN105471985A (zh) 负载均衡方法及云平台计算方法、云平台
JP2015512091A5 (zh)
CN102394903B (zh) 一种主动重构计算体系构建系统
CN105956068A (zh) 基于分布式数据库的网页url去重方法
CN104102549B (zh) 一种实现多线程互斥操作的方法、装置和芯片
CN106708917A (zh) 一种数据处理方法、装置以及olap系统
CN108596723B (zh) 一种订单推送方法、系统、服务器及存储介质
CN104580503A (zh) 一种高效动态负载均衡的处理大规模数据的系统及方法
CN104021029A (zh) 一种空间信息云计算系统及其实现方法
CN104243620A (zh) 一种高性能的web生产环境架构
Kchaou et al. Towards an offloading framework based on big data analytics in mobile cloud computing environments
CN105740085A (zh) 容错处理方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140101