CN105872029A - 私有云对象存储的QoS的实现方法及系统 - Google Patents

私有云对象存储的QoS的实现方法及系统 Download PDF

Info

Publication number
CN105872029A
CN105872029A CN201610180261.5A CN201610180261A CN105872029A CN 105872029 A CN105872029 A CN 105872029A CN 201610180261 A CN201610180261 A CN 201610180261A CN 105872029 A CN105872029 A CN 105872029A
Authority
CN
China
Prior art keywords
domain name
cluster
web server
qos
qos grade
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610180261.5A
Other languages
English (en)
Inventor
吴兴义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LeTV Holding Beijing Co Ltd
LeTV Cloud Computing Co Ltd
Original Assignee
LeTV Holding Beijing Co Ltd
LeTV Cloud Computing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LeTV Holding Beijing Co Ltd, LeTV Cloud Computing Co Ltd filed Critical LeTV Holding Beijing Co Ltd
Priority to CN201610180261.5A priority Critical patent/CN105872029A/zh
Publication of CN105872029A publication Critical patent/CN105872029A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/61—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供一种私有云对象存储的QoS的实现方法及系统，其特征在于，该方法包括：根据集群承载能力，为提供私有云对象存储服务的集群配置用于负责负载均衡的web服务器；根据业务需求配置用于访问所述集群的域名，并在配置域名时，为所述域名设置对应的QoS等级；根据所述QoS等级为各域名分配相应数量的web服务器，以通过所述分配的相应数量的web服务器为各域名提供服务。本发明实施例的方法和系统实现了基于用户的私有云对象存储的QoS服务，能够有效防止内部用户过度挤占资源。

Description

私有云对象存储的QoS的实现方法及系统
技术领域
本发明实施例涉及云存储技术领域，尤其涉及一种私有云对象存储的QoS的实现方法及系统。
背景技术
私有云对象存储是一种面向企业内部的存储服务，其通过借助对象存储简单的文件操作API，广泛用于存储音乐、图片、日志等各种形式的内容。
现有的私有云对象存储，其提供存储服务的形式是随机提供服务的，即是提供无差别的用户服务。但是，由于企业内部一般划分为各个不同的部门，每个部门的业务类型各不相同，对存储的需求也各不相同，业务的重要性也各不相同。因而，如果无差别的对每个用户提供服务，可能会出现某些用户挤占资源，比如作为CDN(Content Delivery Network，内容分发网络)源站的节点可能会瞬间为多个CDN节点提供下载服务，从而造成带宽被迅速挤占，造成其他用户完全无法访问资源的情况。另外，当前网络攻击不断加剧，企业内容的安全措施不当，用户可能在遭受攻击的情况下对存储服务发起大量的攻击请求(比如对系统发起sync flood)，这会造成整个存储服务都无法使用。
总而言之，传统的无差别服务模式既无法防止网络攻击，也不能防止内部用户挤占他人资源。
发明内容
本发明实施例提供一种私有云对象存储的QoS(Quality of Service，服务质量)的实现方法及系统，用以解决现有技术中不能防止内部用户挤占他人资源，也无法防止网络攻击的缺陷，实现基于用户的私有云对象存储的QoS服务。
本发明实施例提供一种私有云对象存储的QoS的实现方法，包括：
根据集群承载能力，为提供私有云对象存储服务的集群配置用于负责负载均衡的web服务器；
根据业务需求配置用于访问所述集群的域名，并在配置域名时，为所述域名设置对应的QoS等级；
根据所述QoS等级为各域名分配相应数量的web服务器，以通过所述分配的相应数量的web服务器为各域名提供服务。
本发明实施例提供一种私有云对象存储的QoS系统，包括用于提供私有云对象存储服务的集群和用于为所述集群提供负载均衡的web服务器，所述web服务器的数量根据所述集群的承载能力设置，其中，所述系统包括：
QoS等级配置模块，用于根据业务需求配置用于访问所述集群的域名，并在配置域名时，为所述域名设置对应的QoS等级；和
服务器分配模块，用于根据所述QoS等级为各域名分配相应数量的web服务器，以通过所述分配的相应数量的web服务器为各域名提供服务。
本发明实施例提供的私有云对象存储的QoS的实现方法及系统，通过为云端集群配置用于负载均衡的web服务器和为访问用户的域名配置QoS等级，实现了用户的私有云对象存储的QoS服务，能够有效防止内部用户过度挤占资源。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明私有云对象存储的QoS的实现方法实施例流程图；
图2为本发明私有云对象存储的QoS系统的实施例结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
以下结合附图，对本发明实施例做更详细的阐述。
图1示意性地显示了本发明实施例的私有云对象存储的QoS的实现方法的方法流程。如图1所示，该方法包括：
步骤S101：根据集群承载能力，为提供私有云对象存储服务的集群配置用于负责负载均衡的web服务器。
私有云对象存储服务通过云端(也即是配置的存储集群)为企业内部提供存储服务。本发明实施例可根据集群的承载能力，也即是集群的存储容量，为集群配置多个web服务器，通过web服务器对集群进行负载均衡。例如，对一个存储能力为10GB的集群，可以为其配置十个存储能力分别为1GB的web服务器，以供用户进行存储和下载使用。
步骤S102：根据业务需求配置用于访问集群的域名。
一般通过配置访问域名，将访问域名提供给用户，以使用户通过指定的域名访问集群。一般配置域名是根据业务需求，由相应的部门或用户提出申请，在用户申请时根据用户需求进行域名配置。
步骤S103：在配置域名时，为配置的域名设置对应的QoS等级。
在配置域名时，需要为各个配置的域名设置QoS等级，如将业务重要的用户对应的域名设置为较高的QoS等级，以为重要的客户提供更优质的服务。其中，QoS等级的配置可以通过LVS(Linux Virtual Server，Linux虚拟服务器)实现。
步骤S104：根据QoS等级为各域名分配相应数量的web服务器，以通过分配的web服务器为各域名提供服务。
在配置好QoS等级后，根据各域名的等级为其分配相应数量的web服务器。例如，对QoS等级为4的域名分配四个1GB的web服务器，对QoS等级为3的域名分配三个1GB的web服务器，对QoS等级为1的域名分配一个1GB的web服务器。由此，用户在通过域名访问集群时，就可以根据其QoS等级，利用相应数量的web服务器从集群进行下载服务或向集群发送存储服务。显而易见地，对高QoS等级的域名，用户就可以通过多个web服务器获得集群存储服务，速度会更快，因而能够根据业务重要程度得到符合需求的服务质量。
通过本实施例的方法，即可打破传统的无差别服务，为不同等级的用户提供不同级别的服务，从而通过QoS等级配置为高等级的用户提供及时地优质服务，防止内部用户过度挤占资源，造成重要的业务被堵塞等不良。
优选地，在本发明实施例中，分配给任意一个域名的web服务器的个数不能超过预设阀值，该预设阀值可以根据集群承载能力和业务需求进行设定，如优选设定为不超过集群能承载的总web服务器个数的一半(即为集群配置的全部web服务器的个数的一半)。由此，在遭受到网络攻击的情况下，通过web服务器的负载均衡，集群中仍有一半的web服务器能够为用户提供服务，可以有效防止因受到网络攻击而造成的私有云存储服务瘫痪的不良。
优选地，在本发明实施例中，可以根据各个用户的业务情况变化，更改该用户对应的域名的QoS等级，以通过增减提供服务的web服务器的个数，保证用户得到符合实际要求的服务质量。其中，更改域名的QoS等级可以通过一键扩容的方式实现，即在用户提出申请时，接收到用户申请，立即更改相应域名的QoS等级，并重新根据QoS等级增加或减少为该域名服务的web服务器的个数。
优选地，在本发明实施例中，当用户的业务量迅速增长而提出扩容请求时，也需要保证分配到该域名的web服务器的个数不超过预设的阀值。当业务量增长到不能有效保证服务质量时，可以根据业务需求，对云存储的集群进行扩容(如增加集群)。在对集群进行扩容后，需要增加配置相应数量的web服务器，以与云端的集群服务能力相匹配，从而满足前端用户的存储需求。如对10GB的集群，扩容至20GB时，相应的web服务器就由10个1GB的web服务器增加为20个。在集群端扩容后，就可以根据前端用户的需求，对用户的QoS等级进行更改，以重新分配匹配数量的web服务器，从而保证优质的服务。
图2示意性地显示了本发明实施例的私有云对象存储的QoS系统的框架结构。如图2所示，该系统包括用于提供私有云对象存储服务的云端集群1、为集群1配置的用于负责负载均衡的多个web服务器2、QoS等级配置模块4和服务器分配模块5。其中，QoS等级配置模块4用于根据业务需求配置用于访问集群1的域名3，并在配置域名3时，为域名3设置对应的QoS等级。服务器分配模块5用于根据QoS等级为各域名3分配相应数量的web服务器2，以通过分配的相应数量的web服务器2为各域名3提供服务。
在实际应用中，为集群1配置的web服务器2的个数，根据集群1的承载能力确定，如集群1的承载能力为10GB，则如图2所示为集群1配置10个1GB的web服务器2。之后，根据用户申请，通过QoS等级配置模块4为相应的用户配置用于访问集群1的域名3，并根据业务类型(如重要程度)为域名3设置相应的QoS等级。配置好包含QoS等级的域名后，就可以通过服务器分配模块5为各域名分配相应数量的web服务器2。之后，用户就可以通过为其配置的域名3访问集群1，以享用存储和下载服务。在提供服务时，系统会根据为访问的域名3分配的web服务器2，通过分配的web服务器2为相应的域名提供服务。由此，就可以通过增减web服务器的数量，来保证对不同用户的服务质量，以避免内部用户过度挤占资源，影响服务质量。
如图2所示，本发明实施例的系统中还可以设置有集群扩容模块6，用于在根据业务需求对集群1进行扩容时，对扩容后的集群，根据集群承载能力增加配置相应数量的web服务器2。由此，在集群的承载能力超出现有服务能力时，就可以通过集群扩容模块6对集群1进行扩容和负载均衡配置。以实现对后端服务能力的弹性扩展。
如图2所示，本发明实施例的系统还可以包括一键扩容模块7，用于在接收到用户请求时，重新配置相应的域名的QoS等级，并根据新的QoS等级相应增加或减少为域名分配的web服务器的数量。由此，用户在其业务重要程度发生变化时，如业务类型发生变化时，就可以申请更改QoS等级。系统通过一键扩容模块7接收到用户请求，立即重新配置该用户使用的域名3的QoS等级，并更加新的等级设定，相应地为该域名的用户增加或减少服务的web服务器的数量，从而实现对前端服务能力的弹性扩展，为用户提供符合需求的QoS服务。
优选地，为了在发生网络攻击时，保证云端集群仍保持符合需求的服务能力，本发明实施例在为各域名3分配web服务器时，会为分配的web服务器的数量设定预设阀值，保证分配的web服务器的数量不超过预设阀值。例如，可以将该预设阀值设置为集群1的全部web服务器数量的一半。这样，即使在发生网络攻击时，仍有一半的集群能够为用户提供服务，从而能够有效防范网络攻击。
本发明实施例的方法和系统，通过配置用于负载均衡的web服务器和设置QoS等级，为相应的用户提供符合需求的云端存储服务，能够实现前端和后端服务的弹性扩容，有效保证对重要业务的服务质量，防止内部用户过度挤占资源造成重要业务的阻塞。同时，为各用户设定可以分配的web服务器阀值，从而能够避免在遇到网络攻击时整个云端存储集群都无法工作的不良。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种私有云对象存储的QoS的实现方法，其特征在于，包括：
根据集群承载能力，为提供私有云对象存储服务的集群配置用于负责负载均衡的web服务器；
根据业务需求配置用于访问所述集群的域名，并在配置域名时，为所述域名设置对应的QoS等级；
根据所述QoS等级为各域名分配相应数量的web服务器，以通过所述分配的相应数量的web服务器为各域名提供服务。
2.根据权利要求1所述的方法，其特征在于，为各域名分配的web服务器的数量不超过预设阀值。
3.根据权利要求2所述的方法，其特征在于，所述预设阀值为所述集群的全部web服务器数量的一半。
4.根据权利要求3所述的方法，其特征在于，针对扩容后的集群，根据集群承载能力增加配置相应数量的web服务器。
5.根据权利要求4所述的方法，其特征在于，在接收到扩容请求时，重新配置相应的域名的QoS等级，并根据新的QoS等级相应增加或减少为所述域名分配的web服务器的数量。
6.一种私有云对象存储的QoS系统，其特征在于，包括用于提供私有云对象存储服务的集群和用于为所述集群提供负载均衡的web服务器，所述web服务器的数量根据所述集群的承载能力设置，其中，所述系统包括：
QoS等级配置模块，用于根据业务需求配置用于访问所述集群的域名，并在配置域名时，为所述域名设置对应的QoS等级；和
服务器分配模块，用于根据所述QoS等级为各域名分配相应数量的web服务器，以通过所述分配的相应数量的web服务器为各域名提供服务。
7.根据权利要求6所述的系统，其特征在于，为各域名分配的web服务器的数量不超过预设阀值。
8.根据权利要求7所述的系统，其特征在于，所述预设阀值为所述集群的全部web服务器数量的一半。
9.根据权利要求8所述的系统，其特征在于，所述系统还包括集群扩容模块，用于在根据业务需求对所述集群进行扩容时，对扩容后的集群，根据集群承载能力增加配置相应数量的web服务器。
10.根据权利要求9所述的系统，其特征在于，所述系统还包括一键扩容模块，用于在接收到扩容请求时，重新配置相应的域名的QoS等级，并根据新的QoS等级相应增加或减少为所述域名分配的web服务器的数量。
CN201610180261.5A 2016-03-28 2016-03-28 私有云对象存储的QoS的实现方法及系统 Pending CN105872029A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610180261.5A CN105872029A (zh) 2016-03-28 2016-03-28 私有云对象存储的QoS的实现方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610180261.5A CN105872029A (zh) 2016-03-28 2016-03-28 私有云对象存储的QoS的实现方法及系统

Publications (1)

Publication Number Publication Date
CN105872029A true CN105872029A (zh) 2016-08-17

Family

ID=56624881

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610180261.5A Pending CN105872029A (zh) 2016-03-28 2016-03-28 私有云对象存储的QoS的实现方法及系统

Country Status (1)

Country Link
CN (1) CN105872029A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108075931A (zh) * 2016-11-10 2018-05-25 北京金山云网络技术有限公司 一种测试系统、测试方法、控制服务器和执行服务器
CN108287669A (zh) * 2018-01-26 2018-07-17 平安科技（深圳）有限公司 数据存储方法、装置及存储介质
WO2019206033A1 (zh) * 2018-04-25 2019-10-31 阿里巴巴集团控股有限公司 服务器配置的方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101296512A (zh) * 2008-05-15 2008-10-29 华为技术有限公司 一种业务服务质量控制方法、装置和系统
CN101382912A (zh) * 2008-09-02 2009-03-11 中国科学院软件研究所 一种面向应用服务器的资源敏感性能优化方法及其系统
CN101572719A (zh) * 2008-04-30 2009-11-04 华为技术有限公司 策略决策功能实体、家庭网关、服务质量控制方法及系统
CN102904837A (zh) * 2012-08-08 2013-01-30 西安交通大学 一种基于虚拟业务平面的区分业务生存性方法
CN103747071A (zh) * 2013-12-31 2014-04-23 合肥有线电视宽带网络有限公司 一种广电网络私有云端语音数据处理均衡系统及方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101572719A (zh) * 2008-04-30 2009-11-04 华为技术有限公司 策略决策功能实体、家庭网关、服务质量控制方法及系统
CN101296512A (zh) * 2008-05-15 2008-10-29 华为技术有限公司 一种业务服务质量控制方法、装置和系统
CN101382912A (zh) * 2008-09-02 2009-03-11 中国科学院软件研究所 一种面向应用服务器的资源敏感性能优化方法及其系统
CN102904837A (zh) * 2012-08-08 2013-01-30 西安交通大学 一种基于虚拟业务平面的区分业务生存性方法
CN103747071A (zh) * 2013-12-31 2014-04-23 合肥有线电视宽带网络有限公司 一种广电网络私有云端语音数据处理均衡系统及方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108075931A (zh) * 2016-11-10 2018-05-25 北京金山云网络技术有限公司 一种测试系统、测试方法、控制服务器和执行服务器
CN108075931B (zh) * 2016-11-10 2020-11-03 北京金山云网络技术有限公司 一种测试系统、测试方法、控制服务器和执行服务器
CN108287669A (zh) * 2018-01-26 2018-07-17 平安科技（深圳）有限公司 数据存储方法、装置及存储介质
CN108287669B (zh) * 2018-01-26 2019-11-12 平安科技（深圳）有限公司 数据存储方法、装置及存储介质
WO2019206033A1 (zh) * 2018-04-25 2019-10-31 阿里巴巴集团控股有限公司 服务器配置的方法和装置
CN110401553A (zh) * 2018-04-25 2019-11-01 阿里巴巴集团控股有限公司 服务器配置的方法和装置
CN110401553B (zh) * 2018-04-25 2022-06-03 阿里巴巴集团控股有限公司 服务器配置的方法和装置
US11431669B2 (en) 2018-04-25 2022-08-30 Alibaba Group Holding Limited Server configuration method and apparatus

Similar Documents

Publication Publication Date Title
US10057179B2 (en) Policy based scaling of network resources
Bonvin et al. A self-organized, fault-tolerant and scalable replication scheme for cloud storage
CN105516347B (zh) 一种流媒体服务器的负载均衡调配的方法及装置
CN103051564B (zh) 资源动态调配的方法和装置
CN104317742B (zh) 一种优化空间管理的自动精简配置方法
CN106528287B (zh) 计算机系统资源分配方法和装置
CN101984632A (zh) 一种分布式缓存系统中负荷分配方法、装置及服务器
US20110138384A1 (en) Dynamically provisioning virtual machines
US9860317B1 (en) Throughput throttling for distributed file storage services with varying connection characteristics
Bazarbayev et al. Content-based scheduling of virtual machines (VMs) in the cloud
CN109688222A (zh) 共享计算资源的调度方法、共享计算系统、服务器及存储介质
US20150189011A1 (en) Peer-to-peer network prioritizing propagation of objects through the network
CN105872029A (zh) 私有云对象存储的QoS的实现方法及系统
CN107105013B (zh) 文件的处理方法、服务器、终端和系统
CN106209402A (zh) 一种虚拟网络功能的伸缩方法和设备
US11093288B2 (en) Systems and methods for cluster resource balancing in a hyper-converged infrastructure
CN108881512A (zh) Ctdb的虚拟ip均衡分配方法、装置、设备及介质
CN113655969B (zh) 一种基于流式分布式存储系统的数据均衡存储方法
Khan et al. Clouds of small things: Provisioning infrastructure-as-a-service from within community networks
CN108390956A (zh) 一种为虚拟机配置互联网协议ip地址的方法和系统
CN103095806A (zh) 一种面向大电网的实时数据库系统的负载均衡管理系统
CN107185239A (zh) 一种网络游戏中用户跨服游戏的方法及服务器系统
CN109739440B (zh) 分布式共享存储方法、存储介质、电子设备及系统
CN106713378A (zh) 实现多个应用服务器提供服务的方法和系统
CN109962961A (zh) 一种内容分发网络cdn服务节点的重定向方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160817