CN107741892A - 测试集群的搭建方法及其系统、以及电子设备 - Google Patents
测试集群的搭建方法及其系统、以及电子设备 Download PDFInfo
- Publication number
- CN107741892A CN107741892A CN201710903659.1A CN201710903659A CN107741892A CN 107741892 A CN107741892 A CN 107741892A CN 201710903659 A CN201710903659 A CN 201710903659A CN 107741892 A CN107741892 A CN 107741892A
- Authority
- CN
- China
- Prior art keywords
- cluster
- line
- test
- main frame
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2273—Test methods
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Test And Diagnosis Of Digital Computers (AREA)
Abstract
本公开提供了一种测试集群的搭建方法,包括:获取线上集群的配置信息,其中,配置信息包括线上集群中各主机包含的服务组件类型;以及基于配置信息,搭建用于模拟线上集群的测试集群,其中,测试集群包含的服务组件类型和线上集群包含的服务组件类型相同,且测试集群包含的主机数量少于线上集群包含的主机数量。本公开还提供了一种测试集群的搭建系统和一种电子设备。
Description
技术领域
本公开涉及一种测试集群的搭建方法及其系统、以及电子设备。
背景技术
一个大数据平台通常是由许多分布式服务组成的服务器集群,并且通过一个集群管理器来进行管理。集群管理器管理大数据平台时,通常需要执行一些操作,比如升级,或者添加/删除某些组件,等等,此时通常会对大数据平台造成很大影响。
相关技术提供了一种解决方案,即搭建一个与大数据平台具有同等配置的测试集群来提前试验这些操作,然而在实现本公开实施例的过程中,发明人发现相关技术至少存在以下缺陷:由于一个大数据平台通常是由几十台甚至上百台服务器组成的,因此搭建一个与该大数据平台具有同等配置的测试环境,对硬件资源是极大的浪费。
发明内容
本公开的一个方面提供了一种测试集群的搭建方法,该测试集群的搭建方法包括:获取线上集群的配置信息,其中,上述配置信息包括上述线上集群中各主机包含的服务组件类型;以及基于上述配置信息,搭建用于模拟上述线上集群的测试集群,其中,上述测试集群包含的服务组件类型和上述线上集群包含的服务组件类型相同,且上述测试集群包含的主机数量少于上述线上集群包含的主机数量。
可选地,基于上述配置信息,搭建用于模拟上述线上集群的测试集群包括:基于上述配置信息,确定出上述线上集群中包含有管理服务组件的各个第一线上主机;以及在上述测试集群中为上述各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
可选地,基于上述配置信息,搭建用于模拟上述线上集群的测试集群包括:基于上述配置信息,确定出上述线上集群中所包含的被管理服务组件的类型;以及基于类型确定结果,在上述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟上述线上集群中包含的被管理服务组件。
可选地,基于类型确定结果,在上述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟上述线上集群中包含的被管理服务组件包括:基于类型确定结果,在上述测试集群中为一种或多种类型的被管理服务组件搭建一个上述第二测试主机。
可选地,基于上述配置信息,确定出上述线上集群中所包含的被管理服务组件的类型包括:基于上述配置信息,确定出上述线上集群中仅包含被管理服务组件的第三类线上主机;以及分析所有第三类线上主机,确定上述线上集群中所包含的被管理服务组件的类型。
可选地,上述测试集群的搭建方法还包括:基于上述配置信息,确定包含的服务组件类型相同的同类线上主机;以及在上述测试集群中为上述同类线上主机搭建至少一个测试主机。
本公开的另一个方面还提供了一种测试集群的搭建系统,该测试集群的搭建系统包括:获取模块,用于获取线上集群的配置信息,其中,上述配置信息包括上述线上集群中各主机包含的服务组件类型;以及搭建模块,用于基于上述配置信息,搭建用于模拟上述线上集群的测试集群,其中,上述测试集群包含的服务组件类型和上述线上集群包含的服务组件类型相同,且上述测试集群包含的主机数量少于上述线上集群包含的主机数量。
本公开的另一个方面还提供了一种电子设备,用于实现测试集群的搭建,上述电子设备包括处理器,上述处理器用于:获取线上集群的配置信息,其中,上述配置信息包括上述线上集群中各主机包含的服务组件类型;以及基于上述配置信息,搭建用于模拟上述线上集群的测试集群,其中,上述测试集群包含的服务组件类型和上述线上集群包含的服务组件类型相同,且上述测试集群包含的主机数量少于上述线上集群包含的主机数量。
可选地,上述处理器还用于:基于上述配置信息,确定出上述线上集群中包含有管理服务组件的各个第一线上主机;以及在上述测试集群中为上述各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
可选地,上述处理器还用于:基于上述配置信息,确定出上述线上集群中所包含的被管理服务组件的类型;以及基于类型确定结果,在上述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟上述线上集群中包含的被管理服务组件。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的适于实现测试集群的搭建方法及其系统的应用场景;
图2示意性示出了根据本公开实施例的测试集群的搭建方法的流程图;
图3A示意性示出了根据本公开实施例的基于配置信息搭建用于模拟线上集群的测试集群的流程图;
图3B示意性示出了根据本公开另一实施例的基于配置信息搭建用于模拟线上集群的测试集群的流程图;
图3C示意性示出了根据本公开实施例的基于配置信息确定出线上集群中所包含的被管理服务组件的类型的流程图;
图3D示意性示出了根据本公开另一实施例的测试集群的搭建方法的流程图;
图3E示意性示出了根据本公开另一实施例的测试集群的搭建方法的流程图;
图4示意性示出了根据本公开实施例的测试集群的搭建系统的框图;以及
图5示意性示出了根据本公开实施例的可实现测试集群的搭建方法的计算机系统的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种测试集群的搭建方法,包括:获取线上集群的配置信息,其中,配置信息包括线上集群中各主机包含的服务组件类型;以及基于配置信息,搭建用于模拟线上集群的测试集群,其中,测试集群包含的服务组件类型和线上集群包含的服务组件类型相同,且测试集群包含的主机数量少于线上集群包含的主机数量。
图1示意性示出了根据本公开实施例的适于实现测试集群的搭建方法及其系统的应用场景。
如图1所示,在该应用场景中,线上集群110可以包括服务器111、服务器112、服务器113……,其中,服务器111、服务器112、服务器113……中的每个可以包含一种或者多种服务组件,进一步,服务组件类型可以包括管理服务组件的类型和被管理服务组件的类型。在用户需要对线上集群执行一些操作时,无法预知这些操作对线上集群产生的影响,因此,可以搭建测试集群来模拟上述线上集群,其中,该测试集群与该线上集群需要具有同等功能。
下面结合图1的应用场景,参考图2、图3A~3E来描述根据本公开示例性实施方式的测试集群的搭建方法。需要注意的是,上述应用场景仅是为了便于理解本公开的精神和原理而示出,本公开的实施方式在此方面不受任何限制。相反,本公开的实施方式可以应用于适用的任何应用场景。
图2示意性示出了根据本公开实施例的测试集群的搭建方法的流程图。
如图2所示,该测试集群的搭建方法可以包括操作S201和S202,其中:
在操作S201,获取线上集群的配置信息,其中,该配置信息可以包括线上集群中各主机包含的服务组件类型。
在本公开的实施例中,线上集群是指真实环境中的多个服务器(又称为主机)组成的服务器集群,其中,该集群中每个服务器都可以包含一种或者多种服务组件,每种服务组件又可以包括一个或者多个服务组件。不同类型的服务组件所提供的服务不同。
需要说明的是,在本公开的实施例中,服务组件可以包括但不限于管理服务组件和被管理服务组件。其中,,管理服务组件用于提供管理服务,被管理服务组件用于协助管理服务组件。
实际应用中,由于线上集群一般包含的主机数量较大,因此可以设置一集群管理器,用于管理这些主机。其中,集群管理器管理线上集群时,可以对该线上集群执行一些操作,这些操作可以包括但不限于对组件升级、添加和/或删减组件,等等。
在本公开的实施例中,获取线上集群的配置信息的方式可以包括多种,例如可以在集群管理器中增加一功能,专门用于将上述配置信息完全导出。其中,此处,配置信息可以包括但不限于线上集群中各主机包含的服务组件类型以及每种类型的服务组件的数量和分布情况等。
在操作S202,基于配置信息,搭建用于模拟线上集群的测试集群,其中,测试集群包含的服务组件类型和线上集群包含的服务组件类型相同,且测试集群包含的主机数量少于线上集群包含的主机数量。
由于测试集群需要对线上集群进行模拟,实现与线上集群等同的功能,因此需要保证测试集群中包含的服务组件类型和线上集群中包含的服务组件类型相同。由于线上集群中包含的每种服务组件类型可以实现一种服务,并且这种服务往往是由一个或者多个组件共同实现的,因此为了避免浪费资源,在保证实现测试集群与线上集群等同的功能的基础上,可以尽量压缩主机数量,具体地,在搭建测试集群时,可以将前述的需要由一个或者多个组件共同实现的服务中的组件数量压缩,以实现使用尽可能少的组件来实现该服务,优选的,可以将组件数量压缩为1个。
具体地,在本公开的实施例中,在获取配置信息中包含的服务组件后,还可以判别该服务组件是何种组件。若该服务组件为管理服务组件,则搭建的测试集群中包含上述全部管理服务组件。若服务组件为被管理服务组件,则确定该被管理服务组件的类型,其中,不同的被管理服务组件的类型用于提供不同的服务。为了实现模拟线上集群的目的,搭建测试集群时,该测试集群包含的被管理服务组件的类型与线上集群包含的被管理服务组件的类型相同。若线上集群的每一种被管理服务组件的类型中均包含有多个被管理服务组件,其中,属于相同类型的被管理服务组件用于提供相同的服务。则在搭建测试集群时,该测试集群中被管理服务组件的类型所包含的被管理服务组件的个数,小于线上集群中同种被管理服务组件的类型所包含的被管理服务组件的个数。换言之,测试集群中包含的用于提供同种服务的被管理服务组件的个数,小于线上集群中用于提供与上述同种服务相同的被管理服务组件的个数。优选的,在搭建测试集群时,该测试集群可以包含上述所有管理服务组件以及每一种被管理服务组件的类型中的任意一个被管理服务组件。
例如,假设某线上集群中包含有10个管理服务组件和50个被管理服务组件,其中,15个被管理服务组件均用于提供通信服务,25个被管理服务组件均用于提供运算服务,10个被管理服务组件均用于提供检索服务。则上述用于提供通信服务的15个被管理服务组件属于通信类型,上述用于提供运算服务的15个被管理服务组件属于运算类型,上述用于提供检索服务的15个被管理服务组件属于检索类型。在搭建测试集群时,为了保证测试集群与线上集群实现等同的功能且使用尽量少的硬件资源,则可以在该测试集群搭建10个上述的管理服务组件,1至M个通信类型的被管理服务组件、1至N个运算类型的被管理服务组件和1至L个检索类型的被管理服务组件,其中,M小于15,N小于25,L小于10。优选的,可以令M等于1,N等于1,L等于1。
与本公开实施例所提供的技术方案不同,目前,在相关技术中,线上集群的集群管理器中通常会记录线上集群的所有配置信息,然后将上述配置信息汇总,并以一个有机的方式将汇总后的配置信息组织在一起,类似于该线上集群的DNA信息。然后让另一个集群管理器能够通过分析该线上集群的DNA信息,重新构建一个新的集群,即测试机群。由于该线上集群的DNA信息中记录有线上集群的所有配置信息,因此通过相关技术提供的上述技术方案只能搭建出一个与线上集群同等规模(即一模一样)的测试集群,然而实际上,本着节约资源的原则,用户通常不希望测试集群与生产环境的线上集群是同等规模的。
通过本公开的实施例,如前述,可以实现利用较少的硬件资源配置一个与线上集群具有同等功能的测试集群,以实现减少资源浪费的目的。
下面参考图3A~图3E,结合具体实施例对图2所示的方法做进一步说明。
图3A示意性示出了根据本公开实施例的基于配置信息搭建用于模拟线上集群的测试集群的流程图。
在该实施例中,参考图2中的操作S202(即基于配置信息,搭建用于模拟线上集群的测试集群)可以包括操作S301和S302。如图3A所示,其中:
在操作S301,基于配置信息,确定出线上集群中包含有管理服务组件的各个第一线上主机。
在操作S302,在测试集群中为各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
在本公开的实施例中,第一线上主机可以只包含有管理服务组件,也可以包含有管理服务组件和被管理服务组件,在此不做限定。
根据本公开的实施例,可以从线上集群的服务组件中找到管理服务组件,并确定出包含有该管理服务组件的第一线上主机,其中,第一线上主机可以包括一个或多个主机。然后在测试集群中,为各个第一线上主机中的每个搭建一个与之对应的第一测试主机,其中,该第一测试主机用于模拟与之对应的第一线上主机,且第一测试主机包含的管理服务组件跟与其相对应的第一线上主机中包含的管理服务组件相同。
需要说明的是,第一测试主机的个数与第一线上主机的个数相同。
通过本公开的实施例,在测试集群中搭建的管理服务组件与线上集群包含的管理服务组件相同,可以使测试集群的管理功能更加全面。
图3B示意性示出了根据本公开另一实施例的基于配置信息搭建用于模拟线上集群的测试集群的流程图。
在该实施例中,参考图2中的操作S202(即基于配置信息,搭建用于模拟线上集群的测试集群)除了可以包括上述描述的相应操作之外,还可以包括操作S401和S402。如图3B所示,其中:
在操作S401,基于配置信息,确定出线上集群所包含的被管理服务组件的类型。
在操作S402,基于类型确定结果,在测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟线上集群中包含的被管理服务组件。
在本公开的实施例中,每个第二测试主机至少包含一个用于提供同种服务的被管理服务组件。
根据本公开的实施例,可以从线上集群包含的服务组件中找到被管理服务组件,并确定出被管理服务组件的类型。然后在测试集群中,为每种类型的被管理服务组件搭建至少一个第二测试主机,其中,该第二测试主机用于模拟线上集群中包含的被管理服务组件,且该第二测试主机的数量与第一测试主机的数量之和小于线上集群包含的主机总数量。
通过本公开的实施例,搭建一个与线上集群具有相同功能、相同配置、且计算结点规模较小的测试集群,不仅可以实现快速模拟线上集群的目的,还可以进行异常及问题分析的工作。
作为一种可选的实施例,基于类型确定结果,在测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟线上集群中包含的被管理服务组件可以包括:基于类型确定结果,在测试集群中为一种或多种类型的被管理服务组件搭建一个第二测试主机。
在本公开的实施例中,根据确定的被管理服务组件的类型,在测试集群中,搭建第二测试主机,其中,搭建第二测试主机的方式可以包括多中,例如,可以为每一种类型的被管理服务组件搭建一个第二测试主机,也可以为全部类型中的几种类型的被管理服务组件搭建一个第二测试主机,还可以为全部类型的被管理服务组件搭建一个第二测试主机,在此不做限定。
例如,线上集群包含有6种类型的被管理服务组件,在测试集群中,可以为该6种类型的被管理服务组件搭建6个第二测试主机,其中,每一个第二测试主机包含同种类型的被管理服务组件;也可以为其中2种类型的被管理服务组件搭建一个第二测试主机,为剩余的4种类型的被管理服务组件搭建一个第二测试主机;还可以为这6种类型的被管理服务组件共同搭建一个第二测试主机。
通过本公开的实施例,在测试集群中为一种或多种类型的被管理服务组件搭建一个第二测试主机,实现了利用较少的硬件资源模拟线上集群的目的,降低了对硬件资源的消耗。
图3C示意性示出了根据本公开实施例的基于配置信息确定出线上集群中所包含的被管理服务组件的类型的流程图。
在该实施例中,参考图3B中的操作S401(即基于配置信息,确定出线上集群中所包含的被管理服务组件的类型)可以包括操作S501和S502。如图3C所示,其中:
在操作S501,基于配置信息,确定出线上集群中仅包含被管理服务组件的第二线上主机。
在操作S502,分析所有第二线上主机,确定线上集群中所包含的被管理服务组件的类型。
在本公开的实施例中,线上集群的管理服务组件和被管理服务组件被包含在不同主机中,换言之,包含被管理服务组件的第二线上主机中不包含管理服务组件。
根据本公开的实施例,可以从线上集群包含的服务组件中找到被管理服务组件,然后从线上集群的各主机中确定出仅包含该被管理服务组件的第二线上主机。然后确定第二线上主机所提供的服务类型,进而确定出线上集群中所包含的被管理服务组件的类型。
通过本公开的实施例,根据分析出的第二线上主机所提供的服务类型,实现了确定线上主机所包含的被管理服务组件的类型的目的。
图3D示意性示出了根据本公开另一实施例的测试集群的搭建方法的流程图。
在该实施例中,该测试集群的搭建方法除了可以包括参考图2中描述的相应操作之外,还可以包括操作S601和S602为了描述的简洁起见,这里省略对图2中相应操作的描述。
如图3D所示,该测试集群的搭建方法还可以包括操作S601和S602。其中:
在操作S601,基于配置信息,确定包含的服务组件类型相同的同类线上主机。
在操作S602,在测试集群中为同类线上主机搭建至少一个测试主机。
需要说明的是,相同的服务组件类型用于提供相同的服务,不同的服务组件类型用于提供不同的服务,包含服务组件类型相同的同类线上主机所提供的服务相同。根据本公开的实施例,若在线上集群中,包含服务组件类型相同的同类线上主机的数量为N,则在测试集群中可以为上述同类线上主机搭建M个测试主机,其中M为大于等于1小于N的正整数。优选地,M可以等于1。
例如,线上集群包含5台主机,第一台线上主机包含服务组件类型A、服务组建类型B,第二台线上主机包含服务组件类型A、服务组建类型B、服务组建类型C,第三台线上主机包含服务组件类型A、服务组建类型B、服务组建类型C,第四台线上主机包含服务组件类型A、服务组建类型B、服务组建类型C,第五台线上主机包含服务组件类型A。由于第二台线上主机、第三台线上主机、第四台线上主机包含的服务组件类型相同,所以第二台线上主机、第三台线上主机、第四台线上主机为同类线上主机。因此在搭建测试集群时,可以为第二台线上主机、第三台线上主机、第四台线上主机搭建一个测试主机。
通过本公开的实施例,为同类线上主机搭建至少一个测试主机,实现了利用少量硬件资源模拟线上集群的目的,减少对硬件资源的浪费。
图3E示意性示出了根据本公开另一实施例的测试集群的搭建方法的流程图。
在本公开的实施例中,一种分布式服务可以由两种类型(管理组件的类型和被管理组件的类型)的服务组件构成。如分布式文件系统(Hadoop Distributed File System,可以简称为HDFS)服务可以由NameNode、SecondNameNode和DateNode这三种服务组件构成,其中,NameNode和SecondNameNode用于提供管理服务,DateNode用于提供被管理(Slave)服务,一般地,包含管理服务组件的主机较少,包含被管理服务组件的主机较多,且管理服务组件可以提供对外服务,被管理服务组件可以配合管理服务组件。
根据本公开的实施例,在获取一个线上集群的配置信息时,可以得到所有分布式服务的各服务组件和线上集群中的各主机之间的分布关系。于是,将各主机按照在其上部署的所有服务组件进行分组,如果两台主机上的所有服务组件都是一致的,则可以将这两台主机被分到统一组中。而对于每一台主机,若该主机只包含有被管理服务组件,则该主机是一台被管理服务组件类型的主机。然后,遍历线上集群中每一台被管理服务组件类型的主机上的所有被管理服务组件的类型所提供的服务,只要保证每个被管理服务组件的类型所提供的服务至少出现一次,即可以保证测试集群是能正常运行起来的,其它被管理服务组件类型的主机可以不必在进行创建。根据上述实施例,实现了使用一个规模较小的测试集群,来模拟一个规模较大的线上集群,且该测试集群中包含有线上集群所提供的所有服务,且这个服务在该测试集群中可以正常工作。
如图3E所示,M1、M2和M3用于提供管理服务组件类型所提供的服务,S1、S2和S3用于提供被管理服务组件类型所提供的服务,由于S1、S2和S3所包含的被管理服务组件相同,故而所提供的服务也相同,因此,在创建测试集群时,可以创建M1、M2、M3,以及S1、S2和S3中的任何一个,例如,可以创建S1。
图4示意性示出了根据本公开实施例的测试集群的搭建系统的框图。
在该实施例中,该加速硬盘读写的系统400可以包括获取模块410和搭建模块420。如图4所示,其中:
获取模块410用于获取线上集群的配置信息,其中,配置信息包括线上集群中各主机包含的服务组件类型;以及
搭建模块420用于基于配置信息,搭建用于模拟线上集群的测试集群,其中,测试集群包含的服务组件类型和线上集群包含的服务组件类型相同,且测试集群包含的主机数量少于线上集群包含的主机数量。
通过本公开的实施例,如前述,可以实现利用较少的硬件资源配置一个与线上集群具有同等功能的测试集群,以实现减少资源浪费的目的。
作为一种可选的实施例,本公开的另一个方面还提供了一种电子设备,用于实现测试集群的搭建,该电子设备可以包括处理器,处理器可以用于:获取线上集群的配置信息,其中,配置信息包括线上集群中各主机包含的服务组件类型;以及基于配置信息,搭建用于模拟线上集群的测试集群,其中,测试集群包含的服务组件类型和线上集群包含的服务组件类型相同,且测试集群包含的主机数量少于线上集群包含的主机数量。
通过本公开的实施例,如前述,可以实现利用较少的硬件资源配置一个与线上集群具有同等功能的测试集群,以实现减少资源浪费的目的。
作为一种可选的实施例,上述处理器还可以用于:基于配置信息,确定出线上集群中包含有管理服务组件的各个第一线上主机;以及在测试集群中为各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
通过本公开的实施例,在测试集群中搭建的管理服务组件与线上集群包含的管理服务组件相同,可以使测试集群的管理功能更加全面。
作为一种可选的实施例,上述处理器还可以用于:基于配置信息,确定出线上集群中所包含的被管理服务组件的类型;以及基于类型确定结果,在测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟线上集群中包含的被管理服务组件。
通过本公开的实施例,搭建一个与线上集群具有相同功能、相同配置、且计算结点规模较小的测试集群,不仅可以实现快速模拟线上集群的目的,还可以进行异常及问题分析的工作。
可以理解的是,获取模块410以及搭建模块420可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本发明的实施例,获取模块410以及搭建模块420中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以以对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式的适当组合来实现。或者,获取模块410以及搭建模块420中的至少一个可以至少被部分地实现为计算机程序模块,当该程序被计算机运行时,可以执行相应模块的功能。
图5示意性示出了根据本公开实施例的可实现加速硬盘读写的方法的计算机系统的框图。
如图5所示,计算机系统500包括处理器510和可读存储介质520。该计算机系统500可以执行上面参考图2、图3A~图3E描述的方法。
具体地,处理器510例如可以包括获取模块410、搭建模块420、通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器510还可以包括用于缓存用途的板载存储器。处理器510可以是用于执行参考图2、图3A~图3E描述的根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
可读存储介质520,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质520可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质520的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
可读存储介质520可以包括计算机程序521,该计算机程序521可以包括代码/计算机可执行指令,其在由处理器510执行时使得处理器510执行例如上面结合图2、图3A~图3E所描述的方法流程及其任何变形。
计算机程序521可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序521中的代码可以包括一个或多个程序模块,例如包括模块521A、模块521B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器510执行时,使得处理器510可以执行例如上面结合图2、图3A~图3E所描述的方法流程及其任何变形。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (10)
1.一种测试集群的搭建方法,包括:
获取线上集群的配置信息,其中,所述配置信息包括所述线上集群中各主机包含的服务组件类型;以及
基于所述配置信息,搭建用于模拟所述线上集群的测试集群,其中,所述测试集群包含的服务组件类型和所述线上集群包含的服务组件类型相同,且所述测试集群包含的主机数量少于所述线上集群包含的主机数量。
2.根据权利要求1所述的方法,其中,基于所述配置信息,搭建用于模拟所述线上集群的测试集群包括:
基于所述配置信息,确定出所述线上集群中包含有管理服务组件的各个第一线上主机;以及
在所述测试集群中为所述各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
3.根据权利要求1或2所述的方法,其中,基于所述配置信息,搭建用于模拟所述线上集群的测试集群包括:
基于所述配置信息,确定出所述线上集群中所包含的被管理服务组件的类型;以及
基于类型确定结果,在所述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟所述线上集群中包含的被管理服务组件。
4.根据权利要求3所述的方法,其中,基于类型确定结果,在所述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟所述线上集群中包含的被管理服务组件包括:
基于类型确定结果,在所述测试集群中为一种或多种类型的被管理服务组件搭建一个所述第二测试主机。
5.根据权利要求3所述的方法,其中,基于所述配置信息,确定出所述线上集群中所包含的被管理服务组件的类型包括:
基于所述配置信息,确定出所述线上集群中仅包含被管理服务组件的第二线上主机;以及
分析所有第二线上主机,确定所述线上集群中所包含的被管理服务组件的类型。
6.根据权利要求1所述的方法,其中,所述方法还包括:
基于所述配置信息,确定包含的服务组件类型相同的同类线上主机;以及
在所述测试集群中为所述同类线上主机搭建至少一个测试主机。
7.一种测试集群的搭建系统,包括:
获取模块,用于获取线上集群的配置信息,其中,所述配置信息包括所述线上集群中各主机包含的服务组件类型;以及
搭建模块,用于基于所述配置信息,搭建用于模拟所述线上集群的测试集群,其中,所述测试集群包含的服务组件类型和所述线上集群包含的服务组件类型相同,且所述测试集群包含的主机数量少于所述线上集群包含的主机数量。
8.一种电子设备,用于实现测试集群的搭建,所述电子设备包括处理器,所述处理器用于:
获取线上集群的配置信息,其中,所述配置信息包括所述线上集群中各主机包含的服务组件类型;以及
基于所述配置信息,搭建用于模拟所述线上集群的测试集群,其中,所述测试集群包含的服务组件类型和所述线上集群包含的服务组件类型相同,且所述测试集群包含的主机数量少于所述线上集群包含的主机数量。
9.根据权利要求8所述的电子设备,其中,所述处理器还用于:
基于所述配置信息,确定出所述线上集群中包含有管理服务组件的各个第一线上主机;以及
在所述测试集群中为所述各个第一线上主机中的每个搭建一个第一测试主机以模拟对应的第一线上主机。
10.根据权利要求8或9所述的电子设备,其中,所述处理器还用于:
基于所述配置信息,确定出所述线上集群中所包含的被管理服务组件的类型;以及
基于类型确定结果,在所述测试集群中为每种类型的被管理服务组件搭建至少一个第二测试主机以模拟所述线上集群中包含的被管理服务组件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710903659.1A CN107741892A (zh) | 2017-09-28 | 2017-09-28 | 测试集群的搭建方法及其系统、以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710903659.1A CN107741892A (zh) | 2017-09-28 | 2017-09-28 | 测试集群的搭建方法及其系统、以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107741892A true CN107741892A (zh) | 2018-02-27 |
Family
ID=61236331
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710903659.1A Pending CN107741892A (zh) | 2017-09-28 | 2017-09-28 | 测试集群的搭建方法及其系统、以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107741892A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110825607A (zh) * | 2019-11-13 | 2020-02-21 | 郑州西亚斯学院 | 一种基于大数据的计算机网络测试系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104601622A (zh) * | 2013-10-31 | 2015-05-06 | 国际商业机器公司 | 一种部署集群的方法和系统 |
CN106941420A (zh) * | 2017-03-16 | 2017-07-11 | 北京深思数盾科技股份有限公司 | 一种集群应用环境升级方法及装置 |
-
2017
- 2017-09-28 CN CN201710903659.1A patent/CN107741892A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104601622A (zh) * | 2013-10-31 | 2015-05-06 | 国际商业机器公司 | 一种部署集群的方法和系统 |
CN106941420A (zh) * | 2017-03-16 | 2017-07-11 | 北京深思数盾科技股份有限公司 | 一种集群应用环境升级方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110825607A (zh) * | 2019-11-13 | 2020-02-21 | 郑州西亚斯学院 | 一种基于大数据的计算机网络测试系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106980669B (zh) | 一种数据的存储、获取方法及装置 | |
CN107924323B (zh) | 基于依赖的容器部署 | |
US20180101371A1 (en) | Deployment manager | |
US9223610B2 (en) | Management of virtual machine snapshots | |
US8621080B2 (en) | Accurately predicting capacity requirements for information technology resources in physical, virtual and hybrid cloud environments | |
US9201678B2 (en) | Placing a virtual machine on a target hypervisor | |
CN108830720A (zh) | 智能合约运行方法、装置、系统和计算机可读存储介质 | |
CN109634587B (zh) | 一种生成入库脚本以及数据入库的方法和设备 | |
JP7486584B2 (ja) | グレンジャー因果関係を使用する根本原因分析 | |
CN109558317A (zh) | 测试用例的处理方法及装置 | |
CN104112084B (zh) | 用于基于执行的许可发现和优化的方法和系统 | |
CN108595316A (zh) | 分布式应用的生命周期管理方法、管理器、设备和介质 | |
CN105095059A (zh) | 一种自动化测试的方法和装置 | |
CN103649907A (zh) | 高度并发处理任务的记录和执行 | |
US20190095486A1 (en) | Group determination based on multi-table dictionary codes | |
CN109934712A (zh) | 应用于分布式系统的对账方法、对账装置和电子设备 | |
CN108255476A (zh) | 用于临床数据分析的元数据驱动的程序代码生成 | |
US20210064507A1 (en) | Detecting and predicting application performance | |
CN104580194A (zh) | 面向视频应用的虚拟化资源管理方法及装置 | |
CN110082666A (zh) | 芯片测试分析方法、装置、设备及存储介质 | |
US20150081263A1 (en) | Production simulation apparatus and production simulation method | |
CN111813739A (zh) | 数据迁移方法、装置、计算机设备及存储介质 | |
CN117980923A (zh) | 用于实现量子代码的校准解码器 | |
CN107741892A (zh) | 测试集群的搭建方法及其系统、以及电子设备 | |
US8024163B2 (en) | Method and apparatus for executing multiple simulations on a supercomputer |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180227 |