CN104067221B - 使用混合群集来构建大规模测试基础结构 - Google Patents

使用混合群集来构建大规模测试基础结构 Download PDF

Info

Publication number
CN104067221B
CN104067221B CN201380006408.3A CN201380006408A CN104067221B CN 104067221 B CN104067221 B CN 104067221B CN 201380006408 A CN201380006408 A CN 201380006408A CN 104067221 B CN104067221 B CN 104067221B
Authority
CN
China
Prior art keywords
working device
cluster
node
management
device node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380006408.3A
Other languages
English (en)
Other versions
CN104067221A (zh
Inventor
M·M·琴恩塔拉帕蒂
C·贾
T·弗雷格
K·萨布拉马尼安
S·杨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN104067221A publication Critical patent/CN104067221A/zh
Application granted granted Critical
Publication of CN104067221B publication Critical patent/CN104067221B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5072Grid computing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/50Indexing scheme relating to G06F9/50
    • G06F2209/508Monitor

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

分布式计算系统。该系统将管理和工作器功能划分成不同的群集,由此使工作器群集不再有管理开销。具体地,该系统包括管理群集。该管理群集被配置成执行工作器节点的服务部署、工作器节点的服务维护、工作器节点的服务升级和回滚、工作器节点的服务监视以及工作器节点的服务报告。该系统进一步包括耦合管理群集但与管理群集分开的一个或多个工作器群集。工作器群集中的每一个都包括一个或多个工作器节点,这一个或多个工作器节点被配置成提供处理能力、存储、和网络连接性中的一个或多个,但不使用这些管理配置功能中的一个或多个。

Description

使用混合群集来构建大规模测试基础结构
技术领域
本发明涉及一种分布式计算系统。
背景技术
计算机和计算系统已经影响了现代生活的几乎每个方面。计算机通常涉及工作、休闲、保健、运输、娱乐、家政管理等。
此外,计算系统功能还可以通过计算系统的经由网络连接互连到其他计算系统的能力来增强。网络连接可包括,但不仅限于,经由有线或无线以太网的连接,蜂窝式连接,或者甚至通过串行、并行、USB或其它连接的计算机到计算机的连接。这些连接允许计算系统访问其他计算系统处的服务,并快速且有效地从其他计算系统接收应用数据。
此外,互连的计算系统可用于实现群集计算系统,在该群集计算系统中,若干分立系统一起工作以作为整体来完成分配到该群集的计算任务。一些这样的系统可具有在云中部署的群集的全部或部分。云计算允许将计算资源作为服务而非可递送产品来提供。具体地,在网络(诸如因特网)上(例如通过租赁协定)提供计算能力、软件、信息、网络连接性等。
云服务(诸如,可从华盛顿州雷蒙德市的公司获得的Windows)以低成本提供实际上无限的可缩放性和高可用性。然而,这种可缩放性可受到每一群集上预配管理功能的能力的限制。具体地,管理功能(诸如,服务部署、维护、升级和回滚、以及监视功能性)表示在每一群集上完成的大量工作。因此,可在群集处完成的除管理功能以外的工作可受到也在那个工作器群集处执行的管理功能的限制。
此外,云计算允许测试实验室基础结构开发中的新机会。然而,传统的测试实验室依赖于购买和自我维护物理机器,从而给予测试团队进行硬件安装、网络设置、打补丁等负担。在这样的物理实验室环境下,在进行中添加新硬件以及移除空闲硬件的灵活性也受到限制。
在此要求保护的主题不限于解决任何缺点或仅在诸如上述环境中操作的各个实施例。相反,提供该背景仅用以示出在其中可实践在此描述的部分实施例的一个示例性技术领域。
发明内容
一个实施例可包括分布式计算系统。该系统包括管理群集。该管理群集被配置成执行工作器节点的服务部署、工作器节点的服务维护、工作器节点的服务升级和回滚、工作器节点的服务监视以及工作器节点的服务报告。该系统进一步包括耦合管理群集但与管理群集分开的一个或多个工作器群集。工作器群集中的每一个都包括一个或多个工作器节点,这一个或多个工作器节点被配置成提供处理能力、存储、和网络连接性中的一个或多个,但不使用这些管理配置功能中的一个或多个。
另一实施例包括为分布式系统中的客户机处理作业的方法。该方法包括在分布式系统中的管理群集处接收来自客户机的作业。该方法进一步包括在该管理群集处基于作业特性将该作业分发给与该管理群集分开的工作器群集。
提供本概述是为了以简化的形式介绍将在以下具体实施方式中进一步描述的概念选择。本发明内容不旨在标识出所要求保护的主题的关键特征或必要特征,也不旨在用于帮助确定所要求保护的主题的范围。
将在以下的描述中阐述另外的特征和优点,并且部分特征和优点可从该描述中显而易见,或者可从本文教导的实践中获知。本发明的特征和优点可以通过在所附权利要求中特别指出的手段和组合来实现并获取。本发明的特征将从以下描述和所附权利要求书中变得完全显而易见,或者可通过如下所述对本发明的实践而获知。
附图说明
为了描述可获得本主题的上述和其它优点和特征的方式,将通过参考附图中示出的本主题的具体实施例来呈现以上简要描述的本主题的更具体描述。应该理解,这些附图仅描绘了各典型实施例,因此其不应被认为是对范围的限制,各实施例将通过使用附图用附加特征和细节来描述并解释,在附图中:
图1解说了包括管理群集和工作器群集的群集系统;以及
图2解说了为客户机处理作业的方法。
具体实施方式
本文中描述的一些实施例实现用于构建云计算基础结构的“混合群集”。具体地,各实施例可使用小型管理群集来管理其他工作器群集。这允许管理功能性(诸如服务部署、维护、升级和回滚以及监视)被卸载到管理群集,从而留给工作器群集更多用于执行群集作业的资源。
具体地,各实施例可使用用于提供集中监视的一个小尺寸受管群集以及用于以最少服务开销来提供虚拟机环境的若干大尺寸“原始”群集的组合。将解说各个实施例,包括适用于通用云计算以及用于测试云计算基础结构的实施例。
在一个特定示例中,可从华盛顿州雷蒙德市的公司获得的“Blackbird”是成熟的能够启用SQL AzureTM以在Windows上运行的群集管理和监视平台。本文中解说的一些实施例能够克服“原始”Windows群集的监视管道的限制以及Blackbird管理的Windows群集的服务开销的限制。各实施例可使用称作“混合群集”的基础结构——其在一个示例中是诸如Blackbird管理的Windows群集之类的用于提供集中监视的一个小尺寸管理群集和诸如“原始”Windows群集之类的用于以最少的服务开销来提供虚拟机环境的若干大尺寸工作器群集的组合。
现参考图1,解说了一个示例。图1解说用户客户机102。该用户客户机与用户104交互,并将各作业保存在作业队列106中。
图1进一步解说了管理控制台108。该管理控制台108包括允许用户监视多个环境并显示多个视图的用户界面。在一些实施例中,管理控制台108可使用Xts来实现。Xts是可从华盛顿州雷蒙德市的公司获得的Autopilot/Blackbird管理控制台。
图1解说数据中心110。数据中心110包括管理群集112。管理群集112包括作业管理器115。作业管理器115调度作业并监视作业状态。管理群集进一步包括群集管理器114、OpStore管理器116和OpStore 118。OpStore 118存储操作信息和性能信息。如所述的,在一些实施例中,管理群集112可以使用Blackbird管理的群集来实现。
数据中心110进一步包括多个工作器群集。在所解说的示例中,解说了单个工作器群集120,但应该领会,可实现实际上任何数量的工作器群集。每个工作器群集可包括多个工作器节点。在所解说的该示例中,示出了工作器节点122-1和122-2。尽管示出了仅两个工作器节点(一般被称为122),但应该领会,在工作器群集120中可实现实际上任何数目的工作器节点122。
在所解说的示例中,每一工作器节点122包括工作器角色实例,其在本文中可被称为工作器124。工作器124被配置成启动驱动程序,并使用该驱动程序来执行作业案例。工作器124还跟踪作业执行状态。
在所解说的示例中,每一工作器节点122进一步包括运行时信息模块126。该运行时信息模块126包括拓扑信息和通信端点。运行时信息模块126还向管理群集112发送文件。
在所解说的示例中,每一工作器节点122包括健康上传器模块128。该健康上传器模块128是可收集信息(诸如节点状态、性能计数和其他信息)并将这些收集到的信息发送给管理群集112的服务上传器。管理群集可包括在OpStore 118内的健康存储。从健康上传器模块128发送的信息可被存储在OpStore 118。
现在以下解说在一个实施例中实现的示例情形。在该示例中,数据中心110就绪,其包括使管理群集112和工作器群集120(包括工作器节点122)被部署好。一个或多个作业驱动程序被部署。可以实现其中对于给定作业驱动程序而言,如果不存在对该作业驱动程序的修改,则该作业驱动程序仅被部署一次的一些实施例。
用户104使用用户客户机102来将作业置于作业队列106中。在所解说的示例中,作业队列106是优先级队列。在优先级队列中,以优先级为基础将各元素从该队列中拉取出。如所解说的,用户客户机102就当前作业处理状态周期性地检查作业管理器115。当客户机102确定作业管理器114就绪时,它从作业队列106中检索作业并将作业数据部署在团块130中。作业管理器114检查该作业并将该作业划分成作业项,并将这些项保存在作业项时间表132中。例如,该作业可具有20个作业套件。每个作业项可以是一套件。由此,作业时间表132具有20个作业项。
每一工作器节点122上的工作器124周期性地检查该作业项队列。当工作器124找到作业项时,工作器124取得该项目并更新该状态。更新状态可包括如下多个动作。工作器124将来自团块130的作业数据134加载到工作器节点122中。工作器124使用作业驱动程序来运行作业数据134。工作器124将状态信息报告到OpStore数据库118中。这样的状态信息可包括作业状态。例如,在一些实施例中,作业状态可被分类成以下之一:就绪、处理中、完成、超时或取消。状态信息可另外地或替换地包括作业结果。例如,作业结果可被分类成通过、失败或超时之一。工作器124在每一作业完成之后将作业日志信息保存到团块130中。工作器124随后查找下一作业项,以重复如以上所述的各个动作。如果存在新作业的话,作业管理器115可将新作业项添加到工作项队列中。
一些实施例可实现web API,这些web API使得管理基础结构可用作用于外部用户的服务。
如本文中所描述的,所实现的实施例可允许更多效率。例如,假定一实施例实现10个测试套件,并且这10个套件的最长运行时间为4小时。其他9个测试套件可花费2小时。如果该实施例具有10个工作器且每一工作器取得一套件,则在大约4个小时之后,完成结果可从所有这些测试套件处获得。然而,如果这在单个机器上运行,则结果将花费22个小时来获得。
各实施例可促成可缩放性。例如,使用刚才解说的示例,各实施例可在有可能的情况下将这10个套件划分成更小的组块,并添加更多的测试工作器。因此,这些实施例可进一步减少运行时间。例如,如果一实施例将相同的10个套件划分成100个套件,并添加了100个测试工作器,其中每一套件花费0.22小时,则结果可在0.22小时内获得。
各实施例可进一步促成增加的可靠性和可用性。作为说明,如果一个或多个测试工作器出故障了,则其他工作器可接手作业项,并完成作业。此外,各实施例可用于减少开发和管理成本,因为仅不得不管理单个管理群集。各实施例还可允许扩展工作器群集的可缩放性。
如本文中所解说的,各实施例可包括管理群集,诸如管理群集112。管理群集可被配置成执行各个管理功能,以将工作器节点从这些管理功能中释放出来。例如,该管理群集可执行工作器节点的服务部署,由此将各服务部署到工作器节点(诸如,图1中解说的工作器节点122)处。该管理群集可执行工作器节点上的对各服务的维护。管理群集可执行工作器节点上的服务升级和回滚。管理群集可执行工作器节点上的服务监视,诸如监视服务健康状态。管理群集可执行工作器节点的服务报告,诸如通过图1中解说的管理控制台108向用户报告服务功能性。
各实施例可包括耦合管理群集的一个或多个工作器群集。图1解说耦合到管理群集112的工作器群集120。工作器群集中的每一个都包括一个或多个工作器节点(诸如,节点122),其被配置成提供处理能力、存储和网络连接性中的一个或多个。如所述的,在一些实施例中,工作器节点不使用这些管理配置功能中的一个或多个,而使那些功能被卸载到管理群集112中。
管理群集可被配置成基于分布式计算系统要执行的工作量来将节点添加到一个或多个工作群集中或从其移除节点。
分布式系统可被配置成将来自工作器节点的健康信息上传到管理群集中。例如,图1解说了可用于将健康信息上传到OpStore 118的健康上传器128。
可实现其中分布式系统被耦合到在该分布式系统外部的客户机以从该客户机接收要由该分布式系统来执行的作业的实施例。例如,如图1所解说的,分布式系统110被耦合到用户客户机102以从用户104接收作业。
管理群集可包括数据库(诸如,OpStore 118),以存储分布式系统中的工作器节点的操作和性能信息。在一些实施例中,该数据库被配置成被用户查询,以使得该用户能够监视工作器节点的性能信息。如所述的,工作器节点可包括健康上传器模块,该模块被配置成收集节点状态并将该节点状态发送给管理群集以供存储在存储操作和性能信息的数据库中。健康上传器模块可被配置成收集性能计数,并将这些性能计数发送给管理群集以供存储在存储操作和性能信息的数据库中。
以下讨论现涉及可以执行的多种方法以及方法动作。虽然用特定次序讨论或用以特定次序发生的流程图示出了各个方法动作,但除非明确规定或因为一动作依赖于另一动作在执行该动作之前完成而需要特定次序,否则不需要特定次序。
现在参考图2,示出了方法200。本文中解说的一个实施例涉及一种为分布式系统中的客户机处理作业的方法200。该方法包括在分布式系统中的管理群集处接收来自客户机的作业(动作202)。例如,管理群集112可接收来自用户客户机102的作业。该方法200进一步包括基于作业特性,在该管理群集处将该作业分发给与该管理群集分开的工作器群集。例如,如图1中所解说的,可将作业分发给工作器群集120中的工作器节点122。
方法200可进一步包括接收来自工作器群集的健康信息。例如,如图2中所解说的,工作器节点122-1可使用健康上传器120将健康信息上传到管理群集112。在一些实施例中,方法200进一步包括将健康信息存储在用户可查询的数据库(诸如,OpStore 118)中。
方法200可进一步包括该管理群集部署工作器群集中的工作器节点、执行工作器群集中的工作器节点上的维护、执行工作器群集中的工作器节点上的更新或回滚中的至少一者、执行工作器群集中的工作器节点的监视、执行工作器群集中的工作器节点的服务报告。。
方法200可进一步包括该管理群集维护向分布式计算系统分派的作业的作业状态的作业数据库。例如,作业数据库可包括关于传入作业、传出作业、哪个群集或节点正在执行作业、作业结果等的信息。该信息可以是用户可查询的。
此外,各种方法可由包括一个或多个处理器和诸如计算机存储器等计算机可读介质的计算机系统来实施。具体而言,计算机存储器可存储计算机可执行指令,这些指令在由一个或多个处理器执行时使得诸如各实施例中所述的各个动作等各种功能被执行。
本发明的各实施例可以包括或利用包含计算机硬件的专用或通用计算机,这将在下文中更详细地讨论。本发明范围内的各实施例还包括用于承载或存储计算机可执行指令和/或数据结构的物理和其他计算机可读介质。这样的计算机可读介质可以是可由通用或专用计算机系统访问的任何可用介质。存储计算机可执行指令的计算机可读介质是物理存储介质。承载计算机可执行指令的计算机可读介质是传输介质。由此,作为示例而非限制,本发明的各实施例可包括至少两种显著不同的计算机可读介质:物理计算机可读存储介质和传输计算机可读介质。
物理计算机存储介质包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储(如CD、DVD等)、磁盘存储或其他磁存储设备、或可用于存储计算机可执行指令或数据结构形式的所需程序代码装置且可由通用或专用计算机访问的任何其他介质。
“网络”被定义为使得电子数据能够在计算机系统和/或模块和/或其它电子设备之间传输的一个或多个数据链路。当信息通过网络或另一个通信连接(硬连线、无线、或者硬连线或无线的组合)传输或提供给计算机时,该计算机将该连接适当地视为传输介质。传输介质可包括可用于携带计算机可执行指令或数据结构形式的所需程序代码装置且可由通用或专用计算机访问的网络和/或数据链路。以上介质的组合也被包括在计算机可读介质的范围内。
此外,在到达各种计算机系统组件之后,计算机可执行指令或数据结构形式的程序代码装置可从传输计算机可读介质自动转移到物理计算机可读存储介质(或者相反)。例如,通过网络或数据链路接收到的计算机可执行指令或数据结构可被缓存在网络接口模块(例如,“NIC”)内的RAM中,然后最终被传送到计算机系统RAM和/或计算机系统处的较不易失性的计算机可读物理存储介质。因此,计算机可读物理存储介质可被包括在同样(或甚至主要)利用传输介质的计算机系统组件中。
计算机可执行指令包括,例如使通用计算机、专用计算机、或专用处理设备执行某一功能或某组功能的指令和数据。计算机可执行指令例如可以是二进制代码、诸如汇编语言之类的中间格式指令或者甚至是源代码。尽管用结构特征和/或方法动作专用的语言描述了本主题,但可以理解,所附权利要求书中定义的主题不必限于上述特征或动作。更具体而言,上述特征和动作是作为实现权利要求的示例形式而公开的。
本领域的技术人员将理解,本发明可以在具有许多类型的计算机系统配置的网络计算环境中实践,这些计算机系统配置包括个人计算机、台式计算机、膝上型计算机、消息处理器、手持式设备、多处理器系统、基于微处理器的或可编程消费电子设备、网络PC、小型计算机、大型计算机、移动电话、PDA、寻呼机、路由器、交换机等等。本发明也可在其中通过网络链接(或者通过硬连线数据链路、无线数据链路,或者通过硬连线和无线数据链路的组合)的本地和远程计算机系统两者都执行任务的分布式系统环境中实施。在分布式系统环境中,程序模块可以位于本地和远程存储器存储设备二者中。
本发明可具体化为其他具体形式而不背离其精神或特征。所描述的实施例在所有方面都应被认为仅是说明性而非限制性的。因此,本发明的范围由所附权利要求书而非前述描述指示。落入权利要求书的等效方案的含义和范围内的所有改变应被权利要求书的范围所涵盖。

Claims (15)

1.一种分布式计算系统,所述计算系统包括:
管理群集,所述管理群集接收来自客户机的作业并将所述作业分发给特定工作器群集,所述管理群集提供对一个或多个工作器群集的集合的集中监视,所述一个或多个工作器群集提供用于执行群集作业的虚拟机环境;以及
耦合到所述管理群集并包括所述特定工作器群集在内的所述一个或多个工作器群集,其中所述工作器群集中的每一个都包括一个或多个工作器节点,所述一个或多个工作器节点提供处理能力、存储和网络连接性中的一个或多个以使得所述作业被执行,但不使用由所述管理群集执行的管理配置功能中的一个或多个;以及
其中所述管理群集针对所述一个或多个工作器群集中的每一者执行工作器节点的服务部署、工作器节点的服务维护、工作器节点的服务升级和回滚、工作器节点的服务监视以及工作器节点的服务报告。
2.如权利要求1所述的系统,其特征在于,所述管理群集被配置成基于要由所述分布式计算系统执行的工作的量来将节点添加到所述一个或多个工作群集中或从所述一个或多个工作群集移除节点。
3.如权利要求1所述的系统,其特征在于,所述分布式系统被配置成将来自工作器节点的健康信息上传到所述管理群集。
4.如权利要求1所述的系统,其特征在于,所述分布式系统被耦合到所述分布式系统外部的客户机,以从所述客户机接收要由所述分布式系统来执行的作业。
5.如权利要求1所述的系统,其特征在于,所述管理群集包括存储所述分布式系统中的工作器节点的操作和性能信息的数据库。
6.如权利要求5所述的系统,其特征在于,数据库被配置成被用户查询以使得所述用户能够监视工作器节点的性能信息。
7.如权利要求5所述的系统,其特征在于,所述工作器节点中的至少一个包括健康上传器模块,所述健康上传器模块被配置成收集节点状态,并将所述节点状态发送给所述管理群集,以供存储在存储操作和性能信息的所述数据库中。
8.如权利要求7所述的系统,其特征在于,所述健康上传器模块还被配置成收集性能计数,并将所述性能计数发送给所述管理群集以供存储在存储操作和性能信息的所述数据库中。
9.一种为分布式系统中的客户机处理作业的方法,所述方法包括:
在分布式系统中的管理群集处,接收来自客户机的作业,所述管理群集提供对一个或多个工作器群集的集合的集中监视,所述一个或多个工作器群集提供用于执行群集作业的虚拟机环境;
在所述管理群集处基于作业特性将所述作业分发给与所述管理群集分开的工作器群集,该工作器群集是多个工作器群集中的一者;以及
所述管理群集针对所述多个工作器群集中的每一者执行工作器节点的服务部署、工作器节点的服务维护、工作器节点的服务升级和回滚、工作器节点的服务监视以及工作器节点的服务报告。
10.如权利要求9所述的方法,其特征在于,进一步包括接收来自所述工作器群集的健康信息。
11.如权利要求10所述的方法,其特征在于,进一步包括将所述健康信息存储在用户可查询的数据库中。
12.如权利要求9所述的方法,其特征在于,进一步包括所述管理群集部署所述工作器群集中的工作器节点。
13.如权利要求9所述的方法,其特征在于,进一步包括所述管理群集执行所述工作器群集中的工作器节点上的维护。
14.如权利要求9所述的方法,其特征在于,所述管理群集执行所述工作器群集中的工作器节点上的升级或回滚中的至少一个。
15.如权利要求9所述的方法,其特征在于,所述管理群集执行所述工作器群集中的工作器节点的监视。
CN201380006408.3A 2012-01-23 2013-01-18 使用混合群集来构建大规模测试基础结构 Active CN104067221B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/356,366 2012-01-23
US13/356,366 US8949308B2 (en) 2012-01-23 2012-01-23 Building large scale infrastructure using hybrid clusters
PCT/US2013/022005 WO2013112356A1 (en) 2012-01-23 2013-01-18 Building large scale test infrastructure using hybrid clusters

Publications (2)

Publication Number Publication Date
CN104067221A CN104067221A (zh) 2014-09-24
CN104067221B true CN104067221B (zh) 2018-07-24

Family

ID=48798121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380006408.3A Active CN104067221B (zh) 2012-01-23 2013-01-18 使用混合群集来构建大规模测试基础结构

Country Status (4)

Country Link
US (1) US8949308B2 (zh)
EP (1) EP2807552A4 (zh)
CN (1) CN104067221B (zh)
WO (1) WO2013112356A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8839035B1 (en) 2011-09-14 2014-09-16 Amazon Technologies, Inc. Cloud-based test execution
US8949308B2 (en) * 2012-01-23 2015-02-03 Microsoft Corporation Building large scale infrastructure using hybrid clusters
US11394462B2 (en) * 2013-07-10 2022-07-19 Crowdcomfort, Inc. Systems and methods for collecting, managing, and leveraging crowdsourced data
US10291475B2 (en) * 2013-08-05 2019-05-14 Verizon Patent And Licensing Inc. Virtualization of management services in a cloud computing environment
US9578091B2 (en) 2013-12-30 2017-02-21 Microsoft Technology Licensing, Llc Seamless cluster servicing
EP2960791A1 (en) * 2014-06-27 2015-12-30 Fujitsu Limited Method of executing an application on a distributed computer system, a resource manager and a distributed computer system
US10268755B2 (en) * 2015-04-30 2019-04-23 Splunk Inc. Systems and methods for providing dynamic indexer discovery
US10715620B2 (en) * 2017-11-08 2020-07-14 Google Llc Streaming network monitoring caching infrastructure
US20200195731A1 (en) * 2018-12-12 2020-06-18 Sichuan University Lccs system and method for executing computation offloading
US11579941B2 (en) 2019-05-05 2023-02-14 Mastercard International Incorporated Control cluster for multi-cluster container environments
EP3754500A1 (en) * 2019-06-20 2020-12-23 Nokia Technologies Oy Cluster computing
CN112306651B (zh) * 2019-07-31 2024-09-06 华为技术有限公司 一种资源分配方法和资源借调方法
US11507392B2 (en) * 2020-02-26 2022-11-22 Red Hat, Inc. Automatically configuring computing clusters
US11609935B2 (en) * 2020-07-16 2023-03-21 Red Hat, Inc. Managing configuration datasets from multiple, distinct computing systems
CN113067722A (zh) * 2021-03-02 2021-07-02 北京澎思科技有限公司 数据管理平台及其工作方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101473305A (zh) * 2006-04-28 2009-07-01 网络装置公司 用于集群环境中的作业的管理的系统和方法
CN102033777A (zh) * 2010-09-17 2011-04-27 中国资源卫星应用中心 基于ice的分布式作业调度引擎
CN102130950A (zh) * 2011-03-14 2011-07-20 中国科学技术大学苏州研究院 基于Hadoop集群的分布式监控系统及其监控方法

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030041138A1 (en) 2000-05-02 2003-02-27 Sun Microsystems, Inc. Cluster membership monitor
US6970939B2 (en) * 2000-10-26 2005-11-29 Intel Corporation Method and apparatus for large payload distribution in a network
US6996588B2 (en) * 2001-01-08 2006-02-07 International Business Machines Corporation Efficient application deployment on dynamic clusters
US7016972B2 (en) * 2001-04-23 2006-03-21 International Business Machines Corporation Method and system for providing and viewing performance analysis of resource groups
GB0119146D0 (en) * 2001-08-06 2001-09-26 Nokia Corp Controlling processing networks
US20040010716A1 (en) * 2002-07-11 2004-01-15 International Business Machines Corporation Apparatus and method for monitoring the health of systems management software components in an enterprise
CA2558892A1 (en) * 2004-03-13 2005-09-29 Cluster Resources, Inc. System and method for a self-optimizing reservation in time of compute resources
US9178784B2 (en) 2004-04-15 2015-11-03 Raytheon Company System and method for cluster management based on HPC architecture
US20050256948A1 (en) 2004-05-14 2005-11-17 Shaotang Hu Methods and systems for testing a cluster management station
US7756919B1 (en) * 2004-06-18 2010-07-13 Google Inc. Large-scale data processing in a distributed and parallel processing enviornment
US20060053216A1 (en) * 2004-09-07 2006-03-09 Metamachinix, Inc. Clustered computer system with centralized administration
US7428655B2 (en) 2004-09-08 2008-09-23 Hewlett-Packard Development Company, L.P. Smart card for high-availability clustering
US7409576B2 (en) 2004-09-08 2008-08-05 Hewlett-Packard Development Company, L.P. High-availability cluster with proactive maintenance
US8296271B1 (en) * 2005-03-28 2012-10-23 Federal Home Loan Mortgage Corporation System and method for optimizing data recovery in a parallel database
US7512677B2 (en) * 2005-10-20 2009-03-31 Uplogix, Inc. Non-centralized network device management using console communications system and method
US8332497B1 (en) * 2007-02-20 2012-12-11 Netapp, Inc. Generic resynchronization between persistent management store and dynamic configuration
US8458693B2 (en) * 2007-08-02 2013-06-04 Sap Ag Transitioning from static to dynamic cluster management
US8055735B2 (en) * 2007-10-30 2011-11-08 Hewlett-Packard Development Company, L.P. Method and system for forming a cluster of networked nodes
WO2009096971A1 (en) * 2008-01-31 2009-08-06 Cluster Resources, Inc. System and method for managing a hybrid compute environment
US20090265449A1 (en) * 2008-04-22 2009-10-22 Hewlett-Packard Development Company, L.P. Method of Computer Clustering
US20090300423A1 (en) 2008-05-28 2009-12-03 James Michael Ferris Systems and methods for software test management in cloud-based network
US8726290B2 (en) * 2008-06-12 2014-05-13 Yahoo! Inc. System and/or method for balancing allocation of data among reduce processes by reallocation
CN101819540B (zh) * 2009-02-27 2013-03-20 国际商业机器公司 在集群中调度任务的方法和系统
US8949791B2 (en) 2009-07-08 2015-02-03 Vmware, Inc. Distributed software testing using cloud computing resources
US8381015B2 (en) * 2010-06-30 2013-02-19 International Business Machines Corporation Fault tolerance for map/reduce computing
US8484163B1 (en) * 2010-12-16 2013-07-09 Netapp, Inc. Cluster configuration backup and recovery
US8631279B2 (en) * 2011-06-07 2014-01-14 Microsoft Corporation Propagating unobserved exceptions in distributed execution environments
US9065285B2 (en) * 2011-07-20 2015-06-23 Youtech, Inc. Method and apparatus for preventing misoperation in an electric power system
US8850020B2 (en) * 2011-07-29 2014-09-30 Cisco Technology, Inc. Resource aware parallel process distribution on multi-node network devices
US8949308B2 (en) * 2012-01-23 2015-02-03 Microsoft Corporation Building large scale infrastructure using hybrid clusters

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101473305A (zh) * 2006-04-28 2009-07-01 网络装置公司 用于集群环境中的作业的管理的系统和方法
CN102033777A (zh) * 2010-09-17 2011-04-27 中国资源卫星应用中心 基于ice的分布式作业调度引擎
CN102130950A (zh) * 2011-03-14 2011-07-20 中国科学技术大学苏州研究院 基于Hadoop集群的分布式监控系统及其监控方法

Also Published As

Publication number Publication date
US8949308B2 (en) 2015-02-03
EP2807552A1 (en) 2014-12-03
EP2807552A4 (en) 2016-08-03
CN104067221A (zh) 2014-09-24
US20130191436A1 (en) 2013-07-25
WO2013112356A1 (en) 2013-08-01

Similar Documents

Publication Publication Date Title
CN104067221B (zh) 使用混合群集来构建大规模测试基础结构
CN104067257B (zh) 自动化事件管理系统,管理事件方法及事件管理系统
US10333861B2 (en) Modular cloud computing system
US8301759B2 (en) Monitoring agent programs in a distributed computing platform
US9170852B2 (en) Self-updating functionality in a distributed system
US20180293063A1 (en) Rolling version update deployment utilizing dynamic node allocation
CN111178782A (zh) 一种流程工业数据化运营平台的微服务架构
CN106101213A (zh) 信息分布式存储方法
CN112667362A (zh) Kubernetes上部署Kubernetes虚拟机集群的方法与系统
CN106101212A (zh) 云平台下的大数据访问方法
CN111274002A (zh) 支撑paas平台构建方法、装置、计算机设备及存储介质
EP2891070A1 (en) Global feature library useable with continuous delivery
CN105591782A (zh) 测试设备的管理方法及装置
CN104951855A (zh) 用于促进对资源的管理的装置和方法
Lovas et al. Cloud agnostic Big Data platform focusing on scalability and cost-efficiency
CN115145695A (zh) 资源调度方法、装置、计算机设备和存储介质
CN106254452A (zh) 云平台下的医疗大数据访问方法
CN105827744A (zh) 云存储平台的数据处理方法
CN106302656A (zh) 云存储平台的医药数据处理方法
Wang et al. Disaster Recovery for Cloud-Hosted Enterprise Applications
CN113824801B (zh) 一种智能融合终端统一接入管理组件系统
CN108205531B (zh) 数据抽取方法和数据抽取系统
CN104754040A (zh) 用于端到端云服务虚拟化的系统
Collet et al. Issues and scenarios for self-managing grid middleware
Pongpaibool et al. Netham-nano: A robust and scalable service-oriented platform for distributed monitoring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150720

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150720

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

GR01 Patent grant
GR01 Patent grant