CN107133105B - 超融合系统、基于超融合系统的数据处理方法 - Google Patents

超融合系统、基于超融合系统的数据处理方法 Download PDF

Info

Publication number
CN107133105B
CN107133105B CN201710346655.8A CN201710346655A CN107133105B CN 107133105 B CN107133105 B CN 107133105B CN 201710346655 A CN201710346655 A CN 201710346655A CN 107133105 B CN107133105 B CN 107133105B
Authority
CN
China
Prior art keywords
data processing
instruction
target
virtual resource
fusion system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710346655.8A
Other languages
English (en)
Other versions
CN107133105A (zh
Inventor
高英
陈志凌
黄永燊
艾如鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201710346655.8A priority Critical patent/CN107133105B/zh
Publication of CN107133105A publication Critical patent/CN107133105A/zh
Application granted granted Critical
Publication of CN107133105B publication Critical patent/CN107133105B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5055—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering software capabilities, i.e. software resources associated or available to the machine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/50—Indexing scheme relating to G06F9/50
    • G06F2209/508—Monitor

Abstract

本发明公开了一种超融合系统、基于超融合系统的数据处理方法。所述超融合系统包括第一设备和至少一个第二设备；所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源；每个所述第二设备中包括数据处理装置以及虚拟资源；所述第一设备中的数据处理装置，用于在所述指令接收装置接收到所述数据处理指令之后，与每个所述第二设备进行通信，获得目标设备；所述目标设备为所述超融合系统中的虚拟资源的状态为空闲的设备；所述目标设备中的数据处理装置，还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，并将生成的数据处理结果返回至所述第一设备。采用本发明，能够提高超融合系统的数据处理性能和资源利用率。

Description

超融合系统、基于超融合系统的数据处理方法
技术领域
本发明涉及计算机技术领域，尤其涉及一种超融合系统、基于超融合系统的数据处理方法。
背景技术
目前许多基于超融合技术的系统架构存在着80％的性能问题，物理硬件资源的利用率得不到很好的提升，磁盘的IO瓶颈得不到解决，以及数据的可靠、冗余等机制的缺失，阻碍系统整体性能、可靠性，最终导致系统变慢，物理硬件的最大性能没有发挥出来。在目前业界构建的超融合体系结构的案例中，极少有完整地提供了对于集成hypervisor层面采用即将成为云虚拟化标准的OpenStack(一种旨在为公共及私有云的建设与管理提供软件的开源项目，目标是提供实施简单、可大规模扩展、丰富、标准统一的云计算管理平台)平台，分布式存储采用Ceph(一种为优秀的性能、可靠性和可扩展性而设计的统一的分布式文件系统)，同时提供完整HA方案来保证数据以及集群的可靠，以及提供Monitor(监控)机制。
发明内容
本发明实施例提出一种超融合系统、基于超融合系统的数据处理方法，能够提高超融合系统的数据处理性能和资源利用率。
本发明实施例提供的一种超融合系统，具体包括第一设备和至少一个第二设备：
所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源；
每个所述第二设备中包括数据处理装置以及虚拟资源；
所述第一设备中的指令接收装置，用于接收数据处理指令；
所述第一设备中的数据处理装置，用于在所述指令接收装置接收到所述数据处理指令之后，查询所述第一设备中的虚拟资源的状态，同时通过与各个所述第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
所述目标设备中的数据处理装置，还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
进一步地，所述第一设备中还包括指令处理装置；
所述指令处理装置，用于采用多线程技术对所述数据处理指令进行解耦处理；
则所述目标设备中的数据处理装置，还用于根据经过解耦的所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
进一步地，所述第一设备中还包括数据存储装置；
所述数据存储装置，用于存储所述数据处理结果。
进一步地，所述数据存储装置为MariaDB。
进一步地，所述第二设备的个数为至少两个。
相应地，本发明实施例还提供了一种基于超融合系统的数据处理方法，具体包括：
超融合系统中的第一设备中的指令接收装置接收数据处理指令；
在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中；
所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
进一步地，在所述超融合系统中的第一设备中的指令接收装置接收数据处理指令之后，所述在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备之前，还包括：
所述第一设备中的指令处理装置采用多线程技术对所述数据处理指令进行解耦处理；
则所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中的步骤具体包括：
所述第一设备中的数据处理装置将经过解耦的所述数据处理指令发送至所述目标设备中的数据处理装置中；
所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备，具体包括：
所述目标设备中的数据处理装置在接收到经过解耦的所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
进一步地，在所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备之后，还包括：
所述第一设备在接收到所述数据处理结果之后，将所述数据处理结果存储至所述第一设备中的数据存储装置中。
进一步地，所述数据存储装置为MariaDB。
进一步地，所述超融合系统中的第二设备的个数为至少两个。
实施本发明实施例，具有如下有益效果：
本发明实施例提供的超融合系统、基于超融合系统的数据处理方法，通过数据处理装置之间的通信，使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理，因此能够充分利用系统中的资源，提高系统的资源利用率。另外，通过在各个设备中配置虚拟资源进行数据处理，使得数据处理不受设备硬件的限制，因此能够提高系统的数据处理性能。
附图说明
图1是本发明提供的超融合系统的一个优选的实施例的结构示意图；
图2是本发明提供的超融合系统的一个优选的实施例中的一个数据处理装置的的内部部分结构示意图；
图3是本发明提供的基于超融合系统的数据处理方法的一个优选的实施例的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明通过为超融合系统中的每个设备配置数据处理装置，使得接收到数据处理指令的设备可以通过数据处理装置与系统中的其他设备进行通信，查询获得其中较为空闲的设备作为数据处理的目标设备，从而利用该目标设备中的虚拟资源并根据前述数据处理指令进行数据处理。由于本发明能够通过数据处理装置之间的通信，使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理，因此能够充分利用系统中的资源，提高系统的资源利用率。另外，本发明通过在各个设备中配置虚拟资源进行数据处理，使得数据处理不受设备硬件的限制，因此能够提高系统的数据处理性能。
如图1所示，为本发明提供的超融合系统的一个优选的实施例的结构示意图，包括第一设备11和至少一个第二设备12；
所述第一设备11中包括数据处理装置111、虚拟资源装置112以及指令接收装置113；
每个所述第二设备12中包括数据处理装置121以及虚拟资源装置122；
其中，所述虚拟资源装置112和所述虚拟资源装置122中均包含若干虚拟资源；
所述第一设备11中的指令接收装置113，用于接收数据处理指令；
所述第一设备11中的数据处理装置111，用于在所述指令接收装置113接收到所述数据处理指令之后，查询所述第一设备11中的虚拟资源的状态，同时通过与各个所述第二设备12中的数据处理装置121通信查询各个所述第二设备12中的虚拟资源的状态，将所述第一设备11和所有所述第二设备12中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
所述目标设备中的数据处理装置，还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备11。
需要说明的是，本发明实施例所提供的超融合系统中包含若干设备，这些设备均为商用X86服务器。其中，该超融合系统中的每个设备中均包括指令接收装置、数据处理装置以及虚拟资源装置。可以理解的是，上述第一设备和上述第二设备为相对的概念，第一设备为超融合系统中的接收到用户的数据处理指令的设备，而第二设备为该超融合系统中的除该第一设备外的其他设备。这些设备中的数据处理装置和虚拟资源装置可以采用OpenStack(一个开源的云计算管理平台项目)技术而设计。其中，虚拟资源装置为建立于物理设备之上的虚拟的数据处理资源装置，其中包含若干可用于进行数据处理的虚拟资源。
指令接收装置，为人机交互装置，用于供给用户与系统进行交互。该指令接收装置采用前端技术和JAVA后端技术进行设计。用户可以根据该指令接收装置的显示界面上的提示对系统中的资源、数据等进行管理和操作，使得该显示界面根据用户的相关操作生成相应的数据处理指令，并将这些数据处理指令发送至指令接收装置。该指令接收装置在接收到该数据处理指令之后，将该数据处理指令发送至系统中的各个装置中。
数据处理装置，为系统中的进行数据处理以及设备间通信的装置。系统中的每个设备中的数据处理装置中包含一个或者多个指令执行模块，用于对数据处理指令进行解析，并根据经过解析后的数据处理指令调用虚拟资源装置中的虚拟资源进行相应的数据处理。每个设备中的数据处理装置通过有线或者无线的方式相连接，从而形成一个集群。每个设备中的数据处理装置中还包含pacemaker通讯模块，用于与同设备中的虚拟资源装置中的pacemaker-remote通讯模块相连接，使得同设备中的数据处理装置和虚拟资源装置之间可以通过UDP(User Datagram Protocol，用户数据报协议)的方式进行通信，从而使得数据处理装置可以对同设备中的虚拟资源装置的运行状态和资源利用情况进行监控，确保集群的高可用性。
需要进一步说明的是，上述数据处理装置中还包含API(ApplicationProgramming Interface，应用程序编程接口)模块，用于提供若干调用接口，使得系统中的其他设备可以通过调用这些调用接口调用对应的指令执行模块来对数据处理指令进行相应的处理。上述指令执行模块主要包括nova-*模块(虚拟计算、虚拟网络服务执行模块)、glance-registry模块(镜像服务执行模块)、cinder模块(卷服务执行模块)以及keystone模块(认证服务执行模块)，分别用于对虚拟计算、虚拟网络服务指令、镜像服务指令、卷服务指令以及认证服务指令进行解析和处理。在一些具体的实施例中，数据处理装置可以通过采用多线程技术对数据处理指令进行并发处理。如图2所示，为一个数据处理装置的的内部部分结构示意图。
虚拟资源装置，其中包括若干虚拟资源，以供上述数据处理装置调用。该虚拟资源装置中主要包括提供虚拟计算资源的nova-compute模块以及提供虚拟网络资源的nova-network模块，该nova-compute模块和该nova-network模块均可以采用OpenStack技术进行设计。该虚拟资源装置中还包括KVM(Kernel-based Virtual Machine，基于内核的虚拟机)、QEMU(虚拟模拟处理器)以及Libvirt(虚拟化管理工具)，用于为上述nova-compute模块以及nova-network模块提供支持与管理。
当系统中的某一设备中的指令接收装置接收到数据处理指令后，该指令接收装置将接收到的数据处理指令发送至同设备中的各个装置中。随后，该设备中的数据处理装置与系统中的其他设备中的数据处理装置进行通信，以查询系统中的各个虚拟资源装置的运行状态，从而获得其中运行状态为空闲的虚拟资源装置，并将该虚拟资源装置所在的设备设置为目标设备。随后，接收到数据处理指令的设备将数据处理指令发送至该目标设备中，并调用该目标设备中的调用接口。该目标设备在接收到该数据处理指令之后，根据被调用的接口调用对应的指令执行模块对该数据处理指令进行解析，并调用同设备中的虚拟资源装置中的虚拟资源进行相应的数据处理，从而获得相应的数据处理结果。最后，该目标设备将生成的数据处理结果返回至最初接收到数据处理指令的设备中。
上述超融合系统中还可以包含系统监控服务，用于对系统中的数据的采集、处理以及存储等以及系统中的各个设备的运行状态、资源利用状况等进行监控和处理。
本发明实施例通过数据处理装置之间的通信，使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理，因此能够充分利用系统中的资源，提高系统的资源利用率。另外，通过在各个设备中配置虚拟资源进行数据处理，使得数据处理不受设备硬件的限制，因此能够提高系统的数据处理性能。
在另一个优选的实施例中，在上述实施例的基础之上，所述第一设备中还包括指令处理装置；
所述指令处理装置，用于采用多线程技术对所述数据处理指令进行解耦处理；
则所述目标设备中的数据处理装置，还用于根据经过解耦的所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
需要说明的是，上述超融合系统中的各个设备中还包括指令处理装置，该指令处理装置采用JAVA技术实现。该指令处理装置用于对数据处理指令进行解耦，使得只要数据处理指令的格式不变，即使接收者的接口、位置、或者配置改变，也不会给该数据处理指令的发送者带来任何改变。该指令处理装置在对数据处理指令进行解耦之后，将经过解耦的数据处理指令发送至对应的数据处理装置中，以使该数据处理装置根据经过解耦的该数据处理指令进行相应的数据处理。该指令处理装置采用多线程技术对接收到的数据处理指令进行并发处理。
需要进一步说明的是，该指令处理装置中还包含若干接口以供指令接收装置调用进行相应的指令处理，其中包括nova接口(虚拟计算、虚拟网络服务接口)、glance接口(镜像服务接口)、cinder接口(卷服务接口)以及keystone接口(认证服务接口)等。这些接口与数据处理装置中的调用接口及指令执行模块具有对应关系。
在又一个优选的实施例中，在上述实施例的基础之上，所述第一设备中还包括数据存储装置；
所述数据存储装置，用于存储所述数据处理结果。
进一步地，所述数据存储装置为MariaDB。
需要说明的是，本发明实施例所提供的超融合系统中的各个设备中还包括数据存储装置，用于对系统中的数据及数据处理结果进行分布式的存储和管理。
该数据存储装置采用与Ceph相关的技术制成，与OpenStack相结合，具有优秀的性能、可靠性和可扩展性。具体地，包括Ceph与OpenStack中的glance镜像服务相结合、Ceph与OpenStack中的cinder块存储服务相结合，以及Ceph与OpenStack中的nova虚拟计算服务相结合。其中，当Ceph与OpenStack中的glance镜像服务相结合时，允许用户将镜像存储在Ceph中，而不是本地存储在数据处理装置和虚拟资源装置上，由于Ceph可以克隆镜像而不是复制镜像，大大减少了抓取镜像的网络流量，提高了性能；当Ceph与OpenStack中的cinder块存储服务相结合时，cinder提供了关于块存储的抽象，并允许供应商通过提供驱动程序进行集成，同时在Ceph中，每个存储池可以映射到不同的Cinder后端；当Ceph与OpenStack中的nova虚拟计算服务相结合时，Ceph则可以为nova提供一个可靠的后端支持。
在又一个优选的实施例中，在上述实施例的基础之上，所述第二设备的个数为至少两个。
需要说明的是，本发明实施例所提供的超融合系统中包括至少三台设备，用于利用虚拟的数据处理资源进行相应的分布式数据处理。更优选地，系统中的设备的个数可以为16至20个。由于超融合系统本身体系结构的定义，因此当系统中的设备的个数为16至20个时，系统的数据处理性能最优，资源利用率最高。
本发明实施例提供的超融合系统，通过数据处理装置之间的通信，使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理，因此能够充分利用系统中的资源，提高系统的资源利用率。另外，通过在各个设备中配置虚拟资源进行数据处理，使得数据处理不受设备硬件的限制，因此能够提高系统的数据处理性能。
相应地，本发明还提供一种基于超融合系统的数据处理方法。
如图3所示，为本发明提供的基于超融合系统的数据处理方法的一个优选的实施例的流程示意图，包括步骤S31至S34，具体如下：
S31：超融合系统中的第一设备中的指令接收装置接收数据处理指令；
S32：在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
S33：所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中；
S34：所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
在另一个优选的实施例中，在上述实施例的基础之上，在所述超融合系统中的第一设备中的指令接收装置接收数据处理指令之后，所述在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备之前，还包括：
所述第一设备中的指令处理装置采用多线程技术对所述数据处理指令进行解耦处理；
则所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中的步骤具体包括：
所述第一设备中的数据处理装置将经过解耦的所述数据处理指令发送至所述目标设备中的数据处理装置中；
所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备，具体包括：
所述目标设备中的数据处理装置在接收到经过解耦的所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
在又一个优选的实施例中，在上述实施例的基础之上，在所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备之后，还包括：
所述第一设备在接收到所述数据处理结果之后，将所述数据处理结果存储至所述第一设备中的数据存储装置中。
进一步地，所述数据存储装置为MariaDB。
在又一个优选的实施例中，在上述实施例的基础之上，所述超融合系统中的第二设备的个数为至少两个。
本发明实施例提供的基于超融合系统的数据处理方法，通过数据处理装置之间的通信，使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理，因此能够充分利用系统中的资源，提高系统的资源利用率。另外，通过在各个设备中配置虚拟资源进行数据处理，使得数据处理不受设备硬件的限制，因此能够提高系统的数据处理性能。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种超融合系统，其特征在于，包括第一设备和至少一个第二设备；
所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源；
每个所述第二设备中包括数据处理装置以及虚拟资源；
所述第一设备中的指令接收装置，用于接收数据处理指令；
所述第一设备中的数据处理装置，用于在所述指令接收装置接收到所述数据处理指令之后，查询所述第一设备中的虚拟资源的状态，同时通过与各个所述第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
所述目标设备中的数据处理装置，还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
2.如权利要求1所述的超融合系统，其特征在于，所述第一设备中还包括指令处理装置；
所述指令处理装置，用于采用多线程技术对所述数据处理指令进行解耦处理；
则所述目标设备中的数据处理装置，还用于根据经过解耦的所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
3.如权利要求1所述的超融合系统，其特征在于，所述第一设备中还包括数据存储装置；
所述数据存储装置，用于存储所述数据处理结果。
4.如权利要求3所述的超融合系统，其特征在于，所述数据存储装置为MariaDB。
5.如权利要求1至4中任一项所述的超融合系统，其特征在于，所述第二设备的个数为至少两个。
6.一种基于超融合系统的数据处理方法，其特征在于，包括：
超融合系统中的第一设备中的指令接收装置接收数据处理指令；
在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备；其中，所述目标设备中的虚拟资源的状态为空闲；
所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中；
所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
7.如权利要求6所述的基于超融合系统的数据处理方法，其特征在于，在所述超融合系统中的第一设备中的指令接收装置接收数据处理指令之后，所述在所述指令接收装置接收到所述数据处理指令之后，所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态，同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态，将所述第一设备和所有所述第二设备中的一个设备设置为目标设备之前，还包括：
所述第一设备中的指令处理装置采用多线程技术对所述数据处理指令进行解耦处理；
则所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中的步骤具体包括：
所述第一设备中的数据处理装置将经过解耦的所述数据处理指令发送至所述目标设备中的数据处理装置中；
所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备，具体包括：
所述目标设备中的数据处理装置在接收到经过解耦的所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备。
8.如权利要求6所述的基于超融合系统的数据处理方法，其特征在于，在所述目标设备中的数据处理装置在接收到所述数据处理指令之后，根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理，生成相应的数据处理结果，并将所述数据处理结果返回至所述第一设备之后，还包括：
所述第一设备在接收到所述数据处理结果之后，将所述数据处理结果存储至所述第一设备中的数据存储装置中。
9.如权利要求8所述的基于超融合系统的数据处理方法，其特征在于，所述数据存储装置为MariaDB。
10.如权利要求6至9中任一项所述的基于超融合系统的数据处理方法，其特征在于，所述超融合系统中的第二设备的个数为至少两个。
CN201710346655.8A 2017-05-17 2017-05-17 超融合系统、基于超融合系统的数据处理方法 Active CN107133105B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710346655.8A CN107133105B (zh) 2017-05-17 2017-05-17 超融合系统、基于超融合系统的数据处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710346655.8A CN107133105B (zh) 2017-05-17 2017-05-17 超融合系统、基于超融合系统的数据处理方法

Publications (2)

Publication Number Publication Date
CN107133105A CN107133105A (zh) 2017-09-05
CN107133105B true CN107133105B (zh) 2020-06-30

Family

ID=59732277

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710346655.8A Active CN107133105B (zh) 2017-05-17 2017-05-17 超融合系统、基于超融合系统的数据处理方法

Country Status (1)

Country Link
CN (1) CN107133105B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108388433B (zh) * 2017-12-28 2021-09-17 深圳创新科软件技术有限公司 超融合系统的管理平台部署方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970161A (zh) * 2012-11-12 2013-03-13 珠海金山网络游戏科技有限公司 云机器调配平台及调配方法
CN103885833A (zh) * 2012-12-20 2014-06-25 中国移动通信集团公司 一种资源管理方法和系统
CN105589751A (zh) * 2015-11-27 2016-05-18 杭州华三通信技术有限公司 一种物理资源调度方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5521403B2 (ja) * 2009-06-23 2014-06-11 ソニー株式会社 情報処理装置とリソース管理方法およびプログラム
US9503310B1 (en) * 2012-11-27 2016-11-22 Leidos, Inc. Methods and systems of dynamic management of resources in a virtualized environment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970161A (zh) * 2012-11-12 2013-03-13 珠海金山网络游戏科技有限公司 云机器调配平台及调配方法
CN103885833A (zh) * 2012-12-20 2014-06-25 中国移动通信集团公司 一种资源管理方法和系统
CN105589751A (zh) * 2015-11-27 2016-05-18 杭州华三通信技术有限公司 一种物理资源调度方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于超融合架构的资源管理系统模型;倪曼蒂等;《福建电脑》;20170217;全文 *

Also Published As

Publication number Publication date
CN107133105A (zh) 2017-09-05

Similar Documents

Publication Publication Date Title
US9747093B2 (en) Device driver aggregation in operating system deployment
US11625281B2 (en) Serverless platform request routing
US8892945B2 (en) Efficient application management in a cloud with failures
EP3688592A1 (en) Dynamic migration of groups of containers
US9063793B2 (en) Virtual server and virtual machine management method for supporting zero client by providing host interfaces from classified resource pools through emulation or direct connection modes
US20150058823A1 (en) Remote debugging in a cloud computing environment
KR20180019674A (ko) 컨테이너들에서 고립된 애플리케이션들의 모니터링
EP3332325B1 (en) Methods, apparatus, and systems for providing access to serial ports of virtual machines in self-deployed virtual applications
CN111212116A (zh) 一种基于容器云的高性能计算集群创建方法和系统
CN111930521A (zh) 用于部署应用的方法、装置、电子设备及可读存储介质
US20220100550A1 (en) Accelerator Loading Method, System, and Apparatus
US20220129155A1 (en) Techniques for persisting data across instances of a cloud shell
US11962599B2 (en) Techniques for automatically configuring minimal cloud service access rights for container applications
US20220027173A1 (en) Processing an operation with a plurality of processing steps
US11425054B1 (en) User-configured multi-location service deployment and scaling
US11765244B1 (en) Latency-based service discovery and routing for multi-location service-oriented applications
CN114338820A (zh) 网络访问方法、装置、电子设备及存储介质
CN107133105B (zh) 超融合系统、基于超融合系统的数据处理方法
CN110266787B (zh) 一种混合云管理系统、方法及计算机设备
US10587725B2 (en) Enabling a traditional language platform to participate in a Java enterprise computing environment
US20220138220A1 (en) Dedicated replication channels for replicating records between regions
WO2014009846A1 (en) Hybrid computer thread creation and management
US20230032967A1 (en) Establishing process connections utilizing an intermediary broker
US20230300081A1 (en) Bandwidth control inside a shared network interface card
US11924086B2 (en) Load-based management for NVME over TCP connections

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant