CN113032091B - 一种采用aep提升虚拟机存储性能的方法、系统及介质 - Google Patents

一种采用aep提升虚拟机存储性能的方法、系统及介质 Download PDF

Info

Publication number
CN113032091B
CN113032091B CN202110216423.7A CN202110216423A CN113032091B CN 113032091 B CN113032091 B CN 113032091B CN 202110216423 A CN202110216423 A CN 202110216423A CN 113032091 B CN113032091 B CN 113032091B
Authority
CN
China
Prior art keywords
aep
virtual machine
load
distributed system
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110216423.7A
Other languages
English (en)
Other versions
CN113032091A (zh
Inventor
殷斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Yingxin Computer Technology Co Ltd
Original Assignee
Shandong Yingxin Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Yingxin Computer Technology Co Ltd filed Critical Shandong Yingxin Computer Technology Co Ltd
Priority to CN202110216423.7A priority Critical patent/CN113032091B/zh
Publication of CN113032091A publication Critical patent/CN113032091A/zh
Application granted granted Critical
Publication of CN113032091B publication Critical patent/CN113032091B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065—Replication mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/60—Software deployment
    • G06F8/61—Installation
    • G06F8/63—Image based installation; Cloning; Build to order
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45562—Creating, deleting, cloning virtual machine instances
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45579—I/O management, e.g. providing access to device drivers or storage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45583—Memory management, e.g. access or allocation

Abstract

本发明公开了一种采用AEP提升虚拟机存储性能的方法，包括以下步骤：配置AEP设备，设定转移阈值、时间阈值；监测分布式系统的IO负载，若分布式系统的IO负载超过转移阈值，则开启应急策略步骤；判断分布式系统的虚拟机的镜像的容量是否超过AEP的内存容量，若未超过，则执行数据同步步骤；将虚拟机运行的业务切换至所述AEP设备运行，并在时间阈值内判断分布式系统的IO负载是否降低到转移阈值下，若在时间阈值内IO负载降低到转移阈值下，则将业务切换至分布式系统的外部存储中，本发明能够实现提升分布式服务器集群的IO性能，无需人员进行维护，成本较低，无需配置大量高性能存储即可保证环境的正常运行。

Description

一种采用AEP提升虚拟机存储性能的方法、系统及介质
技术领域
本发明涉及分布式存储技术领域，特别是涉及一种采用AEP提升虚拟机存储性能的方法、系统及介质。
背景技术
在大规模分布式存储集群中，为了保证多节点数据的性能与安全，实际使用的存储性能要低于单机本地节点的存储性能。
在实际应用中发现，当集群中虚拟机数目较多时，分布式存储的I/O表现会极大的影响实际性能，所以采用优秀的I/O优化策略可以对虚拟机规模及其时延有极大的益处。
所以现有技术提出了两种解决方法；
方法一：运行的虚拟机直接使用本地存储资源；
Vmware等虚拟化软件通常在虚拟机开机后，可以选择将集群里运行中的虚拟机文件同时存放于本地物理机存储与vSAN等共享存储中，通过这类优化方法，可以保证虚拟机在运行中与单节点运行的虚拟机性能几乎没有差别。
方法二：采用高性能存储与高带宽专用数据网络，同时将虚拟机运行在内存上；
采用高性能存储，并搭建专用的高带宽专用数据网络的方法，将上层应用数据保存在外部存储，使用中集群计算节点直接通过高带宽专用数据网络连接外部存储并使用，同时外部存储通过各级缓存提升响应速度，外部存储采用专门的数据处理芯片解放计算节点的数据调用方面的资源占用，达到一定程度的性能提升。
但是方法一由于在分布式存储中的数据量的极度膨胀，采用该技术会导致本地存储容量需求同样膨胀，造成资源浪费；
而集群中虚拟机通常不会固定运行于一个计算节点，随着虚拟机规模的提升，分布式存储系统会不时对虚拟机资源进行重新平衡，导致部分虚拟机的迁移，这样会导致分布式存储集群的网络资源的分配不均。
方法二由于采用高带宽专用数据网络进行数据传输，I/O性能必然比单机本地存储性能要差，在使用中为了提升分布式存储性能，通常要根据具体的应用环境定制存储参数与运行模式，导致分布式存储系统的整体普适性较差，且浪费人力物力，且虚拟机运行于内存中的方式，因内存成本较高，无法大规模使用，来保证分布式集群中的虚拟机全部运行于内存中。
发明内容
本发明主要解决的是分布式系统IO压力大，导致分布式系统整体性能不佳的问题。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种采用AEP提升虚拟机存储性能的方法，应用于分布式系统，包括以下步骤：
初始化：配置AEP设备，设定转移阈值、时间阈值；
监测负载：监测分布式系统的IO负载，若所述分布式系统的IO负载超过转移阈值，则开启应急策略步骤；
应急策略：判断所述分布式系统的虚拟机的镜像的容量是否超过所述AEP设备的内存容量，若未超过，则执行数据同步步骤；
数据同步：将所述虚拟机运行的业务切换至所述AEP设备运行，并在所述时间阈值内判断所述分布式系统的IO负载是否降低到所述转移阈值下，若是，则将所述业务切换至所述分布式系统的外部存储中。
进一步，所述应急策略步骤进一步包括：若所述虚拟机的镜像的容量超过所述AEP的内存容量，则执行缓存备援步骤；
所述缓存备援步骤包括：
在所述AEP设备内划分备援缓存，将所述业务切换至所述备援缓存中；
判断所述IO负载是否降低到所述转移阈值下；
若所述IO负载降低到所述转移阈值下，则将所述备援缓存的缓存同步至所外部存储，并将所述业务切换至所述外部存储。
进一步，所述判断所述IO负载是否降低到所述转移阈值下的步骤进一步包括：若所述IO负载未降低到所述转移阈值下，则同步所述虚拟机的业务至所述备援缓存中。
进一步，所述数据同步的步骤进一步包括：
在所述时间阈值内周期性判断所述IO负载是否降低到所述转移阈值下；
若所述IO负载已经降低到所述转移阈值下，则同步所述业务至所述外部存储，并将所述业务同步运行于所述AEP设备及所述外部存储，并判断所述IO负载是否超过所述转移阈值；
若所IO负载未超过所述转移阈值，则将所述业务迁移至所述外部存储中。
进一步，所述数据同步的步骤进一步包括：
使用copy命令复制所述虚拟机运行的业务；
修改所述虚拟机的存储路径；
所述AEP设备根据修改后的所述存储路径执行所述业务的切换。
进一步，所述监测负载的步骤进一步包括：使用所述分布式系统的监控工具进行监控，当所述分布式系统为vmware，使用系统资源监控工具进行监控；当所述所述分布式系统为linux时，使用iostat工具进行监控；当所述分布式系统为windos时，使用资源管理器进行监控；
或，使用第三方工具进行监控。
进一步，所述使用第三方工具进行监控的步骤进一步包括：安装nmon并在所述分布式系统中运行，根据所述nmon抓取所IO负载。
进一步，所述初始化的步骤进一步包括：根据所述分布式系统的性能设定所述转移阈值及所述时间阈值。
本发明还提供一种采用AEP提升虚拟机存储性能的系统，应用于分布式系统，所述系统包括：配置模块、监控模块、同步模块及策略模块；
所述配置模块用于配置AEP设备，还用于扫描分布式系统的性能并设定转移阈值及时间阈值；
所述策略模块用于设定应急策略及备援策略；
所述监控模块用于监控所述分布式系统的IO负载，并监控运行于所述分布式系统的虚拟机的容量大小；
当所述监控模块监控到所述IO负载满足转移阈值，执行所述应急策略，所述应急策略判断AEP设备的容量与虚拟机的容量大小，若所述AEP设备的容量大于所述虚拟机的容量，则执行所述应急策略，若所述AEP设备的容量小于所述虚拟机的容量，则执行所述备援策略。
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时，实现任一项所述的采用AEP提升虚拟机存储性能的方法的步骤。
本发明的有益效果是：
1、本发明所述的采用AEP提升虚拟机存储性能的方法，可以实现提升分布式服务器集群的IO性能，且无需对分布式集群进行重构，并且引入了各种策略，无需人员进行维护，成本较低，无需配置大量高性能存储即可保证环境的正常运行。
2、本发明所述的采用AEP提升虚拟机存储性能的系统，可以实现对服务器集群的策略的设定，及配置AEP设备，并对分布式系统进行性能的监控
3、本发明所述的采用AEP提升虚拟机存储性能的介质，可以实现判定IO负载，并在IO负载超过转移阈值时，判定虚拟机的容量与AEP的容量的大小。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例1所述的采用AEP提升虚拟机存储性能的方法的示意图；
图2是本发明实施例1所述的采用AEP提升虚拟机存储性能的方法的流程图；
图3是本发明实施例2所述的采用AEP提升虚拟机存储性能的系统的示意图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例1
本发明本发明一种采用AEP提升虚拟机存储性能的方法，应用于分布式系统，请参阅图1及图2，包括以下步骤：
为了提升分布式存储系统中虚拟机存储性能，本发明采用Intel的AEP设备，其读写速度要远高于目前市面的各种存储设备，但由于设计的限制，其容量无法满足大规模集群环境下的存储需求，因此并不能通过在分布式存储系统中全面换装AEP来解决虚拟机存储的性能瓶颈问题，同时考虑到数据量的急剧增长，采用外部存储集群环境以其成本相对较低，扩容方便等优势，仍拥有无法替代的优势，进而提出将AEP结合外部存储解决虚拟机存储性能的方法，具体为以下步骤：
S100、配置AEP；
首先为了应用AEP设备，需要在分布式存储集群中配置AEP，完成AEP在分布式存储集群中的初始化与适应性配置，因该配置方式适用于指定的分布式存储系统，且为本领域较为成熟的技术手段，所以在本实施例中不再赘述，只需要完成AEP的配置，且该分布式存储集群各个节点可以连通并进行完整的信息传输过程即可，分布式存储集群上可以完整的运行各种虚拟机。
S200、开启系统资源监测；
S201、监控分布式存储系统中运行的若干虚拟机的IO负载，若IO负载超过转移阈值，则将该虚拟机的镜像由外部存储复制到运行该虚拟机的节点的第一AEP存储中，并将该虚拟机的后续的业务处理也转移至第一AEP存储中，并断开原外部存储端口，
S202、转移阈值的设定根据业务情况设置，可以根据服务器集群部署业务的最低IO要求进行设置，可添加复数监控项并在任意一项达到阈值后进行操作，如添加监控项为外部存储延迟，当外部存储延迟为300ms设定为转移阈值。
S203、系统资源监控，通过分布式系统自带的工具进行监控，如vmware自带系统资源监控工具勾选所需I/O监控项目；linux使用iostat并在运行中选择监控项目参数。如iostat–x–d–k 1-t；windows使用资源管理器监控系统I/O负载。
也可以使用第三方系统监控工具，如安装nmon并在分布式系统运行中抓取IO信息输出，通常使用如下步骤：
新建一个nmon文件夹：
代码如下，mkdir nmon；
将文件夹解压：
代码如下，tar xvfz nmon16e_mpginc.tar.gz；
将文件夹改名：
代码如下，mv nmon_x86_64_centos7/root/nmon；
给工具授权：
代码如下，chmod-x nmon 777；
运行nmon：
代码如下，/nmon；
S300、系统继续监控集群I/O性能，并开启应急策略；
当服务器系统中的IO负载低于设置的转移阈值且持续10分钟时，该10分钟的设定是为了防止系统频繁切换存储导致的IO性能下降，且定义该10分钟为时间阈值，当IO负载低于转移阈值且满足时间阈值，同步AEP设备内存储的数据与外部存储的数据，将虚拟机运行的业务同步运行于AEP与外部存储中，并继续监控服务器系统的IO性能。
S301、若在时间阈值内，服务器IO不超过转移阈值，则停止AEP中的镜像业务并将AEP的镜像业务删除，同时该业务运行于外部存储；
S302、若服务器系统IO继续升高并持续保持在转移阈值上，则停止使用外部存储，将业务运行于AEP设备中；
将虚拟机运行的业务同步至AEP设备的方法为，将虚拟机运行中的业务的镜像卷通过迁移工具进行复制迁移，例如
KVM通过copy命令复制镜像，
代码如下cp AEP/test.img public_storage/test.img；
在虚拟机配置文件中修改存储路径，
代码如下Sed–i“s/AEP/public_storage/g”test.xml；
服务器系统的业务同步运行于AEP与外部存储的方法步骤为；
在AEP与外部存储同时存在虚拟机卷时，虚拟机进行内存到存储的数据写入操作时，同时对AEP与外部存储进行写入；
做内存对存储数据读取操作时只读取外部存储数据，以此达到AEP与外部存储同步更新数据的目的，同时只读取外部存储数据用以模拟系统切换为外部存储时的运行状态，便于后续监控I/O是否达到瓶颈；
代码示例如下：
安装rsync
yum install rsync；
将AEP端路径添加到配置文件
sed–i s/rsync_date_1/aep/g/etc/rsyncd；
外部存储端开启rsync并从AEP端拉取数据
/usr/bin/rsync-vzrtopg--delete--progress aepuser@aepip::rsync_module_1/rsync_data--password-file＝/aep。
S400、AEP备援；
检测虚拟机的存储状况及服务器系统的AEP设备的存储容量，若虚拟机超过服务器系统的AEP设备的存储容量时，将AEP存储作为备援缓存使用，具体为以下步骤：
S401、划分AEP设备的磁盘缓存分区；
具体代码为：mkswap/dev/aepdisk1；
在AEP设备中为存储过大的虚拟机划分专用的AEP缓存，用以进行堆栈式的数据缓存；
S402、虚拟机数据缓存地址变更；
将虚拟机运行中使用的数据资源首先放入该AEP缓存中保存，且该缓存与AEP缓存资源中的数据资源在进行AEP同步时，首先使用该AEP中缓存的资源，从而减少对外部存储的访问次数，较少对于外部存储的IO使用，且由于AEP相对于服务器系统中的内存的容量更大，可以保证多数常访问的业务数据资源保存于AEP设备中，有效减少对外部存储的访问次数，提升系统性能，具体代码为使用swapon/dev/aepdisk1，swapon命令使分区生效。
实施例2
本发明实施例提供一种采用AEP提升虚拟机存储性能的系统，请参阅图3，包括：配置模块、监控模块、同步模块和策略模块；
配置模块用于配置AEP设备，配置模块还用于扫描分布式系统的整体性能，并根据分布式系统的性能设定转移阈值及时间阈值。
策略模块设有应急策略与备援策略，该备援策略及应急策略为分布式系统管理人员设定。
监控模块监控分布式系统的IO负载情况，若分布式系统的IO负载超过转移阈值，则开启应急策略，监控模块还用于监控分布式系统中的虚拟机的镜像的大小，若监控模块监控到IO负载大于转移阈值时，监控模块触发应急策略与同步模块，监控模块判断AEP的内存与虚拟机的容量大小，若AEP的内存容量大于虚拟机的容量大小，则同步模块将虚拟机中运行的业务的镜像同步至AEP设备中运行，且在时间阈值内周期的轮询IO负载是否恢复正常，若未恢复正常，则继续在AEP中运行业务，若恢复正常，将业务运行于分布式存储的外部存储中，此外部存储为除了运行AEP的存储节点；
若AEP的内容容量大小小于虚拟机的容量大小，则执行备援策略，备援策略为在AEP中划分备援缓存，将业务切换至备援缓存中，并在这样做后，判断分布式系统的IO负载大小，若IO负载降低至转移阈值下，则将备援缓存内所有的数据迁移至外部存储中，并将业务也迁移至外部存储，实现了利用AEP进行二级缓存的技术。
基于与前述实施例中方法同样的发明构思，本说明书实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如前述公开的一种采用AEP提升虚拟机存储性能的方法的步骤。
上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种采用AEP提升虚拟机存储性能的方法，应用于分布式系统，其特征在于，包括以下步骤：
初始化：配置AEP设备，设定转移阈值、时间阈值；
监测负载：监测分布式系统的IO负载，若所述分布式系统的IO负载超过转移阈值，则开启应急策略步骤；
应急策略：判断所述分布式系统的虚拟机的镜像的容量是否超过所述AEP设备的内存容量，若未超过，则执行数据同步步骤；
数据同步：将所述虚拟机运行的业务切换至所述AEP设备运行，并在所述时间阈值内判断所述分布式系统的IO负载是否降低到所述转移阈值下，若是，则将所述业务切换至所述分布式系统的外部存储中。
2.根据权利要求1所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述应急策略步骤进一步包括：若所述虚拟机的镜像的容量超过所述AEP的内存容量，则执行缓存备援步骤；
所述缓存备援步骤包括：
在所述AEP设备内划分备援缓存，将所述业务切换至所述备援缓存中；
判断所述IO负载是否降低到所述转移阈值下；
若所述IO负载降低到所述转移阈值下，则将所述备援缓存的缓存同步至所外部存储，并将所述业务切换至所述外部存储。
3.根据权利要求2所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述判断所述IO负载是否降低到所述转移阈值下的步骤进一步包括：若所述IO负载未降低到所述转移阈值下，则同步所述虚拟机的业务至所述备援缓存中。
4.根据权利要求1所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述数据同步的步骤进一步包括：
在所述时间阈值内周期性判断所述IO负载是否降低到所述转移阈值下；
若所述IO负载已经降低到所述转移阈值下，则同步所述业务至所述外部存储，并将所述业务同步运行于所述AEP设备及所述外部存储，并判断所述IO负载是否超过所述转移阈值；
若所IO负载未超过所述转移阈值，则将所述业务迁移至所述外部存储中。
5.根据权利要求4所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述数据同步的步骤进一步包括：
使用copy命令复制所述虚拟机运行的业务；
修改所述虚拟机的存储路径；
所述AEP设备根据修改后的所述存储路径执行所述业务的切换。
6.根据权利要求1所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述监测负载的步骤进一步包括：使用所述分布式系统的监控工具进行监控，当所述分布式系统为vmware，使用系统资源监控工具进行监控；当所述所述分布式系统为linux时，使用iostat工具进行监控；当所述分布式系统为windos时，使用资源管理器进行监控；
或，使用第三方工具进行监控。
7.根据权利要求6所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述使用第三方工具进行监控的步骤进一步包括：安装nmon并在所述分布式系统中运行，根据所述nmon抓取所IO负载。
8.根据权利要求6所述的采用AEP提升虚拟机存储性能的方法，其特征在于：所述初始化的步骤进一步包括：根据所述分布式系统的性能设定所述转移阈值及所述时间阈值。
9.一种采用AEP提升虚拟机存储性能的系统，应用于分布式系统，其特征在于，所述系统包括：配置模块、监控模块、同步模块及策略模块；
所述配置模块用于配置AEP设备，还用于扫描分布式系统的性能并设定转移阈值及时间阈值；
所述策略模块用于设定应急策略及备援策略；
所述监控模块用于监控所述分布式系统的IO负载，当所述监控模块监控到所述IO负载满足转移阈值，执行所述应急策略；所述监控模块还用于监控运行于所述分布式系统的虚拟机的容量大小，若所述监控模块监控到所述IO负载大于转移阈值时，监控模块触发应急策略与同步模块；
所述监控模块判断AEP设备的容量与虚拟机的容量大小，若所述AEP设备的容量大于所述虚拟机的容量，则执行所述应急策略，所述应急策略为所述同步模块将虚拟机中运行的业务的镜像同步至AEP设备中运行，且在所述时间阈值内周期的轮询IO负载是否恢复正常，若未恢复正常，则继续在AEP设备中运行业务，若恢复正常，将业务运行于分布式存储的外部存储中；
若所述AEP设备的容量小于所述虚拟机的容量，则执行所述备援策略，所述备援策略为在AEP设备中划分备援缓存，将业务切换至备援缓存中，判断分布式系统的IO负载大小，若IO负载降低至所述转移阈值下，则将备援缓存内所有的数据迁移至外部存储中，并将业务迁移至外部存储。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1-8任一项所述的采用AEP提升虚拟机存储性能的步骤。
CN202110216423.7A 2021-02-26 2021-02-26 一种采用aep提升虚拟机存储性能的方法、系统及介质 Active CN113032091B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110216423.7A CN113032091B (zh) 2021-02-26 2021-02-26 一种采用aep提升虚拟机存储性能的方法、系统及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110216423.7A CN113032091B (zh) 2021-02-26 2021-02-26 一种采用aep提升虚拟机存储性能的方法、系统及介质

Publications (2)

Publication Number Publication Date
CN113032091A CN113032091A (zh) 2021-06-25
CN113032091B true CN113032091B (zh) 2022-07-12

Family

ID=76461698

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110216423.7A Active CN113032091B (zh) 2021-02-26 2021-02-26 一种采用aep提升虚拟机存储性能的方法、系统及介质

Country Status (1)

Country Link
CN (1) CN113032091B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113590049B (zh) * 2021-09-28 2021-12-31 苏州浪潮智能科技有限公司 一种存储卷跨节点克隆的方法、装置、设备及可读介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109189574A (zh) * 2018-08-16 2019-01-11 郑州云海信息技术有限公司 一种基于虚拟化内存负载监控的负载均衡调度方法及系统
CN109284211A (zh) * 2018-10-08 2019-01-29 郑州云海信息技术有限公司 一种aep内存模式的测试方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103823881B (zh) * 2014-03-04 2017-07-28 北京京东尚科信息技术有限公司 分布式数据库的性能优化的方法及装置
US20200026428A1 (en) * 2018-07-23 2020-01-23 EMC IP Holding Company LLC Smart auto-backup of virtual machines using a virtual proxy
CN111752974A (zh) * 2020-05-18 2020-10-09 苏州浪潮智能科技有限公司 一种加速数据处理效率的方法及数据库

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109189574A (zh) * 2018-08-16 2019-01-11 郑州云海信息技术有限公司 一种基于虚拟化内存负载监控的负载均衡调度方法及系统
CN109284211A (zh) * 2018-10-08 2019-01-29 郑州云海信息技术有限公司 一种aep内存模式的测试方法及装置

Also Published As

Publication number Publication date
CN113032091A (zh) 2021-06-25

Similar Documents

Publication Publication Date Title
US11636015B2 (en) Storage system and control software deployment method
US9317314B2 (en) Techniques for migrating a virtual machine using shared storage
US8924358B1 (en) Change tracking of individual virtual disk files
US9521198B1 (en) Systems and methods for implementing an enterprise-class converged compute-network-storage appliance
US8037267B2 (en) Remote copy system and remote site power saving method
US7877358B2 (en) Replacing system hardware
JP4942909B2 (ja) 仮想マシンをフォークまたはマイグレートするための方法
US10838829B2 (en) Method and apparatus for loading data from a mirror server and a non-transitory computer readable storage medium
US9354907B1 (en) Optimized restore of virtual machine and virtual disk data
US9792150B1 (en) Detecting site change for migrated virtual machines
JP2008108145A (ja) 計算機システム及びこれを用いたデータの管理方法
US11151686B2 (en) GPU based server in a distributed file system
US10620871B1 (en) Storage scheme for a distributed storage system
JP6123626B2 (ja) 処理再開方法、処理再開プログラムおよび情報処理システム
CN112230853A (zh) 存储容量调整方法、装置、设备及存储介质
CN113032091B (zh) 一种采用aep提升虚拟机存储性能的方法、系统及介质
US8621260B1 (en) Site-level sub-cluster dependencies
CN112243030A (zh) 分布式存储系统的数据同步方法、装置、设备及介质
CN106775846B (zh) 用于物理服务器的在线迁移的方法及装置
US9952941B2 (en) Elastic virtual multipath resource access using sequestered partitions
CN112685130A (zh) 分布式存储环境下的虚拟机备份方法、装置和存储介质
CN111459607A (zh) 基于云桌面搭建虚拟化的虚拟服务器集群方法、系统及介质
Hirofuchi et al. A wan-optimized live storage migration mechanism toward virtual machine evacuation upon severe disasters
JP2021036450A (ja) 記憶システム及びその制御方法
Eswaran et al. Tackling Memory Footprint Expansion During Live Migration of Virtual Machines

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant