CN107402969A - 一种存储性能统计方法及系统 - Google Patents

一种存储性能统计方法及系统 Download PDF

Info

Publication number
CN107402969A
CN107402969A CN201710507789.3A CN201710507789A CN107402969A CN 107402969 A CN107402969 A CN 107402969A CN 201710507789 A CN201710507789 A CN 201710507789A CN 107402969 A CN107402969 A CN 107402969A
Authority
CN
China
Prior art keywords
storage performance
performance statistics
module
statistics
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710507789.3A
Other languages
English (en)
Inventor
宋腾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710507789.3A priority Critical patent/CN107402969A/zh
Publication of CN107402969A publication Critical patent/CN107402969A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems

Abstract

本发明公开了一种存储性能统计方法,该方法通过存储性能统计获取模块获取实时的存储性能统计数据;图形用户模块通过命令行模块获取存储性能统计获取模块的存储性能统计数据,并显示存储性能统计数据,且将存储性能统计数据直接写入服务器端的数据库。在用户获取实时性能统计数据的同时,将实时性能统计数据写入至数据库,不用在本地预先申请存储空间,不用额外存储资源开销;且直接将存储性能统计数据存储至数据库,不用进行大量的磁盘IO操作,保证存储性能,提高了用户体验。此外,本发明还公开了一种存储性能统计系统,与上述方法有一一对应的优点。

Description

一种存储性能统计方法及系统
技术领域
本发明涉及存储技术领域,特别涉及一种存储性能统计方法及系统。
背景技术
随着社会发展和PC普及,数字化信息量呈爆炸性增长,因而引发了以存储技术为中心的新一轮数据技术浪潮。
传统的信息存储方式已不能满足新的需要,存储的网络化成为IT技术的新亮点。现有的历史性能统计流程中,首先在本地存储中申请一定的存储空间,用于存放实时性能统计数据;在用户获取实时性能统计数据的同时,也会将实时性能统计数据保存在预先申请的存储空间,当存储空间超过用户设定的阈值的80%时,通过ftp server服务器将存储空间内的实时性能统计数据传输到客户端中,然后将存储空间内的实时性能统计数据清除。基于上文所述,预先申请的存储空间需要占用本地存储系统的存储资源,且读写存储空间内的实时性能统计数据,需要占用系统资源,磁盘IO消耗变大,影响用户体验。
发明内容
本发明的目的是提供一种存储性能统计方法及系统,目的在于解决现有存储性能统计方法占用额外存储资源和大量磁盘IO操作导致存储性能下降的问题。
为解决上述技术问题,本发明提供一种存储性能统计方法,该方法包括:
存储性能统计获取模块获取实时的存储性能统计数据;
图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库。
可选地,在所述图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库之后还包括:
所述图形用户模块获取包含预设时间段的查询指令;
根据所述查询指令,所述图形用户模块通过所述命令行模块读取所述数据库内所述预设时间段的历史存储性能统计数据,并显示所述历史存储性能统计数据。
可选地,所述存储性能统计数据至少包括IOPS、带宽及时延信息。
此外,本发明还提供了一种存储性能统计系统,该系统包括:
存储性能统计获取模块,用于获取实时的存储性能统计数据;
图形用户模块,用于通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库;
所述命令行模块,用于作为所述图形用户模块和所述存储性能统计获取模块的访问媒介;
所述数据库,用于存储所述存储性能统计数据。
可选地,所述图形用户模块还包括:
查询指令获取单元,用于获取包含预设时间段的查询指令;
历史数据显示单元,用于根据所述查询指令,通过所述命令行模块读取所述数据库内所述预设时间段的历史存储性能统计数据,并显示所述历史存储性能统计数据。
可选地,所述存储性能统计数据至少包括IOPS、带宽及时延信息。
本发明实施例所提供的存储性能统计方法及系统,通过存储性能统计获取模块获取实时的存储性能统计数据;图形用户模块通过命令行模块获取存储性能统计获取模块的存储性能统计数据,并显示存储性能统计数据,且将存储性能统计数据直接写入服务器端的数据库。本申请在用户获取实时性能统计数据的同时,将实时性能统计数据写入至数据库,不用在本地预先申请存储空间,不用额外存储资源开销;且直接将存储性能统计数据存储至数据库,不用进行大量的磁盘IO操作,保证存储性能,提高了用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的存储性能统计方法的一种具体实施方式的流程示意图;
图2为本发明实施例提供的现有性能统计流程示意图;
图3为本发明实施例提供的性能统计优化流程示意图;
图4为本发明实施例提供的存储性能统计系统的结构示意框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,图1为本发明实施例提供的存储性能统计方法的一种具体实施方式的流程示意图,该方法包括以下步骤:
步骤101:存储性能统计获取模块获取实时的存储性能统计数据。
可以理解,上述存储性能统计获取模块可以通过调用底层磁盘、端口等的接口,将数据填入至存储性能统计模块中用于记录数据的域中,以实现存储性能统计数据的获取。
为了简明地介绍本发明实施例的性能统计流程和现有性能统计流程的区别,下面将结合图2和图3进介绍。图2为本发明实施例提供的现有性能统计流程示意图,图3为本发明实施例提供的性能统计优化流程示意图。
如图2所示,图形用户界面(Gui)通过命令行界面(CLI)获取存储性能统计获取模块内的性能统计数据,且会将性能统计数据存储至存储文件即存储空间中,当存储文件超过用户设定阈值的80%时,则会将存储文件内的性能统计数据通过ftp server服务器将存储文件内的性能统计数据传输至客户端,且清除存储文件中的性能统计数据。存储性能统计获取模块可以获取到Pool、Volume及Disk的数据。
如图3所示,与图2相比,Gui通过CLI获取存储性能统计获取模块中的存储性能数据时,直接将性能统计数据存储至服务器端的数据库中,而不是先存储至存储文件中。
从图2和图3可以直观地看出,现有的历史性能统计流程中,需要占用额外的存储资源,且需要进行大量的磁盘IO读写。而本发明实施例的可以直接从数据库中读取,不用消耗额外的存储资源和进行大量的磁盘IO读写。
步骤102:图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库。
可以理解,上述存储性能统计数据可以具体包括IOPS、带宽及时延信息等相关性能数据。
具体地,用户可以通过Gui输入相应的指令,通过CLI将实时存储性能统计数据实时显示在Gui上,同时,也将实时的存储性能统计数据存储至数据库中。
当需要进行历史性能数据的显示,可以通过CLI读取数据库内的存储性能数据即可。故作为一种具体实施方式,在上述图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库之后还可以包括:所述图形用户模块获取包含预设时间段的查询指令;根据所述查询指令,所述图形用户模块通过所述命令行模块读取所述数据库内所述预设时间段的历史存储性能统计数据,并显示所述历史存储性能统计数据。
可以理解,上述预设时间段可以由用户设定,具体可以为一年或一个月不等。
本实施例所提供的存储性能统计方法,该方法通过存储性能统计获取模块获取实时的存储性能统计数据;图形用户模块通过命令行模块获取存储性能统计获取模块的存储性能统计数据,并显示存储性能统计数据,且将存储性能统计数据直接写入服务器端的数据库。在用户获取实时性能统计数据的同时,将实时性能统计数据写入至数据库,不用在本地预先申请存储空间,不用额外存储资源开销;且直接将存储性能统计数据存储至数据库,不用进行大量的磁盘IO操作,保证存储性能,提高了用户体验。
下面对本发明实施例提供的一种存储性能统计系统进行介绍,下文描述的一种存储性能统计系统与上文描述的一种存储性能统计方法可相互对应参照。
请参考图4,图4为本发明实施例提供的存储性能统计系统的结构示意框图。参见图4该系统可以包括:
存储性能统计获取模块41,用于获取实时的存储性能统计数据;
图形用户模块42,用于通过命令行模块获取存储性能统计获取模块的存储性能统计数据,并显示存储性能统计数据,且将存储性能统计数据直接写入服务器端的数据库;
命令行模块43,用于作为图形用户模块和存储性能统计获取模块的访问媒介;
数据库44,用于存储存储性能统计数据。
作为一种具体实施方式,上述图形用户模块还可以包括:
查询指令获取单元,用于获取包含预设时间段的查询指令;
历史数据显示单元,用于根据查询指令,通过命令行模块读取数据库内预设时间段的历史存储性能统计数据,并显示历史存储性能统计数据。
可选地,上述存储性能统计数据至少包括IOPS、带宽及时延信息。
本实施例所提供的存储性能统计系统,该系统在用户获取实时性能统计数据的同时,将实时性能统计数据写入至数据库,不用在本地预先申请存储空间,不用额外存储资源开销;且直接将存储性能统计数据存储至数据库,不用进行大量的磁盘IO操作,保证存储性能,提高了用户体验。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的存储性能统计方法及系统进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (6)

1.一种存储性能统计方法,其特征在于,包括:
存储性能统计获取模块获取实时的存储性能统计数据;
图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库。
2.根据权利要求1所述的存储性能统计方法,其特征在于,在所述图形用户模块通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库之后还包括:
所述图形用户模块获取包含预设时间段的查询指令;
根据所述查询指令,所述图形用户模块通过所述命令行模块读取所述数据库内所述预设时间段的历史存储性能统计数据,并显示所述历史存储性能统计数据。
3.根据权利要求1所述的存储性能统计方法,其特征在于,所述存储性能统计数据至少包括IOPS、带宽及时延信息。
4.一种存储性能统计系统,其特征在于,
存储性能统计获取模块,用于获取实时的存储性能统计数据;
图形用户模块,用于通过命令行模块获取所述存储性能统计获取模块的所述存储性能统计数据,并显示所述存储性能统计数据,且将所述存储性能统计数据直接写入服务器端的数据库;
所述命令行模块,用于作为所述图形用户模块和所述存储性能统计获取模块的访问媒介;
所述数据库,用于存储所述存储性能统计数据。
5.根据权利要求4所述的存储性能统计系统,其特征在于,所述图形用户模块还包括:
查询指令获取单元,用于获取包含预设时间段的查询指令;
历史数据显示单元,用于根据所述查询指令,通过所述命令行模块读取所述数据库内所述预设时间段的历史存储性能统计数据,并显示所述历史存储性能统计数据。
6.根据权利要求4所述的存储性能统计系统,其特征在于,所述存储性能统计数据至少包括IOPS、带宽及时延信息。
CN201710507789.3A 2017-06-28 2017-06-28 一种存储性能统计方法及系统 Pending CN107402969A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710507789.3A CN107402969A (zh) 2017-06-28 2017-06-28 一种存储性能统计方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710507789.3A CN107402969A (zh) 2017-06-28 2017-06-28 一种存储性能统计方法及系统

Publications (1)

Publication Number Publication Date
CN107402969A true CN107402969A (zh) 2017-11-28

Family

ID=60405401

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710507789.3A Pending CN107402969A (zh) 2017-06-28 2017-06-28 一种存储性能统计方法及系统

Country Status (1)

Country Link
CN (1) CN107402969A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108920597A (zh) * 2018-06-27 2018-11-30 郑州云海信息技术有限公司 一种处理存储设备历史性能统计数据的方法
CN109189656A (zh) * 2018-08-08 2019-01-11 浪潮电子信息产业股份有限公司 一种基于标准差算法分析存储设备iops性能数据的方法
CN109189655A (zh) * 2018-08-08 2019-01-11 郑州云海信息技术有限公司 一种基于均值优化算法统计存储设备历史性能数据的方法
CN109324948A (zh) * 2018-09-14 2019-02-12 郑州云海信息技术有限公司 一种存储设备带宽性能数据的分析方法
CN109408353A (zh) * 2018-11-13 2019-03-01 郑州云海信息技术有限公司 一种存储分区利用率和iops的分析方法,系统及终端设备
CN110619006A (zh) * 2019-08-30 2019-12-27 上海曼斯克物联网科技有限公司 基于物联网的统计数据管理方法、装置、平台和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070079291A1 (en) * 2005-09-27 2007-04-05 Bea Systems, Inc. System and method for dynamic analysis window for accurate result analysis for performance test
CN102026228A (zh) * 2010-12-16 2011-04-20 大唐移动通信设备有限公司 通信网络性能数据的统计方法和设备
CN104636232A (zh) * 2013-11-06 2015-05-20 中国移动通信集团广东有限公司 一种分布式服务系统的性能监控装置和方法
CN105989129A (zh) * 2015-02-15 2016-10-05 腾讯科技(深圳)有限公司 实时数据统计方法和装置
CN106407078A (zh) * 2016-09-26 2017-02-15 中国工商银行股份有限公司 基于信息交互的客户端性能监控装置及方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070079291A1 (en) * 2005-09-27 2007-04-05 Bea Systems, Inc. System and method for dynamic analysis window for accurate result analysis for performance test
CN102026228A (zh) * 2010-12-16 2011-04-20 大唐移动通信设备有限公司 通信网络性能数据的统计方法和设备
CN104636232A (zh) * 2013-11-06 2015-05-20 中国移动通信集团广东有限公司 一种分布式服务系统的性能监控装置和方法
CN105989129A (zh) * 2015-02-15 2016-10-05 腾讯科技(深圳)有限公司 实时数据统计方法和装置
CN106407078A (zh) * 2016-09-26 2017-02-15 中国工商银行股份有限公司 基于信息交互的客户端性能监控装置及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ANAN_ZOU: "通过数据库评估存储设备IO性能", 《博客园》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108920597A (zh) * 2018-06-27 2018-11-30 郑州云海信息技术有限公司 一种处理存储设备历史性能统计数据的方法
CN109189656A (zh) * 2018-08-08 2019-01-11 浪潮电子信息产业股份有限公司 一种基于标准差算法分析存储设备iops性能数据的方法
CN109189655A (zh) * 2018-08-08 2019-01-11 郑州云海信息技术有限公司 一种基于均值优化算法统计存储设备历史性能数据的方法
CN109324948A (zh) * 2018-09-14 2019-02-12 郑州云海信息技术有限公司 一种存储设备带宽性能数据的分析方法
CN109408353A (zh) * 2018-11-13 2019-03-01 郑州云海信息技术有限公司 一种存储分区利用率和iops的分析方法,系统及终端设备
CN109408353B (zh) * 2018-11-13 2022-02-18 郑州云海信息技术有限公司 一种存储分区利用率和iops的分析方法,系统及终端设备
CN110619006A (zh) * 2019-08-30 2019-12-27 上海曼斯克物联网科技有限公司 基于物联网的统计数据管理方法、装置、平台和存储介质

Similar Documents

Publication Publication Date Title
CN107402969A (zh) 一种存储性能统计方法及系统
CN103927251B (zh) 一种嵌入式系统的日志管理方法
CN105511957B (zh) 用于生成作业告警的方法和系统
CN107239569A (zh) 一种分布式文件系统子树存储方法及装置
CN102982182B (zh) 一种数据存储规划方法及装置
CN110442341A (zh) 应用程序的界面配置方法、装置及终端设备
CN109471843A (zh) 一种元数据缓存方法、系统及相关装置
CN104574051A (zh) 一种计费方法及装置
CN107801095A (zh) 一种音视频解码方法及终端设备
CN110007870A (zh) 一种存储设备写请求处理方法及相关装置
CN107870980A (zh) 电子装置、账单数据处理方法及计算机存储介质
CN107480074A (zh) 一种缓存方法、装置及电子设备
CN107506146A (zh) 一种数据存储系统
CN109656487A (zh) 一种数据处理方法、装置、设备及存储介质
CN103500226A (zh) 一种去除敏感数据敏感性的方法及装置
CN107451271A (zh) 一种哈希表处理方法、装置、设备及存储介质
CN107506466A (zh) 一种小文件存储方法及系统
CN106570005A (zh) 清理数据库的方法和装置
CN106993147B (zh) 一种录像覆盖方法、装置及网络硬盘录像机
CN109189724A (zh) 提高视频监控系统音视频数据存储效率的方法及装置
CN116339643B (zh) 一种磁盘阵列的格式化方法、装置、设备和介质
CN108646987A (zh) 一种文件卷的管理方法、装置、存储介质及终端
CN104391947A (zh) 海量gis数据实时处理方法及系统
CN107239572A (zh) 一种存储管理软件的数据缓存方法及装置
CN104252415B (zh) 一种重新分布数据的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171128

RJ01 Rejection of invention patent application after publication