CN105260282A - 一种应用读写特征分析方法及装置 - Google Patents

一种应用读写特征分析方法及装置 Download PDF

Info

Publication number
CN105260282A
CN105260282A CN201510612486.9A CN201510612486A CN105260282A CN 105260282 A CN105260282 A CN 105260282A CN 201510612486 A CN201510612486 A CN 201510612486A CN 105260282 A CN105260282 A CN 105260282A
Authority
CN
China
Prior art keywords
reading
file
application
cache
cache file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510612486.9A
Other languages
English (en)
Other versions
CN105260282B (zh
Inventor
张敬海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Beijing Electronic Information Industry Co Ltd
Original Assignee
Inspur Beijing Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Beijing Electronic Information Industry Co Ltd filed Critical Inspur Beijing Electronic Information Industry Co Ltd
Priority to CN201510612486.9A priority Critical patent/CN105260282B/zh
Publication of CN105260282A publication Critical patent/CN105260282A/zh
Application granted granted Critical
Publication of CN105260282B publication Critical patent/CN105260282B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种应用读写特征分析方法及装置,该方法包括:在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;对所述缓存文件进行归类分析后,写入数据库中;利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。该方法实现降低CPU资源消耗,提高效率。

Description

一种应用读写特征分析方法及装置
技术领域
本发明涉及文件系统监控技术领域,特别是涉及一种应用读写特征分析方法及装置。
背景技术
目前,随着计算机上的应用系统的不断增多,现在很多应用程序都有可能是瓶颈在数据io方面,因此加强应用的读写特征的分析很有必要。
一般的,应用读写特征的分析方法是先采用计算机中的扫描程序系统对系统文件进行全面扫描,获取应用的读写特征构成的图像,完成对应用的读写特征的分析。但是在对系统文件进行扫描的过程中,扫描过程需要消耗大量的CPU资源,而且对系统文件的扫描过程会影响系统文件的正常使用,影响系统文件的正常工作,况且,对整个系统文件的扫描也需要耗费时间,这样整个应用读写特征的分析的效率也很慢。
所以,现有的应用读写特征方法对CPU资源消耗太大,且效率太低,而且影响文件的正常使用,系统文件不能正常工作。
发明内容
本发明的目的是提供一种应用读写特征分析方法及装置方法,以实现降低CPU资源消耗,提高效率。
为解决上述技术问题,本发明提供一种应用读写特征分析方法,该方法包括:
在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;
对所述缓存文件进行归类分析后,写入数据库中;
利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
优选的,所述对所述缓存文件进行归类分析后,写入数据库中,包括:
依据应用对缓存文件的操作信息对进行分类,将分类后的缓存文件写入数据库中。
优选的,所述操作信息包括:读操作、写操作或者删除操作。
优选的,所述利用绘图工具对数据库中所有的缓存文件进行绘制,包括:
读取数据库中所有的缓存文件,对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。
本发明还提供一种应用读写特征分析装置,该装置包括:
读取模块,用于在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;
写入模块,用于对所述缓存文件进行归类分析后,写入数据库中;
绘图模块,用于利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
优选的,所述写入模块包括:
分类单元,依据应用对缓存文件的操作信息对进行分类;
写入单元,用于将分类后的缓存文件写入数据库中。
优选的,所述操作信息包括:读操作、写操作或者删除操作。
优选的,所述绘制模块包括:
读取单元,用于读取数据库中所有的缓存文件;
绘制单元,用于对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。
本发明所提供的一种应用读写特征分析方法及装置,在应用的运行期间,读取文件系统中的缓存文件;对所述缓存文件进行归类分析后,写入数据库中;利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。可见,只需要获取文件系统的缓存文件,利用缓存文件来分析绘制成应用的读写特征图,完成应用读写特征的分析,这样不需要对整个系统文件进行扫描,过程更加简单,提升效率,并且避免扫描过程,对CPU资源的消耗大大减少。而且,仅仅涉及对缓存文件的提取,根本不影响系统文件的正常使用,系统文件仍能正常运行,正常工作。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明提供的一种应用读写特征分析方法的流程图;
图2为本发明所提供的一种应用读写特征分析装置的结构示意图。
具体实施方式
本发明的核心是提供一种应用读写特征分析方法及装置,以实现降低CPU资源消耗,提高效率。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,图1为本发明提供的一种应用读写特征分析方法的流程图,该方法包括:
S11:在应用的运行期间,读取文件系统中的缓存文件;
其中,其中,缓存文件的个数为多个。这里的应用为应用程序,即在计算机上的应用程序。在计算机上的应用程序开始运行时,在应用的运行过程中,会在文件系统中生成缓存文件,该缓存文件是应用运行生成的缓存文件,本身含有应用运行中应用所执行的操作属性。这里的缓存文件的生成过程为:文件先写入日志中,再从日志写入系统中。所以这里的缓存文件也指代文件系统日志,即缓存文件也可称为文件系统日志,但是不是指代常规的日志文件。缓存文件是按照一定频率反复读取的,所以能获取很多缓存文件。
S12:对缓存文件进行归类分析后,写入数据库中;
其中,对缓存文件进行归类分析后,写入数据库中的过程具体为:依据应用对缓存文件的操作信息对进行分类,将分类后的缓存文件写入数据库中。具体的,所述操作信息包括:读操作、写操作或者删除操作。在分类中,将属性为读操作的缓存文件分为一类,将属性为写操作的缓存文件分为一类,将属性为删除操作的缓存文件分为一类。数据库负责存储所有的日志数据,普通数据库软件就可以胜任,例如MySQL数据库。
S13:利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
其中,利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图的过程具体为:读取数据库中所有的缓存文件,对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。应用的读写信息的特征图包括文件大小信息及占比例图、文件读写带宽大小信息图、文件数量图或者文件拥有者信息图。
具体的,将所有的缓存文件的进行大小分类,大于10M的为一类,小于10M的为一类。或者,按照缓存文件的用户者进行分类。或者,按照缓存文件的时间信息进行分类,具体按照缓存文件的创建时间、连接时间或者修改时间进行分类。
这样,通过读取文件的日志,并存入数据库,然后经过分析,绘图处理,可以获得更为细致的文件信息,也就能获得更为详细的应用读写特征的信息,更加便于分析应用特征,找到应用的优化办法。
本发明所提供的一种应用读写特征分析方法,在应用的运行期间,读取文件系统中的缓存文件,对缓存文件进行归类分析后,写入数据库中,利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。可见,该方法只需要获取文件系统的缓存文件,利用缓存文件来分析绘制成应用的读写特征图,完成应用读写特征的分析,这样不需要对整个系统文件进行扫描,过程更加简单,提升效率,并且避免扫描过程,对CPU资源的消耗大大减少。而且,该方法仅仅涉及对缓存文件的提取,根本不影响系统文件的正常使用,系统文件仍能正常运行,正常工作。
图2为本发明所提供的一种应用读写特征分析装置的结构示意图,该装置包括:
读取模块101,用于在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;
写入模块102,用于对缓存文件进行归类分析后,写入数据库中;
绘图模块103,用于利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
其中,这里的应用为应用程序,即在计算机上的应用程序。在计算机上的应用程序开始运行时,在应用的运行过程中,会在文件系统中生成缓存文件,该缓存文件是应用运行生成的缓存文件,本身含有应用运行中应用所执行的操作属性。这里的缓存文件的生成过程为:文件先写入日志中,再从日志写入系统中。所以这里的缓存文件也指代文件系统日志,即缓存文件也可称为文件系统日志,但是不是指代常规的日志文件。缓存文件是按照一定频率反复读取的,所以能获取很多缓存文件。
可选的,所述写入模块包括:
分类单元,依据应用对缓存文件的操作信息对进行分类;
写入单元,用于将分类后的缓存文件写入数据库中。
其中,所述操作信息包括:读操作、写操作或者删除操作。具体的,在分类中,将属性为读操作的缓存文件分为一类,将属性为写操作的缓存文件分为一类,将属性为删除操作的缓存文件分为一类。数据库负责存储所有的日志数据,普通数据库软件就可以胜任,例如MySQL数据库。
所述绘制模块包括:
读取单元,用于读取数据库中所有的缓存文件;
绘制单元,用于对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。
其中,应用的读写信息的特征图包括文件大小信息及占比例图、文件读写带宽大小信息图、文件数量图或者文件拥有者信息图。具体的,将所有的缓存文件的进行大小分类,大于10M的为一类,小于10M的为一类。或者,按照缓存文件的用户者进行分类。或者,按照缓存文件的时间信息进行分类,具体按照缓存文件的创建时间、连接时间或者修改时间进行分类。
本发明所提供的一种应用读写特征分析装置,读取模块在应用的运行期间,读取文件系统中的缓存文件;写入模块对所述缓存文件进行归类分析后,写入数据库中;绘图模块利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。可见,该装置只需要获取文件系统的缓存文件,利用缓存文件来分析绘制成应用的读写特征图,完成应用读写特征的分析,这样不需要对整个系统文件进行扫描,过程更加简单,提升效率,并且避免扫描过程,对CPU资源的消耗大大减少。并且该装置仅仅涉及对缓存文件的提取,根本不影响系统文件的正常使用,系统文件仍能正常运行,正常工作。
以上对本发明所提供的一种应用读写特征分析方法及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (8)

1.一种应用读写特征分析方法,其特征在于,包括:
在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;
对所述缓存文件进行归类分析后,写入数据库中;
利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
2.如权利要求1所述的方法,其特征在于,所述对所述缓存文件进行归类分析后,写入数据库中,包括:
依据应用对缓存文件的操作信息对进行分类,将分类后的缓存文件写入数据库中。
3.如权利要求2所述的方法,其特征在于,所述操作信息包括:读操作、写操作或者删除操作。
4.如权利要求1至3中任意一项所述的方法,其特征在于,所述利用绘图工具对数据库中所有的缓存文件进行绘制,包括:
读取数据库中所有的缓存文件,对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。
5.一种应用读写特征分析装置,其特征在于,包括:
读取模块,用于在应用的运行期间,读取文件系统中的缓存文件;其中,缓存文件的个数为多个;
写入模块,用于对所述缓存文件进行归类分析后,写入数据库中;
绘图模块,用于利用绘图工具对数据库中所有的缓存文件进行绘制,生成应用的读写信息的特征图。
6.如权利要求5所述的装置,其特征在于,所述写入模块包括:
分类单元,依据应用对缓存文件的操作信息对进行分类;
写入单元,用于将分类后的缓存文件写入数据库中。
7.如权利要求6所述的装置,其特征在于,所述操作信息包括:读操作、写操作或者删除操作。
8.如权利要求5至7中任意一项所述的装置,其特征在于,所述绘制模块包括:
读取单元,用于读取数据库中所有的缓存文件;
绘制单元,用于对所有的缓存文件进行分类处理,绘制成应用的读写信息的特征图。
CN201510612486.9A 2015-09-23 2015-09-23 一种应用读写特征分析方法及装置 Active CN105260282B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510612486.9A CN105260282B (zh) 2015-09-23 2015-09-23 一种应用读写特征分析方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510612486.9A CN105260282B (zh) 2015-09-23 2015-09-23 一种应用读写特征分析方法及装置

Publications (2)

Publication Number Publication Date
CN105260282A true CN105260282A (zh) 2016-01-20
CN105260282B CN105260282B (zh) 2018-04-24

Family

ID=55099982

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510612486.9A Active CN105260282B (zh) 2015-09-23 2015-09-23 一种应用读写特征分析方法及装置

Country Status (1)

Country Link
CN (1) CN105260282B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109086279A (zh) * 2017-06-13 2018-12-25 北京京东尚科信息技术有限公司 报表缓存方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070168053A1 (en) * 2006-01-18 2007-07-19 Hendrickson Richard C Framework for automatically analyzing I/O performance problems using multi-level analysis
CN101414305A (zh) * 2008-12-01 2009-04-22 浙大网新科技股份有限公司 基于进程粒度和打开文件集合的pass起源信息收集方法
CN102891873A (zh) * 2011-07-21 2013-01-23 腾讯科技(深圳)有限公司 一种存储日志数据的方法及日志数据存储系统
CN103927338A (zh) * 2014-03-26 2014-07-16 网神信息技术(北京)股份有限公司 日志信息入库处理方法和装置
US20150261438A1 (en) * 2014-03-17 2015-09-17 CacheBox Inc. Apparatus and Method For Cache Provisioning, Configuration For Optimal Application Performance

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070168053A1 (en) * 2006-01-18 2007-07-19 Hendrickson Richard C Framework for automatically analyzing I/O performance problems using multi-level analysis
CN101414305A (zh) * 2008-12-01 2009-04-22 浙大网新科技股份有限公司 基于进程粒度和打开文件集合的pass起源信息收集方法
CN102891873A (zh) * 2011-07-21 2013-01-23 腾讯科技(深圳)有限公司 一种存储日志数据的方法及日志数据存储系统
US20150261438A1 (en) * 2014-03-17 2015-09-17 CacheBox Inc. Apparatus and Method For Cache Provisioning, Configuration For Optimal Application Performance
CN103927338A (zh) * 2014-03-26 2014-07-16 网神信息技术(北京)股份有限公司 日志信息入库处理方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SOOMAN JEONG等: ""Framework for Analyzing Android I/O Stack Behavior: From Generating the Workload to Analyzing the Trace"", 《FUTURE INTERNET》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109086279A (zh) * 2017-06-13 2018-12-25 北京京东尚科信息技术有限公司 报表缓存方法和装置

Also Published As

Publication number Publication date
CN105260282B (zh) 2018-04-24

Similar Documents

Publication Publication Date Title
US9201572B2 (en) A/B test configuration environment
JP2019520615A (ja) 損害賠償請求書類の文字認識方法、装置、サーバ及び記憶媒体
CN103049533A (zh) 一种快速向数据库加载数据的方法
CN111950279B (zh) 实体关系的处理方法、装置、设备及计算机可读存储介质
CN112711362B (zh) 手绘流程图标准化生成方法及其装置
CN104408190A (zh) 基于Spark的数据处理方法及装置
CN103824075A (zh) 图像识别系统及方法
CN109190025A (zh) 信息监控方法、装置、系统和计算机可读存储介质
CA3065275A1 (en) Utilizing optical character recognition (ocr) to remove biasing
CN103729252A (zh) 一种虚拟机调度的方法及调度监控器
CN105357280A (zh) 一种基于hdfs的文件溯源ftp系统
CN104809246A (zh) 充电数据的处理方法及装置
US20150220941A1 (en) Visual tagging to record interactions
CN105260282A (zh) 一种应用读写特征分析方法及装置
CN113657347A (zh) 书写文字识别方法、装置、终端设备和存储介质
CN104536947A (zh) 版式文档的处理方法及装置
WO2022099870A1 (zh) 笔迹图形化方法、装置及电子设备
CN114365202B (zh) 经由上下文无关的递归文档分解来学习的可扩展结构
CN103870543A (zh) 一种用于文档文件重构的方法及装置
CN110727845B (zh) 一种基于爬虫文本的最近发文优先处理方法及系统
Shantharam et al. Understanding I/O bottlenecks and tuning for high performance I/O on large HPC Systems: a case study
CN102521377B (zh) 从文档处理系统的文档集合中筛选优质文档的方法及系统
CN102932464B (zh) 一种存储系统的性能分析方法及装置
DE102014109525A1 (de) System, Verfahren und Medium zur Bildobjekt- und Konturmerkmalsextraktion
CN109726023A (zh) 一种支持多线程多上下文的图形任务同步管理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant