CN104932987A - 一种文件存储方法及系统 - Google Patents
一种文件存储方法及系统 Download PDFInfo
- Publication number
- CN104932987A CN104932987A CN201510341097.7A CN201510341097A CN104932987A CN 104932987 A CN104932987 A CN 104932987A CN 201510341097 A CN201510341097 A CN 201510341097A CN 104932987 A CN104932987 A CN 104932987A
- Authority
- CN
- China
- Prior art keywords
- stored
- information
- memory device
- type
- file storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种文件存储方法及系统,上述方法包括以下步骤:第一存储设备接收不断发送来的待存储信息并进行存储;实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;将所述目标待存储信息发送至第二存储设备存储。本发明还提供一种文件存储系统,上述系统包括:分配单元、第一存储设备和第二存储设备,所述分配单元分别与所述第一存储设备和所述第二存储设备相连。
Description
技术领域
本发明属于存储技术领域,尤其涉及一种文件存储方法及系统。
背景技术
在软件运行过程中会有频繁的数据读写操作,为了保证配置文件里的数据同步,每一次的读写都会产生一次文件的打开和关闭。当进行大量的打开、读取、写入、关闭和保存的操作时,磁盘的I/O处理会跟不上CPU的运算速度,从而降低软件的运行速度,无法满足实际要求。
并且,随着软件的运行,配置文件的数据也是不断增加的,这样会导致文件越来越大,在文件打开、读取、写入、关闭和保存的过程中耗时也会越来越长,因此,软件的运行速度受到严重影响。
发明内容
本发明提供一种文件存储方法及系统,以解决上述问题。
本发明提供一种文件存储方法。上述方法包括以下步骤:第一存储设备接收不断发送来的待存储信息并进行存储;实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;将所述目标待存储信息发送至第二存储设备存储。
本发明还提供一种文件存储系统,上述系统包括:分配单元、第一存储设备和第二存储设备,所述分配单元分别与所述第一存储设备和所述第二存储设备相连;所述第一存储设备,用于接收不断发送来的待存储信息并进行存储;所述分配单元,用于实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;所述分配单元还用于根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息,并将所述目标待存储信息发送至第二存储设备;所述第二存储设备,用于存储所述目标待存储信息。
相较于先前技术,本发明提供的一种文件存储方法及系统,本发明将第一存储设备接收的待存储信息进行存储,并根据待存储信息的类型确定对应的文件存储策略,并根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;将所述目标待存储信息发送至第二存储设备存储。本发明减少了对第二存储设备的读取和写入的操作次数,通过第一存储设备对待存储信息的分担,避免了因大量的并发信息对第二存储设备的大量I/O操作,减少频繁的不必要的I/O操作,提高了I/O效率,同时提高了软件运行速度和效率。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1所示为根据本发明的较佳实施例提供的文件存储方法的流程图;
图2所示为根据本发明的较佳实施例提供的文件存储系统的结构示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
如图1所示为根据本发明的较佳实施例提供的文件存储方法的流程图。如图1所示,本发明的较佳实施例提供的文件存储方法包括步骤101-104。
步骤101:第一存储设备接收不断发送来的待存储信息并进行存储;
步骤102:实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;
确定所述待存储信息的类型对应的文件存储策略的具体过程包括:
根据所述待存储信息的类型、文件存储对照表确定待存储信息在所述第一存储设备、所述第二存储设备的存储比例。
确定所述待存储信息的类型对应的文件存储策略的具体过程包括:
根据所述待存储信息的类型将所述待存储信息按照优先级进行分类,依次分为第一优先级、第二优先级和第三优先级三类,其中,不同优先级的待存储信息在所述第一存储设备、所述第二存储设备中的存储比例不同。
所述第一存储设备为内存设备、缓存设备;所述第二存储设备为硬盘设备、磁盘设备。
确定所述待存储信息的类型对应的文件存储策略包括:
当所述待存储信息类型为评课、议课类型时,所述待存储信息在硬盘和内存中的存储比例分别为a%和b%;
当所述待存储信息类型为教学类型时,所述待存储信息在硬盘和内存中的存储比例分别为c%和d%;
当所述待存储信息类型为视频会议类型时,所述待存储信息在硬盘和内存中的存储比例分别为e%和f%;
其中,a>c>e,f>d>b,a+b=100,c+d=100,e+f=100。
步骤103:根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;
具体而言,目标待存储信息为所述待存储信息中分配给硬盘存储的部分,目标待存储信息是所述待存储信息乘以在硬盘中的存储比例得到的,假设待存储信息为2M的PPT文件,硬盘中的存储比例为80%,则目标待存储信息为待存储信息中大小为2M×80%=1.6M的部分。步骤104:将所述目标待存储信息发送至第二存储设备存储。
所述方法还包括:第二存储设备存储所述目标待存储信息后或者所述第二存储设备接收所述目标待存储信息后通知所述第一存储设备删除所述目标待存储信息。
下面举例进行详细说明:
以Microsoft Office PowerPoint程序为例,用户需要对存储在硬盘的数学课教学PPT进行修改,假设数学课教学PPT已包含5页内容,用户需要将数学课教学PPT的内容添加到6页,因此用户打开数学课教学PPT并通过写入不断增加PPT中第6页的内容,在用户不断写入的同时内存也不断接收到用户的写入内容A(即待存储信息),用户将写入内容A进行存储,并同时获得写入内容A的大小信息为2KB,由于数学课教学PPT为教学类型的信息,根据文件存储对照表(表1),得到数学课教学PPT对应的在内存中的存储比例为40%,在硬盘中的存储比例为60%。
表1
待存储信息的类型 | 内存中的存储比例 | 硬盘中的存储比例 |
评课、议课类型 | 20% | 80% |
教学类型 | 40% | 60% |
其他类型 | 50% | 50% |
备注:表1中其他类型包括视频会议类型。
假设写入内容A的大小信息为2KB,将写入内容A按照上述在内存中的存储比例(40%)和在硬盘中的存储比例(60%),分为大小为0.8KB的信息B和大小为1.2KB的信息C。将大小为1.2KB的信息C发送到硬盘后,删除内存中存储的大小为1.2KB的信息C,此时,内存中存储有大小为0.8KB的信息B,硬盘存储接收到的大小为1.2KB的信息B。其中,删除内存中存储的大小为1.2KB的信息C的操作还可以在硬盘对接收到的1.2KB的信息B存储后进行。
假设用户通过写入继续增加数学课教学PPT中第6页的内容,在用户不断写入的同时内存也不断接收到用户写入内容D(即待存储信息),此时继续重复上述过程,使得接收到的待存储信息(写入内容D)先存储在内存中,再将内存中其中一部分待存储信息分配给硬盘进行存储处理,将剩下的待存储信息仍在内存中处理。这样避免了数据直接写入并存储在硬盘上带来的硬盘多次读写操作造成的处理速度减慢,不能保持程序良好的运行效率的问题,实现了内存对不断接收的待存储信息存储的分担处理。
在另一优选的实施例中,确定所述待存储信息的类型对应的文件存储策略的具体方法还可以为:
当所述待存储信息类型为评课、议课类型时,所述待存储信息在硬盘和内存中的存储比例分别为80%和20%;
当所述待存储信息类型为教学类型时,所述待存储信息在硬盘和内存中的存储比例分别为60%和40%;
当所述待存储信息类型为视频会议类型时,所述待存储信息在硬盘和内存中的存储比例分别为50%和50%。
根据上述不同类型的待存储信息在硬盘中和内存中的存储比例,结合待存储信息的大小确定分配给硬盘存储的目标待存储信息,将目标待存储信息发送至硬盘进行存储。
在又一优选的实施例中,确定所述待存储信息的类型对应的文件存储策略的具体方法还可以是:假设待存储信息的类型包括教学类、评课、议课类和会议类,因此,将评课、议课类归为第一优先级,将教学类归为第二优先级,将会议类归为第三优先级,第一优先级的待存储信息在内存中的存储比例为20%,在硬盘中的存储比例为80%。第二优先级的待存储信息在内存中的存储比例为40%,在硬盘中的存储比例为60%。第三优先级的待存储信息在内存中的存储比例为50%,在硬盘中的存储比例为50%。
根据上述不同优先级的待存储信息对应的在硬盘中和内存中的存储比例,结合待存储信息的大小确定分配给硬盘存储的目标待存储信息,将目标待存储信息发送至硬盘进行存储。
图2所示为根据本发明的较佳实施例提供的文件存储系统,如图2所示,本发明的较佳实施例提供的文件存储系统,上述系统包括:分配单元201、第一存储设备202和第二存储设备203,所述分配单元201分别与所述第一存储设备202和所述第二存储设备203相连;所述第一存储设备202,用于接收不断发送来的待存储信息并进行存储;所述分配单元201,用于实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;所述分配单元201还用于根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息,并将所述目标待存储信息发送至第二存储设备203;所述第二存储设备203,用于存储所述目标待存储信息。
此外,关于上述系统的具体操作过程同上述方法所述,故于此不再赘述。
综上所述,相较于先前技术,本发明提供的一种文件存储方法及系统,本发明将第一存储设备接收的待存储信息进行存储,并根据待存储信息的类型确定对应的文件存储策略,并根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;将所述目标待存储信息发送至第二存储设备存储。本发明减少了对第二存储设备的读取和写入的操作次数,通过第一存储设备对待存储信息的分担,避免了因大量的并发信息对第二存储设备的大量I/O操作,减少频繁的不必要的I/O操作,提高了I/O效率,同时提高了软件运行速度和效率。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (7)
1.一种文件存储方法,其特征在于,
第一存储设备接收不断发送来的待存储信息并进行存储;
实时获取所述待存储信息的大小,并确定所述待存储信息的类型对应的文件存储策略;
根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息;
将所述目标待存储信息发送至第二存储设备存储。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:第二存储设备存储所述目标待存储信息后或者所述第二存储设备接收所述目标待存储信息后通知所述第一存储设备删除所述目标待存储信息。
3.根据权利要求1所述的方法,其特征在于,确定所述待存储信息的类型对应的文件存储策略的具体过程包括:
根据所述待存储信息的类型、文件存储对照表确定待存储信息在所述第一存储设备、所述第二存储设备的存储比例。
4.根据权利要求1所述的方法,其特征在于,确定所述待存储信息的类型对应的文件存储策略的具体过程包括:
根据所述待存储信息的类型将所述待存储信息按照优先级进行分类,依次分为第一优先级、第二优先级和第三优先级三类,其中,不同优先级的待存储信息在所述第一存储设备、所述第二存储设备中的存储比例不同。
5.根据权利要求1所述的方法,其特征在于,所述第一存储设备为内存设备、缓存设备;所述第二存储设备为硬盘设备、磁盘设备。
6.根据权利要求5所述的方法,其特征在于,确定所述待存储信息的类型对应的文件存储策略包括:
当所述待存储信息类型为评课、议课类型时,所述待存储信息在硬盘和内存中的存储比例分别为a%和b%;
当所述待存储信息类型为教学类型时,所述待存储信息在硬盘和内存中的存储比例分别为c%和d%;
当所述待存储信息类型为视频会议类型时,所述待存储信息在硬盘和内存中的存储比例分别为e%和f%;
其中,a>c>e,f>d>b,a+b=100,c+d=100,e+f=100。
7.一种文件存储系统,其特征在于,上述系统包括:分配单元、第一存储设备和第二存储设备,所述分配单元分别与所述第一存储设备和所述第二存储设备相连;
所述第一存储设备,用于接收不断发送来的待存储信息并进行存储;
所述分配单元,用于实时获取所述待存储信息的大小,并确定所述待存储信息的类型对 应的文件存储策略;所述分配单元还用于根据所述文件存储策略、所述待存储信息的大小确定目标待存储信息,并将所述目标待存储信息发送至第二存储设备;
所述第二存储设备,用于存储所述目标待存储信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510341097.7A CN104932987A (zh) | 2015-06-18 | 2015-06-18 | 一种文件存储方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510341097.7A CN104932987A (zh) | 2015-06-18 | 2015-06-18 | 一种文件存储方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104932987A true CN104932987A (zh) | 2015-09-23 |
Family
ID=54120158
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510341097.7A Pending CN104932987A (zh) | 2015-06-18 | 2015-06-18 | 一种文件存储方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104932987A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108122087A (zh) * | 2016-11-28 | 2018-06-05 | 深圳市鸿合创新信息技术有限责任公司 | 一种会议资料即时存储的方法 |
CN109660819A (zh) * | 2017-10-10 | 2019-04-19 | 中国移动通信有限公司研究院 | 基于移动边缘计算的业务缓存方法、装置及服务基站 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020112135A1 (en) * | 2001-02-15 | 2002-08-15 | Alcatel | Method of storing computer data and a corresponding storage device |
CN101630332A (zh) * | 2009-07-30 | 2010-01-20 | 成都市华为赛门铁克科技有限公司 | 数据存储管理方法、数据存储管理装置和系统 |
CN102096722A (zh) * | 2011-03-21 | 2011-06-15 | 成都市华为赛门铁克科技有限公司 | 文件存储方法和装置 |
CN103927129A (zh) * | 2014-03-14 | 2014-07-16 | 汉柏科技有限公司 | 数据存储方法 |
-
2015
- 2015-06-18 CN CN201510341097.7A patent/CN104932987A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020112135A1 (en) * | 2001-02-15 | 2002-08-15 | Alcatel | Method of storing computer data and a corresponding storage device |
CN101630332A (zh) * | 2009-07-30 | 2010-01-20 | 成都市华为赛门铁克科技有限公司 | 数据存储管理方法、数据存储管理装置和系统 |
CN102096722A (zh) * | 2011-03-21 | 2011-06-15 | 成都市华为赛门铁克科技有限公司 | 文件存储方法和装置 |
CN103927129A (zh) * | 2014-03-14 | 2014-07-16 | 汉柏科技有限公司 | 数据存储方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108122087A (zh) * | 2016-11-28 | 2018-06-05 | 深圳市鸿合创新信息技术有限责任公司 | 一种会议资料即时存储的方法 |
CN109660819A (zh) * | 2017-10-10 | 2019-04-19 | 中国移动通信有限公司研究院 | 基于移动边缘计算的业务缓存方法、装置及服务基站 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8417901B2 (en) | Combining write commands to overlapping addresses or to a specific page | |
JP6050503B2 (ja) | 階層キャッシュを用いたメールのインデックス化および検索 | |
CN104657366B (zh) | 海量日志写入数据库的方法、装置和日志容灾系统 | |
CN107977346B (zh) | 一种pdf文档编辑方法及终端设备 | |
DE102015119894A1 (de) | Techniken für die zusammenarbeitende Ausführung zwischen asymmetrischen Prozessorkernen | |
US20150253992A1 (en) | Memory system and control method | |
CN105159604A (zh) | 一种磁盘数据读写方法和系统 | |
CN107729558A (zh) | 文件系统碎片整理的方法、系统、装置及计算机存储介质 | |
CN102456076A (zh) | 海量片段数据汇聚的系统和方法 | |
CN102479245A (zh) | 数据区块的切分方法 | |
EP2495648A3 (en) | Improving network efficiency for continuous remote copy | |
CN105868093A (zh) | 一种日志写入方法及服务端 | |
CN103955440A (zh) | 一种非易失存储设备及其进行数据操作的方法 | |
WO2018032698A1 (zh) | 一种翻页方法、装置及书写终端 | |
CN103744975A (zh) | 基于分布式文件的高效缓存服务器 | |
CN104932987A (zh) | 一种文件存储方法及系统 | |
CN104834478A (zh) | 一种基于异构混合存储设备的数据写入及读取方法 | |
US20180181647A1 (en) | System and Method for Editing a Linked List | |
US20170346899A1 (en) | Throughput in openfabrics environments | |
CN101394405B (zh) | 一种数据请求处理的方法和装置 | |
US9507794B2 (en) | Method and apparatus for distributed processing of file | |
US9286302B2 (en) | Inode reuse systems and methods | |
CN104182490B (zh) | 一种管理数据访问的方法及装置 | |
CN107169313A (zh) | Dna数据文件的读取方法及计算机可读存储介质 | |
CN109726181B (zh) | 一种数据处理方法及数据处理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150923 |