CN110209502B - 一种信息存储方法、装置、电子设备及存储介质 - Google Patents

一种信息存储方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN110209502B
CN110209502B CN201910487183.7A CN201910487183A CN110209502B CN 110209502 B CN110209502 B CN 110209502B CN 201910487183 A CN201910487183 A CN 201910487183A CN 110209502 B CN110209502 B CN 110209502B
Authority
CN
China
Prior art keywords
threshold
server
size
memory
time period
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910487183.7A
Other languages
English (en)
Other versions
CN110209502A (zh
Inventor
胡文
郑树新
丁浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201910487183.7A priority Critical patent/CN110209502B/zh
Publication of CN110209502A publication Critical patent/CN110209502A/zh
Application granted granted Critical
Publication of CN110209502B publication Critical patent/CN110209502B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供了一种信息存储方法、装置、电子设备及存储介质,其中,方法包括:获取服务器的内存使用状态以及存储数量阈值,根据所述内存使用状态调整所述存储数量阈值,获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。采用本发明实施例提供的方案进行信息存储时,可以使得服务器内存中存储的文件访问信息的数量根据服务器内存使用状态进行调整,从而更灵活地利用服务器内存,同时也可以根据服务器内存使用状态更灵活地调整内存中存储的文件访问信息的数量。

Description

一种信息存储方法、装置、电子设备及存储介质
技术领域
本发明涉及互联网技术领域,特别是涉及一种信息存储方法、装置、电子设备及存储介质。
背景技术
在互联网中,经常需要在服务器中存储文件的文件访问信息,该文件访问信息中记录有文件在统计时间段内被访问的次数,统计时间段为距当前时间一定时长的时间段,根据文件在统计时间段内被访问的次数可以确定文件是否是热点文件,以将热点文件从服务器的机械硬盘(Hard Disk Driver,简称HDD)中移动到服务器的固态硬盘(Solid StateDisk,简称SSD)中,由于SSD具有读写速度快的特点,这样可以使得热点文件被更快速地访问。为了便于获取文件访问信息,可以将每个文件的文件访问信息存储在服务器的内存中。
由于服务器的内存有限,现有技术通常是分配固定大小的服务器内存来存储文件访问信息,以使得服务器的剩余内存可以保证服务器的运行。
然而,发明人在实现本发明的过程中发现,现有技术至少存在如下问题:由于在不同时间段服务器的访问量是不同的,所以服务器的内存占用状态也是变化的,若分配固定大小的内存来缓存文件访问信息,会使得对服务器内存利用的灵活性较低。
发明内容
本发明实施例的目的在于提供一种信息存储方法、装置、电子设备及计算机可读存储介质,以更灵活地利用服务器内存。具体技术方案如下:
第一方面,本发明实施例提供了一种信息存储方法,所述方法包括:
获取服务器的内存使用状态以及存储数量阈值;
根据所述内存使用状态调整所述存储数量阈值;
获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
可选的,当所述内存使用状态为内存占用率时,所述根据所述内存使用状态调整所述存储数量阈值,包括:
确定第一占用率阈值与第二占用率阈值,其中,所述第一占用率阈值小于所述第二占用率阈值;
判断所述服务器的内存占用率是否小于所述第一占用率阈值;
如果小于所述第一占用率阈值,则增加所述存储数量阈值的大小;
如果不小于所述第一占用率阈值,则判断所述服务器的内存占用率是否大于所述第二占用率阈值;
如果大于第二占用率阈值,则减小所述存储数量阈值的大小;
当所述内存使用状态为可用内存大小时,所述根据所述内存使用状态调整所述存储数量阈值,包括:
确定第一大小阈值和第二大小阈值,其中,所述第一大小阈值大于所述第二大小阈值;
判断所述服务器的可用内存大小是否大于所述第一大小阈值;
如果大于所述第一大小阈值,则增加所述存储数量阈值的大小;
如果不大于所述第一大小阈值,则判断所述服务器的可用内存大小是否小于所述第二大小阈值;
如果小于所述第二大小阈值,则减小所述存储数量阈值的大小。
可选的,所述确定第一占用率阈值与第二占用率阈值,包括:
获取所述服务器在过去预设时间段内在各个时刻的内存占用率;
根据所述服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值;
所述确定第一大小阈值和第二大小阈值,包括:
获取所述服务器在过去预设时间段内在各个时刻的可用内存大小;
根据所述服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一大小阈值与第二大小阈值。
可选的,所述方法还包括:
获取统计时间段以及所述服务器的磁盘输入输出IO使用率;
根据获取的磁盘输入输出IO使用率调整所述统计时间段,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
可选的,所述根据获取的磁盘输入输出IO使用率调整所述统计时间段,包括:
确定第一使用率阈值和第二使用率阈值,其中,所述第一使用率阈值小于所述第二使用率阈值;
判断获取的磁盘输入输出IO使用率是否小于第一使用率阈值;
如果小于第一使用率阈值,则增长所述统计时间段;
如果不小于所述第一使用率阈值,则判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
如果大于所述第二使用率阈值,则缩短所述统计时间段。
可选的,在所述根据所述内存使用状态调整所述存储数量阈值之前,所述方法还包括:
获取所述服务器的磁盘输入输出IO使用率、所述服务器的负载;
相应的,所述根据所述内存使用状态调整所述存储数量阈值,包括:
根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
当所述服务器处于资源未被充分利用状态时,增加所述存储数量阈值的大小,当所述服务器处于资源过度使用状态时,减小所述存储数量阈值的大小。
可选的,所述方法还包括:
获取所述服务器的统计时间段,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
当所述服务器处于资源未被充分利用状态时,增长所述统计时间段,当所述服务器处于资源过度使用状态时,缩短所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
可选的,所述内存使用状态为可用内存大小;
相应的,所述根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态,包括:
确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,所述第一大小阈值大于所述第二大小阈值,所述第一使用率阈值小于所述第二使用率阈值,所述第一负载阈值小于所述第二负载阈值;
当所述可用内存大小大于所述第一大小阈值、所述磁盘输入输出IO使用率小于所述第一使用率阈值、且所述服务器的负载小于所述第一负载阈值时,判定所述服务器处于资源未被充分利用状态;
当所述可用内存大小小于所述第二大小阈值、所述磁盘输入输出IO使用率大于所述第二使用率阈值、且所述服务器的负载大于所述第二负载阈值时,判定所述服务器处于资源过度使用状态。
第二方面,本发明实施例还提供了一种信息存储装置,所述装置包括:
信息获取单元,用于获取服务器的内存使用状态以及存储数量阈值;
信息调整单元,用于根据所述内存使用状态调整所述存储数量阈值;
信息存储单元,用于获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
可选的,当所述内存使用状态为内存占用率时,所述信息调整单元,包括:
占用率阈值确定子单元,用于确定第一占用率阈值与第二占用率阈值,其中,所述第一占用率阈值小于所述第二占用率阈值;
第一占用率判断子单元,用于判断所述服务器的内存占用率是否小于所述第一占用率阈值;
第一数量增加子单元,用于当所述第一占用率判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二占用率判断子单元,用于当所述第一占用率判断子单元的判断结果为否时,判断所述服务器的内存占用率是否大于所述第二占用率阈值;
第一数量减小子单元,用于当所述第二占用率判断子单元的判断结果为是时,减小所述存储数量阈值的大小;
当所述内存使用状态为可用内存大小时,所述信息调整单元,包括:
大小阈值确定子单元,用于确定第一大小阈值和第二大小阈值,其中,所述第一大小阈值大于所述第二大小阈值;
第一阈值判断子单元,用于判断所述服务器的可用内存大小是否大于所述第一大小阈值;
第二数量增加子单元,用于当所述第一阈值判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二阈值判断子单元,用于当所述第一阈值判断子单元的判断结果为否时,判断所述服务器的可用内存大小是否小于所述第二大小阈值;
第二数量减小子单元,用于当所述第二阈值判断子单元的判断结果为是时,减小所述存储数量阈值的大小。
可选的,所述占用率阈值确定子单元,包括:
占用率获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的内存占用率;
占用率确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值;
所述大小阈值确定子单元,包括:
内存获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的可用内存大小;
第一阈值确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一阈值与第二阈值。
可选的,装置还包括:
使用率获取单元,用于获取统计时间段以及所述服务器的磁盘输入输出IO使用率;
时间段调整单元,用于根据获取的磁盘输入输出IO使用率调整所述统计时间段,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
可选的,所述时间段调整单元,包括:
使用率确定子单元,用于确定第一使用率阈值和第二使用率阈值,其中,所述第一使用率阈值小于所述第二使用率阈值;
第一使用率判断子单元,用于判断获取的磁盘输入输出IO使用率是否小于第一使用率阈值;
时间段增长子单元,用于当所述第一使用率判断子单元的判断为是时,增长所述统计时间段;
第二使用率判断子单元,用于当所述第一使用率判断子单元的判断为否时,判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
时间段缩短子单元,用于当所述第二使用率判断子单元的判断为是时,缩短所述统计时间段。
可选的,所述装置还包括:
负载获取单元,用于获取所述服务器的磁盘输入输出IO使用率、所述服务器的负载;
相应的,所述信息调整单元,包括:
状态判断子单元,用于根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
数量阈值调整子单元,用于当所述服务器处于资源未被充分利用状态时,增加所述存储数量阈值的大小,当所述服务器处于资源过度使用状态时,减小所述存储数量阈值的大小。
可选的,所述装置还包括:
时间段获取单元,用于获取所述服务器的统计时间段,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
时间段调整单元,用于当所述服务器处于资源未被充分利用状态时,增长所述统计时间段,当所述服务器处于资源过度使用状态时,缩短所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
可选的,所述内存使用状态为可用内存大小;
相应的,所述状态判断子单元,包括:
第二阈值确定模块,用于确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,所述第一大小阈值大于所述第二大小阈值,所述第一使用率阈值小于所述第二使用率阈值,所述第一负载阈值小于所述第二负载阈值;
第一状态判定模块,用于当所述可用内存大小大于所述第一大小阈值、所述磁盘输入输出IO使用率小于所述第一使用率阈值、且所述服务器的负载小于所述第一负载阈值时,判定所述服务器处于资源未被充分利用状态;
第二状态判定模块,用于当所述可用内存大小小于所述第二大小阈值、所述磁盘输入输出IO使用率大于所述第二使用率阈值、且所述服务器的负载大于所述第二负载阈值时,判定所述服务器处于资源过度使用状态。
第三方面,本发明实施例还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口、所述存储器通过所述通信总线完成相互间的通信;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的程序,实现第一方面任一所述的方法步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行第一方面任一所述的方法步骤。
第五方面,本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行第一方面任一所述的信息存储方法。
本发明实施例提供的技术方案在信息存储时,获取服务器的内存使用状态以及存储数量阈值后,根据服务器的内存使用状态调整存储数量阈值,并按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存储在服务器的内存中。由于服务器的内存使用状态通常在发生着变化,本发明实施例可以使得服务器内存中存储的文件访问信息的数量根据服务器内存使用状态进行调整,从而可以更灵活地利用服务器内存,同时也可以根据服务器内存使用状态更灵活地调整内存中存储的文件访问信息的数量。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的信息存储方法的一种流程示意图;
图2为本发明实施例提供的信息存储方法的另一种流程示意图;
图3为本发明实施例提供的信息存储装置的一种结构示意图;
图4为本发明实施例提供的电子设备的一种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
为了更灵活地利用服务器内存,本发明实施例提供了一种信息存储方法、装置、电子设备及计算机可读存储介质。
下面首先对本发明实施例所提供的信息存储方法进行介绍。
需要说明的是,本发明实施例所提供的信息存储方法可以应用于互联网技术行业。例如,音、视频网站或应用、文献查询网站或应用等。本发明实施例提供的信息存储方法的执行主体是电子设备,该电子设备例如可以是服务器、控制器、计算机等设备。
如图1所示,本发明实施例所提供的信息存储方法包括以下步骤:
S110:获取服务器的内存使用状态以及存储数量阈值。
在本发明实施例中,电子设备可以按第一预设时间间隔获取服务器的内存使用状态以及存储数量阈值;其中,第一预设时间间隔可以根据数据实际情况等来确定,当第一预设时间间隔设置的较小时,可以更及时地调整服务器内存中存储的文件访问信息的数量,当第一预设时间间隔设置的较大时,可以减少调整存储数量阈值的次数,使得电子设备的运行速度更快。第一预设时间间隔例如可以是1~10分钟中的任一时间间隔,也可以是其他时间间隔,本发明实施例不具体限定。
上述存储数量阈值是服务器的内存中可以存储的文件访问信息的最大数量。在将文件访问信息存入服务器的内存中时,存入服务器内存中的文件访问信息的数量应不大于存储数量阈值。
上述内存使用状态可以是内存占用率,也可以是可用内存大小,也可以是其他表示内存使用状态的参数,本发明实施例不具体限定。
S120:根据服务器的内存使用状态调整上述存储数量阈值。
步骤S120中调整存储数量阈值,可以是增加存储数量阈值的大小,也可以是减小存储数量阈值的大小。
在一种实施方式中,当上述内存使用状态是可用内存大小时,步骤S120,可以按以下步骤实现:判断服务器的可用内存大小是否大于第一阈值;如果大于第一阈值,则增加存储数量阈值的大小,如果不大于第一阈值,则不调整存储数量阈值。其中,第一阈值的大小可以根据服务器的内存大小来确定,例如,当服务器的内存为100G时,第一阈值可以是30G~50G中的任一值。在增加存储数量阈值的大小时,可以将存储数量阈值增加第一预设数量,第一预设数量的具体值可以根据文件访问信息的平均大小、第一阈值的大小来确定,例如,第一阈值为40G、文件访问信息的平均大小为2M,第一预设数量可以是小于20000的任一数量,为了减少服务器处于满负荷运行的现象,使服务器运行更快,第一预设数量可以是5000~10000中的任一值。
当可用内存大小大于第一阈值时,说明可用内存较多,此时增加存储数量阈值,可以使服务器内存中存储更多数量的文件访问信息,从而可以确定出更多数量的热点文件,也提高了对服务器内存的利用率。
在另一种实施方式中,当上述内存使用状态是可用内存大小时,步骤S120,也可以按以下步骤实现:判断服务器的可用内存大小是否小于第二阈值;如果小于第二阈值,则减小存储数量阈值的大小,如果不小于第二阈值,则不调整存储数量阈值。其中,第二阈值的大小可以根据服务器的内存大小来确定,例如,当服务器的内存为100G时,第二阈值可以是5G~10G中的任一值。在减小存储数量阈值的大小时,可以将存储数量阈值减小第二预设数量,第二预设数量的具体值可以根据实际情况来确定,例如,第二预设数量可以是1000~5000中的任一值。
当可用内存大小小于第二阈值时,说明服务器可用内存较少,也就说明服务器此时的访问量较大,服务器的负载较大,此时减小存储数量阈值的大小,可以为服务器腾出更多的内存空间,使服务器的运行速度更快。
在一种实施方式中,当上述内存使用状态是内存占用率时,步骤S120,可以按以下步骤实现:判断服务器的内存占用率是否小于第三占用率阈值;如果小于第三占用率阈值,则增加存储数量阈值的大小,如果不小于第三占用率阈值,则不调整存储数量阈值。上述第三占用率阈值可以根据实际情况设置为预设的值,例如,第三占用率阈值可以是20%~60%中的任一值。在另一种实施方式中,当上述内存使用状态是内存占用率时,步骤S120,也可以按以下步骤实现:判断服务器的内存占用率是否大于第四占用率阈值;如果大于第四占用率阈值,则减小存储数量阈值的大小,如果不大于第四占用率阈值,则不调整存储数量阈值。上述第四占用率阈值可以根据实际情况设置为预设的值,例如,第四占用率阈值可以是50%~80%中的任一值。本发明实施例不具体限定上述第三占用率阈值和第四占用率阈值的取值。
S130:获取待存储的文件访问信息,并按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存储所述服务器的内存中。
在一种实施方式中,步骤S130,可以按以下步骤实现:
获取待存储的文件访问信息;判断服务器内存中存储的文件访问信息的数量是否到达调整后的存储数量阈值;若未到达调整后的存储数量阈值,则按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存入服务器内存中;若到达调整后的存储数量阈值,则触发文件访问信息删除操作,对服务器内存中存储的文件访问信息按预设规则进行删除,并按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存入服务器内存中。上述对服务器内存中存储的文件访问信息按预设规则进行删除可以是:按存入时间从早到晚的顺序删除服务器内存中存储的预设数量个文件访问信息,或者,删除服务器内存中存储的存入时间距当前时间大于预设时长的文件访问信息。
在一种具体实施方式中,步骤S130中的按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存储所述服务器的内存中,可以按以下步骤实现:
计算调整后的存储数量阈值与服务器内存中存储的文件访问信息的数量之间的差值;从获取的待存储的文件访问信息中选择不大于所述差值的数量个文件访问信息,并将所选择的文件访问信息存入所述服务器的内存中。
将待存储的文件访问信息存入服务器内存中。
本发明实施例提供的信息存储方法在信息存储时,电子设备获取服务器的内存使用状态以及存储数量阈值后,根据服务器的内存使用状态调整存储数量阈值,并按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存储在服务器的内存中。由于服务器的内存使用状态通常在发生着变化,本发明实施例可以使得服务器内存中存储的文件访问信息的数量根据服务器内存使用状态进行调整,从而可以更灵活地利用服务器内存,同时也可以根据服务器内存使用状态更灵活地调整内存中存储的文件访问信息的数量。
在一种实施方式中,文件访问信息包括文件在统计时间段内被访问的访问次数,其中,统计时间段为:当前时刻之前、距当前时刻第一时长的时间段,步骤S130之后,还可以包括以下步骤:将访问次数大于第三阈值的文件访问信息对应的文件存入固态硬盘SSD中。第三阈值可以根据实际情况确定,本发明实施例不具体限定。上述第一时长可以是预设时长,也可以是根据服务器的资源状态所确定的时长。将文件存入固态硬盘SSD中,可以是将文件从HDD中移动或拷贝到SSD中,也可以是将文件从其他存储中移动或拷贝到SSD中。
在一种实施方式中,当内存使用状态为内存占用率时,步骤S120中调整存储数量阈值,可以按以下步骤S121~S125实现:
S121:确定第一占用率阈值与第二占用率阈值,其中,第一占用率阈值小于第二占用率阈值;
S122:判断服务器的内存占用率是否小于第一占用率阈值;
S123:如果步骤S122的判断结果为是,则增加存储数量阈值的大小;
S124:如果步骤S122的判断结果为否,则判断服务器的内存占用率是否大于第二占用率阈值;
S125:如果步骤S124的判断结果为是,则减小存储数量阈值的大小。
上述第一占用率阈值、第二占用率阈值可以根据实际情况设置为预设的值,例如,第一占用率阈值可以是20%~40%中的任一值,第二占用率阈值可以是60%~90%中的任一值。在本发明实施例中,第一占用率阈值小于第二占用率阈值即可,本发明实施例不具体限定上述第一占用率阈值和第二占用率阈值的取值。
上述步骤S123中,在增加存储数量阈值的大小时,可以将存储数量阈值增加第三预设数量,其中,第三预设数量可以与上述第一预设数量相等,也可以不相等。第三预设数量的确定方法与第一预设数量的确定方法相似,此处不再赘述。上述步骤S125中,在减小存储数量阈值的大小时,可以存储数量阈值减小第四预设数量,其中,第四预设数量可以与上述第二预设数量相等,也可以不相等。第四预设数量的确定方法与第二数量的确定方法相似,此处不再赘述。
在另一种实施方式中,当内存使用状态为可用内存大小时,步骤S120中调整存储数量阈值,可以按以下步骤S126~S1210实现:
S126:确定第一大小阈值和第二大小阈值,其中,第一大小阈值大于第二大小阈值;
S127:判断服务器的可用内存大小是否大于第一大小阈值;
S128:如果步骤S127的判断结果为是,则增加存储数量阈值的大小;
S129:如果步骤S127的判断结果为否,则判断服务器的可用内存大小是否小于第二大小阈值;
S1210:如果步骤S129的判断结果为是,则减小存储数量阈值的大小。
上述第一大小阈值、第二大小阈值可以根据服务器的内存大小来确定,例如,例如,当服务器的内存为100G时,第一大小阈值可以是30G~50G中的任一值,第二大小阈值可以是5G~10G中的任一值。在本发明实施例中,第一大小阈值大于第二大小阈值即可,本发明实施例不具体限定上述第一大小阈值和第二大小阈值的取值。
步骤S128、步骤S1210中增加、减小存储数量阈值的大小的具体方式,与步骤S123、步骤S125中增加、减小存储数量阈值的大小的方式相似,此处不再赘述。
在上述实施方式中,当内存占用率小于第一占用率阈值或可用内存大小大于第一大小阈值时,说明可用内存较多,此时增加存储数量阈值,可以使服务器内存中存储更多数量的文件访问信息,从而可以确定出更多数量的热点文件,也提高了对服务器内存的利用率;当内存占用率不小于第一占用率阈值但大于第二占用率阈值时,或者可用内存大小不大于第一大小阈值但小于第二大小阈值时,说明服务器此时的访问量较大,服务器的负载较大,此时减小存储数量阈值的大小,可以为服务器腾出更多的内存空间,使服务器的运行速度更快。这样,既可以提高对服务器内存的利用率,也可以使服务器的运行速度更快。
在一种实施方式中,步骤S121,可以按以下步骤S1211~S1212实现:
S1211:获取服务器在过去预设时间段内在各个时刻的内存占用率;
S1212:根据服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值。
上述预设时间段内可以是距当前时刻1小时内,也可以是过去的其他时间段内,本发明实施例不具体限定。上述各个时刻可以是在过去预设时间段每相隔预设时长的各个时刻,也可以是在过去预设时间段的各个整分时刻、整十分时刻等。上述预设时长可以根据预设时间段的时长来确定。当预设时间段的时长为1小时时,预设时长例如可以是1~10分钟的任一值,也可以是其他小于1小时的时长。例如,若预设时间段为距当前时刻1小时,上述各个时刻可以是在过去一小时内每相隔1分钟的各个时刻,也可以是在过去1小时内的各个整分时刻,整分时刻例如是,11:59:00、12:00:00、12:01:00、12:02:00……等,整十分时刻例如是,12:10:00、12:20:00……等。
在一种具体实施方式中,步骤S1212可以按以下步骤实现:
将服务器在过去预设时间段内在各个时刻的内存占用率按从小到大的顺序进行排序;将排序后的各个内存占用率的第一分位点对应的内存占用率确定为第一占用率阈值,将排序后的各个内存占用率的第二分位点对应的内存占用率确定为第二占用率阈值;其中,第一分位点小于第二分位点。第一分位点例如可以是0.2~0.4中的任一分位点,第二分位点例如可以是0.7~0.9中的任一分位点。本领域技术人员可以根据实际情况设置第一分位点和第二分位点,本发明实施例不具体限定。
当所述内存使用状态为可用内存大小时,步骤S126可以按以下步骤S1261~S1262实现:
S1261:获取服务器在过去预设时间段内的各个时刻的可用内存大小;
S1262:根据服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一大小阈值与第二大小阈值。
在一种具体实施方式中,步骤S1262可以按以下步骤实现:
将服务器在过去预设时间段内在各个时刻的可用内存大小按从小到大的顺序进行排序;将排序后的各个可用内存大小的第三分位点对应的可用内存大小确定为第一大小阈值,将排序后的各个可用内存大小的第四分位点对应的可用内存大小确定为第二大小阈值;其中,第三分位点大于第四分位点。第三分位点例如可以是0.7~0.9中的任一分位点,第四分位点例如可以是0.2~0.4中的任一分位点。本领域技术人员可以根据实际情况设置第三分位点和第四分位点,本发明实施例不具体限定。
在上述实施方式中,根据服务器的历史数据来确定第一占用率阈值与第二占用率阈值或第一大小阈值与第二大小阈值,可以使得根据服务器的实际情况来调整存储数量阈值的大小。
在一种实施方式中,上述方法还可以包括以下步骤S140~S150:
S140:获取统计时间段以及服务器的磁盘输入输出IO使用率,其中,统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;;
S150:根据获取的磁盘输入输出IO使用率调整统计时间段,其中,文件访问信息中包括文件在调整后的统计时间段内被访问的访问次数。
上述调整统计时间段,可以是增长统计时间段,也可以是减短统计时间段,调整统计时间段,即调整第一时长。
在本实施方式中,由于磁盘输入输出IO使用率通常可以反映服务器是否可以较好地对文件进行移动、拷贝、存储等操作,根据磁盘输入输出IO使用率来调整统计时间段后,就可以调整所统计的每个文件的访问次数,这样就调整了热点文件的数量,从而调整了需要移动或存储到SSD中的文件的数量,这样就可以更灵活地利用服务器的磁盘IO,使对服务器的磁盘IO的利用率更高。
在一种具体实施方式中,步骤S150可以按以下步骤S151~S155实现:
S151:确定第一使用率阈值和第二使用率阈值,其中,第一使用率阈值小于第二使用率阈值;
S152:判断获取的磁盘输入输出IO使用率是否大于第一使用率阈值;
S153:如果步骤S152的判断结果为是,则增长统计时间段;
S154:如果步骤S152的判断结果为否,则判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
S155:如果步骤S154的判断结果为是,则缩短统计时间段。
在一种具体实施方式中,上述第一使用率阈值和第二使用率阈值可以为预设的值。在另一种实施方式中,上述第一使用率和第二使用率也可以按以下步骤确定:获取服务器在过去预设时间段内在各个时刻的磁盘输入输出IO使用率;根据服务器在过去预设时间段内在各个时刻的磁盘输入输出IO使用率,确定第一使用率与第二使用率。其中,确定第一使用率、第二使用率的具体方式,与确定第一占用率、第二占用率的具体方式类似,本发明实施例不再赘述。在该实施方式中,根据服务器的历史数据来确定第一使用率与第二使用率,可以使得根据服务器的实际情况来调整统计时间段。
在一种实施方式中,如图2所示,在步骤S120之前,还可以包括以下步骤S160:
S160:获取服务器的磁盘输入输出IO使用率、服务器的负载;
相应的,步骤S120,可以按以下步骤S1213~S1214实现:
S1213:根据服务器的内存使用状态、服务器的磁盘输入输出IO使用率、服务器的负载,判断服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
S1214:当服务器处于资源未被充分利用状态时,增加存储数量阈值的大小,当服务器处于资源过度使用状态时,减小存储数量阈值的大小。
上述服务器的负载即服务器的流量,也就是对服务器的访问量。
本实施方式根据服务器各方面的资源状态来调整存储数量阈值,可以更全面地根据服务器的整体资源状态来控制服务器内存中存储的文件访问信息的数量,从而使得服务器各方面的资源都得到灵活运用,也可以使得服务器内存中存储的文件访问信息的数量与服务器的实际资源使用状态更相符。
在一种实施方式中,如图2所示,上述方法还可以包括以下步骤S170~S180:
S170:获取服务器的统计时间段,其中,统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
S180:当服务器处于资源未被充分利用状态时,增长统计时间段,当服务器处于资源过度使用状态时,缩短统计时间段,其中,文件访问信息中包括文件在调整后的统计时间段内被访问的访问次数。
本实施方式根据服务器各方面的资源状态来调整统计时间段的长短,可以更全面地根据服务器的整体资源状态来调整需要移动或存储到SSD中的文件的数量,从而使得服务器各方面的资源都得到灵活运用,也可以使得移动或存储到SSD中的文件的数量与服务器的实际资源状态更相符。
在一种实施方式中,上述内存使用状态可以为可用内存大小;
相应的,步骤S1213,可以按以下步骤实现:
确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,第一大小阈值大于第二大小阈值,第一使用率阈值小于第二使用率阈值,第一负载阈值小于第二负载阈值;
当服务器的可用内存大小大于第一大小阈值、服务器的磁盘输入输出IO使用率小于第一使用率阈值、且服务器的负载小于第一负载阈值时,判定服务器处于资源未被充分利用状态;
当服务器的可用内存大小小于第二大小阈值、服务器的磁盘输入输出IO使用率大于第二使用率阈值、且服务器的负载大于第二负载阈值时,判定服务器处于资源过度使用状态。
本实施方式通过将服务器的资源使用状况与各个阈值进行比较,来判定服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态,可以更方便、准确地确定出服务器的资源使用状态。
步骤S120中调整存储数量阈值,可以按以下方式实现:根据服务器的内存使用状态、服务器的负载调整存储数量阈值。
在一种具体实施方式中,当内存使用状态为可用内存大小时,上述根据服务器的内存使用状态、服务器的负载调整存储数量阈值,可以按以下步骤实现:判断服务器的可用内存大小是否大于第一大小阈值、且服务器的负载是否小于第一负载阈值;如果服务器的可用内存大小大于第一大小阈值,且服务器的负载小于第一负载阈值,则增加存储数量阈值的大小。第一负载阈值的大小可以根据服务器可承受的最大负载量来确定,例如,服务器可承受的最大负载量为600,第一负载阈值可以为200~400中的任一值。上述根据服务器的内存使用状态、服务器的负载调整存储数量阈值,也可以按以下步骤实现:判断服务器的可用内存大小是否小于第二大小阈值,或者服务器的负载是否大于第二负载阈值;如果服务器的可用内存大小小于第二放置阈值,或者服务器的负载大于第一负载阈值,则减小存储数量阈值的大小。第二负载阈值的大小也可以根据服务器可承受的最大负载量来确定,例如,服务器可承受的最大负载量为600,第二负载量可以为400~530中的任一值。
本实施方式中,根据服务器的负载来确定是否调整存储数量阈值,可以减少因服务器负载过大导致的服务器运行缓慢的现象。
在一种实施方式中,在上述将访问次数大于第三阈值的文件访问信息对应的文件存入固态硬盘SSD中之后,上述方法还可以包括以下步骤:将存入SSD中的文件对应的文件访问信息从服务器的内存中删除。这样可以节约更多的服务器内存。
在一种实施方式中,文件访问信息中还可以包括信息过期时间,该信息过期时间为:文件访问信息被存储时的时间与统计时间段对应的时长之和;上述方法还可以包括以下步骤:将到达信息过期时间的文件访问信息从服务器的内存中删除。当文件访问信息到达信息过期时间后,说明该文件访问信息中记录的访问次数已经失效,即文件访问信息中记录的访问次数已经无法反映文件是否是热点文件了,此时,删除到达信息过期时间的文件访问信息,可以进一步节约更多的服务器内存。
在一种实施方式中,文件访问信息中还可以包括文件最近一次被访问的最新访问时间;上述方法还可以包括以下步骤:判断服务器内存中的文件访问信息的数量是否大于第二阈值;如果大于第二阈值,则删除距离当前时刻最远的最新访问时间对应的文件访问信息。这样,若文件最近没有被访问过,说明文件是热点文件的概率很小,删除最近没有被访问的文件对应的文件访问信息,可以进一步节约更多的服务器内存。第二阈值可以是预设的值,例如10万条,也可以是其他具体的值,本发明不具体限定。
在本发明实施例中,文件访问信息可以存储在服务器内存中的缓存队列中。
与上述信息存储方法相对应,本发明实施例还提供了一种信息存储装置,如图3所示,该装置包括:
信息获取单元310,用于获取服务器的内存使用状态以及存储数量阈值;
信息调整单元320,用于根据所述内存使用状态调整所述存储数量阈值;
信息存储单元330,用于获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
本发明实施例提供的信息存储装置在信息存储时,电子设备获取服务器的内存使用状态以及存储数量阈值后,根据服务器的内存使用状态调整存储数量阈值,并按照服务器内存中存储的文件访问信息的数量不大于调整后的存储数量阈值的原则,将待存储的文件访问信息存储在服务器的内存中。由于服务器的内存使用状态通常在发生着变化,本发明实施例可以使得服务器内存中存储的文件访问信息的数量根据服务器内存使用状态进行调整,从而可以更灵活地利用服务器内存,同时也可以根据服务器内存使用状态更灵活地调整内存中存储的文件访问信息的数量。
在一种实施方式中,当所述内存使用状态为内存占用率时,所述信息调整单元320,可以包括:
占用率阈值确定子单元,用于确定第一占用率阈值与第二占用率阈值,其中,所述第一占用率阈值小于所述第二占用率阈值;
第一占用率判断子单元,用于判断所述服务器的内存占用率是否小于所述第一占用率阈值;
第一数量增加子单元,用于当所述第一占用率判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二占用率判断子单元,用于当所述第一占用率判断子单元的判断结果为否时,判断所述服务器的内存占用率是否大于所述第二占用率阈值;
第一数量减小子单元,用于当所述第二占用率判断子单元的判断结果为是时,减小所述存储数量阈值的大小;
当所述内存使用状态为可用内存大小时,所述信息调整单元320,可以包括:
大小阈值确定子单元,用于确定第一大小阈值和第二大小阈值,其中,所述第一大小阈值大于所述第二大小阈值;
第一阈值判断子单元,用于判断所述服务器的可用内存大小是否大于所述第一大小阈值;
第二数量增加子单元,用于当所述第一阈值判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二阈值判断子单元,用于当所述第一阈值判断子单元的判断结果为否时,判断所述服务器的可用内存大小是否小于所述第二大小阈值;
第二数量减小子单元,用于当所述第二阈值判断子单元的判断结果为是时,减小所述存储数量阈值的大小。
在一种实施方式中,所述占用率阈值确定子单元,包括:
占用率获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的内存占用率;
占用率确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值;
所述大小阈值确定子单元,包括:
内存获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的可用内存大小;
第一阈值确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一阈值与第二阈值。
在一种实施方式中,所述装置还可以包括:
使用率获取单元,用于获取统计时间段以及所述服务器的磁盘输入输出IO使用率;
时间段调整单元,用于根据获取的磁盘输入输出IO使用率调整所述统计时间段,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
在一种实施方式中,所述时间段调整单元,可以包括:
使用率确定子单元,用于确定第一使用率阈值和第二使用率阈值,其中,所述第一使用率阈值小于所述第二使用率阈值;
第一使用率判断子单元,用于判断获取的磁盘输入输出IO使用率是否小于第一使用率阈值;
时间段增长子单元,用于当所述第一使用率判断子单元的判断为是时,增长所述统计时间段;
第二使用率判断子单元,用于当所述第一使用率判断子单元的判断为否时,判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
时间段缩短子单元,用于当所述第二使用率判断子单元的判断为是时,缩短所述统计时间段。
在一种实施方式中,所述装置还可以包括:
负载获取单元,用于获取所述服务器的磁盘输入输出IO使用率、所述服务器的负载;
相应的,所述信息调整单元,包括:
状态判断子单元,用于根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
数量阈值调整子单元,用于当所述服务器处于资源未被充分利用状态时,增加所述存储数量阈值的大小,当所述服务器处于资源过度使用状态时,减小所述存储数量阈值的大小。
在一种实施方式中,所述装置还可以包括:
时间段获取单元,用于获取所述服务器的统计时间段,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
时间段调整单元,用于当所述服务器处于资源未被充分利用状态时,增长所述统计时间段,当所述服务器处于资源过度使用状态时,缩短所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
在一种实施方式中,所述内存使用状态可以为可用内存大小;
相应的,所述状态判断子单元,可以包括:
第二阈值确定模块,用于确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,所述第一大小阈值大于所述第二大小阈值,所述第一使用率阈值小于所述第二使用率阈值,所述第一负载阈值小于所述第二负载阈值;
第一状态判定模块,用于当所述可用内存大小大于所述第一大小阈值、所述磁盘输入输出IO使用率小于所述第一使用率阈值、且所述服务器的负载小于所述第一负载阈值时,判定所述服务器处于资源未被充分利用状态;
第二状态判定模块,用于当所述可用内存大小小于所述第二大小阈值、所述磁盘输入输出IO使用率大于所述第二使用率阈值、且所述服务器的负载大于所述第二负载阈值时,判定所述服务器处于资源过度使用状态。
本发明实施例还提供了一种电子设备,如图4所示,包括处理器401、通信接口402、存储器403和通信总线404,其中,处理器401,通信接口402,存储器403通过通信总线404完成相互间的通信,
存储器403,用于存放计算机程序;
处理器401,用于执行存储器403上所存放的程序时,实现如下步骤:
获取服务器的内存使用状态以及存储数量阈值;
根据所述内存使用状态调整所述存储数量阈值;
获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
本发明实施例提供的电子设备在信息存储时,获取服务器的内存使用状态以及存储数量阈值后,根据服务器的内存使用状态调整存储数量阈值,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。由于服务器的内存使用状态通常在发生着变化,本发明实施例可以使得服务器内存中存储的文件访问信息的数量根据服务器内存使用状态进行调整,从而可以更灵活地利用服务器内存,同时也可以根据服务器内存使用状态更灵活地调整内存中存储的文件访问信息的数量。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的信息存储方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的信息存储方法。
对于装置/电子设备/存储介质/程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (18)

1.一种信息存储方法,其特征在于,所述方法包括:
获取服务器的内存使用状态以及存储数量阈值,所述存储数量阈值是服务器的内存中可以存储的文件访问信息的最大数量;
根据所述内存使用状态调整所述存储数量阈值;
获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
2.根据权利要求1所述的方法,其特征在于,当所述内存使用状态为内存占用率时,所述根据所述内存使用状态调整所述存储数量阈值,包括:
确定第一占用率阈值与第二占用率阈值,其中,所述第一占用率阈值小于所述第二占用率阈值;
判断所述服务器的内存占用率是否小于所述第一占用率阈值;
如果小于所述第一占用率阈值,则增加所述存储数量阈值的大小;
如果不小于所述第一占用率阈值,则判断所述服务器的内存占用率是否大于所述第二占用率阈值;
如果大于第二占用率阈值,则减小所述存储数量阈值的大小;
当所述内存使用状态为可用内存大小时,所述根据所述内存使用状态调整所述存储数量阈值,包括:
确定第一大小阈值和第二大小阈值,其中,所述第一大小阈值大于所述第二大小阈值;
判断所述服务器的可用内存大小是否大于所述第一大小阈值;
如果大于所述第一大小阈值,则增加所述存储数量阈值的大小;
如果不大于所述第一大小阈值,则判断所述服务器的可用内存大小是否小于所述第二大小阈值;
如果小于所述第二大小阈值,则减小所述存储数量阈值的大小。
3.根据权利要求2所述的方法,其特征在于,所述确定第一占用率阈值与第二占用率阈值,包括:
获取所述服务器在过去预设时间段内在各个时刻的内存占用率;
根据所述服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值;
所述确定第一大小阈值和第二大小阈值,包括:
获取所述服务器在过去预设时间段内在各个时刻的可用内存大小;
根据所述服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一大小阈值与第二大小阈值。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述方法还包括:
获取统计时间段以及所述服务器的磁盘输入输出IO使用率,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
根据获取的磁盘输入输出IO使用率调整所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
5.根据权利要求4所述的方法,其特征在于,所述根据获取的磁盘输入输出IO使用率调整所述统计时间段,包括:
确定第一使用率阈值和第二使用率阈值,其中,所述第一使用率阈值小于所述第二使用率阈值;
判断获取的磁盘输入输出IO使用率是否小于第一使用率阈值;
如果小于第一使用率阈值,则增长所述统计时间段;
如果不小于所述第一使用率阈值,则判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
如果大于所述第二使用率阈值,则缩短所述统计时间段。
6.根据权利要求1所述的方法,其特征在于,在所述根据所述内存使用状态调整所述存储数量阈值之前,所述方法还包括:
获取所述服务器的磁盘输入输出IO使用率、所述服务器的负载;
相应的,所述根据所述内存使用状态调整所述存储数量阈值,包括:
根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
当所述服务器处于资源未被充分利用状态时,增加所述存储数量阈值的大小,当所述服务器处于资源过度使用状态时,减小所述存储数量阈值的大小。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
获取所述服务器的统计时间段,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
当所述服务器处于资源未被充分利用状态时,增长所述统计时间段,当所述服务器处于资源过度使用状态时,缩短所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
8.根据权利要求6或7所述的方法,其特征在于,所述内存使用状态为可用内存大小;
相应的,所述根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态,包括:
确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,所述第一大小阈值大于所述第二大小阈值,所述第一使用率阈值小于所述第二使用率阈值,所述第一负载阈值小于所述第二负载阈值;
当所述可用内存大小大于所述第一大小阈值、所述磁盘输入输出IO使用率小于所述第一使用率阈值、且所述服务器的负载小于所述第一负载阈值时,判定所述服务器处于资源未被充分利用状态;
当所述可用内存大小小于所述第二大小阈值、所述磁盘输入输出IO使用率大于所述第二使用率阈值、且所述服务器的负载大于所述第二负载阈值时,判定所述服务器处于资源过度使用状态。
9.一种信息存储装置,其特征在于,所述装置包括:
信息获取单元,用于获取服务器的内存使用状态以及存储数量阈值,所述存储数量阈值是服务器的内存中可以存储的文件访问信息的最大数量;
信息调整单元,用于根据所述内存使用状态调整所述存储数量阈值;
信息存储单元,用于获取待存储的文件访问信息,并按照所述服务器内存中存储的文件访问信息的数量不大于调整后的所述存储数量阈值的原则,将所述待存储的文件访问信息存储在所述服务器的内存中。
10.根据权利要求9所述的装置,其特征在于,当所述内存使用状态为内存占用率时,所述信息调整单元,包括:
占用率阈值确定子单元,用于确定第一占用率阈值与第二占用率阈值,其中,所述第一占用率阈值小于所述第二占用率阈值;
第一占用率判断子单元,用于判断所述服务器的内存占用率是否小于所述第一占用率阈值;
第一数量增加子单元,用于当所述第一占用率判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二占用率判断子单元,用于当所述第一占用率判断子单元的判断结果为否时,判断所述服务器的内存占用率是否大于所述第二占用率阈值;
第一数量减小子单元,用于当所述第二占用率判断子单元的判断结果为是时,减小所述存储数量阈值的大小;
当所述内存使用状态为可用内存大小时,所述信息调整单元,包括:
大小阈值确定子单元,用于确定第一大小阈值和第二大小阈值,其中,所述第一大小阈值大于所述第二大小阈值;
第一阈值判断子单元,用于判断所述服务器的可用内存大小是否大于所述第一大小阈值;
第二数量增加子单元,用于当所述第一阈值判断子单元的判断结果为是时,增加所述存储数量阈值的大小;
第二阈值判断子单元,用于当所述第一阈值判断子单元的判断结果为否时,判断所述服务器的可用内存大小是否小于所述第二大小阈值;
第二数量减小子单元,用于当所述第二阈值判断子单元的判断结果为是时,减小所述存储数量阈值的大小。
11.根据权利要求10所述的装置,其特征在于,所述占用率阈值确定子单元,包括:
占用率获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的内存占用率;
占用率确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的内存占用率,确定第一占用率阈值与第二占用率阈值;
所述大小阈值确定子单元,包括:
内存获取模块,用于获取所述服务器在过去预设时间段内在各个时刻的可用内存大小;
第一阈值确定模块,用于根据所述服务器在过去预设时间段内在各个时刻的可用内存大小,确定第一阈值与第二阈值。
12.根据权利要求9至11任一项所述的装置,其特征在于,所述装置还包括:
使用率获取单元,用于获取统计时间段以及所述服务器的磁盘输入输出IO使用率;
时间段调整单元,用于根据获取的磁盘输入输出IO使用率调整所述统计时间段,其中,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
13.根据权利要求12所述的装置,其特征在于,所述时间段调整单元,包括:
使用率确定子单元,用于确定第一使用率阈值和第二使用率阈值,其中,所述第一使用率阈值小于所述第二使用率阈值;
第一使用率判断子单元,用于判断获取的磁盘输入输出IO使用率是否小于第一使用率阈值;
时间段增长子单元,用于当所述第一使用率判断子单元的判断为是时,增长所述统计时间段;
第二使用率判断子单元,用于当所述第一使用率判断子单元的判断为否时,判断获取的磁盘输入输出IO使用率是否大于第二使用率阈值;
时间段缩短子单元,用于当所述第二使用率判断子单元的判断为是时,缩短所述统计时间段。
14.根据权利要求9所述的装置,其特征在于,所述装置还包括:
负载获取单元,用于获取所述服务器的磁盘输入输出IO使用率、所述服务器的负载;
相应的,所述信息调整单元,包括:
状态判断子单元,用于根据所述内存使用状态、所述磁盘输入输出IO使用率、所述服务器的负载,判断所述服务器是否处于资源未被充分利用状态以及是否处于资源过度使用状态;
数量阈值调整子单元,用于当所述服务器处于资源未被充分利用状态时,增加所述存储数量阈值的大小,当所述服务器处于资源过度使用状态时,减小所述存储数量阈值的大小。
15.根据权利要求14所述的装置,其特征在于,所述装置还包括:
时间段获取单元,用于获取所述服务器的统计时间段,所述统计时间段为:当前时刻之前、距当前时刻第一时长的时间段;
时间段调整单元,用于当所述服务器处于资源未被充分利用状态时,增长所述统计时间段,当所述服务器处于资源过度使用状态时,缩短所述统计时间段,其中,所述文件访问信息中包括文件在调整后的所述统计时间段内被访问的访问次数。
16.根据权利要求14或15所述的装置,其特征在于,所述内存使用状态为可用内存大小;
相应的,所述状态判断子单元,包括:
第二阈值确定模块,用于确定第一大小阈值、第二大小阈值、第一使用率阈值、第二使用率阈值、第一负载阈值、第二负载阈值,其中,所述第一大小阈值大于所述第二大小阈值,所述第一使用率阈值小于所述第二使用率阈值,所述第一负载阈值小于所述第二负载阈值;
第一状态判定模块,用于当所述可用内存大小大于所述第一大小阈值、所述磁盘输入输出IO使用率小于所述第一使用率阈值、且所述服务器的负载小于所述第一负载阈值时,判定所述服务器处于资源未被充分利用状态;
第二状态判定模块,用于当所述可用内存大小小于所述第二大小阈值、所述磁盘输入输出IO使用率大于所述第二使用率阈值、且所述服务器的负载大于所述第二负载阈值时,判定所述服务器处于资源过度使用状态。
17.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口、所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的程序,实现权利要求1-8任一所述的方法步骤。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行权利要求1-8任一所述的方法步骤。
CN201910487183.7A 2019-06-05 2019-06-05 一种信息存储方法、装置、电子设备及存储介质 Active CN110209502B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910487183.7A CN110209502B (zh) 2019-06-05 2019-06-05 一种信息存储方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910487183.7A CN110209502B (zh) 2019-06-05 2019-06-05 一种信息存储方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN110209502A CN110209502A (zh) 2019-09-06
CN110209502B true CN110209502B (zh) 2021-07-20

Family

ID=67791092

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910487183.7A Active CN110209502B (zh) 2019-06-05 2019-06-05 一种信息存储方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN110209502B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110807009B (zh) * 2019-11-06 2022-04-26 湖南快乐阳光互动娱乐传媒有限公司 文件处理方法及装置
CN111352591B (zh) * 2020-02-26 2023-03-14 上海市胸科医院 医疗影像文件的存储方法及设备
CN111459410B (zh) * 2020-03-25 2023-08-29 北京三快在线科技有限公司 内存空间分配方法、装置、电子设备及存储介质
CN112558866B (zh) * 2020-12-03 2022-12-09 Oppo(重庆)智能科技有限公司 数据的预读方法、移动终端及计算机可读存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8555095B2 (en) * 2010-07-26 2013-10-08 Apple Inc. Methods and systems for dynamically controlling operations in a non-volatile memory to limit power consumption
CN103870205B (zh) * 2012-12-11 2018-08-07 联想(北京)有限公司 用于存储控制的方法和装置、以及信息处理的方法和装置
CN103294782B (zh) * 2013-05-15 2018-02-16 小米科技有限责任公司 一种数据展现方法和装置
US20170308546A1 (en) * 2016-04-25 2017-10-26 Le Holdings (Beijing) Co., Ltd. File storage method and electronic device
CN107590144A (zh) * 2016-07-07 2018-01-16 中兴通讯股份有限公司 一种文件存储方法和终端
CN106201722A (zh) * 2016-07-12 2016-12-07 乐视控股(北京)有限公司 服务器的负载调整方法及系统
CN106550128A (zh) * 2016-10-31 2017-03-29 努比亚技术有限公司 一种内存管理方法及终端
CN107608788B (zh) * 2017-08-29 2020-08-07 北京三快在线科技有限公司 一种控制方法、装置及设备
CN109491797A (zh) * 2018-11-26 2019-03-19 深圳市斯博科技有限公司 数据存储方法、系统及计算机可读存储介质

Also Published As

Publication number Publication date
CN110209502A (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
CN110209502B (zh) 一种信息存储方法、装置、电子设备及存储介质
EP3229142B1 (en) Read cache management method and device based on solid state drive
US20150378888A1 (en) Controller, flash memory apparatus, and method for writing data into flash memory apparatus
US9606937B1 (en) Cache insertion based on threshold access frequency
US9448905B2 (en) Monitoring and control of storage device based on host-specified quality condition
US9760392B1 (en) Adaptive throttling in hybrid storage environments
CN107870732B (zh) 从固态存储设备冲刷页面的方法和设备
US11099997B2 (en) Data prefetching method and apparatus, and storage device
CN112749102B (zh) 一种内存空间垃圾回收处理方法、装置、设备及介质
US20200311026A1 (en) File processing method and server
CN110673798B (zh) 一种存储系统及其io落盘方法和装置
CN109582649B (zh) 一种元数据存储方法、装置、设备及可读存储介质
CN109726137B (zh) 固态硬盘垃圾回收任务的管理方法、控制器和固态硬盘
CN108491122B (zh) 一种点击事件响应方法、计算机可读存储介质及终端设备
CN109086009B (zh) 一种监控管理方法和装置、计算机可读存储介质
WO2018068714A1 (zh) 重删处理方法及存储设备
WO2017052595A1 (en) Variable cache for non-volatile memory
US20170090755A1 (en) Data Storage Method, Data Storage Apparatus and Solid State Disk
US9740618B2 (en) Memory nest efficiency with cache demand generation
US10489351B2 (en) Heuristic journal reservations
KR20170047468A (ko) 메모리 동작을 모니터링하는 메모리 모듈 및 그것의 전력 관리 방법
US11307797B2 (en) Storage device and information processing system
US10719243B2 (en) Techniques for preserving an expected lifespan of a non-volatile memory
US20120331209A1 (en) Semiconductor storage system
CN108762679B (zh) 一种在线ddp与离线ddp相结合的方法及其相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant