CN112565355A - 一种读取请求的控制方法及相关设备 - Google Patents

一种读取请求的控制方法及相关设备 Download PDF

Info

Publication number
CN112565355A
CN112565355A CN202011327354.9A CN202011327354A CN112565355A CN 112565355 A CN112565355 A CN 112565355A CN 202011327354 A CN202011327354 A CN 202011327354A CN 112565355 A CN112565355 A CN 112565355A
Authority
CN
China
Prior art keywords
data
request
reading
read request
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202011327354.9A
Other languages
English (en)
Inventor
张端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202011327354.9A priority Critical patent/CN112565355A/zh
Publication of CN112565355A publication Critical patent/CN112565355A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/61Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明提供了一种读取请求的控制方法及相关设备,属于数据处理的技术领域,解决了现有方案中预读请求被频繁处理,而即时读写请求不能被及时处理的问题。所述方法包括:获取缓存数据信息;根据所述缓存数据信息与读取请求信息判断是否需要构建新读取请求;若需要构建读取请求,则设置所述新读取请求的优先级;获取存储池的存储数据;根据所述存储池的所述存储数据与所述新读取请求的所述优先级控制所述新读取请求。

Description

一种读取请求的控制方法及相关设备
技术领域
本发明涉及数据处理技术领域,尤其是涉及一种读取请求的控制方法及相关设备。
背景技术
为了提高存储服务的带宽,降低读取请求延时,在存储服务网关,往往会通过各种各样的预读机制,提前将“预测”到的数据从存储池节点读取到存储网关所在的节点作为缓存。用户下次读取,如果恰好读这部分数据,就可以减少一次存储网关与存储池节点之间的网络交互,提升带宽性能。但是随之而来的,在实际应用中,如视频监控、广电行业非编等业务中。要求每一次读取的耗时都不能超过某个限度,超出后,视频播放不流畅,会带来不好的用户体验。在业务比较繁忙时,存储池积累了大量的读取请求,读取请求包括预读取请求和即时读取请求,如果不加区分的按照公平的方式去处理预读取请求和即时读取请求。则会出现预读请求被频繁处理,而即时读请求无法及时处理,从而导致即时读取请求的延时较高的问题。
发明内容
本发明的目的在于提供一种读取请求的控制方法及相关设备,缓解了现有技术中按照公平的方式去处理预读取请求和即时读取请求时,预读读请求被频繁处理,即时读取请求无法及时处理,从而导致即时读取请求的延时较高的技术问题。
第一方面,本发明提供一种读取请求的控制方法,包括:
获取缓存数据信息;
根据上述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;
获取存储池的存储数据;
根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。
进一步的,上述缓存数据信息,包括文件偏移量;上述读取请求信息包括即时读取请求的数据。
进一步的,上述根据上述缓存数据判断是否需要构建目标读取请求的步骤,包括:
若上述文件偏移量大于或等于上述即时读取请求的数据,则不需要构建上述新读取请求;
若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述新读取请求。
进一步的,在上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤之前,还包括:
判断上述即时读取请求的数据是否包含预读数据。
进一步的,上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤,包括:
若上述即时读取请求的数据包含预读数据,则构建上述目标读取请求;
若上述即时读取请求的数据不包含预读数据,则构建上述目标读取请求和预读请求。
进一步的,上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤,包括:
若上述即时读取请求的数据不包含预读数据,则构建包含第一目标读取请求的范围和上述预读请求的范围的混合读取请求作为第二目标读取请求。
进一步的,上述若需要构建上述目标读取请求,则设置上述目标读取请求的优先级的步骤,包括:
若需要构建上述目标读取请求且上述即时读取请求的数据包含预读数据,则设置上述新读取请求的优先级为高级;
若需要构建上述目标读取请求且上述即时读取请求的数据不包含预读数据,则设置新读取请求和预读请求的优先级为中级和低级;
若需要构建上述目标读取请求且上述即时读取请求的数据不包含预读数据,则设置上述混合读取请求的优先级为中级。
第二方面,本申请还提供一种读取请求的控制装置,包括:
数据获取模块,用于获取缓存数据信息;
构建模块,用于根据上述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
设置模块,用于若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;
数据接收模块,用于获取存储池的存储数据;
控制模块,用于根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。
第三方面,本申请还提供一种电子设备,包括:储存器、处理器以及存储在上述存储器中并可在上述处理器上运行的计算机程序,其特征在于,上述处理器用于执行存储器中存储的计算机程序时实现如上述的读取请求的控制方法的步骤。
第四方面,本申请还提供一种计算机可读存储介质,其上存储有计算机程序,其特征在于:上述计算机程序被处理器执行时实现如上述的读取请求的控制方法的步骤。
本发明提供的读取请求的控制方法,通过获取缓存数据;根据上述缓存数据判断是否需要构建目标读取请求;若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;获取存储池的存储数据;根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。将预读取请求和即时读取请求分别进行优先级设置,优先处理对用户来说对延时更敏感的请求,即,即时读取请求,从而缓解即时读取请求的延时较高的问题。
相应地,本发明实施例提供的相关设备,也同样具有上述技术效果。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的读取请求的控制方法流程图;
图2为本发明实施例提供的读取请求的控制装置的结构示意图;
图3为本发明实施例提供的一种电子设备的结构示意图;
图4为本发明实施例提供的计算机可读存储介质的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中所提到的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括其他没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供的一种读取请求的控制方法,请参考图1,包括,:
101、获取缓存数据信息;
上述缓存数据信息,包括文件偏移量;上述读取请求信息包括即时读取请求的数据,即时读取请求的数据为即时读取请求需要的文件偏移量。
102、根据上述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
对比上述文件偏移量与上述即时读取请求需要的文件偏移量的大小,通过对比结果判断是否需要构建目标读取请求。
103、若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;
104、获取存储池的存储数据;
存储服务网关检测上述存储池的工作状态,若上述存储池的工作繁忙时,即,存储池的运行压力较大时,减少优先级较低的读取请求的发送数量。
105、根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。
本发明提供的读取请求的控制方法,通过获取缓存数据;根据上述缓存数据判断是否需要构建目标读取请求;若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;获取存储池的存储数据;根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。将预读取请求和即时读取请求分别进行优先级设置,优先处理对用户来说对延时更敏感的请求,即,即时读取请求,从而缓解即时读取请求的延时较高的问题。将读取请求细分为即时读取请求,预读取请求和混合读取请求,分别给予上述即时读取请求,上述预读取请求和上述混合读取请求不同的处理优先级。
在一种可能的实施方式中,上述根据上述缓存数据判断是否需要构建目标读取请求的步骤,包括:
若上述文件偏移量大于或等于上述即时读取请求的数据,则不需要构建上述新读取请求;
若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述新读取请求。
对比上述文件偏移量与上述即时读取请求需要的文件偏移量的大小,通过对比结果判断是否需要构建目标读取请求,避免构建不必要的目标读取请求,减少对读取请求控制过程的运行压力,节省对读取请求控制过程的成本。
在一种可能的实施方式中,在上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤之前,还包括:
判断上述即时读取请求的数据是否包含预读数据。
获取预读数据的过程为:获取来自主机的读取命令;根据读取命令获取NAND闪存内的相关信息;判断读取缓存区域内是否相关信息对应的数据;若否,则读取相关信息对应的数据,以形成待读取数据以及中间控制信息;将中间控制信息进行闪存转换处理,以形成目标控制信息;将相关数据所在数据页的下一数据页内的数据存放至读缓存区域;将目标控制信息以及待读取数据反馈至主机。
上述判断上述即时读取请求的数据是否包含预读数据的过程为判断上述即时读取请求的数据是否引起上述获取预读数据的过程。
针对包含或者不包含预读数据的即时读取请求的数据分别进行单独处理,使得处理过程更加具有针对性。
在一种可能的实施方式中,上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤,包括:
若上述即时读取请求的数据包含预读数据,则构建上述目标读取请求;
若上述即时读取请求的数据不包含预读数据,则构建上述目标读取请求和预读请求。
针对包含或者不包含预读数据的即时读取请求的数据分别进行单独处理,构建不同类型的目标读取请求,使得对不同类型的目标读取请求能够设置不同的优先级。
在一种可能的实施方式中,上述若上述文件偏移量小于上述即时读取请求的数据,则需要构建上述目标读取请求的步骤,包括:
若上述即时读取请求的数据不包含预读数据,则构建包含第一目标读取请求的范围和上述预读请求的范围的混合读取请求作为第二目标读取请求。
在一种可能的实施方式中,上述若需要构建上述目标读取请求,则设置上述目标读取请求的优先级的步骤,包括:
若需要构建上述目标读取请求且上述即时读取请求的数据包含预读数据,则设置上述新读取请求的优先级为高级;
若需要构建上述目标读取请求且上述即时读取请求的数据不包含预读数据,则设置新读取请求和预读请求的优先级为中级和低级;
若需要构建上述目标读取请求且上述即时读取请求的数据不包含预读数据,则设置上述混合读取请求的优先级为中级。
将读请求细分为即时读取请求,预读请求和混合读取请求,分别给予上述即时读取请求,上述预读请求和上述混合读取请求不同的处理优先级。优先处理对用户来说对延时更敏感的请求,即,即时读取请求,从而缓解即时读取请求的延时较高的问题。
第二方面,请参考图2,本申请还提供一种读取请求的控制装置,包括:
数据获取模块201,用于获取缓存数据信息;
构建模块202,用于根据上述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
设置模块203,用于若需要构建上述目标读取请求,则设置上述目标读取请求的优先级;
数据接收模块204,用于获取存储池的存储数据;
控制模块205,用于根据上述存储池的上述存储数据与上述目标读取请求的上述优先级控制上述新读取请求。
第三方面,本发明还提供一种电子设备300,参考图3,包括:储存器310、处理器320以及存储在上述存储器中并可在上述处理器上运行的计算机程序311,上述处理器320用于执行存储器310中存储的计算机程序311时实现如上述的读取请求的控制方法的步骤。
第四方面,本发明还提供一种计算机可读存储介质400,参考图4,其上存储有计算机程序411,上述计算机程序411被处理器执行时实现如上述的读取请求的控制方法的步骤。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
又例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,再例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明提供的实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释,此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的范围。都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种读取请求的控制方法,其特征在于,包括:
获取缓存数据信息;
根据所述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
若需要构建所述目标读取请求,则设置所述目标读取请求的优先级;
获取存储池的存储数据;
根据所述存储池的所述存储数据与所述目标读取请求的所述优先级控制所述新读取请求。
2.根据权利要求1所述的读取请求的控制方法,其特征在于,所述缓存数据信息,包括文件偏移量;所述读取请求信息包括即时读取请求的数据。
3.根据权利要求2所述的读取请求的控制方法,其特征在于,所述根据所述缓存数据判断是否需要构建目标读取请求的步骤,包括:
若所述文件偏移量大于或等于所述即时读取请求的数据,则不需要构建所述新读取请求;
若所述文件偏移量小于所述即时读取请求的数据,则需要构建所述新读取请求。
4.根据权利要求3所述的读取请求的控制方法,其特征在于,在所述若所述文件偏移量小于所述即时读取请求的数据,则需要构建所述目标读取请求的步骤之前,还包括:
判断所述即时读取请求的数据是否包含预读数据。
5.根据权利要求4所述的读取请求的控制方法,其特征在于,所述若所述文件偏移量小于所述即时读取请求的数据,则需要构建所述目标读取请求的步骤,包括:
若所述即时读取请求的数据包含预读数据,则构建所述目标读取请求;
若所述即时读取请求的数据不包含预读数据,则构建所述目标读取请求和预读请求。
6.根据权利要求5所述的读取请求的控制方法,其特征在于,所述若所述文件偏移量小于所述即时读取请求的数据,则需要构建所述目标读取请求的步骤,包括:
若所述即时读取请求的数据不包含预读数据,则构建包含第一目标读取请求的范围和所述预读请求的范围的混合读取请求作为第二目标读取请求。
7.根据权利要求6所述的文件存储方法,其特征在于,所述若需要构建所述目标读取请求,则设置所述目标读取请求的优先级的步骤,包括:
若需要构建所述目标读取请求且所述即时读取请求的数据包含预读数据,则设置所述新读取请求的优先级为高级;
若需要构建所述目标读取请求且所述即时读取请求的数据不包含预读数据,则设置新读取请求和预读请求的优先级为中级和低级;
若需要构建所述目标读取请求且所述即时读取请求的数据不包含预读数据,则设置所述混合读取请求的优先级为中级。
8.一种读取请求的控制装置,其特征在于,包括:
数据获取模块,用于获取缓存数据信息;
构建模块,用于根据所述缓存数据信息与读取请求信息判断是否需要构建目标读取请求;
设置模块,用于若需要构建所述目标读取请求,则设置所述目标读取请求的优先级;
数据接收模块,用于获取存储池的存储数据;
控制模块,用于根据所述存储池的所述存储数据与所述目标读取请求的所述优先级控制所述新读取请求。
9.一种电子设备,包括:储存器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至7中任一项所述的读取请求的控制方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的读取请求的控制方法的步骤。
CN202011327354.9A 2020-11-24 2020-11-24 一种读取请求的控制方法及相关设备 Withdrawn CN112565355A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011327354.9A CN112565355A (zh) 2020-11-24 2020-11-24 一种读取请求的控制方法及相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011327354.9A CN112565355A (zh) 2020-11-24 2020-11-24 一种读取请求的控制方法及相关设备

Publications (1)

Publication Number Publication Date
CN112565355A true CN112565355A (zh) 2021-03-26

Family

ID=75043312

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011327354.9A Withdrawn CN112565355A (zh) 2020-11-24 2020-11-24 一种读取请求的控制方法及相关设备

Country Status (1)

Country Link
CN (1) CN112565355A (zh)

Similar Documents

Publication Publication Date Title
WO2019205371A1 (zh) 服务器、消息分配的方法及存储介质
CN107818056B (zh) 一种队列管理方法及装置
CN105637470B (zh) 用于脏数据管理的方法和计算设备
EP3029912A1 (en) Remote accessing method for device, thin client, and virtual machine
CN101131671A (zh) 控制对非易失性存储器的访问
CN109800181B (zh) 一种基于磁盘的数据写入方法、数据写入装置及终端设备
US20190369919A1 (en) Task management method and host for electronic storage device
CN110413978B (zh) 数据分页导出方法、装置、计算机设备和存储介质
WO2017095820A1 (en) Methods and devices for acquiring data using virtual machine and host machine
CN103874987B (zh) 嵌入式多媒体卡分区存储空间调整方法和终端
CN115348222B (zh) 一种消息分发方法、装置、服务端及存储介质
CN108132759B (zh) 一种文件系统中管理数据的方法和装置
CN112835740A (zh) 用于管理数据备份的方法、电子设备和计算机程序产品
CN111104178A (zh) 一种动态库加载方法、终端装置及存储介质
CN110362517B (zh) 用于动态地调整在计算设备和存储设备之间传输i/o请求的方式的技术
CN109639827B (zh) 客户端升级方法及装置
CN111562884A (zh) 一种数据存储方法、装置及电子设备
KR20210049602A (ko) 컴퓨팅 장치 및 그 동작 방법
US11385814B2 (en) Method and device for allocating resource of hard disk in distributed storage system
CN107145303B (zh) 一种用于在分布式存储系统中执行文件写入的方法与设备
CN111984198A (zh) 消息队列实现方法、装置及电子设备
CN112565355A (zh) 一种读取请求的控制方法及相关设备
CN111147556A (zh) 一种负载均衡方法、装置、设备及存储介质
US20180276719A1 (en) Method and device for determining area of message operation region and electronic device
CN111680014B (zh) 共享文件的获取方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20210326