CN107797771A - 一种多路径存储优化方法及装置 - Google Patents
一种多路径存储优化方法及装置 Download PDFInfo
- Publication number
- CN107797771A CN107797771A CN201711139368.6A CN201711139368A CN107797771A CN 107797771 A CN107797771 A CN 107797771A CN 201711139368 A CN201711139368 A CN 201711139368A CN 107797771 A CN107797771 A CN 107797771A
- Authority
- CN
- China
- Prior art keywords
- request
- data
- internal memory
- default
- storage system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Abstract
本发明公开了一种多路径存储优化方法及装置,该方法包括:获取来自客户端的、访问相应存储系统的请求;若为读请求且对应的数据在预设的内存中存在,控制内存将数据发送至客户端;若为读请求且对应的数据在预设的内存中不存在,控制内存从存储系统中获取数据并将数据发送至客户端;若为写请求,且对应的数据在预设的内存中存在,控制内存将数据发送至存储系统;若为写请求,且对应的数据在预设的内存中不存在,控制内存根据写请求获取数据并将数据至存储系统。本发明中,通过预设的内存来实现访问存储系统,内存与存储系统进行交互时的读取效率更高,因此整体上能够实现高效率地访问存储系统。
Description
技术领域
本发明涉及存储技术领域,更具体地说,涉及一种多路径存储优化方法,还涉及一种多路径存储优化装置。
背景技术
如今,多路径存储技术已经得到了广泛的应用,客户端可以同时通过多条路径向对应的存储系统发送读写请求以访问该存储系统,因此多路径存储技术可以实现故障的切换,即当某条路径出现故障后,可以通过另外的路径来完成对该存储系统的访问。但是现有技术中客户端通过不同路径发送的读写请求访问存储系统的效率较低。
综上所述,如何提供一种能实现高效率访问存储系统的多路径存储方案,是目前本领域技术人员亟待解决的问题。
发明内容
本发明的目的是提供一种多路径存储优化方法及装置,能实现高效率访问存储系统。
为了实现上述目的,本发明提供如下技术方案:
一种多路径存储优化方法,包括:
获取来自客户端的、访问相应存储系统的请求;
判断所述请求的类型,所述类型包括读请求和写请求;
判断所述请求对应的数据在预设的内存中是否存在;
若所述请求为读请求,且所述请求对应的数据在预设的内存中存在,则控制所述内存将所述数据发送至所述客户端;
若所述请求为读请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存从所述存储系统中获取所述数据,并将所述数据发送至所述客户端;
若所述请求为写请求,且所述请求对应的数据在预设的内存中存在,控制所述内存将所述数据发送至所述存储系统;
若所述请求为写请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存根据所述写请求获取所述数据并将所述数据发送至所述存储系统。
优选的,所述存储系统为分布式存储系统。
优选的,还包括:
判断所述内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
优选的,发出所述提示后还包括:
根据预设的规则删除所述内存中的数据。
一种多路径存储优化装置,包括:
获取单元,用于:获取来自客户端的、访问相应存储系统的请求;
判断单元,用于:判断所述请求的类型,所述类型包括读请求和写请求;判断所述请求对应的数据在预设的内存中是否存在;
控制单元,用于:在所述判断结果为所述请求为读请求,且所述请求对应的数据在预设的内存中存在时,控制所述内存将所述数据发送至所述客户端;在所述请求为读请求,且所述请求对应的数据在预设的内存中不存在时,控制所述内存从所述存储系统中获取所述数据,并将所述数据发送至所述客户端;在所述请求为写请求,且所述请求对应的数据在预设的内存中存在时,控制所述内存将所述数据发送至所述存储系统;在所述请求为写请求,且所述请求对应的数据在预设的内存中不存在时,控制所述内存根据所述写请求获取所述数据并将所述数据发送至所述存储系统。
优选的,所述存储系统为分布式存储系统。
优选的,还包括:
提示单元,用于:判断所述内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
优选的,还包括:
删除单元,用于:在所述提示单元发出提示后,根据预设的规则删除所述内存中的数据。
本发明提供了一种多路径存储优化方法,该方法包括:获取来自客户端的、访问相应存储系统的请求;判断所述请求的类型,所述类型包括读请求和写请求;判断所述请求对应的数据在预设的内存中是否存在;若所述请求为读请求,且所述请求对应的数据在预设的内存中存在,则控制所述内存将所述数据发送至所述客户端;若所述请求为读请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存从所述存储系统中获取所述数据,并将所述数据发送至所述客户端;若所述请求为写请求,且所述请求对应的数据在预设的内存中存在,控制所述内存将所述数据发送至所述存储系统;若所述请求为写请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存根据所述写请求获取所述数据并将所述数据发送至所述存储系统。本发明通过预设的内存来实现访问存储系统,由于内存与存储系统进行交互时的读取效率更高,因此整体上能够实现高效率地访问存储系统。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种多路径存储优化方法的流程图;
图2为本发明实施例提供的一种多路径存储优化方法应用在分布式存储中对应的结构示意图;
图3为本发明实施例提供的一种多路径存储优化方法应用在分布式存储中对应的流程图;
图4为本发明实施例提供的一种多路径存储优化装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例提供的一种多路径存储优化方法的流程图,可以包括:
步骤S11:获取来自客户端的、访问相应存储系统的请求。
获取的请求可以包括读请求或写请求,分别对应从相应存储系统中读取数据与向该存储系统中写入数据。
步骤S12:判断请求的类型,类型包括读请求和写请求。
获取了来自客户端的请求后便判断该请求的类型,为后面的步骤做好准备。
步骤S13:判断请求对应的数据在预设的内存中是否存在。
本发明实施例中的内存是现有多路径存储技术中不具有的,该内存可以由一个进程来创建,创建后能够被其他的进程访问,其中,每个进程可以包括多个上述请求。需要说明的是,步骤S12与步骤S13没有固定的先后顺序,可以先执行步骤S12后执行步骤S13,也可以先执行步骤S13后执行步骤S13,还可以同时执行步骤S12与步骤S13,而图1为了表达简洁,仅仅展示了先执行步骤S12后执行步骤S13的情况。
步骤S14:若请求为读请求,且请求对应的数据在预设的内存中存在,则控制内存将数据发送至客户端。
读请求表明此时客户端需要从对应的存储系统中读取数据,若该数据在预设的内存中存在的话,内存可以将该数据发送至客户端,即直接从该内存中获取该数据。
步骤S15:若请求为读请求,且请求对应的数据在预设的内存中不存在,控制内存从存储系统中获取数据,并将数据发送至客户端。
当请求仍为读请求,但预设的内存中不存在该读请求所需要读取的数据时,内存将从对应的存储系统中获取该数据,然后将该数据发送至客户端。当内存从对应的存储系统中获取了该数据后,内存中将保存该数据,若以后还有另外的读请求需要读取该数据,该内存不必再次从存储系统中获取该数据,直接将已经保存的该数据发送至客户端即可。
步骤S16:若请求为写请求,且请求对应的数据在预设的内存中存在,控制内存将数据发送至存储系统。
写请求说明此时客户端需要将数据写入到对应的存储系统中,若待写入的数据在预设的内存中存在的话,内存可以直接将该数据写入到对应的存储系统中。
步骤S17:若请求为写请求,且请求对应的数据在预设的内存中不存在,控制内存根据写请求获取数据并将数据发送至存储系统。
当请求仍为写请求,但预设的内存中不存在该写请求所对应数据,那么此时直接将待写入的数据写入到预设的内存中,由内存将该数据写入到对应的存储设备中。将待写入的数据写入到预设的内存中后,内存中将保存该数据,若以后还有写请求需要将该数据写入到对应的存储设备中时,该内存直接将已经保存的该数据写入到对应的存储设备即可。
本发明中,通过预设的内存来实现访问存储系统,由于内存与存储系统进行交互时的读取效率更高,因此整体上能够实现高效率地访问存储系统。
本发明实施例提供的一种多路径存储优化方法,存储系统为分布式存储系统。
多台服务器可以通过软件ceph部署成集群的模式,该集群将这些服务器对应的磁盘统一起来形成一个分布式存储系统,这个分布式存储系统的容量大小是集群中所有磁盘容量的总和,每个服务器通过Tgtd进程创建Target目标端,根据实际需求从分布式存储系统中划分任意大小的存储卷,也称为块存储,然后把划分得到的块存储通过Tgtd进程映射到Target目标端并为客户端配置客户端访问端口。客户端通过iscsi协议及配置好的客户端访问端口,便可以访问到服务器的Target目标端进而访问映射过来的块存储,实现对该块存储的读取操作。请参阅图2,其示出了本发明实施例提供的一种多路径存储优化方法应用在分布式存储中对应的结构示意图。客户端可以通过Iscsi协议访问到三个服务器,并通过相应的客户端访问端口访问到各个服务器的Target目标端,然后通过Tgtd进程访问预设的内存,由该内存来与块存储进行交互,实现客户端向块存储的读取操作。需要说明的是,本发明实施例仅仅展示了客户端通过访问三个服务器实现三条不同路径来对分布式存储系统进行访问,在实际实现过程中,客户端访问的服务器的数量可以根据实际情况来进行设置,不局限与三个。请参阅图3,其示出了本发明实施例提供的一种多路径存储优化方法应用在分布式存储中对应的流程图。采用分布式存储系统,磁盘等物理存储介质可以分布在不同的地理位置,数据流可以就近上传,并且设备价格和维护成本较低。
本发明实施例提供的一种多路径存储优化方法,还可以包括:
判断内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
由于当判断出预设的内存中没有请求所对应的数据后,内存需要获取对应的数据,获取后该数据将存储在内存中,也就是说,该内存中的数据是随着时间推移而增加的,因此可以在内存中预设一个数据量的阈值,当内存中的数据量达到该阈值的时候发出相应的提示,使得用户可以及时获知内存中的数据量已经达到该阈值的情况,并在获知该情况后根据实际情况做出相应的措施。
本发明实施例提供的一种多路径存储优化方法,发出提示后还可以包括:
根据预设的规则删除内存中的数据。
当预设的内存中的数据量太多的时候,会使得内存的读写效率降低,因此在得到相应的提示后应该根据预设的规则及实际情况来删除内存中的数据,可以保证内存的读写效率保持在较高的水平。例如,预设的规则可以是:删除预设的某个时间段内访问频率极低甚至未被访问的数据。
本发明实施例还提供了一种多路径存储优化装置。请参阅图4,其示出了本发明实施例提供的一种多路径存储优化装置的结构示意图,可以包括:
获取单元11,用于:获取来自客户端的、访问相应存储系统的请求;
判断单元12,用于:判断请求的类型,类型包括读请求和写请求;判断请求对应的数据在预设的内存中是否存在;
控制单元13,用于:在判断结果为请求为读请求,且请求对应的数据在预设的内存中存在时,控制内存将数据发送至客户端;在请求为读请求,且请求对应的数据在预设的内存中不存在时,控制内存从存储系统中获取数据,并将数据发送至客户端;在请求为写请求,且请求对应的数据在预设的内存中存在时,控制内存将数据发送至存储系统;在请求为写请求,且请求对应的数据在预设的内存中不存在时,控制内存根据写请求获取数据并将数据发送至存储系统。
本发明实施例提供的一种多路径存储优化装置,存储系统为分布式存储系统。
本发明实施例提供的一种多路径存储优化装置,还包括:
提示单元,用于:判断内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
本发明实施例提供的一种多路径存储优化装置,还包括:
删除单元,用于:在提示单元发出提示后,根据预设的规则删除内存中的数据。
本发明实施例提供的一种多路径存储优化装置中相关部分的说明请参见本发明实施例提供的一种多路径存储优化方法中对应部分的详细说明,在此不再赘述。另外,本发明实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明,以免过多赘述。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (8)
1.一种多路径存储优化方法,其特征在于,包括:
获取来自客户端的、访问相应存储系统的请求;
判断所述请求的类型,所述类型包括读请求和写请求;
判断所述请求对应的数据在预设的内存中是否存在;
若所述请求为读请求,且所述请求对应的数据在预设的内存中存在,则控制所述内存将所述数据发送至所述客户端;
若所述请求为读请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存从所述存储系统中获取所述数据,并将所述数据发送至所述客户端;
若所述请求为写请求,且所述请求对应的数据在预设的内存中存在,控制所述内存将所述数据发送至所述存储系统;
若所述请求为写请求,且所述请求对应的数据在预设的内存中不存在,控制所述内存根据所述写请求获取所述数据并将所述数据发送至所述存储系统。
2.根据权利要求1所述的方法,其特征在于,所述存储系统为分布式存储系统。
3.根据权利要求1或2所述的方法,其特征在于,还包括:
判断所述内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
4.根据权利要求3所述的方法,其特征在于,发出所述提示后还包括:
根据预设的规则删除所述内存中的数据。
5.一种多路径存储优化装置,其特征在于,包括:
获取单元,用于:获取来自客户端的、访问相应存储系统的请求;
判断单元,用于:判断所述请求的类型,所述类型包括读请求和写请求;判断所述请求对应的数据在预设的内存中是否存在;
控制单元,用于:在所述判断结果为所述请求为读请求,且所述请求对应的数据在预设的内存中存在时,控制所述内存将所述数据发送至所述客户端;在所述请求为读请求,且所述请求对应的数据在预设的内存中不存在时,控制所述内存从所述存储系统中获取所述数据,并将所述数据发送至所述客户端;在所述请求为写请求,且所述请求对应的数据在预设的内存中存在时,控制所述内存将所述数据发送至所述存储系统;在所述请求为写请求,且所述请求对应的数据在预设的内存中不存在时,控制所述内存根据所述写请求获取所述数据并将所述数据发送至所述存储系统。
6.根据权利要求5所述的装置,其特征在于,所述存储系统为分布式存储系统。
7.根据权利要求5或6所述的装置,其特征在于,还包括:
提示单元,用于:判断所述内存中数据的数据量是否达到预设的阈值,若达到,则发出提示。
8.根据权利要求7所述的装置,其特征在于,还包括:
删除单元,用于:在所述提示单元发出提示后,根据预设的规则删除所述内存中的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711139368.6A CN107797771A (zh) | 2017-11-16 | 2017-11-16 | 一种多路径存储优化方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711139368.6A CN107797771A (zh) | 2017-11-16 | 2017-11-16 | 一种多路径存储优化方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107797771A true CN107797771A (zh) | 2018-03-13 |
Family
ID=61534768
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711139368.6A Pending CN107797771A (zh) | 2017-11-16 | 2017-11-16 | 一种多路径存储优化方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107797771A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108875046A (zh) * | 2018-06-28 | 2018-11-23 | 郑州云海信息技术有限公司 | 一种存储系统访问方法、装置及电子设备 |
CN114115750A (zh) * | 2022-01-24 | 2022-03-01 | 苏州浪潮智能科技有限公司 | 一种应用于全闪存存储的缓存方法和装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102521330A (zh) * | 2011-12-07 | 2012-06-27 | 华中科技大学 | 一种桌面虚拟化环境下的镜像分布式存储方法 |
CN106354805A (zh) * | 2016-08-28 | 2017-01-25 | 航天恒星科技有限公司 | 一种分布式存储系统NoSQL搜索缓存的优化方法和系统 |
CN106681668A (zh) * | 2017-01-12 | 2017-05-17 | 郑州云海信息技术有限公司 | 一种基于固态盘缓存的混合式存储系统及存储方法 |
-
2017
- 2017-11-16 CN CN201711139368.6A patent/CN107797771A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102521330A (zh) * | 2011-12-07 | 2012-06-27 | 华中科技大学 | 一种桌面虚拟化环境下的镜像分布式存储方法 |
CN106354805A (zh) * | 2016-08-28 | 2017-01-25 | 航天恒星科技有限公司 | 一种分布式存储系统NoSQL搜索缓存的优化方法和系统 |
CN106681668A (zh) * | 2017-01-12 | 2017-05-17 | 郑州云海信息技术有限公司 | 一种基于固态盘缓存的混合式存储系统及存储方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108875046A (zh) * | 2018-06-28 | 2018-11-23 | 郑州云海信息技术有限公司 | 一种存储系统访问方法、装置及电子设备 |
CN114115750A (zh) * | 2022-01-24 | 2022-03-01 | 苏州浪潮智能科技有限公司 | 一种应用于全闪存存储的缓存方法和装置 |
CN114115750B (zh) * | 2022-01-24 | 2022-05-13 | 苏州浪潮智能科技有限公司 | 一种应用于全闪存存储的缓存方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101815033A (zh) | 负载均衡的方法、设备及系统 | |
CN102035815B (zh) | 数据获取方法、接入节点和系统 | |
CN109491758A (zh) | docker镜像分发方法、系统、数据网关及计算机可读存储介质 | |
CN105207947B (zh) | 一种过滤抖动的渐进式流量调度方法和系统 | |
CN110235427A (zh) | 基于策略控制功能的用于ip地址分配的ip索引 | |
CN104702592B (zh) | 流媒体下载方法和装置 | |
CN105516284B (zh) | 一种集群数据库分布式存储的方法和装置 | |
CN104038917B (zh) | 终端漫游认证的方法及装置 | |
CN106708715A (zh) | 自动化测试方法及装置 | |
CN110445873A (zh) | 一种云平台服务接入方法及重定向服务器 | |
CN107797771A (zh) | 一种多路径存储优化方法及装置 | |
CN104426952A (zh) | 一种数据迁移方法、设备及系统 | |
CN107580066A (zh) | 一种分布式nas存储系统中文件访问的方法、装置及系统 | |
CN112566154A (zh) | 用于网络服务的标识符分配和/或标识符映射的网络实体和方法 | |
CN106027356B (zh) | 一种隧道标识的转换方法及装置 | |
CN108243239A (zh) | 一种提供网页应用服务的方法、装置、电子设备及系统 | |
CN108683722A (zh) | 一种数据传输的方法、esb平台及客户端 | |
CN106209875A (zh) | 基于多业务服务器的业务处理方法及业务服务器 | |
CN104506457A (zh) | 一种带宽调整方法、系统及智能管道平台 | |
WO2016207529A1 (fr) | Procédé de gestion dynamique d'un service réseau dans un réseau de communication | |
CN106068019A (zh) | 热点共享的授权方法、终端设备及服务器 | |
CN109561054A (zh) | 一种数据传输方法、控制器及接入设备 | |
CN104205892B (zh) | 基于网络元数据的策略控制的方法、系统和计算机可读介质 | |
CN109213447A (zh) | 一种san存储卷挂载、卸载方法及系统 | |
CN106804056A (zh) | 一种用于提供无线接入点的接入信息的方法与设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180313 |
|
RJ01 | Rejection of invention patent application after publication |