CN105677248A - 一种数据访问方法和装置 - Google Patents
一种数据访问方法和装置 Download PDFInfo
- Publication number
- CN105677248A CN105677248A CN201511033374.4A CN201511033374A CN105677248A CN 105677248 A CN105677248 A CN 105677248A CN 201511033374 A CN201511033374 A CN 201511033374A CN 105677248 A CN105677248 A CN 105677248A
- Authority
- CN
- China
- Prior art keywords
- storage
- main frame
- business
- acceleration
- access
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据访问方法和装置,以解决现有的分级存储技术中无法跨存储阵列实现数据访问加速造成的存储加速局限性较大的问题。该方法为,检测至少一个业务主机中需要加速访问对应主存储器的第一业务主机;在检测到所述第一业务主机时,建立第一业务主机与所述加速存储设备的连接关系;将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据,其中,所述加速存储设备的存储速度大于所述主存储器的存储速度,这样能够为每个需要数据访问加速的业务主机提供数据访问加速服务,解决了现有的存储加速局限性较大的问题。
Description
技术领域
本发明涉及数据存储领域,尤其涉及一种数据访问方法和装置。
背景技术
企业数据中心的数据以前所未有的速度迅猛增长,随着企业应用的业务种类和数量越来越多,数据中心的存储阵列数量也在不断增加,每个业务都有自己的数据存储访问特点,不同的时间段存储读写访问的频率也不一样。数据中心的高性能存储资源价格昂贵,存储资源有限,如何充分利用高性能存储资源实现业务的按需加速,成为企业迫切要解决的问题。
现有的分级存储技术在存储阵列内部署高性能存储介质,根据对当前存储阵列中数据的访问频率,识别出热点与非热点数据,根据热点与非热点数据分配不同的存储介质,将频繁访问的热点数据自动迁移到高性能的存储介质中,例如固态硬盘(SolidStateDrives,SSD)中,而将低周期访问的非热点数据自动迁移到大容量,低成本的存储介质中,例如近线串行连接硬盘(NearlineSerialAttachedSCSIDrives,NL-SAS)。
但是,现有的分级存储技术无法跨存储阵列实现数据访问加速,高性能存储资源无法在整个存储资源池内共享,使存储加速局限性较大,无法向上为所有主机承载的业务提供数据访问加速服务,不能充分发挥数据中心中高性能存储资源的性能和特性优势,造成了高性能存储资源的浪费。
发明内容
本发明实施例提供一种数据访问方法和装置,以解决现有的分级存储技术中无法跨存储阵列实现数据访问加速造成的存储加速局限性较大的问题。
本发明实施例提供的具体技术方案如下:
第一方面,提供一种数据访问管理服务器,所述服务器分别与至少一个业务主机和加速存储设备连接,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度,所述管理服务器包括:
检测单元,用于检测所述至少一个业务主机中需要加速访问对应主存储器的第一业务主机;
连接单元,用于在所述检测单元检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;
迁移单元,将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
结合第一方面,在第一方面的第一种可能的实现方式中,所述迁移单元,还用于在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,在所述检测单元检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
结合第一方面,在第一方面的第二种可能的实现方式中,所述检测单元在检测到第一业务主机需要加速访问对应的第一主存储器时,具体用于:
所述检测单元检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器;或,
所述检测单元检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
结合第一方面的第二种可能的实现方式,在第一方面的第三种可能的实现方式中,包括:
所述检测单元,还用于检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
所述检测单元,还用于检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
结合第一方面的第一种可能的实现方式,在第一方面的第四种可能的实现方式中,所述迁移单元,还用于在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,将所述加速存储设备中存储的数据清除。
第二方面,提供一种数据访问方法,包括:
检测至少一个业务主机中需要加速访问对应主存储器的第一业务主机;
在检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;
将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据,
其中,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度。
结合第二方面,在第二方面的第一种可能的实现方式中,在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
结合第二方面,在第二方面的第二种可能的实现方式中,检测到第一业务主机需要加速访问对应的第一主存储器,包括:
检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器;或,
检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
结合第二方面的第二种可能的实现方式,在第二方面的第三种可能的实现方式中,还包括:
检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
结合第二方面的第一种可能的实现方式,在第二方面的第四种可能的实现方式中,在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,还包括:
将所述加速存储设备中存储的数据清除。
第三方面,提供一种数据访问系统,包括:至少一个业务主机、至少一个主存储器、加速存储设备、管理服务器,其中:
每个主存储器,分别用于存储对应业务主机需要存取的数据;
所述加速存储设备的存储速度大于任意一个主存储器的存储速度;
所述管理服务器,用于检测所述至少一个业务主机中需要加速访问对应主存储器的第一业务主机;在所述检测单元检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
结合第三方面,在第三方面的第一种可能的实现方式中,所述管理服务器在检测到第一业务主机需要加速访问对应的第一主存储器时,具体用于:
所述管理服务器检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器。
结合第三方面,在第三方面的第二种可能的实现方式中,所述管理服务器在检测到第一业务主机需要加速访问对应的第一主存储器时,具体用于:
所述管理服务器检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
结合第三方面的第一种可能的实现方式或第二种可能的实现方式,在第三方面的第三种可能的实现方式中,所述管理服务器,还用于检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
所管理服务器,还用于检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
结合第三方面的第三种可能的实现方式,在第三方面的第四种可能的实现方式中,所述管理服务器,还用于在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,在检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
结合第三方面的第三种可能的实现方式或第四种可能的实现方式,在第三方面的第五种可能的实现方式中,所述管理服务器,还用于在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,将所述加速存储设备中存储的数据清除。
本发明实施例中的数据访问方法和装置,能够利用高性能的存储设备,实时的为各业务主机进行数据访问加速,避免了现有技术中需要在统计一定时间内的热点数据造成存储加速性能低的问题,此外还能通过存储性能更高的加速存储设备为每个需要数据访问加速的业务主机提供数据访问加速服务,解决了现有的一台高性能存储设备只能为一台业务主机进行数据访问加速,而造成存储加速局限性较大的问题,提高了数据访问效率,实现方式简单,便于推广利用。
附图说明
图1A为本发明实施例中数据访问管理服务器的结构示意图A;
图1B为本发明实施例中数据访问管理服务器的结构示意图B;
图2为本发明实施例中数据访问系统示意图;
图3为本发明实施例中的数据访问方法流程图;
图4为本发明实施例中触发数据加速访问时的场景示意图;
图5为本发明实施例中加速访问路径切换到加速存储设备时的场景示意图;
图6为本发明实施例中加速访问加速存储设备时的场景示意图;
图7为本发明实施例中加速访问结束时访问路径切换到主存储器时的的场景示意图;
图8为本发明实施例中的数据访问装置示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,并不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种数据访问加速方法和装置,以解决现有的分级存储技术中无法跨存储阵列实现数据访问加速造成的存储加速局限性较大的问题。其中,方法和装置是基于同一发明构思的,由于方法及装置解决问题的原理相似,因此装置与方法的实施可以相互参见,重复之处不再赘述。
下面结合附图对本发明优选的实施方式进行详细说明。
请参见图1A,本发明实施例提供一种数据访问管理服务器,该管理服务器可以包括存储器101、处理器102和接收器103。
其中,处理器102可以是中央处理器(CPU)或特定应用集成电路(ApplicationSpecificIntegratedCircuit,ASIC),可以是一个或多个用于控制程序执行的集成电路,可以是使用现场可编程门阵列(FieldProgrammableGateArray,FPGA)开发的硬件电路,可以是基带芯片。
存储器101的数量可以是一个或多个。存储器101可以包括只读存储器(ReadOnlyMemory,ROM)、随机存取存储器(RandomAccessMemory,RAM)和磁盘存储器。
接收器103可以用于与外部设备进行通信,例如接收器103可以与业务主机、各储设备进行通信。
可选的,请参见图1B,该管理服务器还可以包括发送器104,可以用于与外部设备进行通信,例如发送器104也可以与业务主机、各存储设备进行通信。
发送器104和接收器103可以是同一实体模块,例如可以是能够实现收发功能的实体模块,比如可以称为收发器,或者发送器104和接收器103也可以是单独的实体模块。
这些存储器101、发送器104和接收器103可以通过总线与处理器102相连接(图1A-图1B以此为例),或者也可以通过专门的连接线分别与处理器102连接。
通过对处理器102进行设计编程,将下面所示的方法所对应的代码固化到芯片内,从而使芯片在运行时能够执行下面图3所示的方法。如何对处理器102进行设计编程为本领域技术人员所公知的技术,这里不再赘述。
其中,该管理服务器可以通过软件方式实现,比如可以是固化在设备中的一套软件程序,或者也可以通过硬件方式实现,比如可以是在设备中新增的硬件模块,或者也可以利用设备中原有的硬件模块实现,比如处理器102可以由设备中的数据处理系统实现,存储器101可以由设备中的存储器件实现,或者存储器101也可以由设备中的数据处理系统的内部缓存实现,发送器104和接收器103可以由设备中的数据收发系统实现。
请参见图2,基于同一发明构思,本发明实施例还提供一种数据访问系统,该数据访问系统可以包括至少一个业务主机、至少一个主存储器、加速存储设备,还可以包括如图1A或图1B所示的管理服务器。其中:
每个主存储器,分别用于存储对应业务主机需要存取的数据;
所述加速存储设备的存储性能高于任意一个主存储器的存储性能;
所述管理服务器,用于用于检测所述至少一个业务主机中需要加速访问对应主存储器的第一业务主机;在所述检测单元检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
图2中的系统中的业务主机、主存储器、加速存储设备和管理服务器位于不同的设备中,比如可以位于不同的服务器中,或者也可以位于不同的其他类型的设备中。
由于固态硬盘的存储性能和存储容量远远优于近线SAS硬盘,可选的,所述主存储器的存储介质为近线SAS硬盘,所述加速存储设备的存储介质为固态硬盘,这里指示一种举例,并不具体限定主存储器和加速存储设备的存储介质。
下面介绍本发明实施例提供的方法。
基于图2中的数据访问系统,参阅图3所示,本发明实施例还提供一种数据访问方法,具体流程包括:
步骤300:检测至少一个业务主机中需要加速访问对应主存储器的第一业务主机。
其中,每个业务主机各自对应一个存放数据的主存储器,所述主存储器用于为所述业务主机提供数据存储。
具体的,检测第一业务主机需要加速访问对应的第一主存储器时,包括以下两种情形:
第一种情形:检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器。
第二种情形:检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
步骤301:建立所述第一业务主机与所述加速存储设备的连接关系。
步骤302:将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
其中,所述加速存储设备的存储速度大于所述主存储器的存储速度
例如,参阅图4所示,管理服务器根据预先为第一业务主机设置时间加速策略或频率加速策略在合适的时间点触发第一业务主机的存储访问加速。管理服务器自动将第一主存储器上的存储数据映射给加速存储设备,位于主机层的第一业务主机的存储多路径软件,识别第一主存储器和加速存储设备为第一业务主机的不同访问路径,此时第一业务主机的数据访问路径仍然从原路径即第一主存储器直接访问,所述存储多路径软件用于管理业务主机的访问路径,实现对业务主机访问路径的切换功能。
例如,参阅图5所示,管理服务器发送路径切换命令到主机层的存储多路径软件,触发第一业务主机通过多路径软件切换存储访问路径到加速存储设备,此时加速存储设备接管该主机的所有输入输出(InputOutput,IO),开始第一主存储器到加速存储设备的数据复制。此时,第一业务主机下发的写IO同时写到第一主存储器和加速存储设备,读IO如果是已经完成拷贝的数据块则直接从加速存储设备中进行读取,如果是未完成拷贝的数据块则由加速存储设备转发写IO给第一主存储器,从第一主存储器上读取后通过加速存储设备返回给第一业务主机。
进一步的,参阅图6所示,管理服务器监控第一主存储器到加速存储设备的数据存储复制进度,在复制完成后断开第一主存储器和加速存储设备之间的复制关系,并断开第一主存储器到第一主机和加速存储设备之间的接口映射关系。加速存储设备保存从存储复制断开开始,发生过改变的数据块位图信息,此时第一主存储器不参与第一业务主机的任何IO,第一业务主机在业务应用的高峰时段只访问加速存储设备上的加速存储设备。
进一步的,在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,若检测到当前时间到达所述加速访问时间范围的结束时间点时或者检测到第一业务主机对第一主存储器的访问频率小于为所述第一业务主机配置的加速访问频率阈值时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
具体的,在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,将所述加速存储设备中存储的数据清除。
例如,参阅图7所示,管理服务器根据为第一业务主机预设的时间加速策略或频率加速策略,在业务高峰过后,恢复第一主存储器到加速存储设备的数据复制关系,根据位图信息同步数据,管理服务器发送切换命令到主机,触发主机通过存储多路径软件切换到第一主存储器进行访问。最后由管理服务器删除加速存储设备上的加速存储设备中存储的数据,释放高性能存储资源。
请参见图8,基于同一发明构思,本发明实施例还提供一种数据访问装置,所述装置分别与至少一个业务主机和加速存储设备连接,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度,该装置可以包括:
检测单元80,用于检测所述至少一个业务主机中需要加速访问对应主存储器的第一业务主机;
连接单元81,用于在所述检测单元80检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;
迁移单元82,将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
可选的,所述迁移单元82,还用于在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,在所述检测单元80检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据
可选的,所述检测单元80在检测到第一业务主机需要加速访问对应的第一主存储器时,具体用于:
所述检测单元80检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器;或,
所述检测单元80检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
可选的,所述检测单元80,还用于检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
所述检测单元80,还用于检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
可选的,所述迁移单元,还用于在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,将所述加速存储设备中存储的数据清除。
综上所述,本发明实施例中,检测至少一个业务主机中需要加速访问对应主存储器的第一业务主机;在检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据,其中,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度,这样,能够实时的为各业务主机进行数据访问加速,避免了现有技术中需要在统计一定时间内的热点数据造成存储加速性能低的问题,此外还能通过存储性能更高的加速存储设备为每个需要数据访问加速的业务主机提供数据访问加速服务,解决了现有的一台高性能存储设备只能为一台业务主机进行数据访问加速,而造成存储加速局限性较大的问题。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样,倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种数据访问管理服务器,其特征在于,所述服务器分别与至少一个业务主机和加速存储设备连接,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度,所述管理服务器包括:
检测单元,用于检测所述至少一个业务主机中需要加速访问对应主存储器的第一业务主机;
连接单元,用于在所述检测单元检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;
迁移单元,将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据。
2.如权利要求1所述的服务器,其特征在于,所述迁移单元,还用于在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,在所述检测单元检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
3.如权利要求1所述的服务器,其特征在于,所述检测单元在检测到第一业务主机需要加速访问对应的第一主存储器时,具体用于:
所述检测单元检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器;或,
所述检测单元检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
4.如权利要求3所述的服务器,其特征在于,包括:
所述检测单元,还用于检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
所述检测单元,还用于检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
5.如权利要求2所述的服务器,其特征在于,所述迁移单元,还用于在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,将所述加速存储设备中存储的数据清除。
6.一种数据访问方法,其特征在于,包括:
检测至少一个业务主机中需要加速访问对应主存储器的第一业务主机;
在检测到所述第一业务主机时,建立所述第一业务主机与所述加速存储设备的连接关系;
将所述第一业务主机对应的第一存储器中存储的数据迁移到所述加速存储设备中,并控制所述第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据,
其中,每个业务主机对应一个主存储器,所述主存储器用于为所述业务主机提供数据存储,所述加速存储设备的存储速度大于所述主存储器的存储速度。
7.如权利要求6所述的方法,其特征在于,还包括:
在控制第一业务主机从访问第一主存储器中存储的数据切换至访问所述加速存储设备中存储的数据之后,检测到所述第一业务主机不需要加速访问对应的第一主存储器时,将所述加速存储设备中存储的数据迁移到所述第一主存储器中,控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据。
8.如权利要求6所述的方法,其特征在于,检测到第一业务主机需要加速访问对应的第一主存储器,包括:
检测到第一业务主机发起访问第一主存储器的时间处于预先为所述第一业务主机配置的加速访问时间范围内时,确定第一业务主机需要加速访问对应的第一主存储器;或,
检测到第一业务主机发起访问第一主存储器的频率值大于预先为所述第一业务主机配置的加速访问频率阈值时,确定第一业务主机需要加速访问对应的第一主存储器。
9.如权利要求8所述的方法,其特征在于,还包括:
检测当前时间是否到达所述加速访问时间范围的结束时间点,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器;或
检测第一业务主机对第一主存储器的访问频率是否小于为所述第一业务主机配置的加速访问频率阈值,若是,则确定所述第一业务主机不需要加速访问对应的第一主存储器。
10.如权利要求7所述的方法,其特征在于,在控制第一业务主机从访问所述加速存储设备中存储的数据切换回访问所述第一主存储器中存储的数据之后,还包括:
将所述加速存储设备中存储的数据清除。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511033374.4A CN105677248A (zh) | 2015-12-31 | 2015-12-31 | 一种数据访问方法和装置 |
PCT/CN2016/097817 WO2017113861A1 (zh) | 2015-12-31 | 2016-09-01 | 一种数据访问方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511033374.4A CN105677248A (zh) | 2015-12-31 | 2015-12-31 | 一种数据访问方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105677248A true CN105677248A (zh) | 2016-06-15 |
Family
ID=56190038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201511033374.4A Pending CN105677248A (zh) | 2015-12-31 | 2015-12-31 | 一种数据访问方法和装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105677248A (zh) |
WO (1) | WO2017113861A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106774018A (zh) * | 2017-02-15 | 2017-05-31 | 山东省环境保护信息中心 | 一种污染源自动监测设备动态管控系统 |
WO2017113861A1 (zh) * | 2015-12-31 | 2017-07-06 | 华为技术有限公司 | 一种数据访问方法和装置 |
CN107133128A (zh) * | 2017-05-11 | 2017-09-05 | 上海新储集成电路有限公司 | 一种数据云存储系统及方法 |
CN114860329A (zh) * | 2021-02-03 | 2022-08-05 | 阿里巴巴(中国)有限公司 | 动态一致性偏置配置引擎及方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1664794A (zh) * | 2005-03-14 | 2005-09-07 | 北京邦诺存储科技有限公司 | 一种可扩充的高速存储网络缓存系统 |
US20130111172A1 (en) * | 2011-10-31 | 2013-05-02 | International Business Machines Corporation | Data Migration Between Storage Devices |
CN104102454A (zh) * | 2013-04-07 | 2014-10-15 | 杭州信核数据科技有限公司 | 一种自动实现分层存储的方法和管理分层存储的系统 |
CN104199784A (zh) * | 2014-08-20 | 2014-12-10 | 浪潮(北京)电子信息产业有限公司 | 一种基于分级存储的数据迁移方法及装置 |
CN104793901A (zh) * | 2015-04-09 | 2015-07-22 | 北京鲸鲨软件科技有限公司 | 一种存储装置及存储方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105677248A (zh) * | 2015-12-31 | 2016-06-15 | 华为技术有限公司 | 一种数据访问方法和装置 |
-
2015
- 2015-12-31 CN CN201511033374.4A patent/CN105677248A/zh active Pending
-
2016
- 2016-09-01 WO PCT/CN2016/097817 patent/WO2017113861A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1664794A (zh) * | 2005-03-14 | 2005-09-07 | 北京邦诺存储科技有限公司 | 一种可扩充的高速存储网络缓存系统 |
US20130111172A1 (en) * | 2011-10-31 | 2013-05-02 | International Business Machines Corporation | Data Migration Between Storage Devices |
CN104102454A (zh) * | 2013-04-07 | 2014-10-15 | 杭州信核数据科技有限公司 | 一种自动实现分层存储的方法和管理分层存储的系统 |
CN104199784A (zh) * | 2014-08-20 | 2014-12-10 | 浪潮(北京)电子信息产业有限公司 | 一种基于分级存储的数据迁移方法及装置 |
CN104793901A (zh) * | 2015-04-09 | 2015-07-22 | 北京鲸鲨软件科技有限公司 | 一种存储装置及存储方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017113861A1 (zh) * | 2015-12-31 | 2017-07-06 | 华为技术有限公司 | 一种数据访问方法和装置 |
CN106774018A (zh) * | 2017-02-15 | 2017-05-31 | 山东省环境保护信息中心 | 一种污染源自动监测设备动态管控系统 |
CN106774018B (zh) * | 2017-02-15 | 2018-03-27 | 山东省环境保护信息中心 | 一种污染源自动监测设备动态管控系统 |
CN107133128A (zh) * | 2017-05-11 | 2017-09-05 | 上海新储集成电路有限公司 | 一种数据云存储系统及方法 |
CN114860329A (zh) * | 2021-02-03 | 2022-08-05 | 阿里巴巴(中国)有限公司 | 动态一致性偏置配置引擎及方法 |
CN114860329B (zh) * | 2021-02-03 | 2023-10-31 | 阿里巴巴(中国)有限公司 | 动态一致性偏置配置引擎及方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2017113861A1 (zh) | 2017-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8452819B1 (en) | Methods and apparatus for optimizing resource utilization in distributed storage systems | |
CN103136110B (zh) | 内存管理方法、内存管理装置及numa系统 | |
CN106569738B (zh) | 一种删除级联快照的方法及装置 | |
CN103324533B (zh) | 分布式数据处理方法、装置及系统 | |
US10158579B2 (en) | Resource silos at network-accessible services | |
CN104461744A (zh) | 一种资源分配方法及装置 | |
CN106201659B (zh) | 一种虚拟机热迁移的方法及宿主机 | |
US10466935B2 (en) | Methods for sharing NVM SSD across a cluster group and devices thereof | |
CN102316043B (zh) | 端口虚拟化方法、交换机及通信系统 | |
CN105677248A (zh) | 一种数据访问方法和装置 | |
US20150128150A1 (en) | Data processing method and information processing apparatus | |
EP3306897B1 (en) | Access method and apparatus | |
US10552089B2 (en) | Data processing for managing local and distributed storage systems by scheduling information corresponding to data write requests | |
CN102282544A (zh) | 存储系统 | |
US20170364266A1 (en) | Method and device for managing input/output (i/o) of storage device | |
CN105446653A (zh) | 一种数据合并方法和设备 | |
CN102611745A (zh) | 文件在线迁移方法、装置和系统 | |
CN106446159A (zh) | 一种存储文件的方法、第一虚拟机及名称节点 | |
CN105704188A (zh) | 应用与服务的部署方法和装置 | |
CN109803016A (zh) | 一种利用虚拟交换机转发数据包的方法及设备 | |
CN103984644A (zh) | 一种数据管理方法及装置 | |
CN103595720B (zh) | 卸载数据传输方法、装置和客户端 | |
CN104468759A (zh) | PaaS平台中实现应用迁移的方法和装置 | |
CN113961139A (zh) | 使用中间设备对数据处理的方法、计算机系统、及中间设备 | |
CN104461779B (zh) | 一种分布式数据的存储方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160615 |