CN107707628B - 用于传输数据处理请求的方法和装置 - Google Patents

用于传输数据处理请求的方法和装置 Download PDF

Info

Publication number
CN107707628B
CN107707628B CN201710803285.6A CN201710803285A CN107707628B CN 107707628 B CN107707628 B CN 107707628B CN 201710803285 A CN201710803285 A CN 201710803285A CN 107707628 B CN107707628 B CN 107707628B
Authority
CN
China
Prior art keywords
storage
storage node
node
data processing
host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710803285.6A
Other languages
English (en)
Other versions
CN107707628A (zh
Inventor
周建华
周猛
唐鲲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201710803285.6A priority Critical patent/CN107707628B/zh
Priority to CN202010311508.9A priority patent/CN111654519B/zh
Publication of CN107707628A publication Critical patent/CN107707628A/zh
Priority to EP22204535.3A priority patent/EP4216515A1/en
Priority to PCT/CN2018/104095 priority patent/WO2019047843A1/zh
Priority to EP18855012.3A priority patent/EP3668056B1/en
Priority to US16/810,372 priority patent/US11544001B2/en
Application granted granted Critical
Publication of CN107707628B publication Critical patent/CN107707628B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659Command handling arrangements, e.g. command buffers, queues, command scheduling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0658Controller construction arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63Routing a service request depending on the request content or context
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Computer And Data Communications (AREA)

Abstract

本申请实施例提供了一种用于传输数据处理请求的方法和装置,该方法包括:应用于存储系统,其特征在于,该存储系统包括第一存储节点及第二存储节点,该第一存储节点中的存储设备通过该第一存储节点的处理器及第一网卡连接至主机,通过第二网卡连接至该第二存储节点的存储设备;该第一存储节点接收访问该第二存储节点的存储设备的数据处理请求,该数据处理请求中携带待处理数据的目标存储地址;该第一存储节点根据该待处理数据的目标存储地址,确定该第二存储节点;该第一存储节点通过该第二网卡发送数据处理请求至该第二存储节点,该数据处理请求指示该第二存储节点对该待处理数据进行处理。有利于提高访问第二存储节点中的目标存储地址的成功率。

Description

用于传输数据处理请求的方法和装置
技术领域
本申请涉及通信领域,并且更具体地,涉及用于传输数据处理请求的方法和装置。
背景技术
随着数据规模的逐渐增加,人们对于存储设备的需求越来越大。为了满足人们对存储设备的需求,网络存储成为了目前存储系统中的常用的数据存储方式。网络存储技术中定义了一种特殊的专用数据存储系统,在该存储系统中可实现跨平台文件共享功能。具体地网络存储形式有直接附加存储(Direct Attached Storage,DAS)、网络附加存储(Network Attached Storage,NAS)和存储区域网(Storage Area Network,SAN)等。
在上述基于网络存储技术的存储系统中可以包括多个存储节点,并且多个存储节点可以通过存储节点内部设置的第一网卡接入网络与主机相连,也就是说,在该存储系统中,主机可以通过网络访问任意存储节点中的存储设备。当主机需要访问存储系统中的某一存储节点(即,第二存储节点)内的存储设备时,需要通过第二存储节点中的中央处理器(Central Processing Unit,CPU)以及第二存储节点的第一网卡等硬件设备组成的访问通路访问第二存储节点中的存储设备。
然而,如果只能通过第二存储节点的CPU以及第二存储节点中的第一网卡组成的访问通路访问第二存储节点的存储设备,则当第二存储节点的CPU无法及时处理数据访问请求时,主机则无法及时访问第二存储节点,或者在第二存储节点上述访问通道出现故障时,则无法访问第二存储节点的存储设备。
发明内容
本申请提供一种用于传输数据处理请求的方法和装置,以提高访问第二存储节点中的存储设备的成功率。
第一方面,提供了一种用于传输数据处理请求的方法,包括:应用于存储系统,其特征在于,所述存储系统包括第一存储节点及第二存储节点,所述第一存储节点中的存储设备通过所述第一存储节点的处理器及第一网卡连接至主机,通过第二网卡连接至所述第二存储节点的存储设备;所述第一存储节点接收访问所述第二存储节点的存储设备的数据处理请求,所述数据处理请求中携带待处理数据的目标存储地址;所述第一存储节点根据所述待处理数据的目标存储地址,确定所述第二存储节点;所述第一存储节点通过所述第二网卡发送数据处理请求至所述第二存储节点,所述数据处理请求指示所述第二存储节点对所述待处理数据进行处理。
在本申请实施例中,可以在第一存储节点中对数据处理请求进行处理,并将处理后的数据处理请求通过第一存储节点中的交换单元发送至第二存储节点中的交换单元,以访问第二存储节点中的存储设备,避免了现有技术中只能通过第二存储节点内部的访问通道访问目标存储地址对应的存储设备,有利于提高访问第二存储节点中的目标存储地址的成功率。
结合第一方面,在第一方面中的一种可能方式中,所述目标存储地址中包括所述第二存储节点的标识及所述第二存储节点的存储设备中用于存储所述待处理数据的逻辑地址。
通过在目标地址中直接条件存储节点的标识,使得第一存储节点可以直接根据目标地址确定第二存储节点,以简化第一存储节点确定第二存储节点的复杂度。
结合第一方面,在第一方面中的一种可能方式中,所述存储系统中包含多个存储节点,所述多个存储节点中不同的存储节点所对应的存储地址范围不重叠,所述第一存储节点根据所述待处理数据的目标存储地址,确定所述第二存储节点,包括:所述第一存储节点根据所述目标存储地址,确定所述目标存储地址所在的存储地址范围;所述第一存储节点根据所述目标存储地址所在的存储地址范围,以及所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系,确定所述第二存储节点。
仅在数据处理请求中携带目标存储地址,有利于减少信令传输引起的开销。
结合第一方面,在第一方面中的一种可能方式中,所述存储系统中包含多个存储节点,所述多个存储节点中不同的存储节点中存储设备的标识不同,所述数据处理请求中携带待处理数据的目标存储地址所在的存储设备的标识,步骤450还包括:所述第一存储节点根据所述目标存储地址,确定所述目标存储地址所对应的存储设备;所述第一存储节点根据所述目标存储地址所对应的存储设备的标识,以及存储设备的标识与所述存储系统中的存储节点之间的对应关系,确定所述第二存储节点。
结合第一方面,在第一方面中的一种可能方式中,所述方法还包括:所述第一存储节点接收主机发送的所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
第二方面,提供一种用于传输数据处理请求的方法,应用于主机,所述主机连接至存储系统,所述存储系统包括至少两个存储节点,每个存储节点通过第一网卡连接至所述主机,通过第二网卡与其他存储节点相连,所述方法包括:所述主机获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系;在侦测到预设条件时,所述主机根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点;所述主机向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
在本申请实施例中,可以在第一存储节点中对数据处理请求进行处理,并将处理后的数据处理请求通过第一存储节点中的交换单元发送至第二存储节点中的交换单元,以访问第二存储节点中的存储设备,避免了现有技术中只能通过第二存储节点内部的访问通道访问目标存储地址对应的存储设备,有利于提高访问第二存储节点中的目标存储地址的成功率。
结合第二方面,在第二方面的一种可能的实现方式中,所述方法还包括:所述主机向所述第一存储节点发送所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
第三方面,用于传输数据处理请求的装置,所述装置包括用于执行第一方面或第一方面任一种可能实现方式中的各个模块。
第四方面,用于传输数据处理请求的装置,所述装置包括用于执行第二方面或第二方面任一种可能实现方式中的各个模块。
第五方面,提供了一种用于传输数据处理请求的装置,包括收发器、处理器和存储器。该处理器用于控制收发器收发信号,该存储器用于存储计算机程序,该处理器用于从存储器中调用并运行该计算机程序,使得该用于传输数据处理请求的装置执行上述第一方面中的方法。
第六方面,提供了一种用于传输数据处理请求的装置,包括收发器、处理器和存储器。该处理器用于控制收发器收发信号,该存储器用于存储计算机程序,该处理器用于从存储器中调用并运行该计算机程序,使得该用于传输数据处理请求的装置执行第二方面中的方法。
第七方面,提供了一种计算机程序产品,所述计算机程序产品包括:计算机程序代码,当所述计算机程序代码在计算机上运行时,使得计算机执行上述各方面中的方法。
第八方面,提供了一种计算机可读介质,所述计算机可读介质存储有程序代码,当所述计算机程序代码在计算机上运行时,使得计算机执行上述各方面中的方法。
第九方面,提供了一种芯片系统,该芯片系统包括处理器,用于传输数据处理请求的装置实现上述方面中所涉及的功能,例如,生成,接收,发送,或处理上述方法中所涉及的数据和/或信息。在一种可能的设计中,所述芯片系统还包括存储器,所述存储器,用于保存终端设备必要的程序指令和数据。该芯片系统,可以由芯片构成,也可以包括芯片和其他分立器件。
第十方面,提供了一种芯片系统,该芯片系统包括处理器,用于支持用于传输数据处理请求的装置实现上述方面中所涉及的功能,例如,生成,接收,发送,或处理上述方法中所涉及的数据和/或信息。在一种可能的设计中,所述芯片系统还包括存储器,所述存储器,用于保存网络设备必要的程序指令和数据。该芯片系统,可以由芯片构成,也可以包括芯片和其他分立器件。
附图说明
图1是传统的基于存储网络的存储系统的示意性框图。
图2是本申请实施例的基于网络存储技术的存储系统的示意性框图。
图3是本申请另一实施例的基于网络存储技术的存储系统的示意性框图。
图4是本申请实施例的用于传输数据处理请求的方法的示意性流程图。
图5是基于数据访问场景下本申请实施例的数据处理请求的传输方法的示意性流程图。
图6是基于数据迁移场景下本申请实施例的数据处理请求的传输方法的示意性流程图。
图7是本申请实施例的用于传输数据处理请求的装置的示意性框图。
图8是本申请另一实施例的用于传输数据处理请求的装置的示意性框图。
图9是本申请实施例的用于传输数据处理请求的装置的示意性框图。
图10是本申请另一实施例的用于传输数据处理请求的装置的示意性框图。
具体实施方式
下面将结合附图,对本申请中的技术方案进行描述。
为了便于理解,先简单介绍传统的数据处理请求的传输方法。
图1是传统的基于存储网络的存储系统的示意性框图。图1所示的存储系统中包括至少一个存储节点110,并且存储系统中的存储节点连接到网络中,以便主机通过网络访问存储系统中的各个存储节点中的存储设备。
第二存储节点,可以是存储系统中的任意一个存储节点,第二存储节点中的存储设备对应地存储地址中包括主机通过网络准备访问的目标存储地址。该第二存储节点包括第一网卡111、处理单元112、交换单元113和存储设备114,其中,网络接口111、处理单元112、交换单元113和存储设备114之间通过内部连接通路相连。
第一网卡111,用于将存储节点与网络连接,可以将主机通过网络发送的数据处理请求转发给处理单元112。
处理单元112,用于对从网络接口接收的数据处理请求进行处理,并将该数据处理请求转化为存储设备可以直接处理的数据处理请求。例如,该数据处理请求为EC请求时,该处理单元用于对数据处理请求中携带的原始数据进行计算,生成该原始数据的副本,并生成存储设备可以直接处理的IO请求,该IO请求用于将原始数据与副本一起存入存储设备中。需要说明的是,上述处理单元可以是CPU。
交换单元113,用于为接入交换单元的处理单元和存储设备提供通信通路,以将存储设备可以直接处理的数据处理请求从处理单元转发给存储设备。
需要说明的是,上述交换单元可以是交换器或者交换芯片。
存储设备114,为数据存储提供存储空间。具体地,可以是SSD或硬盘驱动器(HardDisk Drive,HDD)盘组成的存储设备。
需要说明的是,上述存储设备可以是基于键值(key-value,KV)存储系统管理的存储设备,可以是基于块设备管理的存储设备,还可以是基于文档存储系统管理的存储设备,本申请实施例对此不作具体限定。
在图1所示的存储系统中,第二存储节点中用于访问第二存储节点的存储设备的访问通路包括第一网卡111和处理单元112,也就是说,主机只能通过第二存储节点中的访问通路访问第二存储节点的存储设备,当访问通路故障(例如,处理单元故障而导致访问通路故障)或访问通路拥塞(例如,处理单元的对数据处理请求的计算量较大而造成拥塞)时,主机可能无法访问第二存储节点的存储设备,或需要等待较长的时间才能访问第二存储节点的存储设备。
为了解决上述问题,本申请实施例的数据处理请求的传输方式可以通过用于存储系统中的各存储节点之间直接通信的网络,访问第二存储节点的存储空设备。为了便于理解,先简单介绍本申请实施例的存储系统。
图2是本申请实施例的基于网络存储技术的存储系统的示意性框图。应理解,图2所示的存储系统中的部分单元与图1所示的存储系统中的部分单元的功能相似,为了简洁,可以参见上文中的描述,并与图1中的存储系统使用相同的附图标记。
图2所示的存储系统包括至少一个存储节点210,并且存储系统中的存储节点连接到网络中,以便主机通过网络访问存储系统中的各个存储节点中的存储设备。
需要说明的是,图2所示的存储系统和存储节点中,仅列出了与本申请实施例相关的单元,还可以包括其他传统存储系统和存储节点中包含的单元,本申请实施例在此不做具体限定。
第二存储节点,可以是存储系统中的任意一个存储节点,第二存储节点的存储设备对应地存储地址中包括主机通过网络准备访问的目标存储地址。该第二存储节点包括网络接口111、处理单元112、交换单元113、存储设备114、微处理器211和网络连接功能启动器212,其中,网络接口111、处理单元112、交换单元113、存储设备114、微处理器211和网络连接功能启动器212之间通过内部连接通路相连。
微处理器211,用于对交换单元进行配置,以保证存储系统中除第二存储节点之外的存储节点可以通过第二存储节点中的交换单元访问第二存储节点内的存储设备。
第二网卡212,用于将第二存储节点接入网络中,以使的存储系统中各存储节点可以通过第二网络接入的网络进行通信。
需要说明的是,上述第二存储节点通过第二网卡接入的网络可以与第二存储节点通过第一网卡接入的网络相同,也就是说,第二存储节点通过第二网卡以及第二网卡对应的网络接口可以接入存储节点与主机进行通信的网络,以通过该网络与存储系统中的其他存储节点进行通信。
上述第二存储节点通过第二网卡接入的网络还可以与第二存储节点通过第一网卡接入的网络是不同的网络,也就是说,第二存储节点可以通过第一网卡和第二网卡分别接入两个独立的网络,其中第二存储节点通过第一网卡接入的网络可以是第二存储节点与主机进行通信的网络,第二存储节点通过第二网卡接入的网络可以是与存储系统中其他存储节点进行通信的网络。
需要说明的是,上述第二网卡可以是将存储系统的各存储节点通过网络建立通信连接的设备,在不同的网络中上述第二网卡可以是不同的设备,或者基于不同网络协议,上述第二网卡还可以是支持不同网络协议的网卡。
例如,在基于小型计算机系统接口(Small Computer System Interface,SCSI)的网络中上述第二网卡可以是主机总线适配器(Host Bus Adapter,HBA)。HBA是一个在服务器和存储装置间提供输入/输出(Input/Output,I/O)处理和物理连接的电路板或集成电路适配器,即一种将主机I/O总线连接到计算机的存储系统上的I/O适配器。
在基于光纤通道(Fibre Channel,FC)的网络中,上述第二网卡可以是网络适配器(Network Interface Card,NIC),用于将存储节点接入局域网,还可以用于将准备传输的数据封装为网络上其它设备能够识别的格式,通过网络介质传输。具体可以是以太网卡、FC网卡或ISCSI网卡等。
应理解,图2示出的存储节点中的第二网卡212和交换单元113可以是相互独立的物理单元。第二网卡212还可以是位于交换单元113内部的一个功能模块,具体结构图可以参见图3所示的本申请另一实施例的基于网络存储技术的存储系统的示意性框图。
还应理解,上述交换单元113与微处理器211可以是相互独立的物理单元,具体的结构示意图可以参见图2;上述交换单元113与微处理器211还可以是位于同一物理单元中,具体的结构示意图可以参见图3示出的交换单元115。
下文基于上述图2和图3所示的存储系统的示意性框图,结合图4详细描述本申请实施例的用于传输数据处理请求的方法。图4是本申请实施例的用于传输数据处理请求的方法的示意性流程图。
图4所示的方法可以应用于存储系统,所述存储系统包括第一存储节点及第二存储节点,所述第一存储节点中的存储设备通过所述第一存储节点的处理器及第一网卡连接至主机,通过第二网卡连接至所述第二存储节点的存储设备,图4所示方法包括:
410,获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系。
420,在侦测到预设条件时,所述主机根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点。
具体地,上述通过第一存储节点访问第二存储节点的存储设备,可以指通过第一存储节点中的第二网卡与第二存储节点中的第二网卡接入的网络,访问第二存储节点的存储设备。
可选地,主机根据所述拓扑关系以及预设规则确定所述第一存储节点访问第二存储节点的存储设备,所述预设规则用于指示所述主机确定所述第一存储节点的规则。
上述预设规则可以是以下任意一种规则:
一、主机根据在当前时段内,存储节点反馈的时延确定第一存储节点。
具体地,主机可以预存在准备发送数据处理请求的当前时段内,向存储系统中各存储节点发送数据处理请求,直到各存储节点返回用于指示执行该数据处理请求成功的指示信息所使用的时间,并选择上述时间短的存储节点作为第一存储节点,在一定程度上,可以减少通过第一存储节点向第二存储节点转发数据处理请求的时间。
二、主机根据存储系统中各存储节点之间的位置,确定第一存储节点。
具体地,主机可以获取存储系统中各存储节点的位置信息,确定与第二存储节点的位置最近的存储节点作为第一存储节点。
430,所述主机向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
可选地,作为一个实施例,在步骤430之前,所述方法还包括:确定所述目标存储地址所在的存储节点的访问通路故障或拥塞。
需要说明的是,可以通过向所述目标存储地址所在的存储节点发送所述数据处理请求,并在预设的时间段内未收到所述存储地址所在的存储节点发送的针对该数据处理请求的反馈,从而确定所述目标存储地址所在的存储节点的访问通路故障或拥塞;或者可以通过向所述目标存储地址所在的存储节点发送探测信号,并在预设的时间段内未收到所述存储地址所在的存储节点发送的针对该探测信号的反馈,从而确定所述目标存储地址所在的存储节点的访问通路故障或拥塞。
还应理解,上述确定所述目标存储地址所在的存储节点的访问通路故障或拥塞的步骤可以在步骤430之前且步骤420之后执行,还可以在步骤420和步骤410之间执行,本申请实施例对该步骤的执行时间不做限定。
相应地,在主机向第一存储节点发送了上述数据处理请求后,第一存储节点可以进行如下操作。
440,所述第一存储节点接收访问所述第二存储节点的存储设备的数据处理请求,所述数据处理请求中携带待处理数据的目标存储地址。
上述数据处理请求可以是下列请求中的至少一种:用于访问目标存储地址的IO请求,用于在存储系统中各存储节点之间进行垃圾回收(Gabage Collection,GC)的GC请求、负载均衡请求以及重删压缩请求。
应理解,上述待处理的数据可以是携带在数据处理请求中的,上述待处理的数据还可以是存储在目标存储地址中的。
450,所述第一存储节点根据所述待处理数据的目标存储地址,确定所述第二存储节点。
可选地,作为一个实施例,所述目标存储地址中包括所述第二存储节点的标识及所述第二存储节点的存储设备中用于存储所述待处理数据的逻辑地址。
具体地,第一存储节点可以直接根据数据处理请求中携带的第二存储节点的标识,确定第一存储节点是存储系统中的那个存储节点。
应理解,上述目标存储地址所在的储存节点的标识可以是该存储节点的IP地址,或者主机为存储系统中各存储节点分配的编号,且各存储节点的编号用于唯一标识一个存储节点。本申请实施例对此不做具体限定。
可选地,作为一个实施例,所述存储系统中包含多个存储节点,所述多个存储节点中不同的存储节点所对应的存储地址范围不重叠,步骤450还包括:所述第一存储节点根据所述目标存储地址,确定所述目标存储地址所在的存储地址范围;所述第一存储节点根据根据所述目标存储地址所在的存储地址范围,以及所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系,确定所述第二存储节点。
具体地,存储系统中不同的存储节点中的存储设备对应的存储地址范围不重叠,也就是说,每个存储地址范围仅能对应一个存储节点,因此,上述第一存储节点可以直接根据目标存储地址所在的存储地址范围,确定所述数据处理请求中的存储地址所在的存储节点。
可选地,作为一个实施例,所述存储系统中包含多个存储节点,所述多个存储节点中不同的存储节点中存储设备的标识不同,所述数据处理请求中携带待处理数据的目标存储地址所在的存储设备的标识,步骤450还包括:所述第一存储节点根据所述目标存储地址,确定所述目标存储地址所对应的存储设备;所述第一存储节点根据所述目标存储地址所对应的存储设备的标识,以及存储设备的标识与所述存储系统中的存储节点之间的对应关系,确定所述第二存储节点。
应理解,上述存储设备的标识可以是目标存储地址所在的存储设备的编号,例如,存储设备为SSD盘时,上述存储地址可以包括目标存储地址所在的SSD盘的盘符。又例如,存储设备为SSD盘时,上述存储地址可以包括目标存储地址所在的SSD盘的IP地址。又例如,存储设备为SSD盘时,上述存储地址可以包括目标存储地址所在的SSD盘的存储设备地址。
460,所述第一存储节点通过所述第二网卡发送数据处理请求至所述第二存储节点,所述数据处理请求指示所述第二存储节点对所述待处理数据进行处理。
需要说明的是,上述数据处理请求可以通过第一存储节点中的处理单元进行处理,并将处理后的,并且存储设备可以直接处理的数据处理请求通过交换单元之间的组网,由第一存储设备的网卡发送至第二存储设备的网卡,以实现对第二存储节点的存储设备的访问。
上述数据处理请求还可以是通过第一存储节点中的处理单元发送至第一存储节点中的第二网卡,此时第一存储节点中的处理单元可以并未对数据处理请求进行处理,由第一存储设备的第二网卡发送至第二存储设备的,以实现对第二存储节点的存储设备的访问。
为了进一步了解本申请实施例的用于传输数据处理请求的方法,下文以数据访问和数据迁移的场景为例进行详细描述。
图5是基于数据访问场景下本申请实施例的数据处理请求的传输方法的示意性流程图。图5所示的方法包括:
510,上层应用通过主机向存储节点2发送写请求,该写请求用于向存储节点2中的KV系统中写入key值为12345的数据。
具体地,上层应用通过主机向存储节点2发送写请求,以通过存储节点2中的访问通道向存储节点2中的KV存储系统中写key值为12345的数据。
520,主机向存储节点2发送读请求,该读请求用于读取存储节点2中key值为12345的数据。
具体地,若主机在预设时间段内未接收到上述读请求所请求的数据,则执行步骤530至步骤550;若主机在预设时间段内接收到上述读请求所请求的数据,则主机发起的读取数据的流程结束。
530,主机根据存储系统中各存储节点之间的拓扑关系,确定通过存储节点1中的访问通路可以存储节点2中的KV存储系统。
具体地,上述读请求可以经由存储节点1中的交换单元向存储节点2的交换单元发送读请求,以访问存储节点2中的KV存储系统。
需要说明的是,上述步骤530可以在主机初始化时执行,也可以在主机执行步骤520后执行,本申请实施例对于上述步骤530的执行时间不做具体限定。
540,主机通过存储节点1中的交换单元向存储节点2的交换单元转发上述读请求。
550,主机通过存储节点1接收从存储节点2的KV存储系统中读取的数据。
具体地,从存储节点2中的KV存储系统中向主机返回key值为12345的数据,该数据可以通过存储节点2的交换单元向存储节点1的交换单元转发,最终从存储节点1中返回给主机,以完成本次主机读取数据的过程。
上文中的存储节点中的第二网卡可以位于存储节点的交换单元中,下文结合图6以存储节点中的第二网卡位于存储节点的交换单元中为例,描述数据迁移场景下的数据处理请求的传输方法。
图6是基于数据迁移场景下本申请实施例的数据处理请求的传输方法的示意性流程图。图6所示的方法包括:
610,上层应用通过主机发送数据迁移请求,所述数据迁移请求用于将待迁移的数据从存储节点1中的第一存储设备迁移到存储节点2中的第二存储设备。
具体地,数据迁移请求可以携带第一存储设备的存储地址和第二存储设备的存储地址。
620,主机通过存储节点1发送上述数据迁移请求。
具体地,主机在预设时间段内未接收到表示数据迁移成功的反馈信息,则执行步骤630至步骤650;主机在预设时间段内接收到表示数据迁移成功的反馈信息,则上述数据迁移的流程结束。
需要说明的是,上述主机在预设时间段内未接收到表示数据迁移成功的反馈信息,可以指主机接收到表示数据迁移失败的反馈信息,或者主机在预设时间段内未接收到表示数据迁移成功的反馈信息,也未接收到表示数据迁移失败的反馈信息。
630,主机根据存储系统中各存储节点之间的拓扑关系,确定存储节点3作为向存储节点1中转发上述数据处理请求的存储节点。
具体地,主机确定存储系统中与存储节点1相邻的存储节点3作为向存储节点1中转发上述数据处理请求的存储节点。也就是说,通过存储节点3中的访问通路将数据迁移请求发送到存储节点1中的交换单元,以便于存储节点1的交换单元向存储节点1中的存储设备发送数据迁移请求。
需要说明的是,上述步骤630可以在主机初始化时执行,也可以在主机执行步骤620后执行,本申请实施例对于上述步骤的执行时间不做具体限定。
还应理解,上述存储节点3可以与存储节点2是相同的存储节点,上述存储节点3可以与存储节点2是不同的存储节点,本申请实施例对此不作限定。
640,主机通过存储节点3中的访问通路向存储节点1中发送数据迁移请求。
具体地,主机通过存储节点3中的访问通路,将数据迁移请求处理为存储设备可以直接执行的请求后,通过存储节点3和存储节点1之间的交换单元组网,向存储节点1中的交换单元发送数据迁移请求。
650,存储节点1通过存储节点1与存储节点2之间的交换单元组网实现上述待迁移数据的迁移过程。
需要说明的是,上述通过存储节点1和存储节点2之间的交换单元组网传输待迁移的数据时,如果不需要存储节点1中的处理单元对数据进行计算时,可以直接将待迁移的数据从存储节点1中的第一存储设备发送到存储节点2中的第二存储设备;如果需要存储节点1中的处理单元对数据进行计算时,可以通过存储节点1中的微处理器对待迁移的数据进行处理,在将处理后的数据通过存储节点1中的第二网卡发送到存储节点2。
上述通过第一存储节点的微处理器对待迁移的数据进行处理的过程与传统的第一存储节点中的处理单元对待迁移的数据进行计算的过程相同,在此不再赘述。
还应理解,图6所示的方法中仅列出了存储节点1中的访问通路故障或拥塞时的数据迁移请求的传输方法,本申请实施例还可以应用于存储节点2中的访问通路的故障后的数据迁移请求的传输方法,由于传输方式基本相同,为了简洁,在此不再赘述。
上文结合图1至图6详细地说明了本申请实施例的用于传输数据处理请求的方法,下文结合图7至图10简单介绍本申请实施例的用于传输数据处理请求的装置,应理解,图7至图10中所示的装置可以实现上文中描述的方法,为了简洁,在此不再赘述。
图7是本申请实施例的用于传输数据处理请求的装置的示意性框图。图7所示的用于传输数据处理请求的装置700包括接收单元710、确定单元720和发送单元730。可以应用于存储系统,所述存储系统包括第一存储节点及第二存储节点,所述第一存储节点中的存储设备通过所述第一存储节点的处理器及第一网卡连接至主机,通过第二网卡连接至所述第二存储节点的存储设备;
接收单元710,用于接收访问所述第二存储节点的存储设备的数据处理请求,所述数据处理请求中携带待处理数据的目标存储地址;
确定单元720,用于根据所述待处理数据的目标存储地址,确定所述第二存储节点;
发送单元730,用于通过所述第二网卡发送数据处理请求至所述第二存储节点,所述数据处理请求指示所述第二存储节点对所述待处理数据进行处理。
可选地,作为一个实施例,所述目标存储地址中包括所述第二存储节点的标识及所述第二存储节点的存储设备中用于存储所述待处理数据的逻辑地址。
可选地,作为一个实施例,所述存储系统中包含多个存储节点,所述多个存储节点中不同的存储节点所对应的存储地址范围不重叠,所述确定单元还用于根据所述待处理数据的目标存储地址,确定所述第二存储节点,包括:所述确定单元还用于根据所述目标存储地址,确定所述目标存储地址所在的存储地址范围;所述确定单元还用于根据所述目标存储地址所在的存储地址范围,以及所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系,确定所述第二存储节点。
可选地,作为一个实施例,所述接收单元还用于:接收主机发送的所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
在可选的实施例中,所述接收单元和发送单元可以为收发机840,所述确定单元可以为处理器820,所述用于传输数据处理请求的装置还可以包括输入/输出接口830和存储器810,具体如图8所示。
图8是本申请另一实施例的用于传输数据处理请求的装置的示意性框图。图8所示的的装置800可以包括:存储器810、处理器820、输入/输出接口830、收发机840。其中,存储器810、处理器820、输入/输出接口830和收发机840通过内部连接通路相连,该存储器810用于存储指令,该处理器820用于执行该存储器820存储的指令,以控制输入/输出接口830接收输入的数据和信息,输出操作结果等数据,并控制收发机840发送信号。
所述收发机840,用于接收访问所述第二存储节点的存储设备的数据处理请求,所述数据处理请求中携带待处理数据的目标存储地址;
所述处理器820,用于根据所述待处理数据的目标存储地址,确定所述第二存储节点;
所述收发机840,用于通过所述第二网卡发送数据处理请求至所述第二存储节点,所述数据处理请求指示所述第二存储节点对所述待处理数据进行处理。
应理解,在本申请实施例中,该处理器820可以采用通用的中央处理器(CentralProcessing Unit,CPU),微处理器,应用专用集成电路(Application SpecificIntegrated Circuit,ASIC),或者一个或多个集成电路,用于执行相关程序,以实现本申请实施例所提供的技术方案。
还应理解,收发机840又称通信接口,使用例如但不限于收发器一类的收发装置,来实现终端800与其它设备或通信网络之间的通信。
该存储器810可以包括只读存储器和随机存取存储器,并向处理器820提供指令和数据。处理器820的一部分还可以包括非易失性随机存取存储器。例如,处理器820还可以存储设备类型的信息。
在实现过程中,上述方法的各步骤可以通过处理器820中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的用于传输数据处理请求的方法可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器810,处理器820读取存储器810中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
应理解,本申请实施例中,该处理器可以为中央处理单元(central processingunit,CPU),该处理器还可以是其它通用处理器、数字信号处理器(digital signalprocessor,DSP)、专用集成电路(application specific integrated circuit,ASIC)、现成可编程门阵列(field programmable gate array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
图9是本申请实施例的用于传输数据处理请求的装置的示意性框图。图9所示的装置900可以应用于主机,所述主机连接至存储系统,所述存储系统包括至少两个存储节点,每个存储节点通过第一网卡连接至所述主机,通过第二网卡与其他存储节点相连,所述装置包括:
获取单元910,用于获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系;
确定单元920,用于在侦测到预设条件时,根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点;
发送单元930,用于向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
可选地,作为一个实施例,所述发送单元还用于:
向所述第一存储节点发送所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
在可选的实施例中,所述获取单元和所述发送单元可以为收发机1040,所述确定单元可以为处理器1020,所述用于传输数据处理请求的装置还可以包括输入/输出接口1030和存储器1010,具体如图10所示。
图10是本申请另一实施例的用于传输数据处理请求的装置的示意性框图。图10所示的装置1000可以包括:存储器1010、处理器1020、输入/输出接口1030、收发机1040。其中,存储器1010、处理器1020、输入/输出接口1030和收发机1040通过内部连接通路相连,该存储器1010用于存储指令,该处理器1020用于执行该存储器1020存储的指令,以控制输入/输出接口1030接收输入的数据和信息,输出操作结果等数据,并控制收发机1040发送信号。
所述收发机1040,用于获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系;
所述处理器1020,还用于在侦测到预设条件时,根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点;
所述收发机1040,用于向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
应理解,在本申请实施例中,该处理器1020可以采用通用的中央处理器(CentralProcessing Unit,CPU),微处理器,应用专用集成电路(Application SpecificIntegrated Circuit,ASIC),或者一个或多个集成电路,用于执行相关程序,以实现本申请实施例所提供的技术方案。
还应理解,收发机1040又称通信接口,使用例如但不限于收发器一类的收发装置,来实现终端1000与其它设备或通信网络之间的通信。
该存储器1010可以包括只读存储器和随机存取存储器,并向处理器1020提供指令和数据。处理器1020的一部分还可以包括非易失性随机存取存储器。例如,处理器1020还可以存储设备类型的信息。
在实现过程中,上述方法的各步骤可以通过处理器1020中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的用于传输数据处理请求的方法可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器1010,处理器1020读取存储器1010中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
应理解,本申请实施例中,该处理器可以为中央处理单元(central processingunit,CPU),该处理器还可以是其它通用处理器、数字信号处理器(digital signalprocessor,DSP)、专用集成电路(application specific integrated circuit,ASIC)、现成可编程门阵列(field programmable gate array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
应理解,在本申请实施例中,“与A相应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其它信息确定B。
应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(Digital Subscriber Line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够读取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,数字通用光盘(Digital Video Disc,DVD))或者半导体介质(例如,固态硬盘(Solid State Disk,SSD))等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (4)

1.一种用于传输数据处理请求的方法,应用于主机,所述主机连接至存储系统,所述存储系统包括至少两个存储节点,每个存储节点通过第一网卡连接至所述主机,通过第二网卡与其他存储节点相连,所述方法包括:
所述主机获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系;
在侦测到预设条件时,所述主机根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点;
所述主机向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
所述主机向所述第一存储节点发送所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
3.一种用于传输数据处理请求的装置,应用于主机,所述主机连接至存储系统,所述存储系统包括至少两个存储节点,每个存储节点通过第一网卡连接至所述主机,通过第二网卡与其他存储节点相连,所述装置包括:
获取单元,用于获取所述存储系统中通过第二网卡连接的存储节点的拓扑关系;
确定单元,用于在侦测到预设条件时,根据所述拓扑关系在所述至少两个存储节点中确定第一存储节点,所述主机通过所述第一存储节点访问第二存储节点;
发送单元,用于向所述第一存储节点发送用于访问所述第二存储节点的存储设备的数据处理请求。
4.如权利要求3所述的装置,其特征在于,所述装置还包括:
发送单元,用于向所述第一存储节点发送所述存储系统中的存储地址范围与所述存储系统中存储节点之间的对应关系。
CN201710803285.6A 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置 Active CN107707628B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201710803285.6A CN107707628B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置
CN202010311508.9A CN111654519B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置
EP22204535.3A EP4216515A1 (en) 2017-09-06 2018-09-05 Method and apparatus for transmitting data processing request
PCT/CN2018/104095 WO2019047843A1 (zh) 2017-09-06 2018-09-05 用于传输数据处理请求的方法和装置
EP18855012.3A EP3668056B1 (en) 2017-09-06 2018-09-05 Method and device for transmitting data processing request
US16/810,372 US11544001B2 (en) 2017-09-06 2020-03-05 Method and apparatus for transmitting data processing request

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710803285.6A CN107707628B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202010311508.9A Division CN111654519B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置

Publications (2)

Publication Number Publication Date
CN107707628A CN107707628A (zh) 2018-02-16
CN107707628B true CN107707628B (zh) 2020-06-02

Family

ID=61172352

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202010311508.9A Active CN111654519B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置
CN201710803285.6A Active CN107707628B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202010311508.9A Active CN111654519B (zh) 2017-09-06 2017-09-06 用于传输数据处理请求的方法和装置

Country Status (4)

Country Link
US (1) US11544001B2 (zh)
EP (2) EP3668056B1 (zh)
CN (2) CN111654519B (zh)
WO (1) WO2019047843A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111654519B (zh) * 2017-09-06 2024-04-30 华为技术有限公司 用于传输数据处理请求的方法和装置
WO2020181478A1 (zh) * 2019-03-12 2020-09-17 华为技术有限公司 亚健康节点的管理方法和装置
CN112752296B (zh) * 2019-10-30 2022-06-10 中移(苏州)软件技术有限公司 一种数据传输方法、装置及电子设备
CN111092817A (zh) * 2019-12-23 2020-05-01 中国联合网络通信集团有限公司 一种数据传输方法及装置
CN111651424B (zh) * 2020-06-10 2024-05-03 中国科学院深圳先进技术研究院 一种数据处理方法、装置、数据节点及存储介质
CN114024714A (zh) * 2021-09-30 2022-02-08 山东云海国创云计算装备产业创新中心有限公司 一种访问请求处理方法、装置、网卡设备及存储计算系统
CN116414735A (zh) * 2021-12-30 2023-07-11 华为技术有限公司 数据存储方法、系统、存储访问配置方法及相关设备
CN116560900A (zh) * 2022-01-30 2023-08-08 华为技术有限公司 读取数据的方法或写数据的方法及其相关系统
CN114553899A (zh) * 2022-01-30 2022-05-27 阿里巴巴(中国)有限公司 一种存储设备
CN117312224A (zh) * 2022-06-27 2023-12-29 华为技术有限公司 数据处理系统、方法、装置和控制器

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102546820A (zh) * 2012-02-16 2012-07-04 华为技术有限公司 传输优化方法、映射信息的存储方法、装置及系统
JP2015162037A (ja) * 2014-02-27 2015-09-07 富士通株式会社 中継装置、ストレージ装置、および中継プログラム
CN104994135A (zh) * 2015-05-25 2015-10-21 华为技术有限公司 存储系统中融合san及nas存储架构的方法及装置
CN105205067A (zh) * 2014-06-18 2015-12-30 中国移动通信集团浙江有限公司 一种存储扩容方法、装置、计算节点及存储设备

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004102374A (ja) * 2002-09-05 2004-04-02 Hitachi Ltd データ移行装置を有する情報処理システム
JP2006107151A (ja) * 2004-10-06 2006-04-20 Hitachi Ltd ストレージシステム及びストレージシステムの通信パス制御方法
US7363449B2 (en) * 2005-10-06 2008-04-22 Microsoft Corporation Software agent-based architecture for data relocation
US8635376B2 (en) * 2006-02-22 2014-01-21 Emulex Design & Manufacturing Corporation Computer system input/output management
US7913030B2 (en) * 2007-12-28 2011-03-22 Sandisk Il Ltd. Storage device with transaction logging capability
CN101539874B (zh) * 2009-05-04 2012-02-29 成都市华为赛门铁克科技有限公司 一种实现数据镜像的系统、方法及网络装置
WO2013107029A1 (zh) * 2012-01-19 2013-07-25 华为技术有限公司 一种基于块存储的数据处理方法、装置及系统
US9104560B2 (en) * 2012-06-13 2015-08-11 Caringo, Inc. Two level addressing in storage clusters
US9794337B2 (en) * 2012-10-30 2017-10-17 International Business Machines Corporation Balancing storage node utilization of a dispersed storage network
WO2014205667A1 (zh) * 2013-06-26 2014-12-31 华为技术有限公司 网络卷创建方法、数据存储方法、存储设备和存储系统
CN104216664B (zh) * 2013-06-26 2017-06-09 华为技术有限公司 网络卷创建方法、数据存储方法、存储设备和存储系统
US9274901B2 (en) * 2013-11-20 2016-03-01 Avago Technologies General Ip (Singapore) Pte. Ltd. I/O request mirroring in a clustered storage system
US9934177B2 (en) * 2014-11-04 2018-04-03 Cavium, Inc. Methods and systems for accessing storage using a network interface card
CN104503707B (zh) 2014-12-24 2018-03-06 华为技术有限公司 读取数据的方法以及装置
WO2016101288A1 (zh) * 2014-12-27 2016-06-30 华为技术有限公司 一种远程直接数据存取方法、设备和系统
CN105653406B (zh) * 2015-12-31 2019-05-24 华为技术有限公司 一种管理分布式存储系统的方法及分布式存储系统
CN105516367B (zh) * 2016-02-02 2018-02-13 北京百度网讯科技有限公司 分布式数据存储系统、方法和装置
CN111654519B (zh) * 2017-09-06 2024-04-30 华为技术有限公司 用于传输数据处理请求的方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102546820A (zh) * 2012-02-16 2012-07-04 华为技术有限公司 传输优化方法、映射信息的存储方法、装置及系统
JP2015162037A (ja) * 2014-02-27 2015-09-07 富士通株式会社 中継装置、ストレージ装置、および中継プログラム
CN105205067A (zh) * 2014-06-18 2015-12-30 中国移动通信集团浙江有限公司 一种存储扩容方法、装置、计算节点及存储设备
CN104994135A (zh) * 2015-05-25 2015-10-21 华为技术有限公司 存储系统中融合san及nas存储架构的方法及装置

Also Published As

Publication number Publication date
WO2019047843A1 (zh) 2019-03-14
CN111654519A (zh) 2020-09-11
EP3668056B1 (en) 2022-11-30
CN107707628A (zh) 2018-02-16
US20200201579A1 (en) 2020-06-25
US11544001B2 (en) 2023-01-03
EP3668056A4 (en) 2020-08-12
CN111654519B (zh) 2024-04-30
EP4216515A1 (en) 2023-07-26
EP3668056A1 (en) 2020-06-17

Similar Documents

Publication Publication Date Title
CN107707628B (zh) 用于传输数据处理请求的方法和装置
US11489919B2 (en) Method, apparatus, and data processing system including controller to manage storage nodes and host operations
US8902736B2 (en) Selecting an alternative path for an input/output request
US9015519B2 (en) Method and system for cluster wide adaptive I/O scheduling by a multipathing driver
CN112214166B (zh) 用于传输数据处理请求的方法和装置
US20160352578A1 (en) System and method for adaptive paths locator for virtual network function links
CN112130748B (zh) 一种数据访问方法、网卡及服务器
WO2022007470A1 (zh) 一种数据传输的方法、芯片和设备
US11231983B2 (en) Fault tolerance processing method, apparatus, and server
EP3477460A1 (en) Data processing method and related storage apparatus
CN111064786B (zh) 账户标识管理方法及设备
CN109417507A (zh) 部分延迟的报文访问
CN109479214B (zh) 一种负载均衡的方法及相关装置
CN112650440B (zh) 路径替换方法及装置
US20130144977A1 (en) Shared-bandwidth multiple target remote copy
US11650993B2 (en) Information query method for terminal and terminal
CN113691389A (zh) 负载均衡器的配置方法、服务器及存储介质
CN113452539B (zh) 源站切换方法、装置、电子设备及存储介质
CN116306407B (zh) 片上网络noc的验证方法、装置、设备和存储介质
CN115189987A (zh) 网络虚拟化的实现方法、系统、装置及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant