CN115202938A - 一种非透明桥管理方法、装置、控制器及介质 - Google Patents
一种非透明桥管理方法、装置、控制器及介质 Download PDFInfo
- Publication number
- CN115202938A CN115202938A CN202211107200.8A CN202211107200A CN115202938A CN 115202938 A CN115202938 A CN 115202938A CN 202211107200 A CN202211107200 A CN 202211107200A CN 115202938 A CN115202938 A CN 115202938A
- Authority
- CN
- China
- Prior art keywords
- data
- transparent bridge
- channel
- controller
- check
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007726 management method Methods 0.000 title claims description 40
- 238000005192 partition Methods 0.000 claims abstract description 106
- 238000000034 method Methods 0.000 claims abstract description 68
- 238000012795 verification Methods 0.000 claims abstract description 58
- 238000000638 solvent extraction Methods 0.000 claims abstract description 29
- 230000006870 function Effects 0.000 claims description 79
- 230000009977 dual effect Effects 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 12
- 239000000284 extract Substances 0.000 claims description 7
- 230000000977 initiatory effect Effects 0.000 claims 1
- 230000005540 biological transmission Effects 0.000 description 16
- 238000012545 processing Methods 0.000 description 13
- 230000002159 abnormal effect Effects 0.000 description 11
- 238000000605 extraction Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000013524 data verification Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 101800001295 Putative ATP-dependent helicase Proteins 0.000 description 1
- 101800001006 Putative helicase Proteins 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/08—Error detection or correction by redundancy in data representation, e.g. by using checking codes
- G06F11/10—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's
- G06F11/1008—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's in individual solid state devices
- G06F11/1068—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's in individual solid state devices in sector programmable memories, e.g. flash disk
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种非透明桥管理方法、装置、控制器及介质,包括:对待备份数据进行分区并为每个区分配通道;通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
Description
技术领域
本申请涉及存储技术领域,特别涉及一种非透明桥管理方法、装置、控制器及介质。
背景技术
在大数据时代,对存储阵列可靠性提出更高要求,尤其是对存储系统数据备份的可靠稳定性。当前存储系统中采用NTB(即Non-Transparent Bridging,非透明桥)实现双控制器之间的数据备份,确保双控制器上处理的数据能够快速准确的实现备份,采用这种镜像备份极大提高了存储设备的可靠性。然而,在应用非透明桥芯片实现数据备份的过程中,控制器通过PCIE(即Peripheral Component Interconnect Express,高速串行计算机扩展总线标准)通道连接至NTB芯片进行数据传输,PCIE串行数据传输过程中,NTB连接的多通道很难进行校验管理,当一条PCIE链路出现异常时,异常问题很难进行定位分析,异常通路可能会导致控制器备份数据过程出现失误,最终导致数据存储的失误、甚至丢盘等严重问题;同时,随着当前PCIE技术的发展,所需传输、备份数据的带宽也逐渐增多,且随着存储主板功能的复杂,数据传输通道的长度在主板上也会有一定延长,以上这一系列物理因素均给PCIE通道上数据传输备份带来更大的困难,NTB芯片校验PCIE通道数据传输准确性的难度也进一步增加,因此,如何准确快速的进行NTB的校验管理,来保证数据备份过程的准确无误是目前亟待解决的问题。
发明内容
有鉴于此,本申请的目的在于提供一种非透明桥管理方法、装置、控制器及介质,能够提升NTB校验管理的准确性和效率,从而保障数据备份的准确性。其具体方案如下:
第一方面,本申请公开了一种非透明桥管理方法,应用于双控制器中的主控制器,包括:
对待备份数据进行分区并为每个区分配通道;
通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;
获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
可选的,所述对待备份数据进行分区并为每个区分配通道,包括:
根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;
根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区;
基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。
可选的,所述根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区,包括:从前端服务器获取数据服务对象;根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区。
可选的,还包括:
若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
可选的,在所述对待备份数据进行分区并为每个区分配通道之后,还包括:
将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。
可选的,所述若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,包括:
若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
可选的,所述对该区的所有通道进行枚举校验,包括:
通过该区的通道一一向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的每个通道对应的数据进行连续性校验。
可选的,所述将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器,包括:
将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器;相应的,所述方法还包括:
在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;
其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
可选的,还包括:
向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。
可选的,还包括:
获取所述备份控制器发送的所述第二特征;
将所述第二特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致。
可选的,还包括:
若所述第一特征和所述第二特征不一致,则确定问题通道,并将所述问题通道关闭。
可选的,所述确定问题通道,包括:
通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的接收数据进行连续性校验;
获取所述第一非透明桥返回的校验结果,若该校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验,并将未通过校验的通道确定为问题通道。
可选的,所述提取该批数据的第一特征,包括:
确定散列函数;
利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
可选的,所述确定散列函数,包括:
识别该批数据的数据类型;
基于所述数据类型确定散列函数。
可选的,所述利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征,包括:
针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;
将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
可选的,所述数据类型包括文本类型、图像类型、视频类型,相应的,所述基于所述数据类型确定散列函数,包括:
基于除留余数法构造第一散列函数;
将文本类型的散列函数确定为所述第一散列函数;
基于平方中值法构造第二散列函数;
将图像类型和视频类型的散列函数确定为所述第二散列函数。
第二方面,本申请公开了一种非透明桥管理装置,应用于双控制器中的主控制器,包括:
数据分区模块,用于对待备份数据进行分区;
通道分配模块,用于为每个区分配通道;
分区校验模块,用于通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;
校验结果获取模块,用于获取所述第一非透明桥返回的第一校验结果;
通道校验模块,用于若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
第三方面,本申请公开了一种控制器,包括存储器和处理器,其中:
所述存储器,用于保存计算机程序;
所述处理器,用于执行所述计算机程序,以实现前述的非透明桥管理方法。
第四方面,本申请公开了一种计算机可读存储介质,用于保存计算机程序,其中,所述计算机程序被处理器执行时实现前述的非透明桥管理方法。
可见,本申请先对待备份数据进行分区并为每个区分配通道,之后通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验,然后获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。也即,本申请在数据备份之前,对待备份数据进行分区以及通道分配,然后先对每个区校验,若某一区未通过校验,再对每个通道校验,这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例公开的一种非透明桥管理方法流程图;
图2为本申请实施例提供的一种具体的双控制器存储系统结构示意图;
图3为本申请实施例公开的一种具体的非透明桥管理方法流程图;
图4为本申请实施例公开的一种具体的数据备份流程图;
图5为本申请实施例公开的一种具体的分区枚举扫描算法流程图;
图6为本申请实施例公开的一种具体的基于Hash原理的数据对比算法流程图;
图7为本申请实施例公开的一种非透明桥管理装置结构示意图;
图8为本申请实施例公开的一种控制器原理结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
目前,在应用非透明桥芯片实现数据备份的过程中,控制器通过PCIE通道连接至NTB芯片进行数据传输,PCIE串行数据传输过程中,NTB连接的多通道很难进行校验管理,当一条PCIE链路出现异常时,异常问题很难进行定位分析,异常通路可能会导致控制器备份数据过程出现失误,最终导致数据存储的失误、甚至丢盘等严重问题;同时,随着当前PCIE技术的发展,所需传输、备份数据的带宽也逐渐增多,且随着存储主板功能的复杂,数据传输通道的长度在主板上也会有一定延长,以上这一系列物理因素均给PCIE通道上数据传输备份带来更大的困难,NTB芯片校验PCIE通道数据传输准确性的难度也进一步增加,因此,如何准确的进行NTB的校验管理,来保证数据备份过程的准确无误是目前亟待解决的问题。为此,本申请提供了一种非透明桥管理方案,能够提升NTB校验管理的准确性,从而保障数据备份的准确性。
参见图1所示,本申请实施例公开了一种非透明桥管理方法,应用于双控制器中的主控制器,包括:
步骤S11:对待备份数据进行分区并为每个区分配通道。
例如,参见图2所示,图2为本申请实施例提供的一种具体的双控制器存储系统结构示意图。双控制器之间通过非透明桥实现数据的相互备份,一路控制器上有16路PCIE通道连向非透明桥,另一路控制器上同样有16路PCIE通道连向非透明桥,两个非透明桥之间互联,这使得两路控制器均能够通过非透明桥访问对方的系统,数据可以相互进行备份。PCIE通过串行传输方式传输数据,因此各通道间数据传输的起始终止不会相互干扰影响,从两台控制器端到NTB端的各路PCIE通道之间相互独立,这种串行的传输方式提高了数据传输速率,但各通道相互独立提高了通道校验的复杂程度,本申请实施例能够准确的进行通道校验。其中,通道为连接控制器中CPU(即Central Processing Unit,中央处理器)与NTB的PCIE通道。
在一种实施方式中,可以根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区;基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。例如,在一种具体的实施方式中,可以根据数据重要程度对所述待备份数据进行垂直分区,得到高重要程度、中重要程度、低重要程度的垂直分区,按每个区在这三个垂直分区的数据量为每个区分配通道,以高重要程度的数据量越大,分配的通道越多为原则进行分配,如果高重要程度的数据量相同,按中重要程度的数据量大小进行分配。从前端服务器获取所述待备份数据中各数据的数据服务对象;根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区。
其中,待备份数据为控制器当前的处理数据,也即,控制器首先对当前数据处理进行分区,分区方式采用水平分区与垂直分区相结合,水平分区横向上将处理数据按数据服务对象进行划分,数据服务对象也即数据所服务的对象,由前端服务器提供。由控制器进行处理数据与数据服务对象的分配,分配完成后各数据服务对象所在区对应各自的处理数据,垂直分区在纵向上将处理数据按重要程度分为高中低三个区,每一区包含一定量的处理数据。分区完成后对各个区进行PCIE通道分配,通道根据之前的水平分区情况进行分配,如包含了5个数据服务对象即分了5个区,每个区所分配的通道数量按照垂直分区中数据重要程度进行划分,服务对象的数据中包含大量高重要程度的需要多分配PCIE通道。
步骤S12:通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验。
步骤S13:获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
在一种实施方式中,通过该区的通道一一向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的每个通道对应的数据进行连续性校验。也即,一一通过该区的通道向第一非透明桥连续发送数据,以便第一非透明桥对接收数据进行连续性校验,以定位出问题通道,并对该问题通道进行切断隔离。
可见,本申请实施例先对待备份数据进行分区并为每个区分配通道,之后通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验,然后获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。也即,本申请在数据备份之前,对待备份数据进行分区以及通道分配,然后先对每个区校验,若某一区未通过校验,再对每个通道校验,这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
参见图3所示,本申请实施例公开了一种具体的非透明桥管理方法,应用于双控制器中的主控制器,包括:
步骤S21:对待备份数据进行分区并为每个区分配通道。
步骤S22:通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验。
步骤S23:获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
关于上述步骤S21至S23的具体实施方式可以参考前述实施例公开的内容,在此不再进行赘述。
步骤S24:若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
也即,在通道分配完成之后,控制器通过每个区的通道向NTB发送相同的连续报文数据,NTB实时地对各个区报文数据的连续性进行校验,若检测到各区数据连续性均满足要求后,校验完成,开始数据备份工作,当检测到数据连续性存在异常时,NTB可迅速定位到某个区。然后对该区的通道进行枚举校验,校验出问题通道后向控制器发出诊断信息,数据备份过程种该通道在软件上被切断隔离。
并且,在一种实施方式中,可以将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。相应的,在一种实施方式中,若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
也即,为了保障备份链路上的两个控制器上的NTB均可用,本申请实施例在备份控制器侧也执行备份前的通道校验,具体方式可参考主控制器中的校验。并且,本申请实施例中,双控制器中的主控制器和备份控制器并不固定,主控制器为在备份过程中待备份数据所在控制器,备份控制器为待备份数据所备份至的控制器。
在一种实施方式中,可以将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器;相应的,在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
进一步的,本申请实施例中,所述提取该批数据的第一特征,具体包括以下步骤:
步骤00:确定散列函数。
在一种实施方式中,可以识别该批数据的数据类型;基于所述数据类型确定散列函数。
其中,所述数据类型包括文本类型、图像类型、视频类型,相应的,所述基于所述数据类型确定散列函数,包括:基于除留余数法构造第一散列函数;将文本类型的散列函数确定为所述第一散列函数;基于平方中值法构造第二散列函数;将图像类型和视频类型的散列函数确定为所述第二散列函数。
步骤01:利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
在一种实施方式中,可以针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
并且,主控制器可以向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。备份控制器在执行指令的控制下与主控制器同时进行特征提取,备份控制器得到第二特征,主控器得到第一特征,其中,第二特征的提取过程可以参考第一特征的提取过程,在此不再进行赘述。主控制器获取所述备份控制器发送的所述第二特征;将所述第二特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致。
也即,本申请实施例基于Hash(哈希)原理对所处理的数据建立散列值集合,散列值集合的数据量远远小于原处理数据量,可以在最短时间内对原数据与备份数据进行比较,散列值集合的建立的前提是选取合适的散列函数,使得原数据跟经过散列函数映射后的散列数据呈多对一的关系,从而使处理数据量大大减小,在映射过程种经过散列函数映射出的散列值集合需要满足两个条件:1、数据总量远远小于原处理数据总量,2、散列集合中的数据可以反映出原数据的整体情况,本申请实施例利用混合散列函数法,即对于不同的数据类型选取不同的散列函数,最后将得到的集合进行相融合,从而得到最终的散列集合。例如,对于文本类型的数据,选用除留余数法,将文本数据段被关键字P所除后的余数作为散列值,其中,P为小于该数据段长度的质数,这种方法在减小数据量的同时可以极大保留原数据特征,适用于复杂程度相对低的数据;对于图像、视频等复杂的二进制数据可以采用平方中值法,将连续数据进行平方,平方后选取所得数据的中间几位(即中位数以及与中位数邻近的预设数量个),从而在连续数据段提取出少量特征值,实现了控制器处理数据的降维。
进一步的,若所述第一特征和所述第二特征一致,则继续下一批数据的备份;若所述第一特征和所述第二特征不一致,则确定问题通道,并将所述问题通道关闭,将该问题通道的数据搬移任务分配到该区的其他通道。其中,所述确定问题通道的具体过程包括:通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的接收数据进行连续性校验;获取所述第一非透明桥返回的校验结果,若该校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验,并将未通过校验的通道确定为问题通道。
并且,还可以向备份控制器发送第一特征,备份控制器中的第二非透明桥比对第一特征和第二特征是否一致,同时进行第二非透明桥对应通道的问题定位。也即,两个控制器同时进行问题通道的定位。
其中,备份控制器中的问题通道的确定过程均为:通过每个区的所有通道向与备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的所述每个区对应的数据进行连续性校验。获取所述第二非透明桥返回的校验结果,若该校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
例如,参见图4所示,图4为本申请实施例公开的一种具体的数据备份流程图,通过分区枚举扫描算法实现CPU(即Central Processing Unit,中央处理器)到NTB的PCIE通道之间的数据校验与通道管理,在校验无误后开始进行数据备份工作,在数据备份过程中通过基于Hash原理的数据对比算法,双控制器的CPU端利用该算法对备份数据进行快速的特征提取校验,确保传输过程中数据有效,当上述算法在数据备份过程中检测出数据备份有误,则二次启动分区枚举扫描算法,该算法可以快速定位出出现异常的PCIE通道,并向BMC控制单元发出该段数据传输错误的指示,作为系统的异常日志收集,但二次启动不执行分区和分通道,对备份前已分好的通道进行校验。也即,分区枚举扫描算法在NTB层面上对各路PCIE通道进行校验处理,该算法在数据备份前被执行用于确定各通道的完整性,在问题定位分析过程中执行,用于快速定位出问题的通道,通过该算法实现了NTB快速校验管理操作。可以理解的是,分区扫描枚举扫描算法,可以执行以下步骤在数据备份之前,对待备份数据进行分区并为每个区分配通道;通过每个区的通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对所述每个区对应的接收数据进行连续性校验;获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。例如,参见图5所示,图5为本申请实施例公开的一种具体的分区枚举扫描算法流程图。并且,数据对比算法,可以用于执行在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。这样,控制器的CPU对数据备份过程中传递的实时数据进行特征提取,进而对提取的特征数据进行及时校验,保证数据备份的准确性。其中,在一次数据备份过程也即一批数据备份完成后,主控制器端会向备份控制器端发出算法执行指令,双控制器同时执行数据对比算法,最终,双控制器均将执行算法得到的散列集合传递给非透明桥,非透明桥校验二者是否完全一致。例如,参见图6所示,图6为本申请实施例公开的一种具体的基于Hash原理的数据对比算法流程图。
也即,本申请实施例提供了NTB正常工作之前的校验管理、以及NTB工作过程中的数据校验诊断、异常处理方案。NTB正常工作之前的校验部分目的是为了确保NTB从主路到转换出的各通路端均正常工作,从而两个控制器通过NTB通道可以正常备份数据,通过分区枚举扫描算法将NTB上的通道按功能进行分区管理,并通过枚举算法确保各区通道均工作正常;在NTB正常工作后,通过基于Hash原理的数据对比算法,快速提取校验数据的特征部分,并校验镜像备份数据的准确性,该算法的执行伴随着存储双控制器间数据镜像备份中一批数据备份的完成,确保校验无误后继续进行备份,极大的避免了NTB上数据备份的失误率,当执行上述算法的过程中发现数据不一致时,及时开启诊断过程,诊断过程以NTB工作前执行的分区枚举扫描算法为基准,定位出存在问题的NTB工作区,进而通过枚举扫描出问题通道,软件上及时关断该通道上的数据处理过程,并将该通道上的数据传递任务转移至该区内的其他通道,同时向BMC(即Baseboard Management Controller,基板管理控制器)控制单元发出该段数据传输错误的指示,作为系统的异常日志收集。这样,可以快速的完成备份前的NTB通道校验工作,当异常问题出现时可以及时做出合适的响应,将异常情况的影响最小化,提高了存储系统数据备份通道的高效性,系统工作的安全可靠性。
参见图7所示,本申请实施例公开了一种非透明桥管理装置,应用于双控制器中的主控制器,包括:
数据分区模块11,用于对待备份数据进行分区;
通道分配模块12,用于为每个区分配通道;
分区校验模块13,用于通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;
校验结果获取模块14,用于获取所述第一非透明桥返回的第一校验结果;
通道校验模块15,用于若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
可见,本申请实施例先对待备份数据进行分区并为每个区分配通道,之后通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验,然后获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。也即,本申请在数据备份之前,对待备份数据进行分区以及通道分配,然后先对每个区校验,若某一区未通过校验,再对每个通道校验,这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
在一种实施方式中,数据分区模块11,具体用于根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区。相应的,通道分配模块12,具体用于基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。其中,所述数据分区模块11,还用于从前端服务器获取数据服务对象。通道分配模块12,具体用于通过该区的通道一一向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的每个通道对应的数据进行连续性校验。
进一步的,所述装置还包括数据备份模块,用于若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
进一步的,所述装置还包括分区及通道分配情况发送模块,用于在所述对待备份数据进行分区并为每个区分配通道之后,将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。相应的,所述数据备份模块,具体用于若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
在一种实施方式中,数据备份模块,具体用于将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
相应的,所述装置还包括:
第一特征提取模块,用于在任一所述批数据备份完成之后,提取该批数据的第一特征;
第一特征传递模块,用于将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;
其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
并且,所述装置还包括:执行指令发送模块,用于向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。
进一步的,所述装置还包括特征获取模块,用于获取所述备份控制器发送的所述第二特征;
第二特征传递模块,用于将所述第二特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致。
进一步的,所述装置,还包括:
问题通道确定模块,用于若所述第一特征和所述第二特征不一致,则确定问题通道;
问题处理模块,用于将所述问题通道关闭。
其中,问题通道确定模块,用于通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的接收数据进行连续性校验;获取所述第一非透明桥返回的校验结果,若该校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验,并将未通过校验的通道确定为问题通道。
在一种实施方式中,问题通道确定模块包括前述分区校验模块、校验结果获取模块、以及通道校验模块。
进一步的,第一特征提取模块,具体包括:
散列函数确定子模块,用于确定散列函数;
第一特征提取子模块,用于利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
其中,散列函数确定子模块,具体包括:
数据类型识别单元,用于识别该批数据的数据类型;
散列函数确定单元,用于基于所述数据类型确定散列函数。
第一特征提取子模块,具体包括:
散列值提取单元,用于针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;
散列值融合单元,用于将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
进一步的,所述数据类型包括文本类型、图像类型、视频类型,相应的,散列函数确定单元,具体用于基于除留余数法构造第一散列函数;将文本类型的散列函数确定为所述第一散列函数;基于平方中值法构造第二散列函数;将图像类型和视频类型的散列函数确定为所述第二散列函数。
参见图8所示,本申请实施例公开了一种控制器,包括处理器21和存储器22;其中,所述存储器22,用于保存计算机程序;所述处理器21,用于执行所述计算机程序,以实现以下步骤:
对待备份数据进行分区并为每个区分配通道;通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
可见,本申请实施例先对待备份数据进行分区并为每个区分配通道,之后通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验,然后获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。也即,本申请在数据备份之前,对待备份数据进行分区以及通道分配,然后先对每个区校验,若某一区未通过校验,再对每个通道校验,这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区;基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:在所述对待备份数据进行分区并为每个区分配通道之后,将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器;
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:若所述第一特征和所述第二特征不一致,则确定问题通道,并将所述问题通道关闭。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:确定散列函数;利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:识别该批数据的数据类型;基于所述数据类型确定散列函数。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
本实施例中,所述处理器21执行所述存储器22中保存的计算机子程序时,可以具体实现以下步骤:基于除留余数法构造第一散列函数;将文本类型的散列函数确定为所述第一散列函数;基于平方中值法构造第二散列函数;将图像类型和视频类型的散列函数确定为所述第二散列函数。
并且,所述存储器22作为资源存储的载体,可以是只读存储器、随机存储器、磁盘或者光盘等,存储方式可以是短暂存储或者永久存储。
进一步的,本申请实施例公开了一种计算机可读存储介质,用于保存计算机程序,其中,所述计算机程序被处理器执行时实现以下步骤:
对待备份数据进行分区并为每个区分配通道;通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
可见,本申请实施例先对待备份数据进行分区并为每个区分配通道,之后通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验,然后获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。也即,本申请在数据备份之前,对待备份数据进行分区以及通道分配,然后先对每个区校验,若某一区未通过校验,再对每个通道校验,这样,能够准确的校验出非透明桥上连接的问题通道,及时处理问题,能够提升非透明桥校验管理的准确性和效率,从而保障数据备份的准确性。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区;基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:在所述对待备份数据进行分区并为每个区分配通道之后,将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器;
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:若所述第一特征和所述第二特征不一致,则确定问题通道,并将所述问题通道关闭。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:确定散列函数;利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:识别该批数据的数据类型;基于所述数据类型确定散列函数。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
本实施例中,所述计算机可读存储介质中保存的计算机子程序被处理器执行时,可以具体实现以下步骤:基于除留余数法构造第一散列函数;将文本类型的散列函数确定为所述第一散列函数;基于平方中值法构造第二散列函数;将图像类型和视频类型的散列函数确定为所述第二散列函数。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的一种非透明桥管理方法、装置、控制器及介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (20)
1.一种非透明桥管理方法,其特征在于,应用于双控制器中的主控制器,包括:
对待备份数据进行分区并为每个区分配通道;
通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;
获取所述第一非透明桥返回的第一校验结果,若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
2.根据权利要求1所述的非透明桥管理方法,其特征在于,所述对待备份数据进行分区并为每个区分配通道,包括:
根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区;
根据数据重要程度对所述待备份数据进行垂直分区,得到各垂直分区;
基于所述每个区在所述各垂直分区中的数据量为所述每个区分配通道。
3.根据权利要求2所述的非透明桥管理方法,其特征在于,所述根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区,包括:
从前端服务器获取数据服务对象;
根据数据服务对象对所述待备份数据进行水平分区,得到所述每个区。
4.根据权利要求1所述的非透明桥管理方法,其特征在于,还包括:
若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
5.根据权利要求4所述的非透明桥管理方法,其特征在于,在所述对待备份数据进行分区并为每个区分配通道之后,还包括:
将分区及通道分配情况发送至所述备份控制器中,以便所述备份控制器基于所述分区及通道分配情况,通过每个区的所有通道向与所述备份控制器连接的第二非透明桥连续发送数据,以便所述第二非透明桥分别对接收到的每个区对应的数据进行连续性校验,并在所述第二非透明桥返回的第二校验结果为某一区未通过连续性校验时,对该区的所有通道进行枚举校验。
6.根据权利要求5所述的非透明桥管理方法,其特征在于,所述若所述第一校验结果为每个区均通过连续性校验,则启动数据备份,包括:
若所述第一校验结果为每个区均通过连续性校验,且所述第二校验结果为每个区均通过连续性校验,则启动数据备份。
7.根据权利要求1所述的非透明桥管理方法,其特征在于,所述对该区的所有通道进行枚举校验,包括:
通过该区的通道一一向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的每个通道对应的数据进行连续性校验。
8.根据权利要求4所述的非透明桥管理方法,其特征在于,所述将所述待备份数据按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器,包括:
将所述待备份数据分批,得到多个批数据,并将所述多个批数据逐批按照所述每个区并通过所述每个区的通道备份至所述双控制器中的备份控制器。
9.根据权利要求8所述的非透明桥管理方法,其特征在于,还包括:
在任一所述批数据备份完成之后,提取该批数据的第一特征并将所述第一特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致;
其中,所述第二特征为所述备份控制器提取的所述备份控制器接收到的该批数据的第二特征。
10.根据权利要求9所述的非透明桥管理方法,其特征在于,还包括:
向所述备份控制器发送执行指令,以便所述备份控制器在所述执行指令的控制下提取接收到的批数据的第二特征。
11.根据权利要求10所述的非透明桥管理方法,其特征在于,还包括:
获取所述备份控制器发送的所述第二特征;
将所述第二特征传递至所述第一非透明桥,以便所述第一非透明桥比对所述第一特征和第二特征是否一致。
12.根据权利要求9所述的非透明桥管理方法,其特征在于,还包括:
若所述第一特征和所述第二特征不一致,则确定问题通道,并将所述问题通道关闭。
13.根据权利要求12所述的非透明桥管理方法,其特征在于,所述确定问题通道,包括:
通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的接收数据进行连续性校验;
获取所述第一非透明桥返回的校验结果,若该校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验,并将未通过校验的通道确定为问题通道。
14.根据权利要求9所述的非透明桥管理方法,其特征在于,所述提取该批数据的第一特征,包括:
确定散列函数;
利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征。
15.根据权利要求14所述的非透明桥管理方法,其特征在于,所述确定散列函数,包括:
识别该批数据的数据类型;
基于所述数据类型确定散列函数。
16.根据权利要求15所述的非透明桥管理方法,其特征在于,所述利用所述散列函数提取该批数据的散列值集合,得到该批数据的第一特征,包括:
针对该批数据中的任一数据类型的数据,利用与该数据类型对应的散列函数提取散列值;
将不同数据类型对应的散列值融合为该批数据的散列值集合,得到该批数据的第一特征。
17.根据权利要求15所述的非透明桥管理方法,其特征在于,所述数据类型包括文本类型、图像类型、视频类型,相应的,所述基于所述数据类型确定散列函数,包括:
基于除留余数法构造第一散列函数;
将文本类型的散列函数确定为所述第一散列函数;
基于平方中值法构造第二散列函数;
将图像类型和视频类型的散列函数确定为所述第二散列函数。
18.一种非透明桥管理装置,其特征在于,应用于双控制器中的主控制器,包括:
数据分区模块,用于对待备份数据进行分区;
通道分配模块,用于为每个区分配通道;
分区校验模块,用于通过每个区的所有通道向与所述主控制器连接的第一非透明桥连续发送数据,以便所述第一非透明桥分别对接收到的所述每个区对应的数据进行连续性校验;
校验结果获取模块,用于获取所述第一非透明桥返回的第一校验结果;
通道校验模块,用于若所述第一校验结果为某一区未通过连续性校验,则对该区的所有通道进行枚举校验。
19.一种控制器,其特征在于,包括存储器和处理器,其中:
所述存储器,用于保存计算机程序;
所述处理器,用于执行所述计算机程序,以实现如权利要求1至17任一项所述的非透明桥管理方法。
20.一种计算机可读存储介质,其特征在于,用于保存计算机程序,其中,所述计算机程序被处理器执行时实现如权利要求1至17任一项所述的非透明桥管理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211107200.8A CN115202938B (zh) | 2022-09-13 | 2022-09-13 | 一种非透明桥管理方法、装置、控制器及介质 |
PCT/CN2023/080892 WO2024055543A1 (zh) | 2022-09-13 | 2023-03-10 | 一种非透明桥管理方法、装置、控制器及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211107200.8A CN115202938B (zh) | 2022-09-13 | 2022-09-13 | 一种非透明桥管理方法、装置、控制器及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115202938A true CN115202938A (zh) | 2022-10-18 |
CN115202938B CN115202938B (zh) | 2023-01-24 |
Family
ID=83573176
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211107200.8A Active CN115202938B (zh) | 2022-09-13 | 2022-09-13 | 一种非透明桥管理方法、装置、控制器及介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN115202938B (zh) |
WO (1) | WO2024055543A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115543636A (zh) * | 2022-11-29 | 2022-12-30 | 苏州浪潮智能科技有限公司 | 一种多控制器的数据备份方法及相关装置 |
WO2024055543A1 (zh) * | 2022-09-13 | 2024-03-21 | 苏州元脑智能科技有限公司 | 一种非透明桥管理方法、装置、控制器及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150222533A1 (en) * | 2014-02-05 | 2015-08-06 | Intel Corporation | Transport of ethernet packet data with wire-speed and packet data rate match |
CN107329917A (zh) * | 2017-06-26 | 2017-11-07 | 郑州云海信息技术有限公司 | 一种数据传输方法及装置 |
US10983930B1 (en) * | 2020-01-14 | 2021-04-20 | EMC IP Holding Company LLC | Efficient non-transparent bridge (NTB) based data transport |
CN113806273A (zh) * | 2020-06-16 | 2021-12-17 | 英业达科技有限公司 | 快速周边组件互连数据传输控制系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106293985B (zh) * | 2016-08-12 | 2019-05-10 | 浪潮(北京)电子信息产业有限公司 | 基于NTB的多控制器之间通信的abort消息的方法 |
US10884758B2 (en) * | 2017-05-05 | 2021-01-05 | Intel Corporation | Method, apparatus, and system for propagating PCIe hot reset across a non-transparent bridge on a PCIe add-in card |
CN110008152A (zh) * | 2019-04-10 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 存储控制器节点间数据传输方法、装置、设备及存储介质 |
CN110008165B (zh) * | 2019-04-12 | 2020-07-03 | 苏州浪潮智能科技有限公司 | 一种ntb链路管理方法、系统及相关装置 |
CN115202938B (zh) * | 2022-09-13 | 2023-01-24 | 苏州浪潮智能科技有限公司 | 一种非透明桥管理方法、装置、控制器及介质 |
-
2022
- 2022-09-13 CN CN202211107200.8A patent/CN115202938B/zh active Active
-
2023
- 2023-03-10 WO PCT/CN2023/080892 patent/WO2024055543A1/zh unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150222533A1 (en) * | 2014-02-05 | 2015-08-06 | Intel Corporation | Transport of ethernet packet data with wire-speed and packet data rate match |
CN105900386A (zh) * | 2014-02-05 | 2016-08-24 | 英特尔公司 | 具有线速和分组数据速率匹配的以太网分组数据的可靠传输 |
CN107329917A (zh) * | 2017-06-26 | 2017-11-07 | 郑州云海信息技术有限公司 | 一种数据传输方法及装置 |
US10983930B1 (en) * | 2020-01-14 | 2021-04-20 | EMC IP Holding Company LLC | Efficient non-transparent bridge (NTB) based data transport |
CN113806273A (zh) * | 2020-06-16 | 2021-12-17 | 英业达科技有限公司 | 快速周边组件互连数据传输控制系统 |
Non-Patent Citations (2)
Title |
---|
JAN S等: "Anti-oxidant modulation in response to gamma radiation induced oxidative stress in developing seedlings of Psoralea corylifolia L", 《JOURNAL OF ENVIRONMENTAL RADIOACTIVITY》 * |
刘佳兴: "基于非透明桥的双机系统高效数据传输框架设计与实现", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024055543A1 (zh) * | 2022-09-13 | 2024-03-21 | 苏州元脑智能科技有限公司 | 一种非透明桥管理方法、装置、控制器及介质 |
CN115543636A (zh) * | 2022-11-29 | 2022-12-30 | 苏州浪潮智能科技有限公司 | 一种多控制器的数据备份方法及相关装置 |
CN115543636B (zh) * | 2022-11-29 | 2023-03-21 | 苏州浪潮智能科技有限公司 | 一种多控制器的数据备份方法及相关装置 |
Also Published As
Publication number | Publication date |
---|---|
CN115202938B (zh) | 2023-01-24 |
WO2024055543A1 (zh) | 2024-03-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115202938B (zh) | 一种非透明桥管理方法、装置、控制器及介质 | |
CN108509153B (zh) | Osd选择方法、数据写入和读取方法、监控器和服务器集群 | |
US8458398B2 (en) | Computer-readable medium storing data management program, computer-readable medium storing storage diagnosis program, and multinode storage system | |
CN106843749B (zh) | 写入请求处理方法、装置及设备 | |
CN110311831B (zh) | 基于容器云的系统资源监控方法及相关设备 | |
CN111858306B (zh) | 一种芯片验证方法、装置、芯片及存储介质 | |
CN104412228A (zh) | 动态迁移协议和群集服务器故障转移协议 | |
CN105897507A (zh) | 节点设备的状态检测方法和装置 | |
WO2019062856A1 (zh) | 数据重构方法及装置、数据存储系统 | |
CN116107516B (zh) | 数据写入方法、装置、固态硬盘、电子设备及存储介质 | |
US20150006459A1 (en) | Alarm Correlation Analysis Method, Apparatus and System | |
US20190347165A1 (en) | Apparatus and method for recovering distributed file system | |
WO2021088615A1 (zh) | 一种校验数据计算方法及装置 | |
EP3579501B1 (en) | Message transmission method and device in cluster file system | |
US10860224B2 (en) | Method and system for delivering message in storage system | |
CN114741234A (zh) | 数据的备份存储方法、设备及系统 | |
CN113810216B (zh) | 一种集群的故障切换方法、装置及电子设备 | |
US11294591B2 (en) | Apparatus configured to create extended configuration proposal of storage system including multiple notes | |
CN113094431A (zh) | 读写分离方法、装置及服务器 | |
CN102546652B (zh) | 一种服务器负载平衡系统及方法 | |
CN115454359B (zh) | 固态硬盘访问控制方法、装置和计算机设备和存储介质 | |
CN107340974B (zh) | 一种虚拟磁盘的迁移方法及迁移装置 | |
CN111913927A (zh) | 一种数据写入方法、装置及计算机设备 | |
CN107491270B (zh) | 一种多控存储系统的资源访问方法及装置 | |
US9996437B2 (en) | Failover in a san environment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |