CN112202909B - 一种计算机存储系统在线升级方法及系统 - Google Patents

一种计算机存储系统在线升级方法及系统 Download PDF

Info

Publication number
CN112202909B
CN112202909B CN202011077369.4A CN202011077369A CN112202909B CN 112202909 B CN112202909 B CN 112202909B CN 202011077369 A CN202011077369 A CN 202011077369A CN 112202909 B CN112202909 B CN 112202909B
Authority
CN
China
Prior art keywords
node
upgrading
scheduling
upgrade
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011077369.4A
Other languages
English (en)
Other versions
CN112202909A (zh
Inventor
吴佳
李礼
苗诗君
邢培栋
张旗
余云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai V&g Information Technology Co ltd
Original Assignee
Shanghai V&g Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai V&g Information Technology Co ltd filed Critical Shanghai V&g Information Technology Co ltd
Priority to CN202011077369.4A priority Critical patent/CN112202909B/zh
Publication of CN112202909A publication Critical patent/CN112202909A/zh
Application granted granted Critical
Publication of CN112202909B publication Critical patent/CN112202909B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications

Abstract

本发明提供了一种计算机存储系统升级方法及系统，包括：获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令；所述第一升级节点自动进行升级操作，同时将升级完第一升级节点加入到预设的完成工作组中；基于分布式存储系统，根据工作完成组反馈到的升级完成的节点数量，所述调度节点向第二升级节点发送升级指令；本发明的有益效果在于：提供了一种新的计算机存储系统升级方法思路，使计算机存储系统管理更加优化，将计算机存储的数据分布式管理，使存储更加低成本的同时拥有高度可扩展性。

Description

一种计算机存储系统在线升级方法及系统
技术领域
本发明涉及计算机存储系统，特别涉及一种计算机存储系统在线升级系统，提供一种高效率、高扩展性的存储系统升级方法。
背景技术
目前，互联网面临着爆炸式的用户数据增长，传统的计算机存储模式已经满足不了广大用户的需求，而分布式存储系统为管理数据提供了一种新的思路。分布式存储系统具有低成本、高性能的特点，将数据存储在多个物理节点上，因而具有巨大的存储容量。
分布式存储系统支持高容错性和高可靠性，但目前的分布式存储系统包含着大量的节点和存储对象，在所述分布式存储系统的在线升级面临着巨大的挑战。
本发明提供一种有益效果：基于分布式存储系统，建立一种节点分批升级操作，减少了管理传输数据或指令时的出错率，减轻了负载不均，路径不清的风险。
发明内容
本发明提供一种计算机存储系统升级方法及系统，用以解决上述情况。
一种计算机存储系统升级方法及系统，其特征在于，包括：
获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；
将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行；
获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组；
通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
作为本发明的一种实施例，所述获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点，包括：
在所述分布式存储系统的存储节点安装预设的调度程序；
对所述存储节点构建约束条件，当触发升级时间时，约束条件自动启动，通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取所述储存节点的特征集合
Figure 777935DEST_PATH_IMAGE001
；
Figure DEST_PATH_IMAGE002
其中，
Figure 646141DEST_PATH_IMAGE003
为所述储存节点的第
Figure DEST_PATH_IMAGE004
个储存节点的目标特征，
Figure 691457DEST_PATH_IMAGE005
；
步骤2：根据所述储存节点的特征的集合
Figure 758770DEST_PATH_IMAGE001
，构建转化模型
Figure DEST_PATH_IMAGE006
；
Figure 838722DEST_PATH_IMAGE007
其中，所述
Figure DEST_PATH_IMAGE008
第
Figure 113714DEST_PATH_IMAGE004
个储存节点调度能力；所述
Figure 787272DEST_PATH_IMAGE009
第
Figure 720593DEST_PATH_IMAGE004
个储存节点转化损失系数；所述
Figure DEST_PATH_IMAGE010
表示转化困难度；所述
Figure 920630DEST_PATH_IMAGE011
表示的第
Figure 71251DEST_PATH_IMAGE004
个储存节点的的转化概率；所述
Figure DEST_PATH_IMAGE012
表示的第
Figure 28843DEST_PATH_IMAGE004
个储存节点的的方差；所述
Figure 297013DEST_PATH_IMAGE013
表示所述储存节点的总数；
步骤3：获取所述调度节点的元素特征的集合
Figure DEST_PATH_IMAGE014
；
Figure 476191DEST_PATH_IMAGE015
其中，
Figure DEST_PATH_IMAGE016
为调度节点第
Figure 171614DEST_PATH_IMAGE004
个调度节点的目标特征，
Figure DEST_PATH_IMAGE017
；
步骤4：将所述元素特征的集合
Figure 616502DEST_PATH_IMAGE014
带入所述转化模型
Figure 626046DEST_PATH_IMAGE006
，确定转化是否成功；
当
Figure DEST_PATH_IMAGE018
时，表示转化成功；
当
Figure 423845DEST_PATH_IMAGE019
时，表示转化失败；
基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点。
作为本发明的一种实施例，所述将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，包括：
基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
所述第一升级节点接收到升级指令并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
作为本发明的一种实施例，所述获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组，包括：
基于分布式存储系统，构建工作完成组和工作异常组；
当第一升级节点接收到所述升级指令，自动触发预设的升级操作；
基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
根据第一关键信息和所述第二关键信息，将所述升级完成的第一升级节点和未升级完成的第一升级节点分别加入到所述工作完成组和工作异常组中。
作为本发明的一种实施例，所述通过工作异常组向调度节点反馈信息，所述调度节点向第二升级节点发送升级指令，包括：
所述工作异常组对第二关键信息数量进行累加，并向调度节点反馈计算结果；
基于分布式存储系统和调度节点向升级未完成的第一升级节点相对应的第二升级节点发送第二升级指令；
接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级
一种计算机存储系统在线升级系统，包括：
存储节点划分模块：用于获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；
升级节点划分模块：用于将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行；
工作组划分模块：用于获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组；
异常处理模块：通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
作为本发明的一种实施例，所述存储节点划分包括：
调度程序单元：用于在所述分布式存储系统的存储节点安装预设的调度程序；
约束条件单元：用于对所述存储节点构建约束条件，当触发升级时间时，约束条件自动启动，通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取所述储存节点的特征集合
Figure 290169DEST_PATH_IMAGE001
；
Figure 691195DEST_PATH_IMAGE002
其中，
Figure 504430DEST_PATH_IMAGE003
为所述储存节点的第
Figure 533566DEST_PATH_IMAGE004
个储存节点的目标特征，
Figure 226584DEST_PATH_IMAGE005
；
步骤2：根据所述储存节点的特征的集合
Figure 911644DEST_PATH_IMAGE001
，构建转化模型
Figure 590887DEST_PATH_IMAGE006
；
Figure 349895DEST_PATH_IMAGE007
其中，所述
Figure 26864DEST_PATH_IMAGE008
第
Figure 261536DEST_PATH_IMAGE004
个储存节点调度能力；所述
Figure 839411DEST_PATH_IMAGE009
第
Figure 46401DEST_PATH_IMAGE004
个储存节点转化损失系数；所述
Figure 956588DEST_PATH_IMAGE010
表示转化困难度；所述
Figure 288343DEST_PATH_IMAGE011
表示的第
Figure 247072DEST_PATH_IMAGE004
个储存节点的的转化概率；所述
Figure 105307DEST_PATH_IMAGE012
表示的第
Figure 45450DEST_PATH_IMAGE004
个储存节点的的方差；所述
Figure 192397DEST_PATH_IMAGE013
表示所述储存节点的总数；
步骤3：获取所述调度节点的元素特征的集合
Figure 17134DEST_PATH_IMAGE014
；
Figure 605241DEST_PATH_IMAGE015
其中，
Figure 529335DEST_PATH_IMAGE016
为调度节点第
Figure 225895DEST_PATH_IMAGE004
个调度节点的目标特征，
Figure 526427DEST_PATH_IMAGE017
；
步骤4：将所述元素特征的集合
Figure 259721DEST_PATH_IMAGE014
带入所述转化模型
Figure 354715DEST_PATH_IMAGE006
，确定转化是否成功；
当
Figure 538572DEST_PATH_IMAGE018
时，表示转化成功；
当
Figure 314898DEST_PATH_IMAGE019
时，表示转化失败；
确定升级节点单元：用于基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点。
作为本发明的一种实施例，所述升级节点划分模块包括：
升级节点划分单元：用于基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
指令发送单元：用于通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
升级准备单元：用于所述第一升级节点接收到升级指令并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
作为本发明的一种实施例，所述工作组划分模块包括：
工作组划分单元：用于在分布式存储系统上构建工作完成组和工作异常组；
升级指令执行单元：通过设置升级操作事件，当第一升级节点接收到所述升级指令，自动触发升级操作；
关键信息提取单元：基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
工作组分类单元：将所述第一关键信息和所述第二关键信息分别加入到所述工作完成组和工作异常组中。
作为本发明的一种实施例，所述异常处理模块包括：
异常处理单元：所述工作异常组对第二关键信息数量进行累加，并向调度节点反馈计算结果；
第二升级节点升级准备单元：基于分布式存储系统和调度节点向升级未完成的第一升级节点相对应的第二升级节点发送第二升级指令；
第二升级节点升级执行单元：接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级
本发明有益效果在于：本发明通过将升级节点分批成两次，通过不同的存储节点使得不同的升级节点分类清晰，工作分明，便于管理和规划，通过设置工作异常组和工作正常组将升级完成和升级未完成第一升级节点，对升级异常情况的升级节点进行排查，并利用第二升级节点做出补救措施。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分
地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的
目的和其他优点可通过在所写的说明书以及附图中所特别指出的结
构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部
分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例中本发明实施例中一种计算机存储系统在线升级方法中的方法流程图；
图2为本发明实施例中一种计算机存储系统在线升级方法及系统中在线升级方法执行的N-S流程图；
图3为本发明实施例中本发明实施例中一种计算机存储系统在线升级系统中的系统组成图。
具体实施
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本明。
实施例1：
如附图1和附图2所示，本发明为一种计算机存储系统在线升级方法，本发明包括以下步骤：
步骤100：获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；
步骤101：将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行；
步骤102：获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组；
步骤103：通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
上述技术方案的有益效果在于：本发明通过将升级节点分批成两次，通过不同的存储节点使得不同的升级节点分类清晰，工作分明，便于管理和规划，通过设置工作异常组和工作正常组将升级完成和升级未完成第一升级节点，对升级异常情况的升级节点进行排查，并利用第二升级节点做出补救措施。
实施例2：
作为本发明的一种实施例：所述获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点，包括：
在所述分布式存储系统的存储节点安装预设的调度程序；
对所述存储节点构建约束条件，当触发升级时间时，约束条件自动启动，通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取所述储存节点的特征集合
Figure 939915DEST_PATH_IMAGE001
；
Figure 533707DEST_PATH_IMAGE002
其中，
Figure 876964DEST_PATH_IMAGE003
为所述储存节点的第
Figure 971828DEST_PATH_IMAGE004
个储存节点的目标特征，
Figure 513667DEST_PATH_IMAGE005
；
步骤2：根据所述储存节点的特征的集合
Figure 216044DEST_PATH_IMAGE001
，构建转化模型
Figure 984280DEST_PATH_IMAGE006
；
Figure 430305DEST_PATH_IMAGE007
其中，所述
Figure 92230DEST_PATH_IMAGE008
第
Figure 965508DEST_PATH_IMAGE004
个储存节点调度能力；所述
Figure 971773DEST_PATH_IMAGE009
第
Figure 752647DEST_PATH_IMAGE004
个储存节点转化损失系数；所述
Figure 472341DEST_PATH_IMAGE010
表示转化困难度；所述
Figure 454204DEST_PATH_IMAGE011
表示的第
Figure 56086DEST_PATH_IMAGE004
个储存节点的的转化概率；所述
Figure 843914DEST_PATH_IMAGE012
表示的第
Figure 605065DEST_PATH_IMAGE004
个储存节点的的方差；所述
Figure 820146DEST_PATH_IMAGE013
表示所述储存节点的总数；
步骤3：获取所述调度节点的元素特征的集合
Figure 909325DEST_PATH_IMAGE014
；
Figure 500843DEST_PATH_IMAGE015
其中，
Figure 867233DEST_PATH_IMAGE016
为调度节点第
Figure 518795DEST_PATH_IMAGE004
个调度节点的目标特征，
Figure 298532DEST_PATH_IMAGE017
；
步骤4：将所述元素特征的集合
Figure 490479DEST_PATH_IMAGE014
带入所述转化模型
Figure 773693DEST_PATH_IMAGE006
，确定转化是否成功；
当
Figure 281641DEST_PATH_IMAGE018
时，表示转化成功；
当
Figure 283095DEST_PATH_IMAGE019
时，表示转化失败；
基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点。
上述发明的原理在于：本发明通过安装的调度程序，可以使普通存储节点得到节点调度的能力，并通过设置约束条件，对分布式存储系统里一定数量的存储节点进行转换，并获取调度节点，调度接点可以对其他存储节点可以进行管理、安排，而调度程序安装在的存储节点可以在相应的分布图上显示出来并生成相应的升级节点。本发明在进行节点转化时，根据储存节点的转化困难度、转化概率方差构建转化模型，对储存节点进行转化，最后基于调度节点的特征实现储存节点转化为调度节点。
上述发明的有益效果在于：本发明通过取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点，对存储节点进行划分，并将升级节点和调度节点相对应，其中，升级节点的确定一般基于升级节点的地域或访问频率等。
实施例3：
作为本发明的一种实施例：所述将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行，包括：
基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
所述第一升级节点接收到升级指令并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
上述技术方案的原理是：调度程序内存有安装包，在对普通存储节点进行调度节点转换时，直接将安装包安装到调度节点，分布式存储系统通过存储元数据来管理存储系统，而元数据通过提取数据的属性对数据进行分类，元数据根据节点的存储的数据属性对升级节点进行划分，其中属性包括最近访问时间，使用频率等将升级节点进行划分。
上述技术方案的有益效果在于：调度程序内存有安装包，在对普通存储节点进行调度节点转换时，直接将安装包安装到调度节点，简化了升级步骤，简化了人工安装升级包的步骤，实现在线升级。对升级节点按照属性进行划分，可以将地域近，访问频率高，最新访问时间新确定第一升级节点和第二升级节点，从而减少升级节点在线升级的实延。
实施例4：
作为本发明的一种实施例：所述获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组，包括：
基于分布式存储系统，构建工作完成组和工作异常组；
当第一升级节点接收到所述升级指令，自动触发预设的升级操作；
基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
根据第一关键信息和所述第二关键信息，将所述升级完成的第一升级节点和未升级完成的第一升级节点分别加入到所述工作完成组和工作异常组中。
上述技术方案的原理在于：本发明基于分布式存储系统的超级账本，可以自行构建预设模块，构建工作完成组和工作异常组，升级指令中设有触发事件，当升级节点接收升级指令，触发升级操作事件，下载、安装并传播接收到安装包，同时第二升级指令进行安装包备份，第一升级节点在升级操作完成后会有完成标识和未完成标识，分布式存储系统会提取其关键信息，升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息，根据第一关键信息和所述第二关键信息，将所述升级完成的第一升级节点和未升级完成的第一升级节点分别加入到所述工作完成组和工作异常组中。
上述技术方案的有益效果在于：本发明通过第一升级节点和第二升级节点的划分，保证了当第一升级节点升级失败，有第二批升级节点可以补充，减少了升级节点的异常工作结果，对升级节点数量过少的风险进行了补偿。
实施例5：
作为本发明的一种实施例：通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令，包括：
所述工作异常组对第二关键信息数量进行累加，并向调度节点反馈计算结果；
基于分布式存储系统，调度节点向升级未完成的第一升级节点相对应的第二升级节点发送升级指令；
接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级
上述技术方案的原理：本发明通过在工作异常组设置计数器，对工作异常组里提取的第二关键信息进行累加，基于分布式存储存储的分布图，找到与第一升级节点对应的第二升级节点，调度节点接收到数据异常信息，通过相应算法，对对应的第二升级节点发送升级指令，第二升级节点升为第一升级节点，执行第一升级节点的相同步骤。
上述技术方案的有益效果在于：本发明利用迭代的方法，对第一升级节点和第二升级节点嵌套循环，使第一升级节点和第二升级节点以一定判定条件相连接，简化了人工升级，实现了自动在线升级。
实施例6：
如附图3所示的一种计算机存储系统在线升级方法及系统组成图包括：
存储节点划分模块：用于获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；
升级节点划分模块：用于将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行；
工作组划分模块：用于获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组；
异常处理模块：通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
上述技术方案的有益效果在于：本发明通过将升级节点分批成两次，通过不同的存储节点使得不同的升级节点分类清晰，工作分明，便于管理和规划，通过设置工作异常组和工作正常组将升级完成和升级未完成第一升级节点，对升级异常情况的升级节点进行排查，并利用第二升级节点做出补救措施。
实施例7：
作为本发明的一种实施例，所述存储节点划分模块包括：
调度程序单元：用于在所述分布式存储系统的存储节点安装预设的调度程序；
约束条件单元：用于对所述存储节点构建约束条件，当触发升级时间时，约束条件自动启动，通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取所述储存节点的特征集合
Figure 278733DEST_PATH_IMAGE001
；
Figure 416453DEST_PATH_IMAGE002
其中，
Figure 347500DEST_PATH_IMAGE003
为所述储存节点的第
Figure 101829DEST_PATH_IMAGE004
个储存节点的目标特征，
Figure 573262DEST_PATH_IMAGE005
；
步骤2：根据所述储存节点的特征的集合
Figure 893385DEST_PATH_IMAGE001
，构建转化模型
Figure 57650DEST_PATH_IMAGE006
；
Figure 955068DEST_PATH_IMAGE007
其中，所述
Figure 230191DEST_PATH_IMAGE008
第
Figure 670400DEST_PATH_IMAGE004
个储存节点调度能力；所述
Figure 739987DEST_PATH_IMAGE009
第
Figure 141012DEST_PATH_IMAGE004
个储存节点转化损失系数；所述
Figure 485406DEST_PATH_IMAGE010
表示转化困难度；所述
Figure 406220DEST_PATH_IMAGE011
表示的第
Figure 646708DEST_PATH_IMAGE004
个储存节点的转化概率；所述
Figure 659664DEST_PATH_IMAGE012
表示的第
Figure 276590DEST_PATH_IMAGE004
个储存节点的的方差；所述
Figure 301178DEST_PATH_IMAGE013
表示所述储存节点的总数；
步骤3：获取所述调度节点的元素特征的集合
Figure 978147DEST_PATH_IMAGE014
；
Figure 212819DEST_PATH_IMAGE015
其中，
Figure 367857DEST_PATH_IMAGE016
为调度节点第
Figure DEST_PATH_IMAGE020
个调度节点的目标特征，
Figure 761798DEST_PATH_IMAGE017
；
步骤4：将所述元素特征的集合
Figure 344089DEST_PATH_IMAGE014
带入所述转化模型
Figure 66057DEST_PATH_IMAGE006
，确定转化是否成功；
当
Figure 24786DEST_PATH_IMAGE018
时，表示转化成功；
当
Figure 23966DEST_PATH_IMAGE019
时，表示转化失败；
确定升级节点单元：用于基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点。
上述发明的原理在于：本发明通过安装的调度程序，可以使普通存储节点得到节点调度的能力，并通过设置约束条件，对分布式存储系统里一定数量的存储节点进行转换，并获取调度节点，调度接点可以对其他存储节点可以进行管理、安排，而调度程序安装在的存储节点可以在相应的分布图上显示出来并生成相应的升级节点。本发明在进行节点转化时，根据储存节点的转化困难度、转化概率方差构建转化模型，对储存节点进行转化，最后基于调度节点的特征实现储存节点转化为调度节点。
上述发明的有益效果在于：本发明通过取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点，对存储节点进行划分，并将升级节点和调度节点相对应，其中，升级节点的确定一般基于升级节点的地域或访问频率等。
实施例8：
作为本发明的一种实施例，所述升级节点划分模块包括：
升级节点划分单元：用于基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
指令发送单元：用于通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
升级准备单元：用于所述第一升级节点接收到升级指令并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
上述技术方案的原理是：调度程序内存有安装包，在对普通存储节点进行调度节点转换时，直接将安装包安装到调度节点，分布式存储系统通过存储元数据来管理存储系统，而元数据通过提取数据的属性对数据进行分类，元数据根据节点的存储的数据属性对升级节点进行划分，其中属性包括最近访问时间，使用频率等将升级节点进行划分。
上述技术方案的有益效果在于：调度程序内存有安装包，在对普通存储节点进行调度节点转换时，直接将安装包安装到调度节点，简化了升级步骤，简化了人工安装升级包的步骤，实现在线升级。对升级节点按照属性进行划分，可以将地域近，访问频率高，最新访问时间新确定第一升级节点和第二升级节点，从而减少升级节点在线升级的实延。
实施例9：
作为本发明的一种实施例，所述工作组划分模块包括：
工作组划分单元：用于在分布式存储系统上构建工作完成组和工作异常组；
升级指令执行单元：通过设置升级操作事件，当第一升级节点接收到所述升级指令，自动触发升级操作；
关键信息提取单元：基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
工作组分类单元：将所述第一关键信息和所述第二关键信息分别加入到所述工作完成组和工作异常组中。
上述技术方案的原理在于：本发明基于分布式存储系统的超级账本，可以自行构建预设模块，构建工作完成组和工作异常组，升级指令中设有触发事件，当升级节点接收升级指令，触发升级操作事件，下载、安装并传播接收到安装包，同时第二升级指令进行安装包备份，第一升级节点在升级操作完成后会有完成标识和未完成标识，分布式存储系统会提取其关键信息，升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息，根据第一关键信息和所述第二关键信息，将所述升级完成的第一升级节点和未升级完成的第一升级节点分别加入到所述工作完成组和工作异常组中。
上述技术方案的有益效果在于：本发明通过第一升级节点和第二升级节点的划分，保证了当第一升级节点升级失败，有第二批升级节点可以补充，减少了升级节点的异常工作结果，对升级节点数量过少的风险进行了补偿。
实施例10：
作为本发明的一种实施例，所述异常处理模块包括：
异常处理单元：所述工作异常组对第二关键信息数量进行累加，并向调度节点反馈计算结果；
第二升级节点升级准备单元：基于分布式存储系统和调度节点向升级未完成的第一升级节点相对应的第二升级节点发送第二升级指令；
第二升级节点升级执行单元：接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级
上述技术方案的原理：本发明通过在工作异常组设置计数器，对工作异常组里提取的第二关键信息进行累加，基于分布式存储存储的分布图，找到与第一升级节点对应的第二升级节点，调度节点接收到数据异常信息，通过相应算法，对对应的第二升级节点发送升级指令，第二升级节点升为第一升级节点，执行第一升级节点的相同步骤。
上述技术方案的有益效果在于：本发明利用迭代的方法，对第一升级节点和第二升级节点嵌套循环，使第一升级节点和第二升级节点以一定判定条件相连接，简化了人工升级，实现了自动在线升级。领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器和光学存储器等）上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种计算机存储系统在线升级方法，其特征在于，应用于分布式的计算机存储系统，包括：
获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；其中，
所述获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点，包括：
在所述分布式存储系统的存储节点安装预设的调度程序；
对所述存储节点构建约束条件，当触发升级事件时，约束条件自动启动，并通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取所述存储节点的特征集合A；
A＝{a1,a2……ai}
其中，ai为所述存储节点的第i个存储节点的目标特征，i＝1,2,3,……n；
步骤2：根据所述存储节点的特征的集合A，构建转化模型F；
Figure FDA0002985446490000011
其中，所述ki第i个存储节点调度能力；所述ci第i个存储节点转化损失系数；所述δ表示转化困难度；所述
Figure FDA0002985446490000012
表示的第i个存储节点的转化概率；所述
Figure FDA0002985446490000013
表示的第i个存储节点的方差；所述n表示所述存储节点的总数；
步骤3：获取所述调度节点的元素特征的集合B；
B＝{b1,b2……bj}
其中，bj为调度节点第j个调度节点的目标特征，j＝1,2,3,……m；
步骤4：将所述元素特征的集合B带入所述转化模型F，确定转化是否成功；
当F≥1时，表示转化成功；
当F＜1时，表示转化失败；
基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点；
将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行，确定执行结果；
根据所述执行结果，获取工作完成组和工作异常组，将升级完/未升级完成的第一升级节点分别加入到所述完成工作组/工作异常组；
通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
2.根据权利要求1所述的一种计算机存储系统在线升级方法，所述将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行，其特征在于，包括：
基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
接收所述升级指令，并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
3.根据权利要求1所述的一种计算机存储系统在线升级方法，获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组，其特征在于，包括：
基于分布式存储系统，构建工作完成组和工作异常组；
当第一升级节点接收到所述升级指令，自动触发预设的升级操作；
基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
根据第一关键信息和所述第二关键信息，将所述升级完成的第一升级节点和未升级完成的第一升级节点分别加入到所述工作完成组和工作异常组中。
4.根据权利要求1所述的一种计算机存储系统在线升级方法，所述通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令，其特征在于，包括：
通过所述工作异常组对第二关键信息数量进行累加，确定所述调度节点反馈计算结果；
基于分布式存储系统和调度节点向升级未完成的第一升级节点相对应的第二升级节点发送第二升级指令；
接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级。
5.一种计算机存储系统在线升级系统，包括：
存储节点划分模块：用于获取所述分布式存储系统的存储节点，并将所述存储节点划分成升级节点和调度节点；其中，
所述存储节点划分模块包括：
调度程序单元：用于在所述分布式存储系统的存储节点安装预设的调度程序；
约束条件单元：用于对所述存储节点构建约束条件，当触发升级时间时，约束条件自动启动，通过启动所述调度程序，在所述约束条件内的存储节点进行转化，获取调度节点；其中，
在所述约束条件内的存储节点进行转化包括以下步骤：
步骤1：获取存储节点的特征集合A；
A＝{a1,a2……ai}
其中，ai为所述存储节点的第i个存储节点的目标特征，i＝1,2,3,……n；
步骤2：根据所述存储节点的特征的集合A，构建转化模型F；
Figure FDA0002985446490000051
其中，所述ki第i个存储节点调度能力；所述ci第i个存储节点转化损失系数；所述δ表示转化困难度；所述
Figure FDA0002985446490000052
表示的第i个存储节点的转化概率；所述
Figure FDA0002985446490000053
表示的第i个存储节点的方差；所述n表示所述存储节点的总数；
步骤3：获取所述调度节点的元素特征的集合B；
B＝{b1,b2……bj}
其中，bj为调度节点第j个调度节点的目标特征，j＝1,2,3,……m；
步骤4：将所述元素特征的集合B带入所述转化模型F，确定转化是否成功；
当F≥1时，表示转化成功；
当F＜1时，表示转化失败；
确定升级节点单元：用于基于分布式存储系统，获取所述调度节点相应的分布图，并确定相应的升级节点；
升级节点划分模块：用于将所述升级节点划分成第一升级节点和第二升级节点，同时所述调度节点向所述第一升级节点发送预设的升级指令，第一升级节点接收并执行；
工作组划分模块：用于获取工作完成组和工作异常组，将升级完和未升级完成的第一升级节点分别加入到所述完成工作组中和所述工作异常组；
异常处理模块：用于通过工作异常组向调度节点反馈的信息，所述调度节点向第二升级节点发送升级指令。
6.根据权利要求5所述的一种计算机存储系统在线升级系统，其特征在于，所述升级节点划分模块包括：
升级节点划分单元：用于基于分布式存储系统，检测所述升级节点的属性，并将所述升级节点划分成第一升级节点和第二升级节点；
指令发送单元：用于通过在调度节点上安装升级包，所述调度节点向第一升级节点发送预设的升级指令；
升级准备单元：用于接收所述升级指令，并向第二升级节点发送准备转化指令，其中所述第二升级节点对所述第一升级节点的安装包进行备份。
7.根据权利要求5所述的一种计算机存储系统在线升级系统，其特征在于，所述工作组划分模块包括：
工作组划分单元：用于在分布式存储系统上构建工作完成组和工作异常组；
升级指令执行单元：用于通过设置升级操作事件，当第一升级节点接收到所述升级指令，自动触发升级操作；
关键信息提取单元：用于基于分布式存储系统，提取所述升级完成的第一升级节点的关键信息为第一关键信息，提取升级未完成的第一升级节点的关键信息为第二关键信息；
工作组分类单元：用于将所述第一关键信息和所述第二关键信息分别加入到所述工作完成组和工作异常组中。
8.根据权利要求5所述的一种计算机存储系统在线升级系统，其特征在于，所述异常处理模块包括：
异常处理单元：用于对第二关键信息数量进行累加，并向调度节点反馈计算结果；
第二升级节点升级准备单元：用于基于分布式存储系统和调度节点向升级未完成的第一升级节点相对应的第二升级节点发送第二升级指令；
第二升级节点升级执行单元：用于接收第二升级指令，并根据所述第二升级节点触发升级操作，重复迭代升级。
CN202011077369.4A 2020-10-10 2020-10-10 一种计算机存储系统在线升级方法及系统 Active CN112202909B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011077369.4A CN112202909B (zh) 2020-10-10 2020-10-10 一种计算机存储系统在线升级方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011077369.4A CN112202909B (zh) 2020-10-10 2020-10-10 一种计算机存储系统在线升级方法及系统

Publications (2)

Publication Number Publication Date
CN112202909A CN112202909A (zh) 2021-01-08
CN112202909B true CN112202909B (zh) 2021-06-04

Family

ID=74014288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011077369.4A Active CN112202909B (zh) 2020-10-10 2020-10-10 一种计算机存储系统在线升级方法及系统

Country Status (1)

Country Link
CN (1) CN112202909B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112748884B (zh) * 2021-01-16 2022-07-29 苏州浪潮智能科技有限公司 一种分布式存储在线升级方法、装置、设备及可读介质
CN116149707B (zh) * 2023-02-22 2023-09-01 北京志凌海纳科技有限公司 分布式系统的升级风险检测和规避方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110716826A (zh) * 2018-07-13 2020-01-21 阿里巴巴集团控股有限公司 一种云盘升级、调度方法及云主机、调度装置和系统
CN111008026A (zh) * 2018-10-08 2020-04-14 阿里巴巴集团控股有限公司 集群管理方法、装置及系统
CN111399884A (zh) * 2020-04-09 2020-07-10 东风小康汽车有限公司重庆分公司 一种车辆组件的升级方法、装置及电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101741894B (zh) * 2008-11-26 2012-09-19 中国移动通信集团公司 一种分布式系统的升级方法、升级调度节点及系统
CN105005487B (zh) * 2015-06-29 2018-06-22 清华大学 一种持续服务的高性能集群操作系统在线升级方法
US10678447B2 (en) * 2016-07-15 2020-06-09 Red Hat, Inc. Containerizing a block storage service
CN107977239A (zh) * 2016-10-20 2018-05-01 南京南瑞继保电气有限公司 一种新能源功率预测系统智能升级方法
CN107315656B (zh) * 2017-06-12 2020-10-16 杭州电子科技大学 多内核的嵌入式plc软件恢复方法和plc

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110716826A (zh) * 2018-07-13 2020-01-21 阿里巴巴集团控股有限公司 一种云盘升级、调度方法及云主机、调度装置和系统
CN111008026A (zh) * 2018-10-08 2020-04-14 阿里巴巴集团控股有限公司 集群管理方法、装置及系统
CN111399884A (zh) * 2020-04-09 2020-07-10 东风小康汽车有限公司重庆分公司 一种车辆组件的升级方法、装置及电子设备

Also Published As

Publication number Publication date
CN112202909A (zh) 2021-01-08

Similar Documents

Publication Publication Date Title
US20160188318A1 (en) Data processing for upgrading medical equipment
CN101730099B (zh) 基于权限控制的终端管理方法及装置
CN107844343B (zh) 一种复杂服务端应用系统的升级系统及方法
CN112202909B (zh) 一种计算机存储系统在线升级方法及系统
US20080046880A1 (en) Method for managing internal software of terminal through device management server
CN101268620B (zh) 用于管理设备管理对象的设备管理系统和方法
CN113010260A (zh) 容器数量弹性伸缩方法以及容器数量弹性伸缩方法系统
CN109271602A (zh) 深度学习模型发布方法及装置
CN103246549B (zh) 一种数据转存的方法及系统
CN106101213A (zh) 信息分布式存储方法
CN113420026B (zh) 数据库表结构变更方法、装置、设备及存储介质
EP3018581B1 (en) Data staging management system
CN111597014B (zh) 免二次镜像的容器化JavaEE应用服务器的发布方法
CN109753044A (zh) 电池管理系统控制器升级方法及装置
CN111198546B (zh) 一种数据采集控制的方法及系统
US11474809B2 (en) Upgrades based on analytics from multiple sources
CN107016075A (zh) 集群数据同步方法及装置
CN111090401A (zh) 存储设备性能预测方法及装置
CN111435356A (zh) 数据特征提取方法、装置、计算机设备以及存储介质
CN113435489B (zh) 部署系统的方法、装置、计算机可读存储介质及处理器
US20150234866A1 (en) Data Distribution System
CN111324513B (zh) 一种人工智能开发平台的监控管理方法及系统
CN111142927A (zh) 配置文件的合并、拆分处理方法及装置
CN111552561B (zh) 一种任务处理方法及装置
CN114189512B (zh) 基线代码的下载方法、装置、终端设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant