CN114138199B - 数据下刷路径的管理方法、装置、电子设备及存储介质 - Google Patents
数据下刷路径的管理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN114138199B CN114138199B CN202111441175.2A CN202111441175A CN114138199B CN 114138199 B CN114138199 B CN 114138199B CN 202111441175 A CN202111441175 A CN 202111441175A CN 114138199 B CN114138199 B CN 114138199B
- Authority
- CN
- China
- Prior art keywords
- data
- brushing
- time
- disk
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001680 brushing effect Effects 0.000 title claims abstract description 393
- 238000007726 management method Methods 0.000 title abstract description 38
- 238000000034 method Methods 0.000 claims abstract description 33
- 238000004590 computer program Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 208000032953 Device battery issue Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000011010 flushing procedure Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005201 scrubbing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1608—Error detection by comparing the output signals of redundant hardware
- G06F11/1612—Error detection by comparing the output signals of redundant hardware where the redundant component is persistent storage
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0658—Controller construction arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0689—Disk arrays, e.g. RAID, JBOD
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明提供了一种数据下刷路径的管理方法、装置、电子设备及计算机存储介质,其中方法包括:当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,快盘管理装置先获取整机系统中待下刷数据的数据类型和数据大小;再根据数据类型和数据大小确定将待下刷数据下刷至数据盘所需的第一下刷时间和下刷至系统盘所需的第二下刷时间;最后根据第一下刷时间和第二下刷时间确定整机系统中待下刷数据的下刷路径,该方法通过分析数据下刷最快的路径实现在存储系统的控制器故障时及时下刷缓存数据,避免了缓存数据的丢失风险,提高了整机系统的可靠性和可用性。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种数据下刷路径的管理方法、装置、电子设备及存储介质。
背景技术
目前,随着数字化时代的到来,在人们的日常生活和科学研究中,越来越多的传统业务开始数字化、网络化,促使数据爆炸式增长,存储系统在整个业务处理系统中的地位也愈发重要,通过控制器的镜像缓存实现存储功能。
为了增加存储系统的可用性、可靠性,各存储厂商陆续推出各自的存储产品,常用的存储系统都是双控系统,四控存储系统一般也是两个控制器为一组,也就是两个控制器之间可以相互备份,一个控制器失效之后,另一个的控制器仍可提供存储服务,并保证数据不丢失,用户业务不中断。但是当一个控制器故障,仅有单控缓存数据下刷的情况下,通常情况是将数据下刷至数据盘中,但是若后端数据盘阵IO(IO全称Input/Ouput指数据输出输入)性能太差或者主机IO竞争过于激烈,则会导致整机下刷时间过长。
发明内容
为解决上述技术问题,本发明提供了一种数据下刷路径的管理方法、装置、电子设备及计算机存储介质,具体方案如下:
第一方面,提供一种数据下刷路径的管理方法,应用于快盘管理装置中,所述方法包括:当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统中待下刷数据的数据类型和数据大小;根据数据类型和数据大小确定下刷至数据盘所需的第一下刷时间,以及,将所述待下刷数据下刷至系统盘所需的第二下刷时间;根据第一下刷时间和第二下刷时间确定整机系统模块中待下刷数据的下刷路径。
在一个较佳的实施方式中,确定待下刷数据下刷至数据盘所需的第一下刷时间包括:根据数据类型和数据大小确定数据盘的第一预设下刷速度,根据数据盘已下刷数据的实时下刷速度确定数据盘最近M次下刷的第一平均下刷速度;根据第一预设下刷速度和第一平均下刷速度以及数据大小,确定第一下刷时间。
在一个较佳的实施方式中,根据第一预设下刷速度和第一平均下刷速度以及数据大小确定第一下刷时间包括:根据第一预设下刷速度以及数据大小确定第一数据盘预期下刷时间;根据第一平均下刷速度以及数据大小确定第二数据盘预期下刷时间;若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值在数据盘预设比值范围内,则确定第一数据盘预期下刷时间为第一下刷时间;若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值不在数据盘预设差比值范围内,则确定第二数据盘预期下刷时间为第一下刷时间。
在一个较佳的实施方式中,确定第二下刷时间包括:根据数据类型和数据大小确定系统盘的第二预设下刷速度,根据系统盘已下刷数据的实时下刷速度确定系统盘最近N次下刷的第二平均下刷速度;根据第二预设下刷速度和第二平均下刷速度以及数据大小,确定第二下刷时间。
在一个较佳的实施方式中,根据第二预设下刷速度和第二平均下刷速度以及数据大小确定第二下刷时间包括:根据第二预设下刷速度以及数据大小确定第一系统盘预期下刷时间;根据第二平均下刷速度以及数据大小确定第二系统盘预期下刷时间;若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内,则确定第一系统盘预期下刷时间为第二下刷时间;若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值不在系统盘比值范围内,则排除系统盘作为数据下刷路径选择。
在一个较佳的实施方式中,根据第一下刷时间和第二下刷时间确定整机系统中待下刷数据的下刷路径包括:若第二下刷时间与第一下刷时间之间比值不大于预设总比值,则确定系统盘作为待下刷数据的下刷路径。
在一个较佳的实施方式中,根据第一下刷时间和第二下刷时间确定整机系统中待下刷数据的下刷路径还包括:若第二下刷时间与第一下刷时间之间比值大于预设总比值,则确定数据盘作为待下刷数据的下刷路径。
第二方面,提供一种数据路径下刷的管理装置,应用于快盘管理模块中,所述装置包括:获取模块,用于当出现双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统模块中待下刷数据的数据类型和数据大小;确定模块,用于根据数据类型和数据大小确定待下刷数据下刷至数据盘所需的第一下刷时间和待下刷数据下刷至系统盘所需的第二下刷时间;管理模块,用于根据第一下刷时间和第二下刷时间,确定整机系统中待下刷数据的下刷路径。
第三方面,提供一种电子设备,包括:一个或多个处理器;以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如前所述的方法。
第四方面,提供一种计算机存储介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如前所述的方法。
本发明中快盘管理装置用于当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,根据获取的整机系统模块待下刷数据的数据类型和数据大小确定待下刷数据下刷至数据盘所需的第一下刷时间和待下刷数据下刷至系统盘所需的第二下刷时间,再根据第一下刷时间和第二下刷时间确定整机系统模块中待下刷数据的下刷路径。这一过程中,是由快盘管理模块确定数据下刷时间最短的路径,避免了单控制器下下刷时间过长,由此,通过快盘管理模块确定最短时间下刷路径避免了主机竞争过于激烈,也降低了单控情况下缓存数据的丢失风险,从而解决了仅有单控缓存数据下刷时间过长的问题。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中数据下刷路径的管理装置的工作背景图;
图2为本发明实施例中数据下刷路径的管理方法的流程图;
图3为本发明实施例中数据下刷路径的管理装置的结构示意图;
图4为本发明实施例中电子设备的架构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处描述的具体实施例仅用以解释本发明,并不用于限定本发明。
如背景技术中所介绍的,常用的存储系统都是双控系统,四控存储系统一般也是两个控制器为一组,也就是两个控制器之间可以相互备份,一个控制器失效之后,另一个的控制器仍可提供存储服务,并保证数据不丢失,但是当一个控制器故障,仅有单控缓存数据下刷的情况下,后端数据盘阵IO性能太差或者主机IO竞争过于激烈导致整机下刷时间过长,此时如果再发生掉电或者电池失效等故障将导致缓存数据丢失,将影响整机系统的可用性和可靠性,因此,本发明提供了一种数据下刷路径的管理方法、装置、电子设备及存储介质,应用于快盘管理装置中,通过分析待下刷数据下刷至数据盘所需的第一下刷时间和待下刷数据下刷至系统盘所需的第二下刷时间,确定待下刷路径的下刷数据路径,避免了仅单个控制器下刷缓存数据时间过长的情况,从而提高了整机系统的可用性和可靠性。
下面将结合附图对本发明中一种数据下刷路径的管理方法、装置、电子设备及存储介质具体阐述。
如图1所示的数据下刷路径的管理装置工作环境示意图中,数据盘:承载集群正常运行过程中的业务数据,同时承载异常情况下缓存数据下刷,受快盘管理装置的路径管理,集群下一般为RAID(Redundant Arrays of Independent Disks,RAID)盘阵;系统盘:承载整机系统的物理实体,同时承载异常情况下缓存数据下刷,受快盘管理装置的路径管理。在掉电时候通过电池接受缓存脏数据下刷,一般情况下性能优于单块数据盘;整机系统:在异常情况下接收快盘管理装置的路径管理;串口模块:通过串口模块可以进行外界与快盘管理装置的信息交互、参数预设和相关功能的开启,其中预设的参数包括:数据盘大小数据块下刷速度,系统盘大小数据块下刷速度,数据盘已下刷数据次数,系统盘已下刷数据次数,数据盘预设比值范围,系统盘预设比值范围和总预设比值。
如图2所示,本发明提供了一种数据下刷路径的管理方法,应用于快盘管理装置中,该方法包括:
S201、当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统中待下刷数据的数据类型和数据大小。
在本步骤中,快盘管理模块可以位于板卡上,主要应用例如ARM等可编程逻辑器件,当控制器写缓存被禁用时(例如当对控不在位情况下),快盘管理模块访问整机系统模块、系统盘模块和数据盘模块,获取整机系统模块待下刷数据类型和数据大小以及系统盘模块和数据盘模块在IO模型下已下刷数据的实时下刷速度。
S202、根据数据类型和数据大小确定将待下刷数据下刷至数据盘所需的第一下刷时间,以及,将待下刷数据下刷至系统盘所需的第二下刷时间。
在本步骤中,根据整机系统模块待下刷数据的数据大小快盘管理模块确定用户通过串口模块设置的系统盘和数据盘分别在随机和顺序场景下的预设下刷速度,其中可以将数据下刷速度分为大数据块预设下刷速度和小数据块预设下刷速度,而待下刷数据是由多个大数据块和小数据块组成的,根据待下刷数据的数据大小和预设下刷速度计算出第一数据盘预期下刷时间和第一系统盘预期下刷时间,在根据获取的待下刷数据的数据大小以及系统盘模块和数据盘模块中在IO模型下已下刷数据的下刷速度计算出第二数据盘预期下刷时间和第二系统盘预期下刷时间。
S203、根据第一下刷时间和第二下刷时间确定整机系统模块中待下刷数据的下刷路径。
在本步骤中,快盘管理模块根据计算出的第一预期时间和第二预期时间,确定整机系统模块中待下刷数据的下刷路径。其中可以通过用户设置的总预设比值对第一预期时间和第二预期时间比较,总预设值可以是第二预期时间与第一预期时间之间比值,也可以是第二预设时间与第一预设时间之间差值等。
在本发明中,当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,快盘管理模块根据获取的整机系统模块待下刷数据的数据类型和数据大小确定待下刷数据下刷至数据盘所需的第一下刷时间和待下刷数据下刷至系统盘所需的第二下刷时间,再根据第一下刷时间和第二下刷时间确定整机系统模块中待下刷数据的下刷路径。这一过程中,是由快盘管理模块确定数据下刷时间最短的路径,避免了仅有单控制器向数据盘输入输出数据时由于数据盘IO性能差或者主机IO竞争激烈导致的下刷时间过长,由此,通过快盘管理模块确定最短时间下刷路径避免了主机竞争过于激烈,也降低了单控情况下缓存数据的丢失风险,从而解决了仅有单控缓存数据下刷时间过长的问题。
在一个较佳的实施方式中,确定第一下刷时间包括:根据获取的整机系统中待下刷数据的数据类型和数据大小确定数据盘的第一预设下刷速度,根据数据盘已下刷数据的实时下刷速度确定数据盘最近M次下刷的第一平均下刷速度;根据第一预设下刷速度和第一平均下刷速度以及待下刷数据大小,确定第一下刷时间。
在本实施例中,在获取待下刷数据的数据类型和数据大小时,快盘管理模块根据待下刷数据的数据大小按照用户提前设置好的下刷速度选择对应的数据盘第一预设下刷速度,例如用户可以对数据盘中以Kb为单位的小数据块统一设置下刷速度为200Kb/s,可以对以Mb为单位甚至以Gb为单位的大数据块设置下刷速度为5Mb/s,当待下刷数据中有几Kb、几十Kb或者几百Kb大小的数据块时就确定该下刷速度为预设的200Kb/s,当有几十Mb,几百Mb甚至几个G的大数据块时确定该下刷速度为预设的5Mb/s。再根据待下刷数据大小和已确定的数据盘第一预设下刷速度计算出数据盘第一预期时间,例如待下刷数据的数据大小为10G,就计算10个G数据中每个大数据块按照预设的5Mb/s下刷所需的时间与每个小数据块按照预设的200Kb/s下刷所需的时间之和,每个数据块预期下刷时间之和就是数据盘第一预期时间,在获取数据盘已下刷数据的实时下刷速度时,快盘管理装置根据用户提前设置好的已下刷数据次数M按照次数记录对应M次数据下刷时每一时刻的瞬时速度,求出数据盘最近M次下刷的第一平均下刷速度,例如用户设置的次数为3次,则快盘管理装置就会记录数据盘3次下刷的数据里每一秒钟的下刷速度,并对所有的瞬时下刷速度求平均值,计算出数据盘的第一平均下刷速度。
在一个较佳的实施方式中,根据第一预设下刷速度和第一平均下刷速度以及数据大小确定第一下刷时间包括:
根据第一预设下刷速度以及数据大小确定第一数据盘预期下刷时间;
根据第一平均下刷速度以及数据大小确定第二数据盘预期下刷时间;
若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值在数据盘预设比值范围内,则确定第一数据盘预期下刷时间为第一下刷时间;
若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值不在数据盘预设比值范围内,则确定第二数据盘预期下刷时间为第一下刷时间。
在本实施例中,根据数据盘的第一预设下刷速度以及待下刷数据的数据大小确定第一数据盘预期下刷时间,根据数据盘第一平均下刷速度以及待下刷数据的数据大小确定第二数据盘预期下刷时间,通过用户设置的数据盘预设比值范围对第一数据盘预期下刷时间与第二数据盘预期下刷时间比较,若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间实际比值在数据盘预设比值范围内,则确定第一数据盘预期时间为第一下刷时间,若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间实际比值不在数据盘预设比值范围内,则确定第二数据盘预期时间为第一下刷时间,例如计算出的数据盘第一预期下刷时间为50s,计算出的数据盘第二预期下刷时间为53s,而用户设置的数据盘预设比值范围(第一预期下刷时间与第二预期下刷时间的比值)为90%-108%,此时数据盘第一预期下刷时间与第二预期下刷时间的比值在数据盘预设比值范围内,则选择数据盘的第一预期下刷时间(50s)作为第一下刷时间,反之亦然。
在本发明中,当第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值在数据盘预设比值范围内比如上文的90%-108%,说明第一数据盘预期下刷时间与第二数据盘预期下刷时间之间相差不大,此时说明用户通过串口模块设置的数据盘的第一预设下刷速度比较准确,确定相应的第一数据盘预期下刷时间作为第一下刷时间,当第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值不在数据盘预设比值范围内,说明用户通过串口模块设置的数据盘的第一预设下刷速度不准确,确定相应的第二数据盘预期下刷时间作为第一下刷时间,通过可设置的数据盘预设比值范围,更精确和合理地比较数据盘第一预期下刷时间和数据盘第二预期下刷时间,可以比较准确测量出数据盘下刷数据所需时间。
在一个较佳的实施方式中,确定待下刷数据下刷至系统盘所需的第二下刷时间包括:根据获取的整机系统中待下刷数据的数据类型和数据大小确定系统盘的第二预设下刷速度,根据系统盘已下刷数据的实时下刷速度确定系统盘最近N次下刷的第二平均下刷速度;根据第二预设下刷速度和第二平均下刷速度以及待下刷数据的数据大小,确定第二下刷时间。
在本实施例中,在获取待下刷数据的数据类型和数据大小时,快盘管理模块根据待下刷数据的数据大小按照用户提前设置好的下刷速度选择对应的系统盘第二预设下刷速度,例如用户可以对系统盘中以Kb为单位的小数据块统一设置下刷速度为300Kb/s,可以对以Mb为单位甚至以Gb为单位的大数据块设置下刷速度为4Mb/s,当待下刷数据中有几Kb、几十Kb或者几百Kb大小的数据块时就确定该下刷速度为预设的300Kb/s,当有几十Mb,几百Mb甚至几个G的大数据块时确定该下刷速度为预设的4Mb/s,再根据待下刷数据的数据大小和已确定的系统盘第二预设下刷速度计算出系统盘第二预期时间,在获取系统盘已下刷数据的实时下刷速度时,快盘管理模块根据用户提前设置好的已下刷数据次数N按照次数记录对应N次数据下刷时每一秒的速度,求出系统盘最近N次下刷的第二平均下刷速度,例如用户设置的次数为5次,则快盘管理装置就会记录系统盘5次已下刷的数据里每一秒钟的下刷速度,并对所有的瞬时下刷速度求平均值,计算出系统盘的第二平均下刷速度。
在一个较佳的实施方式中,根据第二预设下刷速度和第二平均下刷速度以及数据大小确定第二下刷时间包括:
根据第二预设下刷速度以及数据大小确定第一系统盘预期下刷时间;
根据第二平均下刷速度以及数据大小确定第二系统盘预期下刷时间;
若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内,则确定第一系统盘预期下刷时间为第二下刷时间;
若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值不在系统盘比值范围内,则排除系统盘作为数据下刷路径选择。
在本实施例中,根据系统盘的第二预设下刷速度以及待下刷数据的数据大小确定第一系统盘预期下刷时间,根据系统盘第二一平均下刷速度以及待下刷数据的数据大小确定第二系统盘预期下刷时间,通过用户设置的系统盘预设比值范围对第一系统盘预期下刷时间与第二系统盘预期下刷时间比较,若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内,则确定第一系统盘预期时间为第二下刷时间,若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值不在系统盘预设比值范围内,则快盘管理模块排除系统盘作为数据下刷路径选择,并向串口模块和整机系统模块告警,例如计算出的系统盘第一预期下刷时间为56s,计算出的数据盘第二预期下刷时间为53s,而用户设置的系统盘预设比值范围(第一预期下刷时间与第二预期下刷时间的比值)为95%-110%,此时系统盘第一预期下刷时间与第二预期下刷时间的比值在系统盘预设比值范围内,则选择系统盘的第一预期下刷时间(56s)作为第一下刷时间,如果系统盘第一预期下刷时间与第二预期下刷时间的比值不在系统盘预设比值范围内,则排除系统盘作为数据下刷路径选择,并对串口模块和整机系统进行告警。
在本发明中,当第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内比如95%-110%等,此时说明用户通过串口模块设置的系统盘的第一预设下刷速度比较准确,确定相应的第一数据盘预期下刷时间作为第一下刷时间,当第一系统盘预期下刷时间与第二系统盘预期下刷时间之间相差较大时,即不在系统盘预设比值范围内说明系统盘的已下刷数据的平均下刷速度异常,此时快盘管理模块会向串口模块和整机系统模块告警,并排除系统盘作为数据下刷路径,通过可设置的系统盘预设比值范围,可以更精确和合理地地比较系统盘第一预期下刷时间和系统盘第二预期下刷时间。
在一个较佳的实施方式中,根据第一下刷时间和第二下刷时间确定整机系统模块中待下刷数据的下刷路径包括:
若第二下刷时间与第一下刷时间之间比值不大于总预设比值,则确定系统盘作为待下刷数据的下刷路径;
若第二下刷时间与第一下刷时间之间比值大于总预设比值,则确定数据盘作为待下刷数据的下刷路径。
在本实施例中,在系统盘的第二下刷时间与数据盘的第一下刷时间之间比值不大于用户设置的总预设比值例如总预设比值为120%,第一下刷时间为上文的50s,第二下刷时间为上文的56s,第二下刷时间与第一下刷时间之间比值小于120%,则选择系统盘作为数据下刷路径,反之亦然。
如图3所示,本发明还提供了一种数据下刷路径的管理方法,应用于快盘管理装置中,该装置包括:
获取模块301,用于当出现双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统中待下刷数据的数据类型和数据大小;
确定模块302,用于根据数据类型和数据大小确定将待下刷数据下刷至数据盘所需的第一下刷时间,以及,将待下刷数据下刷至系统盘所需的第二下刷时间;
管理模块303,用于根据第一下刷时间和第二下刷时间,确定待下刷数据的下刷路径。
在一个较佳的实施方式中,确定模块还包括第一确定单元,用于根据数据类型和数据大小确定将待下刷数据下刷至数据盘的第一预设下刷速度,根据数据盘已下刷数据的实时下刷速度确定数据盘最近M次下刷的第一平均下刷速度;
第二确定单元,用于根据第一预设下刷速度和第一平均下刷速度以及数据大小确定第一下刷时间。
在一个较佳的实施方式中,第二确定单元还用于根据第一预设下刷速度以及数据大小确定待下刷数据下刷至数据盘的第一数据盘预期下刷时间;根据第一平均下刷速度以及数据大小确定待下刷数据下刷至数据盘的第二数据盘预期下刷时间;若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值在数据盘预设比值范围内,则确定第一数据盘预期下刷时间为第一下刷时间;若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值不在数据盘预设比值范围内,则确定第二数据盘预期下刷时间为第一下刷时间。
在一个较佳的实施方式中,该装置还包括第三确定单元,用于根据数据类型和数据大小确定将待下刷数据下刷至系统盘的第二预设下刷速度,根据系统盘已下刷数据的实时下刷速度确定系统盘最近N次下刷的第二平均下刷速度;第四确定单元,用于根据第二预设下刷速度和第二平均下刷速度以及数据大小确定第二下刷时间。
在一个较佳的实施方式中,第四确定单元还用于根据第二预设下刷速度以及数据大小确定第一系统盘预期下刷时间;根据第二平均下刷速度以及数据大小确定第二系统盘预期下刷时间;若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内,则确定第一系统盘预期下刷时间为第二下刷时间;
若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值不在系统盘比值范围内,则排除系统盘作为数据下刷路径。
在一个较佳的实施方式中,管理模块还用于若第二下刷时间与第一下刷时间之间比值不大于总预设比值,则确定系统盘作为待下刷数据的下刷路径。
在一个较佳的实施方式中,管理模块还用于若第二下刷时间与第一下刷时间之间比值大于总预设比值,则确定数据盘作为待下刷数据的下刷路径。
本发明还提供了一种电子设备,包括:
一个或多个处理器;以及
与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行数据下刷路径的管理方法。
本实施例执行过程及所能实现的技术效果请参照应用于数据下刷路径的管理方法的描述,此处不再赘述。
其中,图4示例性的展示出了电子设备的系架构,具体可以包括处理器410,视频显示适配器411,磁盘驱动器412,输入/输出接口413,网络接口414,以及存储器420。上述处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414,与存储器420之间可以通过通信总线430进行通信连接。
其中,处理器410可以采用通用的CPU(Central Processing Unit,中央处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit,ASIC)、或者一个或多个集成电路等方式实现,用于执行相关程序,以实现本发明所提供的技术方案。
存储器420可以采用ROM(Read Only Memory,只读存储器)、RAM(Random AccessMemory,随机存取存储器)、静态存储设备,动态存储设备等形式实现。存储器420可以存储用于控制计算机系统运行的操作系统421,用于控制计算机系统的低级别操作的基本输入输出系统(BIOS)。另外,还可以存储网页浏览器423,数据存储管理系统424,以及设备标识信息处理系统625等等。上述设备标识信息处理系统525就可以是本发明实施例中具体实现前述各步骤操作的应用程序。总之,在通过软件或者固件来实现本发明所提供的技术方案时,相关的程序代码保存在存储器420中,并由处理器410来调用执行。
输入/输出接口413用于连接输入/输出模块,以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出),也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等,输出设备可以包括显示器、扬声器、振动器、指示灯等。
网络接口414用于连接通信模块(图中未示出),以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信,也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。
总线430包括一通路,在设备的各个组件(例如处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414,与存储器420)之间传输信息。
需要说明的是,尽管上述设备仅示出了处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414,存储器420,总线430等,但是在具体实施过程中,该设备还可以包括实现正常运行所必需的其他组件。此外,本领域的技术人员可以理解的是,上述设备中也可以仅包含实现本发明方案所必需的组件,而不必包含图中所示的全部组件。
本发明的计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从存储器被安装,或者从ROM被安装。在该计算机程序被处理器执行时,执行本发明的实施例的方法中限定的上述功能。
需要说明的是,本发明的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(Radio Frequency,射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述服务器中所包含的;也可以是单独存在,而未装配入该服务器中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该服务器执行时,使得该服务器:响应于检测到终端的外设模式未激活时,获取终端上应用的帧率;在帧率满足息屏条件时,判断客户是否正在获取终端的屏幕信息;响应于判断结果为客户未获取终端的屏幕信息,控制屏幕进入立即暗淡模式。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明的实施例的操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在客户计算机上执行、部分地在客户计算机上执行、作为一个独立的软件包执行、部分在客户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到客户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上对本发明所提供的数据下刷路径的管理方法、装置、电子设备及存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。
Claims (8)
1.一种数据下刷路径的管理方法,其特征在于,应用于快盘管理装置中,所述方法包括:
当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统中待下刷数据的数据类型以及数据大小;
根据所述数据类型以及所述数据大小确定将所述待下刷数据下刷至数据盘所需的第一下刷时间,以及,将所述待下刷数据下刷至系统盘所需的第二下刷时间;
根据所述第一下刷时间和所述第二下刷时间确定所述待下刷数据的下刷路径;其中,若所述第二下刷时间与所述第一下刷时间之间比值不大于总预设比值,则确定所述系统盘作为所述待下刷数据的下刷路径;若所述第二下刷时间与所述第一下刷时间之间比值大于总预设比值,则确定所述数据盘作为所述待下刷数据的下刷路径。
2.根据权利要求1所述的方法,其特征在于,所述根据所述数据类型以及所述数据大小确定所述第一下刷时间包括:
根据所述数据类型和所述数据大小确定将待下刷数据下刷至所述数据盘的第一预设下刷速度,根据数据盘已下刷数据的实时下刷速度确定数据盘最近M次下刷的第一平均下刷速度;
根据第一预设下刷速度和第一平均下刷速度以及所述数据大小确定所述第一下刷时间。
3.根据权利要求2所述的方法,其特征在于,根据第一预设下刷速度和第一平均下刷速度以及所述数据大小确定所述第一下刷时间包括:
根据所述第一预设下刷速度以及所述数据大小确定所述待下刷数据下刷至所述数据盘的第一数据盘预期下刷时间;
根据所述第一平均下刷速度以及所述数据大小确定所述待下刷数据下刷至所述数据盘的第二数据盘预期下刷时间;
若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值在数据盘预设比值范围内,则确定第一数据盘预期下刷时间为所述第一下刷时间;
若第一数据盘预期下刷时间与第二数据盘预期下刷时间之间比值不在数据盘预设比值范围内,则确定第二数据盘预期下刷时间为所述第一下刷时间。
4.根据权利要求1所述的方法,其特征在于,根据所述数据类型以及所述数据大小确定所述第二下刷时间包括:
根据所述数据类型和所述数据大小确定将所述待下刷数据下刷至所述系统盘的第二预设下刷速度,根据所述系统盘已下刷数据的实时下刷速度确定所述系统盘最近N次下刷的第二平均下刷速度;
根据第二预设下刷速度和第二平均下刷速度以及所述数据大小确定所述第二下刷时间。
5.根据权利要求4所述的方法,其特征在于,所述根据第二预设下刷速度和第二平均下刷速度以及所述数据大小确定所述第二下刷时间包括:
根据所述第二预设下刷速度以及所述数据大小确定第一系统盘预期下刷时间;
根据所述第二平均下刷速度以及所述数据大小确定第二系统盘预期下刷时间;
若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值在系统盘预设比值范围内,则确定第一系统盘预期下刷时间为所述第二下刷时间;
若第一系统盘预期下刷时间与第二系统盘预期下刷时间之间比值不在系统盘比值范围内,则排除系统盘作为数据下刷路径。
6.一种数据下刷路径的管理装置,其特征在于,应用于快盘管理模块中,所述装置包括:
获取模块,用于当双控存储中的一个控制器故障,另一个控制器写缓存被禁用时,获取整机系统中待下刷数据的数据类型以及数据大小;
确定模块,用于根据所述数据类型以及所述数据大小确定将所述待下刷数据下刷至数据盘所需的第一下刷时间,以及,将所述待下刷数据下刷至系统盘所需的第二下刷时间;
管理模块,用于根据所述第一下刷时间和所述第二下刷时间确定所述待下刷数据的下刷路径;其中,若所述第二下刷时间与所述第一下刷时间之间比值不大于总预设比值,则确定所述系统盘作为所述待下刷数据的下刷路径;若所述第二下刷时间与所述第一下刷时间之间比值大于总预设比值,则确定所述数据盘作为所述待下刷数据的下刷路径。
7.一种电子设备,其特征在于,包括:
一个或多个处理器;以及
与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如权利要求1-5中任一项所述的方法。
8.一种计算机存储介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1-5中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111441175.2A CN114138199B (zh) | 2021-11-30 | 2021-11-30 | 数据下刷路径的管理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111441175.2A CN114138199B (zh) | 2021-11-30 | 2021-11-30 | 数据下刷路径的管理方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114138199A CN114138199A (zh) | 2022-03-04 |
CN114138199B true CN114138199B (zh) | 2023-08-18 |
Family
ID=80390157
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111441175.2A Active CN114138199B (zh) | 2021-11-30 | 2021-11-30 | 数据下刷路径的管理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114138199B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109739441A (zh) * | 2019-01-02 | 2019-05-10 | 郑州云海信息技术有限公司 | 一种存储系统下刷缓存数据的方法 |
CN112114751A (zh) * | 2020-09-11 | 2020-12-22 | 苏州浪潮智能科技有限公司 | 一种io数据下刷方法、装置、设备及可读存储介质 |
WO2021068515A1 (zh) * | 2019-10-12 | 2021-04-15 | 苏州浪潮智能科技有限公司 | 存储系统中数据管理方法和装置 |
-
2021
- 2021-11-30 CN CN202111441175.2A patent/CN114138199B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109739441A (zh) * | 2019-01-02 | 2019-05-10 | 郑州云海信息技术有限公司 | 一种存储系统下刷缓存数据的方法 |
WO2021068515A1 (zh) * | 2019-10-12 | 2021-04-15 | 苏州浪潮智能科技有限公司 | 存储系统中数据管理方法和装置 |
CN112114751A (zh) * | 2020-09-11 | 2020-12-22 | 苏州浪潮智能科技有限公司 | 一种io数据下刷方法、装置、设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114138199A (zh) | 2022-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9811442B2 (en) | Dynamic trace level control | |
CN111767184A (zh) | 一种故障诊断方法、装置及电子设备和存储介质 | |
US10209898B2 (en) | Estimation of performance utilization of a storage device | |
TWI512490B (zh) | 擷取控制台訊息的系統及其方法及非暫態電腦可讀媒體 | |
US20100083043A1 (en) | Information processing device, recording medium that records an operation state monitoring program, and operation state monitoring method | |
WO2023185767A1 (zh) | 慢盘检测方法、装置、电子设备及存储介质 | |
CN111221800A (zh) | 数据库迁移方法、装置、电子设备及存储介质 | |
CN108874441B (zh) | 一种板卡配置方法、装置、服务器和存储介质 | |
CN108667740B (zh) | 流量控制的方法、装置及系统 | |
CN110888731B (zh) | 路由数据采集方法、装置、设备及存储介质 | |
US9916220B2 (en) | Smart logging of trace data for storage systems | |
US9411695B2 (en) | Provisioning memory in a memory system for mirroring | |
CN114138199B (zh) | 数据下刷路径的管理方法、装置、电子设备及存储介质 | |
US9454306B2 (en) | Capturing demand on storage capacity and performance capability | |
CN117149550A (zh) | 一种固态硬盘性能检测方法、装置以及电子设备 | |
US9298468B2 (en) | Monitoring processing time in a shared pipeline | |
CN114116034B (zh) | 分布式刷机方法和装置 | |
US8924644B2 (en) | Extending cache in a multi-processor computer | |
US9696986B2 (en) | Managing a code load | |
CN114189429A (zh) | 一种服务器集群故障的监测系统、方法、装置及介质 | |
CN114116128A (zh) | 容器实例的故障诊断方法、装置、设备和存储介质 | |
US8332562B2 (en) | System to reduce the time and complexity of self configuring systems | |
CN111475107A (zh) | 一种硬盘格式化的方法、装置及存储介质 | |
US10452273B2 (en) | Preemptive event-based data migration | |
CN113986410A (zh) | 带外管理智能设备的方法、装置、电子设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |