CN113687788A - 国产平台的数据读写优化方法、装置、计算机及存储介质 - Google Patents
国产平台的数据读写优化方法、装置、计算机及存储介质 Download PDFInfo
- Publication number
- CN113687788A CN113687788A CN202111005445.5A CN202111005445A CN113687788A CN 113687788 A CN113687788 A CN 113687788A CN 202111005445 A CN202111005445 A CN 202111005445A CN 113687788 A CN113687788 A CN 113687788A
- Authority
- CN
- China
- Prior art keywords
- data
- read
- write
- request
- storage pool
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 75
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000005457 optimization Methods 0.000 title claims abstract description 32
- 238000009826 distribution Methods 0.000 claims abstract description 39
- 230000004044 response Effects 0.000 claims abstract description 12
- 238000012545 processing Methods 0.000 claims description 15
- 230000001360 synchronised effect Effects 0.000 claims description 10
- 238000004422 calculation algorithm Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 6
- 230000004931 aggregating effect Effects 0.000 claims description 4
- 230000002776 aggregation Effects 0.000 claims description 3
- 238000004220 aggregation Methods 0.000 claims description 3
- 230000008521 reorganization Effects 0.000 claims description 2
- 230000004048 modification Effects 0.000 abstract description 6
- 238000012986 modification Methods 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000009977 dual effect Effects 0.000 description 3
- 230000003014 reinforcing effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 206010037660 Pyrexia Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000008358 core component Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000017525 heat dissipation Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000005215 recombination Methods 0.000 description 1
- 230000006798 recombination Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/5055—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering software capabilities, i.e. software resources associated or available to the machine
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提出了一种适用于国产平台的数据读写优化方法、装置、计算机及存储介质；其中，方法包括：获取RAID共享存储池的相关信息，所述相关信息包括数据盘的数量、素数、及校验码；响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；根据所述数据盘的数量、素数、及校验码，计算数据块在所述RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，所述分布规则包括将数据块在相邻的存储池条带中交错排列。本发明通过重新排布数据块在存储池条带中的分布，让数据块之间共享部分校验块，从而减少校验块的修改，削减操作数目，提升整体的读写性能。
Description
技术领域
本发明涉及计算机技术领域，尤其涉及一种适用于国产平台的数据读写优化方法、装置、计算机及存储介质。
背景技术
在当前的国际形势下，自主可控已上升为国家战略，不论是党政军还是民用关键应用场景，推进信息系统的国产自主可控替代已成为共识。自主可控技术的发展对国家信息安全建设起到了核心支撑作用。数据安全是信息安全的核心组成部分，是信息产业体系安全可控的保障。存储作为数据的最终载体，对于信息安全来说是一道必须守住的“底线”。一方面，由于存储系统有层层技术壁垒，核心软硬件具有较高的技术门槛；另外一方面，由于历史原因，存储系统的核心软硬件技术被少数几家国际存储巨头掌控，且存储相关的标准制定也受制于国外。
FT2000+处理器集成64个飞腾自主研发的高效能处理器内核FTC662，采用乱序四发射超标量流水线，芯片采用偏上并行系统(PSoCb)体系结构，集成高效处理器核心、基于数据亲和的大规模一致性存储结构、层次二维Mesh互联网络，优化存储访问延时，提供业界领先的计算性能、访问带宽和IO扩展能力。该芯片兼容64位ARMv8指令集，适用于高性能、高吞吐率的服务器、存储等领域。
因此，为适应上述FT2000+处理器集成64个飞腾自主研发的高效能处理器内核FTC662，采用乱序四发射超标量流水线，亟需一种与之能够匹配的数据读写方法。
发明内容
本发明旨在提出一种适合国产服务器多核心处理方式的数据读写方法。并将由每个核心串行的处理读写请求的方式改为由多个核心并行处理读写请求的方式，以弥补国产核心算力不足的问题。为了实现多核心的并行数据读写，需要建立共享存储池RAID，并且重新规划数据块在共享存储池中新的分布以保证多核心并行读写的处理速度。在本发明的一个方面，提出了一种适用于国产平台的数据读写优化方法，所述方法包括：获取RAID共享存储池的相关信息，所述相关信息包括数据盘的数量、素数、及校验码；响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；根据所述数据盘的数量、素数、及校验码，计算数据块在所述RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，所述分布规则包括将数据块在相邻的存储池条带中交错排列。
在一个或多个实施例中，所述方法还包括：响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。
在一个或多个实施例中，所述读或者写请求由多个CPU核同步执行，相应的，所述方法还包括：修改读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
在一个或多个实施例中，所述方法还包括：将不同的数据I/O分散到不通的CPU核心和对应的内存。
在本发明的另一个方面，提出了一种适用于国产平台的数据读写优化装置，包括：初始化模块，配置用于获取RAID共享存储池的相关信息，所述相关信息包括数据盘的数量、素数、及校验码；选择模块：配置用于响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；数据块重组及读写模块：配置用于根据所述数据盘的数量、素数、及校验码，计算数据块在所述RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，所述分布规则包括将数据块在相邻的存储池条带中交错排列。
在一个或多个实施例中，所述数据读写优化装置还包括：聚合模块，响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。
在一个或多个实施例中，所述数据块重组及读写模块还配置用于：在进行多个CPU核的同步读或者写请求时，修改存储数据读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
在一个或多个实施例中，所述数据读写优化装置还包括：数据I/O分配模块，配置用于将不同的数据I/O分散到不通的CPU核心和对应的内存。
在本发明的另一个方面，提出了一种计算机，所述计算机包括如上述任意一项实施例所提出的一种数据读写优化装置。
在本发明的另一个方面，提出了一种存储介质，所述存储介质中存储有可运行的计算机程序，所述计算机程序被执行时用于实现如上述任意一项实施例所提出的一种数据读写优化方法的步骤。
本发明的有益效果包括：本发明提出的一种数据读写优化方法、装置、计算机及存储介质，通过重组读写双控存储共享存储池时数据块的分布，在各个数据块之间共享数据校验块，从而提高存储池整体的读写性能，该方法可有效的减少所需修改的数据校验块的数量，从而从整体上提高多核系统的并行数据读写性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
图1为本发明的一种适用于国产平台的数据读写优化方法的工作流程图；
图2为一般数据块在存储池条带中的分布示意图；
图3为本发明的数据块在存储池条带中的分布示意图；
图4为本发明的第一实施例的一种适用于国产平台的数据读写优化装置的结构示意图；
图5为本发明的第二实施例的一种适用于国产平台的数据读写优化装置的结构示意图；
图6为本发明实施例的基于国产平台的双控存储硬件架构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明实施例进一步详细说明。
需要说明的是，本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量，可见“第一”“第二”仅为了表述的方便，不应理解为对本发明实施例的限定，后续实施例对此不再一一说明。
本发明旨在提出一种适合国产服务器多核心处理方式的数据读写方法。并将由每个核心串行的处理读写请求的方式改为由多个核心并行处理读写请求的方式，以弥补国产核心算力不足的问题。为了实现多核心的并行数据读写，需要建立共享存储池RAID，并且重新规划数据块在共享存储池中新的分布以保证多核心并行读写的处理速度。本发明的方案包括：
图1为本发明的一种适用于国产平台的数据读写优化方法的工作流程图。如图1所示，本发明的数据读写优化方法的工作流程包括：步骤S1、获取RAID共享存储池的相关信息，相关信息包括数据盘的数量、素数、及校验码；步骤S2、响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；步骤S3、根据数据盘的数量、素数、及校验码，计算数据块在RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，分布规则包括将数据块在相邻的存储池条带中交错排列。
在现有技术中，数据块在存储池条带中的分布如图2所示，图2为一般数据块在存储池条带中的分布示意图。如图2所示，按照传统的EVENODD数据编码方式向存储池条带中写入连续5个数据块A、B、C、D、E，行校验码为a0,7，列校验码为a0,8、a1,8、a2,8、a3,8、a4,8，斜校验码为a0,9、a6,9、a5,9、a4,9、a3,9，因为Adjuster位a6,9被修改，所以a1,9和a2,9也需要修改，总共需要更新1个行校验码、5个列校验码和7个斜校验码，共计13个校验码。
而按照本发明上述实施例中提出的分布规则，数据块在存储池条带中的分布如图3所示，图3为本发明的数据块在存储池条带中的分布示意图。为了减少数据写入时所修改的校验码，本发明将连续写入的数据块以在相邻两条存储池条带中交错排列成连续的“W”形，从而使数据块与数据块之间可以共享部分斜向校验码，减少校验码的修改量。按照本发明的分布规则写入连续5个数据块A、B、C、D、E，行校验码为a0,7、a1,7，列校验码为a0,8、a1,8、a2,8、a3,8、a4,8，斜校验码为a0,9、a2,9、a5,9，需更新2个行校验码、5个列校验码和3个斜向校验码，共计10个校验码，相比于传统EVENODD方法的13个校验码，可以少更新3个校验码，从而提高存储池的读写性能。
因此，本实施例通过重新排布数据块在存储池条带中的分布，让数据块之间共享部分校验块，从而减少校验块的修改，削减操作数目，提升整体的读写性能。
在进一步的实施中，本发明的方法还包括：响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。
本实施例能够进一步使得保证数据读写的效率，进而实现对读写过程的进一步优化；并且，本实施例方法对于多核系统，如FT2000+多核心，能够充分发挥出其并发能力(并发的进行读请求或写请求)。
在进一步的实施例中，读请求或者写请求由多个CPU核(双控)同步执行，相应的，本发明的方法还包括：修改存储数据读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
本实施例通过修改存储数据读写处理协议、RAID算法和电子盘读写调度的接口部分异步调用转换为同步调用，减少读写时因异步调用导致的读写线程切换延时，有助于提升多核并行读写速度。
在进一步的实施例中，本发明的方法还包括：将不同的数据I/O分散到不通的CPU核心和对应的内存。
本实施例的目的是充分利用FT2000+多核心的优势，让不同的数据IO分散到不通的CPU核心和对应的内存，减少CPU核心之间的耦合，提高CPU多核心的使用效率。
在进一步的实施例中，本发明的方法还包括：使得所述新的分布中的多个数据块共享数据校验块。
本实施例通过结合重组读写双控存储共享存储池时数据块的分布的实施例，能够进一步的优化RAID算法，使得各个数据块之间共享数据校验块，以进一步的发挥FT2000+多核心的优势，从而提高双控存储整体的读写性能。
在上述各实施例的基础上，本发明还提出了一种数据读写优化装置，如图4所示，图4为本发明的第一实施例的一种适用于国产平台的数据读写优化装置的结构示意图。本发明的数据读写优化装置包括：初始化模块10，配置用于获取RAID共享存储池的相关信息，其中，相关信息包括数据盘的数量、素数、及校验码；选择模块20，配置用于响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；数据块重组及读写模块30，配置用于根据数据盘的数量、素数、及校验码，计算数据块在RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，分布规则包括将数据块在相邻的存储池条带中交错排列。
在进一步的实施例中，本发明的数据读写优化装置还包括：聚合模块40，配置用于响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并将聚合后的读请求或写请求返回给选择模块20，以通过选择模块20重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。本实施例的数据读写优化装置的结构如图5所示。图5为本发明的第二实施例的一种适用于国产平台的数据读写优化装置的结构示意图。
在进一步的实施例中，数据块重组及读写模块还配置用于：在进行多个CPU核的同步读或者写请求时，修改存储数据读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
在进一步的实施例中，本发明的装置还包括数据I/O分配模块，配置用于将不同的数据I/O分散到不通的CPU核心和对应的内存。
在进一步的实施例中，所述数据块重组及读写模块还配置用于，使得所述新的分布中的多个数据块共享数据校验块。
在上述实施例的基础上，本发明还提出了一种计算机，该计算机包括如上述任意一实施例中所提及的一种数据读写优化装置。
在一个具体实施例中，所述计算机为FT2000+双控平台，其能够应用本发明上述任一实施例中的一种数据读写优化方法或装置实现快速并行的数据读写操作。
图6为本发明实施例的基于国产平台的双控存储硬件架构示意图。如图6所示FT2000+双控存储主要由机械结构层、电路硬件层、支撑软件层和集成应用层组成。
1)机械结构层
机械结构层包括机箱、散热模组和物理加固件等，双控存储机箱采用19英寸标准上架结构，物理加固采用抗振动冲击、热设计、电磁兼容防护、三防等多种加固技术，实现了高环境适应性和高可靠性。
2)电路硬件层
电路硬件层主要包括主板模块、电源模块、阵列模块和硬盘模块组成。主板基于国产FT2000+处理器，提供千兆和万兆网络接口，可提供高性能、高可靠的信息处理服务；电源具有双冗余功能，提升可靠性。对外最多可支持24路可拔插硬盘，满足大容量数据存储需求。
3)支撑软件层
支撑软件层包括底层BIOS、驱动、内核、Linux文件系统和存储管理软件和系统管理软件。支撑层对应用层提供基本服务，包括故障检测、信息同步、故障接管及故障恢复功能。
4)集成应用层
集成应用层主要提供基本存储管理功能，包括SMI-S统一存储管理软件和Web服务软件，主要通过存储系统故障链路分析并制定相关策略实现存储管理。
基于上述实施例，办发明还提出了一种存储介质，该存储介质中存储有可运行的计算机程序，所述计算机程序被执行时用于实现如任一实施例所提及的一种数据读写优化方法的步骤。
以上是本发明公开的示例性实施例，但是应当注意，在不背离权利要求限定的本发明实施例公开的范围的前提下，可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。
应当理解的是，在本文中使用的，除非上下文清楚地支持例外情况，单数形式“一个”旨在也包括复数形式。还应当理解的是，在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子；在本发明实施例的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，并存在如上的本发明实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。因此，凡在本发明实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。
Claims (10)
1.一种适用于国产平台的数据读写优化方法，其特征在于，所述方法包括：
获取RAID共享存储池的相关信息，所述相关信息包括数据盘的数量、素数、及校验码；
响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；
根据所述数据盘的数量、素数、及校验码，计算数据块在所述RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，所述分布规则包括将数据块在相邻的存储池条带中交错排列。
2.如权利要求1所述的适用于国产平台的数据读写优化方法，其特征在于，所述方法还包括：
响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。
3.如权利要求1所述的适用于国产平台的数据读写优化方法，其特征在于，所述读或者写请求由多个CPU核同步执行，相应的，所述方法还包括：
修改读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
4.如权利要求3所述的适用于国产平台的数据读写优化方法，其特征在于，所述方法还包括：
将不同的数据I/O分散到不通的CPU核心和对应的内存。
5.一种适用于国产平台的数据读写优化装置，其特征在于，包括：
初始化模块，配置用于获取RAID共享存储池的相关信息，所述相关信息包括数据盘的数量、素数、及校验码；
选择模块：配置用于响应于接收到读请求或者写请求，确定所要读或写的数据块的数量；
数据块重组及读写模块：配置用于根据所述数据盘的数量、素数、及校验码，计算数据块在所述RAID共享存储池中的分布，并按照预设的分布规则读取数据或写入数据，其中，所述分布规则包括将数据块在相邻的存储池条带中交错排列。
6.如权利要求5所述的一种适用于国产平台的数据读写优化装置，其特征在于，还包括：
聚合模块，配置用于响应于接收的到读请求或者写请求所要读或写的数据量小于一个数据块的数据量，将所要读或写的数据量小于一个数据块的数据量的读请求或者写请求与其它的读请求或写请求相聚合，并重新确定聚合后的读请求或写请求所要读或写的数据块的数量，直至完成对数据的读取或写入操作。
7.如权利要求5所述的一种适用于国产平台的数据读写优化装置，其特征在于，所述数据块重组及读写模块还配置用于：在进行多个CPU核的同步读或者写请求时，修改存储数据读写处理协议、RAID算法和电子盘读写调度的接口部分，将异步调用转换为同步调用。
8.如权利要求7所述的一种适用于国产平台的数据读写优化装置，其特征在于，还包括：
数据I/O分配模块，配置用于将不同的数据I/O分散到不通的CPU核心和对应的内存。
9.一种计算机，其特征在于，所述计算机包括如权利要求5-8任意一项所述的一种适用于国产平台的数据读写优化装置。
10.一种存储介质，其特征在于，所述存储介质中存储有可运行的计算机程序，所述计算机程序被执行时用于实现如权利要求1-4任意一项所述的一种适用于国产平台的数据读写优化方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111005445.5A CN113687788A (zh) | 2021-08-30 | 2021-08-30 | 国产平台的数据读写优化方法、装置、计算机及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111005445.5A CN113687788A (zh) | 2021-08-30 | 2021-08-30 | 国产平台的数据读写优化方法、装置、计算机及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113687788A true CN113687788A (zh) | 2021-11-23 |
Family
ID=78584012
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111005445.5A Pending CN113687788A (zh) | 2021-08-30 | 2021-08-30 | 国产平台的数据读写优化方法、装置、计算机及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113687788A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101566924A (zh) * | 2008-04-23 | 2009-10-28 | 中兴通讯股份有限公司 | 一种磁盘阵列的数据读写方法 |
| CN104866244A (zh) * | 2015-05-31 | 2015-08-26 | 上海交通大学 | 一种平衡条带写的raid-6i/o调度方法 |
| CN107196991A (zh) * | 2017-04-06 | 2017-09-22 | 暨南大学 | 一种面向网络编码集群系统的数据更新方法 |
| CN108780386A (zh) * | 2017-12-20 | 2018-11-09 | 华为技术有限公司 | 一种数据存储的方法、装置和系统 |
| US20190317898A1 (en) * | 2018-04-12 | 2019-10-17 | International Business Machines Corporation | Using track locks and stride group locks to manage cache operations |
-
2021
- 2021-08-30 CN CN202111005445.5A patent/CN113687788A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101566924A (zh) * | 2008-04-23 | 2009-10-28 | 中兴通讯股份有限公司 | 一种磁盘阵列的数据读写方法 |
| CN104866244A (zh) * | 2015-05-31 | 2015-08-26 | 上海交通大学 | 一种平衡条带写的raid-6i/o调度方法 |
| CN107196991A (zh) * | 2017-04-06 | 2017-09-22 | 暨南大学 | 一种面向网络编码集群系统的数据更新方法 |
| CN108780386A (zh) * | 2017-12-20 | 2018-11-09 | 华为技术有限公司 | 一种数据存储的方法、装置和系统 |
| US20190317898A1 (en) * | 2018-04-12 | 2019-10-17 | International Business Machines Corporation | Using track locks and stride group locks to manage cache operations |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11444641B2 (en) | Data storage system with enforced fencing | |
| US20200404055A1 (en) | Data storage system with redundant internal networks | |
| US11467732B2 (en) | Data storage system with multiple durability levels | |
| KR101874280B1 (ko) | 분산형 스토리지 시스템으로부터의 효율적인 데이터 판독 | |
| US10509601B2 (en) | Data storage system with multi-tier control plane | |
| US9304704B2 (en) | Communication with two or more storage devices via one SAS communication port | |
| CN104639661A (zh) | 分布式存储系统及文件存储和读取方法 | |
| US10387307B2 (en) | Lock-free raid implementation in multi-queue architecture | |
| TWI765129B (zh) | 儲存系統 | |
| US20230137007A1 (en) | Data storage method, storage system, storage device, and storage medium | |
| US11379326B2 (en) | Data access method, apparatus and computer program product | |
| Petrini et al. | System-level fault-tolerance in large-scale parallel machines with buffered coscheduling | |
| CN101377788B (zh) | 一种机群文件系统中缓存管理的方法及系统 | |
| CN113687788A (zh) | 国产平台的数据读写优化方法、装置、计算机及存储介质 | |
| WO2023020136A1 (zh) | 存储系统中的数据存储方法及装置 | |
| Uehara | Composite RAID for rapid prototyping data grid | |
| CN114265791A (zh) | 一种数据调度方法、芯片以及电子设备 | |
| Nakamura et al. | Improving the performance of N-ary RAID by writing with XOR operation | |
| CN111831230A (zh) | 一种面向高性能计算及大数据的智能存储系统 | |
| CN101859232A (zh) | 一种可变长度数据存储接口 | |
| Uehara | An alternative implementation of 3FT RAID in virtual large scale disks | |
| KR20200055898A (ko) | 분산스토리지 어플리케이션의 저전력 raid 스케쥴링 기법 | |
| Uehara | Composite RAID: Rapid Prototyping Method for Virtual Large Scale Disks | |
| CN216388081U (zh) | 一种新型对象存储高密度一体机 | |
| CN114415985A (zh) | 一种基于数控分离架构的存储数据处理单元 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |