CN116360704A - 一种内核参数确定方法、装置、存储介质及电子设备 - Google Patents

一种内核参数确定方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN116360704A
CN116360704A CN202310369496.9A CN202310369496A CN116360704A CN 116360704 A CN116360704 A CN 116360704A CN 202310369496 A CN202310369496 A CN 202310369496A CN 116360704 A CN116360704 A CN 116360704A
Authority
CN
China
Prior art keywords
disk
parameter
determining
read
size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310369496.9A
Other languages
English (en)
Inventor
张新秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202310369496.9A priority Critical patent/CN116360704A/zh
Publication of CN116360704A publication Critical patent/CN116360704A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0674—Disk device
    • G06F3/0676—Magnetic disk device
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请实施例提供了一种内核参数确定方法、装置、存储介质及电子设备，其中，该方法包括：采集磁盘读写数据，确定所述磁盘读写数据的数据块大小；根据所述数据块大小确定性能评价指标，其中，所述性能评价指标用于评价所述磁盘的读写性能；根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，其中，所述磁盘在配置了所述目标参数的情况下，所述磁盘的性能指标满足所述性能评价指标；根据所述目标参数修改所述磁盘的内核文件。通过本申请，解决了相关技术中难以确定内核参数的问题，达到了提高确定内核参数效率的效果。

Description

一种内核参数确定方法、装置、存储介质及电子设备
技术领域
本申请实施例涉及计算机领域，具体而言，涉及一种内核参数确定方法、装置、存储介质及电子设备。
背景技术
随着计算机技术的迅猛发展，处理器从系统架构到集成电路设计不断革新。处理器处理速度也逐渐超越了磁盘的读写速度，而如何提高磁盘的读写效率，成为了最重要的问题。
相关技术中，往往采取磁盘管理系统的方式对磁盘读写资源进行合理分配，但提升效果有限。
面对现有技术中存在的上述问题，相关技术中还未提出有效手段。
发明内容
本申请实施例提供了一种内核参数确定方法、装置、存储介质及电子设备，以至少解决相关技术中内核参数确定效率低的问题。
根据本申请的一个实施例，提供了一种内核参数确定方法，包括：采集磁盘读写数据，确定上述磁盘读写数据的数据块大小；根据上述数据块大小确定性能评价指标，其中，上述性能评价指标用于评价上述磁盘的读写性能；根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，其中，为上述磁盘配置上述目标参数的情况下，上述磁盘的性能指标满足上述性能评价指标；根据上述目标参数修改上述磁盘的内核文件。
在一个示例性实施例中，上述根据上述数据块大小确定性能评价指标，包括:运行磁盘监测工具获取上述磁盘读写数据，其中，上述磁盘读写数据包括磁盘每秒读字节数、磁盘每秒写字节数、磁盘每秒读次数、磁盘每秒写次数；计算上述磁盘每秒读字节数与上述磁盘每秒写字节数的第一和值以及上述磁盘每秒读次数与上述磁盘每秒写次数的第二和值；将上述第一和值和上述第二和值的比值确定为上述数据块大小；比较上述数据块大小和预设阈值的关系，确定上述性能评价指标。
在一个示例性实施例中，上述比较上述数据块大小和预设阈值的关系，确定上述性能评价指标，包括:在上述数据块大小大于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒传输字节数；在上述数据块大小小于或等于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒读写次数。
在一个示例性实施例中，上述根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，包括：响应于磁盘查看指令，获取磁盘型号；根据上述磁盘型号确定上述磁盘的条带大小，其中，上述磁盘读写数据以条带的形式存储于磁盘，上述条带大小用于表示每个上述磁盘存储上述磁盘读写数据的单位大小；根据预先确定的参数集合和上述条带大小对上述磁盘的读写性能进行测试，确定上述目标参数。
在一个示例性实施例中，上述方法还包括：获取多个内核参数，其中，上述多个内核参数用于对上述磁盘进行设置，以调整上述磁盘的读写性能；从上述参数集合中穷举出N个参数子集，其中，每个参数子集的一个参数与上述多个内核参数中的一个内核参数对应，一个参数子集用于确定一个上述性能指标，N为正整数。
在一个示例性实施例中，上述方法还包括：基于上述N个参数子集与上述条带大小确定N组内核参数；利用上述N组内核参数依次设置上述磁盘，获取上述磁盘的N组测试性能参数；将上述N组测试性能参数中与上述性能评价指标之间的关系满足预设条件的目标测试性能参数对应的一组内核参数确定为上述目标参数。
在一个示例性实施例中，上述获取多个内核参数，包括：获取上述磁盘的第一参数、第二参数以及第三参数，其中，上述第一参数用于表示上述磁盘允许读写的最大段的数目)、上述第二参数用于表示上述磁盘允许的最大请求字节数，上述第三参数用于表示上述磁盘的调度队列大小，上述第二参数的最大取值设置为单个请求允许处理的最大字节数；将上述第一参数、上述第二参数以及上述第三参数确定为上述多个内核参数。
根据本申请的另一个实施例，提供了一种内核参数确定装置，包括：采集模块，用于采集磁盘读写数据，确定上述磁盘读写数据的数据块大小；第一确定模块，用于根据上述数据块大小确定性能评价指标，其中，上述性能评价指标用于评价上述磁盘的读写性能；测试模块，用于根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，其中，为上述磁盘配置上述目标参数的情况下，上述磁盘的性能指标满足上述性能评价指标；修改模块，用于根据上述目标参数修改上述磁盘的内核文件。
在一个示例性实施例中，上述第一确定模块包括:第一获取子模块，用于运行磁盘监测工具获取上述磁盘读写数据，其中，上述磁盘读写数据包括磁盘每秒读字节数、磁盘每秒写字节数、磁盘每秒读次数、磁盘每秒写次数；计算子模块，用于计算上述磁盘每秒读字节数与上述磁盘每秒写字节数的第一和值以及上述磁盘每秒读次数与上述磁盘每秒写次数的第二和值；第一确定子模块，用于将上述第一和值和上述第二和值的比值确定为上述数据块大小；第二确定子模块，用于比较上述数据块大小和预设阈值的关系，确定上述性能评价指标。
在一个示例性实施例中，上述第二确定子模块包括:第一确定单元在上述数据块大小大于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒传输字节数；第二确定单元，用于在上述数据块大小小于或等于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒读写次数。
在一个示例性实施例中，上述测试模块包括：响应子模块，用于响应于磁盘查看指令，获取磁盘型号；第三确定子模块，用于根据上述磁盘型号确定上述磁盘的条带大小，其中，上述磁盘读写数据以条带的形式存储于磁盘，上述条带大小用于表示每个上述磁盘存储上述磁盘读写数据的单位大小；第四确定子模块，用于根据预先确定的参数集合和上述条带大小对上述磁盘的读写性能进行测试，确定上述目标参数。
在一个示例性实施例中，上述装置还包括：第一获取模块，用于获取多个内核参数，其中，上述多个内核参数用于对上述磁盘进行设置，以调整上述磁盘的读写性能；穷举模块，用于从上述参数集合中穷举出N个参数子集，其中，每个参数子集的一个参数与上述多个内核参数中的一个内核参数对应，一个参数子集用于确定一个上述性能指标，N为正整数。
在一个示例性实施例中，上述装置还包括：第二确定模块，用于基于上述N个参数子集与上述条带大小确定N组内核参数；第二获取模块，用于利用上述N组内核参数依次设置上述磁盘，获取上述磁盘的N组测试性能参数；第三确定模块，用于将上述N组测试性能参数中与上述性能评价指标之间的关系满足预设条件的目标测试性能参数对应的一组内核参数确定为上述目标参数。
在一个示例性实施例中，上述第一获取模块包括：第二获取子模块，用于获取上述磁盘的第一参数、第二参数以及第三参数，其中，上述第一参数用于表示上述磁盘允许读写的最大段的数目、上述第二参数用于表示上述磁盘允许的最大请求字节数，上述第三参数用于表示上述磁盘的调度队列大小，上述第二参数的最大取值设置为单个请求允许处理的最大字节数；将上述第一参数、上述第二参数以及上述第三参数确定为上述多个内核参数。
根据本申请的又一个实施例，还提供了一种计算机可读存储介质，上述计算机可读存储介质中存储有计算机程序，其中，上述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本申请的又一个实施例，还提供了一种电子设备，包括存储器和处理器，上述存储器中存储有计算机程序，上述处理器被设置为运行上述计算机程序以执行上述任一项方法实施例中的步骤
通过本申请，通过磁盘读写数据数据块大小确定内核参数的性能评价指标，再根据性能评价指标筛选预先设置的参数集合确定目标参数进而完成对内核文件的修改，解决了相关技术中难以确定内核参数的问题，达到了提高确定内核参数效率的效果。
附图说明
图1是根据本申请实施例的内核参数确定方法的移动终端的硬件结构框图；
图2是根据本申请实施例的内核参数确定方法的流程图；
图3是根据本申请实施例的磁盘监测工具的工作界面截图
图4是根据本申请实施例的内核参数确定虚拟装置结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本申请的实施例。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本申请实施例的一种内核参数确定方法的移动终端的硬件结构框图。如图1所示，移动终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104，其中，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本申请实施例中的内核参数确定方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端的通信供应商提供的无线网络。在一个实例中，传输设备106包括一个网络适配器(NetworkInterfaceController，简称为NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输设备106可以为射频(RadioFrequency，简称为RF)模块，其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种内核参数确定方法，图2是根据本申请实施例的的流程图，如图2所示，该流程包括如下步骤：
步骤S202，采集磁盘读写数据，确定上述磁盘读写数据的数据块大小；
步骤S204，根据上述数据块大小确定性能评价指标，其中，上述性能评价指标用于评价上述磁盘的读写性能；
步骤S206，根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，其中，为上述磁盘配置上述目标参数的情况下，上述磁盘的性能指标满足上述性能评价指标；
步骤S208，根据上述目标参数修改上述磁盘的内核文件。
其中，上述步骤的执行主体可以为处理器，或者是具备数据采集计算能力的处理器内部存储器，或者还可以是其他的具备类似处理能力的处理设备或处理单元等但不限于此。
在上述实施例中，采集磁盘读写数据包括但不限于通过操作系统工具采集磁盘读写数据、使用第三方磁盘监控工具采集磁盘读写数据、使用编程语言相关包采集磁盘读写数据等。上述根据预先确定的参数集合对上述磁盘的读写性能进行测试包括但不限于通过穷举的方式获取上述参数集合的参数子集进而对上述磁盘的读写性能进行测试、通过人工经验筛选的方式确定参数集合的可能参数子集进而对磁盘读写性能进行测试。上述修改内核文件的方法包括但不限于重新编译并安装内核、加载动态代码模块、通过系统指令修改内核参数、应用补丁等。
通过本申请，通过磁盘读写数据数据块大小确定内核参数的性能评价指标，再根据性能评价指标筛选预先设置的参数集合确定目标参数进而完成对内核文件的修改，解决了相关技术中难以确定内核参数的问题，达到了提高确定内核参数效率的效果。
在一个示例性实施例中，上述根据上述数据块大小确定性能评价指标，包括：运行磁盘监测工具获取上述磁盘读写数据，其中，上述磁盘读写数据包括磁盘每秒读字节数、磁盘每秒写字节数、磁盘每秒读次数、磁盘每秒写次数；计算上述磁盘每秒读字节数与上述磁盘每秒写字节数的第一和值以及上述磁盘每秒读次数与上述磁盘每秒写次数的第二和值；将上述第一和值和上述第二和值的比值确定为上述数据块大小；比较上述数据块大小和预设阈值的关系，确定上述性能评价指标。在上述实施例中，磁盘每秒读字节数表示磁盘一秒钟磁盘读取或传输的数据量，磁盘每秒读字节数表示磁盘一秒钟磁盘写入的数据量，磁盘每秒读次数表示磁盘一秒钟磁盘读取或传输数据的次数、磁盘每秒写次数表示磁盘一秒钟磁盘写入数据的次数。通过获取的磁盘每秒读写字节数与读写次数确定上述数据块的大小，能够解决相关技术中数据块大小无法直接获取的问题，进而确定不同读写情况下的参数性能评价指标。
在一个示例性实施例中，上述比较上述数据块大小和预设阈值的关系，确定上述性能评价指标，包括:在上述数据块大小大于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒传输字节数；在上述数据块大小小于或等于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒读写次数。在上述实施例中，上述预设阈值包括但不限于128k、192k、256k，当然，上述数值仅仅作为一种说明性的示例，预设阈值可以根据调参经验、磁盘型号等预先确定。通过数据块大小区别性能评价指标，能够多维处理不同数据传输情形下的内核参数评价，有效确定内核参数的准确率。
在一个示例性实施例中，上述根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，包括：响应于磁盘查看指令，获取磁盘型号；根据上述磁盘型号确定上述磁盘的条带大小，其中，上述磁盘读写数据以条带的形式存储于磁盘，上述条带大小用于表示每个上述磁盘存储上述磁盘读写数据的单位大小；根据预先确定的参数集合和上述条带大小对上述磁盘的读写性能进行测试，确定上述目标参数。在上述实施例中，通过磁盘型号确定条带大小，能够灵活应对不同磁盘型号的内核参数确定需求，提高了内核参数的确定效率。
在一个示例性实施例中，上述方法还包括：获取多个内核参数，其中，上述多个内核参数用于对上述磁盘进行设置，以调整上述磁盘的读写性能；从上述参数集合中穷举出N个参数子集，其中，每个参数子集的一个参数与上述多个内核参数中的一个内核参数对应，一个参数子集用于确定一个上述性能指标，N为正整数。在上述实施例中，从参数集合中穷举出N个参数子集的方法包括但不限于通过递归的方式穷举全部参数子集、通过固定长度二进制数指示参数的方式穷举全部参数子集(固定长度取决于参数集合参数数量，每位二进制数用于指示对应参数是否在参数子集中)。
示例性地，若参数集合包括第一参数集合{1,2,3}、第二参数集合{2,4}、第三参数集合{1}，则从参数集合中穷举出全部参数子集包括：{1,2,1}、{1,4,1}、{2,2,1}、{2,4,1}、{3,2,1}、{3,4,1}。通过穷举的方式获取全部参数子集，能够快速确定目标参数，有效提高了内核参数的确定效率。
在一个示例性实施例中，上述方法还包括：基于上述N个参数子集与上述条带大小确定N组内核参数；利用上述N组内核参数依次设置上述磁盘，获取上述磁盘的N组测试性能参数；将上述N组测试性能参数中与上述性能评价指标之间的关系满足预设条件的目标测试性能参数对应的一组内核参数确定为上述目标参数。在上述实施例中，上述满足预设条件的目标测试性能参数对应的内核参数即多个内核参数组的极大值，当上述满足预设条件的目标测试性能参数对应的内核参数为多组的情况，可以任选一组作为上述目标参数。
示例性地，基于上述示例中的一个参数子集{1,2,1}与条带大小S确定一组内核参数的过程包括：确定第一参数为S，第二参数为2S，第三参数为S，将第一参数、第二参数、第三参数的组合{S，2S，S}作为一组内核参数。通过条带与预设参数子集确定多组内核参数进行测试，能够提高筛选目标内核参数的效率。
在一个示例性实施例中，上述获取多个内核参数，包括：获取上述磁盘的第一参数、第二参数以及第三参数，其中，上述第一参数用于表示上述磁盘允许读写的最大段的数目、上述第二参数用于表示上述磁盘允许的最大请求字节数，上述第三参数用于表示上述磁盘的调度队列大小，上述第二参数的最大取值设置为单个请求允许处理的最大字节数；将上述第一参数、上述第二参数以及上述第三参数确定为上述多个内核参数。在上述实施例中，获取上述磁盘的第一、第二、第三参数的方法包括但不限于通过操作系统磁盘管理工具获取磁盘参数、使用命令行工具获取磁盘参数、使用第三方磁盘管理工具获取磁盘参数。通过确定与条带相关的内核参数，简化内核参数的确认流程，能够提高内核参数的确定效率。
下面结合具体实施例对本申请进行进一步的解释说明：
以动态自适应调整I/O读写性能的场景为例，对本具体实施例进行说明，主要包括本申请的内核参数确定流程：
本发明内核参数确定虚拟装置中包括四个模块：
S1，信息采集模块，用于采集IO数据和raid的条带大小(对应于上述磁盘读写数据与磁盘条带大小)，传递给S02模块和S03模块，用于计算IO数据块大小和内核参数；
S2，IO数据块(对应于上述磁盘读写数据的数据块)大小计算模块，用于计算IO读写的数据块大小，即IO block size，并传递给S02模块.
S3，内核参数自动计算模块，用于根据S02模块计算得到的V_(block_size)(对应于上述磁盘读写数据的数据块大小)判断性能评价指标，若V_(block_size)小于等于128k，取IOPS(对应于上述磁盘每秒读写次数)作为性能指标，若V_(block_size)大于128k，取传输速度(对应于上述每秒传输字节数)作为性能指标，分别设置几个参数为strip size(对应于上述条带大小)的倍数，反复测试分析对比。
S4，内核参数固化模块，用于根据S03反复测试，对比得出的内核参数值，修改内核参数文件，以保证内核参数永久生效。
本发明内核参数调整流程包括以下步骤：
步骤1，信息采集，包括：
步骤1.1，通过iostat工具统计采集当前IO读写数据；
步骤1.2，通过pcie命令获取当前配置的raid卡型号；
步骤1.3，根据raid卡型号调用不同的工具，获取raid的条带大小，即strip_size。
步骤2，计算IO数据块大小，通过以下公式计算Vblock_size：
Vblock_size＝(VrkB/s+VwkB/s)/(Vr/s+Vw/s)
其中Vblock)size是IO读写的数据块大小值，VrkB/s是通过iostat工具统计到的每秒读K字节数值，VwkB/s是通过iostat工具统计到的每秒写K字节数，Vr/s是通过iostat工具统计到的每秒完成的读I/O设备次数。Vw/s是通过iostat工具统计到的每秒完成的写I/O设备次数，其中，iostat工具的一个工作界面如图3所示，示例性地计算可以得出Vblock_size＝(0.0+470784.00)/(0.0+7356.00)＝64k。
步骤3，计算内核参数，包括：
步骤3.1，根据步骤2计算得到的Vblocksize选择性能评价指标，若Vblock_size小于等于128k，取IOPS作为性能指标(对应于上述性能评价指标)，若Vblock_size大于128k，取传输速度作为性能指标；
步骤3.2，确定对I/O读写影响较大的三个参数max_segments(对应于上述第一参数)、max_sectors_kb(对应于上述第二参数)和nr_requests(对应于上述第三参数)，并定义如下关系：
nr_requests＝a*strip size
max_segments＝b*strip size
max_sectors_kb＝c*strip size
其中，a、b、c取经验值如下：
Figure BDA0004168703630000111
Figure BDA0004168703630000112
Figure BDA0004168703630000113
步骤3.3，分别测算不同参数组合下的性能指标，选择最优的性能指标对应的参数组合为目标参数组合。
步骤4，根据步骤3.3得到的目标参数组合修改内核参数文件。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例上述的方法。
在本实施例中还提供了一种内核参数确定装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本申请实施例的一种内核参数装置的结构框图，如图4所示，该装置包括采集模块，用于采集磁盘读写数据，确定上述磁盘读写数据的数据块大小；第一确定模块，用于根据上述数据块大小确定性能评价指标，其中，上述性能评价指标用于评价上述磁盘的读写性能；测试模块，用于根据预先确定的参数集合对上述磁盘的读写性能进行测试，确定目标参数，其中，为上述磁盘配置上述目标参数的情况下，上述磁盘的性能指标满足上述性能评价指标；修改模块，用于根据上述目标参数修改上述磁盘的内核文件。
在一个示例性实施例中，上述第一确定模块包括:第一获取子模块，用于运行磁盘监测工具获取上述磁盘读写数据，其中，上述磁盘读写数据包括磁盘每秒读字节数、磁盘每秒写字节数、磁盘每秒读次数、磁盘每秒写次数；计算子模块，用于计算上述磁盘每秒读字节数与上述磁盘每秒写字节数的第一和值以及上述磁盘每秒读次数与上述磁盘每秒写次数的第二和值；第一确定子模块，用于将上述第一和值和上述第二和值的比值确定为上述数据块大小；第二确定子模块，用于比较上述数据块大小和预设阈值的关系，确定上述性能评价指标。
在一个示例性实施例中，上述第二确定子模块包括:第一确定单元在上述数据块大小大于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒传输字节数；第二确定单元，用于在上述数据块大小小于或等于上述预设阈值的情况下，确定上述性能评价指标为磁盘每秒读写次数。
在一个示例性实施例中，上述测试模块包括：响应子模块，用于响应于磁盘查看指令，获取磁盘型号；第三确定子模块，用于根据上述磁盘型号确定上述磁盘的条带大小，其中，上述磁盘读写数据以条带的形式存储于磁盘，上述条带大小用于表示每个上述磁盘存储上述磁盘读写数据的单位大小；第四确定子模块，用于根据预先确定的参数集合和上述条带大小对上述磁盘的读写性能进行测试，确定上述目标参数。
在一个示例性实施例中，上述装置还包括：第一获取模块，用于获取多个内核参数，其中，上述多个内核参数用于对上述磁盘进行设置，以调整上述磁盘的读写性能；穷举模块，用于从上述参数集合中穷举出N个参数子集，其中，每个参数子集的一个参数与上述多个内核参数中的一个内核参数对应，一个参数子集用于确定一个上述性能指标，N为正整数。
在一个示例性实施例中，上述装置还包括：第二确定模块，用于基于上述N个参数子集与上述条带大小确定N组内核参数；第二获取模块，用于利用上述N组内核参数依次设置上述磁盘，获取上述磁盘的N组测试性能参数；第三确定模块，用于将上述N组测试性能参数中与上述性能评价指标之间的关系满足预设条件的目标测试性能参数对应的一组内核参数确定为上述目标参数。
在一个示例性实施例中，上述第一获取模块包括：第二获取子模块，用于获取上述磁盘的第一参数、第二参数以及第三参数，其中，上述第一参数用于表示上述磁盘允许读写的最大段的数目、上述第二参数用于表示上述磁盘允许的最大请求字节数，上述第三参数用于表示上述磁盘的调度队列大小，上述第二参数的最大取值设置为单个请求允许处理的最大字节数；将上述第一参数、上述第二参数以及上述第三参数确定为上述多个内核参数。
通过本申请，通过磁盘读写数据数据块大小确定内核参数的性能评价指标，再根据性能评价指标筛选预先设置的参数集合确定目标参数进而完成对内核文件的修改，解决了相关技术中难以确定内核参数的问题，达到了提高确定内核参数效率的效果。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
本申请的实施例还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：U盘、只读存储器(Read-OnlyMemory，简称为ROM)、随机存取存储器(RandomAccessMemory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
在本实施例中，上述计算机可读存储介质可以被设置为存储用于执行以下步骤的计算机程序：
S1，采集磁盘读写数据，确定所述磁盘读写数据的数据块大小；
S2，根据所述数据块大小确定性能评价指标，其中，所述性能评价指标用于评价所述磁盘的读写性能；
S3，根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，其中，所述磁盘在配置了所述目标参数的情况下，所述磁盘的性能指标满足所述性能评价指标；
S4，根据所述目标参数修改所述磁盘的内核文件。
本申请的实施例还提供了一种电子设备，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述电子设备还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
在一个示例性实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，采集磁盘读写数据，确定所述磁盘读写数据的数据块大小；
S2，根据所述数据块大小确定性能评价指标，其中，所述性能评价指标用于评价所述磁盘的读写性能；
S3，根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，其中，所述磁盘在配置了所述目标参数的情况下，所述磁盘的性能指标满足所述性能评价指标；
S4，根据所述目标参数修改所述磁盘的内核文件。
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。
通过本发明提供的一种内核参数确定方法，通过磁盘读写数据数据块大小确定内核参数的性能评价指标，再根据性能评价指标筛选预先设置的参数集合确定目标参数进而完成对内核文件的修改，解决了相关技术中难以确定内核参数的问题，达到了提高确定内核参数效率的效果。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
以上上述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (10)

1.一种内核参数确定方法，其特征在于，包括：
采集磁盘读写数据，确定所述磁盘读写数据的数据块大小；
根据所述数据块大小确定性能评价指标，其中，所述性能评价指标用于评价所述磁盘的读写性能；
根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，其中，所述磁盘在配置了所述目标参数的情况下，所述磁盘的性能指标满足所述性能评价指标；
根据所述目标参数修改所述磁盘的内核文件。
2.根据权利要求1所述的方法，其特征在于，所述根据所述数据块大小确定性能评价指标，包括:
运行磁盘监测工具获取所述磁盘读写数据，其中，所述磁盘读写数据包括磁盘每秒读字节数、磁盘每秒写字节数、磁盘每秒读次数、磁盘每秒写次数；
计算所述磁盘每秒读字节数与所述磁盘每秒写字节数的第一和值以及所述磁盘每秒读次数与所述磁盘每秒写次数的第二和值；
将所述第一和值和所述第二和值的比值确定为所述数据块大小；
比较所述数据块大小和预设阈值的关系，确定所述性能评价指标。
3.根据权利要求2所述的方法，其特征在于，所述比较所述数据块大小和预设阈值的关系，确定所述性能评价指标，包括:
在所述数据块大小大于所述预设阈值的情况下，确定所述性能评价指标为磁盘每秒传输字节数；
在所述数据块大小小于或等于所述预设阈值的情况下，确定所述性能评价指标为磁盘每秒读写次数。
4.根据权利要求1所述的方法，其特征在于，所述根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，包括：
响应于磁盘查看指令，获取磁盘型号；
根据所述磁盘型号确定所述磁盘的条带大小，其中，所述磁盘读写数据以条带的形式存储于磁盘，所述条带大小用于表示每个所述磁盘存储所述磁盘读写数据的单位大小；
根据预先确定的参数集合和所述条带大小对所述磁盘的读写性能进行测试，确定所述目标参数。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
获取多个内核参数，其中，所述多个内核参数用于对所述磁盘进行设置，以调整所述磁盘的读写性能；
从所述参数集合中穷举出N个参数子集，其中，每个参数子集的一个参数与所述多个内核参数中的一个内核参数对应，一个参数子集用于确定一个所述性能指标，N为正整数。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
基于所述N个参数子集与所述条带大小确定N组内核参数；
利用所述N组内核参数依次设置所述磁盘，获取所述磁盘的N组测试性能参数；
将所述N组测试性能参数中与所述性能评价指标之间的关系满足预设条件的目标测试性能参数对应的一组内核参数确定为所述目标参数。
7.根据权利要求5所述的方法，其特征在于，所述获取多个内核参数，包括：
获取所述磁盘的第一参数、第二参数以及第三参数，其中，所述第一参数用于表示所述磁盘允许读写的最大段的数目、所述第二参数用于表示所述磁盘允许的最大请求字节数，所述第三参数用于表示所述磁盘的调度队列大小，所述第二参数的最大取值设置为单个请求允许处理的最大字节数；
将所述第一参数、所述第二参数以及所述第三参数确定为所述多个内核参数。
8.一种内核参数确定装置，其特征在于，包括：
采集模块，用于采集磁盘读写数据，确定所述磁盘读写数据的数据块大小；
第一确定模块，用于根据所述数据块大小确定性能评价指标，其中，所述性能评价指标用于评价所述磁盘的读写性能；
测试模块，用于根据预先确定的参数集合对所述磁盘的读写性能进行测试，确定目标参数，其中，所述磁盘在配置了所述目标参数的情况下，所述磁盘的性能指标满足所述性能评价指标；
修改模块，用于根据所述目标参数修改所述磁盘的内核文件。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现所述权利要求1至7任一项中所述的方法的步骤。
10.一种电子设备，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现所述权利要求1至7任一项中所述的方法的步骤。
CN202310369496.9A 2023-04-07 2023-04-07 一种内核参数确定方法、装置、存储介质及电子设备 Pending CN116360704A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310369496.9A CN116360704A (zh) 2023-04-07 2023-04-07 一种内核参数确定方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310369496.9A CN116360704A (zh) 2023-04-07 2023-04-07 一种内核参数确定方法、装置、存储介质及电子设备

Publications (1)

Publication Number Publication Date
CN116360704A true CN116360704A (zh) 2023-06-30

Family

ID=86904615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310369496.9A Pending CN116360704A (zh) 2023-04-07 2023-04-07 一种内核参数确定方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN116360704A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117312260A (zh) * 2023-11-29 2023-12-29 苏州元脑智能科技有限公司 文件的压缩存储方法、装置、存储介质和电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117312260A (zh) * 2023-11-29 2023-12-29 苏州元脑智能科技有限公司 文件的压缩存储方法、装置、存储介质和电子设备
CN117312260B (zh) * 2023-11-29 2024-02-27 苏州元脑智能科技有限公司 文件的压缩存储方法、装置、存储介质和电子设备

Similar Documents

Publication Publication Date Title
CN108133732B (zh) 闪存芯片的性能测试方法、装置、设备及存储介质
CN111506498A (zh) 测试用例的自动生成方法、装置、计算机设备及存储介质
CN111913649B (zh) 一种固态硬盘的数据处理方法及装置
CN108777158B (zh) 测试固态硬盘Trim性能的方法、装置及计算机设备
CN108874324B (zh) 一种访问请求处理方法、装置、设备及可读存储介质
CN116360704A (zh) 一种内核参数确定方法、装置、存储介质及电子设备
CN111078579A (zh) 一种Monkey测试方法、装置及终端设备
CN112331249A (zh) 预测存储器件寿命的方法、装置、终端设备和存储介质
CN108762684B (zh) 热点数据迁移流控方法、装置、电子设备及存储介质
CN111666150B (zh) 存储空间的分配方法、装置、终端及计算机可读存储介质
CN115989485A (zh) 一种数据处理方法、装置及系统
US20160253591A1 (en) Method and apparatus for managing performance of database
CN115966237A (zh) 硬盘坏块的筛选方法、装置、存储介质及电子装置
CN116028327A (zh) 文件系统读写性能测试方法、装置、可读存储介质及设备
CN113992249B (zh) 信道状态信息的处理方法、装置、电子设备、存储介质
CN111598390B (zh) 服务器高可用性评估方法、装置、设备和可读存储介质
CN111352825B (zh) 数据接口的测试方法、装置及服务器
CN110677463B (zh) 并行数据传输方法、装置、介质及电子设备
CN112906999A (zh) 话务指标优化效果评估方法、装置及计算设备
CN110968397B (zh) 一种虚拟机容量管理的分析方法及装置
CN109344043A (zh) 一种性能分析方法及相关装置
CN117951084B (zh) 文件系统的数据写入方法及装置、存储介质和电子设备
CN111913650B (zh) 一种确定预测窗口期的方法及装置
CN115237503B (zh) 基于vr的生态模型建立方法及系统
CN118132400A (zh) 存储系统的测试方法、装置、存储介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination