CN105975211A - 一种基于k1系统提高io性能的方法与系统 - Google Patents

一种基于k1系统提高io性能的方法与系统 Download PDF

Info

Publication number
CN105975211A
CN105975211A CN201610279170.7A CN201610279170A CN105975211A CN 105975211 A CN105975211 A CN 105975211A CN 201610279170 A CN201610279170 A CN 201610279170A CN 105975211 A CN105975211 A CN 105975211A
Authority
CN
China
Prior art keywords
disk array
volume
array group
logical
hard disk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610279170.7A
Other languages
English (en)
Other versions
CN105975211B (zh
Inventor
张鑫
李建磊
吕倩华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Beijing Electronic Information Industry Co Ltd
Original Assignee
Inspur Beijing Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Beijing Electronic Information Industry Co Ltd filed Critical Inspur Beijing Electronic Information Industry Co Ltd
Priority to CN201610279170.7A priority Critical patent/CN105975211B/zh
Publication of CN105975211A publication Critical patent/CN105975211A/zh
Application granted granted Critical
Publication of CN105975211B publication Critical patent/CN105975211B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于K1系统提高IO性能的方法与系统，在硬盘上创建预设数量的磁盘阵列组；在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷，本发明使用多重条带，使数据可先由操作系统通过逻辑卷将数据分散到不同的物理卷中，然后通过存储的磁盘阵列组方式，将数据分散到不同的磁盘阵列组中，然后通过磁盘阵列组的条带将数据IO分布到不同物理硬盘上，从而提高IO性能。

Description

一种基于K1系统提高IO性能的方法与系统
技术领域
本发明涉及计算机技术领域，特别是涉及一种基于K1系统提高IO性能的方法与系统。
背景技术
浪潮天梭K1系统是我国863计划重大专项“高端容错计算机研制与应用推广”项目成果。我国第一台关键应用主机浪潮天梭K1系统正式上市，标志着我国成为继美日之后全球第三个掌握新一代主机技术的国家，并有望改变我国在金融、电信等核心领域大型主机长期依赖进口的尴尬局面。
由于K1小型机主要应用于客户的核心数据平台，系统的I/O性能起着至关重要的作用，然而当多个进程同时访问一个磁盘时，可能会出现磁盘冲突。大多数磁盘系统都对访问次数(每秒的I/O操作，IOPS)和数据传输率(每秒传输的数据量，TPS)有限制。当达到这些限制时，后面需要访问磁盘的进程就需要等待，避免磁盘冲突是优化I/O性能的一个重要目标，而I/O性能的优化与其他资源(如CPU和内存)的优化有着很大的区别，目前需要一种针对K1系统的I/O优化方法。
发明内容
有鉴于此，本发明的主要目的在于提供一种基于K1系统提高IO性能的方法与系统，可以有效地优化K1系统的IO性能。
为实现上述目的，本发明提供了一种基于K1系统提高IO性能的方法，包括：
在硬盘上创建预设数量的磁盘阵列组；
在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
优选地，所述硬盘为K1U2硬盘。
优选地，在硬盘上创建预设数量的磁盘阵列组包括：
添加目标硬盘，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量；
创建所述目标数量的磁盘阵列组。
优选地，根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷包括：
根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度；
根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小；
根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷。
本发明还提供了一种基于K1系统提高IO性能的系统，包括：
磁盘阵列组创建模块，用于在硬盘上创建预设数量的磁盘阵列组；
逻辑单元创建模块，用于在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
卷组创建模块，用于根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
逻辑卷创建模块，用于根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
优选地，所述硬盘为K1U2硬盘。
优选地，所述磁盘阵列组创建模块包括：
数量确定子模块，用于添加目标硬盘，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量；
磁盘阵列组创建子模块，用于创建所述目标数量的磁盘阵列组。
优选地，所述逻辑卷创建模块包括：
条带化程度确定模块，用于根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度；
块大小确定子模块，用于根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小；
逻辑卷创建子模块，用于根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷。
应用本发明提供的一种基于K1系统提高IO性能的方法与系统，在硬盘上创建预设数量的磁盘阵列组；在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷，本发明使用多重条带，使数据可先由操作系统通过逻辑卷将数据分散到不同的物理卷中，然后通过存储的磁盘阵列组方式，将数据分散到不同的磁盘阵列组中，然后通过磁盘阵列组的条带将数据IO分布到不同物理硬盘上，从而提高IO性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明一种基于K1系统提高IO性能的方法实施例的流程图；
图2为本发明一种基于K1系统提高IO性能的方法实施例的效果示意图；
图3为本发明一种基于K1系统提高IO性能的系统实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供了一种基于K1系统提高IO性能的方法，图1示出了本法民基于K1系统提高IO性能的方法实施例的流程图，包括：
步骤S101：在硬盘上创建预设数量的磁盘阵列组；
添加目标硬盘，可为K1U2硬盘存储，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量，创建所述目标数量的磁盘阵列组RAID，如硬盘数量较多，建议创建多组相同的RAID。
步骤S102：在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
在RAID组中创建相同的逻辑单元LUN，使用相同的条带大小，将创建好的LUN映射给K1主机。
步骤S103：根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
可将识别到的LUN使用pvcreate命令创建为物理卷PV，并使用vgcreate命令将PV整合为一个卷组VG。
步骤S104：根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
可根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度，根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小，根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷，如，使用lvcreate命令创建条带化逻辑卷LV，可使用-i参数控制条带化程度，优选数量为RAID组个数或整数倍，可使用-I参数控制块大小，优选块大小为存储LUN的条带大小或它的整数倍。
本实施例可实施在安装K-UNIX的浪潮TSK1 930/950小型机上，针对使用K1系统自带K1U2存储的情况，IO性能优化的效果示意图如图2所示。
应用本实施例提供的一种基于K1系统提高IO性能的方法，在硬盘上创建预设数量的磁盘阵列组；在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷，本发明使用多重条带，使数据可先由操作系统通过逻辑卷将数据分散到不同的物理卷中，然后通过存储的磁盘阵列组方式，将数据分散到不同的磁盘阵列组中，然后通过磁盘阵列组的条带将数据IO分布到不同物理硬盘上，从而提高IO性能。
本发明还提供了一种基于K1系统提高IO性能的系统，图3示出了本发明基于K1系统提高IO性能的系统的实施例结构示意图，包括：
磁盘阵列组创建模块101，用于在硬盘上创建预设数量的磁盘阵列组；
逻辑单元创建模块102，用于在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
卷组创建模块103，用于根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
逻辑卷创建模块104，用于根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
本实施例中所述硬盘可为K1U2硬盘；
所述磁盘阵列组创建模块101可包括：
数量确定子模块，用于添加目标硬盘，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量；
磁盘阵列组创建子模块，用于创建所述目标数量的磁盘阵列组；
所述逻辑卷创建模块104可包括：
条带化程度确定模块，用于根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度；
块大小确定子模块，用于根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小；
逻辑卷创建子模块，用于根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷。
应用本实施例提供的一种基于K1系统提高IO性能的系统，在硬盘上创建预设数量的磁盘阵列组；在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷，本发明使用多重条带，使数据可先由操作系统通过逻辑卷将数据分散到不同的物理卷中，然后通过存储的磁盘阵列组方式，将数据分散到不同的磁盘阵列组中，然后通过磁盘阵列组的条带将数据IO分布到不同物理硬盘上，从而提高IO性能。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
最后，还需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的方法和系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种基于K1系统提高IO性能的方法，其特征在于，包括：
在硬盘上创建预设数量的磁盘阵列组；
在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
2.根据权利要求1所述的基于K1系统提高IO性能的方法，其特征在于，所述硬盘为K1U2硬盘。
3.根据权利要求2所述的基于K1系统提高IO性能的方法，其特征在于，在硬盘上创建预设数量的磁盘阵列组包括：
添加目标硬盘，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量；
创建所述目标数量的磁盘阵列组。
4.根据权利要求1所述的基于K1系统提高IO性能的方法，其特征在于，根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷包括：
根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度；
根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小；
根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷。
5.一种基于K1系统提高IO性能的系统，其特征在于，包括：
磁盘阵列组创建模块，用于在硬盘上创建预设数量的磁盘阵列组；
逻辑单元创建模块，用于在各所述磁盘阵列组中创建容量与条带大小均相同的逻辑单元，并将各所述逻辑单元映射至主机；
卷组创建模块，用于根据识别出的映射至所述主机的各所述逻辑单元，分别创建对应的物理卷，将各所述物理卷整合为一个卷组；
逻辑卷创建模块，用于根据所述磁盘阵列组和所述逻辑单元创建预设数量的条带化逻辑卷。
6.根据权利要求5所述的基于K1系统提高IO性能的系统，其特征在于，所述硬盘为K1U2硬盘。
7.根据权利要求6所述的基于K1系统提高IO性能的系统，其特征在于，所述磁盘阵列组创建模块包括：
数量确定子模块，用于添加目标硬盘，根据添加的所述目标硬盘的数量确定对应的需创建的磁盘阵列组的目标数量；
磁盘阵列组创建子模块，用于创建所述目标数量的磁盘阵列组。
8.根据权利要求5所述的基于K1系统提高IO性能的系统，其特征在于，所述逻辑卷创建模块包括：
条带化程度确定模块，用于根据所述磁盘阵列组的数量确定需创建的逻辑卷的目标条带化程度；
块大小确定子模块，用于根据所述逻辑单元的条带大小确定需创建的逻辑卷的目标块大小；
逻辑卷创建子模块，用于根据所述目标条带化程度和所述目标块大小创建条带化逻辑卷。
CN201610279170.7A 2016-04-28 2016-04-28 一种基于k1系统提高io性能的方法与系统 Active CN105975211B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610279170.7A CN105975211B (zh) 2016-04-28 2016-04-28 一种基于k1系统提高io性能的方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610279170.7A CN105975211B (zh) 2016-04-28 2016-04-28 一种基于k1系统提高io性能的方法与系统

Publications (2)

Publication Number Publication Date
CN105975211A true CN105975211A (zh) 2016-09-28
CN105975211B CN105975211B (zh) 2019-05-28

Family

ID=56994887

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610279170.7A Active CN105975211B (zh) 2016-04-28 2016-04-28 一种基于k1系统提高io性能的方法与系统

Country Status (1)

Country Link
CN (1) CN105975211B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107256723A (zh) * 2017-05-31 2017-10-17 郑州云海信息技术有限公司 一种存储产品的测试方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101751228A (zh) * 2009-12-29 2010-06-23 成都市华为赛门铁克科技有限公司 磁盘阵列的实现方法和数据读写方法及装置
CN101997918A (zh) * 2010-11-11 2011-03-30 清华大学 异构san环境中的海量存储资源按需分配的实现方法
WO2012049707A1 (en) * 2010-10-13 2012-04-19 Hitachi, Ltd. Storage apparatus and file system management method
CN102880428A (zh) * 2012-08-20 2013-01-16 华为技术有限公司 分布式独立磁盘冗余阵列的创建方法及装置
US20150067256A1 (en) * 2008-03-13 2015-03-05 Hitachi, Ltd. Storage system
CN104484133A (zh) * 2014-12-18 2015-04-01 浪潮(北京)电子信息产业有限公司 一种存储管理方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150067256A1 (en) * 2008-03-13 2015-03-05 Hitachi, Ltd. Storage system
CN101751228A (zh) * 2009-12-29 2010-06-23 成都市华为赛门铁克科技有限公司 磁盘阵列的实现方法和数据读写方法及装置
WO2012049707A1 (en) * 2010-10-13 2012-04-19 Hitachi, Ltd. Storage apparatus and file system management method
CN101997918A (zh) * 2010-11-11 2011-03-30 清华大学 异构san环境中的海量存储资源按需分配的实现方法
CN102880428A (zh) * 2012-08-20 2013-01-16 华为技术有限公司 分布式独立磁盘冗余阵列的创建方法及装置
CN104484133A (zh) * 2014-12-18 2015-04-01 浪潮(北京)电子信息产业有限公司 一种存储管理方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107256723A (zh) * 2017-05-31 2017-10-17 郑州云海信息技术有限公司 一种存储产品的测试方法及装置

Also Published As

Publication number Publication date
CN105975211B (zh) 2019-05-28

Similar Documents

Publication Publication Date Title
US9513814B1 (en) Balancing I/O load on data storage systems
US8463995B2 (en) Storage control apparatus and storage system comprising multiple storage control apparatuses
US8984211B2 (en) Computer system and management system
US11347589B2 (en) Evaluation for rebuilding performance of redundant arrays of independent disks
CN104583930B (zh) 数据迁移的方法、控制器和数据迁移装置
CN1694081A (zh) San系统中虚拟化智能控制器的实现方法
US8489845B2 (en) Storage system comprising multiple storage control apparatus
CN106066890A (zh) 一种分布式高性能数据库一体机系统
CN104731517A (zh) 一种存储池容量分配方法和装置
CN104536903A (zh) 一种按数据属性分类存放的混合存储方法及系统
CN104123228A (zh) 一种数据存储系统及其使用方法
US11347414B2 (en) Using telemetry data from different storage systems to predict response time
CN103699340B (zh) 一种请求处理方法及设备
CN106354428A (zh) 一种多物理层分区计算机体系结构的存储共享系统
CN105975211A (zh) 一种基于k1系统提高io性能的方法与系统
CN101997919A (zh) 一种存储资源的管理方法及管理装置
US20090007149A1 (en) Aggregating storage elements using a virtual controller
CN107957850A (zh) 具虚拟区块及磁盘阵列结构的数据存储系统及其管理方法
US9665581B1 (en) Managing file system checking
US10489268B2 (en) Application granular reporting
US9015410B2 (en) Storage control apparatus unit and storage system comprising multiple storage control apparatus units
US20220414062A1 (en) Stripe defragmentation and rebuild based on stripe access frequency
US11256428B2 (en) Scaling raid-based storage by redistributing splits
CN104461961A (zh) 一种多核多线程的闪存装置及闪存控制方法
CN203299803U (zh) 一种多路径读写系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant