CN115686363A - 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统 - Google Patents

一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统 Download PDF

Info

Publication number
CN115686363A
CN115686363A CN202211280587.7A CN202211280587A CN115686363A CN 115686363 A CN115686363 A CN 115686363A CN 202211280587 A CN202211280587 A CN 202211280587A CN 115686363 A CN115686363 A CN 115686363A
Authority
CN
China
Prior art keywords
tape
simulation
data
gateway
distributed storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211280587.7A
Other languages
English (en)
Other versions
CN115686363B (zh
Inventor
谢帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baishuo Tongxing Technology Beijing Co ltd
Original Assignee
Baishuo Tongxing Technology Beijing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Baishuo Tongxing Technology Beijing Co ltd filed Critical Baishuo Tongxing Technology Beijing Co ltd
Priority to CN202211280587.7A priority Critical patent/CN115686363B/zh
Publication of CN115686363A publication Critical patent/CN115686363A/zh
Application granted granted Critical
Publication of CN115686363B publication Critical patent/CN115686363B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,包括:磁带模拟网关大型机通过光纤交换机连接数据网关;数据网关通过光纤电缆连接光纤卡设备,光纤卡设备连接光纤交换机,光纤交换机与Ceph分布式存储系统物理连接;数据网关实时运行有模拟软件,其用于在接到磁带模拟网关大型机的磁带操作请求时,进行磁带模拟。本设备用通用服务器模拟若干物理磁带机,与IBM系列大型机进行物理连接,响应其发出的磁带使用的各种命令。将IBM系列大型机原本由物理磁带记录的数据,使用服务器后接的Ceph分布式存储记录。并保证数据的完整性和可用性。

Description

一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统
技术领域
本发明涉及网关技术领域,特别涉及一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统。
背景技术
目前,大型机使用的磁带读写速度较慢,读/写的主要操作依赖于专用的磁带驱动器,且需要进行人工干预插拔磁带,即使是目前的自动磁带库系统,依然需要机械手机械臂进行物理挪动,实体设备占地面积大,效率较低,容量有限。
发明内容
本发明提供一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,用以解决大型机的磁带读写速度较慢,需要进行人工干预插拔磁带,体设备占地面积大,效率较低,容量有限的情况。
本申请实施例提供的基于Ceph分布式存储的磁带模拟网关大型机,包括:
所述磁带模拟网关大型机通过光纤交换机连接数据网关;
所述数据网关通过光纤电缆连接光纤卡设备,光纤卡设备连接光纤交换机,光纤交换机与Ceph分布式存储系统物理连接;
所述数据网关实时运行有模拟软件,其用于在接到磁带模拟网关大型机的磁带操作请求时,进行磁带模拟。
作为一种可能的实施方式,所述数据网关通过IP—SAN协议或NTFS协议与Ceph分布式存储系统进行通讯。
作为一种可能的实施方式,所述磁带模拟包括:磁带插带、加载磁带、过带、读写和卸载磁带。
作为一种可能的实施方式,所述磁带插带包括:
数据网关向在Ceph分布式存储系统中请求分配一个磁带文件夹;其中,
磁带文件夹以磁带模拟网关大型机的请求作为磁带标命名;
磁带文件夹存储有磁带头信息和磁带数据信息;
磁带文件夹关联至数据网关的模拟软件后,磁带模拟网关大型机写入磁带插带数据。
作为一种可能的实施方式,所述磁带模拟网关大型机通过FICON协议与数据网关进行通讯。
作为一种可能的实施方式,所述磁带文件夹包括如下生成步骤:
用户在磁带模拟网关大型机的可视化操作页面上选定磁带模拟行为、磁带模拟数据和磁带模拟请求内容,并将选定后的磁带模拟行为、磁带模拟数据和磁带模拟请求内容发送到数据网关;
数据网关分别获取磁带模拟数据和磁带模拟请求内容,经判断筛选在Ceph分布式存储系统中构建对应的磁带文件夹;其中,
所述判断筛选包括:对磁带模拟数据进行正态分布变换,得到每一帧磁带模拟数据的模拟组成空间;其中,
所述模拟组成空间包括:提取磁带模拟数据中每一帧磁带模拟数据分别对应的空间特征,基于磁带模拟请求内容和空间特征,构建磁带文件夹。
作为一种可能的实施方式,所述光纤交换机连接有物理存储器;其中,
物理存储器的存储数据向外输出时,存储数据通过变换格式为通用格式后进入光纤交换机;
光纤交换机输出的数据通过与对应的外部接口匹配,确定外部接口的输入格式,通过外部接口的输入格式将光纤交换机输出的数据进行再次格式转换,并转换为外部接口的输入格式。
作为一种可能的实施方式,所述Ceph分布式存储系统中设置有故障分析模型、故障分类模型和故障定位模型;其中,
所述故障分析模型将磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告构建故障特征向量集;其中,
将磁带模拟网关大型机的不同类型的故障表征转化为不同的数据表示形式,从磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告中提取特征向量,得到故障特征向量集;
所述故障分类模型通过故障特征向量集训练预设的通用故障分类模型,得到多种子分类模型,通过子分类模型确定磁带模拟网关大型机在存在故障时的故障类型;
所述故障定位模型通过粒子群优化算法计算各个子分类模型的权重的集合中,每个权重对应的最优值,通过最优质和故障表征,进行故障定位。
作为一种可能的实施方式,所述Ceph分布式存储系统还包括:
命令发送模块,当检测磁带模拟时,向分布式存储节点发送磁带模拟常事件对应的第一模拟命令,以输出分布式存储节点内存储的模拟行为对应的数据块信息;其中,
所述第一模拟命令携带有磁带模拟行为的数据块标识;
命令接收模块,接收分布式存储节点发送的的第二模拟命令;
类型模拟模块,通过第二模拟命令将分布式存储节点存储的数据快信息对应的模拟类型;其中,
模拟类型存储在数据快信息对应的附属磁盘中;
类型模拟模块还用于:对不同类型的模拟行为执行重命名操作得到重命名副本,并将重命名副本存储至指定路径;其中,
指定路径设置于附属磁盘所属磁盘。
作为一种可能的实施方式,所述数据网关通讯包括:
在SAN设备上创建多个逻辑卷,每个逻辑卷由所述服务器中的相应的一个唯一地拥有;
根据对象存储应用程序编程接口从所述客户端接收与一个或更多个模拟对象相关的模拟命令;以及
响应于模拟命令,使用SAN协议将模拟对象保持在SAN设备上的所述逻辑卷中。
本发明的有益效果在于:
本发明通过通用服务器模拟若干物理磁带机,与IBM z系列大型机进行物理连接,响应其发出的磁带使用的各种命令。将IBM z系列大型机原本由物理磁带记录的数据,使用服务器后接的Ceph分布式存储记录。并保证数据的完整性和可用性。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中基于Ceph分布式存储的磁带模拟网关大型机的组成图;
图2为本发明实施例中大型机的应用平台组成图;
图3为本发明实施例中Ceph分布式存储系统识别故障模型组成图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本申请实施例提供了一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统;
物理连接层:用于通过光纤交换机连接数据网关;
设备模拟层:用于通过光纤电缆连接光纤卡设备,光纤卡设备连接光纤交换机,光纤交换机与Ceph分布式存储系统物理连接;
数据网关模拟层:用于在接到磁带模拟网关大型机的磁带操作请求时,进行磁带模拟;其中,
数据网关实时运行有模拟软件。
如附图1所示,本发明在实施时存在物理连接、设备模拟和模拟行为三部分:
物理连接包括IBM大型机使用光纤电缆通过光纤交换机连接数据网关,使用FICON协议进行通讯。数据网关使用光纤电缆通过光纤卡设备经过光纤交换机与Ceph分布式存储系统进行物理连接。使用IP—SAN协议或NTFS协议与Ceph分布式存储进行通讯。
设备模拟包括数据网关通过其上运行的软件模拟IBM大型机的3590CU(ControlUnit)设备,响应光纤电缆传输的光信号,用以模拟磁带驱动器控制器和其下挂载和管辖的磁带驱动器设备。
模拟行为包括:数据网关在接到大型机的磁带操作时主要模拟以下几种操作:
磁带插带(Mount)、加载磁带(Load)、过带(Rewind)、读写(Read/Write)和卸载磁带(Unload);
当需要Mount磁带时,数据网关分向Ceph分布式存储系统请求分配一个磁带文件夹,该文件夹以大型机请求的磁带带标命名,文件夹中存储两个文件,分别存储磁带头信息和磁带数据信息。分配完成后,以磁带标信息和Mount带成功信息响应大型机。并将磁带文件关联至模拟的程序,随后大型机写入数据信息。附图2为本发明的具体应用实施平台组成图。
本发明的有益效果在于:
本发明通过通用服务器模拟若干物理磁带机,与IBM系列大型机进行物理连接,响应其发出的磁带使用的各种命令。将IBM系列大型机原本由物理磁带记录的数据,使用服务器后接的Ceph分布式存储记录,并保证数据的完整性和可用性,本发明中直接通过磁带模拟网关大型机在Ceph分布式存储系统中通过数据网关的控制进行磁带模拟,生成模拟磁带,模拟磁带具有物理磁带的功能,而且还不需要进行人工干预,全程的自动插拔磁带,而且磁带的容量是基于Ceph分布式存储系统的节点数量,只要可以连接的节点,每个节点只要有存储功能的设备,而且也是一种开源的分布式存储系统,性能好、可扩展性高,而且可靠性高。
可选的,本发明还有一种模拟验证步骤:
步骤1:获取磁带模拟的模拟数据,进行数据拆分,确定空间结构数据、模拟行为数据和空间容量数据,建立基于一段时间内磁带模拟的状态特征模型:
Figure BDA0003898107670000071
其中,K(t)表示在时间段t内磁带模拟的基准空间函数;mi表示磁带模拟的第i个时间点的存储状态特征;i为正整数,i∈n,n表示磁带模拟的状态提取的时间点总数;Ai表示磁带模拟的第i个时间点的存储数据的变化状态特征;ej*o*r表示磁带模拟的空间自然数;j表示磁带模拟的空间结构特征;o表示磁带模拟的模拟行为特征;r表示磁带模拟的容量参数;M表示一段时间内磁带模拟的状态特征模型;t表示时间段;
步骤2:获取磁带操作请求,建立基于模拟需求数据的模拟需求特征:
Figure BDA0003898107670000072
其中,qj表示磁带操作请求的第j个模拟需求数据的模拟请求特征;j∈m,m表示磁带操作请求中模拟需求数据的总数量;j为正整数;
步骤3:根据所述一段时间内磁带模拟的状态特征模型和模拟需求特征,计算需求状态相关性:
Figure BDA0003898107670000081
其中,F表示需求状态相关性的相关性值。
步骤4:预设相关性界限值,当需求状态相关性的值大于相关性界限值,表示磁带模拟符合磁带操作请求中的磁带模拟需求。
在上述步骤中,步骤1中,本发明是基于基准空间函数,在一段时间内,搭建模拟的磁带存贮数据的状态特征,用于判断显示磁带模拟中具备的各种行为方式,其状态特征也用于表征刺刀操作请求中的各种磁带的空间需求、结构需求和数据需求是否达到请求要求。在步骤2中,通过对磁带操作请求进行分析,确定模拟需求数据,确定模拟需求数据的具体特征,然后在步骤3中计算需求状态相关性,|M(t)∩X|表示存储状态和需求特征的交集,F为计算得到的具体的相关性值,通过这个具体相关性的值如果达到预设的相关性值标准,就表示磁带模拟是符合具体的磁带操作请求。
作为一种可能的实施方式,所述数据网关通过IP—SAN协议或NTFS协议与Ceph分布式存储系统进行通讯。
可选的,本发明采用的协议为IP—SAN协议或NTFS协议,IP—SAN协议是一种基于IP的网络技术,便于进行数据迁移和远程镜像,没有距离限制,容易异地存储和异地容灾,并且和网络基础设结构融合。可以无缝连接,没有容量限制。NTFS协议是Windows NT内核的系列操作系统支持的、一个特别为网络和磁盘配额、文件加密等管理安全特性设计的磁盘格式,提供长文件名、数据保护和恢复,能通过目录和文件许可实现安全性,并支持跨越分区。
作为一种可能的实施方式,所述磁带模拟包括:磁带插带、加载磁带、过带、读写和卸载磁带。
可选的,本发明可以执行磁带的多种操作,而本发明基于模拟的方式执行磁带的所有操作,能够保证磁带的安全性。
作为一种可能的实施方式,所述磁带插带包括:
数据网关向在Ceph分布式存储系统中请求分配一个磁带文件夹;其中,
磁带文件夹以磁带模拟网关大型机的请求作为磁带标命名;
磁带文件夹存储有磁带头信息和磁带数据信息;
磁带文件夹关联至数据网关的模拟软件后,磁带模拟网关大型机写入磁带插带数据。
可选的,本发明再进行磁带插带的模拟操作的过程中,和物理存储相同会生成一个磁带文件夹,但是对于物理磁带,其磁带文件夹的大小,结构和存储类型是固定的。但是本发明的磁带插带操作是不同的,本发明因为是基于磁带模拟的方式,首先快捷,可以快速生成文件夹,这个文件夹可以根据用户的需求进行定制,包括但不限于容量定制,存储类型定制和存储空间结构定制,存储协议定制,而对于物理存储的磁带,不具备定制的功能。其次,本发明可以对磁带文件夹进行命名,磁带的信息划分,然后关联到数据网关之后实现,磁带模拟网关大型机启动存储。
作为一种可能的实施方式,所述磁带模拟网关大型机通过FICON协议与数据网关进行通讯。
可选的,本发明磁带模拟网关大型机通过:“FICON协议”和数据网关通讯,FICON协议是一种光纤连接器的通讯协议,主要是基于光纤通道为标准基础,实现全双工和半双工的通讯。
作为一种可能的实施方式,所述磁带文件夹包括如下生成步骤:
步骤S1:用户在磁带模拟网关大型机的可视化操作页面上选定磁带模拟行为、磁带模拟数据和磁带模拟请求内容,并将选定后的磁带模拟行为、磁带模拟数据和磁带模拟请求内容发送到数据网关;
步骤S2:数据网关分别获取磁带模拟数据和磁带模拟请求内容,经判断筛选在Ceph分布式存储系统中构建对应的磁带文件夹;其中,
所述判断筛选包括:对磁带模拟数据进行正态分布变换,得到每一帧磁带模拟数据的模拟组成空间;其中,
所述模拟组成空间包括:提取磁带模拟数据中每一帧磁带模拟数据分别对应的空间特征,基于磁带模拟请求内容和空间特征,构建磁带文件夹。
可选的,磁带文件夹再生成的过程中,本发明是可以进行定制的,所以:“用户在磁带模拟网关大型机的可视化操作页面上选定磁带模拟行为、磁带模拟数据和磁带模拟请求内容”说明了磁带文件夹的根据可视化的操作页面进行定制,并且将对应的定制化内容发送到数据网关,数据网关根据这些定制化的内容构建对应磁带文件夹。本发明的判断筛选是基于正态分布变换,可以确定磁带文件夹的空间分布,而每一帧磁带模拟数据的组成方式,就是确定每一帧磁带模拟数据的对应的存储空间的空间特征。本发明通过组成磁带文件夹的具体步骤,能够实现磁带文件夹的空间模拟。
作为一种可能的实施方式,所述光纤交换机连接有物理存储器;其中,
物理存储器的存储数据向外输出时,存储数据通过变换格式为通用格式后进入光纤交换机;
光纤交换机输出的数据通过与对应的外部接口匹配,确定外部接口的输入格式,通过外部接口的输入格式将光纤交换机输出的数据进行再次格式转换,并转换为外部接口的输入格式。
可选的,本发明再具体实施的时候,还链接有物理存储器,物理存储器在常规实施时,存储磁带模拟的模拟数据和数据记录,也可以作为模拟存储的一个存储节点,进行数据存储,这部分的物理存储器也可以作为一个中转设备,将远程的模拟磁带中的数据传输到外部设备中,在这个过程中,需要进行外部接口匹配,与外部设备的接口进行匹配,并确定对应的输入格式,因为外部接口的格式基本无法进行控制,所以本发明采用的是将光纤交换机输出的数据进行转换后,进行输出,从而实现数据输出。
作为一种可能的实施方式,所述Ceph分布式存储系统中设置有故障分析模型、故障分类模型和故障定位模型;其中,
所述故障分析模型将磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告进行分析处理,并构建故障特征向量集;其中,
所述分析处理包括:将磁带模拟网关大型机的不同类型的故障表征转化为不同的数据表示形式,从磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告中提取特征向量;
所述故障分类模型通过故障特征向量集作为训练样本,进行训练预设的通用故障分类模型,得到多种故障识别子模型,通过多种故障识别子模型,识别磁带模拟网关大型机在存在故障时的故障类型;
所述故障定位模型通过粒子群优化算法计算各个多种故障识别子模型的故障数据的权重集合,每个权重对应有界限值,通过权重集合中超过界限值的权重值和故障表征,进行故障定位。
如附图3所示,本发明三个故障处理模型,故障分析模型、故障分类模型和故障定位模型,在实施时通过构建故障识别的特征向量集,然后通过训练能够确定故障的类型,最后基于粒子群优化,确定故障的打位置。具体的故障分析模型内会存在历史中出现过的故障数据,以及故障数据的分析报告,因此,可以通过历史数据对不同的故障进行量化分析,生成故障特征向量集。不同类型的故障表征,均具有不同的数据表示形式,表现形式包括但不限于数字表现形式,图谱表现形式,这些形式都可以进行向量转化。故障分类模型是基于历史数据作为样本数据,训练后,得到有多种故障识别子模型,进而对不同类型的故障进行识别,确定每一种故障数据。故障定位模型是基于粒子群优化算法故障数据,不同的故障位置,不同的数据量,其造成的故障表征内容不同,每一种故障也都有对应的权重值,当故障数据的故障权重超过了界限值,就代表其造成的故障表征太大,所以就可以对这部分表征内容进行定位。
作为一种可能的实施方式,所述Ceph分布式存储系统还包括:
命令发送模块:用于在磁带模拟时,向Ceph分布式存储系统发送磁带模拟的第一模拟命令,以输出Ceph分布式存储系统不同存储节点的模拟行为和模拟数据信息;其中,
所述第一模拟命令携带有磁带模拟行为的数据块标识;
命令接收模块:用于接收的第二模拟命令;其中,
第二模拟命令设有用于进行模拟类型识别的分类器;
类型模拟模块:用于通过第二模拟命令对Ceph分布式存储系统存储的模拟数据信息进行分类识别,确定模拟类型;其中,
模拟类型存储在模拟数据信息对应的附属磁盘中;
重命名模块:用于对不同类型的模拟行为执行重命名操作得到重命名副本,并将重命名副本存储至指定路径;其中,
指定路径设置于附属磁盘所属磁盘。
可选的,本发明在进行磁带模拟的过程中,会存在两个模拟命令,第一个模拟命令是确定具体的模拟行为和需要进行模拟的数据,也就是模拟进程数据,第二个模拟命令会进行模拟分类,这是在模拟行为细化之后的具体分类,分类包括,不同存储协议进行分类,不同的空间大小进行分类,这需要按照具体实施,具体部署相关的功能。而重命名模块是为了在模拟错误的时候,或者用户模拟行为选择错了,会进行对应的修改,在修改的过程中,会进行重命名,附属磁盘的作用是为了对不同的模拟行为进行具体的设定。
作为一种可能的实施方式,所述Ceph分布式存储系统上还设置有虚拟SAN设备;其中,
虚拟SAN设备由多个逻辑卷构成,每个逻辑卷有唯一的存储区域和存储编号;
当接收到磁带模拟的模拟指令时,确定模拟需求信息;
通过所述模拟需求信息,确定磁带模拟的空间结构和空间容量;
根据所述空间结构,通过不同的逻辑卷进行拼接,并生成所述空间结构的虚拟磁带;
通过所述模拟需求信息,确定需要加载的需求存储协议;
将所述需求存储协议配置在虚拟磁带中。
可选的,本发明在进行磁带模拟的不通操作中,为了实现更好的空间搭建,Ceph分布式存储系统的不同存储节点都是基于虚拟SAN设备的方式存储空间的搭建,为了更快速和便捷的根据用户的个性化定制不同的模拟行为,通过不同的逻辑卷进行拼接搭建,形成需要的空间结构,在这种情况下,只要逻辑卷的足够小,就可以实现任意空间结构和空间容量的搭建。而且,在空间结构搭建完成后,可以设置不同的存储协议,这些存储协议可以是不同接口的传输协议,不同数据类型的筛选协议,不同格式的数据的对接传输协议等等,但是不限于这些协议,从而实现更加快速和更加便捷的磁带模拟功能。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,包括:
物理连接层:用于通过光纤交换机连接数据网关;
设备模拟层:用于通过光纤电缆连接光纤卡设备,光纤卡设备连接光纤交换机,光纤交换机与Ceph分布式存储系统物理连接;
数据网关模拟层:用于在接到磁带模拟网关大型机的磁带操作请求时,进行磁带模拟;其中,
数据网关实时运行有模拟软件。
2.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述数据网关通过IP—SAN协议或NTFS协议与Ceph分布式存储系统进行通讯。
3.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述磁带模拟包括:磁带插带、加载磁带、过带、读写和卸载磁带。
4.如权利要求3所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述磁带插带包括:
数据网关向在Ceph分布式存储系统中请求分配一个磁带文件夹;其中,
磁带文件夹以磁带模拟网关大型机的请求作为磁带标命名;
磁带文件夹存储有磁带头信息和磁带数据信息;
磁带文件夹关联至数据网关的模拟软件后,磁带模拟网关大型机写入磁带插带数据。
5.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述磁带模拟网关大型机通过FICON协议与数据网关进行通讯。
6.如权利要求4所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述磁带文件夹包括如下生成步骤:
步骤S1:用户在磁带模拟网关大型机的可视化操作页面上选定磁带模拟行为、磁带模拟数据和磁带模拟请求内容,并将选定后的磁带模拟行为、磁带模拟数据和磁带模拟请求内容发送到数据网关;
步骤S2:数据网关分别获取磁带模拟数据和磁带模拟请求内容,经判断筛选在Ceph分布式存储系统中构建对应的磁带文件夹;其中,
所述判断筛选包括:对磁带模拟数据进行正态分布变换,得到每一帧磁带模拟数据的模拟组成空间;其中,
所述模拟组成空间包括:提取磁带模拟数据中每一帧磁带模拟数据分别对应的空间特征,基于磁带模拟请求内容和空间特征,构建磁带文件夹。
7.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述光纤交换机连接有物理存储器;其中,
物理存储器的存储数据向外输出时,存储数据通过变换格式为通用格式后进入光纤交换机;
光纤交换机输出的数据通过与对应的外部接口匹配,确定外部接口的输入格式,通过外部接口的输入格式将光纤交换机输出的数据进行再次格式转换,并转换为外部接口的输入格式。
8.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述Ceph分布式存储系统中设置有故障分析模型、故障分类模型和故障定位模型;其中,
所述故障分析模型将磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告进行分析处理,并构建故障特征向量集;其中,
所述分析处理包括:将磁带模拟网关大型机的不同类型的故障表征转化为不同的数据表示形式,从磁带模拟网关大型机出现的不同类型的故障表征历史数据和历史分析报告中提取特征向量;
所述故障分类模型通过故障特征向量集作为训练样本,进行训练预设的通用故障分类模型,得到多种故障识别子模型,通过多种故障识别子模型,识别磁带模拟网关大型机在存在故障时的故障类型;
所述故障定位模型通过粒子群优化算法计算各个多种故障识别子模型的故障数据的权重集合,每个权重对应有界限值,通过权重集合中超过界限值的权重值和故障表征,进行故障定位。
9.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述Ceph分布式存储系统还包括:
命令发送模块:用于在磁带模拟时,向Ceph分布式存储系统发送磁带模拟的第一模拟命令,以输出Ceph分布式存储系统不同存储节点的模拟行为和模拟数据信息;其中,
所述第一模拟命令携带有磁带模拟行为的数据块标识;
命令接收模块:用于接收的第二模拟命令;其中,
第二模拟命令设有用于进行模拟类型识别的分类器;
类型模拟模块:用于通过第二模拟命令对Ceph分布式存储系统存储的模拟数据信息进行分类识别,确定模拟类型;其中,
模拟类型存储在模拟数据信息对应的附属磁盘中;
重命名模块:用于对不同类型的模拟行为执行重命名操作得到重命名副本,并将重命名副本存储至指定路径;其中,
指定路径设置于附属磁盘所属磁盘。
10.如权利要求1所述的一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统,其特征在于,所述Ceph分布式存储系统上还设置有虚拟SAN设备;其中,
虚拟SAN设备由多个逻辑卷构成,每个逻辑卷有唯一的存储区域和存储编号;
当接收到磁带模拟的模拟指令时,确定模拟需求信息;
通过所述模拟需求信息,确定磁带模拟的空间结构和空间容量;
根据所述空间结构,通过不同的逻辑卷进行拼接,并生成所述空间结构的虚拟磁带;
通过所述模拟需求信息,确定需要加载的需求存储协议;
将所述需求存储协议配置在虚拟磁带中。
CN202211280587.7A 2022-10-19 2022-10-19 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统 Active CN115686363B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211280587.7A CN115686363B (zh) 2022-10-19 2022-10-19 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211280587.7A CN115686363B (zh) 2022-10-19 2022-10-19 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统

Publications (2)

Publication Number Publication Date
CN115686363A true CN115686363A (zh) 2023-02-03
CN115686363B CN115686363B (zh) 2023-09-26

Family

ID=85065946

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211280587.7A Active CN115686363B (zh) 2022-10-19 2022-10-19 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统

Country Status (1)

Country Link
CN (1) CN115686363B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050080992A1 (en) * 2002-12-17 2005-04-14 Barry Massey Apparatus and method for virtualizing data storage media, such as for use in a data storage library providing resource virtualization
CN1862476A (zh) * 2006-04-19 2006-11-15 华中科技大学 一种超大容量的虚拟磁盘存储系统
CN101815078A (zh) * 2009-02-24 2010-08-25 北京众志和达信息技术有限公司 嵌入式虚拟磁带库并行存储系统
CN104020961A (zh) * 2014-05-15 2014-09-03 深圳市深信服电子科技有限公司 分布式数据存储方法、装置及系统
US20160349993A1 (en) * 2015-05-29 2016-12-01 Cisco Technology, Inc. Data-driven ceph performance optimizations
CN108334281A (zh) * 2016-12-28 2018-07-27 布尔有限公司 在虚拟化存储系统中的数据存储方法
US20190044823A1 (en) * 2017-08-01 2019-02-07 Vmware, Inc. Management of a cloud-computing facility through a virtual infrastructure management server
CN111708488A (zh) * 2020-05-26 2020-09-25 苏州浪潮智能科技有限公司 一种基于分布式内存盘的Ceph性能优化的方法和设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050080992A1 (en) * 2002-12-17 2005-04-14 Barry Massey Apparatus and method for virtualizing data storage media, such as for use in a data storage library providing resource virtualization
CN1862476A (zh) * 2006-04-19 2006-11-15 华中科技大学 一种超大容量的虚拟磁盘存储系统
CN101815078A (zh) * 2009-02-24 2010-08-25 北京众志和达信息技术有限公司 嵌入式虚拟磁带库并行存储系统
CN104020961A (zh) * 2014-05-15 2014-09-03 深圳市深信服电子科技有限公司 分布式数据存储方法、装置及系统
US20160349993A1 (en) * 2015-05-29 2016-12-01 Cisco Technology, Inc. Data-driven ceph performance optimizations
CN108334281A (zh) * 2016-12-28 2018-07-27 布尔有限公司 在虚拟化存储系统中的数据存储方法
US20190044823A1 (en) * 2017-08-01 2019-02-07 Vmware, Inc. Management of a cloud-computing facility through a virtual infrastructure management server
CN111708488A (zh) * 2020-05-26 2020-09-25 苏州浪潮智能科技有限公司 一种基于分布式内存盘的Ceph性能优化的方法和设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
贾瑞勇等: "基于网络存储的异构集群文件系统研究与实现", 西北工业大学学报, no. 01 *

Also Published As

Publication number Publication date
CN115686363B (zh) 2023-09-26

Similar Documents

Publication Publication Date Title
US20220197516A1 (en) Tape library emulation with automatic configuration and data retention
JP3683867B2 (ja) 透過的エミュレーティング・インターフェースを有するハード・ディスク・ドライブのライブラリ
JPH09326796A (ja) コンピュータネットワーク通信をシミュレートするためのテストパケットの生成方法、及びその装置
US10037255B2 (en) Device, method and program for performing system testing
CN101694635B (zh) 基于虚拟磁带库备份的控制方法、系统及近线存储节点
JP2005501317A (ja) 外部データ記憶装置管理システムおよび方法
CN113009845B (zh) 一种卫星软件的仿真测试系统及方法
CN101901623A (zh) 外部存储系统、服务器和数据存储方法
US7603372B1 (en) Modeling file system operation streams
US7315922B2 (en) Disk array apparatus, information processing apparatus, data management system, method for issuing command from target side to initiator side, and computer product
CN110147296A (zh) 数据处理方法、装置、设备及可读存储介质
CN115686363B (zh) 一种基于Ceph分布式存储的IBM大型机的磁带模拟网关系统
JP2001125815A (ja) バックアップデータ管理システム
CN108460160A (zh) 数据库实例的下线方法、装置、终端及存储介质
CN103761202B (zh) 一种数据存储节点硬盘盘位识别方法及系统
CN106990916B (zh) 一种读写请求的处理方法及装置
CN109416617A (zh) 异构存储系统之间的复制
CN107402723A (zh) 读写数据的方法及存储系统
US20220100383A1 (en) Information processing apparatus, information processing method, and program
CN106611138B (zh) 一种ghost文件保密检查方法及装置
CN110443062A (zh) 多租户数据库的操作方法、装置和计算机设备
CN110532133B (zh) 一种低功耗大容量可扩充数据存储方法
CN105279095B (zh) 创建jbod文件系统的方法及装置
CN114158258B (zh) 实时动态地产生文件系统兼容性的方法
CN105830042B (zh) 利用描述读取和写入请求的数据迁移系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant