CN111064801A - 一种基于分布式文件系统的osd通信方法、装置及介质 - Google Patents
一种基于分布式文件系统的osd通信方法、装置及介质 Download PDFInfo
- Publication number
- CN111064801A CN111064801A CN201911367769.6A CN201911367769A CN111064801A CN 111064801 A CN111064801 A CN 111064801A CN 201911367769 A CN201911367769 A CN 201911367769A CN 111064801 A CN111064801 A CN 111064801A
- Authority
- CN
- China
- Prior art keywords
- osd
- communication
- file system
- distributed file
- storage node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000006854 communication Effects 0.000 title claims abstract description 220
- 238000004891 communication Methods 0.000 title claims abstract description 189
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000004590 computer program Methods 0.000 claims description 11
- 230000000694 effects Effects 0.000 claims description 8
- 230000009286 beneficial effect Effects 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 241000700605 Viruses Species 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请公开了一种基于分布式文件系统的OSD通信方法，包括：在分布式文件系统的各存储节点上创建通信平台；将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接；当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，目标通信平台为发送端OSD和接收端OSD之间的通信平台。因此，本方法能够大大降低存储节点上通信连接的数量，降低存储节点的网络压力；避免了由于创建大量的连接对OSD通信进程造成网络阻塞，提升OSD通信质量。本申请还公开了一种基于分布式文件系统的OSD通信装置及计算机可读存储介质，均具有上述有益效果。
Description
技术领域
本发明涉及分布式文件系统领域，特别涉及一种基于分布式文件系统的OSD通信方法、装置及计算机可读存储介质。
背景技术
目前，分布式文件系统(Distributed File System)已在计算机领域广泛应用。具体来说，分布式文件系统的设计基于客户机/服务器模式，在分布式文件系统中，一般包括多个存储节点，各存储节点上有多个OSD(Object Storage Device)，并且需要预先为各OSD之间建立通信连接，以便于各OSD能够相互进行通信。
现有技术中，是通过为各OSD两两之间建立通信连接的方式，实现分布式文件系统中的各OSD的互联。按照现有技术的方法，假设一个分布式文件系统中OSD的个数是n，那么该分布式文件系统中各OSD通信需要建立的连接数就是n(n-1)/2。当该分布式文件系统中增加OSD时，每增加一个OSD，该新增的OSD需要与分布式文件系统中其他每一个OSD建立连接。当分布式文件系统中的OSD数量较多时，每增加一个OSD，需要建立大量的连接，而建立大量的连接将增加存储节点的网络压力，从而影响OSD通信质量。
因此，如何降低分布式文件系统中存储节点的网络压力，提升OSD通信质量，是本领域技术人员目前需要解决的技术问题。
发明内容
有鉴于此，本发明的目的在于提供一种基于分布式文件系统的OSD通信方法，能够降低分布式文件系统中存储节点的网络压力，提升OSD通信质量；本发明的另一目的是提供一种基于分布式文件系统的OSD通信装置、设备及计算机可读存储介质，均具有上述有益效果。
为解决上述技术问题，本发明提供一种基于分布式文件系统的OSD通信方法，包括：
在分布式文件系统的各存储节点上创建通信平台；
将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接；
当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，所述目标通信平台为所述发送端OSD和所述接收端OSD之间的通信平台。
优选地，所述在分布式文件系统的各存储节点上创建通信平台的过程，具体为：
分别根据所述分布式存储系统的各所述存储节点上OSD的数量，在各所述存储节点上创建预设数量的所述通信平台。
优选地，所述为不同存储节点的所述通信平台建立连接的过程，具体包括：
利用连接池为不同存储节点的所述通信平台建立连接；
根据所述连接池对应的两个存储节点的配置和负载，动态调整所述连接池中的连接数量。
优选地，进一步包括：
显示各所述目标OSD通信进程的执行状态。
优选地，在所述在分布式文件系统的各存储节点上创建通信平台之后，进一步包括：
对各所述OSD进行合法性校验，并在校验通过后进入所述将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接的步骤。
优选地，进一步包括：
记录所述目标OSD通信进程的所述发送OSD和所述接收OSD。
优选地，进一步包括：
统计分析出所述分布式文件系统中各OSD的活跃度。
为解决上述技术问题，本发明还提供一种基于分布式文件系统的OSD通信装置，包括：
创建模块，用于在分布式文件系统的各存储节点上创建通信平台；
连接模块，用于将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接；
通信模块，用于当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，所述目标通信平台为所述发送端OSD和所述接收端OSD之间的通信平台。
优选地，所述创建模块具体包括：
创建子模块，用于分别根据所述分布式存储系统的各所述存储节点上OSD的数量，在各所述存储节点上创建预设数量的所述通信平台。
优选地，所述连接模块具体包括：
连接子模块，用于利用连接池为不同存储节点的所述通信平台建立连接；
调整子模块，用于根据所述连接池对应的两个存储节点的配置和负载，动态调整所述连接池中的连接数量。
优选地，进一步包括：
显示模块，用于显示各所述目标OSD通信进程的执行状态。
优选地，进一步包括：
校验模块，用于在所述在分布式文件系统的各存储节点上创建通信平台之后，进一步对各所述OSD进行合法性校验，并在校验通过后调用所述连接模块。
优选地，进一步包括：
记录模块，用于记录所述目标OSD通信进程的所述发送OSD和所述接收OSD。
优选地，进一步包括：
统计模块，用于统计分析出所述分布式文件系统中各OSD的活跃度。
为解决上述技术问题，本发明还提供另一种基于分布式文件系统的OSD通信装置，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现上述任一种基于分布式文件系统的OSD通信方法的步骤。
为解决上述技术问题，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一种基于分布式文件系统的OSD通信方法的步骤。
本发明提供的一种基于分布式文件系统的OSD通信方法，首先在分布式文件系统的各存储节点上创建通信平台；并将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接；因此，当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，所述目标通信平台为所述发送端OSD和所述接收端OSD之间的通信平台。因此，相较于现有技术中在增加OSD时需要将该新增的OSD分别与其他各OSD相连的技术方案，本方法仅需要将该新增的OSD与该新增的OSD所在的存储节点中的通信平台相连即可实现将该OSD与其他各OSD互联，各OSD通过通信平台进行通信，因此能够大大降低存储节点上通信连接的数量，降低存储节点的网络压力；避免了由于创建大量的连接对OSD通信进程造成网络阻塞，提升OSD通信质量。
为解决上述技术问题，本发明还提供了一种基于分布式文件系统的OSD通信装置及计算机可读存储介质，均具有上述有益效果。
附图说明
为了更清楚地说明本发明实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种基于分布式文件系统的OSD通信方法的流程图；
图2为本发明实施例提供的一种基于分布式文件系统的OSD通信装置的结构图；
图3为本发明实施例提供的另一种基于分布式文件系统的OSD通信装置的结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例的核心是提供一种基于分布式文件系统的OSD通信方法，能够降低分布式文件系统中存储节点的网络压力，提升OSD通信质量；本发明的另一核心是提供一种基于分布式文件系统的OSD通信装置及计算机可读存储介质，均具有上述有益效果。
为了使本领域技术人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。
图1为本发明实施例提供的一种基于分布式文件系统的OSD通信方法的流程图。如图1所示，一种基于分布式文件系统的OSD通信方法包括：
S10：在分布式文件系统的各存储节点上创建通信平台；
S20：将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接。
具体的，本实施例中，首先是在分布式文件系统的各存储节点上创建通信平台。其中，本实施例对任意一个存储节点上的通信平台的数量不做限定，且对各存储节点上的通信平台的数量是否相同也不做限定，但要求每个存储节点上至少有一个通信平台。
具体的，对于同一存储节点而言，将该存储节点上的各OSD分别与该存储节点上的通信平台相连，每个OSD只需要一个与通信平台的连接，就能实现该存储节点上的任意两个OSD的互联。对于不同的存储节点而言，需要将各不同的存储节点上的通信平台两两相连。需要说明的是，本实施例中所提供的建立连接的方式，是通过为各OSD或通信平台设置IP地址和通信端口实现的。
S30：当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；
其中，目标通信平台为发送端OSD和接收端OSD之间的通信平台。
具体的，当存在目标OSD通信进程时，即，发送端OSD需要将目标信息发送给接收端OSD时，发送端OSD先将目标信息发送给目标通信平台，目标通信平台查找与接收OSD对应的通信连接端口和IP地址，并据此将目标信息转发给接收端OSD，实现发送端OSD与接收端OSD的通信。
另外需要说明的是，对于某一个分布式文件系统而言，在创建通信平台，并利用通信平台将各OSD互联之后，在后续的OSD通信过程中，并不需要每次都再去创建通信平台，而是可以直接利用预先创建好的通信平台。
本发明实施例提供的一种基于分布式文件系统的OSD通信方法，首先在分布式文件系统的各存储节点上创建通信平台；并将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接；因此，当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，目标通信平台为发送端OSD和接收端OSD之间的通信平台。因此，相较于现有技术中在增加OSD时需要将该新增的OSD分别与其他各OSD相连的技术方案，本方法仅需要将该新增的OSD与该新增的OSD所在的存储节点中的通信平台相连即可实现将该OSD与其他各OSD互联，各OSD通过通信平台进行通信，因此能够大大降低存储节点上通信连接的数量，降低存储节点的网络压力；避免了由于创建大量的连接对OSD通信进程造成网络阻塞，提升OSD通信质量。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例中，在分布式文件系统的各存储节点上创建通信平台的过程，具体为：
分别根据分布式存储系统的各存储节点上OSD的数量，在各存储节点上创建预设数量的通信平台。
具体的，在本实施例中，是根据同一存储节点上的OSD的数量，为该存储节点创建预设数量的通信平台。例如，当某个存储节点上的OSD的数量小于第一数量阈值时，则可以创建一个通信平台；当该存储节点上的OSD的数量达到第一数量阈值时，则创建两个通信平台；当该存储节点上的OSD的数量达到第二数量阈值时，则创建三个通信平台；依次类推。
需要说明的是，若同一存储节点上设置了多个通信平台，那么也需要将该预设数量的通信平台互联。并且，对于同一存储节点而言，将该存储节点上的各OSD分别与设置在该存储节点上的通信平台相连，各OSD只要连接上该存储节点上的任意一个通信平台即可，并且，各OSD可以按照预设的分配策略与对应的通信平台相连。对于不同的存储节点而言，只需要存储节点中的任意一个通信平台与其他存储节点的通信平台相连即可。
可见，本实施例通过分别根据分布式存储系统的各存储节点上OSD的数量，在各存储节点上创建预设数量的通信平台，因此，在某个存储节点上的OSD数量较大时，能够相对降低通信平台的通信压力。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例在，为不同存储节点的通信平台建立连接的过程，具体包括：
利用连接池为不同存储节点的通信平台建立连接；
根据连接池对应的两个存储节点的配置和负载，动态调整连接池中的连接数量。
需要说明的是，在本实施例中，是利用连接池为不同的存储节点的通信平台建立连接，具体是在两个存储节点的通信平台之间设置连接池，并将该两个通信平台的通信连接端口设置于连接池中，然后，根据该两个通信平台分别对应的存储节点的配置和负载，动态调整连接池中的连接数量。
具体的，若存储节点的负载增加，则需要增加连接池中的连接数量，同时，存储节点的配置限制连接池中的最大连接数量。
可见，通过利用连接池为不同存储节点的通信平台建立连接，能够提高吞吐量；并且根据连接池对应的两个存储节点的配置和负载，动态调整连接池中的连接数量，可以灵活调节通信平台的连接数量，避免连接的冗余造成的资源浪费。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例进一步包括：
显示各目标OSD通信进程的执行状态。
需要说明的是，在本实施例中，是在利用通信平台执行目标OSD进程时，显示该目标OSD进程的执行状态，其中，执行状态包括发送成功或者发送失败。具体的，可以是直接利用存储节点的显示设备显示该执行状态，也可以是通过外接显示器显示该执行状态。需要说明的是，在实际操作中，还可以累计显示各目标OSD进程的执行状态，如通过表格的形式，按照执行的时间顺序，依次记录各目标OSD进程的执行状态。
可见，通过进一步显示各目标OSD通信进程的执行状态，能够便于用户直接查看各目标OSD通信进程的执行状态，进一步提升用户的使用体验。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例在在分布式文件系统的各存储节点上创建通信平台之后，进一步包括：
对各OSD进行合法性校验，并在校验通过后进入将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接的步骤。
具体的，在本实施例中，是在将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接之前，进一步对各OSD进行合法性校验。
可以理解的是，不同的OSD对应不同的硬盘，各硬盘的性能可能是不同的，因此对应的OSD的合法性可能是不同的。本实施例进一步对各OSD进行合法性校验，并将合法性校验通过的OSD连接到对应的通信平台上，避免存在安全风险的OSD连接到通信平台上，从而造成整个存储节点以及整个分布式文件系统的安全风险。并且，本实施例对合法性校验的具体方式不做限定，例如可以通过验证OSD对应的硬盘是否合法、是否存在预设的数字证书或者是否存在病毒等方式。
可见，本实施例通过进一步对OSD进行合法性校验，能够进一步保障分布式文件系统的OSD通信的安全性和效率。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例进一步包括：
记录目标OSD通信进程的发送OSD和接收OSD。
在本实施例中，是进一步获取各个目标OSD通信进程中所对应的发送OSD和接收OSD，并将发送OSD和接收OSD按照预设记录策略进行记录。具体的，可以是按照时间顺序依次在文本上记录目标OSD通信进程中的发送OSD和接收OSD，也可以是通过数据库表等形式进行记录，本实施例对此不做限定。
在上述实施例的基础上，本实施例对技术方案作了进一步的说明和优化，具体的，本实施例进一步包括：
统计分析出分布式文件系统中各OSD的活跃度。
需要说明的是，本实施例是基于记录的各目标OSD通信进程对应的发送OSD和接收OSD，分别统计各OSD参与OSD通信进程的次数，进而分析得出该分布式文件系统中各OSD的活跃度。可以理解的是，OSD参与OSD通信进程的次数越多，该OSD的活跃度越大。
可见，本实施例通过进一步统计分析出分布式文件系统中各OSD的活跃度，能够更便于用户分析分布式文件系统的整体性能。
上文对于本发明提供的一种基于分布式文件系统的OSD通信方法的实施例进行了详细的描述，本发明还提供了一种与该方法对应的基于分布式文件系统的OSD通信装置及计算机可读存储介质，由于装置、设备及计算机可读存储介质部分的实施例与方法部分的实施例相互照应，因此装置、设备及计算机可读存储介质部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。
图2为本发明实施例提供的一种基于分布式文件系统的OSD通信装置的结构图，如图2所示，一种基于分布式文件系统的OSD通信装置包括：
创建模块21，用于在分布式文件系统的各存储节点上创建通信平台；
连接模块22，用于将同一存储节点上的各OSD分别与相同存储节点上的通信平台建立连接，并为不同存储节点的通信平台建立连接；
通信模块23，用于当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，目标通信平台为发送端OSD和接收端OSD之间的通信平台。
本发明实施例提供的基于分布式文件系统的OSD通信装置，具有上述基于分布式文件系统的OSD通信方法的有益效果。
作为优选的实施方式，创建模块21具体包括：
创建子模块，用于分别根据分布式存储系统的各存储节点上OSD的数量，在各存储节点上创建预设数量的通信平台。
作为优选的实施方式，连接模块22具体包括：
连接子模块，用于利用连接池为不同存储节点的通信平台建立连接；
调整子模块，用于根据连接池对应的两个存储节点的配置和负载，动态调整连接池中的连接数量。
作为优选的实施方式，进一步包括：
显示模块，用于显示各目标OSD通信进程的执行状态。
作为优选的实施方式，进一步包括：
校验模块，用于在在分布式文件系统的各存储节点上创建通信平台之后，进一步对各OSD进行合法性校验，并在校验通过后调用连接模块。
作为优选的实施方式，进一步包括：
记录模块，用于记录目标OSD通信进程的发送OSD和接收OSD。
作为优选的实施方式，进一步包括：
统计模块，用于统计分析出分布式文件系统中各OSD的活跃度。
图3为本发明实施例提供的另一种基于分布式文件系统的OSD通信装置的结构图，如图3所示，一种基于分布式文件系统的OSD通信装置包括：
存储器31，用于存储计算机程序；
处理器32，用于执行计算机程序时实现如上述基于分布式文件系统的OSD通信方法的步骤。
本发明实施例提供的基于分布式文件系统的OSD通信装置，具有上述基于分布式文件系统的OSD通信方法的有益效果。
为解决上述技术问题，本发明还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述基于分布式文件系统的OSD通信方法的步骤。
本发明实施例提供的计算机可读存储介质，具有上述基于分布式文件系统的OSD通信方法的有益效果。
以上对本发明所提供的基于分布式文件系统的OSD通信方法、装置、设备及计算机可读存储介质进行了详细介绍。本文中应用了具体实施例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
Claims (10)
1.一种基于分布式文件系统的OSD通信方法，其特征在于，包括：
在分布式文件系统的各存储节点上创建通信平台；
将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接；
当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，所述目标通信平台为所述发送端OSD和所述接收端OSD之间的通信平台。
2.根据权利要求1所述的方法，其特征在于，所述在分布式文件系统的各存储节点上创建通信平台的过程，具体为：
分别根据所述分布式存储系统的各所述存储节点上OSD的数量，在各所述存储节点上创建预设数量的所述通信平台。
3.根据权利要求1所述的方法，其特征在于，所述为不同存储节点的所述通信平台建立连接的过程，具体包括：
利用连接池为不同存储节点的所述通信平台建立连接；
根据所述连接池对应的两个存储节点的配置和负载，动态调整所述连接池中的连接数量。
4.根据权利要求1所述的方法，其特征在于，进一步包括：
显示各所述目标OSD通信进程的执行状态。
5.根据权利要求1所述的方法，其特征在于，在所述在分布式文件系统的各存储节点上创建通信平台之后，进一步包括：
对各所述OSD进行合法性校验，并在校验通过后进入所述将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接的步骤。
6.根据权利要求1至5任一项所述的方法，其特征在于，进一步包括：
记录所述目标OSD通信进程的所述发送OSD和所述接收OSD。
7.根据权利要求6所述的方法，其特征在于，进一步包括：
统计分析出所述分布式文件系统中各OSD的活跃度。
8.一种基于分布式文件系统的OSD通信装置，其特征在于，包括：
创建模块，用于在分布式文件系统的各存储节点上创建通信平台；
连接模块，用于将同一存储节点上的各OSD分别与相同存储节点上的所述通信平台建立连接，并为不同存储节点的所述通信平台建立连接；
通信模块，用于当存在目标OSD通信进程时，利用目标通信平台将发送端OSD的目标信息转发给接收端OSD；其中，所述目标通信平台为所述发送端OSD和所述接收端OSD之间的通信平台。
9.一种基于分布式文件系统的OSD通信装置，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述的基于分布式文件系统的OSD通信方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的基于分布式文件系统的OSD通信方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911367769.6A CN111064801B (zh) | 2019-12-26 | 2019-12-26 | 一种基于分布式文件系统的osd通信方法、装置及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911367769.6A CN111064801B (zh) | 2019-12-26 | 2019-12-26 | 一种基于分布式文件系统的osd通信方法、装置及介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111064801A true CN111064801A (zh) | 2020-04-24 |
| CN111064801B CN111064801B (zh) | 2023-06-13 |
Family
ID=70304013
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911367769.6A Active CN111064801B (zh) | 2019-12-26 | 2019-12-26 | 一种基于分布式文件系统的osd通信方法、装置及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111064801B (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3203386A1 (en) * | 2014-12-27 | 2017-08-09 | Huawei Technologies Co. Ltd. | Data processing method, apparatus and system |
| CN107395765A (zh) * | 2017-08-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种分布式文件系统、网络通信方法、平台及其创建方法 |
| CN107608632A (zh) * | 2017-09-21 | 2018-01-19 | 郑州云海信息技术有限公司 | 一种分布式存储集群的通信方法、装置及系统 |
| CN108509157A (zh) * | 2018-04-13 | 2018-09-07 | 郑州云海信息技术有限公司 | 一种应用于分布式文件系统的数据均衡方法及装置 |
| CN108667903A (zh) * | 2018-04-03 | 2018-10-16 | 新华三技术有限公司 | 数据发送方法、装置和存储介质 |
| CN109213637A (zh) * | 2018-11-09 | 2019-01-15 | 浪潮电子信息产业股份有限公司 | 分布式文件系统集群节点的数据恢复方法、装置及介质 |
-
2019
- 2019-12-26 CN CN201911367769.6A patent/CN111064801B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3203386A1 (en) * | 2014-12-27 | 2017-08-09 | Huawei Technologies Co. Ltd. | Data processing method, apparatus and system |
| CN107395765A (zh) * | 2017-08-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种分布式文件系统、网络通信方法、平台及其创建方法 |
| CN107608632A (zh) * | 2017-09-21 | 2018-01-19 | 郑州云海信息技术有限公司 | 一种分布式存储集群的通信方法、装置及系统 |
| CN108667903A (zh) * | 2018-04-03 | 2018-10-16 | 新华三技术有限公司 | 数据发送方法、装置和存储介质 |
| CN108509157A (zh) * | 2018-04-13 | 2018-09-07 | 郑州云海信息技术有限公司 | 一种应用于分布式文件系统的数据均衡方法及装置 |
| CN109213637A (zh) * | 2018-11-09 | 2019-01-15 | 浪潮电子信息产业股份有限公司 | 分布式文件系统集群节点的数据恢复方法、装置及介质 |
Non-Patent Citations (2)
| Title |
|---|
| HUAPING SHEN, MOHAN KUMAR: ""Energy-efficient_caching_and_prefetching_with_data_consistency_in_mobile_distributed_systems"", 《18TH INTERNATIONAL PARALLEL AND DISTRIBUTED PROCESSING SYMPOSIUM, 2004. PROCEEDINGS》 * |
| 胡永奎: ""对象存储设备中文件系统的设计与实现"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111064801B (zh) | 2023-06-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9742667B2 (en) | Packet processing method, device and system | |
| EP3389219A1 (en) | Access request conversion method and device | |
| CN112104754B (zh) | 网络代理方法、系统、装置、设备及存储介质 | |
| US8554980B2 (en) | Triggered notification | |
| US20170163478A1 (en) | Method,electronic device and system for updating client configuration in key-value pair database | |
| CN114124929B (zh) | 跨网络的数据处理方法和装置 | |
| CN110177128B (zh) | 数据传输系统及其建立vpn连接的方法、终端、vpn代理 | |
| CN106301864B (zh) | 一种服务器系统扩容方法、装置及扩容处理设备 | |
| CN107181636B (zh) | 一种负载均衡系统中的健康检查方法及装置 | |
| CN108337163B (zh) | 用于汇聚链路的方法和装置 | |
| CN111984561A (zh) | 一种bmc的ipmi命令处理方法、系统、设备以及介质 | |
| CN102739619B (zh) | 一种数据通信方法和装置 | |
| CN110086719B (zh) | 数据处理方法、装置及服务器 | |
| CN113179295B (zh) | 报文处理方法及装置 | |
| CN104519069A (zh) | 一种拦截资源请求的方法和装置 | |
| US8966321B2 (en) | Logical port and layer protocol test configuration resource manager | |
| CN111064801A (zh) | 一种基于分布式文件系统的osd通信方法、装置及介质 | |
| CN111416851A (zh) | 在多个负载均衡器之间进行会话同步的方法和负载均衡器 | |
| CN114826728B (zh) | 设备认证方法、物联网终端设备、电子设备以及存储介质 | |
| US20030204586A1 (en) | Intelligent data replicator | |
| CN115714778A (zh) | 一种sip动态负载均衡方法、系统、设备和存储介质 | |
| CN112948803B (zh) | 应用程序的登录方法、系统、设备和存储介质 | |
| CN104202297A (zh) | 一种动态地适应服务器性能的防攻击方法和设备 | |
| WO2021128936A1 (zh) | 报文的处理方法及装置 | |
| CN114157716A (zh) | 基于区块链的数据处理方法、装置和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |