CN105282196A - 一种文件的共享方法、装置及系统 - Google Patents
一种文件的共享方法、装置及系统 Download PDFInfo
- Publication number
- CN105282196A CN105282196A CN201410309185.4A CN201410309185A CN105282196A CN 105282196 A CN105282196 A CN 105282196A CN 201410309185 A CN201410309185 A CN 201410309185A CN 105282196 A CN105282196 A CN 105282196A
- Authority
- CN
- China
- Prior art keywords
- node
- file
- section point
- sharing
- document conveyance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明适用于网络文件系统领域,提供了一种文件的共享方法、装置及系统,所述方法包括:获取集群的网络拓扑结构;根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。本发明,实现了第一节点和第二节点之间文件的共享。其中,第一节点和第二节点是处于不同网段的两个节点,解决了NFS下,不能直接连通的两个节点之间的文件共享问题,适用于集群中的大规模节点不处于同一网段,需要共享数据的两个节点不能互联互通的场景下。
Description
技术领域
本发明属于网络文件系统领域,尤其涉及一种文件的共享方法、装置及系统。
背景技术
网络文件系统(NetworkFileSystem,NFS)作为一个常用的文件共享系统,在集群中得到了广泛的应用。
基于NFS的扩展系统为云检验检测公共服务平台提供稳定可靠的文件共享以及传输服务。考虑到云检验检测系统要达到10万节点的规模,而这些节点并不一定处于同一网段,而底层确需要统一的文件系统。
然而,现有的NFS只能在联网的节点间进行文件的共享,需要通过跳转才能连通的节点之间不能进行文件的共享,当集群中节点的数量可能达到几千台时,并不一定所有的节点都处于同一网段,这时如果要用NFS进行文件的共享,将不可能实现。
发明内容
本发明实施例提供了一种文件的共享方法、装置及系统,旨在解决现有技术提供的文件的共享方法,使得集群内部处于不同网段的节点之间不能通过NFS进行文件的共享的问题。
一方面,提供一种文件的共享方法,所述方法包括:
获取集群的网络拓扑结构;
根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;
从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;
通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
进一步地,所述从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径包括:
获取所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量;
根据所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
进一步地,通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点包括:
建立第一节点、各个跳转节点和第二节点之间的NFS连接;
通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
进一步地,在所述通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点之后,还包括:
断开第一节点、各个跳转节点和第二节点之间的NFS连接。。
另一方面,提供一种文件的共享装置,所述装置包括:
网络拓扑结构获取单元,用于获取集群的网络拓扑结构;
文件传输路径确定单元,用于根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;
文件共享路径确定单元,用于从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;
文件共享单元,用于通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
进一步地,文件共享路径确定单元包括:
节点信息获取模块,用于获取所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量;
文件共享路径确定模块,用于根据所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
进一步地,所述文件共享单元包括:
NFS连接建立模块,用于建立第一节点、各个跳转节点和第二节点之间的NFS连接;
文件共享模块,用于通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
进一步地,所述装置还包括:
连接释放单元,用于断开第一节点、各个跳转节点和第二节点之间的NFS连接。
又一方面,提供一种文件的共享系统,所述系统包括集群,所述系统还包括与所述集群连接的集群控制器,所述集群控制器包括如上所述的文件的共享装置。
在本发明实施例,实现了第一节点和第二节点之间文件的共享。其中,第一节点和第二节点是处于不同网段的两个节点,解决了NFS下,不能直接连通的两个节点之间的文件共享问题,适用于集群中的大规模节点不处于同一网段,需要共享数据的两个节点不能互联互通的场景下。
附图说明
图1是本发明实施例一提供的文件的共享方法的实现流程图;
图2是本发明实施例二提供的文件的共享装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在本发明实施例中,先获取集群的网络拓扑结构,再根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,其中,第一节点和第二节点是处于不同网段的两个节点,然后从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径,最后通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
以下结合具体实施例对本发明的实现进行详细描述:
实施例一
图1示出了本发明实施例一提供的文件的共享方法的实现流程,详述如下:
在步骤S101中,获取集群的网络拓扑结构。
在本发明实施例中,集群控制器获取集群的网络拓扑结构。
其中,网络拓扑结构相当于集群中各节点的联通图,类似于“节点地图”,可以集群中节点的分布情况信息。
具体的,分布情况信息可以反映集群中各个节点所处的网段。其中,可以同时和两个以上的网段中的节点联通的节点被称为跳转节点。比如,节点A和节点B处于不同网段,但是节点C可以和节点A联通,也可以和节点B联通,则节点C可以作为节点A和节点B之间的跳板节点。
在步骤S102中,根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点。
在本发明实施例中,如果第一节点需要将获取到的文件发送给第二节点,以实现两个节点之间文件的共享,则集群控制器首先需要根据获取的网络拓扑结构确定第一节点传输文件至第二节点时的文件传输路径。
集群控制器根据网络拓扑结构判断第一节点和第二节点是否处于不同网段,如果是,则通过网络拓扑结构确定文件从第一节点传输至第二节点所需要经过的跳转节点,第一节点、跳转节点和第二节点可以组成一条或者多条文件传输路径,通过这些文件传输路径可以将第一节点获取的文件传输至第二节点。
需要说明的是,本实施例中的第一节点和第二节点中的第一、第二,并不是指节点的编号顺序,只是为了标识两个不同的节点。
在步骤S103中,从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
在本发明实施例中,集群控制器根据网络的拓扑结构确定的文件传输路径可能至少有2条,在具体实现时,可以从多条文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
文件共享路径的选取主要考虑2个因素:第一,考虑文件传输路径中包括的跳板节点的数量,文件共享路径中尽量包括少的跳板节点;第二,考虑文件传输路径中相邻节点间的传输带宽,因为传输带宽决定文件的传输速度,传输速度取决于文件共享路径上的两个节点间的最小传输速度,因此要尽量避开传输速度较慢的跳板节点。
具体的,集群控制器先获取文件传输路径中相邻节点间的传输带宽信息和/或文件传输路径中包括的跳板节点的数量,再根据文件传输路径中相邻节点间的传输带宽信息和/或文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
在步骤S104中,通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
在本发明实施例中,确定好文件共享路径后,集群控制器先建立第一节点、文件共享路径中的各个跳转节点和第二节点之间的NFS连接,再通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
优选地,在集群中的第一节点和第二节点之间共享文件结束之后,集群控制器断开第一节点、各个跳转节点和第二节点之间的NFS连接,进行资源的回收,以减少不必要带宽的占用。
本实施例,通过集群的网络拓扑结构确定第一节点和第二节点之间的文件传输路径后,从中选取一条传输速度最快的文件传输路径作为第一节点和第二节点之间的文件共享路径,最后通过文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点,实现第一节点和第二节点之间文件的共享。其中,第一节点和第二节点是处于不同网段的两个节点,解决了NFS下,不能直接连通的两个节点之间的文件共享问题,适用于集群中的大规模节点不处于同一网段,需要共享数据的两个节点不能互联互通的场景下。
本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,相应的程序可以存储于一计算机可读取存储介质中,所述的存储介质,如ROM/RAM、磁盘或光盘等。
实施例二
图2示出了本发明实施例二提供的文件的共享装置的具体结构框图,为了便于说明,仅示出了与本发明实施例相关的部分。该文件的共享装置可以是内置于集群控制器中的软件单元、硬件单元或者软硬件结合的单元。并且,该集群控制器可以和集群连接,与集群组成一个文件的共享系统,控制集群中的相应跳转节点,由第一节点将获取到的文件发送给跳转节点,再由跳转节点依次转发给第二节点,从而实现处于不同网段的第一节点和第二节点之间的文件的共享。具体的,所述文件的共享装置2包括:网络拓扑结构获取单元21、文件传输路径确定单元22、文件共享路径确定单元23和文件共享单元24。
其中,网络拓扑结构获取单元21,用于获取集群的网络拓扑结构;
文件传输路径确定单元22,用于根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;
文件共享路径确定单元23,用于从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;
文件共享单元24,用于通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
具体的,所述文件共享路径确定单元23包括:
节点信息获取模块,用于获取所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量;
文件共享路径确定模块,用于根据所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
具体的,所述文件共享单元24包括:
NFS连接建立模块,用于建立第一节点、各个跳转节点和第二节点之间的NFS连接;
文件共享模块,用于通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
进一步地,所述装置2还包括:
连接释放单元,用于断开第一节点、各个跳转节点和第二节点之间的NFS连接。
本发明实施例提供的文件的共享装置可以应用在前述对应的方法实施例一中,详情参见上述实施例一的描述,在此不再赘述。
值得注意的是,上述装置实施例中,所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (9)
1.一种文件的共享方法,其特征在于,所述方法包括:
获取集群的网络拓扑结构;
根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;
从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;
通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
2.如权利要求1所述的方法,其特征在于,所述从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径包括:
获取所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量;
根据所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
3.如权利要求1或2所述的方法,其特征在于,通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点包括:
建立第一节点、各个跳转节点和第二节点之间的NFS连接;
通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
4.如权利要求3所述的方法,其特征在于,在所述通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点之后,还包括:
断开第一节点、各个跳转节点和第二节点之间的NFS连接。
5.一种文件的共享装置,其特征在于,所述装置包括:
网络拓扑结构获取单元,用于获取集群的网络拓扑结构;
文件传输路径确定单元,用于根据所述网络拓扑结构确定第一节点和第二节点之间的文件传输路径,所述第一节点和第二节点是处于不同网段的两个节点;
文件共享路径确定单元,用于从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径;
文件共享单元,用于通过所述文件共享路径中的跳转节点将第一节点获取的文件发送给第二节点。
6.如权利要求5所述的装置,其特征在于,所述文件共享路径确定单元包括:
节点信息获取模块,用于获取所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量;
文件共享路径确定模块,用于根据所述文件传输路径中相邻节点间的传输带宽信息和/或所述文件传输路径中包括的跳板节点的数量从所述文件传输路径中选取一条作为第一节点和第二节点之间的文件共享路径。
7.如权利要求5或6所述的装置,其特征在于,所述文件共享单元包括:
NFS连接建立模块,用于建立第一节点、各个跳转节点和第二节点之间的NFS连接;
文件共享模块,用于通过各个跳转节点依次将第一节点获取的文件发送给第二节点。
8.如权利要求7所述的装置,其特征在于,所述装置还包括:
连接释放单元,用于断开第一节点、各个跳转节点和第二节点之间的NFS连接。
9.一种文件的共享系统,所述系统包括集群,其特征在于,所述系统还包括与所述集群连接的集群控制器,所述集群控制器包括如权利要求5至8任一项所述的文件的共享装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410309185.4A CN105282196A (zh) | 2014-06-30 | 2014-06-30 | 一种文件的共享方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410309185.4A CN105282196A (zh) | 2014-06-30 | 2014-06-30 | 一种文件的共享方法、装置及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105282196A true CN105282196A (zh) | 2016-01-27 |
Family
ID=55150518
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410309185.4A Pending CN105282196A (zh) | 2014-06-30 | 2014-06-30 | 一种文件的共享方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105282196A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111078633A (zh) * | 2019-10-17 | 2020-04-28 | 珠海格力电器股份有限公司 | 设备集群中设备的联通方法、装置、存储介质、电子设备 |
CN114116200A (zh) * | 2021-10-27 | 2022-03-01 | 北京百度网讯科技有限公司 | 资源共享方法、服务创建方法、装置和电子设备 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1893707A (zh) * | 2005-06-29 | 2007-01-10 | 株式会社Ntt都科摩 | 通信终端及通信方法 |
CN101163081A (zh) * | 2006-10-11 | 2008-04-16 | 村田机械株式会社 | 文件转送服务器 |
CN101610274A (zh) * | 2008-06-18 | 2009-12-23 | 中兴通讯股份有限公司 | 一种基于企业融合通信平台的数据同步方法 |
CN102075426A (zh) * | 2011-01-14 | 2011-05-25 | 中兴通讯股份有限公司 | 一种mff手工模式下的报文传输方法及装置 |
WO2013102486A1 (en) * | 2012-01-02 | 2013-07-11 | Nokia Siemens Networks Oy | Method and device for conveying data across at least two domains |
CN103379032A (zh) * | 2012-04-24 | 2013-10-30 | 中兴通讯股份有限公司 | 跨域端到端路由的获取方法及装置、子路由计算实体 |
CN103580908A (zh) * | 2012-08-10 | 2014-02-12 | 百度在线网络技术(北京)有限公司 | 服务器的配置方法及系统 |
-
2014
- 2014-06-30 CN CN201410309185.4A patent/CN105282196A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1893707A (zh) * | 2005-06-29 | 2007-01-10 | 株式会社Ntt都科摩 | 通信终端及通信方法 |
CN101163081A (zh) * | 2006-10-11 | 2008-04-16 | 村田机械株式会社 | 文件转送服务器 |
CN101610274A (zh) * | 2008-06-18 | 2009-12-23 | 中兴通讯股份有限公司 | 一种基于企业融合通信平台的数据同步方法 |
CN102075426A (zh) * | 2011-01-14 | 2011-05-25 | 中兴通讯股份有限公司 | 一种mff手工模式下的报文传输方法及装置 |
WO2013102486A1 (en) * | 2012-01-02 | 2013-07-11 | Nokia Siemens Networks Oy | Method and device for conveying data across at least two domains |
CN103379032A (zh) * | 2012-04-24 | 2013-10-30 | 中兴通讯股份有限公司 | 跨域端到端路由的获取方法及装置、子路由计算实体 |
CN103580908A (zh) * | 2012-08-10 | 2014-02-12 | 百度在线网络技术(北京)有限公司 | 服务器的配置方法及系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111078633A (zh) * | 2019-10-17 | 2020-04-28 | 珠海格力电器股份有限公司 | 设备集群中设备的联通方法、装置、存储介质、电子设备 |
CN111078633B (zh) * | 2019-10-17 | 2023-09-12 | 珠海格力电器股份有限公司 | 设备集群中设备的联通方法、装置、存储介质、电子设备 |
CN114116200A (zh) * | 2021-10-27 | 2022-03-01 | 北京百度网讯科技有限公司 | 资源共享方法、服务创建方法、装置和电子设备 |
CN114116200B (zh) * | 2021-10-27 | 2024-04-05 | 北京百度网讯科技有限公司 | 资源共享方法、服务创建方法、装置和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111935315A (zh) | 区块同步方法及装置 | |
US7760665B2 (en) | Selective node tracking | |
CN103688497A (zh) | 跨域路径的建立方法及设备 | |
CN103036787A (zh) | 一种网络路由收敛处理方法和装置 | |
CN103281158B (zh) | 深度网络通信粒度检测方法及其检测设备 | |
CN106817387B (zh) | 一种数据同步方法、装置和系统 | |
CN107547374B (zh) | 一种聚合路由处理方法和装置 | |
CN111291008A (zh) | 数据处理方法、装置、系统、电子设备及计算机存储介质 | |
CN112202877A (zh) | 网关联动方法、网关、云服务器及用户终端 | |
US10313470B2 (en) | Hierarchical caching and analytics | |
CN110324166A (zh) | 一种在多个节点中同步目标信息的方法、装置及系统 | |
CN107995047B (zh) | 一种数据中心的拓扑组网方法及装置 | |
CN105282196A (zh) | 一种文件的共享方法、装置及系统 | |
CN108718287B (zh) | 数据交换系统及其建立方法和装置以及通信系统 | |
CN114422526B (zh) | 一种区块同步方法、装置、电子设备和存储介质 | |
CN105187465A (zh) | 一种文件的共享方法、装置及系统 | |
CN102843285A (zh) | 一种分布式链路聚合方法及实现该方法的节点 | |
CN103391232B (zh) | 云端系统中的虚拟机器连线方法 | |
CN104796794A (zh) | 一种视频传输路径的确定方法及装置 | |
WO2016206516A1 (zh) | 交换网络同步方法及交换装置、接入装置、存储介质 | |
CN115022340A (zh) | 一种运行联盟链网络的方法 | |
CN103595631A (zh) | 一种路径建立的方法和装置 | |
CN104580328A (zh) | 虚拟机迁移方法、装置及系统 | |
CN113396573B (zh) | 计算服务的迁移 | |
CN109165304B (zh) | 区块链的构造方法、介质及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160127 |