CN106713493A - 一种在计算机集群环境中构建分布式文件系统及方法 - Google Patents

一种在计算机集群环境中构建分布式文件系统及方法 Download PDF

Info

Publication number
CN106713493A
CN106713493A CN201710042891.0A CN201710042891A CN106713493A CN 106713493 A CN106713493 A CN 106713493A CN 201710042891 A CN201710042891 A CN 201710042891A CN 106713493 A CN106713493 A CN 106713493A
Authority
CN
China
Prior art keywords
node
user
calculate
management node
management
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710042891.0A
Other languages
English (en)
Other versions
CN106713493B (zh
Inventor
朱红
刘羽
金莲
任丹琴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710042891.0A priority Critical patent/CN106713493B/zh
Publication of CN106713493A publication Critical patent/CN106713493A/zh
Application granted granted Critical
Publication of CN106713493B publication Critical patent/CN106713493B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种在计算机集群环境中构建分布式文件系统及方法,管理节点,存储节点,交换机,计算节点,IP地址设置模块,挂载模块;每个管理节点,每个存储节点及多个计算节点通过交换机连接到一起;管理节点用于使用户通过管理节点登录,并使用计算节点上的计算资源;存储节点的数据共享给集群中的所有计算节点和管理节点使用;在每个存储节点上部署ssh协议的服务器端守护进程sshd服务;在每个计算节点和每个管理节点上部署用户空间文件系统;在每个计算节点和每个管理节点上部署sshfs服务;系统可以较好的规避NFS文件系统在使用中潜在的问题。从而可以替代NFS在计算机集群中的相关功能。

Description

一种在计算机集群环境中构建分布式文件系统及方法
技术领域
本发明涉及计算机文件处理领域,尤其涉及一种在计算机集群环境中构建分布式文件系统及方法。
背景技术
计算机集群(computercluster)是指通过网络连接的一些计算节点组成的整体,这些计算节点通过软件调度协同工作,使得整个集群的运行模式如同一台单一计算机一样。当前,计算机集群技术现在已经广泛的应用于大数据、云计算、高性能计算等多个IT领域。
分布式文件系统(distributedfile system)是计算机集群,特别是高性能计算集群系统中常见的组成部分,通过分布式文件系统,集群中的计算节点可以共享位于其他节点上的数据。在高性能计算集群中,一种常见的分布式文件系统是NFS(networkfilesystem)协议,NFS协议允许客户端计算机(client)通过计算机网络像访问本地存储一样访问其他计算机上通过NFS协议共享的文件。
当前,NFS协议已经被广泛的应用在高性能计算集群中。一种常见的使用方式是通过NFS协议把存储节点上的/home目录在集群中共享,计算节点通过mount的方式即可以挂载该目录并读写其中的数据。从而实现整个计算机集群共享同一个/home目录的效果。对于当前主流的NFS文件共享方式,Server端的共享和Client端的挂载都只能通过root权限完成,限制了普通用户进行操作的可能。一旦client端的挂载完成,client端就具有了对整个挂载目录的操作权限,存在一定的安全风险。
发明内容
为了克服上述现有技术中的不足,本发明提供一种在计算机集群环境中构建分布式文件系统,包括:至少一个管理节点,至少一个存储节点,交换机,至少一个计算节点,IP地址设置模块,挂载模块;
每个管理节点,每个存储节点及多个计算节点通过交换机连接到一起;
管理节点用于使用户通过管理节点登录,并使用计算节点上的计算资源;
存储节点的数据共享给集群中的所有计算节点和管理节点使用;
IP地址设置模块用于对每个管理节点,每个存储节点,每个计算节点设置IP地址;
每个管理节点,每个存储节点及每个计算节点均部署操作系统;
在每个存储节点上部署ssh协议的服务器端守护进程sshd服务;
在每个计算节点和每个管理节点上部署用户空间文件系统;
在每个计算节点和每个管理节点上部署sshfs服务;
挂载模块用于集群中的任意用户在存储节点中存储的数据,并通过sshfs服务挂载到计算节点和管理节点上的对应目录下。
优选地,还包括:用户注册模块;
用户注册模块用于使系统提供普通用户注册客户端及root用户注册客户端;
普通用户注册客户端提供给用户注册普通用户账户及密码,root用户注册客户端提供给用户注册root用户账户及密码;
普通用户使用sshfs服务卸载以该用户权限挂载在计算节点和管理节点上的目录;
root用户把存储节点中的数据,挂载到计算节点和管理节点上的对应目录下;root用户使用sshfs服务卸载所有通过上述方式挂载的,计算节点和管理节点上的目录。
优选地,管理节点和存储节点共享一个物理节点,即存储节点兼做管理节点的功能.
优选地,还包括:一个或者多个交换机;设置多个交换机则整个集群的采用星型网络拓扑结构,或环形网络拓扑结构,或总线网络拓扑结构,或树形网络拓扑结构,或网状网络拓扑结构。
优选地,每个管理节点,每个存储节点,每个计算节点均使用的是同一个Linux操作系统。类型和版本号
优选地,所有节点通过NIS服务共享同一套用户账户和密码,或者每个管理节点,每个存储节点,每个计算节点均建立单独的用户账户和密码。
一种在计算机集群环境中构建分布式文件方法,方法包括,
S1:部署操作系统;
S2:创建普通用户和root用户;
S3:配置SSH服务;
S4:部署用户空间文件系统;
S5:部署sshfs服务;
S6:普通用户的文件挂载和卸载,root用户的文件挂载和卸载。
优选地,步骤S1还包括:
将所有节点部署于同一子网,操作系统部署完成后,分别设置每个管理节点,每个存储节点,每个计算节点IP地址,使每个管理节点,每个存储节点,每个计算节点相互ping通;
步骤S2还包括:
在管理节点创建普通用户,并设置对应的用户密码以及创建root用户并设置对应密码;
存储节点和计算节点通过NIS服务共享管理节点上的用户名和密码;或在存储节点创建普通用户和对应的密码以及在计算节点创建普通用户和对应的密码。
优选地,步骤S3还包括:在管理节点、存储节点、计算节点上配置并启动SSH服务;配置后普通用户从管理节点,或计算节点通过ssh相互登录,并可以通过scp、rsync命令发送,接收数据;
步骤S4还包括:root用户执行挂载操作和卸载操作。
优选地,步骤S6还包括:
普通用户的home目录为/home/user1/,user1为一普通用户的用户名;
在管理节点、存储节点、计算节点上都设置/home/user1/目录;
uer1用户在登录管理节点后,使用如下命令,把存储节点上的目录挂载到管理节点上:
>sshfs user1@存储节点2:/home/user1//home/user1/
接下来,user1依次登录每个计算节点,执行上述命令,把存储节点上的目录挂载到每个计算节点上;
管理节点和每个计算节点的/home/user1/的内容均来自存储节点上/home/user1/内容的共享;
在管理节点,计算节点上的文件创建、读写、删除都对应于存储节点上的相应文件的创建、读写和删除;
当用户user1在某个节点上卸载/home/user1/时,使用如下命令:>fusermount-u/home/user1/;
root用户用于把普通用户所有的/home/目录进行挂载或卸载,或者对所有的普通用户的/home/目录进行挂载或卸载。
从以上技术方案可以看出,本发明具有以下优点:
在计算机集群环境中构建分布式文件系统可以较好的规避NFS文件系统在使用中潜在的问题。从而可以替代NFS在计算机集群中的相关功能。
附图说明
为了更清楚地说明本发明的技术方案,下面将对描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为在计算机集群环境中构建分布式文件方法流程图;
图2为在计算机集群环境中构建分布式文件系统实施例示意图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将运用具体的实施例及附图,对本发明保护的技术方案进行清楚、完整地描述,显然,下面所描述的实施例仅仅是本发明一部分实施例,而非全部的实施例。基于本专利中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本专利保护的范围。
本实施例提供一种在计算机集群环境中构建分布式文件系统,包括:至少一个管理节点,至少一个存储节点,交换机,至少一个计算节点,IP地址设置模块,挂载模块;
每个管理节点,每个存储节点及多个计算节点通过交换机连接到一起;管理节点用于使用户通过管理节点登录,并使用计算节点上的计算资源;存储节点的数据共享给集群中的所有计算节点和管理节点使用;IP地址设置模块用于对每个管理节点,每个存储节点,每个计算节点设置IP地址;每个管理节点,每个存储节点及每个计算节点均部署操作系统;在每个存储节点上部署ssh协议的服务器端守护进程sshd服务;在每个计算节点和每个管理节点上部署用户空间文件系统;在每个计算节点和每个管理节点上部署sshfs服务;挂载模块用于集群中的任意用户在存储节点中存储的数据,并通过sshfs服务挂载到计算节点和管理节点上的对应目录下。
系统还包括:用户注册模块;用户注册模块用于使系统提供普通用户注册客户端及root用户注册客户端;普通用户注册客户端提供给用户注册普通用户账户及密码,root用户注册客户端提供给用户注册root用户账户及密码;普通用户使用sshfs服务卸载以该用户权限挂载在计算节点和管理节点上的目录;root用户把存储节点中的数据,挂载到计算节点和管理节点上的对应目录下;root用户使用sshfs服务卸载所有通过上述方式挂载的,计算节点和管理节点上的目录。
管理节点和存储节点共享一个物理节点,即存储节点兼做管理节点的功能.系统还包括:一个或者多个交换机;设置多个交换机则整个集群的采用星型网络拓扑结构,或环形网络拓扑结构,或总线网络拓扑结构,或树形网络拓扑结构,或网状网络拓扑结构。
每个管理节点,每个存储节点,每个计算节点均使用的是同一个Linux操作系统。类型和版本号所有节点通过NIS服务共享同一套用户账户和密码,或者每个管理节点,每个存储节点,每个计算节点均建立单独的用户账户和密码。
本发明还提供一种在计算机集群环境中构建分布式文件方法,如图1所示,方法包括,
S1:部署操作系统;
S2:创建普通用户和root用户;
S3:配置SSH服务;
S4:部署用户空间文件系统;
S5:部署sshfs服务;
S6:普通用户的文件挂载和卸载,root用户的文件挂载和卸载。
本实施例以一个管理节点1,一个存储节点2,一个交换机3,计算节点11,计算节点12,计算节点13为例,如图2所示,
将所有节点部署于同一子网,操作系统部署完成后,分别设置管理节点1,存储节点2,计算节点11,计算节点12,计算节点13的IP地址,使管理节点1,存储节点2,计算节点11,计算节点12,计算节点13相互ping通;比如192.168.1.*或者10.10.10.*。
在管理节点1创建普通用户,比如user1、user2、user3,并设置对应的用户密码以及创建root用户并设置对应密码;存储节点2,计算节点11,计算节点12,计算节点13通过NIS服务共享管理节点1上的用户名和密码;或在存储节点2创建普通用户user1、user2、user3和对应的密码以及在计算节点创建普通用户user1、user2、user3和对应的密码。
部署用户空间文件系统,在管理节点、存储节点、计算节点上配置并启动SSH服务;配置后普通用户可以从管理节点1,存储节点2,计算节点11,计算节点12,计算节点13之间可以通过ssh相互登录。并可以通过scp、rsync等命令发送,接收数据。
在本方法中,挂载操作和卸载操作是只有root用户才能执行的操作,普通用户权限不能执行这两项操作。
部署sshfs服务提供了普通用户挂载文件系统的权限,为了使某计算节点上的普通用户可以访问其他节点上的文件,需要使用一些网络传输协议,比如ftp、sftp、http等。通过网络传输协议进行远程挂载,比如sshfs、ftpfs、CurlFtpFS等。
普通用户的文件挂载和卸载,root用户的文件挂载和卸载。普通用户的文件挂载和卸载。以普通用户user1为例,user1的home目录为/home/user1/;在管理节点1,存储节点2、计算节点11,计算节点12,计算节点13上都有该目录。user1用户在登录管理节点1后,使用如下命令,即可把存储节点2上的目录挂载到管理节点1上:
>sshfs user1@存储节点2:/home/user1//home/user1/
接下来,user1依次登录计算节点11,计算节点12,计算节点13,执行上述命令,即可把存储节点2上的目录挂载到计算节点11,计算节点12,计算节点13上。
此时,管理节点1和计算节点11,计算节点12,计算节点13的/home/user1/的内容均来自存储节点2上/home/user1/内容的共享。所以在管理节点1,计算节点11,计算节点12,计算节点13上的文件创建、读写、删除都实际对应于存储节点2上的相应文件的创建、读写和删除。
当user1用户想在某个上卸载/home/user1/时,可以使用如下命令:>fusermount-u/home/user1/。
root用户的文件挂载和卸载,root用户可以一次性把所以普通用户的/home/目录进行挂载和卸载。在管理节点1和计算节点11,计算节点12,计算节点13上一次执行如下命令:>sshfs root@存储节点2:/home//home/。
另外,对于其他想要在整个集群上共享的目录,比如/opt/目录,也可以照此方式进行挂载:
>sshfs root@存储节点2:/opt/opt
同样,root用户可以对其挂载的目录进行卸载,使用如下命令:
>fusermount-u/home/
>fusermount-u/opt/
root用户用于把普通用户所有的/home/目录进行挂载或卸载,或者对所有的普通用户的/home/目录进行挂载或卸载。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参考即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种在计算机集群环境中构建分布式文件系统,其特征在于,包括:至少一个管理节点,至少一个存储节点,交换机,至少一个计算节点,IP地址设置模块,挂载模块;
每个管理节点,每个存储节点及多个计算节点通过交换机连接到一起;
管理节点用于使用户通过管理节点登录,并使用计算节点上的计算资源;
存储节点的数据共享给集群中的所有计算节点和管理节点使用;
IP地址设置模块用于对每个管理节点,每个存储节点,每个计算节点设置IP地址;
每个管理节点,每个存储节点及每个计算节点均部署操作系统;
在每个存储节点上部署ssh协议的服务器端守护进程sshd服务;
在每个计算节点和每个管理节点上部署用户空间文件系统;
在每个计算节点和每个管理节点上部署sshfs服务;
挂载模块用于集群中的任意用户在存储节点中存储的数据,并通过sshfs服务挂载到计算节点和管理节点上的对应目录下。
2.根据权利要求1所述的在计算机集群环境中构建分布式文件系统,
还包括:用户注册模块;
用户注册模块用于使系统提供普通用户注册客户端及root用户注册客户端;
普通用户注册客户端提供给用户注册普通用户账户及密码,root用户注册客户端提供给用户注册root用户账户及密码;
普通用户使用sshfs服务卸载以该用户权限挂载在计算节点和管理节点上的目录;
root用户把存储节点中的数据,挂载到计算节点和管理节点上的对应目录下;root用户使用sshfs服务卸载所有通过上述方式挂载的,计算节点和管理节点上的目录。
3.根据权利要求1或2所述的在计算机集群环境中构建分布式文件系统,
管理节点和存储节点共享一个物理节点,即存储节点兼做管理节点的功能。
4.根据权利要求1或2所述的在计算机集群环境中构建分布式文件系统,
还包括:一个或者多个交换机;设置多个交换机则整个集群的采用星型网络拓扑结构,或环形网络拓扑结构,或总线网络拓扑结构,或树形网络拓扑结构,或网状网络拓扑结构。
5.根据权利要求2所述的在计算机集群环境中构建分布式文件系统,
每个管理节点,每个存储节点,每个计算节点均使用的是同一个Linux操作系统,类型和版本号。
6.根据权利要求2所述的在计算机集群环境中构建分布式文件系统,
所有节点通过NIS服务共享同一套用户账户和密码,或者每个管理节点,每个存储节点,每个计算节点均建立单独的用户账户和密码。
7.一种在计算机集群环境中构建分布式文件方法,其特征在于,方法包括,
S1:部署操作系统;
S2:创建普通用户和root用户;
S3:配置SSH服务;
S4:部署用户空间文件系统;
S5:部署sshfs服务;
S6:普通用户的文件挂载和卸载,root用户的文件挂载和卸载。
8.根据权利要求7所述的在计算机集群环境中构建分布式文件方法,其特征在于,方法包括,
步骤S1还包括:
将所有节点部署于同一子网,操作系统部署完成后,分别设置每个管理节点,每个存储节点,每个计算节点IP地址,使每个管理节点,每个存储节点,每个计算节点相互ping通;
步骤S2还包括:
在管理节点创建普通用户,并设置对应的用户密码以及创建root用户并设置对应密码;
存储节点和计算节点通过NIS服务共享管理节点上的用户名和密码;或在存储节点创建普通用户和对应的密码以及在计算节点创建普通用户和对应的密码。
9.根据权利要求7所述的在计算机集群环境中构建分布式文件方法,其特征在于,方法包括,
步骤S3还包括:在管理节点、存储节点、计算节点上配置并启动SSH服务;配置后普通用户从管理节点,或计算节点通过ssh相互登录,并可以通过scp、rsync命令发送,接收数据;
步骤S4还包括:root用户执行挂载操作和卸载操作。
10.根据权利要求7所述的在计算机集群环境中构建分布式文件方法,其特征在于,方法包括,
步骤S6还包括:
普通用户的home目录为/home/user1/,user1为一普通用户的用户名;
在管理节点、存储节点、计算节点上都设置/home/user1/目录;
uer1用户在登录管理节点后,使用如下命令,把存储节点上的目录挂载到管理节点上:
>sshfs user1@存储节点2:/home/user1//home/user1/
接下来,user1依次登录每个计算节点,执行上述命令,把存储节点上的目录挂载到每个计算节点上;
管理节点和每个计算节点的/home/user1/的内容均来自存储节点上/home/user1/内容的共享;
在管理节点,计算节点上的文件创建、读写、删除都对应于存储节点上的相应文件的创建、读写和删除;
当用户user1在某个节点上卸载/home/user1/时,使用如下命令:>fusermount-u/home/user1/;
root用户用于把普通用户所有的/home/目录进行挂载或卸载,或者对所有的普通用户的/home/目录进行挂载或卸载。
CN201710042891.0A 2017-01-20 2017-01-20 一种在计算机集群环境中构建分布式文件系统及方法 Active CN106713493B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710042891.0A CN106713493B (zh) 2017-01-20 2017-01-20 一种在计算机集群环境中构建分布式文件系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710042891.0A CN106713493B (zh) 2017-01-20 2017-01-20 一种在计算机集群环境中构建分布式文件系统及方法

Publications (2)

Publication Number Publication Date
CN106713493A true CN106713493A (zh) 2017-05-24
CN106713493B CN106713493B (zh) 2020-09-29

Family

ID=58909992

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710042891.0A Active CN106713493B (zh) 2017-01-20 2017-01-20 一种在计算机集群环境中构建分布式文件系统及方法

Country Status (1)

Country Link
CN (1) CN106713493B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172061A (zh) * 2017-06-07 2017-09-15 郑州云海信息技术有限公司 一种实现共享的方法和系统
CN107515732A (zh) * 2017-08-28 2017-12-26 郑州云海信息技术有限公司 一种适用于多用户场景的存储方法和系统
WO2019000979A1 (zh) * 2017-06-30 2019-01-03 华为技术有限公司 一种文件系统的权限设置方法及装置
CN109684822A (zh) * 2018-12-30 2019-04-26 深圳开立生物医疗科技股份有限公司 多用户访问环境配置方法、装置、设备及多联机系统
CN109995878A (zh) * 2019-04-12 2019-07-09 成都四方伟业软件股份有限公司 资源库共享方法及分布式集群系统
CN111885158A (zh) * 2020-07-22 2020-11-03 曙光信息产业(北京)有限公司 一种集群任务处理方法、装置、电子设备及存储介质
CN111881103A (zh) * 2020-06-21 2020-11-03 苏州浪潮智能科技有限公司 一种基于nfs共享的ldap域用户acl权限控制方法及装置
CN114745385A (zh) * 2022-04-12 2022-07-12 吉林大学 一种构建slurm调度并行计算集群的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030054875A (ko) * 2001-12-26 2003-07-02 한국전자통신연구원 리눅스 기반의 클러스터 시스템의 운영체제 원격 자동설치 방법
CN102169448A (zh) * 2011-03-18 2011-08-31 浪潮电子信息产业股份有限公司 一种集群并行运算环境的部署方法
CN102591679A (zh) * 2011-11-30 2012-07-18 中国科学院计算机网络信息中心 一种集群系统应用软件快速部署方法
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN105022779A (zh) * 2015-05-07 2015-11-04 云南电网有限责任公司电力科学研究院 一种利用Filesystem API实现HDFS文件存取方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030054875A (ko) * 2001-12-26 2003-07-02 한국전자통신연구원 리눅스 기반의 클러스터 시스템의 운영체제 원격 자동설치 방법
CN102169448A (zh) * 2011-03-18 2011-08-31 浪潮电子信息产业股份有限公司 一种集群并行运算环境的部署方法
CN102591679A (zh) * 2011-11-30 2012-07-18 中国科学院计算机网络信息中心 一种集群系统应用软件快速部署方法
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN105022779A (zh) * 2015-05-07 2015-11-04 云南电网有限责任公司电力科学研究院 一种利用Filesystem API实现HDFS文件存取方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172061A (zh) * 2017-06-07 2017-09-15 郑州云海信息技术有限公司 一种实现共享的方法和系统
WO2019000979A1 (zh) * 2017-06-30 2019-01-03 华为技术有限公司 一种文件系统的权限设置方法及装置
US11238175B2 (en) 2017-06-30 2022-02-01 Huawei Technologies Co., Ltd. File system permission setting method and apparatus
CN107515732A (zh) * 2017-08-28 2017-12-26 郑州云海信息技术有限公司 一种适用于多用户场景的存储方法和系统
CN109684822A (zh) * 2018-12-30 2019-04-26 深圳开立生物医疗科技股份有限公司 多用户访问环境配置方法、装置、设备及多联机系统
CN109995878A (zh) * 2019-04-12 2019-07-09 成都四方伟业软件股份有限公司 资源库共享方法及分布式集群系统
CN111881103A (zh) * 2020-06-21 2020-11-03 苏州浪潮智能科技有限公司 一种基于nfs共享的ldap域用户acl权限控制方法及装置
CN111881103B (zh) * 2020-06-21 2022-07-19 苏州浪潮智能科技有限公司 一种基于nfs共享的ldap域用户acl权限控制方法及装置
CN111885158A (zh) * 2020-07-22 2020-11-03 曙光信息产业(北京)有限公司 一种集群任务处理方法、装置、电子设备及存储介质
CN111885158B (zh) * 2020-07-22 2023-05-02 曙光信息产业(北京)有限公司 一种集群任务处理方法、装置、电子设备及存储介质
CN114745385A (zh) * 2022-04-12 2022-07-12 吉林大学 一种构建slurm调度并行计算集群的方法

Also Published As

Publication number Publication date
CN106713493B (zh) 2020-09-29

Similar Documents

Publication Publication Date Title
CN106713493A (zh) 一种在计算机集群环境中构建分布式文件系统及方法
US11637906B2 (en) Private service endpoints in isolated virtual networks
JP6974218B2 (ja) ストレージシステム及びその動作方法
EP2228968B1 (en) System and method for transparent cloud access
CN109428922A (zh) 一种订阅发布方法及服务器
CN106790420B (zh) 一种多会话通道建立方法和系统
US20070150492A1 (en) Method and system for allocating file in clustered file system
CN105635342B (zh) 建立连接的方法、域名服务器以及存储节点
CN103078944B (zh) 基于分布式对称文件系统的数据中心架构
CN106484322A (zh) 一种挂载文件系统的方法、装置及设备
CN103795530B (zh) 一种跨域控制器认证的方法、装置及主机
CN104618164A (zh) 云计算平台应用快速部署的管理方法
EP3229413B1 (en) Cross-domain cooperative method, cooperative device and control device for network as a service business
CN105812321B (zh) 一种基于用户信息管理文件资源的网络文件系统和处理方法
US10523753B2 (en) Broadcast data operations in distributed file systems
CN106686117A (zh) 一种分布式计算集群的数据存储处理系统及方法
CN105323310A (zh) 网络通信方法、设备及网络附属存储设备
WO2014141283A1 (en) Access control in a secured cloud environment
JP7003876B2 (ja) 通信システム及び通信方法
CN111464622A (zh) 分布式存储系统中的卷映射处理方法及装置
CN111585786A (zh) 一种大数据集群免密搭建方法的实现
CN107172061A (zh) 一种实现共享的方法和系统
CN105071965A (zh) 一种网络设备的管理系统
CN110417741A (zh) 一种过滤安全组的方法和装置
CN109408487A (zh) 一种nas文件系统下文件处理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200819

Address after: 215100 No. 1 Guanpu Road, Guoxiang Street, Wuzhong Economic Development Zone, Suzhou City, Jiangsu Province

Applicant after: SUZHOU LANGCHAO INTELLIGENT TECHNOLOGY Co.,Ltd.

Address before: 450000 Henan province Zheng Dong New District of Zhengzhou City Xinyi Road No. 278 16 floor room 1601

Applicant before: ZHENGZHOU YUNHAI INFORMATION TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant