CN103365982B - 访问集群文件系统的方法及主机 - Google Patents
访问集群文件系统的方法及主机 Download PDFInfo
- Publication number
- CN103365982B CN103365982B CN201310278595.2A CN201310278595A CN103365982B CN 103365982 B CN103365982 B CN 103365982B CN 201310278595 A CN201310278595 A CN 201310278595A CN 103365982 B CN103365982 B CN 103365982B
- Authority
- CN
- China
- Prior art keywords
- main frame
- file system
- cluster file
- disk
- frame group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提出访问集群文件系统的方法及主机。方法包括：主机对可访问集群文件系统所在的各磁盘进行格式化处理，格式化完成后，将本主机群的唯一标识写入该集群文件系统所在的一磁盘上；当任一主机访问集群文件系统时，从该集群文件系统所在的对应磁盘上读取数据，判断读取的数据是否与本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问。本发明避免了在访问集群文件系统时出错和数据损坏。
Description
技术领域
本发明涉及集群文件系统（ClusterFileSystem）技术领域，尤其涉及访问集群文件系统的方法及主机。
背景技术
集群文件系统（ClusterFileSystem）是用来供多个物理服务器节点同时访问的文件系统。集群文件系统一般用于高可用性（HA，High-availability）、负载均衡处理中；业界不同的厂商推出了多种集群文件系统，也有开源地集群文件系统的实现。
集群文件系统中一般都配置了可以访问该文件系统的主机列表。主机列表是能够访问该集群文件系统的物理主机的集合。主机列表组成一个群，成为主机群。为了在管理上方便使用，集群文件系统的名称一般和主机群的名称一致。
图1给出了现有的存储-集群文件系统的组网图，如图1所示，主机群1可通过存储网络访问集群文件系统1，主机群2可通过存储网络访问集群文件系统2。
现有的集群文件系统理论上只支持一个主机群内的主机的访问。对于集群文件系统来说，访问该系统的单个主机群下的主机间能够相互通信，实现对于资源的互斥访问，从而保证数据的安全性和完整性。
在实际应用中，可能位于不同主机群中的主机都被配置为能够访问同一虚拟磁盘。而当不同主机群共同访问同一磁盘时，由于位于不同主机群的主机之间没有通信信息交流，这样可能会导致磁盘的损坏，从而导致数据访问的不安全性，在管理上也不便于控制。
发明内容
本发明提供访问集群文件系统的方法及主机，以避免不同主机群中的主机对同一集群文件系统的访问，从而避免访问出错和数据损坏。
本发明的技术方案是这样实现的：
一种访问集群文件系统的方法，该方法包括：
对于任一集群文件系统，创建可访问该集群文件系统的唯一主机群，为该主机群分配唯一标识，在该主机群中的每一主机上配置该集群文件系统的地址、本主机群的唯一标识，同时配置本主机群的唯一标识应写入的磁盘位置，所述磁盘为集群文件系统所在的磁盘；
主机群中的一主机通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理，格式化完成后，根据自身配置的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置；
当主机群的任一主机要访问集群文件系统时，根据自身配置的本主机群的唯一标识所在的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与自身配置的本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问。
所述为该主机群分配唯一标识为：
根据该主机群的数目和/或配置信息，生成该主机群的唯一标识；
或者，为该主机群随机生成一个通用唯一标识UUID。
所述主机群的配置信息包括：主机群中的各个主机的名称和/或IP地址。
所述配置本主机群的唯一标识应写入的磁盘位置为：
将本主机群的唯一标识应写入的磁盘位置预先写入本主机群的各主机的集群文件系统驱动模块中；
且，当主机群的任一主机要访问集群文件系统时，所述从该集群文件系统所在的对应磁盘的对应位置读取数据为：
当主机访问集群文件系统时，该主机的集群文件系统驱动模块开始运行，该驱动模块主动读取自身记录的本主机群的唯一标识应写入的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据；
且，所述判断读取的数据是否与自身配置的本主机群的唯一标识一致为：所述驱动模块判断读取的数据是否与本主机配置的本主机群的唯一标识一致。
所述本主机群的唯一标识应写入的磁盘位置为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的超级块中或者该磁盘的尾部。
一种访问集群文件系统的主机，该主机包括：
配置模块：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址，记录本主机群的唯一标识应写入的磁盘位置，所述磁盘为本主机群可访问集群文件系统所在的磁盘；
访问模块：当要访问集群文件系统时，根据配置模块记录的本主机群的唯一标识所在的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与配置模块记录的本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
所述主机进一步包括：磁盘格式化模块，用于当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理时，格式化完成后，根据配置模块记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
所述配置模块记录的本主机群的唯一标识应写入的磁盘位置为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的超级块中或者该磁盘的尾部。
一种访问集群文件系统的主机，该主机包括：
配置模块：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址；
集群文件系统驱动模块：记录本主机群的唯一标识应写入的磁盘位置，所述磁盘为本主机群可访问集群文件系统所在的磁盘；当发现本主机访问集群文件系统时，根据记录的本主机群的唯一标识应写入的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，将该数据与配置模块记录的本主机群的唯一标识进行对比，判断二者是否一致，若是，允许访问该集群文件系统，否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
所述集群文件系统驱动模块进一步用于，当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理时，格式化完成后，根据记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
可见，本发明可以避免不同主机群中的主机对同一集群文件系统的访问，从而避免访问出错和数据损坏。
附图说明
图1为现有的存储-集群文件系统的组网图；
图2为本发明实施例提供的访问集群文件系统的方法流程图；
图3为本发明实施例一提供的访问集群文件系统的主机的组成示意图；
图4为本发明实施例二提供的访问集群文件系统的主机的组成示意图。
具体实施方式
下面结合附图及具体实施例对本发明再作进一步详细的说明。
图2为本发明实施例提供的访问集群文件系统的方法流程图，如图2所示，其具体步骤如下：
步骤200：对于任一集群文件系统m，创建可访问该集群文件系统m的唯一主机群m，为该主机群m分配摘要或者通用唯一标识（UUID，UniversallyUniqueIdentifier），在该主机群m中的每一主机上配置集群文件系统m的地址、本主机群m的摘要或UUID，同时配置主机群m的摘要或UUID所在的磁盘位置信息。
其中，主机群m的摘要或UUID所在的磁盘位置指的是，主机群m的摘要或UUID在可访问集群文件系统m所在磁盘组的具体哪块磁盘的哪个位置上。主机群m的摘要或UUID是在如下步骤201中由主机群m中的一个主机写入集群文件系统m所在磁盘组的其中一块磁盘的固定位置上的。
具体地，可以将主机群m的摘要或UUID所在的磁盘位置信息写入主机群m的每个主机的集群文件系统驱动模块中。
步骤201：主机群m中的一主机通过存储网络对集群文件系统m所在的各磁盘进行格式化处理，格式化完成后，根据自身配置的本主机群m的摘要或UUID所在的磁盘位置信息，将本主机群m的摘要或UUID写入对应磁盘的对应位置。
可由主机群m中的任一主机对集群文件系统m所在的各磁盘进行格式化处理。
主机群m的摘要或UUID可以写入到磁盘的超级块（SuperBlock）中、磁盘的尾部等位置。
主机群的摘要或UUID是主机群的唯一标志。其中，主机群的摘要是采用MD5或SHA算法对主机群的配置信息进行计算得到的，主机群的配置信息包括但不限于：主机群中的主机数目、主机群中的各个主机的配置信息如：主机的名称、IP地址等。主机群的UUID是在创建主机群时随机生成的。
步骤202：当主机群m的任一主机要访问集群文件系统m时，根据自身配置的本主机群m的摘要或UUID所在的磁盘位置信息，从集群文件系统m所在的对应磁盘的对应位置读取数据。
步骤203：该主机判断读取的数据是否与自身配置的本主机群m的摘要或UUID一致，若是，执行步骤204；否则，执行步骤205。
例如：当主机群m的摘要或UUID所在的磁盘位置信息被写入到每个主机的集群文件系统驱动模块中时，当任一主机访问集群文件系统m时，该驱动模块开始运行，该驱动模块会主动读取自身记录的主机群m的摘要或UUID所在的磁盘位置信息，根据该磁盘位置信息主动从对应磁盘的对应位置读取到数据，并判断读取的数据是否与本主机群m的摘要或UUID一致。
步骤204：主机开始访问集群文件系统m，本流程结束。
步骤205：主机放弃对该集群文件系统m的访问，并向用户提示错误信息。
从图2所示实施例可以看出：由创建的可访问集群文件系统的合法主机将主机群的唯一标识信息写入集群文件系统所在磁盘，后续当主机访问集群文件系统时，根据磁盘上的主机群的唯一标识进行认证，从而避免了其他主机群中的主机对该集群文件系统的访问，因而避免了对数据的交叉访问，避免了访问出错和数据损坏。
图3为本发明实施例一提供的访问集群文件系统的主机的组成示意图，如图3所示，其主要包括：配置模块31和访问模块32，其中：
配置模块31：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址，记录本主机群的唯一标识应写入的磁盘位置，该磁盘为本主机群可访问集群文件系统所在的磁盘。
其中，主机群的唯一标识可为：根据该主机群的数目和/或配置信息生成的；或者为：为该主机群随机生成的UUID。主机群的配置信息包括：主机群中的各个主机的名称和/或IP地址。
本主机群的唯一标识应写入的磁盘位置可为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的SuperBlock中或者该磁盘的尾部。
访问模块32：当要访问集群文件系统时，根据配置模块31记录的本主机群的唯一标识所在的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与配置模块31记录的本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
在实际应用中，图3所示主机可进一步包括：磁盘格式化模块，用于当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理时，格式化完成后，根据配置模块31记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
图4为本发明实施例二提供的访问集群文件系统的主机的组成示意图，如图4所示，其主要包括：配置模块41和集群文件系统驱动模块42，其中：
配置模块41：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址。
其中，主机群的唯一标识可为：根据该主机群的数目和/或配置信息生成的；或者为：为该主机群随机生成的UUID。主机群的配置信息包括：主机群中的各个主机的名称和/或IP地址。
集群文件系统驱动模块42：记录本主机群的唯一标识应写入的磁盘位置，该磁盘为本主机群可访问集群文件系统所在的磁盘；当发现本主机访问集群文件系统时，根据记录的本主机群的唯一标识应写入的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与配置模块41中的主机群的唯一标识一致，若是，允许访问该集群文件系统；否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
其中，本主机群的唯一标识应写入的磁盘位置可为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的SuperBlock中或者该磁盘的尾部。
在实际应用中，集群文件系统驱动模块42可进一步用于，当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理时，格式化完成后，根据记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。
Claims (10)
1.一种访问集群文件系统的方法，其特征在于，该方法包括：
对于任一集群文件系统，创建可访问该集群文件系统的唯一主机群，为该主机群分配唯一标识，在该主机群中的每一主机上配置该集群文件系统的地址、本主机群的唯一标识，同时配置本主机群的唯一标识应写入的磁盘位置，所述磁盘为集群文件系统所在的磁盘；
主机群中的一主机通过存储网络对可访问集群文件系统所在的各磁盘进行格式化处理，格式化完成后，根据自身配置的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置；
当主机群的任一主机要访问集群文件系统时，根据自身配置的本主机群的唯一标识所在的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与自身配置的本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问。
2.根据权利要求1所述的方法，其特征在于，所述为该主机群分配唯一标识为：
根据该主机群的数目和/或配置信息，生成该主机群的唯一标识；
或者，为该主机群随机生成一个通用唯一标识UUID。
3.根据权利要求2所述的方法，其特征在于，所述主机群的配置信息包括：主机群中的各个主机的名称和/或IP地址。
4.根据权利要求1所述的方法，其特征在于，所述配置本主机群的唯一标识应写入的磁盘位置为：
将本主机群的唯一标识应写入的磁盘位置预先写入本主机群的各主机的集群文件系统驱动模块中；
且，当主机群的任一主机要访问集群文件系统时，所述从该集群文件系统所在的对应磁盘的对应位置读取数据为：
当主机访问集群文件系统时，该主机的集群文件系统驱动模块开始运行，该驱动模块主动读取自身记录的本主机群的唯一标识应写入的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据；
且，所述判断读取的数据是否与自身配置的本主机群的唯一标识一致为：所述驱动模块判断读取的数据是否与本主机配置的本主机群的唯一标识一致。
5.根据权利要求1所述的方法，其特征在于，所述本主机群的唯一标识应写入的磁盘位置为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的超级块中或者该磁盘的尾部。
6.一种访问集群文件系统的主机，其特征在于，该主机包括：
配置模块：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址，记录本主机群的唯一标识应写入的磁盘位置，所述磁盘为本主机群可访问集群文件系统所在的磁盘；
访问模块：当要访问集群文件系统时，根据配置模块记录的本主机群的唯一标识所在的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，判断读取的数据是否与配置模块记录的本主机群的唯一标识一致，若是，开始访问该集群文件系统；否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
7.根据权利要求6所述的主机，其特征在于，所述主机进一步包括：磁盘格式化模块，用于当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化完成后，根据配置模块记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
8.根据权利要求6或7所述的主机，其特征在于，所述配置模块记录的本主机群的唯一标识应写入的磁盘位置为：本主机群可访问集群文件系统所在磁盘组中的一磁盘的超级块中或者该磁盘的尾部。
9.一种访问集群文件系统的主机，其特征在于，该主机包括：
配置模块：记录本主机所在主机群的唯一标识，记录本主机群可访问集群文件系统的地址；
集群文件系统驱动模块：记录本主机群的唯一标识应写入的磁盘位置，所述磁盘为本主机群可访问集群文件系统所在的磁盘；当发现本主机访问集群文件系统时，根据记录的本主机群的唯一标识应写入的磁盘位置，从该集群文件系统所在的对应磁盘的对应位置读取数据，将该数据与配置模块记录的本主机群的唯一标识进行对比，判断二者是否一致，若是，允许访问该集群文件系统，否则，放弃对该集群文件系统的访问，其中，集群文件系统所在的对应磁盘的对应位置上的数据是由可访问该集群文件系统的主机在对该磁盘格式化后写入的，且该数据为该主机所在主机群的唯一标识。
10.根据权利要求9所述的主机，其特征在于，所述集群文件系统驱动模块进一步用于，当通过存储网络对可访问集群文件系统所在的各磁盘进行格式化完成后，根据记录的本主机群的唯一标识应写入的磁盘位置，将本主机群的唯一标识写入该集群文件系统所在的对应磁盘的对应位置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310278595.2A CN103365982B (zh) | 2013-07-03 | 2013-07-03 | 访问集群文件系统的方法及主机 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310278595.2A CN103365982B (zh) | 2013-07-03 | 2013-07-03 | 访问集群文件系统的方法及主机 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103365982A CN103365982A (zh) | 2013-10-23 |
| CN103365982B true CN103365982B (zh) | 2016-07-20 |
Family
ID=49367323
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310278595.2A Active CN103365982B (zh) | 2013-07-03 | 2013-07-03 | 访问集群文件系统的方法及主机 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103365982B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106155563B (zh) * | 2015-03-30 | 2019-11-15 | 浙江大华技术股份有限公司 | 一种磁盘访问控制方法及装置 |
| CN105718589B (zh) * | 2016-01-26 | 2020-01-17 | 华为技术有限公司 | 访问文件的方法和装置 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101064656A (zh) * | 2006-03-30 | 2007-10-31 | 株式会社东芝 | 存储集群系统、数据处理方法和程序 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4168626B2 (ja) * | 2001-12-06 | 2008-10-22 | 株式会社日立製作所 | 記憶装置間のファイル移行方法 |
-
2013
- 2013-07-03 CN CN201310278595.2A patent/CN103365982B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101064656A (zh) * | 2006-03-30 | 2007-10-31 | 株式会社东芝 | 存储集群系统、数据处理方法和程序 |
Non-Patent Citations (1)
| Title |
|---|
| 《并行文件系统的设计》;李群，谢力，孙种秀;《计算机科学》;19961231;第23卷(第4期);第35-39页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103365982A (zh) | 2013-10-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8621271B2 (en) | Reprovisioning a memory device into a dispersed storage network memory | |
| EP3617867B1 (en) | Fragment management method and fragment management apparatus | |
| US9697063B2 (en) | Allocating data based on hardware faults | |
| US20140181395A1 (en) | Virtual tape library system | |
| CN102521072B (zh) | 虚拟磁带库设备及数据恢复方法 | |
| CN109542342B (zh) | 元数据管理与数据重构方法、设备及存储介质 | |
| US10140174B2 (en) | Separating storage transaction logs | |
| CN102929748B (zh) | 数据备份方法及装置 | |
| US10572335B2 (en) | Metadata recovery method and apparatus | |
| CN107391297B (zh) | 改善闪存中的数据刷新的系统和方法 | |
| CN105786401A (zh) | 服务器集群系统中的数据管理方法及装置 | |
| US20140181396A1 (en) | Virtual tape using a logical data container | |
| US8868793B2 (en) | SAS expander system and method for dynamically allocating SAS addresses to SAS expander devices | |
| CN104008780A (zh) | 存储单元的修复方法和装置 | |
| US20140379649A1 (en) | Distributed storage system and file synchronization method | |
| CN103365982B (zh) | 访问集群文件系统的方法及主机 | |
| US8954668B2 (en) | Writing of data of a first block size in a raid array that stores and mirrors data in a second block size | |
| CA2893594C (en) | Virtual tape library system | |
| CN103019847A (zh) | 对虚拟机数据进行迁移的方法及系统 | |
| CN116382582A (zh) | 一种raid重映射方法、系统、设备以及存储介质 | |
| CN104216666A (zh) | 一种管理磁盘数据写入的方法及装置 | |
| US9043543B2 (en) | Writing of new data of a first block size in a raid array that stores both parity and data in a second block size | |
| US9626425B2 (en) | Storage system, cloud storage system, and computer program product | |
| CN105095511A (zh) | 一种基于分布式系统的文件处理方法、装置及系统 | |
| CN104023076A (zh) | 以太网接口硬盘容量的管理方法和多租户交换机 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 310052 Binjiang District Changhe Road, Zhejiang, China, No. 466, No. Patentee after: Xinhua three Technology Co., Ltd. Address before: 310053 Hangzhou hi tech Industrial Development Zone, Zhejiang province science and Technology Industrial Park, No. 310 and No. six road, HUAWEI, Hangzhou production base Patentee before: Huasan Communication Technology Co., Ltd. |
|
| CP03 | Change of name, title or address |