CN107193989B - 一种nas集群缓存处理方法和系统 - Google Patents

一种nas集群缓存处理方法和系统 Download PDF

Info

Publication number
CN107193989B
CN107193989B CN201710399873.8A CN201710399873A CN107193989B CN 107193989 B CN107193989 B CN 107193989B CN 201710399873 A CN201710399873 A CN 201710399873A CN 107193989 B CN107193989 B CN 107193989B
Authority
CN
China
Prior art keywords
nas
target
directory
client
cache
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710399873.8A
Other languages
English (en)
Other versions
CN107193989A (zh
Inventor
李庆龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710399873.8A priority Critical patent/CN107193989B/zh
Publication of CN107193989A publication Critical patent/CN107193989A/zh
Application granted granted Critical
Publication of CN107193989B publication Critical patent/CN107193989B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • G06F16/183—Provision of network file services by network file servers, e.g. by using NFS, CIFS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5682—Policies or rules for updating, deleting or replacing the stored data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种NAS集群缓存处理方法和系统，该方法包括：通过目标NAS客户端向对应的目标NAS服务器发送修改文件或目录的指令；判断在同一NAS集群中是否有其他的NAS客户端和目标NAS客户端访问同一目录；若是，则通过目标NAS服务器进行目标文件或目录的元数据的修改和缓存；通过进程间的消息机制通知与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。通过在为NAS客户端提高NAS服务的服务器的不同进程之间，采用进程间的消息机制进行通知的方式，保证不同NAS服务器缓存数据的时效性和一致性，从而实现各个服务进程之间缓存数据的有效性。

Description

一种NAS集群缓存处理方法和系统
技术领域
本发明涉及服务器技术领域，特别是涉及一种NAS集群缓存处理方法和系统。
背景技术
随着信息技术的发展，为了提高资源的利用效率，为网络中不同的操作系统提供文件共享和数据备份，目前，人们通常使用NAS网络存储。
通过NAS网络存储，不同的用户可以同时访问NAS网络存储中的各种资源而不会互相影响。但是在NAS协议提供存储的系统中，协议层的性能问题是一直困扰研发人员的难题。在NAS服务端实现文件或者目录的元数据和数据的缓存是一种常用的方法，但是其数据缓存的有效性难以保证。
因此，如何既能提高NAS协议的性能，又能保证数据缓存的有效性，是本领域技术人员目前需要解决的技术问题。
发明内容
本发明的目的是提供一种NAS集群缓存处理方法和系统，既能提高NAS协议的性能，又能保证数据缓存的有效性。
为解决上述技术问题，本发明提供了如下技术方案：
一种NAS集群缓存处理方法，包括：
通过目标NAS客户端向对应的目标NAS服务器发送修改文件或目录的指令；
判断在同一NAS集群中是否有其他的NAS客户端和所述目标NAS客户端访问同一目录；
若是，则通过所述目标NAS服务器进行目标文件或目录的元数据的修改和缓存；
通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。
优选地，所述通过所述目标NAS服务器进行目标文件或目录的元数据的修改和缓存，包括：
通过所述目标NAS服务器根据所述指令对文件系统进行相应的数据修改；
通过所述目标NAS服务器获取所述文件系统的修改反馈信息；
通过所述目标NAS服务器向对应的高速缓冲存储器刷新缓存。
优选地，所述通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据，包括：
通过进程间的消息机制向与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；
通过所述与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器读取所述文件系统中的相应数据；
通过所述与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器向对应的高速缓冲存储器刷新缓存。
一种NAS集群缓存处理系统，包括：
通信模块，用于传输目标NAS客户端向对应的目标NAS服务器发送的修改文件或目录的指令；
判断模块，用于判断在同一NAS集群中是否有其他的NAS客户端和所述目标NAS客户端访问同一目录；
执行模块，所述执行模块设置在所述目标NAS服务器中，用于在判定在同一NAS集群中有其他的NAS客户端和所述目标NAS客户端访问同一目录时，进行目标文件或目录的元数据的修改和缓存；
消息传输模块，用于通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。
优选地，所述执行模块包括：
修改单元，用于根据所述指令对文件系统进行相应的数据修改；
接收单元，用于获取所述文件系统的修改反馈信息；
缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存。
优选地，所述消息传输模块包括：通知单元，用于通过进程间的消息机制向与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；
其中，该系统还包括：设置在各与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的读取单元，用于读取所述文件系统中的相应数据；
设置在各与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存。
与现有技术相比，上述技术方案具有以下优点：
本发明所提供的一种NAS集群缓存处理方法，包括：通过目标NAS客户端向对应的目标NAS服务器发送修改文件或目录的指令；判断在同一NAS集群中是否有其他的NAS客户端和目标NAS客户端访问同一目录；若是，则通过目标NAS服务器进行目标文件或目录的元数据的修改和缓存；通过进程间的消息机制通知与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。通过在为NAS客户端提高NAS服务的服务器的不同进程之间，采用进程间的消息机制进行通知的方式，保证不同NAS服务器缓存数据的时效性和一致性，从而实现各个服务进程之间缓存数据的有效性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一种具体实施方式所提供的NAS集群缓存处理方法流程图；
图2为本发明一种具体实施方式所提供的NAS集群缓存处理方法中的具体实施案例示意图；
图3为本发明一种具体实施方式所提供的NAS集群缓存处理系统结构示意图。
具体实施方式
本发明的核心是提供一种NAS集群缓存处理方法和系统，既能提高NAS协议的性能，又能保证数据缓存的有效性。
为了使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。
在以下描述中阐述了具体细节以便于充分理解本发明。但是本发明能够以多种不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似推广。因此本发明不受下面公开的具体实施的限制。
请参考图1和图2，图1为本发明一种具体实施方式所提供的NAS集群缓存处理方法流程图；图2为本发明一种具体实施方式所提供的NAS集群缓存处理方法中的具体实施案例示意图。
本发明的一种具体实施方式提供了一种NAS集群缓存处理方法，包括：
S11：通过目标NAS客户端向对应的目标NAS服务器发送修改文件或目录的指令。
S12：判断在同一NAS集群中是否有其他的NAS客户端和目标NAS客户端访问同一目录。
S13：若是，则通过目标NAS服务器进行目标文件或目录的元数据的修改和缓存。
通过目标NAS服务器进行目标文件或目录的元数据的修改和缓存，包括：通过目标NAS服务器根据指令对文件系统进行相应的数据修改；通过目标NAS服务器获取文件系统的修改反馈信息；通过目标NAS服务器向对应的高速缓冲存储器刷新缓存。
S14：通过进程间的消息机制通知与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。
通过进程间的消息机制通知与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据，包括：通过进程间的消息机制向与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；通过与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器读取文件系统中的相应数据；通过与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器向对应的高速缓冲存储器刷新缓存。
在本实施方式中，如图2所示，以两个NAS客户端同时访问文件系统的同一个目录为例进行说明。
其中，第一NAS客户端为目标NAS客户端，第一NAS服务器为目标NAS服务器，第二NAS客户端为和第一NAS客户端同时访问同一目录的客户端。
第一NAS客户端向第一NAS服务器发出修改文件或目录的指令，第一NAS服务器根据该指令修改文件系统，即对文件系统中对应的文件或目录的元数据进行修改，待修改完成后，文件系统返回修改完成的结果，此时第一NAS服务器控制第一Cache(第一高速缓冲存储器)刷新缓存，然后第一NAS服务器通知第二NAS服务器进行缓存刷新，第二NAS服务器读取文件系统中的相应数据，调取相应的修改后的数据，并对第二Cache(第二高速缓冲存储器)进行缓存刷新。
通过在为NAS客户端提高NAS服务的服务器的不同进程之间，采用进程间的消息机制进行通知的方式，保证不同NAS服务器缓存数据的时效性和一致性，实现各个服务进程之间缓存数据的有效性，从而提高了NAS协议提高文件服务的性能，减少了和文件系统的耦合性。
请参考图3，图3为本发明一种具体实施方式所提供的NAS集群缓存处理系统结构示意图。
相应地，本发明一种实施方式还提供了一种NAS集群缓存处理系统，包括：
通信模块31，用于传输目标NAS客户端向对应的目标NAS服务器发送的修改文件或目录的指令；
判断模块32，用于判断在同一NAS集群中是否有其他的NAS客户端和目标NAS客户端访问同一目录；
执行模块33，执行模块设置在目标NAS服务器中，用于在判定在同一NAS集群中有其他的NAS客户端和目标NAS客户端访问同一目录时，进行目标文件或目录的元数据的修改和缓存；
消息传输模块34，用于通过进程间的消息机制通知与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据。
进一步地，执行模块包括：修改单元，用于根据指令对文件系统进行相应的数据修改；接收单元，用于获取文件系统的修改反馈信息；缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存。
更进一步地，消息传输模块包括：通知单元，用于通过进程间的消息机制向与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；其中，该系统还包括：设置在各与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的读取单元，用于读取文件系统中的相应数据；设置在各与目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存。
需要说明的是，所有的NAS服务器中均可以设置有读取单元和缓存刷新单元。
通过在为NAS客户端提高NAS服务的服务器的不同进程之间，采用进程间的消息机制进行通知的方式，保证不同NAS服务器缓存数据的时效性和一致性，实现各个服务进程之间缓存数据的有效性，从而提高了NAS协议提高文件服务的性能，减少了和文件系统的耦合性。
以上对本发明所提供的一种NAS集群缓存处理方法和系统进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (2)

1.一种NAS集群缓存处理方法，其特征在于，包括：
通过目标NAS客户端向对应的目标NAS服务器发送修改文件或目录的指令；
判断在同一NAS集群中是否有其他的NAS客户端和所述目标NAS客户端访问同一目录；
若是，则通过所述目标NAS服务器进行目标文件或目录的元数据的修改和缓存；
通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据；
其中，所述通过所述目标NAS服务器进行目标文件或目录的元数据的修改和缓存，包括：
通过所述目标NAS服务器根据所述指令对文件系统进行相应的数据修改；
通过所述目标NAS服务器获取所述文件系统的修改反馈信息；
通过所述目标NAS服务器向对应的高速缓冲存储器刷新缓存；
其中，所述通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据，包括：
通过进程间的消息机制向与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；
通过所述与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器读取所述文件系统中的相应数据；
通过所述与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器向对应的高速缓冲存储器刷新缓存。
2.一种NAS集群缓存处理系统，其特征在于，包括：
通信模块，用于传输目标NAS客户端向对应的目标NAS服务器发送的修改文件或目录的指令；
判断模块，用于判断在同一NAS集群中是否有其他的NAS客户端和所述目标NAS客户端访问同一目录；
执行模块，所述执行模块设置在所述目标NAS服务器中，用于在判定在同一NAS集群中有其他的NAS客户端和所述目标NAS客户端访问同一目录时，进行目标文件或目录的元数据的修改和缓存；
消息传输模块，用于通过进程间的消息机制通知与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器重新刷新本地缓存的对应目标文件或目录的元数据；
其中，所述执行模块包括：
修改单元，用于根据所述指令对文件系统进行相应的数据修改；
接收单元，用于获取所述文件系统的修改反馈信息；
缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存；
其中，所述消息传输模块包括：通知单元，用于通过进程间的消息机制向与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器发出缓存刷新通知；
其中，该系统还包括：设置在各与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的读取单元，用于读取所述文件系统中的相应数据；
设置在各与所述目标NAS客户端访问同一目录的NAS客户端对应的NAS服务器中的缓存刷新单元，用于向对应的高速缓冲存储器刷新缓存。
CN201710399873.8A 2017-05-31 2017-05-31 一种nas集群缓存处理方法和系统 Active CN107193989B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710399873.8A CN107193989B (zh) 2017-05-31 2017-05-31 一种nas集群缓存处理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710399873.8A CN107193989B (zh) 2017-05-31 2017-05-31 一种nas集群缓存处理方法和系统

Publications (2)

Publication Number Publication Date
CN107193989A CN107193989A (zh) 2017-09-22
CN107193989B true CN107193989B (zh) 2021-05-28

Family

ID=59876856

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710399873.8A Active CN107193989B (zh) 2017-05-31 2017-05-31 一种nas集群缓存处理方法和系统

Country Status (1)

Country Link
CN (1) CN107193989B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109408487B (zh) * 2018-11-01 2021-10-22 郑州云海信息技术有限公司 一种nas文件系统下文件处理系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101782891A (zh) * 2010-03-26 2010-07-21 中兴通讯股份有限公司 一种分布式系统通信的方法及系统
CN102244685A (zh) * 2011-08-11 2011-11-16 中国科学院软件研究所 一种支持负载均衡的分布式缓存动态伸缩方法及系统
CN103067496A (zh) * 2012-12-26 2013-04-24 华为技术有限公司 客户端缓存机制管理方法和服务器
CN103150394A (zh) * 2013-03-25 2013-06-12 中国人民解放军国防科学技术大学 面向高性能计算的分布式文件系统元数据管理方法
US8819142B1 (en) * 2004-06-30 2014-08-26 Google Inc. Method for reclassifying a spam-filtered email message

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8819142B1 (en) * 2004-06-30 2014-08-26 Google Inc. Method for reclassifying a spam-filtered email message
CN101782891A (zh) * 2010-03-26 2010-07-21 中兴通讯股份有限公司 一种分布式系统通信的方法及系统
CN102244685A (zh) * 2011-08-11 2011-11-16 中国科学院软件研究所 一种支持负载均衡的分布式缓存动态伸缩方法及系统
CN103067496A (zh) * 2012-12-26 2013-04-24 华为技术有限公司 客户端缓存机制管理方法和服务器
CN103150394A (zh) * 2013-03-25 2013-06-12 中国人民解放军国防科学技术大学 面向高性能计算的分布式文件系统元数据管理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"消息传递多计算机系统";赵煜辉;《并发程序设计基础教程》;北京：北京理工大学出版社;20081231;第16-18页 *

Also Published As

Publication number Publication date
CN107193989A (zh) 2017-09-22

Similar Documents

Publication Publication Date Title
CN103200212B (zh) 一种在云计算环境下实现分布式会话的方法和系统
CN107124469B (zh) 一种集群节点通信方法及系统
CN106453444B (zh) 缓存数据共享的方法及设备
CN107818111B (zh) 一种缓存文件数据的方法、服务器及终端
CN111078426A (zh) 一种后端微服务架构下的高并发解决方法
CN108881395B (zh) 消息推送方法、设备、消息管理器及计算机可读存储介质
CN103399899A (zh) 目录机会锁
EP3993346A1 (en) Method and device for distributed data storage
CN113626184A (zh) 一种超融合性能优化方法、装置及设备
WO2019041670A1 (zh) 一种降低功能页面请求次数的方法、存储介质、设备及系统
KR20210040864A (ko) 파일 디렉터리 순회 방법, 장치, 기기, 매체 및 컴퓨터 프로그램
CN112671554A (zh) 一种节点故障处理方法及相关装置
CN113010549A (zh) 基于异地多活系统的数据处理方法、相关设备及存储介质
CN107193989B (zh) 一种nas集群缓存处理方法和系统
WO2024041304A1 (zh) Pos机中双cpu的通信方法、装置、系统及介质
CN117370046A (zh) 进程间通信方法、系统、设备和存储介质
CN112052104A (zh) 基于多机房实现的消息队列的管理方法及电子设备
WO2023185071A1 (zh) 数据查询方法、数据写入方法、相关装置和系统
CN109445966B (zh) 事件处理方法、装置、介质和计算设备
CN113411363A (zh) 一种镜像文件的上传方法、相关设备及计算机存储介质
WO2017053749A1 (en) Techniques and systems for local independent failure domains
CN113329042A (zh) 消息处理方法及系统、车联网系统、服务器、电子设备
CN111382132A (zh) 医学影像数据云存储系统
CN114595080A (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
CN113973135A (zh) 数据缓存处理方法、装置、缓存网格平台和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant