CN102054031A - 无盘系统中实现网络磁盘本地写缓存控制的方法 - Google Patents
无盘系统中实现网络磁盘本地写缓存控制的方法 Download PDFInfo
- Publication number
- CN102054031A CN102054031A CN 201010600519 CN201010600519A CN102054031A CN 102054031 A CN102054031 A CN 102054031A CN 201010600519 CN201010600519 CN 201010600519 CN 201010600519 A CN201010600519 A CN 201010600519A CN 102054031 A CN102054031 A CN 102054031A
- Authority
- CN
- China
- Prior art keywords
- client
- write
- server
- writes
- network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明涉及一种无盘系统中实现网络磁盘本地写缓存控制的方法，包括客户端根据服务器所设置的参数在本机内存中进行写入缓存配置操作、客户端根据用户的输入操作接收输入数据、判断本机是否启用写缓存功能、根据判断结果将输入数据写入远程服务器或判断本机的写缓存区域的数据是否已写满、根据判断结果将输入数据写入远程服务器或将输入数据直接写入本机写缓存区域。采用该种无盘系统中实现网络磁盘本地写缓存控制的方法，降低了客户端对服务器的写入压力，明显扩充了服务器和网络的额定负载量，降低服务器写入压力至原先的1/5左右，服务器负载量提高3倍以上，工作性能稳定可靠，适用范围较为广泛。
Description
技术领域
本发明涉及无盘系统领域，特别涉及无盘系统中磁盘虚拟化应用技术领域，具体是指一种无盘系统中实现网络磁盘本地写缓存控制的方法。
背景技术
一般而言，在现有技术的无盘系统或虚拟化应用中，网络磁盘是其主要组成部分，通过各类网络协议把远程服务器上的存储空间映射为本地的磁盘，并对其进行读写操作。随着计算机规模化应用的普及，大量客户端对网络磁盘的读写造成服务器负载过大、运行效率下降成为一个日益突出的问题。通过研究和分析，发现服务器的主要负载是来自于客户端对网络磁盘的写入操作。
为了解决服务器的写入负载过大的难题，也有过类似的技术解决方案，但都是在服务器端进行写入数据缓存，一般是利用系统本身的缓存功能，通过简单的添加服务器内存的方式来增加写入缓冲区。而这样做的缺点是服务器的内存容量有限，最大不能超过64G，而能够支持64G以上容量内存的服务器价格昂贵，因此服务器缓存技术有较大的局限性。
发明内容
本发明的目的是克服了上述现有技术中的缺点，提供一种能够有效减小服务器的负载、扩充了服务器和网络的额定负载量、显著提高运行效率、工作性能稳定可靠、适用范围较为广泛的无盘系统中实现网络磁盘本地写缓存控制的方法。
为了实现上述的目的，本发明的无盘系统中实现网络磁盘本地写缓存控制的方法具有如下构成：
该无盘系统中实现网络磁盘本地写缓存控制的方法，所述的无盘系统中包括通过网络与远程服务器相连接的客户端，其主要特点是，所述的方法包括以下步骤：
(1)客户端进行启动和初始化操作；
(2)客户端根据服务器所设置的参数，在本机内存中进行写入缓存配置操作；
(3)客户端根据用户的输入操作，接收输入数据信息；
(4)该客户端判断本机是否启用写缓存功能；
(5)如果否，则客户端直接将所述的输入数据信息通过网络写入远程服务器中，并返回上述步骤(3)；
(6)如果是，则客户端判断本机的写缓存区域中的数据信息是否已经写满；
(7)如果是，则客户端将所述的输入数据信息通过网络写入远程服务器中，然后返回上述步骤(3)；
(8)如果否，则客户端将所述的输入数据信息直接写入本机的写缓存区域中，并返回上述步骤(3)。
该无盘系统中实现网络磁盘本地写缓存控制的方法中的进行写入缓存配置操作，具体为：
所述的客户端根据服务器所设置的参数在本机内存中分配相应容量的内存作为该客户端的写缓存区域。
该无盘系统中实现网络磁盘本地写缓存控制的方法中的写缓存区域的容量可以为16MB～2GB。
该无盘系统中实现网络磁盘本地写缓存控制的方法中的写缓存区域的容量为512MB。
该无盘系统中实现网络磁盘本地写缓存控制的方法中还包括以下步骤：
(9)客户端根据用户的输入操作实时判断是否需要重新启动；
(10)如果是，则先将所述的写缓存区域中的数据信息通过网络写入远程服务器中，然后再重新启动，并将写缓存区域中的数据信息清空。
采用了该发明的无盘系统中实现网络磁盘本地写缓存控制的方法，由于其中利用客户端内存做为客户端写入数据的存储区，从而降低了客户端对服务器的写入压力，客户端启动后，根据服务器上设置的参数，在本地内存中分配一定容量的内存作为客户端的写入缓存，而且这部分内存不能被客户端的操作系统所使用，是专门用于数据缓存的，当这部分空间写满后，客户端的写入数据才会直接写入服务器，在缓存满溢之前，不会有任何数据写入服务器中，从而明显扩充了服务器和网络的额定负载量，以典型的设置512MB写缓存为例，可降低服务器写入压力至原先的1/5左右，服务器负载量提高3倍以上，因此显著提高运行效率，工作性能稳定可靠，适用范围较为广泛。
附图说明
图1为本发明的无盘系统中实现网络磁盘本地写缓存控制的方法的流程图。
具体实施方式
为了能够更清楚地理解本发明的技术内容，特举以下实施例详细说明。
请参阅图1所示，该无盘系统中实现网络磁盘本地写缓存控制的方法，所述的无盘系统中包括通过网络与远程服务器相连接的客户端，其中包括以下步骤：
(1)客户端进行启动和初始化操作；
(2)客户端根据服务器所设置的参数，在本机内存中进行写入缓存配置操作，具体为：所述的客户端根据服务器所设置的参数在本机内存中分配相应容量的内存作为该客户端的写缓存区域；该写缓存区域的容量可以为16MB～2GB，该写缓存区域的容量最佳为512MB；
(3)客户端根据用户的输入操作，接收输入数据信息；
(4)该客户端判断本机是否启用写缓存功能；
(5)如果否，则客户端直接将所述的输入数据信息通过网络写入远程服务器中，并返回上述步骤(3)；
(6)如果是，则客户端判断本机的写缓存区域中的数据信息是否已经写满；
(7)如果是，则客户端将所述的输入数据信息通过网络写入远程服务器中，然后返回上述步骤(3)；
(8)如果否，则客户端将所述的输入数据信息直接写入本机的写缓存区域中，并返回上述步骤(3)；
(9)客户端根据用户的输入操作实时判断是否需要重新启动；
(10)如果是，则先将所述的写缓存区域中的数据信息通过网络写入远程服务器中，然后再重新启动，并将写缓存区域中的数据信息清空。
在实际使用当中，是利用客户端内存作为客户端写入数据的存储区，用来降低客户端对服务器的写入压力。客户端启动后，根据服务器上设置的参数，在本地内存中分配一定容量的内存作为客户端的写入缓存，这部分内存不能被客户端的操作系统所使用，是专门用于数据缓存的。当这部分空间写满后，客户端的写入数据才会直接写入服务器，在缓存满溢之前，不会有任何数据写入服务器中。
同时，在无盘环境中，客户端的写入数据都是临时数据，是不保留的，所以当客户端重启后会清除已经写入服务器的数据，本地的写缓存也会清零。
本发明有效的降低了服务器的写入压力，提高了服务器和网络的负载量，目前一般情况下采用的是内存写缓存技术，缓存容量最小支持16MB，最大可支持到2GB。以典型的设置512MB写缓存为例，可降低服务器写入压力至原先的1/5左右，服务器负载量提高3倍以上。
本发明是利用客户端的内存作为写入缓存，由于PC内存价格的不断走低，2G以上的客户端内存已经普及，一般情况下，在客户端上设置512M内存作为写入缓存后，客户端就不会有数据写入服务器，完全写入本地内存中，在一个300节点的标准网络环境中，其总计写入缓存是153G，远远超过服务器的内存容量，而且随着网络节点的增加，缓存容量也随之扩大，而服务器的写入负载却保持不变，运行效率下降很小。通过“网络磁盘本地写缓存技术”，将原先单服务器的负载量由原先的150台客户端提升至500台以上。
采用了上述的无盘系统中实现网络磁盘本地写缓存控制的方法，由于其中利用客户端内存作为客户端写入数据的存储区，从而降低了客户端对服务器的写入压力，客户端启动后，根据服务器上设置的参数，在本地内存中分配一定容量的内存作为客户端的写入缓存，而且这部分内存不能被客户端的操作系统所使用，是专门用于数据缓存的，当这部分空间写满后，客户端的写入数据才会直接写入服务器，在缓存满溢之前，不会有任何数据写入服务器中，从而明显扩充了服务器和网络的额定负载量，以典型的设置512MB写缓存为例，可降低服务器写入压力至原先的1/5左右，服务器负载量提高3倍以上，因此显著提高运行效率，工作性能稳定可靠，适用范围较为广泛。
在此说明书中，本发明已参照其特定的实施例作了描述。但是，很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此，说明书和附图应被认为是说明性的而非限制性的。
Claims (5)
1.一种无盘系统中实现网络磁盘本地写缓存控制的方法，所述的无盘系统中包括通过网络与远程服务器相连接的客户端，其特征在于，所述的方法包括以下步骤：
(1)客户端进行启动和初始化操作；
(2)客户端根据服务器所设置的参数，在本机内存中进行写入缓存配置操作；
(3)客户端根据用户的输入操作，接收输入数据信息；
(4)该客户端判断本机是否启用写缓存功能；
(5)如果否，则客户端直接将所述的输入数据信息通过网络写入远程服务器中，并返回上述步骤(3)；
(6)如果是，则客户端判断本机的写缓存区域中的数据信息是否已经写满；
(7)如果是，则客户端将所述的输入数据信息通过网络写入远程服务器中，然后返回上述步骤(3)；
(8)如果否，则客户端将所述的输入数据信息直接写入本机的写缓存区域中，并返回上述步骤(3)。
2.根据权利要求1所述的无盘系统中实现网络磁盘本地写缓存控制的方法，其特征在于，所述的进行写入缓存配置操作，具体为：
所述的客户端根据服务器所设置的参数在本机内存中分配相应容量的内存作为该客户端的写缓存区域。
3.根据权利要求2所述的无盘系统中实现网络磁盘本地写缓存控制的方法，其特征在于，所述的写缓存区域的容量为16MB～2GB。
4.根据权利要求3所述的无盘系统中实现网络磁盘本地写缓存控制的方法，其特征在于，所述的写缓存区域的容量为512MB。
5.根据权利要求1至4中任一项所述的无盘系统中实现网络磁盘本地写缓存控制的方法，其特征在于，所述的方法中还包括以下步骤：
(9)客户端根据用户的输入操作实时判断是否需要重新启动；
(10)如果是，则先将所述的写缓存区域中的数据信息通过网络写入远程服务器中，然后再重新启动，并将写缓存区域中的数据信息清空。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010600519 CN102054031A (zh) | 2010-12-22 | 2010-12-22 | 无盘系统中实现网络磁盘本地写缓存控制的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010600519 CN102054031A (zh) | 2010-12-22 | 2010-12-22 | 无盘系统中实现网络磁盘本地写缓存控制的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102054031A true CN102054031A (zh) | 2011-05-11 |
Family
ID=43958353
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 201010600519 Pending CN102054031A (zh) | 2010-12-22 | 2010-12-22 | 无盘系统中实现网络磁盘本地写缓存控制的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102054031A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104598172A (zh) * | 2015-02-06 | 2015-05-06 | 环旭电子股份有限公司 | 携带式电子装置的数据写入方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1874490A (zh) * | 2006-06-30 | 2006-12-06 | 华中科技大学 | 一种用于对等网络视频点播系统的磁盘缓存方法 |
| CN101075241A (zh) * | 2006-12-26 | 2007-11-21 | 腾讯科技（深圳）有限公司 | 缓存处理方法以及缓存处理系统 |
| US7653754B2 (en) * | 2004-01-05 | 2010-01-26 | Mellanox Technologies Ltd. | Method, system and protocol that enable unrestricted user-level access to a network interface adapter |
| CN101741809A (zh) * | 2008-11-04 | 2010-06-16 | 北京众志和达信息技术有限公司 | 基于嵌入式一体化虚拟磁带库的远程数据复制的方法和系统 |
-
2010
- 2010-12-22 CN CN 201010600519 patent/CN102054031A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7653754B2 (en) * | 2004-01-05 | 2010-01-26 | Mellanox Technologies Ltd. | Method, system and protocol that enable unrestricted user-level access to a network interface adapter |
| CN1874490A (zh) * | 2006-06-30 | 2006-12-06 | 华中科技大学 | 一种用于对等网络视频点播系统的磁盘缓存方法 |
| CN101075241A (zh) * | 2006-12-26 | 2007-11-21 | 腾讯科技（深圳）有限公司 | 缓存处理方法以及缓存处理系统 |
| CN101741809A (zh) * | 2008-11-04 | 2010-06-16 | 北京众志和达信息技术有限公司 | 基于嵌入式一体化虚拟磁带库的远程数据复制的方法和系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104598172A (zh) * | 2015-02-06 | 2015-05-06 | 环旭电子股份有限公司 | 携带式电子装置的数据写入方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20200358710A1 (en) | Container-based mobile code offloading support system in cloud environment and offloading method thereof | |
| US20210342071A1 (en) | Input/output processing in a distributed storage node with rdma | |
| US11263087B2 (en) | Methods and systems for serverless data deduplication | |
| EP1926022B1 (en) | Apparatus and method for efficient memory use in portable terminal | |
| CN103914205B (zh) | 一种智能终端的文件缩略图展示方法和装置 | |
| US20110314068A1 (en) | Interface for extending functionality of memory cards | |
| CN102567224A (zh) | 高效高速缓存管理 | |
| CN102148870B (zh) | 一种云存储系统及其实现方法 | |
| CN104580437A (zh) | 一种云存储客户端及其高效数据访问方法 | |
| JP2010205111A (ja) | コンテキスト再現システム、コンテキスト再現方法、第１端末装置、第２端末装置、コンテキスト取得装置、または蓄積装置、それらのプログラム | |
| CN101763437A (zh) | 高速缓冲存储实现方法及装置 | |
| JP6506374B2 (ja) | キャッシュ管理 | |
| CN109446222A (zh) | 一种双缓存的数据存储方法、装置及存储介质 | |
| CN103036948B (zh) | 网络文件处理方法、执行节点、软件即服务SaaS平台 | |
| CN102622391A (zh) | 一种小图片处理方法 | |
| CN104516824A (zh) | 数据存储系统中的存储管理方法和系统 | |
| CN101764848A (zh) | 传输网络文件的方法和装置 | |
| CN104462224A (zh) | 一种云盘文件在线编辑方法 | |
| CN113806300B (zh) | 数据存储方法、系统、装置、设备及存储介质 | |
| US20230306010A1 (en) | Optimizing Storage System Performance Using Data Characteristics | |
| CN105095138A (zh) | 一种扩展同步内存总线功能的方法和装置 | |
| CN114564339A (zh) | 一种磁盘镜像文件跨平台迁移方法及系统 | |
| CN102045399A (zh) | 云计算模式文件系统及文件读取方法 | |
| US20190104346A1 (en) | Service processing method, device, and intelligent terminal | |
| CN102054031A (zh) | 无盘系统中实现网络磁盘本地写缓存控制的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20110511 |