CN106603678A - 一种采用Docker容器实现网格化分布式存储的方法 - Google Patents

一种采用Docker容器实现网格化分布式存储的方法 Download PDF

Info

Publication number
CN106603678A
CN106603678A CN201611189210.5A CN201611189210A CN106603678A CN 106603678 A CN106603678 A CN 106603678A CN 201611189210 A CN201611189210 A CN 201611189210A CN 106603678 A CN106603678 A CN 106603678A
Authority
CN
China
Prior art keywords
resource
layer
docker container
docker
employing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611189210.5A
Other languages
English (en)
Inventor
宋健健
戴鸿君
于治楼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jinan Inspur Hi Tech Investment and Development Co Ltd
Original Assignee
Jinan Inspur Hi Tech Investment and Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jinan Inspur Hi Tech Investment and Development Co Ltd filed Critical Jinan Inspur Hi Tech Investment and Development Co Ltd
Priority to CN201611189210.5A priority Critical patent/CN106603678A/zh
Publication of CN106603678A publication Critical patent/CN106603678A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及计算机虚拟存储技术领域，特别涉及一种采用Docker容器实现网格化分布式存储的方法。本发明的一种采用Docker容器实现网格化分布式存储的方法，是将互联网络中包含的零散主机进行区域划分，每一个区域对应一个Docker容器单元，并将所述的Docker容器单元从上到下划分为应用层、服务层和资源层，应用层直接与用户接触，用户通过应用层进行数据存储操作；服务层提供资源访问的接口；资源层用来定位本区域中的资源。本发明的一种采用Docker容器实现网格化分布式存储的方法，其可以直接复用本地的操作系统，使得整体的存储系统更加轻量，可以极大地减少对本地物理主机的硬件配置要求。

Description

一种采用Docker容器实现网格化分布式存储的方法
技术领域
本发明涉及计算机虚拟存储技术领域，特别涉及一种采用Docker容器实现网格化分布式存储的方法。
背景技术
网格技术实际上是把整个Web网络当成一台巨大的计算机，从而实现资源的全面共享。网格分布式存储的基本思想是利用网格存储技术，通过网络将互联网中零散的设备联系起来，从而形成一个高扩展、高性能、高可靠性的分布式系统。
网格化分布式存储系统允许远程节点加入或者退出网格系统，并提供可靠的容错机制。网格化分布式系统实现过程包括写过程、读取过程、资源调度和资源定位四个过程。
写过程是用户向系统写文件的过程，即用户将本地文件上传到网格分布式系统的过程。写文件过程采用文件副本进行写操作，在分布保存文件时，不仅保存文件的副本，还保存副本之间的校验文件，这样当副本不可用时，可以通过校验文件进行恢复。网格分布式系统中写过程，如图1所示。
读取文件过程是用户从网格各个节点中读取文件副本，然后定位到原始文件。
资源调度过程是网格中心的节点进行资源的调度与分配，域内服务的节点负责本区域的资源调度，调度与分配采用局部优先的原则。
资源定位是给定一个资源的描述，该过程返回一个或者多个满足描述的资源的位置。
Docker是一个应用容器引擎，实现了一种应用程序级别的隔离，是一个便携式、轻量级的运行环境和包管理器，可以实现自动化工作流和创建应用服务器。Docker容器技术描述如图2所示。
Docker相比较虚拟机具有秒级的启动速度、低性能损耗高、系统支持量、安全隔离等特点。
现有技术下的网格化分布式存储系统，其存储系统大，且对本地物理主机的硬件配置要求高。
发明内容
为了解决现有技术的问题，本发明提供了一种采用Docker容器实现网格化分布式存储的方法，其可以直接复用本地的操作系统，使得整体的存储系统更加轻量，可以极大地减少对本地物理主机的硬件配置要求。
本发明所采用的技术方案如下：
一种采用Docker容器实现网格化分布式存储的方法，是将互联网络中包含的零散主机进行区域划分，每一个区域对应一个Docker容器单元，并将所述的Docker容器单元从上到下划分为应用层、服务层和资源层，应用层直接与用户接触，用户通过应用层进行数据存储操作；服务层提供资源访问的接口；资源层用来定位本区域中的资源。
资源定位采用局部优先原则，首先遍历本区域的主机，发现资源后进行返回；如果本区域主机无相关资源，自遍历整个Docker容器单元中的其他区域主机；如果其他区域主机仍无相关资源，则路由所有Docker容器单元，遍历其包含的主机，直到获取资源。
资源层由分布式主机组成，分布式主机通过底层网络互相连接。
本发明利用Docker容器的虚拟化技术，结合网格存储的存储虚拟化、元数据访问、复制管理、资源调度等特性，实现容器虚化的网格式分布存储。通过容器虚拟化整个存储系统，将系统进行层次划分，通过容器配置文件管理各层次内容。
本发明实施例提供的技术方案带来的有益效果是：
针对网格分布式存储系统的实现，本发明采用Docker容器进行系统分层，将系统分为应用层、服务层和资源层，同时，采用Docker虚拟化技术，实现网格分布式虚拟化存储，从而提高存储的效率和存储安全性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为现有技术下网格分布式系统中写过程的过程流程图；
图2为现有技术下的Docker容器技术原理图；
图3为本发明的一种采用Docker容器实现网格化分布式存储的方法的原理图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
如附图3所示，本实施例的一种采用Docker容器实现网格化分布式存储的方法，采用Docker容器虚拟化技术进行系统分布式整体布局，将整个互联网当做一个巨大的Docker容器，对互联网络中包含的零散主机进行区域划分，每一个区域对应一个小的Docker容器单元，通过配置容器单元的配置文件进行区域内主机的管理，提高分布式管理效率，降低对主机硬件配置的需求。
进行容器单元内部层次划分，从上到下划分为应用层、服务层和资源层。应用层直接与用户接触，用户通过应用层进行数据存储操作；服务层提供资源访问的接口；资源层用来定位本区域中的资源。资源定位采用局部优先原则，首先遍历本区域的主机，发现资源后进行返回；如果本区域主机无相关资源，自遍历整个容器单元中的其他区域主机；如果其他区域主机仍无相关资源，则路由所有容器单元，遍历其包含的主机，直到获取资源。
本实施例中的应用层提供资源服务接口；服务层提供用户使用资源的窗口；资源层由分布式主机组成，分布式主机通过底层网络互相连接。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (3)

1.一种采用Docker容器实现网格化分布式存储的方法，是将互联网络中包含的零散主机进行区域划分，每一个区域对应一个Docker容器单元，并将所述的Docker容器单元从上到下划分为应用层、服务层和资源层，应用层直接与用户接触，用户通过应用层进行数据存储操作；服务层提供资源访问的接口；资源层用来定位本区域中的资源。
2.根据权利要求1所述的一种采用Docker容器实现网格化分布式存储的方法，其特征在于，资源定位采用局部优先原则，首先遍历本区域的主机，发现资源后进行返回；如果本区域主机无相关资源，自遍历整个Docker容器单元中的其他区域主机；如果其他区域主机仍无相关资源，则路由所有Docker容器单元，遍历其包含的主机，直到获取资源。
3.根据权利要求1或2所述的一种采用Docker容器实现网格化分布式存储的方法，其特征在于，所述的资源层由分布式主机组成，分布式主机通过底层网络互相连接。
CN201611189210.5A 2016-12-21 2016-12-21 一种采用Docker容器实现网格化分布式存储的方法 Pending CN106603678A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611189210.5A CN106603678A (zh) 2016-12-21 2016-12-21 一种采用Docker容器实现网格化分布式存储的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611189210.5A CN106603678A (zh) 2016-12-21 2016-12-21 一种采用Docker容器实现网格化分布式存储的方法

Publications (1)

Publication Number Publication Date
CN106603678A true CN106603678A (zh) 2017-04-26

Family

ID=58602085

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611189210.5A Pending CN106603678A (zh) 2016-12-21 2016-12-21 一种采用Docker容器实现网格化分布式存储的方法

Country Status (1)

Country Link
CN (1) CN106603678A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107632783A (zh) * 2017-09-14 2018-01-26 快云信息科技有限公司 将分布式存储系统接入容器的方法、装置、可读存储介质
CN107734037A (zh) * 2017-10-19 2018-02-23 郑州云海信息技术有限公司 一种nas集群和数据访问方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504163A (zh) * 2015-01-21 2015-04-08 北京智富者机器人科技有限公司 一种机器人视觉知识检索系统
CN105045656A (zh) * 2015-06-30 2015-11-11 深圳清华大学研究院 基于虚拟容器的大数据存储与管理方法
CN105357296A (zh) * 2015-10-30 2016-02-24 河海大学 一种Docker云平台下弹性缓存系统
CN105681443A (zh) * 2016-01-28 2016-06-15 安徽四创电子股份有限公司 一种基于大数据的云计算架构方法及系统
CN105915583A (zh) * 2016-03-28 2016-08-31 联想(北京)有限公司 一种启动服务集群的方法及服务集群
CN105959416A (zh) * 2016-07-05 2016-09-21 浪潮电子信息产业股份有限公司 一种基于容器化技术的私有云存储系统
US20160350105A1 (en) * 2015-05-27 2016-12-01 Runnable Inc. Automatic communications graphing for a source application
CN106209827A (zh) * 2016-07-08 2016-12-07 安徽四创电子股份有限公司 基于容器云技术的虚拟卡口系统及其服务创建方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504163A (zh) * 2015-01-21 2015-04-08 北京智富者机器人科技有限公司 一种机器人视觉知识检索系统
US20160350105A1 (en) * 2015-05-27 2016-12-01 Runnable Inc. Automatic communications graphing for a source application
CN105045656A (zh) * 2015-06-30 2015-11-11 深圳清华大学研究院 基于虚拟容器的大数据存储与管理方法
CN105357296A (zh) * 2015-10-30 2016-02-24 河海大学 一种Docker云平台下弹性缓存系统
CN105681443A (zh) * 2016-01-28 2016-06-15 安徽四创电子股份有限公司 一种基于大数据的云计算架构方法及系统
CN105915583A (zh) * 2016-03-28 2016-08-31 联想(北京)有限公司 一种启动服务集群的方法及服务集群
CN105959416A (zh) * 2016-07-05 2016-09-21 浪潮电子信息产业股份有限公司 一种基于容器化技术的私有云存储系统
CN106209827A (zh) * 2016-07-08 2016-12-07 安徽四创电子股份有限公司 基于容器云技术的虚拟卡口系统及其服务创建方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107632783A (zh) * 2017-09-14 2018-01-26 快云信息科技有限公司 将分布式存储系统接入容器的方法、装置、可读存储介质
CN107632783B (zh) * 2017-09-14 2020-07-03 快云信息科技有限公司 将分布式存储系统接入容器的方法、装置、可读存储介质
CN107734037A (zh) * 2017-10-19 2018-02-23 郑州云海信息技术有限公司 一种nas集群和数据访问方法

Similar Documents

Publication Publication Date Title
US10019159B2 (en) Systems, methods and devices for management of virtual memory systems
CN107465656B (zh) 一种基于云计算的安防监控大数据处理方法及系统
US8972986B2 (en) Locality-aware resource allocation for cloud computing
US9727578B2 (en) Coordinated access to a file system's shared storage using dynamic creation of file access layout
US20190057117A1 (en) Providing a database as a service in a multi-tenant environment
CN103856567B (zh) 基于Hadoop分布式文件系统的小文件存储方法
US8590050B2 (en) Security compliant data storage management
CN104506589B (zh) 一种基于超融合存储的资源迁移调度方法
CN103544319B (zh) 一种多租户共享数据库的方法和多租户数据库即服务系统
WO2013004136A1 (zh) 分布式存储方法、装置和系统
CN103595799B (zh) 一种实现分布式共享数据库的方法
CN111708719B (zh) 计算机存储加速方法、电子设备及存储介质
US10387309B2 (en) High-performance distributed caching
CN104794150A (zh) 一种基于空间知识云环境的云存储模型与管理方法
CN105468296A (zh) 基于虚拟化平台的无共享存储管理方法
CN105516313A (zh) 一种用于大数据的分布式存储系统
CN106603678A (zh) 一种采用Docker容器实现网格化分布式存储的方法
CN206149327U (zh) 一种信息云管理平台及企业信息系统
CN107147745A (zh) 一种网站群架构方法
CN107704618A (zh) 一种基于aufs文件系统的热迁徙方法和系统
US11455121B2 (en) Selecting data nodes for WAN caching in a hybrid cloud environment
CN103207762A (zh) 存储虚拟化系统
Huo et al. Research on key technologies of edge cache in virtual data space across WAN
US11995325B2 (en) Modular system dynamic rendering controller
KR20110078665A (ko) 데이터 마이닝과 실시간 검색정보를 이용한 캐싱기법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170426

RJ01 Rejection of invention patent application after publication