CN106027661A - 数据集群存储终端 - Google Patents

数据集群存储终端 Download PDF

Info

Publication number
CN106027661A
CN106027661A CN201610464437.XA CN201610464437A CN106027661A CN 106027661 A CN106027661 A CN 106027661A CN 201610464437 A CN201610464437 A CN 201610464437A CN 106027661 A CN106027661 A CN 106027661A
Authority
CN
China
Prior art keywords
server
storage
monitoring management
management server
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201610464437.XA
Other languages
English (en)
Inventor
李无韦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Fudou Technology Co Ltd
Original Assignee
Sichuan Fudou Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Fudou Technology Co Ltd filed Critical Sichuan Fudou Technology Co Ltd
Priority to CN201610464437.XA priority Critical patent/CN106027661A/zh
Publication of CN106027661A publication Critical patent/CN106027661A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1456Hardware arrangements for backup
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1464Management of the backup or restore process for networked environments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Alarm Systems (AREA)

Abstract

本发明公开了数据集群存储终端,包括存储集群和监控管理服务器,还包括多个备用服务器、备份服务器和查询终端机,所述多个备用服务器、备份服务器和查询终端机均连接在监控管理服务器上,所述存储集群上设置多个存储服务器,每个存储服务器均连接在监控管理服务器上,在监控管理服务器上还连接缓存服务器,监控管理服务器设有与外部通信的输入输出接口。本发明通过上述原理,实现对数据的多方式存储,避免数据的丢失,保证了数据的安全。

Description

数据集群存储终端
技术领域
本发明涉及数据存储领域,具体涉及数据集群存储终端。
背景技术
云存储是在云计算概念上延伸和发展出来的一个新概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。云存储技术是IT未来发展的方向。由于云存储系统规模庞大,节点数量多,不可避免的会出现存储节点故障的情况。同时,现有的存储装置在进行原始数据存储时,均采用的单一方式存储,一但存储出现问题就会导致原始数据的丢失。
发明内容
本发明克服了现有技术的不足,提供数据集群存储终端,该装置实现对数据的多方式存储,避免数据的丢失,保证了数据的安全。
为解决上述的技术问题,本发明采用以下技术方案:数据集群存储终端,包括存储集群和监控管理服务器,还包括多个备用服务器、备份服务器和查询终端机,所述多个备用服务器、备份服务器和查询终端机均连接在监控管理服务器上,所述存储集群上设置多个存储服务器,每个存储服务器均连接在监控管理服务器上,在监控管理服务器上还连接缓存服务器,监控管理服务器设有与外部通信的输入输出接口。本装置中不仅通过设置缓存服务器,当用户向集群存储系统存入文件时,文件先暂存到缓存服务器中,等接收完成以后再发送到指定的存储服务器中进行存储,这样万一在存储过程中被输入数据的存储服务器发生故障,则可以将整个文件再完整地存入到被替换的备用服务器中,减少文件丢失或部分丢失的风险。同时对于缓存服务器中存储的原始数据还通过备份服务器进行再次备份,避免由于缓存服务器的瘫痪,而导致原始数据的不可恢复性丢失,从而保障数据的安全运行。本装置还设置查询终端机,当用户在查询终端机上发出查询指令,查询终端机根据存储集群保存在备份服务器中的原始数据信息,向对应的存储服务器发出查询任务,然后返回查询结构提交给用户,该查询过程不会占用缓存服务器的内存,数据存储和查询可同时进行,保证运行速度。
所述监控管理服务器上还连接磁盘扩展箱。由于备份存储器存储数据的量是有限的,可以定期通过外部存储磁盘把数据信息进行转移存储,而磁盘扩展箱的设置能够承载更多的磁盘进行数据的存储。
所述查询终端机上还设置WiFi模块,WiFi模块的型号为MV269。该设置可利用无线发送的方式将查询结果发送给外部设备。
所述监控管理服务器上还连接报警器和防火墙,在报警器上还设置无线通信单元。
每个备用服务器均包括一个功率控制模块。
与现有技术相比,本发明的有益效果是:
1、本装置不仅采用缓存服务器进行数据存储,还设置备份服务器对原始数据进行再次存储,避免由于缓存服务器的瘫痪,而导致原始数据的不可恢复性丢失,从而保障数据的安全运行。
2、 本装置还设置查询终端机,当用户在查询终端机上发出查询指令,查询终端机根据存储集群保存在备份服务器中的原始数据信息,向对应的存储服务器发出查询任务,然后返回查询结构提交给用户,该查询过程不会占用缓存服务器的内存,数据存储和查询可同时进行,保证运行速度。
3、由于备份存储器存储数据的量是有限的,设置的磁盘扩展箱可以定期通过外部存储磁盘把数据信息进行转移存储,而磁盘扩展箱的设置能够承载更多的磁盘进行数据的存储。
附图说明
图1为本发明的原理框图。
具体实施方式
下面结合附图对本发明作进一步阐述,本发明的实施例不限于此。
实施例1:
如图1所示,本发明包括数据集群存储终端,包括存储集群和监控管理服务器,还包括多个备用服务器、备份服务器和查询终端机,所述多个备用服务器、备份服务器和查询终端机均连接在监控管理服务器上,所述存储集群上设置多个存储服务器,每个存储服务器均连接在监控管理服务器上,在监控管理服务器上还连接缓存服务器,监控管理服务器设有与外部通信的输入输出接口。
在使用时,监控管理服务器检测各存储服务器的状态,当发现某个存储服务器出现故障以后,监控管理服务器唤醒一个备用服务器并将被唤醒的备用服务器的等级提升至与故障服务器相同,出现故障的存储服务器为故障服务器;监控管理服务器将故障服务器的等级降低至故障等级,故障等级小于所有正常工作的存储服务器所具备的等级;监控管理服务器对被唤醒的备用服务器的状态进行检测,如果正常则将后续应该存储到故障服务器的数据传输到被唤醒的备用服务器中进行存储,如果不正常则将被唤醒的备用服务器设定为新的故障服务器,并重复前面的操作。
本装置中不仅通过设置缓存服务器,当用户向集群存储系统存入文件时,文件先暂存到缓存服务器中,等接收完成以后再发送到指定的存储服务器中进行存储,这样万一在存储过程中被输入数据的存储服务器发生故障,则可以将整个文件再完整地存入到被替换的备用服务器中,减少文件丢失或部分丢失的风险。同时对于缓存服务器中存储的原始数据还通过备份服务器进行再次备份,避免由于缓存服务器的瘫痪,而导致原始数据的不可恢复性丢失,从而保障数据的安全运行。本装置还设置查询终端机,当用户在查询终端机上发出查询指令,查询终端机根据存储集群保存在备份服务器中的原始数据信息,向对应的存储服务器发出查询任务,然后返回查询结构提交给用户,该查询过程不会占用缓存服务器的内存,数据存储和查询可同时进行,保证运行速度。
所述监控管理服务器上还连接磁盘扩展箱。由于备份存储器存储数据的量是有限的,可以定期通过外部存储磁盘把数据信息进行转移存储,而磁盘扩展箱的设置能够承载更多的磁盘进行数据的存储。
查询终端机上还设置WiFi模块,WiFi模块的型号为MV269。该设置可利用无线发送的方式将查询结果发送给外部设备。
监控管理服务器上还连接报警器和防火墙,在报警器上还设置无线通信单元。报警服务器通过无线通信单元可以脱离线缆的束缚,实现远距离报警。无线通信单元可以支持移动通信网络或/和无线局域网。
每个备用服务器均包括一个功率控制模块。功率控制模块可以控制备用服务器处于睡眠状态或者唤醒状态。当备用服务器未被启用替换时,处于睡眠状态,只有极小的电流通过,功耗小,节能;当需要某个备用服务器替换故障服务器进行工作时,功率控制模块唤醒此备用服务器,提供正常工作所需的电流,确保存储工作正常进行。
如上所述便可实现该发明。

Claims (5)

1.数据集群存储终端,包括存储集群和监控管理服务器,其特征在于:还包括多个备用服务器、备份服务器和查询终端机,所述多个备用服务器、备份服务器和查询终端机均连接在监控管理服务器上,所述存储集群上设置多个存储服务器,每个存储服务器均连接在监控管理服务器上,在监控管理服务器上还连接缓存服务器,监控管理服务器设有与外部通信的输入输出接口。
2.根据权利要求1所述的数据集群存储终端,其特征在于:所述监控管理服务器上还连接磁盘扩展箱。
3.根据权利要求1所述的数据集群存储终端,其特征在于:所述查询终端机上还设置WiFi模块,WiFi模块的型号为MV269。
4.根据权利要求1所述的数据集群存储终端,其特征在于:所述监控管理服务器上还连接报警器和防火墙,在报警器上还设置无线通信单元。
5.根据权利要求1所述的数据集群存储终端,其特征在于:每个备用服务器均包括一个功率控制模块。
CN201610464437.XA 2016-06-24 2016-06-24 数据集群存储终端 Withdrawn CN106027661A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610464437.XA CN106027661A (zh) 2016-06-24 2016-06-24 数据集群存储终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610464437.XA CN106027661A (zh) 2016-06-24 2016-06-24 数据集群存储终端

Publications (1)

Publication Number Publication Date
CN106027661A true CN106027661A (zh) 2016-10-12

Family

ID=57086080

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610464437.XA Withdrawn CN106027661A (zh) 2016-06-24 2016-06-24 数据集群存储终端

Country Status (1)

Country Link
CN (1) CN106027661A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790422A (zh) * 2016-12-02 2017-05-31 北京锐安科技有限公司 一种用于web应用的数据缓存集群和数据检索方法
CN109639501A (zh) * 2018-12-29 2019-04-16 浙江宇视科技有限公司 一种异常记录信息存储方法及装置
CN111367880A (zh) * 2020-02-05 2020-07-03 北京华电天仁电力控制技术有限公司 一种通用实时数据存储管理系统及其实现方法
CN115190125A (zh) * 2022-06-27 2022-10-14 京东科技控股股份有限公司 一种缓存集群的监控方法和装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106790422A (zh) * 2016-12-02 2017-05-31 北京锐安科技有限公司 一种用于web应用的数据缓存集群和数据检索方法
CN109639501A (zh) * 2018-12-29 2019-04-16 浙江宇视科技有限公司 一种异常记录信息存储方法及装置
CN111367880A (zh) * 2020-02-05 2020-07-03 北京华电天仁电力控制技术有限公司 一种通用实时数据存储管理系统及其实现方法
CN115190125A (zh) * 2022-06-27 2022-10-14 京东科技控股股份有限公司 一种缓存集群的监控方法和装置

Similar Documents

Publication Publication Date Title
CN104243481B (zh) 一种用电信息采集前置数据处理的方法及系统
CN105912280A (zh) 能够进行数据分类的存储终端
CN106027661A (zh) 数据集群存储终端
CN103354503A (zh) 一种可自动检测及替换故障节点的云存储系统及其方法
CN105354044A (zh) 一种应用唤醒方法及装置
JP2013030863A (ja) スイッチ装置の制御システム、その構成制御装置および構成制御方法
CN102761528A (zh) 数据管理系统及方法
CN103995755A (zh) 基于移动终端的服务器优化方法及服务器系统
CN108337315B (zh) 监控系统的部署方法、装置、计算机设备及存储介质
Abdullah et al. An energy efficient message scheduling algorithm considering node failure in IoT environment
CN102843259A (zh) 集群内中间件自管理热备方法及系统
CN103581332A (zh) HDFS架构及HDFS架构中NameNode节点的压力分解方法
CN103139018A (zh) 一种调变一体化系统下的网卡状态监测与tcp通信方法
Jiang et al. Design strategy for optimizing power consumption of sensor node with Min (N, T) policy M/G/1 queuing models
CN103944814A (zh) 一种数据交换方法和系统及一种网关服务器
CN103516734A (zh) 数据处理方法、设备和系统
CN108877188A (zh) 一种环保数据并发采集及多网络发布方法和装置
Lingaraj et al. A survey on middleware challenges and approaches for wireless sensor networks
CN103428288A (zh) 基于分区状态表和协调节点的副本同步方法
CN103973466B (zh) 一种唤醒休眠链路的方法及装置
EP3660679B1 (en) Data backup method, device and system
CN107071189A (zh) 一种通讯设备物理接口的连接方法
CN205829706U (zh) 数据集群存储装置
US20150169033A1 (en) Systems and methods for power management in stackable switch
CN105471616A (zh) 缓存系统管理方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20161012