CN107566536A - 大数据处理平台网络架构 - Google Patents

大数据处理平台网络架构 Download PDF

Info

Publication number
CN107566536A
CN107566536A CN201711028972.1A CN201711028972A CN107566536A CN 107566536 A CN107566536 A CN 107566536A CN 201711028972 A CN201711028972 A CN 201711028972A CN 107566536 A CN107566536 A CN 107566536A
Authority
CN
China
Prior art keywords
data
storage
data processing
unit
management
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711028972.1A
Other languages
English (en)
Inventor
江利超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changsha Quasi Electronic Technology Co Ltd
Original Assignee
Changsha Quasi Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changsha Quasi Electronic Technology Co Ltd filed Critical Changsha Quasi Electronic Technology Co Ltd
Priority to CN201711028972.1A priority Critical patent/CN107566536A/zh
Publication of CN107566536A publication Critical patent/CN107566536A/zh
Pending legal-status Critical Current

Links

Abstract

本发明提供一种大数据处理平台网络架构，包括数据收集传送系统、数据存储系统、数据检索系统和后台管理系统，数据收集传送系统包括数据采集终端、数据处理单元和数据发送单元，数据采集终端、数据处理单元和数据发送单元依次相连；数据存储系统包括存储管理节点、云存储空间、本地存储器服务器、备份存储服务器和虚拟设备，存储管理节点和数据收集传送系统中的数据发送单元相连接，存储管理节点分别与云存储空间、本地存储器服务器和备份存储服务器相连接，云存储空间与虚拟设备相连接。本申请能够对海量的处理数据进行存储，且存储容量大、易扩展和管理，从而完善大数据处理平台网络架构，有效实现大数据的存储和管理。

Description

大数据处理平台网络架构
技术领域
本发明涉及计算机领域，特别是涉及一种大数据处理平台网络架构。
背景技术
近年来，大数据如浪潮般席卷全球，深刻改变了人们的生活、工作和思维方式，世界上越来越多的国家开始从战略层面认识大数据，在各领域融入大数据思维和技术。大数据通常用于形容所创造的大量非结构化数据和半结构化数据，故大数据处理平台是大数据技术的关键技术之一，其直接影响到数据处理分析的成本和时间。而现有技术中的大数据处理平台不够完善和全面，不能够实现大数据的存储和管理。
发明内容
鉴于以上所述现有技术的缺陷和各种不足之处，本发明要解决的技术问题在于提供一种大数据处理平台网络架构。
为实现上述目的，本发明提供一种大数据处理平台网络架构，包括数据收集传送系统、数据存储系统、数据检索系统和后台管理系统，所述数据收集传送系统包括数据采集终端、数据处理单元和数据发送单元，所述数据采集终端、数据处理单元和数据发送单元依次相连；所述数据存储系统包括存储管理节点、云存储空间、本地存储器服务器、备份存储服务器和虚拟设备，所述存储管理节点和所述数据收集传送系统中的数据发送单元相连接，所述存储管理节点分别与云存储空间、本地存储器服务器和备份存储服务器相连接，所述云存储空间与虚拟设备相连接；所述数据检索系统分别与数据存储系统中的本地存储器服务器、备份存储服务器和虚拟设备相连接，所述数据检索系统和后台管理系统相连接。
本发明涉及的大数据处理平台网络架构具有以下有益效果：
本申请能够对海量的处理数据进行存储，且存储容量大、易扩展和管理，从而完善大数据处理平台网络架构，有效实现大数据的存储和管理。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，并可依照说明书的内容予以实施，以下以本发明的较佳实施例并配合附图对本申请进行详细说明。
附图说明
图1为本申请中大数据处理平台网络架构的构成框图。
元件标号说明
1 数据收集传送系统
11 数据采集终端
12 数据处理单元
13 数据发送单元
2 数据存储系统
21 存储管理节点
22 云存储空间
23 本地存储器服务器
24 备份存储服务器
24 虚拟设备
3 数据检索系统
4 后台管理系统
具体实施方式
下面结合附图对本发明的优选实施例进行详细介绍。
如图1所示，本申请提供一种大数据处理平台网络架构，包括数据收集传送系统1、数据存储系统2、数据检索系统3和后台管理系统4，所述数据收集传送系统1包括数据采集终端11、数据处理单元12和数据发送单元13，所述数据采集终端11、数据处理单元12和数据发送单元13依次相连；所述数据存储系统2包括存储管理节点21、云存储空间22、本地存储器服务器23、备份存储服务器24和虚拟设备25，所述存储管理节点21和所述数据收集传送系统1中的数据发送单元13相连接，所述存储管理节点21分别与云存储空间22、本地存储器服务器23和备份存储服务器24相连接，所述云存储空间22与虚拟设备25相连接、用于将虚拟设备25映射为虚拟存储设备；所述数据检索系统3分别与数据存储系统2中的本地存储器服务器23、备份存储服务器24和虚拟设备25相连接，所述数据检索系统3和后台管理系统4相连接。本申请能够对海量的处理数据进行存储，且存储容量大、易扩展和管理，从而完善大数据处理平台网络架构，有效实现大数据的存储和管理。
综上所述，本发明有效克服了现有技术中的种种缺点而具高度产业利用价值。
以上对本发明实施例所提供的一种大数据处理平台网络架构进行了详细介绍，对于本领域的一般技术人员，依据本发明实施例的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制，凡依本发明设计思想所做的任何改变都在本发明的保护范围之内。

Claims (1)

1.一种大数据处理平台网络架构，其特征在于：包括数据收集传送系统(1)、数据存储系统(2)、数据检索系统(3)和后台管理系统(4)，所述数据收集传送系统(1)包括数据采集终端(11)、数据处理单元(12)和数据发送单元(13)，所述数据采集终端(11)、数据处理单元(12)和数据发送单元(13)依次相连；所述数据存储系统(2)包括存储管理节点(21)、云存储空间(22)、本地存储器服务器(23)、备份存储服务器(24)和虚拟设备(25)，所述存储管理节点(21)和所述数据收集传送系统(1)中的数据发送单元(13)相连接，所述存储管理节点(21)分别与云存储空间(22)、本地存储器服务器(23)和备份存储服务器(24)相连接，所述云存储空间(22)与虚拟设备(25)相连接；所述数据检索系统(3)分别与数据存储系统(2)中的本地存储器服务器(23)、备份存储服务器(24)和虚拟设备(25)相连接，所述数据检索系统(3)和后台管理系统(4)相连接。
CN201711028972.1A 2017-10-29 2017-10-29 大数据处理平台网络架构 Pending CN107566536A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711028972.1A CN107566536A (zh) 2017-10-29 2017-10-29 大数据处理平台网络架构

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711028972.1A CN107566536A (zh) 2017-10-29 2017-10-29 大数据处理平台网络架构

Publications (1)

Publication Number Publication Date
CN107566536A true CN107566536A (zh) 2018-01-09

Family

ID=61032651

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711028972.1A Pending CN107566536A (zh) 2017-10-29 2017-10-29 大数据处理平台网络架构

Country Status (1)

Country Link
CN (1) CN107566536A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112507368A (zh) * 2020-12-30 2021-03-16 广西云牛动力网络科技有限公司 一种异步大数据的混合提交系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102523251A (zh) * 2011-11-25 2012-06-27 北京开拓天际科技有限公司 对海量数据处理的云存储架构及应用该架构的云存储平台
CN102932419A (zh) * 2012-09-25 2013-02-13 浙江图讯科技有限公司 一种用于面向工矿企业的安全生产云服务平台的数据存储系统
US20140333713A1 (en) * 2012-12-14 2014-11-13 Biscotti Inc. Video Calling and Conferencing Addressing
US20170206034A1 (en) * 2006-05-17 2017-07-20 Richard Fetik Secure Application Acceleration System, Methods and Apparatus
CN206542448U (zh) * 2017-02-22 2017-10-03 大唐电商技术有限公司 一种大数据处理平台网络架构
CN107273463A (zh) * 2017-06-02 2017-10-20 深圳齐心集团股份有限公司 一种大数据文具检索系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170206034A1 (en) * 2006-05-17 2017-07-20 Richard Fetik Secure Application Acceleration System, Methods and Apparatus
CN102523251A (zh) * 2011-11-25 2012-06-27 北京开拓天际科技有限公司 对海量数据处理的云存储架构及应用该架构的云存储平台
CN102932419A (zh) * 2012-09-25 2013-02-13 浙江图讯科技有限公司 一种用于面向工矿企业的安全生产云服务平台的数据存储系统
US20140333713A1 (en) * 2012-12-14 2014-11-13 Biscotti Inc. Video Calling and Conferencing Addressing
CN206542448U (zh) * 2017-02-22 2017-10-03 大唐电商技术有限公司 一种大数据处理平台网络架构
CN107273463A (zh) * 2017-06-02 2017-10-20 深圳齐心集团股份有限公司 一种大数据文具检索系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112507368A (zh) * 2020-12-30 2021-03-16 广西云牛动力网络科技有限公司 一种异步大数据的混合提交系统

Similar Documents

Publication Publication Date Title
CN104102790B (zh) 基于gis的供电图自动成图系统及方法
US20140278228A1 (en) Mapping uncertain geometries to graticules
CN104166628A (zh) 管理内存的方法、装置和系统
CN102801783A (zh) 一种本地云存储方法及系统
CN103986783A (zh) 云计算系统
CN104168335A (zh) 一种数据同步方法和装置
CN103778120A (zh) 全局文件标识生成方法、生成装置及相应的分布式文件系统
CN104091034B (zh) 基于图形匹配的线路联络图自动成图系统及方法
CN107566536A (zh) 大数据处理平台网络架构
CN106156049A (zh) 一种数据读取的方法和系统
CN104009863A (zh) 一种服务器系统、及自动获取服务器编号的方法
CN103116475A (zh) 一种自动精简配置扩容的方法
CN107220003A (zh) 一种数据读取方法和系统
CN107590260A (zh) 点云数据实时检索方法及其系统
CN101976229A (zh) 一种系统中外部设备的数据读取方法、系统及装置
CN105162837A (zh) 海量数据存储环境下提升i/o吞吐率的方法及系统
CN110019538A (zh) 一种数据表切换方法及装置
CN104714966A (zh) 一种航空电子网络管理信息的存储方法及快速查找方法
CN104850548A (zh) 一种实现大数据平台输入/输出处理的方法及系统
EP3096248A1 (en) Data management system and data management method
Ullah Rise of big data due to hybrid platform of cloud computing and Internet of Thing
CN102110134A (zh) 轨道交通用实时数据库、操作方法及操作装置
Tan et al. Design of wireless sensor networks considering the robustness of the topology
CN105589937A (zh) 一种分布式数据库存储架构系统
CN113342991B (zh) 一种基于人工智能的知识图谱融合系统及其方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180109

WD01 Invention patent application deemed withdrawn after publication