CN109040203A - 一种基于大数据的信息采集系统 - Google Patents

一种基于大数据的信息采集系统 Download PDF

Info

Publication number
CN109040203A
CN109040203A CN201810779914.0A CN201810779914A CN109040203A CN 109040203 A CN109040203 A CN 109040203A CN 201810779914 A CN201810779914 A CN 201810779914A CN 109040203 A CN109040203 A CN 109040203A
Authority
CN
China
Prior art keywords
module
big data
data
output port
cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810779914.0A
Other languages
English (en)
Inventor
龙丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Feixi Hehui Science And Technology Service Co Ltd
Original Assignee
Feixi Hehui Science And Technology Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Feixi Hehui Science And Technology Service Co Ltd filed Critical Feixi Hehui Science And Technology Service Co Ltd
Priority to CN201810779914.0A priority Critical patent/CN109040203A/zh
Publication of CN109040203A publication Critical patent/CN109040203A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于大数据的信息采集系统，包括采集模块、大数据管理模块、大数据网络传输模块、大数据云端服务器、云存储计算模块和大数据云端子服务器，所述大数据管理模块的信号输出端口连接有数据分析模块，所述数据加密模块与GPS模块均通过大数据网络传输模块与大数据云端服务器连接，所述大数据云端服务器通过云存储模块与云存储计算模块连接，所述读写模块的信号输出端口连接有数据处理服务器，所述数据处理服务器的信号输出端口连接有数据分发模块，所述数据分发模块的信号输出端口与大数据云端子服务器的信号输入端口连接。该发明可代替人力进行信息采集、分类投放、分类处理，提高工作效率，且信息采集具有普遍性和代表性。

Description

一种基于大数据的信息采集系统
技术领域
本发明涉及大数据系统相关技术领域，具体为一种基于大数据的信息采集系统。
背景技术
随着时代的进步，越来越多的先进技术应用到我们的生活和经济的发展中，大数据分析平台基于海量的数据信息和计算环境，代替人力且能进行数据处理和分析的一种高新技术，以互联网为载体，进行远程传输信息和监管服务，这种系统可极大地降低了人力的投入，具有高效、及时、精准和智能地特点，成本较低，且便于远程监管和服务。
传统的民意信息采集，大多基于人工地操作，通过上门或者抽样与人民 进行沟通交流，并进行记录相关民生问题，但是这样的方式既耽误时间，且 效率极低，且采集的信息不具有普遍性，很难全方面地体现出社会当下发展 的民生问题，从而就很难体现出人们的幸福感，所以这里设计生产一种基于 大数据的信息采集系统，以便于解决上述问题。
发明内容
本发明的目的在于提供一种基于大数据的信息采集系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种基于大数据的信息采集系统，包括采集模块、大数据管理模块、大数据网络传输模块、大数据云端服务器、云存储计算模块和大数据云端子服务器，所述采集模块的信号输出端口连接有GPS模块，所述大数据管理模块的信号输入端口与采集模块的信号输出端口连接，所述大数据管理模块的信号输出端口连接有数据分析模块，所述数据分析模块的信号输出端口连接有数据过滤模块，所述数据过滤模块的信号输出端口连接有数据加密模块，所述数据加密模块与GPS模块均通过大数据网络传输模块与大数据云端服务器连接，所述大数据云端服务器包括有云存储模块，所述大数据云端服务器通过云存储模块与云存储计算模块连接，所述云存储计算模块的信息输出端口连接有冗余数据消除模块和预警模块，所述预警模块的信号输出端口连接有读写模块，所述读写模块的信号输出端口连接有数据处理服务器，所述数据处理服务器的信号输出端口连接有数据分发模块，所述数据分发模块的信号输出端口与大数据云端子服务器的信号输入端口连接。
优选的，所述采集模块设置有若干个，且分别投放到城市的各个定点采集区域。
优选的，所述采集模块的信号输入端口外接有输入设备。
优选的，所述大数据网络传输模块采用移动互联网传输方式。
优选的，所述大数据云端子服务器设置有若干个，且分投放到政府各个办公网点。
优选的，所述云存储模块采用树形结构存储方式。
优选的，所述大数据云端子服务器的信号输出端口连接有A/D转换模块，所述A/D转换模块的信号输出端口连接有数显模块。
与现有技术相比，本发明的有益效果是：
1.本发明为一种基于大数据的信息采集系统，可代替人力进行信息采集、分类投放、分类处理，提高工作效率。
2.本发明可节省大量的人力和物力的投入，且对于信息的采集普遍性和代表性。
3.本发明可针对不同地域的民生信息采集进行汇总分类，可直接进行详细分发总结，便于后期的调整和改善作参考。
附图说明
图1为本发明实施例的整体结构示意图。
图中：1、采集模块；2、大数据管理模块；3、数据分析模块；4、数据过滤模块；5、数据加密模块；6、大数据网络传输模块；7、大数据云端服务器；8、云存储模块；9、冗余数据消除模块；10、云存储计算模块；11、预警模块；12、读写模块；13、数据处理服务器；14、数据分发模块；15、大数据云端子服务器；16、A/D转换模块；17、数显模块；18、GPS模块。
具体实施方式
本申请实施例通过提供一种基于大数据的信息采集系统，解决了现有技术中民生问题信息采集不具有普遍性和代表性，投入人力和物力较大，可实施性较差的问题。
本申请实施例中的技术方案为解决上述串扰的问题，总体思路如下：
通过将采集模块1分别投放到各个采集网点，仅需要少数人员负责看管以及维持现场秩序即可，将采集的信息通过分析，然后过滤掉失效信息，通过大数据网络传输模块6进行传送至大数据云端服务器7，另外，通过GPS模块18可定位到信息采集的来源地，具有很强的地域性和针对性，以便于后期对信息处理作出相关的调整策略提供地域性的参考，通过大数据网络传输模块6可将所有采集的信息传输到大数据云端服务器7，针对这些海量的信息，通过云存储模块8进行存储并以树形结构进行分类存放，与此同时，通过云存储计算模块10进行计算和分析，将某一类问题设顶额定范围，也就是说某一类问题较为突出，一旦超出设定范围，将通过预警模块11进行报警，并通过读写模块12读写出来，通过数据处理服务器13进行分析处理，根据数据分发模块14分发到相应的大数据云端子服务器15，通过A/D转换模块16进行模数转换，变成数值显示在数显模块17上，相关部门负责任就可以针对投放的信息进行分析统计和处理，节省大量的人力和物力的投入，且高效合理，可实施性较高。
下面将结合本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
请参阅图1，本实施例提供了一种基于大数据的信息采集系统，包括采集模块1、大数据管理模块2、大数据网络传输模块6、大数据云端服务器7、云存储计算模块10和大数据云端子服务器15，采集模块1的信号输出端口连接有GPS模块18，大数据管理模块2的信号输入端口与采集模块1的信号输出端口连接，大数据管理模块2的信号输出端口连接有数据分析模块3，数据分析模块3的信号输出端口连接有数据过滤模块4，数据过滤模块4的信号输出端口连接有数据加密模块5，数据加密模块5与GPS模块18均通过大数据网络传输模块6与大数据云端服务器7连接，大数据云端服务器7包括有云存储模块8，大数据云端服务器7通过云存储模块8与云存储计算模块10连接，云存储计算模块10的信息输出端口连接有冗余数据消除模块9和预警模块11，预警模块11的信号输出端口连接有读写模块12，读写模块12的信号输出端口连接有数据处理服务器13，数据处理服务器13的信号输出端口连接有数据分发模块14，数据分发模块14的信号输出端口与大数据云端子服务器 15的信号输入端口连接。
本实施例中，通过采集模块1，对相关地域的人们进行民生问题进行采集，然后利用数据分析模块3进行分析研判信息的有效性，在通过数据过滤模块4 过滤掉不合理的信息，通过大数据网络传输模块6进行传送至大数据云端服务器7，另外，通过GPS模块18可定位到信息采集的来源地，具有很强的地域性和针对性，以便于后期对信息处理作出相关的调整策略提供地域性的参考，通过大数据网络传输模块6可将所有采集的信息传输到大数据云端服务器7，针对这些海量的信息，通过云存储模块8进行存储并以树形结构进行分类存放，与此同时，通过云存储计算模块10进行计算和分析，将某一类问题设顶额定范围，也就是说某一类问题较为突出，一旦超出设定范围，将通过预警模块11进行报警，并通过读写模块12读写出来，通过数据处理服务器 13进行分析处理，根据数据分发模块14分发到相应的大数据云端子服务器 15。
实施例二
请参阅图1，在实施例1的基础上做了进一步改进：大数据网络传输模块 6采用移动互联网传输方式，便于远程传输。云存储模块8采用树形结构存储方式，便于分类存放信息。大数据云端子服务器15的信号输出端口连接有A/D 转换模块16，A/D转换模块16的信号输出端口连接有数显模块17，通过A/D 转换模块16进行模数转换，变成数值显示在数显模块17上，相关部门负责人就可以针对投放的信息进行分析统计和处理。
本发明的实施例中，采集模块1设置有若干个，且分别投放到城市的各个定点采集区域，这样设置所采集的信息具有普遍性和针对性，很具有代表性。采集模块1的信号输入端口外接有输入设备。大数据云端子服务器 15设置有若干个，且分投放到政府各个办公网点，便于各政府职能部门直接了解问题，快速解决问题，提高办公效率。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (7)

1.一种基于大数据的信息采集系统，包括采集模块(1)、大数据管理模块(2)、大数据网络传输模块(6)、大数据云端服务器(7)、云存储计算模块(10)和大数据云端子服务器(15)，其特征在于：所述采集模块(1)的信号输出端口连接有GPS模块(18)，所述大数据管理模块(2)的信号输入端口与采集模块(1)的信号输出端口连接，所述大数据管理模块(2)的信号输出端口连接有数据分析模块(3)，所述数据分析模块(3)的信号输出端口连接有数据过滤模块(4)，所述数据过滤模块(4)的信号输出端口连接有数据加密模块(5)，所述数据加密模块(5)与GPS模块(18)均通过大数据网络传输模块(6)与大数据云端服务器(7)连接，所述大数据云端服务器(7)包括有云存储模块(8)，所述大数据云端服务器(7)通过云存储模块(8)与云存储计算模块(10)连接，所述云存储计算模块(10)的信息输出端口连接有冗余数据消除模块(9)和预警模块(11)，所述预警模块(11)的信号输出端口连接有读写模块(12)，所述读写模块(12)的信号输出端口连接有数据处理服务器(13)，所述数据处理服务器(13)的信号输出端口连接有数据分发模块(14)，所述数据分发模块(14)的信号输出端口与大数据云端子服务器(15)的信号输入端口连接。
2.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述采集模块(1)设置有若干个，且分别投放到城市的各个定点采集区域。
3.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述采集模块(1)的信号输入端口外接有输入设备。
4.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述大数据网络传输模块(6)采用移动互联网传输方式。
5.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述大数据云端子服务器(15)设置有若干个，且分投放到政府各个办公网点。
6.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述云存储模块(8)采用树形结构存储方式。
7.根据权利要求1所述的一种基于大数据的信息采集系统，其特征在于：所述大数据云端子服务器(15)的信号输出端口连接有A/D转换模块(16)，所述A/D转换模块(16)的信号输出端口连接有数显模块(17)。
CN201810779914.0A 2018-07-16 2018-07-16 一种基于大数据的信息采集系统 Pending CN109040203A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810779914.0A CN109040203A (zh) 2018-07-16 2018-07-16 一种基于大数据的信息采集系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810779914.0A CN109040203A (zh) 2018-07-16 2018-07-16 一种基于大数据的信息采集系统

Publications (1)

Publication Number Publication Date
CN109040203A true CN109040203A (zh) 2018-12-18

Family

ID=64643288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810779914.0A Pending CN109040203A (zh) 2018-07-16 2018-07-16 一种基于大数据的信息采集系统

Country Status (1)

Country Link
CN (1) CN109040203A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457537A (zh) * 2019-08-19 2019-11-15 河北泰越智新科技股份有限公司 网络机房大数据综合采集系统
CN110704371A (zh) * 2019-09-24 2020-01-17 江苏医健大数据保护与开发有限公司 大规模数据管理与数据分发系统及方法
CN111273592A (zh) * 2020-03-18 2020-06-12 安徽格雷皖创信息科技有限公司 一种物联大数据采集处理系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103037019A (zh) * 2013-01-07 2013-04-10 北京华胜天成科技股份有限公司 一种基于云计算的分布式数据采集系统及方法
CN103984299A (zh) * 2014-04-23 2014-08-13 杭州慧牧科技有限公司 一种智能化养殖管理系统
CN206133655U (zh) * 2016-08-17 2017-04-26 厦门精图信息技术有限公司 一种基于云服务的地名普查采集管理系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103037019A (zh) * 2013-01-07 2013-04-10 北京华胜天成科技股份有限公司 一种基于云计算的分布式数据采集系统及方法
CN103984299A (zh) * 2014-04-23 2014-08-13 杭州慧牧科技有限公司 一种智能化养殖管理系统
CN206133655U (zh) * 2016-08-17 2017-04-26 厦门精图信息技术有限公司 一种基于云服务的地名普查采集管理系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457537A (zh) * 2019-08-19 2019-11-15 河北泰越智新科技股份有限公司 网络机房大数据综合采集系统
CN110704371A (zh) * 2019-09-24 2020-01-17 江苏医健大数据保护与开发有限公司 大规模数据管理与数据分发系统及方法
CN111273592A (zh) * 2020-03-18 2020-06-12 安徽格雷皖创信息科技有限公司 一种物联大数据采集处理系统

Similar Documents

Publication Publication Date Title
CN109040203A (zh) 一种基于大数据的信息采集系统
CN107645542A (zh) 一种应用于云审计系统的数据采集装置
CN109542733A (zh) 一种高可靠的实时日志收集及可视化检索方法
CN103297503B (zh) 基于分层次信息提取服务器的移动终端群智感知系统
CN107193909A (zh) 数据处理方法及系统
CN107622064A (zh) 一种数据读取方法及系统
CN108763044A (zh) 一种日志处理方法及装置
CN107169143A (zh) 一种高效的海量舆情数据信息集群匹配方法
CN105959233A (zh) 基于流式计算的移动终端流量分发系统及方法
CN107679087A (zh) 一种面向中小企业的成长信息采集移动终端微平台
CN109429255A (zh) 流量调整方法、装置、服务器、电子设备及存储介质
CN103024819A (zh) 基于用户终端ip的第三代移动通信核心网数据分流方法
CN109241187A (zh) 基于Kafka消息队列的MongoDB日志采集和分析系统
CN107689958A (zh) 一种应用于云审计系统的网络审计子系统
CN109038816A (zh) 一种输电线路巡检管理系统
CN110555671A (zh) 一种城市园林绿化智能巡管养系统
CN106951360A (zh) 数据统计完整度计算方法和系统
CN106970976A (zh) 一种基于游客移动信令数据的景区实时动态客流量统计方法
CN108173697B (zh) 一种视频专网安全运维预警管控系统
CN204069181U (zh) 一种执法记录信息联动控制系统
CN110377757A (zh) 一种实时知识图谱构建系统
CN107633351A (zh) 智慧城市绩效考核管理系统
CN110166319A (zh) 一种网络设备参数采集方法
CN109728540A (zh) 一种电网线路巡检管理方法
CN109377031A (zh) 一种老人陪护设备后台管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181218