CN110515997A - 一种大数据智能分析系统 - Google Patents
一种大数据智能分析系统 Download PDFInfo
- Publication number
- CN110515997A CN110515997A CN201910779990.6A CN201910779990A CN110515997A CN 110515997 A CN110515997 A CN 110515997A CN 201910779990 A CN201910779990 A CN 201910779990A CN 110515997 A CN110515997 A CN 110515997A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- electrically connected
- cache server
- output end
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了大数据技术领域的一种大数据智能分析系统，包括数据收集模块、数据分类模块、数据缓存服务器、中央处理器和用户终端，数据收集模块的信号输出端分别与数据分类模块和数据缓存服务器的信号输入端电性连接，数据分类模块的信号输出端与数据缓存服务器的信号输入端电性连接，数据缓存服务器的信号输出端与中央处理器的信号输入端电性连接，中央处理的信号输出端与用户终端的信号输入端电性连接；本发明通过将数据收集模块中统一收集到的数据通过数据分类模块按照不同的指标进行分类，先实现数据的分类，直接将经过初步分类的数据存储供调用，有效节省初步从所有的无序数据中挑选调用所需数据的行为，缩短数据调用时间。
Description
技术领域
本发明涉及大数据技术领域，具体涉及一种大数据智能分析系统。
背景技术
大数据(bigdata)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。随着大数据时代的来临，网络中的信息量呈现指数式增长，随之带来了信息过载问题。推荐系统是解决信息过载最有效的方式之一，大数据推荐系统已经逐渐成为信息领域的研究热点。近几年，大数据迅速发展成为科技界和企业界甚至世界各国政府关注的热点。《Nature》和《Science》等相继出版专刊专门探讨大数据带来的机遇和挑战。著名管理咨询公司麦肯锡称:“数据已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于大数据的挖掘和运用，预示着新一波生产力增长和消费盈余浪潮的到来”。美国政府认为大数据是“未来的新石油”，一个国家拥有数据的规模和运用数据的能力将成为综合国力的重要组成部分，对数据的占有和控制将成为国家间和企业间新的争夺焦点。大数据已成为社会各界关注的新焦点，“大数据时代”已然来临。大数据分析是指对规模巨大的数据进行分析。大数据可以概括为4个V，数据量大(Volume)、速度快(Velocity)、类型多(Variety)、价值(Value)。但是目前的数据分析是基于所有的数据笼统的在一起进行分析，耗费时间。基于此，本发明设计了一种大数据智能分析系统，以解决上述问题。
发明内容
本发明的目的在于提供一种大数据智能分析系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种大数据智能分析系统，包括数据收集模块、数据分类模块、数据缓存服务器、中央处理器和用户终端，所述数据收集模块的信号输出端分别与所述数据分类模块和数据缓存服务器的信号输入端电性连接，所述数据分类模块的信号输出端与数据缓存服务器的信号输入端电性连接，所述数据缓存服务器的信号输出端与中央处理器的信号输入端电性连接，所述中央处理的信号输出端与用户终端的信号输入端电性连接。
优选的，所述数据分类模块中按照不同的类目将数据分为多组传输至数据缓存服务器，且不同的数据分组存在数据重合现象。
优选的，所述数据缓存服务器包括原始数据、分类数据、数据调用模块、数据对比模块和数据输出模块，所述原始数据为通过所述数据收集模块完成数据的收集，并将收集到的数据存储到数据缓存服务器中，生成原始数据，所述分类数据未将所述数据收集模块收集的数据通过数据分类模块进行分类，将分类过的数据按照不同的类目再次存储到数据缓存服务器，生成分类数据，所述数据调用模块的信号输入端与分类数据的信号输出端电性连接，所述数据对比模块的信号输入端分别与所述数据调用模块和原始数据电性连接，所述数据对比模块的信号输出端与数据输出模块的信号输入端电性连接，所述数据调用模块调用所述分类数据，所述数据对比模块对比所述原始数据和所述数据调用信号调用的分类数据，两组数据对比完成后通过所述数据输出模块输出到中央处理器。
优选的，所述中央处理器包括数据处理模块和数据处理记录生成模块，所述数据处理模块的信号输出端分别与数据处理记录生成模块和用户终端的信号输入端电性连接，所述数据处理模块接收所述数据输出模块输出的数据进行处理，所述数据处理记录生成模块将所述数据处理模块对所述输出输出模块输出的数据的处理生成记录存储。
优选的，所述用户终端包括显示模块、用户点击调用模块和数据修改模块，所述用户点击调用模块调用经过中央处理器处理后的数据，通过所述显示模块显示数据，所述数据修改模块在线修改所述中央处理器处理后的数据，并将修改后的数据存储在用户终端，生成修改记录。
优选的，所述用户终端通过无线通信模块接收所述中央处理器输出的数据。
与现有技术相比，本发明的有益效果是：本发明通过数据收集模块会对用户在用户终端上的所有行为数据进行统一收集，再将数据收集模块中统一收集到的数据通过数据分类模块按照不同的指标进行分类，先实现数据的分类，直接将经过初步分类的数据存储供调用，有效节省初步从所有的无序数据中挑选调用所需数据的行为，缩短数据调用时间，在将数据通过数据输出模块传输到中央处理前之前，先通过数据对比模块将通过数据调用模块调用的分类数据与数据缓存服务器中存储的原始数据进行对比，避免数据损坏，防止调用有损数据，避免有数据调用有误造成的分析结果误差。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明结构示意图。
图2为本发明数据缓存服务器结构示意图。
图3为本发明中央处理器结构示意图。
图4为本发明用户终端结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1-4，本发明提供一种技术方案：一种大数据智能分析系统，包括数据收集模块、数据分类模块、数据缓存服务器、中央处理器和用户终端，所述数据收集模块的信号输出端分别与所述数据分类模块和数据缓存服务器的信号输入端电性连接，所述数据分类模块的信号输出端与数据缓存服务器的信号输入端电性连接，所述数据缓存服务器的信号输出端与中央处理器的信号输入端电性连接，所述中央处理的信号输出端与用户终端的信号输入端电性连接。
其中，数据分类模块中按照不同的类目将数据分为多组传输至数据缓存服务器，且不同的数据分组存在数据重合现象。
数据缓存服务器包括原始数据、分类数据、数据调用模块、数据对比模块和数据输出模块，所述原始数据为通过所述数据收集模块完成数据的收集，并将收集到的数据存储到数据缓存服务器中，生成原始数据，所述分类数据未将所述数据收集模块收集的数据通过数据分类模块进行分类，将分类过的数据按照不同的类目再次存储到数据缓存服务器，生成分类数据，所述数据调用模块的信号输入端与分类数据的信号输出端电性连接，所述数据对比模块的信号输入端分别与所述数据调用模块和原始数据电性连接，所述数据对比模块的信号输出端与数据输出模块的信号输入端电性连接，所述数据调用模块调用所述分类数据，所述数据对比模块对比所述原始数据和所述数据调用信号调用的分类数据，两组数据对比完成后通过所述数据输出模块输出到中央处理器。
中央处理器包括数据处理模块和数据处理记录生成模块，所述数据处理模块的信号输出端分别与数据处理记录生成模块和用户终端的信号输入端电性连接，所述数据处理模块接收所述数据输出模块输出的数据进行处理，所述数据处理记录生成模块将所述数据处理模块对所述输出输出模块输出的数据的处理生成记录存储。
用户终端包括显示模块、用户点击调用模块和数据修改模块，所述用户点击调用模块调用经过中央处理器处理后的数据，通过所述显示模块显示数据，所述数据修改模块在线修改所述中央处理器处理后的数据，并将修改后的数据存储在用户终端，生成修改记录。
用户终端通过无线通信模块接收所述中央处理器输出的数据。
本实施例的一个具体应用为：数据收集模块会对用户在用户终端上的所有行为数据进行统一收集，将统一收集的数据作为原始数据保存在数据缓存服务器，再将数据收集模块中统一收集到的数据通过数据分类模块按照不同的指标进行分类，分类后的多组数据可以出现数据重合现象，将分类后的数据作为分类数据再次存储在数据缓存服务器中，先实现数据的分类，直接将经过初步分类的数据存储供调用，有效节省初步从所有的无序数据中挑选调用所需数据的行为，有效节省数据调用时间，通过数据调用模块按照需求调用分类数据，在将数据通过数据输出模块传输到中央处理前之前，先通过数据对比模块将通过数据调用模块调用的分类数据与数据缓存服务器中存储的原始数据进行对比，避免数据损坏，防止调用有损数据，避免有数据调用有误造成的分析结果误差，利用中央处理器进行数据处理，通过数据处理记录生成模块生成处理记录，用户在用户终端调用分析数据，最终使得数据分析结果供用户使用，还可以通过数据修改模块对数据进行修改。
在本说明书的描述中，参考术语“一个实施例”、“示例”、“具体示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。
Claims (6)
1.一种大数据智能分析系统，包括数据收集模块、数据分类模块、数据缓存服务器、中央处理器和用户终端，其特征在于：所述数据收集模块的信号输出端分别与所述数据分类模块和数据缓存服务器的信号输入端电性连接，所述数据分类模块的信号输出端与数据缓存服务器的信号输入端电性连接，所述数据缓存服务器的信号输出端与中央处理器的信号输入端电性连接，所述中央处理的信号输出端与用户终端的信号输入端电性连接。
2.根据权利要求1所述的一种大数据智能分析系统，其特征在于，所述数据分类模块中按照不同的类目将数据分为多组传输至数据缓存服务器，且不同的数据分组存在数据重合现象。
3.根据权利要求2所述的一种大数据智能分析系统，其特征在于：所述数据缓存服务器包括原始数据、分类数据、数据调用模块、数据对比模块和数据输出模块，所述原始数据为通过所述数据收集模块完成数据的收集，并将收集到的数据存储到数据缓存服务器中，生成原始数据，所述分类数据未将所述数据收集模块收集的数据通过数据分类模块进行分类，将分类过的数据按照不同的类目再次存储到数据缓存服务器，生成分类数据，所述数据调用模块的信号输入端与分类数据的信号输出端电性连接，所述数据对比模块的信号输入端分别与所述数据调用模块和原始数据电性连接，所述数据对比模块的信号输出端与数据输出模块的信号输入端电性连接，所述数据调用模块调用所述分类数据，所述数据对比模块对比所述原始数据和所述数据调用信号调用的分类数据，两组数据对比完成后通过所述数据输出模块输出到中央处理器。
4.根据权利要求3所述的一种大数据智能分析系统，其特征在于：所述中央处理器包括数据处理模块和数据处理记录生成模块，所述数据处理模块的信号输出端分别与数据处理记录生成模块和用户终端的信号输入端电性连接，所述数据处理模块接收所述数据输出模块输出的数据进行处理，所述数据处理记录生成模块将所述数据处理模块对所述输出输出模块输出的数据的处理生成记录存储。
5.根据权利要求4所述的一种大数据智能分析系统，其特征在于：所述用户终端包括显示模块、用户点击调用模块和数据修改模块，所述用户点击调用模块调用经过中央处理器处理后的数据，通过所述显示模块显示数据，所述数据修改模块在线修改所述中央处理器处理后的数据，并将修改后的数据存储在用户终端，生成修改记录。
6.根据权利要求5所述的一种大数据智能分析系统，其特征在于：所述用户终端通过无线通信模块接收所述中央处理器输出的数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910779990.6A CN110515997A (zh) | 2019-08-22 | 2019-08-22 | 一种大数据智能分析系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910779990.6A CN110515997A (zh) | 2019-08-22 | 2019-08-22 | 一种大数据智能分析系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110515997A true CN110515997A (zh) | 2019-11-29 |
Family
ID=68627587
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910779990.6A Pending CN110515997A (zh) | 2019-08-22 | 2019-08-22 | 一种大数据智能分析系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110515997A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111614740A (zh) * | 2020-05-08 | 2020-09-01 | 快猪侠信息技术(杭州)有限公司 | 一种智能识别大数据平台及其处理方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160112045A (ko) * | 2015-03-17 | 2016-09-28 | 대우조선해양 주식회사 | 정도 분석 시뮬레이션 결과를 이용한 정도 품질 평가 시스템 |
| CN106326482A (zh) * | 2016-08-31 | 2017-01-11 | 江苏中威科技软件系统有限公司 | 一种大数据可视化采集分析及文件转换系统和方法 |
| CN106447163A (zh) * | 2016-08-29 | 2017-02-22 | 安徽美图信息科技有限公司 | 一种基于精细化逻辑分类技术的数据质量自动检测系统 |
| CN108898029A (zh) * | 2018-10-08 | 2018-11-27 | 马鞍山沐及信息科技有限公司 | 一种能源监控大数据管理系统及方法 |
| CN109284341A (zh) * | 2018-10-08 | 2019-01-29 | 马鞍山沐及信息科技有限公司 | 一种能效监测大数据分析系统及方法 |
| CN109977155A (zh) * | 2019-03-12 | 2019-07-05 | 福建奇点时空数字科技有限公司 | 一种基于人机交互的大数据可视化系统及其控制方法 |
-
2019
- 2019-08-22 CN CN201910779990.6A patent/CN110515997A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160112045A (ko) * | 2015-03-17 | 2016-09-28 | 대우조선해양 주식회사 | 정도 분석 시뮬레이션 결과를 이용한 정도 품질 평가 시스템 |
| CN106447163A (zh) * | 2016-08-29 | 2017-02-22 | 安徽美图信息科技有限公司 | 一种基于精细化逻辑分类技术的数据质量自动检测系统 |
| CN106326482A (zh) * | 2016-08-31 | 2017-01-11 | 江苏中威科技软件系统有限公司 | 一种大数据可视化采集分析及文件转换系统和方法 |
| CN108898029A (zh) * | 2018-10-08 | 2018-11-27 | 马鞍山沐及信息科技有限公司 | 一种能源监控大数据管理系统及方法 |
| CN109284341A (zh) * | 2018-10-08 | 2019-01-29 | 马鞍山沐及信息科技有限公司 | 一种能效监测大数据分析系统及方法 |
| CN109977155A (zh) * | 2019-03-12 | 2019-07-05 | 福建奇点时空数字科技有限公司 | 一种基于人机交互的大数据可视化系统及其控制方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111614740A (zh) * | 2020-05-08 | 2020-09-01 | 快猪侠信息技术(杭州)有限公司 | 一种智能识别大数据平台及其处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106982150B (zh) | 一种基于Hadoop的移动互联网用户行为分析方法 | |
| CN110147398A (zh) | 一种数据处理方法、装置、介质和电子设备 | |
| US20130198363A1 (en) | Techniques for tracking resource usage statistics per transaction across multiple layers of protocols | |
| CN103995807B (zh) | 一种基于Web架构下海量数据查询和二次处理的方法 | |
| CN108629045A (zh) | 一种消息推送方法、存储介质和服务器 | |
| CN108696420B (zh) | 通讯网络中的消息推送方法和装置 | |
| CN105677842A (zh) | 基于Hadoop大数据处理技术的日志分析系统 | |
| CN101888445A (zh) | 一种引进查询软件的综合性短信过滤方法 | |
| CN107403005A (zh) | 一种网站监控方法及装置 | |
| CN104135498A (zh) | 一种跨平台的信息推送系统及其推送方法 | |
| CN101431434A (zh) | 基于wap的内容监控及封堵系统和方法 | |
| CN101146267A (zh) | 一种短消息查询分析系统及方法 | |
| US9374475B1 (en) | System for processing customer records | |
| CN108399203A (zh) | 基于大数据平台的数据筛选系统 | |
| CN103778226A (zh) | 构建语言信息识别模型的方法及语言信息识别装置 | |
| CN104967632B (zh) | 网页异常数据处理方法、数据服务器及系统 | |
| CN114448922A (zh) | 消息分级处理方法、装置、设备及存储介质 | |
| CN105930379A (zh) | 一种利用拦截器进行日志数据收集的方法及系统 | |
| CN111800292A (zh) | 基于历史流量的预警方法、装置、计算机设备及存储介质 | |
| US20090193095A1 (en) | Using message content to group messages | |
| CN110515997A (zh) | 一种大数据智能分析系统 | |
| CN110636107A (zh) | 一种基于5g通信下的电网数据交互系统及其交互方法 | |
| CN206775533U (zh) | 一种用于公共平台的网络舆情监控系统 | |
| JP2023525112A (ja) | ユーザ機器ｕｅのユーザデータを検出するための方法およびデバイス、並びに記憶媒体 | |
| Tomar et al. | Social network analysis of the short message service |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20191129 |