CN112256937A - 一种基于计算机的信息分析系统 - Google Patents
一种基于计算机的信息分析系统 Download PDFInfo
- Publication number
- CN112256937A CN112256937A CN202011362918.2A CN202011362918A CN112256937A CN 112256937 A CN112256937 A CN 112256937A CN 202011362918 A CN202011362918 A CN 202011362918A CN 112256937 A CN112256937 A CN 112256937A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- analysis
- target
- mining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 77
- 238000007405 data analysis Methods 0.000 claims abstract description 43
- 238000007418 data mining Methods 0.000 claims abstract description 41
- 238000000605 extraction Methods 0.000 claims abstract description 18
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 11
- 238000013079 data visualisation Methods 0.000 claims abstract description 10
- 238000005065 mining Methods 0.000 claims abstract description 6
- 238000012800 visualization Methods 0.000 claims abstract description 4
- 230000000007 visual effect Effects 0.000 claims description 22
- 238000012544 monitoring process Methods 0.000 claims description 12
- 238000009472 formulation Methods 0.000 claims description 7
- 239000000203 mixture Substances 0.000 claims description 7
- 238000011156 evaluation Methods 0.000 claims description 5
- 238000012549 training Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/906—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/904—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
- G06F2216/03—Data mining
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明涉及数据分析领域,具体涉及一种基于计算机的信息分析系统,包括:数据挖掘模块,用于根据自定义的目标数据挖掘标准实现目标数据的主动挖掘;数据分类模块,用于基于ANN算法实现目标数据的分类,形成参数集;特征提取模块,用于基于Hadoop运行预设的特征参数提取算法实现各参数集的特征参数的提取;综合分析模块,用于基于Hadoop运行预设的数据分析模型根据所述特征参数实现目标数据的分析,输出数据分析结果;数据可视化分析模块,基于Tableau Desktop实现目标数据以及数据分析结果的可视化分析。本发明实现了目标数据的自动分析,从而可以将纷繁多样的海量数据转换成具有信息和商业价值的可用数据。
Description
技术领域
本发明涉及数据分析领域,具体涉及一种基于计算机的信息分析系统。
背景技术
在大数据条件下,企业的每个系统都会产生成千上万的数据,虽然现在有很多传统的日志或者其他专业工具能够帮助企业分析这些数据,但传统的产品工具对数据的处理目前仅仅停留在各自割裂、简易的图表与简单列示查询的方式,这些数据并没有很好的呈现为可视化的关联,关键数据的提取以及数据关联关系的建立等均需依靠人工进行,费时费力的同时,容易出错,遗漏。
发明内容
为解决上述问题,本发明提供了一种基于计算机的信息分析系统,实现了目标数据的自动分析,从而可以将纷繁多样的海量数据转换成具有信息和商业价值的可用数据。
为实现上述目的,本发明采取的技术方案为:
一种基于计算机的信息分析系统,包括:
数据挖掘模块,用于根据自定义的目标数据挖掘标准实现目标数据的主动挖掘;
数据分类模块,用于基于ANN算法实现目标数据的分类,形成参数集;
特征提取模块,用于基于Hadoop运行预设的特征参数提取算法实现各参数集的特征参数的提取;
综合分析模块,用于基于Hadoop运行预设的数据分析模型根据所述特征参数实现目标数据的分析,输出数据分析结果;
数据可视化分析模块,基于Tableau Desktop实现目标数据以及数据分析结果的可视化分析。
进一步地,所述数据挖掘模块首先根据自定义的数据挖掘标准经数据挖掘模块构建数据挖掘模型参数集,然后基于数据挖掘模型参数集训练构建对应的目标数据挖掘模型,然后基于数据挖掘模块和/网络爬虫模块基于目标数据挖掘模型在目标数据库和/目标网络基站实现目标数据的主动挖掘。
进一步地,所述ANN算法基于所述数据分析模型对应的训练集参数标准训练所得。
进一步地,还包括:
工作状态监测模块,用于通过脚本录制的方式实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块工作流程的录制,并基于预设的监测模型实现各模块工作状态和进度的评估。
进一步地,还包括:
数据分析目标自定义模块,用于以填空、勾选的方式实现数据分析目标的自定义;
数据分析流程规划模块,用于根据所述数据分析目标实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块工作流程的规划。
进一步地,所述工作状态监测模块在接收到数据分析流程规划时启动,同时数据挖掘模块启动,工作状态监测模块基于各模块的工作流程规划实现各模块工作进度的评估,然后根据前一个模块的进度评估的结果,依次启动数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块完成目标数据的自动分析。
进一步地,还包括:
数据分析报表编制模块,用于基于预设的模板实现数据分析报表的编制。
进一步地,所述数据分析报表内载目标数据访问超链接、综合分析结果访问超链接以及可视化分析结果访问超链接,其中,可视化分析结果访问超链接内载可视化分析结果以及可视化分析模块的工作流程脚本数据,通过可视化分析模块的工作流程脚本数据的回放可以实现可视化分析模块分析过程的可视化回放。
本发明具有以下有益效果:
1)实现了目标数据的自动分析,从而可以将纷繁多样的海量数据转换成具有信息和商业价值的可用数据。
2)尽可能的减少了人为参与环节,从而可以大大提高数据分析结果的准确性。
附图说明
图1为本发明实施例1一种基于计算机的信息分析系统的系统框图。
具体实施方式
为了使本发明的目的及优点更加清楚明白,以下结合实施例对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例1
如图1所示,本发明实施例的一种基于计算机的信息分析系统,包括:
数据分析目标自定义模块,用于以填空、勾选的方式实现数据分析目标的自定义;
数据分析流程规划模块,用于根据所述数据分析目标实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块工作流程的规划;
数据挖掘模块,用于根据自定义的目标数据挖掘标准实现目标数据的主动挖掘;
数据分类模块,用于基于ANN算法实现目标数据的分类,形成参数集;
特征提取模块,用于基于Hadoop运行预设的特征参数提取算法实现各参数集的特征参数的提取;
综合分析模块,用于基于Hadoop运行预设的数据分析模型根据所述特征参数实现目标数据的分析,输出数据分析结果;
数据可视化分析模块,基于Tableau Desktop实现目标数据以及数据分析结果的可视化分析;
工作状态监测模块,用于通过脚本录制的方式实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块工作流程的录制,并基于预设的监测模型实现各模块工作状态和进度的评估;
数据分析报表编制模块,用于基于预设的模板实现数据分析报表的编制。
本实施例中,所述数据挖掘模块首先根据自定义的数据挖掘标准经数据挖掘模块构建数据挖掘模型参数集,然后基于数据挖掘模型参数集训练构建对应的目标数据挖掘模型,然后基于数据挖掘模块和/网络爬虫模块基于目标数据挖掘模型在目标数据库和/目标网络基站实现目标数据的主动挖掘。
本实施例中,所述ANN算法基于所述数据分析模型对应的训练集参数标准训练所得。
本实施例中,所述工作状态监测模块在接收到数据分析流程规划时启动,同时数据挖掘模块启动,工作状态监测模块基于各模块的工作流程规划实现各模块工作进度的评估,然后根据前一个模块的进度评估的结果,依次启动数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块、数据分析报表编制模块完成目标数据的自动分析。
本实施例中,所述数据分析报表内载目标数据访问超链接、综合分析结果访问超链接以及可视化分析结果访问超链接,其中,可视化分析结果访问超链接内载可视化分析结果以及可视化分析模块的工作流程脚本数据,通过可视化分析模块的工作流程脚本数据的回放可以实现可视化分析模块分析过程的可视化回放。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (8)
1.一种基于计算机的信息分析系统,其特征在于,包括:
数据挖掘模块,用于根据自定义的目标数据挖掘标准实现目标数据的主动挖掘;
数据分类模块,用于基于ANN算法实现目标数据的分类,形成参数集;
特征提取模块,用于基于Hadoop运行预设的特征参数提取算法实现各参数集的特征参数的提取;
综合分析模块,用于基于Hadoop运行预设的数据分析模型根据所述特征参数实现目标数据的分析,输出数据分析结果;
数据可视化分析模块,基于Tableau Desktop实现目标数据以及数据分析结果的可视化分析。
2.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,所述数据挖掘模块首先根据自定义的数据挖掘标准经数据挖掘模块构建数据挖掘模型参数集,然后基于数据挖掘模型参数集训练构建对应的目标数据挖掘模型,然后基于数据挖掘模块和/网络爬虫模块基于目标数据挖掘模型在目标数据库和/目标网络基站实现目标数据的主动挖掘。
3.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,所述ANN算法基于所述数据分析模型对应的训练集参数标准训练所得。
4.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,还包括:
工作状态监测模块,用于通过脚本录制的方式实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块工作流程的录制,并基于预设的监测模型实现各模块工作状态和进度的评估。
5.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,还包括:
数据分析目标自定义模块,用于以填空、勾选的方式实现数据分析目标的自定义;
数据分析流程规划模块,用于根据所述数据分析目标实现数据挖掘模块、数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块工作流程的规划。
6.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,所述工作状态监测模块在接收到数据分析流程规划时启动,同时数据挖掘模块启动,工作状态监测模块基于各模块的工作流程规划实现各模块工作进度的评估,然后根据前一个模块的进度评估的结果,依次启动数据分类模块、特征提取模块、综合分析模块、数据可视化分析模块完成目标数据的自动分析。
7.如权利要求1所述的一种基于计算机的信息分析系统,其特征在于,还包括:
数据分析报表编制模块,用于基于预设的模板实现数据分析报表的编制。
8.如权利要求7所述的一种基于计算机的信息分析系统,其特征在于,所述数据分析报表内载目标数据访问超链接、综合分析结果访问超链接以及可视化分析结果访问超链接,其中,可视化分析结果访问超链接内载可视化分析结果以及可视化分析模块的工作流程脚本数据,通过可视化分析模块的工作流程脚本数据的回放可以实现可视化分析模块分析过程的可视化回放。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011362918.2A CN112256937A (zh) | 2020-11-28 | 2020-11-28 | 一种基于计算机的信息分析系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011362918.2A CN112256937A (zh) | 2020-11-28 | 2020-11-28 | 一种基于计算机的信息分析系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112256937A true CN112256937A (zh) | 2021-01-22 |
Family
ID=74225152
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011362918.2A Pending CN112256937A (zh) | 2020-11-28 | 2020-11-28 | 一种基于计算机的信息分析系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112256937A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112632156A (zh) * | 2021-01-29 | 2021-04-09 | 赵琰 | 一种基于大数据的计算机数据分析管理系统 |
CN112765439A (zh) * | 2021-02-25 | 2021-05-07 | 重庆三峡学院 | 一种基于大数据平台的数据处理方法及装置 |
CN112835971A (zh) * | 2021-03-04 | 2021-05-25 | 重庆三峡学院 | 一种基于大数据的数据可视化加工处理系统 |
CN112905655A (zh) * | 2021-01-29 | 2021-06-04 | 西安交通大学城市学院 | 一种基于大数据的信息收集分析系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109857784A (zh) * | 2019-02-12 | 2019-06-07 | 吉林师范大学 | 一种大数据统计分析系统 |
CN111369133A (zh) * | 2020-03-02 | 2020-07-03 | 四川轻化工大学 | 一种大数据风险监测系统 |
CN111737549A (zh) * | 2020-06-30 | 2020-10-02 | 西安欧亚学院 | 一种经济指标智能分析系统 |
CN111949852A (zh) * | 2020-08-31 | 2020-11-17 | 东华理工大学 | 一种基于互联网大数据的宏观经济分析方法及系统 |
-
2020
- 2020-11-28 CN CN202011362918.2A patent/CN112256937A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109857784A (zh) * | 2019-02-12 | 2019-06-07 | 吉林师范大学 | 一种大数据统计分析系统 |
CN111369133A (zh) * | 2020-03-02 | 2020-07-03 | 四川轻化工大学 | 一种大数据风险监测系统 |
CN111737549A (zh) * | 2020-06-30 | 2020-10-02 | 西安欧亚学院 | 一种经济指标智能分析系统 |
CN111949852A (zh) * | 2020-08-31 | 2020-11-17 | 东华理工大学 | 一种基于互联网大数据的宏观经济分析方法及系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112632156A (zh) * | 2021-01-29 | 2021-04-09 | 赵琰 | 一种基于大数据的计算机数据分析管理系统 |
CN112905655A (zh) * | 2021-01-29 | 2021-06-04 | 西安交通大学城市学院 | 一种基于大数据的信息收集分析系统 |
CN112765439A (zh) * | 2021-02-25 | 2021-05-07 | 重庆三峡学院 | 一种基于大数据平台的数据处理方法及装置 |
CN112835971A (zh) * | 2021-03-04 | 2021-05-25 | 重庆三峡学院 | 一种基于大数据的数据可视化加工处理系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112256937A (zh) | 一种基于计算机的信息分析系统 | |
CN106874134B (zh) | 工单类型的处理方法、装置及系统 | |
CN102081759A (zh) | 培训管理系统 | |
CN108491991B (zh) | 基于工业大数据产品工期的约束条件分析系统与方法 | |
CN109857784A (zh) | 一种大数据统计分析系统 | |
CN106971254A (zh) | 一种业务监控系统及方法 | |
CN110189048A (zh) | 一种基于云平台的统效考核管理方法及系统 | |
CN111737549B (zh) | 一种经济指标智能分析系统 | |
CN105069153A (zh) | 专利分析系统 | |
CN110766472A (zh) | 一种建筑工程造价运算用评估方法 | |
CN113067821A (zh) | 基于单个或多个dbc文件的can报文的解析方法 | |
CN111369133A (zh) | 一种大数据风险监测系统 | |
CN105808686A (zh) | 销售数据分析系统 | |
CN111061779A (zh) | 一种基于大数据平台的数据处理方法及装置 | |
CN115481084B (zh) | 一种bim模型资源管理系统 | |
CN107066376A (zh) | 一种用于gui测试的自动化测试验证方法 | |
CN115987692A (zh) | 一种基于流量回溯分析的安全防护系统及方法 | |
CN110865930B (zh) | 一种移动通信故障分布式自主采集分析系统 | |
CN110348517A (zh) | 一种基于大数据的清洁能源供暖系统报警分类预测方法 | |
CN109523154A (zh) | 一种追溯数据评价系统及方法 | |
CN108959574A (zh) | 一种测试数据分析方法及系统 | |
CN110955754A (zh) | 一种用于重复来电分析识别的模型构建方法 | |
CN111080739B (zh) | 一种基于bp神经网络的bi配色方法及系统 | |
CN112765307A (zh) | 一种基于机器学习算法的试卷试题拆分工具及其拆分提取方法 | |
CN104966151A (zh) | 数据处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210122 |
|
RJ01 | Rejection of invention patent application after publication |