CN111813834A - 一种数据挖掘系统以及数据挖掘方法 - Google Patents
一种数据挖掘系统以及数据挖掘方法 Download PDFInfo
- Publication number
- CN111813834A CN111813834A CN202010674299.4A CN202010674299A CN111813834A CN 111813834 A CN111813834 A CN 111813834A CN 202010674299 A CN202010674299 A CN 202010674299A CN 111813834 A CN111813834 A CN 111813834A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- output end
- interface
- mining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007418 data mining Methods 0.000 title claims abstract description 62
- 238000000034 method Methods 0.000 title claims description 13
- 230000005540 biological transmission Effects 0.000 claims abstract description 21
- 238000013524 data verification Methods 0.000 claims abstract description 16
- 238000007689 inspection Methods 0.000 claims description 18
- 238000012216 screening Methods 0.000 claims description 18
- 230000010354 integration Effects 0.000 claims description 15
- 238000012795 verification Methods 0.000 claims description 11
- 239000000284 extract Substances 0.000 claims description 4
- 238000004458 analytical method Methods 0.000 claims description 3
- 230000001939 inductive effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000002994 raw material Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
- G06F2216/03—Data mining
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Probability & Statistics with Applications (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据挖掘系统,包括大数据库,大数据库的输出端连接有数据采集模块,数据采集模块的输出端连接有数据读取模块,数据读取模块的输出端连接有数据检验模块,数据检验模块的输出端连接有数据挖掘模块,数据挖掘模块的输出端连接有数据验证模块,数据推送模块的输出端连接有网络传输端口,本发明的有益效果是通过设有的数据检验模块、数据筛选模块和数据验证模块,通过数据检验模块以及数据筛选模块对提取读取的数据信息进行识别筛选,去除数据信息中的无效数据以及其他数据,降低数据挖掘模块的计算量,提高数据挖掘模块的运行效率,同时通过数据验证模块对挖掘的信息进一步的验证,保证数据的可靠性依据有效性。
Description
技术领域
本发明涉及一种数据挖掘系统,特别涉及一种数据挖掘系统以及数据挖掘方法,属于数据处理技术领域。
背景技术
数据(data)是事实或观察的结果,是对客观事物的逻辑归纳,是用于表示客观事物的未经加工的原始素材,数据可以是连续的值,比如声音、图像,称为模拟数据。也可以是离散的,如符号、文字,称为数字数据。在计算机系统中,数据以二进制信息单元0,1的形式表示。
近年来,随着网络技术的迅猛发展,海量数据不断增长,数据挖掘引起了信息产业界的极大关注,现有的数据挖掘系统依据数据挖掘方法较为简单,不能够验证数据的可靠性以及准确性,且挖掘出的数据不能够有效整合,使用者获取数据时还要归类整理,较为不便,为此我们提供一种数据挖掘系统以及数据挖掘方法,以解决提出的问题。
发明内容
本发明的目的在于提供一种数据挖掘系统以及数据挖掘方法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种数据挖掘系统,包括大数据库,所述大数据库的输出端连接有数据采集模块,所述数据采集模块的输出端连接有数据读取模块,所述数据读取模块的输出端连接有数据检验模块,所述数据检验模块的输出端连接有数据挖掘模块,所述数据挖掘模块的输出端连接有数据验证模块,所述数据验证模块的输出端连接有数据整合模块,所述数据整合模块的输出端连接有数据推送模块,所述数据推送模块的输出端连接有网络传输端口,所述网络传输端口的输出端固定连接有数据显示模块,所述数据显示模块其中一个输出端口与数据采集模块的其中一个输入端口连接。
作为本发明的一种优选技术方案,所述大数据库由实时数据模块和历史数据模块组成。
作为本发明的一种优选技术方案,所述网络传输端口包括DB接口、API接口和OPC接口,所述DB接口、API接口和OPC接口均与数据显示模块电性连接。
作为本发明的一种优选技术方案,所述数据检验模块的输出端与数据挖掘模块的输入端之间设有数据筛选模块。
作为本发明的一种优选技术方案,一种数据挖掘方法,包括以下步骤:
S1:所述数据显示模块接收到用户需求,通过数据采集模块从实时数据模块和历史数据模块中提取相关的信息数据,并将提取相关的信息数据传递到数据读取模块进行读取;
S2:通过数据读取模块将信息数据传递到数据检验模块进行验证,验证通过时,通过数据检验模块将信息数据传递数据筛选模块进行数据筛选,验证未通过时,通过数据检验模块将指令传递到数据采集模块,重新提取信息数据;
S3:筛选过后将有效信息数据传递到数据挖掘模块进行数据挖掘分析,将挖掘出的数据进行加权求和,获得最终数据挖掘结果;
S4:数据挖掘之后将数据传递到数据整合模块,对挖掘的数据进行整理归纳分类,并通过数据整合模块将整合后的数据集传输到数据推送模块处,依据信息所需要的传输端口自动匹配对应的DB接口、API接口和OPC接口,通过对应的DB接口、API接口和OPC接口将数据传输到数据显示模块处,在数据显示模块显示挖掘整合后的数据。
与现有技术相比,本发明的有益效果是:
1.本发明一种数据挖掘系统以及数据挖掘方法,通过设有的数据检验模块、数据筛选模块和数据验证模块,通过数据检验模块以及数据筛选模块对提取读取的数据信息进行识别筛选,去除数据信息中的无效数据以及其他数据,降低数据挖掘模块的计算量,提高数据挖掘模块的运行效率,同时通过数据验证模块对挖掘的信息进一步的验证,保证数据的可靠性依据有效性。
2.本发明一种数据挖掘系统以及数据挖掘方法,通过设有的数据整合模块、数据推送模块和网络传输端口,便于对挖掘的数据信息进行整理归纳,便于使用者分类了解依据筛选出合适自己的数据信息,使用方便。
附图说明
图1为本发明的模块结构示意图;
图2为本发明中网络传输端口组成模块示意图;
图中:1、大数据库;2、数据采集模块;3、数据读取模块;4、数据检验模块;5、数据筛选模块;6、数据挖掘模块;7、数据验证模块;8、数据整合模块;9、数据推送模块;10、网络传输端口;11、数据显示模块;12、实时数据模块;13、历史数据模块;14、DB接口;15、API接口;16、OPC接口。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-2,本发明提供了一种数据挖掘系统以及数据挖掘方法的技术方案:
根据图1-2所示,包括大数据库1,大数据库1的输出端连接有数据采集模块2,数据采集模块2的输出端连接有数据读取模块3,数据读取模块3的输出端连接有数据检验模块4,数据检验模块4的输出端连接有数据挖掘模块6,数据挖掘模块6的输出端连接有数据验证模块7,数据验证模块7的输出端连接有数据整合模块8,数据整合模块8的输出端连接有数据推送模块9,数据推送模块9的输出端连接有网络传输端口10,网络传输端口10的输出端固定连接有数据显示模块11,数据显示模块11其中一个输出端口与数据采集模块2的其中一个输入端口连接。
根据图1和图2所示,大数据库1由实时数据模块12和历史数据模块13组成,便于集中的储存实时数据和历史数据,包容更多的数据,网络传输端口10包括DB接口14、API接口15和OPC接口16,DB接口14、API接口15和OPC接口16均与数据显示模块11电性连接,便于依据信息所需要的传输端口自动匹配对应的DB接口14、API接口15和OPC接口16,避免信息传输过程中发生损坏,数据检验模块4的输出端与数据挖掘模块6的输入端之间设有数据筛选模块5,数据筛选模块5便于对检验的数据进行筛选,除去无效数据以及其他数据。
具体使用时,本发明一种数据挖掘系统以及数据挖掘方法,数据显示模块11接收到用户需求,通过数据采集模块2从实时数据模块12和历史数据模块13中提取相关的信息数据,并将提取相关的信息数据传递到数据读取模块3进行读取,通过数据读取模块3将信息数据传递到数据检验模块4进行验证,验证通过时,通过数据检验模块4将信息数据传递数据筛选模块5进行数据筛选,验证未通过时,通过数据检验模块4将指令传递到数据采集模块2,重新提取信息数据,筛选过后将有效信息数据传递到数据挖掘模块6进行数据挖掘分析,将挖掘出的数据进行加权求和,获得最终数据挖掘结果,数据挖掘之后将数据传递到数据整合模块8,对挖掘的数据进行整理归纳分类,并通过数据整合模块8将整合后的数据集传输到数据推送模块9处,依据信息所需要的传输端口自动匹配对应的DB接口14、API接口15和OPC接口16,通过对应的DB接口14、API接口15和OPC接口16将数据传输到数据显示模块11处,在数据显示模块11显示挖掘整合后的数据,综上所述,本发明通过设有的数据检验模块4、数据筛选模块5和数据验证模块7,通过数据检验模块4以及数据筛选模块5对提取读取的数据信息进行识别筛选,去除数据信息中的无效数据以及其他数据,降低数据挖掘模块6的计算量,提高数据挖掘模块6的运行效率,同时通过数据验证模块7对挖掘的信息进一步的验证,保证数据的可靠性依据有效性,通过设有的数据整合模块8、数据推送模块9和网络传输端口10,便于对挖掘的数据信息进行整理归纳,便于使用者分类了解依据筛选出合适自己的数据信息,使用方便。
在本发明的描述中,需要理解的是,指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明中,除非另有明确的规定和限定,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系,除非另有明确的限定,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (5)
1.一种数据挖掘系统,包括大数据库(1),其特征在于,所述大数据库(1)的输出端连接有数据采集模块(2),所述数据采集模块(2)的输出端连接有数据读取模块(3),所述数据读取模块(3)的输出端连接有数据检验模块(4),所述数据检验模块(4)的输出端连接有数据挖掘模块(6),所述数据挖掘模块(6)的输出端连接有数据验证模块(7),所述数据验证模块(7)的输出端连接有数据整合模块(8),所述数据整合模块(8)的输出端连接有数据推送模块(9),所述数据推送模块(9)的输出端连接有网络传输端口(10),所述网络传输端口(10)的输出端固定连接有数据显示模块(11),所述数据显示模块(11)其中一个输出端口与数据采集模块(2)的其中一个输入端口连接。
2.根据权利要求1所述的一种数据挖掘系统,其特征在于:所述大数据库(1)由实时数据模块(12)和历史数据模块(13)组成。
3.根据权利要求1所述的一种数据挖掘系统,其特征在于:所述网络传输端口(10)包括DB接口(14)、API接口(15)和OPC接口(16),所述DB接口(14)、API接口(15)和OPC接口(16)均与数据显示模块(11)电性连接。
4.根据权利要求1所述的一种数据挖掘系统,其特征在于:所述数据检验模块(4)的输出端与数据挖掘模块(6)的输入端之间设有数据筛选模块(5)。
5.一种数据挖掘方法,其特征在于,根据权利要求1-4任一所述的一种数据挖掘系统,包括以下步骤:
S1:所述数据显示模块(11)接收到用户需求,通过数据采集模块(2)从实时数据模块(12)和历史数据模块(13)中提取相关的信息数据,并将提取相关的信息数据传递到数据读取模块(3)进行读取;
S2:通过数据读取模块(3)将信息数据传递到数据检验模块(4)进行验证,验证通过时,通过数据检验模块(4)将信息数据传递数据筛选模块(5)进行数据筛选,验证未通过时,通过数据检验模块(4)将指令传递到数据采集模块(2),重新提取信息数据;
S3:筛选过后将有效信息数据传递到数据挖掘模块(6)进行数据挖掘分析,将挖掘出的数据进行加权求和,获得最终数据挖掘结果;
S4:数据挖掘之后将数据传递到数据整合模块(8),对挖掘的数据进行整理归纳分类,并通过数据整合模块(8)将整合后的数据集传输到数据推送模块(9)处,依据信息所需要的传输端口自动匹配对应的DB接口(14)、API接口(15)和OPC接口(16),通过对应的DB接口(14)、API接口(15)和OPC接口(16)将数据传输到数据显示模块(11)处,在数据显示模块(11)显示挖掘整合后的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010674299.4A CN111813834A (zh) | 2020-07-14 | 2020-07-14 | 一种数据挖掘系统以及数据挖掘方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010674299.4A CN111813834A (zh) | 2020-07-14 | 2020-07-14 | 一种数据挖掘系统以及数据挖掘方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111813834A true CN111813834A (zh) | 2020-10-23 |
Family
ID=72842456
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010674299.4A Pending CN111813834A (zh) | 2020-07-14 | 2020-07-14 | 一种数据挖掘系统以及数据挖掘方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111813834A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113032384A (zh) * | 2021-04-22 | 2021-06-25 | 上海四卜格网络科技有限公司 | 一种大数据数据颗粒算法系统 |
CN116109121A (zh) * | 2023-04-17 | 2023-05-12 | 西昌学院 | 基于大数据分析的用户需求挖掘方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107577771A (zh) * | 2017-09-07 | 2018-01-12 | 北京海融兴通信息安全技术有限公司 | 一种大数据挖掘系统 |
CN108829704A (zh) * | 2018-04-28 | 2018-11-16 | 安徽瑞来宝信息科技有限公司 | 一种大数据分布式挖掘分析服务技术 |
CN111241187A (zh) * | 2020-02-26 | 2020-06-05 | 肖莎莎 | 一种大数据挖掘系统 |
-
2020
- 2020-07-14 CN CN202010674299.4A patent/CN111813834A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107577771A (zh) * | 2017-09-07 | 2018-01-12 | 北京海融兴通信息安全技术有限公司 | 一种大数据挖掘系统 |
CN108829704A (zh) * | 2018-04-28 | 2018-11-16 | 安徽瑞来宝信息科技有限公司 | 一种大数据分布式挖掘分析服务技术 |
CN111241187A (zh) * | 2020-02-26 | 2020-06-05 | 肖莎莎 | 一种大数据挖掘系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113032384A (zh) * | 2021-04-22 | 2021-06-25 | 上海四卜格网络科技有限公司 | 一种大数据数据颗粒算法系统 |
CN113032384B (zh) * | 2021-04-22 | 2024-04-12 | 上海四卜格网络科技有限公司 | 一种大数据数据颗粒计算系统 |
CN116109121A (zh) * | 2023-04-17 | 2023-05-12 | 西昌学院 | 基于大数据分析的用户需求挖掘方法及系统 |
CN116109121B (zh) * | 2023-04-17 | 2023-06-30 | 西昌学院 | 基于大数据分析的用户需求挖掘方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109582861B (zh) | 一种数据隐私信息检测系统 | |
CN108733651A (zh) | 表情符号预测方法及模型构建方法、装置、终端 | |
CN111813834A (zh) | 一种数据挖掘系统以及数据挖掘方法 | |
CN110008343A (zh) | 文本分类方法、装置、设备及计算机可读存储介质 | |
CN112818692B (zh) | 命名实体识别和处理方法、装置、设备及可读存储介质 | |
CN114648393A (zh) | 一种应用于招投标的数据挖掘方法、系统及设备 | |
CN107221129A (zh) | 一种用于地质灾害及气象预警的线上预警系统 | |
CN111597416A (zh) | 一种基于大数据处理的匹配推送系统 | |
CN114817681A (zh) | 一种基于大数据分析的金融风控系统及其管理设备 | |
CN114491081A (zh) | 基于数据血缘关系图谱的电力数据溯源方法及系统 | |
CN113806492A (zh) | 基于语义识别的记录生成方法、装置、设备及存储介质 | |
CN110019820A (zh) | 一种病历中主诉与现病史症状时间一致性检测方法 | |
CN107463340A (zh) | 计算机的数据存储系统 | |
CN111190235A (zh) | 区块链信息接收记录平台 | |
CN110209575A (zh) | 测试文档生成方法、装置、电子设备及存储介质 | |
CN109684479A (zh) | 一种基于人工智能来实现业务分析的方法 | |
CN112801016B (zh) | 一种选票数据统计方法、装置、设备和介质 | |
CN109325096A (zh) | 一种基于知识资源分类的知识资源搜索系统 | |
CN114238062A (zh) | 板卡烧录装置性能分析方法、装置、设备及可读存储介质 | |
CN113824722A (zh) | 一种基于知识图谱的网络安全动态预警系统 | |
CN114003774A (zh) | 一种用于智慧城市的电力大数据信息采集系统 | |
CN113239085A (zh) | 实时数据处理方法、装置、计算机设备和介质 | |
CN115082071A (zh) | 一种异常交易账户的识别方法、装置及存储介质 | |
TW202022771A (zh) | 物種數據解析方法、系統及電腦程式產品 | |
CN112837061B (zh) | 一种数据处理方法和相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20201023 |