CN106951564A - 一种基于数据挖掘和大数据分析的云计算平台及方法 - Google Patents

一种基于数据挖掘和大数据分析的云计算平台及方法 Download PDF

Info

Publication number
CN106951564A
CN106951564A CN201710215120.7A CN201710215120A CN106951564A CN 106951564 A CN106951564 A CN 106951564A CN 201710215120 A CN201710215120 A CN 201710215120A CN 106951564 A CN106951564 A CN 106951564A
Authority
CN
China
Prior art keywords
layer
data
service
cloud computing
mining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710215120.7A
Other languages
English (en)
Inventor
齐明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Army Show Consulting Co Ltd
Original Assignee
Beijing Army Show Consulting Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Army Show Consulting Co Ltd filed Critical Beijing Army Show Consulting Co Ltd
Priority to CN201710215120.7A priority Critical patent/CN106951564A/zh
Publication of CN106951564A publication Critical patent/CN106951564A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2465—Query processing support for facilitating data mining operations in structured databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
    • G06F2216/03—Data mining

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Health & Medical Sciences (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于数据挖掘和大数据分析的云计算平台及方法，包括云计算平台系统，在云计算平台系统上设有数据挖掘云服务器、数据挖掘能力层、云计算支撑平台、第三方挖掘算法服务层、数据服务层、调度服务层、挖掘算法服务层、数据预处理服务层、算法服务管理层、调度引擎、数据并行处理层、运维管理层、资源管理层、系统监控层、资源调度层、资源安全模块，本发明在系统判决为发生危险后，能够根据不同危险程度启动适应性的联动措施，联动方式合理、响应快，支持向发生危险的被测区域的业务推送危险通知，同时在发生重大危险情况时支持联网公安报警系统自动报警。

Description

一种基于数据挖掘和大数据分析的云计算平台及方法
技术领域
本发明涉及云计算机技术领域，具体为一种基于数据挖掘和大数据分析的云计算平台及方法。
背景技术
随着社会的进步与发展，各行各业对其管理工作的要求越来越高，社区安防的规范化、智能化越来越受到人们的关注，要求社区的安防管理工作更合理、更高效，在合理完善保安人员工作分配制度的基础上，需要采取一些必要的科技手段对社区安全进行监管。
然而传统的社区安防系统往往只能提供单一的视频监控功能，仍需保安人员人工执勤的配合。同时，传统社区安防系统完全依赖执勤人员的主观判断，无法智能判决危险情况。另外，现有社区安防系统不具备联动功能，在发现危险情况时，只能靠执勤人员前往解决，响应时效性差且执勤人员的人身安全得不到保障。
云计算是一种基于互联网的计算方式，通过这种方式，共享的软硬件资源和信息可以按需提供给计算机和其他设备。典型的云计算提供商往往提供通用的网络业务应用，可以通过浏览器等软件或者其他Web服务来访问，而软件和数据都存储在服务器上。云计算服务通常提供通用的通过浏览器访问的在线商业应用，软件和数据可存储在数据中心。用云计算来挖掘和处理数据，实际上带来了数据挖掘需求，个性化需求和多样需求的增加，传统的数据挖掘系统和方法无法满足数据个性化和多样化的要求，缺少处理动态数据和参数调节的装置，可信安全性较差。目前，传统的数据挖掘系统和方法存在无法满足数据个性化和多样化的要求，缺少处理动态数据和参数调节的装置，可信安全性较差的问题。
本发明与有关，特别是关于一种基于数据挖掘和大数据分析的云计算平台及方法。
发明内容
本实发明的目的在于提供一种基于数据挖掘和大数据分析的云计算平台及方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种基于数据挖掘和大数据分析的云计算平台,包括云计算平台系统，所述云计算平台系统上设有数据挖掘云服务层、数据挖掘能力层、云计算支撑平台。
优选的，所述数据挖掘云服务层上设有第三方挖掘算法服务层、数据服务层、调度服务层、挖掘算法服务层、数据预处理服务层。
优选的，所述数据挖掘能力层上包括算法服务管理层、调度引擎层、数据并行处理层，算法服务管理层上包括服务光控、服务注册、服务注销、服务认证，调度引擎上包括算法组件调度层、算法任务调度层、服务调度层，数据并行处理层上包括数据汇集、数据预处理、数据挖掘算法、数据推荐算法。
优选的，所述云计算支撑平台上设有运维管理层，所述运维管理上包括资源管理层、系统监控层层、资源调度层、资源安全模块。
优选的，所述有运维管理层上包括系统监控层、资源调度层、资源管理层、资源安全模块。
优选的，其使用方法包括以下步骤：
A、数据挖掘云服务层，将接收用户的挖掘服务请求以及要分析的数据源；
B、数据源将接收的数据上传至数据服务层、调度服务层、挖掘算法服务层、数据预处理服务层，将接收的数据进行初步的处理；
C、初步处理后的数据资源传送至数据挖掘能力层，通过数据挖掘能力层上的算法服务管理层、数据并行处理层形成计算脚本文件；
D、数据挖掘能力层运行所述计算脚本文件对要分析的数据源进行数据挖掘，返回挖掘结果给资源管理层；
E、当资源安全模块检测到数据系统安全受到外界干扰，数据安全受到威胁，资源安全模块将自动启动安全保护程序系统，并立即报警。
与现有技术相比，本发明的有益效果是：本发明在系统判决为发生危险后，能够根据不同危险程度启动适应性的联动措施，联动方式合理、响应快，支持向发生危险的被测区域的业务推送危险通知，同时在发生重大危险情况时支持联网公安报警系统自动报警。
附图说明
图1为本发明的云计算平台系统示意图。
图中：1、云计算平台系统；2、数据挖掘云服务器；3、数据挖掘能力层；4、云计算支撑平台；5、第三方挖掘算法服务层；6、数据服务层；7、调度服务层；8、挖掘算法服务层；9、数据预处理服务层；10、算法服务管理层；11、调度引擎；12、数据并行处理层；13、运维管理层；14、资源管理层；15、系统监控层；16、资源调度层；17、资源安全模块。
具体实施方式
下面将结合本发明实施例中的附图，对本发明施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，本发明提供一种技术方案：一种基于数据挖掘和大数据分析的云计算平台,包括云计算平台系统1，云计算平台系统1上设有分布式存储、分布式计算，云计算平台系统1上设有数据挖掘云服务层2、数据挖掘能力层3、云计算支撑平台4，云计算支撑平台4上设有运维管理层13，有运维管理层13上包括系统监控层14、资源调度层15、资源管理层16、资源安全模块17，所述运维管理13上包括资源管理层14、系统监控层层15、资源调度层16、资源安全模块17。
本发明中，数据挖掘云服务层2上设有第三方挖掘算法服务层5、数据服务层6、调度服务层7、挖掘算法服务层8、数据预处理服务层9，挖掘算法服务层9，接收用户的挖掘服务请求以及要分析的数据源，将业务数据交互模块返回的挖掘结果提供给用户。
本发明中，数据挖掘能力层3上包括算法服务管理层10、调度引擎层11、数据并行处理层12，算法服务管理层10上包括服务光控、服务注册、服务注销、服务认证，调度引擎11上包括算法组件调度层、算法任务调度层、服务调度层，数据并行处理层12上包括数据汇集、数据预处理、数据挖掘算法、数据推荐算法。
本发明的使用方法包括以下步骤：
A、数据挖掘云服务层2，将接收用户的挖掘服务请求以及要分析的数据源；
B、数据源将接收的数据上传至数据服务层6、调度服务层7、挖掘算法服务层8、数据预处理服务层9，将接收的数据进行初步的处理；
C、初步处理后的数据资源传送至数据挖掘能力层，通过数据挖掘能力层上的算法服务管理层、数据并行处理层形成计算脚本文件；
D、数据挖掘能力层3运行所述计算脚本文件对要分析的数据源进行数据挖掘，返回挖掘结果给资源管理层14；
E、当资源安全模块17检测到数据系统安全受到外界干扰，数据安全受到威胁，资源安全模块17将自动启动安全保护程序系统，并立即报警。
本发明在系统判决为发生危险后，能够根据不同危险程度启动适应性的联动措施，联动方式合理、响应快，支持向发生危险的被测区域的业务推送危险通知，同时在发生重大危险情况时支持联网公安报警系统自动报警。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (6)

1.一种基于数据挖掘和大数据分析的云计算平台,包括云计算平台系统(1)，其特征在于：所述云计算平台系统(1)上设有数据挖掘云服务层(2)、数据挖掘能力层(3)、云计算支撑平台(4)。
2.根据权利要求1所述的一种基于数据挖掘和大数据分析的云计算平台及方法，其特征在于：所述数据挖掘云服务层(2)上设有第三方挖掘算法服务层(5)、数据服务层(6)、调度服务层(7)、挖掘算法服务层(8)、数据预处理服务层(9)。
3.根据权利要求1所述的一种基于数据挖掘和大数据分析的云计算平台，其特征在于：所述数据挖掘能力层(3)上包括算法服务管理层(10)、调度引擎层(11)、数据并行处理层(12)，算法服务管理层(10)上包括服务光控、服务注册、服务注销、服务认证，调度引擎(11)上包括算法组件调度层、算法任务调度层、服务调度层，数据并行处理层(12)上包括数据汇集、数据预处理、数据挖掘算法、数据推荐算法。
4.根据权利要求1所述的一种基于数据挖掘和大数据分析的云计算平台，其特征在于：所述云计算支撑平台(4)上设有运维管理层(13)，所述运维管理(13)上包括资源管理层(14)、系统监控层层(15)、资源调度层(16)、资源安全模块(17)。
5.根据权利要求4所述的一种基于数据挖掘和大数据分析的云计算平台及方法，其特征在于：所述有运维管理层(13)上包括系统监控层(14)、资源调度层(15)、资源管理层(16)、资源安全模块(17)。
6.实现权利要求1所述的一种基于数据挖掘和大数据分析的云计算平台的使用方法，其特征在于：其使用方法包括以下步骤：
A、数据挖掘云服务层(2)，将接收用户的挖掘服务请求以及要分析的数据源；
B、数据源将接收的数据上传至数据服务层(6)、调度服务层(7)、挖掘算法服务层(8)、数据预处理服务层(9)，将接收的数据进行初步的处理；
C、初步处理后的数据资源传送至数据挖掘能力层，通过数据挖掘能力层上的算法服务管理层、数据并行处理层形成计算脚本文件；
D、数据挖掘能力层(3)运行所述计算脚本文件对要分析的数据源进行数据挖掘，返回挖掘结果给资源管理层(14)；
E、当资源安全模块(17)检测到数据系统安全受到外界干扰，数据安全受到威胁，资源安全模块(17)将自动启动安全保护程序系统，并立即报警。
CN201710215120.7A 2017-04-02 2017-04-02 一种基于数据挖掘和大数据分析的云计算平台及方法 Pending CN106951564A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710215120.7A CN106951564A (zh) 2017-04-02 2017-04-02 一种基于数据挖掘和大数据分析的云计算平台及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710215120.7A CN106951564A (zh) 2017-04-02 2017-04-02 一种基于数据挖掘和大数据分析的云计算平台及方法

Publications (1)

Publication Number Publication Date
CN106951564A true CN106951564A (zh) 2017-07-14

Family

ID=59474282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710215120.7A Pending CN106951564A (zh) 2017-04-02 2017-04-02 一种基于数据挖掘和大数据分析的云计算平台及方法

Country Status (1)

Country Link
CN (1) CN106951564A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108303901A (zh) * 2018-01-08 2018-07-20 杭州古北电子科技有限公司 一种智能设备自动控制系统
CN109558395A (zh) * 2018-10-17 2019-04-02 中国光大银行股份有限公司 数据处理系统及数据挖掘方法
CN109597838A (zh) * 2018-12-03 2019-04-09 湖南信息学院 一种基于云计算和数据挖掘的信息采集系统及方法
CN111338302A (zh) * 2020-02-28 2020-06-26 合肥力拓云计算科技有限公司 基于工业大数据和工业物联网的化工工艺建模处理系统
CN111767225A (zh) * 2020-06-29 2020-10-13 厦门力含信息技术服务有限公司 一种云计算环境下第三方软件测试系统及方法
CN112199363A (zh) * 2020-10-15 2021-01-08 南京数溪智能科技有限公司 一种农业多源异构数据的融合存储方法与系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102169505A (zh) * 2011-05-16 2011-08-31 苏州两江科技有限公司 基于云计算的推荐系统构建方法
CN102546771A (zh) * 2011-12-27 2012-07-04 西安博构电子信息科技有限公司 基于特征模型的云挖掘网络舆情监测系统
CN104601378A (zh) * 2015-01-26 2015-05-06 四川中电启明星信息技术有限公司 结合应用性能指标监控数据的虚拟资源弹性调度实现方法
CN105427221A (zh) * 2015-12-09 2016-03-23 北京中科云集科技有限公司 一种基于云平台的警务管理方法
CN105554059A (zh) * 2015-11-25 2016-05-04 北京华油信通科技有限公司 基于北斗导航技术的物流运输智能感知与位置服务系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102169505A (zh) * 2011-05-16 2011-08-31 苏州两江科技有限公司 基于云计算的推荐系统构建方法
CN102546771A (zh) * 2011-12-27 2012-07-04 西安博构电子信息科技有限公司 基于特征模型的云挖掘网络舆情监测系统
CN104601378A (zh) * 2015-01-26 2015-05-06 四川中电启明星信息技术有限公司 结合应用性能指标监控数据的虚拟资源弹性调度实现方法
CN105554059A (zh) * 2015-11-25 2016-05-04 北京华油信通科技有限公司 基于北斗导航技术的物流运输智能感知与位置服务系统
CN105427221A (zh) * 2015-12-09 2016-03-23 北京中科云集科技有限公司 一种基于云平台的警务管理方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108303901A (zh) * 2018-01-08 2018-07-20 杭州古北电子科技有限公司 一种智能设备自动控制系统
CN109558395A (zh) * 2018-10-17 2019-04-02 中国光大银行股份有限公司 数据处理系统及数据挖掘方法
CN109597838A (zh) * 2018-12-03 2019-04-09 湖南信息学院 一种基于云计算和数据挖掘的信息采集系统及方法
CN111338302A (zh) * 2020-02-28 2020-06-26 合肥力拓云计算科技有限公司 基于工业大数据和工业物联网的化工工艺建模处理系统
CN111767225A (zh) * 2020-06-29 2020-10-13 厦门力含信息技术服务有限公司 一种云计算环境下第三方软件测试系统及方法
CN111767225B (zh) * 2020-06-29 2021-05-07 厦门力含信息技术服务有限公司 一种云计算环境下第三方软件测试系统及方法
CN112199363A (zh) * 2020-10-15 2021-01-08 南京数溪智能科技有限公司 一种农业多源异构数据的融合存储方法与系统

Similar Documents

Publication Publication Date Title
CN106951564A (zh) 一种基于数据挖掘和大数据分析的云计算平台及方法
CN104270417B (zh) 一种基于云计算的综合服务提供系统及方法
CN101847116A (zh) 一种基于j2ee架构的监控系统和方法
CN101562609A (zh) Vpn网络安全漏洞检测全局准入控制系统
CN105183610A (zh) 一种基于资源依赖关系的云数据中心业务监控系统及方法
CN109828924A (zh) 测试方法、装置和计算设备及介质
CN107800670A (zh) 用于预警网站安全的方法和装置
CN109617977A (zh) 一种网页请求处理方法及装置
CN111083093A (zh) 调用端能力的方法和装置
CN105843725A (zh) 一种IaaS平台的监控方法及装置
CN103973465B (zh) 分布式跨平台虚拟化能力管理方法和系统
CN111125648B (zh) 一种设备变更方法和装置
CN111310612A (zh) 行为督导方法和装置
CN116257840B (zh) 一种基于大数据的登录信息查询管理系统及方法
CN111161052A (zh) 银行作业数据的处理方法及装置
CN106776914A (zh) 一种集合网站管理系统
CN114445217A (zh) 信贷风险防控方法、装置、系统与计算机可读存储介质
CN110759191B (zh) 基于5g智慧园区电梯控制方法
CN114357403A (zh) 基于设备可信度的用户登陆请求处理方法、装置及设备
Lin et al. An analysis of using state of the art technologies to implement real-time continuous assurance
CN109922033B (zh) 一种身份证件的自助申办终端管理方法及其装置
CN111223250A (zh) 一种自助银行监控系统
CN111159517A (zh) 一种信息处理方法、设备、系统和计算机存储介质
CN106301983A (zh) 一种基于虚拟主机的网站检测方法和装置
CN109472156A (zh) 信息访问方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170714