CN106779087B - 一种通用机器学习数据分析平台 - Google Patents
一种通用机器学习数据分析平台 Download PDFInfo
- Publication number
- CN106779087B CN106779087B CN201611075837.8A CN201611075837A CN106779087B CN 106779087 B CN106779087 B CN 106779087B CN 201611075837 A CN201611075837 A CN 201611075837A CN 106779087 B CN106779087 B CN 106779087B
- Authority
- CN
- China
- Prior art keywords
- module
- data
- model
- algorithm
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007405 data analysis Methods 0.000 title claims abstract description 45
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 91
- 238000006243 chemical reaction Methods 0.000 claims abstract description 57
- 238000004458 analytical method Methods 0.000 claims abstract description 36
- 238000005457 optimization Methods 0.000 claims abstract description 34
- 238000007781 pre-processing Methods 0.000 claims abstract description 23
- 239000000284 extract Substances 0.000 claims abstract description 10
- 238000000034 method Methods 0.000 claims description 46
- 238000007726 management method Methods 0.000 claims description 36
- 238000012549 training Methods 0.000 claims description 35
- 230000009467 reduction Effects 0.000 claims description 31
- 238000010801 machine learning Methods 0.000 claims description 25
- 239000011159 matrix material Substances 0.000 claims description 22
- 238000000605 extraction Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 13
- 238000003860 storage Methods 0.000 claims description 13
- 238000003066 decision tree Methods 0.000 claims description 12
- 238000004891 communication Methods 0.000 claims description 11
- 238000013528 artificial neural network Methods 0.000 claims description 9
- 238000002790 cross-validation Methods 0.000 claims description 7
- 230000003595 spectral effect Effects 0.000 claims description 6
- HUTDUHSNJYTCAR-UHFFFAOYSA-N ancymidol Chemical compound C1=CC(OC)=CC=C1C(O)(C=1C=NC=NC=1)C1CC1 HUTDUHSNJYTCAR-UHFFFAOYSA-N 0.000 claims description 4
- 238000012417 linear regression Methods 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 claims description 3
- 238000013500 data storage Methods 0.000 claims description 3
- 238000009826 distribution Methods 0.000 claims description 3
- 238000007477 logistic regression Methods 0.000 claims description 3
- 238000005192 partition Methods 0.000 claims description 3
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 230000013011 mating Effects 0.000 claims 1
- 239000002131 composite material Substances 0.000 abstract description 3
- 238000012706 support-vector machine Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000000354 decomposition reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012827 research and development Methods 0.000 description 3
- 239000004575 stone Substances 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005284 excitation Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000003058 natural language processing Methods 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 210000000805 cytoplasm Anatomy 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000012252 genetic analysis Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 239000012466 permeate Substances 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000011524 similarity measure Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000002269 spontaneous effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Artificial Intelligence (AREA)
- Machine Translation (AREA)
Abstract
Description
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611075837.8A CN106779087B (zh) | 2016-11-30 | 2016-11-30 | 一种通用机器学习数据分析平台 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611075837.8A CN106779087B (zh) | 2016-11-30 | 2016-11-30 | 一种通用机器学习数据分析平台 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106779087A CN106779087A (zh) | 2017-05-31 |
CN106779087B true CN106779087B (zh) | 2019-02-22 |
Family
ID=58900896
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611075837.8A Active CN106779087B (zh) | 2016-11-30 | 2016-11-30 | 一种通用机器学习数据分析平台 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106779087B (zh) |
Families Citing this family (60)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107229976A (zh) * | 2017-06-08 | 2017-10-03 | 郑州云海信息技术有限公司 | 一种基于spark的分布式机器学习系统 |
CN107292841A (zh) * | 2017-06-16 | 2017-10-24 | 石福荣 | 模式化图像处理技术 |
CN107370796B (zh) * | 2017-06-30 | 2021-01-08 | 深圳致星科技有限公司 | 一种基于Hyper TF的智能学习系统 |
CN109583926A (zh) * | 2017-09-29 | 2019-04-05 | 优估(上海)信息科技有限公司 | 一种二手车定价方法装置及系统 |
CN107807956A (zh) * | 2017-09-30 | 2018-03-16 | 平安科技(深圳)有限公司 | 电子装置、数据处理方法及计算机可读存储介质 |
CN107844836A (zh) * | 2017-10-24 | 2018-03-27 | 信雅达系统工程股份有限公司 | 一种基于机器学习的系统及学习方法 |
CN109165359A (zh) * | 2017-11-06 | 2019-01-08 | 徐海飞 | 一种基于web服务平台的高维数据降维方法及系统 |
CN107766940B (zh) * | 2017-11-20 | 2021-07-23 | 北京百度网讯科技有限公司 | 用于生成模型的方法和装置 |
CN108154238B (zh) * | 2017-12-25 | 2020-11-27 | 东软集团股份有限公司 | 机器学习流程的迁移方法、装置、存储介质和电子设备 |
CN108281192B (zh) * | 2017-12-29 | 2022-03-22 | 一诺仪器(中国)有限公司 | 基于集成学习算法的人体成分预测方法及系统 |
CN108535707B (zh) * | 2018-03-30 | 2020-11-03 | 北京润科通用技术有限公司 | 一种雷达性能预测模型建立方法及装置 |
CN110334720A (zh) * | 2018-03-30 | 2019-10-15 | 百度在线网络技术(北京)有限公司 | 业务数据的特征提取方法、装置、服务器和存储介质 |
CN108628669A (zh) * | 2018-04-25 | 2018-10-09 | 北京京东尚科信息技术有限公司 | 一种调度机器学习算法任务的方法和装置 |
JP6802213B2 (ja) * | 2018-04-26 | 2020-12-16 | ファナック株式会社 | 工具選定装置及び機械学習装置 |
CN110598868B (zh) * | 2018-05-25 | 2023-04-18 | 腾讯科技(深圳)有限公司 | 一种机器学习模型搭建方法、装置及相关设备 |
CN108763460A (zh) * | 2018-05-28 | 2018-11-06 | 成都优易数据有限公司 | 一种基于sql的机器学习方法和系统 |
CN111260018B (zh) * | 2018-11-30 | 2022-03-22 | 上海寒武纪信息科技有限公司 | 机器学习二级模型文件生成方法、装置、存储介质 |
CN110647996B (zh) * | 2018-06-08 | 2021-01-26 | 上海寒武纪信息科技有限公司 | 通用机器学习模型的执行方法、装置和存储介质 |
EP3751477A4 (en) | 2018-06-08 | 2021-11-03 | Shanghai Cambricon Information Technology Co., Ltd | GENERAL AUTOMATIC LEARNING MODEL, AND MODEL FILE PRODUCTION AND ANALYSIS METHOD |
CN108897587B (zh) * | 2018-06-22 | 2021-11-12 | 北京优特捷信息技术有限公司 | 可插拔式机器学习算法运行方法、装置及可读存储介质 |
CN110659125A (zh) * | 2018-06-28 | 2020-01-07 | 杭州海康威视数字技术股份有限公司 | 一种分析任务执行方法、装置、系统及电子设备 |
CN110750591A (zh) * | 2018-07-04 | 2020-02-04 | 全球智能股份有限公司 | 人工智能知识管理系统与其形成分布式记录的方法 |
CN109033309B (zh) * | 2018-07-17 | 2023-04-07 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、设备及存储介质 |
CN109241030A (zh) * | 2018-08-09 | 2019-01-18 | 南方电网科学研究院有限责任公司 | 机器人作业数据分析服务器和机器人作业数据分析方法 |
CN109508358B (zh) * | 2018-10-19 | 2021-07-23 | 湖南工学院 | 一种基于复合优化分析的企业管理效率测度方法 |
CN109491991B (zh) * | 2018-11-08 | 2022-03-01 | 四川长虹电器股份有限公司 | 一种无监督的数据自动清洗方法 |
CN109460429A (zh) * | 2018-11-19 | 2019-03-12 | 同方知网(北京)技术有限公司 | 一种基于农业产业数据的自助式分析模型方法与系统 |
CN109711436A (zh) * | 2018-12-05 | 2019-05-03 | 量子云未来(北京)信息科技有限公司 | 一种人工智能训练模型构建方法、装置及存储介质 |
CN109635170A (zh) * | 2018-12-13 | 2019-04-16 | 成都四方伟业软件股份有限公司 | 算法接入方法、装置、电子设备及可读存储介质 |
CN109783859A (zh) * | 2018-12-13 | 2019-05-21 | 重庆金融资产交易所有限责任公司 | 模型构建方法、装置及计算机可读存储介质 |
CN109800277A (zh) * | 2018-12-18 | 2019-05-24 | 合肥天源迪科信息技术有限公司 | 一种机器学习平台及基于该平台的数据模型优化方法 |
CN109784676B (zh) * | 2018-12-25 | 2023-08-29 | 杨鑫 | 数据分析的学习和使用方法、装置及计算机可读存储介质 |
CN109816114B (zh) * | 2018-12-29 | 2021-12-28 | 大唐软件技术股份有限公司 | 一种机器学习模型的生成方法、装置 |
CN109858631B (zh) * | 2019-02-02 | 2021-04-27 | 清华大学 | 用于概念迁移的流式数据分析的自动机器学习系统及方法 |
CN109935286A (zh) * | 2019-02-26 | 2019-06-25 | 重庆善功科技有限公司 | 基于逻辑回归的人工授精成功率影响因素计算方法与系统 |
CN110135628A (zh) * | 2019-04-23 | 2019-08-16 | 上海淇玥信息技术有限公司 | 一种金融策略自动生成方法、装置、系统和记录介质 |
CN110163381A (zh) * | 2019-04-26 | 2019-08-23 | 美林数据技术股份有限公司 | 智能学习方法及装置 |
CN110134016B (zh) * | 2019-05-20 | 2021-11-23 | 孙艺 | 一种基于人工智能的中草药栽培及药性鉴定标准制定系统 |
CN113076694B (zh) * | 2019-06-20 | 2023-10-20 | 北京实力伟业环保科技有限公司 | 基于物联网的风机故障评价设备 |
CN110321112A (zh) * | 2019-07-02 | 2019-10-11 | 北京百度网讯科技有限公司 | Ai能力研发平台及数据处理方法 |
CN110569868A (zh) * | 2019-07-19 | 2019-12-13 | 云南昆钢电子信息科技有限公司 | 一种危险作业规范管理系统及其管理方法 |
WO2021051920A1 (zh) * | 2019-09-17 | 2021-03-25 | 华为技术有限公司 | 模型优化方法、装置、存储介质及设备 |
CN110738326B (zh) * | 2019-09-24 | 2020-12-04 | 深圳创新奇智科技有限公司 | 一种人工智能服务系统模型的选择方法和装置 |
TWI738066B (zh) * | 2019-09-24 | 2021-09-01 | 鴻海精密工業股份有限公司 | 基於神經網路之資料處理裝置、方法及電腦可讀取存儲介質 |
CN110991474A (zh) * | 2019-10-12 | 2020-04-10 | 未鲲(上海)科技服务有限公司 | 一种机器学习建模平台 |
TWI733270B (zh) * | 2019-12-11 | 2021-07-11 | 中華電信股份有限公司 | 機器學習模型的最佳超參數組態的訓練裝置和訓練方法 |
CN111160733B (zh) * | 2019-12-16 | 2024-03-29 | 北京淇瑀信息科技有限公司 | 一种基于有偏样本的风险控制方法、装置及电子设备 |
CN111274234B (zh) * | 2020-01-19 | 2021-07-30 | 温州市中鼎网络科技有限公司 | 一种基于数据分析的机器打分系统及方法 |
CN111339375A (zh) * | 2020-03-19 | 2020-06-26 | 中国海洋石油集团有限公司 | 一种通用的大数据模型配置和分析方法 |
CN111581092B (zh) * | 2020-05-07 | 2023-05-30 | 安徽星环人工智能科技有限公司 | 仿真测试数据的生成方法、计算机设备及存储介质 |
CN111708818B (zh) * | 2020-05-28 | 2023-06-16 | 北京赛博云睿智能科技有限公司 | 一种智能计算方法 |
TWI740529B (zh) * | 2020-06-05 | 2021-09-21 | 財團法人資訊工業策進會 | 分層建模之方法及系統 |
CN111815027B (zh) * | 2020-06-09 | 2024-08-02 | 山东大学 | 一种光伏场站发电功率预测方法及系统 |
CN112100287B (zh) * | 2020-09-15 | 2023-12-29 | 北京通付盾人工智能技术有限公司 | 一种基于动态规划技术的集成式云端kyc方法 |
CN112395272B (zh) * | 2021-01-20 | 2021-07-13 | 鹏城实验室 | 通信算法数据库构建方法、分布式机器装置和存储介质 |
CN113791656A (zh) * | 2021-07-29 | 2021-12-14 | 六盘水市农业科学研究院 | 一种阶梯式升温循环烘干方法 |
CN113609779B (zh) * | 2021-08-16 | 2024-04-09 | 深圳力维智联技术有限公司 | 分布式机器学习的建模方法、装置及设备 |
CN113836806A (zh) * | 2021-09-23 | 2021-12-24 | 中国科学院空间应用工程与技术中心 | 一种phm模型构建方法、系统、存储介质及电子设备 |
CN114783049B (zh) * | 2022-03-21 | 2023-06-23 | 广东工业大学 | 一种基于深度神经网络视觉识别的口语学习方法及系统 |
TWI824700B (zh) * | 2022-09-06 | 2023-12-01 | 中華電信股份有限公司 | 自動化機器學習系統、方法及其電腦可讀媒介 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101782976A (zh) * | 2010-01-15 | 2010-07-21 | 南京邮电大学 | 一种云计算环境下机器学习自动选择方法 |
CN104166701A (zh) * | 2014-08-04 | 2014-11-26 | 深圳先进技术研究院 | 机器学习方法及系统 |
CN105046327A (zh) * | 2015-06-03 | 2015-11-11 | 王宝会 | 一种基于机器学习技术的智能电网信息系统及方法 |
CN105260835A (zh) * | 2015-10-13 | 2016-01-20 | 北京凯行同创科技有限公司 | 多来源业务大数据的建模、分析、自我优化的方法 |
US9324033B2 (en) * | 2012-09-13 | 2016-04-26 | Nokia Technologies Oy | Method and apparatus for providing standard data processing model through machine learning |
-
2016
- 2016-11-30 CN CN201611075837.8A patent/CN106779087B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101782976A (zh) * | 2010-01-15 | 2010-07-21 | 南京邮电大学 | 一种云计算环境下机器学习自动选择方法 |
US9324033B2 (en) * | 2012-09-13 | 2016-04-26 | Nokia Technologies Oy | Method and apparatus for providing standard data processing model through machine learning |
CN104166701A (zh) * | 2014-08-04 | 2014-11-26 | 深圳先进技术研究院 | 机器学习方法及系统 |
CN105046327A (zh) * | 2015-06-03 | 2015-11-11 | 王宝会 | 一种基于机器学习技术的智能电网信息系统及方法 |
CN105260835A (zh) * | 2015-10-13 | 2016-01-20 | 北京凯行同创科技有限公司 | 多来源业务大数据的建模、分析、自我优化的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106779087A (zh) | 2017-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106779087B (zh) | 一种通用机器学习数据分析平台 | |
Hashim et al. | Student performance prediction model based on supervised machine learning algorithms | |
Soofi et al. | Classification techniques in machine learning: applications and issues | |
Gross et al. | Hard mixtures of experts for large scale weakly supervised vision | |
Anuradha et al. | A comparative analysis on the evaluation of classification algorithms in the prediction of students performance | |
Kuo et al. | Integration of particle swarm optimization and genetic algorithm for dynamic clustering | |
Maulik et al. | Integrating clustering and supervised learning for categorical data analysis | |
Tang et al. | Multi-label patent categorization with non-local attention-based graph convolutional network | |
CN104657718A (zh) | 一种基于人脸图像特征极限学习机的人脸识别方法 | |
CN110297888A (zh) | 一种基于前缀树与循环神经网络的领域分类方法 | |
Untoro et al. | Evaluation of decision tree, k-NN, Naive Bayes and SVM with MWMOTE on UCI dataset | |
Chakarverti et al. | Prediction analysis techniques of data mining: a review | |
Kaur et al. | Machine Learning Approach to Recommender System for Web Mining | |
Yuan et al. | Learning overlapping community-based networks | |
CN112949954A (zh) | 基于识别学习建立财务欺诈识别模型的方法 | |
Granell et al. | Unsupervised clustering analysis: a multiscale complex networks approach | |
Majeed et al. | Current state of art of academic data mining and future vision | |
Aparna et al. | Comprehensive study and analysis of partitional data clustering techniques | |
de Sá et al. | Algorithm recommendation for data streams | |
Hu | A classifier of matrix modular neural network to simplify complex classification tasks | |
Sajja et al. | Using classification data mining for predicting student performance | |
Karanjgaokar et al. | Comparison of classification methodologies for predicting the stages of diabetic retinopathy | |
Wesołowski et al. | Time series classification based on fuzzy cognitive maps and multi-class decomposition with ensembling | |
KR20210030210A (ko) | 기술의 지속 가능성을 탐색하기 위한 특허 분석 장치 | |
CN110472140A (zh) | 对象词推荐方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Li Qiang Inventor after: Zhuang Li Inventor after: Zhao Feng Inventor after: Liang Yi Inventor after: Chen Yuyan Inventor after: Ni Shilong Inventor after: Su Jiangwen Inventor after: Wang Qiulin Inventor before: Chen Yuyan Inventor before: Ni Shilong Inventor before: Su Jiangwen Inventor before: Wang Qiulin |