CN111933212A - 一种基于机器学习的临床组学数据处理方法及装置 - Google Patents
一种基于机器学习的临床组学数据处理方法及装置 Download PDFInfo
- Publication number
- CN111933212A CN111933212A CN202010873321.8A CN202010873321A CN111933212A CN 111933212 A CN111933212 A CN 111933212A CN 202010873321 A CN202010873321 A CN 202010873321A CN 111933212 A CN111933212 A CN 111933212A
- Authority
- CN
- China
- Prior art keywords
- omics
- model
- feature
- training
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000010801 machine learning Methods 0.000 title claims abstract description 69
- 238000003672 processing method Methods 0.000 title claims abstract description 30
- 238000012795 verification Methods 0.000 claims abstract description 103
- 238000000034 method Methods 0.000 claims abstract description 70
- 238000004458 analytical method Methods 0.000 claims abstract description 44
- 238000012545 processing Methods 0.000 claims abstract description 30
- 238000012216 screening Methods 0.000 claims abstract description 19
- 238000012549 training Methods 0.000 claims description 145
- 230000006870 function Effects 0.000 claims description 27
- 238000012360 testing method Methods 0.000 claims description 19
- 238000013528 artificial neural network Methods 0.000 claims description 12
- 230000015654 memory Effects 0.000 claims description 11
- 238000007477 logistic regression Methods 0.000 claims description 9
- 238000010200 validation analysis Methods 0.000 claims description 9
- 230000000694 effects Effects 0.000 claims description 5
- 239000013598 vector Substances 0.000 claims description 5
- 238000002790 cross-validation Methods 0.000 claims description 4
- 239000000654 additive Substances 0.000 claims description 3
- 230000000996 additive effect Effects 0.000 claims description 3
- 238000011156 evaluation Methods 0.000 claims description 3
- 230000002068 genetic effect Effects 0.000 claims description 3
- CCEKAJIANROZEO-UHFFFAOYSA-N sulfluramid Chemical group CCNS(=O)(=O)C(F)(F)C(F)(F)C(F)(F)C(F)(F)C(F)(F)C(F)(F)C(F)(F)C(F)(F)F CCEKAJIANROZEO-UHFFFAOYSA-N 0.000 claims description 3
- 238000012935 Averaging Methods 0.000 claims description 2
- 238000000540 analysis of variance Methods 0.000 claims description 2
- 230000031018 biological processes and functions Effects 0.000 claims description 2
- 238000010201 enrichment analysis Methods 0.000 claims description 2
- 238000000605 extraction Methods 0.000 claims description 2
- 108090000623 proteins and genes Proteins 0.000 description 16
- 230000014509 gene expression Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 102000004169 proteins and genes Human genes 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000002705 metabolomic analysis Methods 0.000 description 8
- 230000001431 metabolomic effect Effects 0.000 description 8
- 238000000528 statistical test Methods 0.000 description 8
- 238000002474 experimental method Methods 0.000 description 7
- 238000012706 support-vector machine Methods 0.000 description 7
- 201000010099 disease Diseases 0.000 description 6
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 6
- 238000011160 research Methods 0.000 description 6
- 239000010410 layer Substances 0.000 description 5
- 108010026552 Proteome Proteins 0.000 description 4
- 230000009977 dual effect Effects 0.000 description 4
- 210000001519 tissue Anatomy 0.000 description 4
- 241000282326 Felis catus Species 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 229920002477 rna polymer Polymers 0.000 description 3
- 102000053602 DNA Human genes 0.000 description 2
- 108020004414 DNA Proteins 0.000 description 2
- 241000282414 Homo sapiens Species 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 2
- 239000000090 biomarker Substances 0.000 description 2
- 230000012010 growth Effects 0.000 description 2
- 239000002207 metabolite Substances 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000013518 transcription Methods 0.000 description 2
- 230000035897 transcription Effects 0.000 description 2
- 102000040650 (ribonucleotides)n+m Human genes 0.000 description 1
- 108091032973 (ribonucleotides)n+m Proteins 0.000 description 1
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 206010061818 Disease progression Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 210000005013 brain tissue Anatomy 0.000 description 1
- 230000019522 cellular metabolic process Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 230000005750 disease progression Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000009510 drug design Methods 0.000 description 1
- 238000013399 early diagnosis Methods 0.000 description 1
- 238000010230 functional analysis Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010202 multivariate logistic regression analysis Methods 0.000 description 1
- 210000004165 myocardium Anatomy 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 239000002547 new drug Substances 0.000 description 1
- 231100000915 pathological change Toxicity 0.000 description 1
- 230000036285 pathological change Effects 0.000 description 1
- 230000001575 pathological effect Effects 0.000 description 1
- 230000004481 post-translational protein modification Effects 0.000 description 1
- 230000004853 protein function Effects 0.000 description 1
- 238000000734 protein sequencing Methods 0.000 description 1
- 230000004850 protein–protein interaction Effects 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 238000004445 quantitative analysis Methods 0.000 description 1
- 230000037425 regulation of transcription Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000012106 screening analysis Methods 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 230000004083 survival effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000013526 transfer learning Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
- G16B20/00—ICT specially adapted for functional genomics or proteomics, e.g. genotype-phenotype associations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/044—Recurrent networks, e.g. Hopfield networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Mathematical Physics (AREA)
- General Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Public Health (AREA)
- Computational Linguistics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Chemical & Material Sciences (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Databases & Information Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Analytical Chemistry (AREA)
- Pathology (AREA)
- Proteomics, Peptides & Aminoacids (AREA)
- Genetics & Genomics (AREA)
- Evolutionary Biology (AREA)
- Biotechnology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Image Analysis (AREA)
- Other Investigation Or Analysis Of Materials By Electrical Means (AREA)
Abstract
本发明涉及一种基于机器学习的临床组学数据处理方法,包括:获取待处理的组学数据;从待处理的组学数据中提取组学特征的组合作为特征子集;根据所述特征子集进行组学特征分析得到模型验证结果;根据所述组学特征对所述模型验证结果值的影响幅度确定所述组学特征的重要程度值;根据所述组学特征的重要程度值筛选出目标特征子集;以及根据所述目标特征子集对所述组学数据进行组学特征分析得到用于表征所述组学数据对应的分类或者生理指标的预测值。上述方法能够提升组学数据处理的效率。此外,本申请实施例还提供一种临床组学数据处理、服务器及存储介质。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种基于机器学习的临床组学数据处理方法、装置、服务器及存储介质。
背景技术
机器学习(Machine Learning,ML)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心,是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。机器学习和深度学习通常包括人工神经网络、置信网络、强化学习、迁移学习、归纳学习、式教学习等技术。
人体在其生命周期的不同阶段以及疾病发展的不同阶段,其基因表达和蛋白表达可能存在巨大的差异。因此组学(基因组学,转录组学,蛋白组学和代谢组学等)是系统地研究生物学规律的重要工具,同时也可反映出机体所处的生命周期阶段以及疾病发展情况。
当前临床样本获得越来越多的组学数据,组学数据在精准医疗中起到至关重要的作用。作为功能的最终执行者,蛋白质功能的改变是所有生理病理过程变化的直接原因,蛋白组学的研究对于疾病的诊断、分型和预测有着不可替代的优势。然而现有的蛋白组学研究多集中在蛋白测序、定量、差异蛋白分析,生物标记(Biomarker)筛选以及功能性分析上,此过程需要大量的人工干预,效率低下。
发明内容
有鉴于此,有必要提供一种基于机器学习的临床组学数据处理方法、装置、服务器及存储介质,其可解决现有技术中组学数据处理及运用时处理效率低下的问题。
一方面,本申请提供一种基于机器学习的临床组学数据处理方法,其包括以下步骤:
获取待处理的组学数据;从所述待处理的组学数据中提取组学特征的组合作为样本特征子集;根据所述样本特征子集进行组学特征分析得到模型验证结果;根据所述组学特征对所述验证结果值的影响幅度确定所述组学特征的重要程度值;根据所述组学特征的重要程度值筛选出目标特征子集;以及根据所述目标特征子集对所述组学数据进行组学特征分析得到用于表征所述组学数据对应的分类或者生理指标的预测值。。
第二方面,本申请还提供一种基于机器学习的临床组学数据处理装置,包括:
数据获取模块,用于获取待处理的组学数据;
特征提取模块,用于从所述待处理的组学数据中提取组学特征的组合作为特征子集;
分析模块,用于根据所述特征子集进行组学特征分析得到模型验证结果;
重要程度值获取模块,用于根据所述组学特征对所述验证结果值的影响幅度确定所述组学特征的重要程度值;
筛选模块,用于根据所述组学特征的重要程度值筛选出目标特征子集;以及
预测模块,用于根据所述目标特征子集对所述组学数据进行组学特征分析得到用于表征所述组学数据对应的分类或者生理指标的预测值。
第三方面,本申请实施例还提供一种服务器,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述第一方面提供的基于机器学习的组学数据处理方法。
第四方面,本申请实施例还提供一种计算机可读取存储介质,计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行上述第一方面提供的基于机器学习的组学数据处理方法。
根据以上的基于机器学习的临床组学数据处理方法,通过机器学习模型训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
为让本发明的上述和其他目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附图式,作详细说明如下。
附图说明
图1为本申请一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图2-3为图1所示的方法详细示意图。
图4为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图5为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图6为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图7为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图8为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图9为本申请另一个示例性实施例提供的一种基于机器学习的临床组学数据处理方法的流程图。
图10为本申请另一个示例性实施例提供的基于机器学习的临床组学数据处理方法的流程图
图11为本申请另一个示例性实施例提供一种基于机器学习的临床组学数据处理装置的结构框图。
图12为本申请另一个示例性实施例提供一种服务器的结构框图。
图13为本申请另一个示例性实施例提供一种存储介质的结构框图。
具体实施方式
为更进一步阐述本发明为实现预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明的具体实施方式、结构、特征及其功效,详细说明如后。
参阅图1到图3,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据。蛋白质组(Proteome)一词,源于蛋白质(Protein)与基因组(Genome)两个词的组合,意指“一种基因组所表达的全套蛋白质”,即包括一种细胞乃至一种生物所表达的全部蛋白质。蛋白质组学本质上指的是在大规模水平上研究蛋白质的特征,包括蛋白质的表达水平,翻译后的修饰,蛋白与蛋白相互作用等,由此获得蛋白质水平上的关于疾病发生,细胞代谢等过程的整体而全面的认识。
蛋白质组的研究不仅能为生命活动规律提供物质基础,也能为众多种疾病机理的阐明及攻克提供理论根据和解决途径。通过对正常个体及病理个体间的蛋白质组比较分析,可以找到某些“疾病特异性的蛋白质分子”,它们可成为新药物设计的分子靶点,或者也会为疾病的早期诊断提供分子标志。
在一个具体的实施方式中,上述的训练样本为基因组学(Genomics)数据。基因组学是对生物体所有基因进行集体表征、定量研究及不同基因组比较研究的一门交叉生物学学科。基因组学主要研究基因组的结构、功能、进化、定位和编辑等,以及它们对生物体的影响。
在一个具体的实施方式中,上述的训练样本为转录组学数据。转录组学是指一门在整体水平上研究细胞中基因转录的情况及转录调控规律的学科。转录组学是从核糖核酸(Ribonucleic Acid,RNA)水平研究基因表达的情况。转录组即一个活细胞所能转录出来的所有RNA的总和,是研究细胞表型和功能的一个重要手段。以脱氧核糖核酸(DeoxyriboNucleic Acid,DNA)为模板合成RNA的转录过程是基因表达的第一步,也是基因表达调控的关键环节。所谓基因表达,是指基因携带的遗传信息转变为可辨别的表型的整个过程。与基因组不同的是,转录组的定义中包含了时间和空间的限定。同一细胞在不同的生长时期及生长环境下,其基因表达情况是不完全相同的。通常,同一种组织表达几乎相同的一套基因以区别于其他组织,如脑组织或心肌组织等分别只表达全部基因中不同的30%而显示出组织的特异性。
在一个具体的实施方式中,上述的训练样本为代谢组学(Metabonomics/Metabolomics)数据。代谢组学是效仿基因组学和蛋白质组学的研究思想,对生物体内所有代谢物进行定量分析,并寻找代谢物与生理病理变化的相对关系的研究方式,是系统生物学的组成部分。其研究对象大都是相对分子质量1000以内的小分子物质。
类别标签是指由工作人员如医生解析不同的测试样本数据而得到,其代表了经专业训练的医生对于样本数据的判定结果。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S103,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序;
在一个具体实施方式中,步骤S102具体包括以下步骤:将训练样本平均分成N份,选其中的N-1份作为训练集,剩余的1份作为验证集。可以理解,以上的组合共计N种。
例如,将训练样本分成5份,选其中4份作为训练集,其余的1份作为验证集。可以理解,每个训练样本作为验证集,总计有5中情形。进行上述的交叉验证过程,可以防止数据过并拟合,去除不必要的特征。
针对以上的N种情形,分别进行训练,则可以各到N个子模型。
在一个具体的实施方式中,上述的训练采用超梯度树提升(extremeGradientBoosting,XGBoost)分类器模型,选择树模型为基分类器,将训练集的样本特征输入XGBoost,目标函数设置为二分类的逻辑回归问题,评估指标为受试者工作特征曲线的面积(Receiver Operating Characteristic Area Under the Curve,ROC-AUC),早停次数例如可设置设置为50步,通过参数的自动搜索和交叉验证确定树的最优棵数,树的最大深度,正则化系数等超参数的取值。可以理解,此处的参数并不限于50,任意合适的参数均可使用。
在每个子模型中,完成对XGBoost分类器的训练之后,根据每个特征在树中出现的次数以及XGBoost分类器对各个特征的评分输出每个特征的重要程度值,将各个子模型中的特征重要程度值求平均,然后将所有的输入特征根据平均重要程度从大到小排列。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
在一个具体的实施方式中,在每个子模型中,通过实验确定最优特征组合。具体地,每次取前N个最重要的特征作为每个样本的特征子集。本方案依次取N=1,2,3,4,5,8,10,15,对每种特征子集单独训练一个XGBoost分类器,因此此过程一共训练得到8个XGBoost分类器(分类器的超参搜索以及训练同以上步骤S103。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
如前所述,验证子模型只采用N个最重要的样本特征进行训练得到,因此在验证阶段,对验证集的每个样本,也取前N个最重要的特征作为其特征子集,然后输入到对应的XGBoost分类器进行结果预测得到模型验证结果。然后,将模型输出的结果,即模型验证结果与人工已经标定的结果进行比对分析、运算得到模型质量的评分。可以理解,模型预测与准确,与标定结果相似度越高,其评分越高。依据此评分结果,即可确定最优的特征子集,亦即,使模型的预测结果与标定结果匹配程度最高的特征子集即为最优的特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
在获取到最优特征子集后,将其输入到XGBoost分类器进行训练,保存训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
对组学数据测试集中的每个样本,取N个最优特征组合作为样本特征子集。之后,将样本特征子集送到预测模型进行结果预测以及输出模型的图形化界面。
在一个具体的实施方式中,如图3所示,基于沙谱利附加解释(Shapley AdditiveExplanation,SHAP)的特征重要程度值分析,根据每个特征对模型预测值的影响确定其重要程度值,并做出重要程度值可视化的柱状图,从而解释模型判断的依据,并且有助于对模型的检验和修正;绘制热图(Heatmap)对取不同特征子集情况下的样本聚类情况可视化,从而对特征重要程度值和最优特征组合的筛选进行解释和验证;绘制火山图(Volcano)直观的显示差异表达的特征,从而对特征重要程度值和最优特征组合的筛选进行解释和验证;通过因本体(Gene Ontology,GO)富集分析得到生物学过程对应的显著性功能点图,为模型提供生物学层面的解释。
根据本实施例提供的基于机器学习的临床组学数据处理方法,通过XGBoost分类器的训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图4,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S201,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用逻辑回归模型(Logistic Regression,LR)训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
逻辑回归是离散选择法模型之一,属于多重变量分析范畴,是社会学、生物统计学、临床、数量心理学、计量经济学、市场营销等统计实证分析的常用方法。逻辑回归一般用于二分类(Binary Classification)问题中,给定一些输入,输出结果是离散值。例如用逻辑回归实现一个猫分类器,输入一张图片x,预测图片是否为猫,输出该图片中存在猫的概率结果y。从生物学的角度讲:就是一个模型对外界的刺激(训练样本)做出反应,趋利避害(评价标准)。应用于组学数据的特征预测中,可以根据输入的样本数据预测到期望的指标,例如存活寿命。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用逻辑回归模型训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图5,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S301,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用感知机模型(Perceptron)模型训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
感知机模型是一种二分类的线性分类器,只能处理线性可分的问题,感知机的模型就是尝试找到一个超平面将数据集分开,在二维空间这个超平面就是一条直线,在三维空间就是一个平面。感知机的分类模型如下:
f(x)=sign(w·x+b)
sign函数是指示函数(当wx+b>0,f(x)=+1;当wx+b<0,f(x)=-1;感知机的超平面是wx+b=0)
将上述分段函数整合成y(wx+b)>0,则满足该式子的样本点即分类正确的点,不满足的即分类错误的点,目标就是找到这样一组参数w,b使得将训练集中的正类点和负类点分开。
接下来定义损失函数(损失函数是一种衡量损失和错误的程度的函数),可以通过定义分类错误的样本的个数来作为损失函数,但是这种损失函数不是参数w,b的连续可导函数,因此不容易优化。对于误分类的点有-y(wx+b)>0,让所有的误分类点到超平面的距离和最小(注意:感知机的损失函数只针对误分类点,而不是整个训练集):
其中M是表示误分类的样本集合,当w,b成倍数增大时,并不会改变超平面,||w||的值也会相应的增大,因此令||w||=1不会影响结果。最终的感知机损失函数如下:
此外,上述的感知机,还可以采用多层结构,即多层感知机(Multi-LayerPerceptron,MLP)模型。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用感知机模型训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图6,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S401,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用支持向量机模型(Support Vector Machine,SVN)模型训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
在上述的感知机模型中,目标是将训练集分开,只要是能将样本分开的超平面都满足要求,而这样的超平面有很多。支持向量机本质上和感知机类似,然而要求却更加苛刻,在分类过程中,那些远离超平面的点是安全的,而那些容易被误分类的点是离超平面很近的点,而支持向量机的思想就是要重点关注这些离超平面很近的点,一句话就是在分类正确的同时,让离超平面最近的点到超平面的间隔最大。
基于上面的感知机可以将目标表示为:
γ是离超平面最近的点的到超平面的几何间隔,将几何间隔用函数间隔替代,可以将式子表示为:
γ(帽子)表示的是函数间隔,而函数间隔的取值是会随着w,b成倍数变化而变化的,并不会影响最终的结果,因此令γ(帽子)=1,则我们最终的问题可以表述为:
在这里引出了支持向量机的第一个亮点:最大化间隔,最大化间隔能使得分类更加精确,且该最大间隔超平面是存在且唯一的。
上面的问题中的1/2||w||2是凸函数,同时约束不等式是仿射函数,因此这是一个凸二次规划问题,根据凸优化理论,可以借助拉格朗日函数将约束问题转化为无约束的问题来求解,优化函数可以表达为:
αi是拉格朗日乘子,αi≥0i=1,2,3,.....,n。
根据拉格朗日的对偶性,可以将原始问题转化为对偶问题(只要对偶问题存在,对偶问题的最优化解就是原问题的最优化解,一般对偶问题都比原始问题更容易求解)极大极小问题:
先对w,b求导求极小问题,可以得到w,b的值:
将求得的解代入到拉格朗日函数中,可以得到下面的优化函数(将代入后原本的求α的极大问题转换成了极小问题):
因此只需要求得我们的α的值就可以求得我们的w,b的值(求α的常用算法是SMO算法)假设最终求得的α的值为α*,则w,b可以表述成:
引入KTT条件(KTT条件是上面拉格朗日函数求最优解的必要条件):
αi *(yi(w*·xi+b*)-1)=0,i=1,2,…,N
yi(w*·xi+b*)-1≥0,i=1,2,…,N
αi *≥0,i=1,2,…,N
从KTT条件中可以看出,当yi(w*xi+b*)-1>0时,αi*=0;当αi*>0时,yi(w*xi+b*)-1=0;
结合上面的w,b表达式可以引出支持向量机的第二个亮点:w,b参数只与满足yi(w*xi+b*)-1=0的样本有关,而这些样本点就是离最大间隔超平面最近的点,将这些点称之为支持向量。因此很多时候支持向量在小样本集分类时也能表现的很好,也正是因为这个原因。另外需注意α向量的个数是和训练集数量相等的,对于大的训练集,会导致所需要的参数数量增多,因此SVM在处理大的训练集时会比其他常见的机器学习算法要慢。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用支持向量机模型训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图7,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S501,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用全连接神经网络模型训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
全连接的意思即为多层的神经网络,下一层的每个节点都和上一层的所有节点相连,构成一个感知机模型。这种全连接的网络是相对来说参数最多的神经网络。根据上述所述步骤,单层感知机就处理过程相似。定义好各层的激活函数后,模型就建立好了。然后根据是二分类、多分类或回归来定义损失函数,然后使用梯度下降即可。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用全连接神经网络训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图8,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S601,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用长短期记忆网络模型(Long Short-Term Memory,LSTM)训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
LSTM是一种时间递归神经网络,适合于处理和预测时间序列中间隔和延迟相对较长的重要事件。LSTM是解决循环神经网络中存在的“梯度消失”问题而提出的,是一种特殊的循环神经网络。最常见的一个例子就是:当我们要预测“the clouds are in the(...)"的时候,这种情况下,相关的信息和预测的词位置之间的间隔很小,会使用先前的信息预测出词是”sky”。但是如果想要预测”I grew up in France...I speak fluent(...)”,语言模型推测下一个词可能是一种语言的名字,但是具体是什么语言,需要用到间隔很长的前文中France,在这种情况下,因为“梯度消失”的问题,并不能利用间隔很长的信息,然而,LSTM在设计上明确避免了长期依赖的问题,这主要归功于LSTM精心设计的“门”结构(输入门、遗忘门和输出门)消除或者增加信息到细胞状态的能力,使得LSTM能够记住长期的信息。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用长短期记忆网络模型训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图9,本申请一个示例性实施例提供一种基于机器学习的临床组学数据处理方法,该方法包括以下步骤:
步骤S101,获取已被标定类别标签的训练样本。
在一个具体的实施方式中,上述的训练样本为蛋白组学(Proteomics)数据、基因组学数据、转录组学数据、代谢组学数据或其任意组合。
步骤S102,将所述训练样本随机分成多个个子集。
步骤S701,将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别采用图卷神经网络模型(Graph Convolutional Network,GCN)训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序。
以GNN为基础的图卷积神经网络GCN是对卷积神经网络在图领域的自然推广。它能同时对节点特征信息与结构信息进行端对端学习,是目前对图数据学习任务的较优选择。GCN精妙地设计了一种从图数据中提取特征的方法,从而让我们可以使用这些特征去对图数据进行节点分类(node classification)、图分类(graph classification)、边预测(link prediction),还可以顺便得到图的嵌入表示(graph embedding)。
步骤S104,在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数。
验证子模型的训练方法与前面步骤S103中提到的方法相似,不同之处在于,此时只取N个最重要的样本特征作,其他的特征不再作为特征输入训练模型。
步骤S105,将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集。
步骤S106,对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型。
步骤S107,将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
根据本实施例提供的基于机器学习的临床组学数据处理方法,采用图卷神经网络模训练筛选最优特征子集,之后基于此特征子集进行模型的训练和测试。相比于原始特征,此特征子集移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
在模型预测的同时,本方案通过四个模型解释子模块从特征层面,算法层面和生物学层面对模型的判断提供了依据。本发明的整个算法,从特征筛选到模型的训练与解释均为算法自动进行,无需人工干涉,极大的提升了组学数据机器学习的处理效率。
上述方案摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
参阅图10,其示出了本申请一个示例性实施例提供的基于机器学习的临床组学数据处理方法的流程图,该方法包括:
步骤S201,获取待处理的组学数据。
此处的组学数据是指蛋白组不字数据、基因组学数据、转录组学数据或者代谢组学数据。
步骤S202,从所述待处理的组学数据中提取组学特征的组合作为特征子集。
样本特征是指计算机可识别的数据特征,其可以表征为一个数据范围、向量、数据组合、图形特征等等。样本特征子集里可以包括一个或者多个样本特征。
步骤S203,根据所述特征子集进行组学特征分析得到模型验证结果。
如上所述,可以预告采用已经标记好训练数据,采用机器学习的方式训练得到验证模型,将步骤S202中获取得到的样本特征子集输入到该验证模型中,即可得到模型验证结果。
步骤S204,根据所述组学特征对所述验证结果值的影响幅度确定所述组学特征的重要程度值。
在一个具体的实施方式中,上述的机器学习采用超梯度树提升(extremeGradientBoosting,XGBoost)分类器模型。完成对XGBoost分类器的训练之后,根据每个特征在树中出现的次数以及XGBoost分类器对各个特征的评分输出每个特征的重要程度值,将各个子模型中的特征重要程度值求平均,然后将所有的输入特征根据平均重要程度从大到小排列。可以理解,此处的重要程度值获取方法并不限于采用上述的方法,其还可以是以下方法:沙谱利附加解释法、基尼重要性、遗传算法、方差分析、T检验及曼-惠特尼秩和检验的任意组合。
步骤S205,根据所述组学特征的重要程度值筛选出目标特征子集。
如前所述,验证模型可采用N个最重要的样本特征进行训练得到,因此在验证阶段,对验证集的每个样本,也取前N个最重要的特征作为其特征子集,然后输入到对应的XGBoost分类器进行结果预测得到模型验证结果。然后,将模型输出的结果,即模型验证结果与人工已经标定的结果进行比对分析、运算得到模型质量的评分。从而确定最优的特征子集,即上述的目标特征子集。
步骤S206,根据所述目标特征子集对所述组学数据进行组学特征分析得到用于表征所述组学数据对应的分类或者生理指标的预测值。
在获取目标特征子集后,采用目标特征子集进行分析,即可将组学数据进行分类,或者分析得到与组学数据对应的生理指标数值。
根据本实施例提供的方法,通过采用机器学习的方法对组学数据进行处理,极大的提升了组学数据的处理效率,而通过对目标组学特征的筛选,可以移除与判断不相关的特征的干扰,同时降低了特征维度,因此能够得到更加准确的预测结果。
参阅图11,其示出了本申请一个示例性实施例提供的基于机器学习的临床组学数据处理装置的结构框图。该装置包括:
样本获取模块101,用于获取已被标定类别标签的训练样本;
样本分拆模块102,用于将所述训练样本随机分成多个个子集;
交叉验证模块103,用于将所述多个子集分成训练集与验证集,根据训练集与验证集的不同组合方案分别训练得到多个子模型,所述子模型输出每个样本特征的重要程度值排序;
验证子模型获取模块104,用于在每个所述子模型中,依次取N个最重要的样本特征作为每个样本的特征子集,重新采用所述特征子集对所述训练集进行训练得到验证子模型,其中N为正整数;
最优特征子集获取模块105,用于将所述验证集的每个样本的所述特征子集输入到所述验证子模型中进行验证得到模型验证结果,并根据所述模型验证结果确定最优特征子集;
预测模型训练模块106,用于对所有所述训练样本,采用所述最优特征子集进行训练得到预测模型;以及
预测模块107,用于将待测试样本的所述最优特征子集输入所述预测模型获取预测结果。
通过上述的装置,摆脱了基于统计学检验方法和人工判断为主的分析方式,节省了分析成本和等待时间,避免人为实验误差所带来的问题,使用机器学习模型,可以实现对组学数据的自动分析,同时提供模型解释,为理解和检验模型提供了依据。
请参阅图12,其示出了本申请实施例提供的一种服务器的结构框图。该服务器100可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(centralprocessing units,CPU)11和一个或一个以上的存储器12,其中,所述存储器12中存储有至少一条指令,所述至少一条指令由所述处理器11加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
请参考图13,其示出了本申请实施例提供的一种计算机可读取存储介质的结构框图。该计算机可读取存储介质200中存储有程序代码,所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读取存储介质200可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读取存储介质200包括非易失性计算机可读取存储介质(Non-Transitory Computer-Readable Storage Medium)。计算机可读取存储介质200具有执行上述方法中的任何方法步骤的程序代码201的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码201可以例如以适当形式进行压缩。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭示如上,然而并非用以限定本发明,任何本领域技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容做出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案内容,依据本发明的技术实质对以上实施例所作的任何简介修改、等同变化与修饰,均仍属于本发明技术方案的范围内。
Claims (11)
1.一种基于机器学习的临床组学数据处理方法,其特征在于,包括:
获取待处理的组学数据;
从所述待处理的组学数据中提取组学特征的组合作为特征子集;
根据所述特征子集进行组学特征分析得到模型验证结果;
根据所述组学特征对所述模型验证结果的影响幅度确定所述组学特征的重要程度值;
根据所述组学特征的重要程度值筛选出目标特征子集;以及
根据所述目标特征子集对所述组学数据进行组学特征分析得到用于表征所述组学数据对应的分类或者生理指标的预测值。
2.如权利要求1所述的基于机器学习的临床组学数据处理方法,其特征在于,所述根据所述特征子集进行组学特征分析得到模型验证结果包括:
获取已标记的训练样本;
采用超梯度树提升分类器、逻辑回归法、向量机法、全连接网络法、长短期记忆网络法、多图层感知机法、及图卷积神经网络法的任意组合对所述训练数据进行训练得到验证模型;以及
将所述样本特征子集输入所述验证模型得到所述模型验证结果。
3.如权利要求2所述的基于机器学习的临床组学数据处理方法,其特征在于,所述根据所述组学特征对所述验证结果值的影响幅度确定所述组学特征的重要程度值时采用以下方法的任意组合:沙谱利附加解释法、基尼重要性、遗传算法、方差分析、T检验及曼-惠特尼秩和检验。
4.如权利要求2所述的基于机器学习的临床组学数据处理方法,其特征在于,所述验证模型采用超梯度树提升分类器法训练得到,所述方法包括:
将所述训练样本的特征输入梯度树提升分类器,目标函数设置为二分类的逻辑回归,评估指标设置为受试者工作特征曲线的面积,通过参数的自动搜索和交叉验证确定梯度树的参数取值。
5.如权利要求4所述的基于机器学习的临床组学数据处理方法,其特征在于,所述方法还包括:
获取所述组学特征在梯度树中出现的次数及所述验证模型对所述组学特征的评分;以及
根据所述次数及所述评分的加权值确定所述组学特征的重要程度值。
6.如权利要求4所述的基于机器学习的临床组学数据处理方法,其特征在于,所述根据所述组学特征对所述模型验证结果的影响幅度确定所述组学特征的重要程度值包括:
将不同特征子集得到的模型验证结果的受试者工作特征曲线的面积求平均,根据最高的受试者工作特征曲线的面积取值判断所述重要程度值。
7.如权利要求2-6任一项所述的基于机器学习的临床组学数据处理方法,其特征在于,所述方法还包括:
将所述训练样本随机分成多个样本子集;以及
分别采用所述多个样本子集训练所述验证模型。
8.如权利要求1所述的基于机器学习的临床组学数据处理方法,其特征在于,还包括:
根据所述预测值生成图形化解释界面,所述图形化解释界面包括:用指示样本特征重要程度值可视化的柱状图、用于指示样本聚类情况热图、用于指示差异表达的样本特征的火山图、以及用于指示生物学过程对应的显著性功能点的富集分析图中的任意组合。
9.一种基于机器学习的临床组学数据处理装置,其特征在于,包括:
数据获取模块,用于获取待处理的组学数据;
特征提取模块,用于从所述待处理的组学数据中提取组学特征的组合作为样本特征子集;
分析模块,用于根据所述样本特征子集进行组学特征分析得到验证结果;
重要程度值获取模块,用于根据所述组学特征对所述验证结果值的影响幅度确定所述组学特征的重要程度值;
筛选模块,用于根据所述组学特征的重要程度值筛选出目标特征子集;以及
预测模块,用于根据所述目标特征子集对所述组学数据进行组学特征分析得到预测结果。
10.一种服务器,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-8任一项所述的方法。
11.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010873321.8A CN111933212B (zh) | 2020-08-26 | 2020-08-26 | 一种基于机器学习的临床组学数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010873321.8A CN111933212B (zh) | 2020-08-26 | 2020-08-26 | 一种基于机器学习的临床组学数据处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111933212A true CN111933212A (zh) | 2020-11-13 |
CN111933212B CN111933212B (zh) | 2024-02-27 |
Family
ID=73305792
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010873321.8A Active CN111933212B (zh) | 2020-08-26 | 2020-08-26 | 一种基于机器学习的临床组学数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111933212B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112200320A (zh) * | 2020-12-02 | 2021-01-08 | 成都数联铭品科技有限公司 | 基于合作博弈法的模型解释方法、系统、设备及存储介质 |
CN112364880A (zh) * | 2020-11-30 | 2021-02-12 | 腾讯科技(深圳)有限公司 | 基于图神经网络的组学数据处理方法、装置、设备及介质 |
CN112786207A (zh) * | 2021-01-28 | 2021-05-11 | 联仁健康医疗大数据科技股份有限公司 | 数据筛选模型建立及数据筛选方法、装置、设备和介质 |
CN113537285A (zh) * | 2021-06-08 | 2021-10-22 | 内蒙古卫数数据科技有限公司 | 一种利用患者历史比对数据基于机器学习技术的新型临床错配样本识别方法 |
CN113703923A (zh) * | 2021-08-31 | 2021-11-26 | 深信服科技股份有限公司 | 一种业务问题的识别方法、装置、设备和介质 |
CN113948165A (zh) * | 2021-12-20 | 2022-01-18 | 易临云(深圳)科技有限公司 | 受试者筛选方法、系统、设备及计算机可读存储介质 |
CN114664382A (zh) * | 2022-04-28 | 2022-06-24 | 中国人民解放军总医院 | 多组学联合分析方法、装置及计算设备 |
CN116052889A (zh) * | 2023-03-31 | 2023-05-02 | 四川无限智达科技有限公司 | 一种基于血液常规指标检测的sFLC预测系统 |
CN116741397A (zh) * | 2023-08-15 | 2023-09-12 | 数据空间研究院 | 基于多组学数据融合的癌症分型方法、系统及存储介质 |
WO2024180407A1 (en) * | 2023-03-01 | 2024-09-06 | International Business Machines Corporation | Precision combination therapy using tumor clone response prediction from cell data |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107316082A (zh) * | 2017-06-15 | 2017-11-03 | 第四范式(北京)技术有限公司 | 用于确定机器学习样本的特征重要性的方法及系统 |
CN109558896A (zh) * | 2018-11-06 | 2019-04-02 | 中山大学附属第医院 | 基于超声组学和深度学习的疾病智能化分析方法及系统 |
CN110379463A (zh) * | 2019-06-05 | 2019-10-25 | 山东大学 | 基于机器学习的海洋藻类成因分析及浓度预测方法和系统 |
US20200073560A1 (en) * | 2018-09-04 | 2020-03-05 | Genetic Intelligence, Inc. | Methods for decentralized genome storage, distribution, marketing and analysis |
-
2020
- 2020-08-26 CN CN202010873321.8A patent/CN111933212B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107316082A (zh) * | 2017-06-15 | 2017-11-03 | 第四范式(北京)技术有限公司 | 用于确定机器学习样本的特征重要性的方法及系统 |
US20200073560A1 (en) * | 2018-09-04 | 2020-03-05 | Genetic Intelligence, Inc. | Methods for decentralized genome storage, distribution, marketing and analysis |
CN109558896A (zh) * | 2018-11-06 | 2019-04-02 | 中山大学附属第医院 | 基于超声组学和深度学习的疾病智能化分析方法及系统 |
CN110379463A (zh) * | 2019-06-05 | 2019-10-25 | 山东大学 | 基于机器学习的海洋藻类成因分析及浓度预测方法和系统 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112364880B (zh) * | 2020-11-30 | 2022-06-14 | 腾讯科技(深圳)有限公司 | 基于图神经网络的组学数据处理方法、装置、设备及介质 |
CN112364880A (zh) * | 2020-11-30 | 2021-02-12 | 腾讯科技(深圳)有限公司 | 基于图神经网络的组学数据处理方法、装置、设备及介质 |
CN112200320A (zh) * | 2020-12-02 | 2021-01-08 | 成都数联铭品科技有限公司 | 基于合作博弈法的模型解释方法、系统、设备及存储介质 |
CN112786207A (zh) * | 2021-01-28 | 2021-05-11 | 联仁健康医疗大数据科技股份有限公司 | 数据筛选模型建立及数据筛选方法、装置、设备和介质 |
CN113537285A (zh) * | 2021-06-08 | 2021-10-22 | 内蒙古卫数数据科技有限公司 | 一种利用患者历史比对数据基于机器学习技术的新型临床错配样本识别方法 |
CN113703923A (zh) * | 2021-08-31 | 2021-11-26 | 深信服科技股份有限公司 | 一种业务问题的识别方法、装置、设备和介质 |
CN113703923B (zh) * | 2021-08-31 | 2024-05-28 | 深信服科技股份有限公司 | 一种业务问题的识别方法、装置、设备和介质 |
CN113948165A (zh) * | 2021-12-20 | 2022-01-18 | 易临云(深圳)科技有限公司 | 受试者筛选方法、系统、设备及计算机可读存储介质 |
CN114664382A (zh) * | 2022-04-28 | 2022-06-24 | 中国人民解放军总医院 | 多组学联合分析方法、装置及计算设备 |
CN114664382B (zh) * | 2022-04-28 | 2023-01-31 | 中国人民解放军总医院 | 多组学联合分析方法、装置及计算设备 |
WO2024180407A1 (en) * | 2023-03-01 | 2024-09-06 | International Business Machines Corporation | Precision combination therapy using tumor clone response prediction from cell data |
CN116052889A (zh) * | 2023-03-31 | 2023-05-02 | 四川无限智达科技有限公司 | 一种基于血液常规指标检测的sFLC预测系统 |
CN116052889B (zh) * | 2023-03-31 | 2023-07-04 | 四川无限智达科技有限公司 | 一种基于血液常规指标检测的sFLC预测系统 |
CN116741397A (zh) * | 2023-08-15 | 2023-09-12 | 数据空间研究院 | 基于多组学数据融合的癌症分型方法、系统及存储介质 |
CN116741397B (zh) * | 2023-08-15 | 2023-11-03 | 数据空间研究院 | 基于多组学数据融合的癌症分型方法、系统及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111933212B (zh) | 2024-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111933212B (zh) | 一种基于机器学习的临床组学数据处理方法及装置 | |
Martorell-Marugán et al. | Deep learning in omics data analysis and precision medicine | |
Caudai et al. | AI applications in functional genomics | |
US10339464B2 (en) | Systems and methods for generating biomarker signatures with integrated bias correction and class prediction | |
EP2864919B1 (en) | Systems and methods for generating biomarker signatures with integrated dual ensemble and generalized simulated annealing techniques | |
Erfanian et al. | Deep learning applications in single-cell genomics and transcriptomics data analysis | |
CN113299346B (zh) | 分类模型训练和分类方法、装置、计算机设备和存储介质 | |
Kim et al. | Opening up the blackbox: an interpretable deep neural network-based classifier for cell-type specific enhancer predictions | |
Cheng et al. | DGCyTOF: Deep learning with graphic cluster visualization to predict cell types of single cell mass cytometry data | |
Stumpf et al. | Handbook of statistical systems biology | |
JP7568276B2 (ja) | 個体の形質情報を予測するためのシステムまたは方法 | |
Le et al. | Machine learning for cell type classification from single nucleus RNA sequencing data | |
CN114530248A (zh) | 确定心血管疾病潜在不适当处方的风险预警模型的方法 | |
US20140309122A1 (en) | Knowledge-driven sparse learning approach to identifying interpretable high-order feature interactions for system output prediction | |
Zhou et al. | scDLC: a deep learning framework to classify large sample single-cell RNA-seq data | |
Ghosh et al. | Machine Learning in Biological Sciences | |
Jong et al. | Selecting a classification function for class prediction with gene expression data | |
Borah et al. | A review on advancements in feature selection and feature extraction for high-dimensional NGS data analysis | |
CN117616505A (zh) | 用于使用指纹分析将化合物与生理状况相关联的系统和方法 | |
Jebril et al. | Artificial intelligent and machine learning methods in bioinformatics and medical informatics | |
Xiao | Network-based approaches for multi-omic data integration | |
Glaab | Analysing functional genomics data using novel ensemble, consensus and data fusion techniques | |
Zhou et al. | Computational systems bioinformatics and bioimaging for pathway analysis and drug screening | |
US20230116904A1 (en) | Selecting a cell line for an assay | |
Tsebesebe et al. | Predicting gene families from human DNA sequences using machine learning: a logistic regression approach |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |