CN113271849A - 结合类别不平衡集降采样与生存分析的疾病风险确定方法 - Google Patents
结合类别不平衡集降采样与生存分析的疾病风险确定方法 Download PDFInfo
- Publication number
- CN113271849A CN113271849A CN201980078901.3A CN201980078901A CN113271849A CN 113271849 A CN113271849 A CN 113271849A CN 201980078901 A CN201980078901 A CN 201980078901A CN 113271849 A CN113271849 A CN 113271849A
- Authority
- CN
- China
- Prior art keywords
- data
- category
- data set
- minority
- majority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004083 survival effect Effects 0.000 title claims abstract description 125
- 238000000034 method Methods 0.000 title claims abstract description 95
- 238000004458 analytical method Methods 0.000 title claims abstract description 63
- 238000005070 sampling Methods 0.000 title claims abstract description 38
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 title claims description 49
- 201000010099 disease Diseases 0.000 title claims description 47
- 238000002790 cross-validation Methods 0.000 claims abstract description 40
- 238000005259 measurement Methods 0.000 claims abstract description 29
- 230000002123 temporal effect Effects 0.000 claims abstract 6
- 230000035945 sensitivity Effects 0.000 claims description 47
- 108090000623 proteins and genes Proteins 0.000 claims description 13
- 102000004169 proteins and genes Human genes 0.000 claims description 11
- HVYWMOMLDIMFJA-DPAQBDIFSA-N cholesterol Chemical compound C1C=C2C[C@@H](O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2 HVYWMOMLDIMFJA-DPAQBDIFSA-N 0.000 claims description 6
- 238000010200 validation analysis Methods 0.000 claims description 4
- 230000036772 blood pressure Effects 0.000 claims description 3
- 235000012000 cholesterol Nutrition 0.000 claims description 3
- 230000007717 exclusion Effects 0.000 claims description 3
- 238000002705 metabolomic analysis Methods 0.000 claims description 3
- 230000001431 metabolomic effect Effects 0.000 claims description 3
- 238000007637 random forest analysis Methods 0.000 claims description 3
- 208000035475 disorder Diseases 0.000 claims description 2
- 208000010125 myocardial infarction Diseases 0.000 description 34
- 238000012502 risk assessment Methods 0.000 description 21
- 238000012360 testing method Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 239000000463 material Substances 0.000 description 10
- 208000029078 coronary artery disease Diseases 0.000 description 9
- 238000007477 logistic regression Methods 0.000 description 9
- 239000000523 sample Substances 0.000 description 9
- 108091023037 Aptamer Proteins 0.000 description 7
- 210000004369 blood Anatomy 0.000 description 7
- 239000008280 blood Substances 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000013459 approach Methods 0.000 description 6
- 239000012472 biological sample Substances 0.000 description 6
- 239000000090 biomarker Substances 0.000 description 6
- 238000011161 development Methods 0.000 description 6
- 210000001519 tissue Anatomy 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 230000007211 cardiovascular event Effects 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 201000011510 cancer Diseases 0.000 description 3
- 210000004027 cell Anatomy 0.000 description 3
- 238000013145 classification model Methods 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 239000012530 fluid Substances 0.000 description 3
- 210000000265 leukocyte Anatomy 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000003556 assay Methods 0.000 description 2
- 238000001574 biopsy Methods 0.000 description 2
- 210000005056 cell body Anatomy 0.000 description 2
- 206010012601 diabetes mellitus Diseases 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 238000000370 laser capture micro-dissection Methods 0.000 description 2
- 238000001001 laser micro-dissection Methods 0.000 description 2
- 210000004072 lung Anatomy 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 210000002966 serum Anatomy 0.000 description 2
- 206010003445 Ascites Diseases 0.000 description 1
- 206010036790 Productive cough Diseases 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 238000000692 Student's t-test Methods 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 150000001413 amino acids Chemical class 0.000 description 1
- 210000004381 amniotic fluid Anatomy 0.000 description 1
- 239000012491 analyte Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000013060 biological fluid Substances 0.000 description 1
- 230000031018 biological processes and functions Effects 0.000 description 1
- 210000000601 blood cell Anatomy 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 230000001680 brushing effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004113 cell culture Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 210000001175 cerebrospinal fluid Anatomy 0.000 description 1
- 239000003153 chemical reaction reagent Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 210000004351 coronary vessel Anatomy 0.000 description 1
- 210000002726 cyst fluid Anatomy 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 210000003743 erythrocyte Anatomy 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000012953 feeding on blood of other organism Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000000762 glandular Effects 0.000 description 1
- 208000019622 heart disease Diseases 0.000 description 1
- 238000013090 high-throughput technology Methods 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 230000002262 irrigation Effects 0.000 description 1
- 238000003973 irrigation Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 210000002751 lymph Anatomy 0.000 description 1
- 210000001165 lymph node Anatomy 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000001531 micro-dissection Methods 0.000 description 1
- 210000003097 mucus Anatomy 0.000 description 1
- 238000007837 multiplex assay Methods 0.000 description 1
- 210000002445 nipple Anatomy 0.000 description 1
- 108020004707 nucleic acids Proteins 0.000 description 1
- 102000039446 nucleic acids Human genes 0.000 description 1
- 150000007523 nucleic acids Chemical class 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 210000000496 pancreas Anatomy 0.000 description 1
- 238000009595 pap smear Methods 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 210000003819 peripheral blood mononuclear cell Anatomy 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 229920001184 polypeptide Polymers 0.000 description 1
- 108090000765 processed proteins & peptides Proteins 0.000 description 1
- 102000004196 processed proteins & peptides Human genes 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 210000003296 saliva Anatomy 0.000 description 1
- 230000028327 secretion Effects 0.000 description 1
- 210000000582 semen Anatomy 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 239000011343 solid material Substances 0.000 description 1
- 210000003802 sputum Anatomy 0.000 description 1
- 208000024794 sputum Diseases 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 210000001179 synovial fluid Anatomy 0.000 description 1
- 210000001138 tear Anatomy 0.000 description 1
- 210000001685 thyroid gland Anatomy 0.000 description 1
- 210000002700 urine Anatomy 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/021—Measuring pressure in heart or blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/117—Identification of persons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/14546—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring analytes not otherwise provided for, e.g. ions, cytochromes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4866—Evaluating metabolism
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4869—Determining body composition
- A61B5/4872—Body fat
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7221—Determining signal validity, reliability or quality
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Primary Health Care (AREA)
- Data Mining & Analysis (AREA)
- Epidemiology (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- Physiology (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Radiology & Medical Imaging (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Cardiology (AREA)
- Mathematical Physics (AREA)
- General Physics & Mathematics (AREA)
- Vascular Medicine (AREA)
- Evolutionary Computation (AREA)
- Fuzzy Systems (AREA)
- Obesity (AREA)
- Optics & Photonics (AREA)
- Algebra (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
Abstract
一种用于利用生存分析对类别不平衡集进行降采样的方法,其包括:获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;对所述类别不平衡数据集进行降采样,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;其中所述观察结果包括在特定时间值处的事件或无事件。
Description
相关申请的交叉引用
本申请要求2018年11月29日提交的美国临时专利申请号62/773,028和2018年12月21日提交的美国临时专利申请号62/783,733的优先权,所述临时申请以引用的方式整体并入本文。
技术领域
本公开总体上涉及疾病风险确定的领域,并且更具体地,涉及用于处理电子数据以确定疾病风险的系统和方法。
背景技术
用于识别与各种疾病相关病状或事件(例如心血管事件、糖尿病诊断、各种癌症类型等)的风险相关联的生物标志物的方法已得到改进,这主要是由于发现了高通量技术,诸如基因测序、转录组学、蛋白质组学和代谢组学。但是,这些技术也因提供表示复杂生物过程的高维数据而使事情复杂化,这可能使提取有意义的生物标志物标签变得困难。
当主要目标是正确识别在特定时间段内将经历疾病相关病状或事件的个体时,可以加强通常将仅使用分类方法的分析,实现方式是将分析构造为一种特殊类型的分类问题,它结合分类工具合并了两种生存模型方法。但是,生存分析可能会遭受经历和未经历疾病相关病状或事件的患者的数量之间的不平衡。众所周知,预测分类器通常在不平衡数据上表现不佳,因为模型被“尽可能频繁地”训练为准确的。之所以会发生这种效果,是因为较大的多数类别驱动为模型选择的特征,因为少数类别经常被错误地分类,而多数类别仍然被准确地预测。但是,敏感性和特异性将变得不平衡,使得一者相对于另一者最大化,这取决于哪个组有更多的观察结果。在对健康结果进行建模时,在一个人群中患病率较低是很常见的,这个人群形成少数类别。在这种情况下,特异性将以牺牲灵敏度为代价而最大化,而当目标是要识别尽可能多的面临病状或事件发展的风险的个体时,这将是一个问题。
因此,仍然需要替代的方法来改进识别针对特定疾病或病状的分子标签或生物标志物的方式。本公开通过提供用于改进生物标志物发现的方法来满足这样的需求。
发明内容
根据本公开的一些方面,所公开的系统和方法涉及对包括时间值的类别不平衡数据集的多数类别(即,具有更多观察结果的类别)进行降采样,以便改进生存分析的敏感性和特异性。降采样的目的是“偏置”分类器,以便它对已诊断和未诊断的个体给予同等关注,以平衡模型的敏感性和特异性。
在一个实施方案中,公开了一种方法,所述方法包括:获取类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,所述观察结果包括在特定时间值处的事件或无事件。
根据本公开的各方面,所述生存模型的曲线下面积(AUC)、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
在其他示例中,类别不平衡数据集是生存数据集且/或事件是受试者的疾病、病症或病状。在另外的示例中,生存分析选自由cox比例风险分析、随机森林分析、加速失效时间分析及其任何组合组成的组,包括诸如惩罚回归技术的机器学习适应。方法还可包括弹性网罚分。
在其他实施方案中,交叉验证是至少2折、3折、4折、5折、6折、7折、8折、9折、10折、11折、12折、13折、14折、15折、16折、17折、18折、19折、或20折交叉验证。在其他实施方案中,生存模型包括5至1,000个特征,其中每个特征选自由蛋白测量结果、临床因素及其组合组成的组。临床因素选自由年龄、体重、血压、身高、BMI、胆固醇、性别及其组合组成的组。
在另外的实施方案中,临床测量结果选自蛋白质组学测量结果、基因组测量结果、转录组测量结果、代谢组学测量及其组合。此外,交叉验证选自k折、广义蒙特卡洛、排除p交叉验证或自举方法。
根据本公开的各方面,多数数据类别是类别不平衡数据集的95%并且少数数据类别是类别不平衡数据集的5%,或者多数数据类别是类别不平衡数据集的90%并且少数数据类别是类别不平衡数据集的10%,或者多数数据类别是类别不平衡数据集的85%并且少数数据类别是类别不平衡数据集的15%,或者多数数据类别是类别不平衡数据集的80%并且少数数据类别是类别不平衡数据集的20%,或者多数数据类别是类别不平衡数据集的75%并且少数数据类别是类别不平衡数据集的25%,或者多数数据类别是类别不平衡数据集的70%并且少数数据类别是类别不平衡数据集的30%,或者多数数据类别是类别不平衡数据集的65%并且少数数据类别是类别不平衡数据集的35%,或者多数数据类别是类别不平衡数据集的60%并且少数数据类别是类别不平衡数据集的40%。
根据另一个实施方案,公开了一种方法,所述方法包括:对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,观察结果包括在特定时间值处的事件或无事件;其中,类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个蛋白测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
在本公开的示例中,AUC是基于确定受试者是否将在指定时间点以前发生事件来计算。
还公开了一种用于确定疾病风险的计算机实现的方法,所述方法包括:获取类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,所述观察结果包括在特定时间值处的事件或无事件;并且降采样及交叉验证步骤是利用计算机系统来计算。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
还公开了一种可由计算机读取的程序存储装置,所述程序存储装置有形地体现指令程序,所述指令程序可由计算机执行以进行用于确定疾病风险的方法的方法步骤,所述方法包括:获取类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,所述观察结果包括在特定时间值处的事件或无事件。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
还公开了一种用于确定疾病风险的计算系统,所述计算系统包括:用于存储编程指令的存储器,以及经配置来执行编程指令以进行操作的处理器,所述操作包括:获取类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,所述观察结果包括在特定时间值处的事件或无事件。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
还公开了一种非暂时性计算机可读介质,其中所述计算机可读介质上存储有指令,所述指令可由处理器执行以进行以下操作:获取类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;其中,所述观察结果包括在特定时间值处的事件或无事件。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
还公开了一种用于确定疾病风险的计算机实现的方法,所述方法包括:利用计算机接收类别不平衡数据集,其中类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的生物数据包括观察结果、时间值和多个临床测量结果,并且其中生物数据被归类为多数数据类别或少数数据类别的一部分,其中多数数据类别具有数量比少数数据类别更多的观察结果;利用计算机对类别不平衡数据集进行降采样以生成降采样后的数据集,其中降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及利用计算机来利用生存分析对降采样后的数据集进行交叉验证以生成生存模型;并且其中所述观察结果包括在特定时间值处的事件或无事件。
根据本公开的各方面,所述生存模型的AUC、敏感性、特异性和/或C指数比其中在生存分析之前未对类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
附图说明
图1示出其中可实现本公开的方法、系统和其他方面的网络化计算环境的示例。
图2是根据本公开的用于临床数据获取和处理的疾病风险分析平台的高层架构图。
图3示出HUNT3 CHD亚群中的心肌梗死(MI)的卡普兰-迈耶生存曲线。
图4示出测试集上的MI的卡普兰-迈耶生存曲线,预测事件使所述曲线分层。对于每种方法,使用通过交叉验证来识别的阈值将测试集分为高风险和平均风险的个体。然后针对两个组计算两组卡普兰-迈耶曲线。在逻辑回归模型结果中,每个人都被预测为低风险,因此仅产生一条生存曲线。
图5示出测试集上的MI的卡普兰-迈耶生存曲线,其使用降采样后的Cox弹性网模型来预测小于或等于4年的MI。研究了将个体归类为高风险的不同阈值。
具体实施方式
除非另外注明,否则技术术语是根据常规用法使用。分子生物学中常见术语的定义可见于Benjamin Lewin,Genes V,Oxford University Press出版,1994(ISBN 0-19-854287-9);Kendrew等人(编辑),The Encyclopedia of Molecular Biology,BlackwellScience Ltd.出版,1994(ISBN 0-632-02182-9);以及Robert A.Meyers(编辑),MolecularBiology and Biotechnology:a Comprehensive Desk Reference,VCH Publishers,Inc.出版,1995(ISBN 1-56081-569-8)。除非另外说明,否则本文所用的所有技术和科技术语均具有如本公开内容所属领域中的普通技术人员通常所理解的相同含义。除非上下文另外清楚地指示,否则单数术语“一个/一种(a/an)”和“所述(the)”包括多个提及物。“包括A或B”是指包括A、或B、或A和B。应进一步理解,针对核酸或多肽给出的所有碱基大小或氨基酸大小以及所有分子量或分子质量值均为近似值,并且被提供用于描述。
此外,本文所提供的范围应理解为关于所述范围内的所有值的速记。例如,1至50的范围应理解为包括来自由1、2、3、4、5、6、7、8、9、10、11、12、13、14、15、16、17、18、19、20、21、22、23、24、25、26、27、28、29、30、31、32、33、34、35、36、37、38、39、40、41、42、43、44、45、46、47、48、49或50组成的组的任何数字、数字组合或子范围(以及其分数,除非上下文另外清楚地规定)。除非另外指示,否则任何浓度范围、百分率范围、比率范围或整数范围均应理解为包括在所陈述范围内的任何整数的值,并且适当时包括其分数(诸如整数的十分之一和百分之一)。而且,除非另外指示,否则本文中关于任何物理特征(诸如聚合物亚基、大小或厚度)所陈述的任何数字范围均应理解为包括在所陈述范围内的任何整数。除非另外指示,否则如本文所用,“约”或“基本上由……组成”意指所指示的范围、值或结构的±20%。如本文所用,术语“包括”和”包含”为开放式并且同义地使用。
尽管与本文所述的那些类似或相等的方法和材料可在本公开的实践或测试中使用,但下文描述合适的方法和材料。本文提到的所有出版物、专利申请、专利以及其他参考文献均以引用的方式整体并入。在有冲突的情况下,则将以本说明书(包括术语的解释)为准。另外,所述材料、方法和示例仅为说明性的并且不意图为限制性的。
如本文所用,“SOMA适配体”或慢解离速率修饰适配体是指具有改进的解离速率特性的适配体。SOMA适配体可使用标题为“Method for Generating Aptamers withImproved Off-Rates”的美国专利号7,947,447中所述的改进的SELEX方法产生。
术语“生物样品”、“样品”和“测试样品”在本文中互换地使用,以指代从个体获得或以其他方式得到的任何材料、生物流体、组织或细胞。这包括血液(包括全血、白细胞、外周血单核细胞、血沉棕黄层、血浆以及血清)、痰、眼泪、粘液、鼻洗液、鼻抽吸物、呼吸、尿、精液、唾液、腹膜冲洗物、腹水、囊液、脑膜液、羊水、腺液、淋巴液、乳头抽吸物、支气管抽吸物(例如,支气管肺泡灌洗液)、支气管刷检物、滑液、关节抽吸物、器官分泌物、细胞、细胞提取物以及脑脊髓液。这还包括所有前述项的实验分离的部分。例如,可将血液样品分级成血清、血浆,或分级成含有诸如红血细胞或白血细胞(white blood cell/leukocyte)的特定类型的血细胞的部分。在一些方面,样品可以是来自个体的样品的组合,诸如组织和流体样品的组合。术语“生物样品”还包括含有均质化固体材料的材料,诸如来自例如粪便样品、组织样品或组织活检的材料。术语“生物样品”还包括从组织培养或细胞培养得到的材料。可采用任何用于获得生物样品的合适方法;示例性方法包括例如静脉切开术、拭子(例如,口腔拭子)以及细针抽吸活检程序。易于进行细针抽吸的示例性组织包括淋巴结、肺、肺洗液、BAL(支气管肺泡灌洗液)、甲状腺、乳房、胰腺和肝脏。还可以例如通过显微解剖(例如,激光捕获显微解剖(LCM)或激光显微解剖(LMD))、膀胱冲洗、涂片(例如,PAP涂片)或导管灌洗来收集样品。从个体获得或得到的“生物样品”包括在从个体获得之后已经以任何合适的方式进行处理的任何这样的样品。
如本文所用,“生物数据”是指从生物样品得到的任何数据。这样的生物数据包括但不限于利用特定针对蛋白质靶标的适配体、任选地在基于适配体的多重测定中收集的蛋白质组学数据。
如本文所用,“临床因素”是指可能与疾病病状或事件的风险增大相关联的生理属性。临床因素包括但不限于年龄、体重、血压、身高、BMI、胆固醇和性别。
如本文所用,“类别不平衡”是指数据集的一个特性,它描述了当所述集的数据被分类为两个或更多个类别时,这两个或更多个类别具有基本不相等数量的观察结果。
如本文所用,“交叉验证”是指用于评估用来建立模型的数据上的模型性能以及统计分析的结果将如何推广到独立数据集的任何模型建立和验证技术,包括但不限于k折交叉验证、蒙特卡洛交叉验证和排除p验证(其中p可以是1至样本总数-1)。
如本文所用,“降采样”是指对具有更多观察结果的类别(即,多数数据类别)的数据取子集,以减少类别不平衡。
如本文所用,“相等”或“基本相等”是指在观察结果数量上具有小于10%的差异的比较类别之间的差异。
如本文所用,“特征”是指数据集中受试者的可测量性质或特性。特征包括但不限于蛋白测量结果和临床因素。
如本文所用,“多数数据类别”是指具有两个类别的类别不平衡数据集中具有数量更多的观察结果的那个类别。
如本文所用,“少数数据类别”是指具有两个类别的类别不平衡数据集中具有数量更少的观察结果的那个类别。
如本文所用,“生存分析”是指事件发生时间数据的任何建模。生存分析方法可用于任何事件发生时间(time-to-event)结果,例如MI发生时间、糖尿病发病、各种形式的癌症的发病等。生存分析包括但不限于Cox比例风险分析、随机森林分析和加速失效时间分析。
如本文所用,“生存数据集”是指包括时间值和事件状态值两者的任何数据集,所述时间值和事件状态值指示所关注事件是否在观察受试者的时间段内发生。
在生存分析中,类别不平衡造成的主要问题是:在一定的时间范围内,没有疾病(或事件)的个体数量超过患有疾病(或事件)的个体数量。这种不平衡可能会导致对疾病风险更高的个体的风险预测不准确。降采样通过平衡少数类别和多数类别中的个体数量来缓解这个问题,从而改进与少数类别中的个体相关的特征的检测和选择以及它们对疾病或事件发生风险的估计影响。
已经证明对用于生存分析的类别不平衡数据集进行降采样可以改进AUC的一种情况是使用由蛋白质组学测定生成的蛋白质组学数据,所述蛋白质组学数据用于识别与稳定型冠心病(CHD)患者的心血管事件风险相关联的循环蛋白生物标志物。所得模型提供了相比现有临床风险工具有所改进的能力,并且在心血管事件的复合终点中具有广泛的适用性和可推广性。
本公开描述了用于预测稳定型CHD患者中的继发性MI的针对性模型。蛋白质组学数据用于识别稳定型CHD患者中的在抽血后四年内可能经历继发性MI的患者。除了蛋白质组学信号外,数据还包含有关在观察过程中是否发生了特定心血管事件的信息,以及发生以下情况的时间的长度:a)事件或b)由于其他因素而退出研究。这些事件发生时间数据使问题非常适合于生存分析技术。
当主要目标是正确识别将在4年内发生MI事件的个体时,可将分析重新构造为一种分类问题,其中如果事件在4年之前发生,则个体为“阳性”类别,而如果个体留在研究中超过4年的时间范围而没有MI,则将个体标记为“阴性”类别。生存分析工具的使用改进了模型的预测准确性(与标准分类模型相比),因为生存模型通过将MI发生时间合并到分类器的开发中来“使用所有信息”。这种重新构造还允许使用标准分类指标(诸如AUC和混淆矩阵)来评估模型性能。这种评估生存模型的方法不是传统方法,但是特定于事件的分类在临床环境中提供了许多好处。在广泛的受众中更容易理解将患者标记为“阳性”或“阴性”(例如,与风险比或概率相比)。对预后测试的这种更好的理解使临床医生可以提供更精确、更有针对性的医疗管理。但是,与标准分类建模一样,这种生存分析方法可能会遭受经历或未经历事件的患者的不平衡。
例如,在实施例1中所分析的亚群中,只有8.1%的个体在4年内发生继发性MI,但数量超过八倍的参与者(66.9%)无事件生存超过四年。降采样的目的是“偏置”分类器,以便它对已诊断和未诊断的个体给予同等关注,以平衡模型的敏感性和特异性。重采样技术已应用于各种机器学习方法中,但是,在使用生存建模技术的机器学习中,类别不平衡是一个尚未探讨的主题。
在实施例1中,将降采样与Cox比例风险弹性网回归模型相结合,并且评估了对4初次抽血后4年内发生MI事件的预测。
从实施例1明显看出,通过在建模过程中对数据进行降采样,可改进生存分析(例如Cox比例风险弹性网模型(即“Coxnet”模型))的性能。本公开有效地证明降采样后的Coxnet模型优于标准Coxnet模型、降采样后的弹性网逻辑回归模型和标准弹性网逻辑回归模型。
除了降采样外,还有其他用于处理类别不平衡的方法也可以合并到生存模型中。例如,可结合传统的生存分析以及扩展杂的机器学习方法(诸如随机生存森林)来考虑案例加权、简单的过采样或更复杂的过采样技术(诸如合成少数类过采样技术(SMOTE))。
尽管实施例1详细描述了在预测指定时间范围内的MI事件的情况下在生存分析中结合降采样,但是本文公开的方法可应用于对选定时间范围内的疾病病状或疾病相关事件风险的任何预测。
图1是根据本公开的各方面的网络化计算环境100的框图,所述网络化计算环境100用于例如通过对类别不平衡数据进行降采样来处理电子数据以确定疾病风险。如图1所示,网络化计算环境100可包括疾病风险分析平台102,所述疾病风险分析平台102包括服务器系统104和电子数据库106。服务器系统104可存储并执行用于通过诸如因特网的电子网络108来使用的疾病风险分析平台102的软件模块、算法或其他子系统。用户可通过诸如计算装置等用户装置110来通过电子网络108访问疾病风险分析平台102。用户装置110可允许用户显示网络浏览器以用于通过电子网络108访问由服务器系统104托管的疾病风险分析平台102。用户装置110可以是用于访问网页的任何类型的装置,诸如个人计算装置、移动计算装置等。源装置112可通过电子网络108向疾病风险分析平台102提供数据和/或从疾病风险分析平台102接收数据。源装置112可以是用于访问网页的任何类型的装置,诸如个人计算装置、移动计算装置等。
仅作为示例提供了图1。其他示例是可能的,并且可能不同于图1的网络化计算环境100。另外,作为示例提供了在网络化计算环境100中示出的装置和网络的数量和布置。实际上,网络化计算环境100中可能有附加的装置、更少的装置和/或网络、不同的装置和/或网络、或者与网络化计算环境100中示出的那些布置不同的装置和/或网络。此外,图1中示出的两个或更多个装置可在单个装置内实现,或者图1中示出的单个装置可实现为多个分布式装置。另外或替代地,网络化计算环境100的一个或多个用户装置和/或服务器系统可执行服务器系统104和/或疾病风险分析平台102的一个或多个功能。
图2描绘了用于处理电子数据以确定疾病风险的示例性计算机架构200。具体地,图2描绘了根据本公开的一个或多个实施方案的示例性计算机架构200,所述计算机架构200被配置用于将类别不平衡集的降采样与生存分析相结合。如图2的计算机架构200中所示,疾病风险分析平台102的服务器系统104可包括数据获取模块212、降采样模块214和交叉验证模块216。疾病风险分析平台102还可包括一个或多个本地或远程访问的数据库或数据存储。例如,如图2所示,疾病风险分析平台102可包括类别不平衡数据集206,所述类别不平衡数据集206包括多数类别数据202和少数类别数据204。疾病风险分析平台102还可包括降采样后的数据集208和生存模型210。应当理解,数据获取模块212、降采样模块214、交叉验证模块216、类别不平衡数据集206、降采样后的数据集208和生存模型210中的一个或多个可使其功能和内容中的一些或全部在本地、远程或同时在本地和远程进行存储或执行,并且其功能可跨平台的其他部件进行组合或分布。
在示例性计算机架构200的一个实施方案中,数据获取模块212可从用户装置110或源装置112接收包括多数类别数据202和少数类别数据204的类别不平衡数据集206。这个类别不平衡数据集206可由降采样模块214处理以产生降采样后的数据集208。降采样后的数据集208可由交叉验证模块216处理以产生生存模型210。这个生存模型210然后可通过电子网络108发送到用户装置100和/或源装置112。
如果使用可编程逻辑,则这样的逻辑可在可商购获得的处理平台或专用装置上执行。本领域的普通技术人员可理解,可利用各种计算机系统配置来实践所公开的主题的实施方案,这些计算机系统配置包括多核多处理器系统、小型计算机、大型计算机、与分布式功能链接或集群的计算机,以及几乎可嵌入到任何装置中的普适计算机或微型计算机。
例如,至少一个处理器装置和存储器可用于实现上述实施方案。处理器装置可以是单个处理器、多个处理器或其组合。处理器装置可具有一个或多个处理器“核心”。
如上文在图1和图2的示例中所描述的的本公开的各种实施方案可使用处理器装置来实现。在阅读此描述之后,对相关领域的技术人员来说变得显而易见的是,如何使用其他计算机系统和/或计算机架构来实现本公开的实施方案。尽管可将操作描述为顺序过程,但这些操作中的一些实际上可并行地、同时和/或在分布式环境中执行,并且程序代码在本地或远程存储以供单处理器或多处理器机器访问。另外,在一些实施方案中,可重新安排操作的顺序而不背离所公开的主题的精神。
应当理解,疾病风险分析平台102和/或用于访问疾病风险分析平台102的任何装置(诸如用户装置110或源装置112)可包括中央处理单元(CPU)。这样的CPU可以是任何类型的处理器装置,包括例如任何类型的专用或通用微处理器装置。如相关领域的技术人员将理解的,CPU也可以是多核/多处理器系统中的单个处理器,这样的系统单独操作或在计算装置的群集中操作,这些计算装置在集群或服务器场中操作。CPU可连接到数据通信基础结构,例如总线、消息队列、网络或多核消息传递方案。
还应当理解,疾病风险分析平台102和/或用于访问疾病风险分析平台102的任何装置(诸如用户装置110或源装置112)还可包括主存储器,例如随机存取存储器(RAM),并且还可包括辅助存储器。辅助存储器,例如只读存储器(ROM),可以是例如硬盘驱动器或可移动存储驱动器。这样的可移动存储驱动器可包括例如软盘驱动器、磁带驱动器、光盘驱动器、闪速存储器等。本示例中的可移动存储驱动器以众所周知的方式读取和/或写入可移动存储单元。可移动存储单元可包括由可移动存储驱动器读取和写入的软盘、磁带、光盘等。如相关领域的技术人员将理解的,这样的可移动存储单元通常包括其中存储有计算机软件和/或数据的计算机可用存储介质。
在替代实现方式中,辅助存储器可包括用于允许将计算机程序或其他指令加载到装置中的其他类似装置。这样的装置的示例可包括:程序盒和盒式接口(诸如在视频游戏装置中所发现的)、可移动存储器芯片(诸如EPROM或PROM)和相关联的插槽,以及允许软件和数据从可移动存储单元传输到装置的其他可移动存储单元和接口。
还应当理解,疾病风险分析平台102和/或用于访问疾病风险分析平台102的任何装置(诸如用户装置110或源装置112)还可包括通信接口(“COM”)。通信接口允许在装置和外部装置之间传输软件和数据。通信接口可包括调制解调器、网络接口(诸如以太网卡)、通信端口、PCMCIA插槽和卡等。通过通信接口传输的软件和数据可以呈信号的格式,所述信号可以是电子信号、电磁信号、光信号或能够由通信接口接收的其他信号。这些信号可通过装置的通信路径被提供给通信接口,所述通信路径可使用例如电线或电缆、光纤、电话线、蜂窝电话链路、RF链路或其他通信信道来实现。
这样的设备的硬件元件、操作系统和编程语言本质上是常规的,并且假设本领域技术人员对此足够熟悉。用于访问疾病风险分析平台的装置还可包括输入和输出端口,以与输入和输出装置(诸如键盘、鼠标、触摸屏、监视器、显示器等)连接。当然,各种服务器功能可在许多类似平台上以分布式方式实现,以便分布处理负载。替代地,服务器可通过一个计算机硬件平台的适当编程来实现。
通过示例并参考附图来详细描述本文公开的系统、设备、装置和方法。本文讨论的示例仅是示例,并且被提供以帮助解释本文描述的设备、装置、系统和方法。对于所述设备、装置、系统或方法中的任何一个的任何特定实现方式,除非特别指定为强制性的,否则附图中示出或以下讨论的特征或部件均不应被视为强制性的。为了易于阅读和清楚起见,可仅结合特定附图来描述某些部件、模块或方法。在本公开中,对特定技术、布置等的任何标识与所呈现的特定示例有关,或者仅仅是对这种技术、布置等的一般描述。除非明确这样指定,否则对特定细节或示例的标识不意图且不应当被理解为强制性或限制性的。未能具体描述部件的组合或子组合的任何失败不应被理解为指示任何组合或子组合是不可能的。将理解的是,可对所公开和描述的示例、布置、配置、部件、元件、设备、装置、系统、方法等进行修改,并且这些修改对于特定应用可能是所希望的。同样,对于所描述的任何方法,无论是否结合流程图描述了所述方法,都应理解,除非上下文另外指定或要求,否则在执行方法时进行的步骤的任何显式或隐式排序都不意味着这些步骤必须按所呈现的顺序进行,而是可按不同的顺序或并行地进行。
在本公开全篇中,对部件或模块的引用通常是指可在逻辑上被分组在一起以进行一个功能或一组相关功能的项目。部件和模块可以用软件、硬件或软件和硬件的组合来实现。术语“软件”被广泛地使用以不仅包括可执行代码,例如机器可执行或机器可解释的指令,而且包括以任何合适的电子格式存储的数据结构、数据存储和计算指令,包括固件和嵌入式软件。术语“信息”和“数据”被广泛地使用,并且包括:各种各样的电子信息,包括可执行代码;诸如文本、视频数据和音频数据之类的内容;以及各种代码或标志。当上下文允许时,术语“信息”、“数据”和“内容”有时可互换使用。
实施例
提出以下实施例以便更全面地说明本发明的一些实施方案。然而,它们决不应被理解为限制本发明的广泛范围。本领域的普通技术人员可容易地采用此发现的基本原理来设计多种化合物而不背离本发明的精神。
实施例1
本实施例提供的描述是将降采样与Cox比例风险弹性网回归模型相结合,以评估对初次抽血后4年内发生心肌梗死(MI)事件的预测,这可以在图2的示例性数据风险分析平台内完成。
本实施例的目的至少有两方面:1)选择和识别可预测少数类别和多数类别两者的特征,以及2)推导估计效应大小,使得可很好地预测少数类别的风险。作为对比,检验了逻辑回归弹性网模型(有和没有降采样)的预测能力以及没有降采样的Cox弹性网模型的预测能力。
材料和方法-数据集
分析中使用的样品是来自HUNT3研究的亚群,HUNT3研究是来自挪威的一项前瞻性人群研究,它包括从研究参与者身上抽取的血液样品和后续的健康信息。CHD亚群先前已有描述(Peter Ganz等人的Development and validation of a protein-based risk scorefor cardiovascular outcomes among patients with stable coronary heartdisease.Jama,315(23):2532–2541,2016),入选标准旨在通过超过六个月的既往、狭窄、诱导性缺血或既往冠状动脉血管重建术的MI史来证明存在但稳定的CHD。使用测定(SomaLogic,Inc;Boulder,CO USA)对血浆样品进行测定,所述测定使用慢解离速率修饰适配体试剂来测量相对蛋白质丰度。V4测定可测量5,220种蛋白质分析物,并且是完善的蛋白质生物标志物发现平台。
在亚群中,有8.1%的患者在4年内经历了继发性MI(表1)。图3中描绘了CHD亚群中的MI的卡普兰-迈耶生存曲线。卡普兰-迈耶曲线是一种经验性的非参数方法,用于检验无事件(例如,无MI)发生的概率如何随时间变化。对于HUNT3数据集的CHD亚群中的MI,无事件发生的概率逐渐减小。表1示出CHD亚群中的MI发生率和人口统计学信息。
表1-稳定型CHD亚群的人口统计学特性
材料和方法–Cox弹性网模型
生存数据由结果(即,事件发生时间)来表征,它适应广泛的主题,包括MI事件、因癌症死亡、因疾病再次住院、机器部件故障等。时间相关数据的本质是,如果事件发生在研究期限之外,则对于某些个体将不会观察到这个事件。这些个体被“删失”,这可能由于多种原因而发生(例如,非MI相关原因导致的死亡、个体退出研究、MI在研究窗口结束后发生)。尽管存在多种类型的删失,但数据含有经过右删失的个体,这意味着对于没有发生MI事件的患者,假设它在最后一个观察到的时间点之后已经发生。
生存数据通过生存函数S(.)来表征,生存函数是无事件发生的概率并且在时间点t计算为
其中f(.)是MI发生时间的概率密度函数。与生存函数一起,也可以识别和表征明显增大或减小事件发生时间的特征。尽管存在许多生存分析技术,但最常见的一种是Cox比例风险模型。Cox模型表示为
λ(t|Xi,β)=λ0(t)exp{X′iβ}.
这里,λ(t|.)是风险函数(或“立即失效的风险”函数)并且定义为λ(t|.)=f(t|.)/S(t|.)。此外,Xi是第i个个体的特征测量结果的p x 1向量,而β是特征效应的p x 1向量。Cox模型的主要目标是估计特征对个体的事件发生风险的影响。基线风险率λ0(t)在估计例程中被视为多余参数并且因此不予检验。
由于数据集中的特征数量大于样品大小,因此可将弹性网罚分合并到我们的模型中,这是一种形式的惩罚回归,它结合了最小绝对收缩和选择算子(即,lasso)和岭回归或Tikhonov正则化。这种工具通过lasso例程进行特征选择,同时允许相关特征一起保留在模型中,使得p可大于n。在标准回归模型中,通常通过使响应Yi和预测器X’iβ之间的差最小化来估计特征效应β。但是,通过弹性网正则化,估计的特征效应被计算为
其中λ1是与lasso回归相关联的L1罚分,并且λ2是与岭回归相关联的L2罚分。
使用通过在CRAN-R中可获得的glmnet包实现的Cox弹性网模型,将生存分析与弹性网罚分相结合。Cox弹性网模型将标准Cox比例风险模型与弹性网惩罚合并在一起,从而允许使用生存技术来开发分类器,以及惩罚回归的好处。
为了减轻类别不平衡,将Cox比例风险弹性网模型与降采样技术相结合。这种方法允许识别能够最好地预测个体是否处于在4年内发生MI事件的“高风险”的特征,其中“高风险”分类器是使用通过交叉验证识别的风险比阈值计算出的。此外,这种技术估计特征效应的方式允许准确预测高风险个体的特征所具有的“权重”(即,β估计)与使用完整人群得到的特征不同。
为了进行比较,两个弹性网逻辑回归模型(有或没有降采样,可通过R中的插入符号包来实现),以及没有合并降采样技术的Cox弹性网模型。适当时,使用AUC、敏感性、特异性和C指数对模型进行比较。
在RStudio服务器版本1.1.453中使用R版本3.4.4进行分析。
材料和方法–数据取子集
将数据集分为训练集(数据的80%)和测试集(20%)。将训练集用于模型构建,并且在测试集上评估最终模型。用于Cox弹性网模型的测试集上的预测阈值被计算为交叉验证期间每一折所生成的阈值的平均值。在实现惩罚回归模型之前,使用训练集进行单变量过滤。计算每个分析物的学生t检验以评估在研究窗口中有和没有MI事件的个体之间的平均值在统计学上是否明显不同。在证明所述技术的效用时,为了一致,在模型开发中包括了前100种分析物(按错误发现率值排名)。
结果
将降采样后的Cox弹性网模型的结果与两个逻辑回归弹性网模型(降采样后的和未降采样的)以及没有使用降采样的Cox弹性网模型进行比较。为了简化表示,将Cox弹性网模型称为“Coxnet”模型,并且将弹性网逻辑回归模型称为“LRnet”模型。对于降采样后的模型,在前面加上“DS”(例如,实现降采样的Cox弹性网模型是“DS-Coxnet”)。
在各种模型中,对训练集使用5次重复的5折交叉验证,以在每种模型类型中选择最佳模型。通过最大AUC选择最佳模型。特征选择、估计效应和分类阈值在模型之间可以有所不同。在交叉验证后,在测试数据集上评估每个类别中的顶部模型的预测能力。
在模型开发过程中,使用原始数据创建了Coxnet模型,但在4年的时间点处使用AUC指标对其进行优化以用于分类。这意味着建立了标准生存模型,但是使用二进制4年标记分类器(四年前有/无MI)来计算AUC并优化模型。4年结果用于开发逻辑回归模型,这些模型也使用AUC进行了优化。为了使用标准生存模型指标进行模型比较,计算了生存模型的C指数。
模型结果和比较
交叉验证结果显示,两种Coxnet模型都大大优于标准LRnet模型(参见表2)。这种结果是意料之中的,因为生存分析方法使用事件发生时间信息作为特征选择和模型开发的一部分。更令人信服的结果是,在所有分类指标(AUC、敏感性、特异性)上,DS-Coxnet模型均优于DS-LRnet模型和标准Coxnet模型两者。此外,DS-Coxnet模型具有比标准Coxnet模型更高的C指数,这指示了降采样后的模型更好地预测MI发生时间的排序。
表2-交叉验证后的训练集结果
在通过交叉验证进行模型优化后,在测试集上评估顶部模型的预测能力,包括基于通过4年标记将个体正确地预测为有发生MI的“高风险”来检验敏感性和特异性。表3中示出测试集上所有模型的性能指标。DS-Coxnet模型是唯一表现优于“随机机会”且AUC为0.63的模型。此外,与DS-LRnet模型和标准Coxnet模型两者相比,DS-Coxnet模型具有最高的敏感性和特异性(不出所料,LRnet模型在测试数据集上的表现与在训练数据集上的表现一样差)。
表3-测试集结果
模型 | 阈值 | AUC | 敏感性 | 特异性 | C指数 |
降采样后的Cox模型 | 0.46 | 0.63 | 0.46 | 0.80 | 0.74 |
Cox模型 | -0.004 | 0.49 | 0.38 | 0.56 | 0.49 |
降采样后的逻辑回归 | 0.50 | 0.54 | 0.15 | 0.72 | - |
逻辑回归 | 0.50 | 0.49 | 0 | 1 | - |
为了进一步证明降采样后的生存模型方法的好处,对于每个模型,在测试集上生成卡普兰-迈耶曲线,使用通过交叉验证识别的特定于模型的阈值来预测个体是否为高风险会使所述曲线分层(参见图4)。为了进行这种比较,将标准Coxnet模型和DS-Coxnet模型的阈值计算为交叉验证迭代中的平均阈值。这种视觉检查方法使用DS-Coxnet模型的阈值显示了高风险组和平均风险组之间的非常明确的分离。对于其他模型,这种分离的定义不是很明确。
数字和模型评估指标的组合证据(表3)提出了一个令人信服的案例,即降采样后的生存模型方法有益于识别处于四年内发生MI的高风险的个体。
降采样后的Coxnet模型的阈值研究
使用DS-Coxnet模型对测试集进行预测所使用的阈值是交叉验证迭代中的所有阈值的平均值。尽管此阈值导致比其他模型更高的敏感性和特异性,但这些值仍然相当不平衡。一个重要的考虑因素是敏感性/特异性的权衡是否可通过操纵预测阈值进一步得到平衡。
与分类模型一样,阈值可被调整以找到在测试集上使敏感性最大、使特异性最大或使敏感性和特异性之间的差异最小的值。表4显示了测试集上不同阈值的性能指标,并且图5绘制了每种情况的卡普兰-迈耶曲线。如表4中所示,改变预测阈值会导致敏感性高于60%,而AUC不会减小。但是,在使用平均阈值的情况下,卡普兰-迈耶曲线(图5)显示了高风险个体和平均风险个体之间的最宽分离。
表4-使用降采样后的Cox模型在测试集上应用不同的阈值
实验 | 阈值 | AUC | 敏感性 | 特异性 |
平均阈值 | 0.46 | 0.63 | 0.46 | 0.80 |
平衡的敏感性与特异性 | 0.165 | 0.63 | 0.62 | 0.64 |
使敏感性最大 | 0.165 | 0.63 | 0.62 | 0.64 |
使特异性最大 | 0.712 | 0.58 | 0.31 | 0.85 |
尽管敏感性和特异性仍相对低于通常所需的水平(即,70%或更高),但此结果可能是由于以下事实:测试集中只有13位受试者在四年前发生了MI事件,这限制了模型的开发。但是,分析证明了可采用与分类模型相同的方式来调整用于对生存模型中的风险水平进行分类的阈值。
意图仅将说明书和实施例视为示例性的,而本公开的真实范围和精神由以下权利要求书指示。
Claims (32)
1.一种方法,其包括:
a)获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中所述观察结果包括在特定时间值处的事件或无事件。
2.如权利要求1所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
3.如权利要求1所述的方法,其中所述类别不平衡数据集是生存数据集。
4.如权利要求1所述的方法,其中所述事件是受试者的疾病、病症或病状。
5.如权利要求1所述的方法,其中所述生存分析选自由Cox比例风险分析、随机森林分析、加速失效时间分析及其任何组合组成的组。
6.如权利要求5所述的方法,其还包括弹性网罚分。
7.如权利要求1所述的方法,其中所述交叉验证是至少2折、3折、4折、5折、6折、7折、8折、9折、10折、11折、12折、13折、14折、15折、16折、17折、18折、19折、或20折交叉验证。
8.如权利要求1所述的方法,其中所述生存模型包括5至1,000个特征,其中每个特征选自由蛋白测量结果、临床因素及其组合组成的组。
9.如权利要求8所述的方法,其中所述临床因素选自由年龄、体重、血压、身高、BMI、胆固醇、性别及其组合组成的组。
10.如权利要求1所述的方法,其中所述临床测量结果选自蛋白质组学测量结果、基因组测量结果、转录组测量结果、代谢组学测量及其组合。
11.如权利要求1所述的方法,其中所述交叉验证选自k折交叉验证、蒙特卡洛交叉验证和排除N验证。
12.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的95%,并且所述少数数据类别是所述类别不平衡数据集的5%。
13.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的90%,并且所述少数数据类别是所述类别不平衡数据集的10%。
14.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的85%,并且所述少数数据类别是所述类别不平衡数据集的15%。
15.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的80%,并且所述少数数据类别是所述类别不平衡数据集的20%。
16.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的75%,并且所述少数数据类别是所述类别不平衡数据集的25%。
17.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的70%,并且所述少数数据类别是所述类别不平衡数据集的30%。
18.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的65%,并且所述少数数据类别是所述类别不平衡数据集的35%。
19.如权利要求1所述的方法,其中所述多数数据类别是所述类别不平衡数据集的60%,并且所述少数数据类别是所述类别不平衡数据集的40%。
20.一种方法,其包括:
a)对类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致多数数据类别具有数量与少数数据类别相等或基本相等的观察结果;以及
b)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中所述观察结果包括在特定时间值处的事件或无事件;并且
其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个蛋白测量结果,并且其中所述生物数据被归类为所述多数数据类别或所述少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果。
21.如权利要求20所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
22.如权利要求21所述的方法,其中所述AUC是基于确定受试者是否将在指定时间点以前发生事件来计算。
23.一种用于确定疾病风险的计算机实现的方法,其包括:
a)获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中,所述观察结果包括在特定时间值处的事件或无事件;并且
其中步骤b)和步骤c)是利用计算机系统来计算。
24.如权利要求23所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
25.一种可由计算机读取的程序存储装置,所述程序存储装置有形地体现指令程序,所述指令程序可由所述计算机执行以进行用于确定疾病风险的方法的方法步骤,所述方法包括:
a)获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中所述观察结果包括在特定时间值处的事件或无事件。
26.如权利要求25所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
27.一种用于确定疾病风险的计算系统,其包括:用于存储编程指令的存储器;经配置来执行所述编程指令以进行操作的处理器,所述操作包括:
a)获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中,所述观察结果包括在特定时间值处的事件或无事件。
28.如权利要求27所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
29.一种非暂时性计算机可读介质,其上存储有指令,所述指令可由处理器执行以进行以下操作:
a)获取类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中所述观察结果包括在特定时间值处的事件或无事件。
30.如权利要求29所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
31.一种用于确定疾病风险的计算机实现的方法,其包括:
a)利用计算机接收类别不平衡数据集,其中所述类别不平衡数据集包括来自多个受试者的生物数据,其中每个受试者的所述生物数据包括观察结果、时间值和多个临床测量结果,并且其中所述生物数据被归类为多数数据类别或少数数据类别的一部分,其中所述多数数据类别具有数量比所述少数数据类别更多的观察结果;
b)利用所述计算机对所述类别不平衡数据集进行降采样以生成降采样后的数据集,其中所述降采样导致所述多数数据类别具有数量与所述少数数据类别相等或基本相等的观察结果;以及
c)利用所述计算机来利用生存分析对所述降采样后的数据集进行交叉验证以生成生存模型;
其中所述观察结果包括在特定时间值处的事件或无事件。
32.如权利要求31所述的方法,其中所述生存模型的AUC、敏感性、特异性和/或C指数比其中在所述生存分析之前未对所述类别不平衡数据集进行降采样的生存模型的AUC、敏感性、特异性和/或C指数更接近1。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862773028P | 2018-11-29 | 2018-11-29 | |
US62/773,028 | 2018-11-29 | ||
US201862783733P | 2018-12-21 | 2018-12-21 | |
US62/783,733 | 2018-12-21 | ||
PCT/US2019/062561 WO2020112478A1 (en) | 2018-11-29 | 2019-11-21 | Methods for determining disease risk combining downsampling of class-imbalanced sets with survival analysis |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113271849A true CN113271849A (zh) | 2021-08-17 |
Family
ID=70852605
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980078901.3A Pending CN113271849A (zh) | 2018-11-29 | 2019-11-21 | 结合类别不平衡集降采样与生存分析的疾病风险确定方法 |
Country Status (10)
Country | Link |
---|---|
US (1) | US20220015714A1 (zh) |
EP (1) | EP3886696A4 (zh) |
JP (1) | JP2022509835A (zh) |
KR (1) | KR20210099605A (zh) |
CN (1) | CN113271849A (zh) |
AU (1) | AU2019385818A1 (zh) |
CA (1) | CA3120716A1 (zh) |
IL (1) | IL283467A (zh) |
SG (1) | SG11202105063QA (zh) |
WO (1) | WO2020112478A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220285028A1 (en) * | 2021-03-04 | 2022-09-08 | Abbott Laboratories | Technology to automatically identify the most relevant health failure risk factors |
JP7322918B2 (ja) * | 2021-03-29 | 2023-08-08 | 横河電機株式会社 | プログラム、情報処理装置、及び学習モデルの生成方法 |
KR102393367B1 (ko) | 2021-11-15 | 2022-05-03 | 오브젠 주식회사 | 생존 분석 시스템 및 그 제어방법 |
KR102424884B1 (ko) | 2021-11-18 | 2022-07-27 | 오브젠 주식회사 | 생존 데이터 정제 서버와 생존 데이터 분석 서버를 포함하는 시스템 및 그 제어방법 |
CN114548327A (zh) * | 2022-04-27 | 2022-05-27 | 湖南工商大学 | 基于平衡子集的软件缺陷预测方法、系统、设备及介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110144914A1 (en) * | 2009-12-09 | 2011-06-16 | Doug Harrington | Biomarker assay for diagnosis and classification of cardiovascular disease |
US20120271553A1 (en) * | 2011-04-22 | 2012-10-25 | Ge Global Research | Analyzing the expression of biomarkers in cells with clusters |
CN104573708A (zh) * | 2014-12-19 | 2015-04-29 | 天津大学 | 组合降采样极限学习机 |
AU2018100796A4 (en) * | 2018-06-14 | 2018-07-19 | Macau University Of Science And Technology | A genetic feature identifying system and a search method for identifying features of genetic information |
US20180226153A1 (en) * | 2015-09-30 | 2018-08-09 | Inform Genomics, Inc. | Systems and Methods for Predicting Treatment-Regimen-Related Outcomes |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7982066B2 (en) * | 2005-12-09 | 2011-07-19 | Novalife, Inc. | High protein supplement |
-
2019
- 2019-11-21 CN CN201980078901.3A patent/CN113271849A/zh active Pending
- 2019-11-21 WO PCT/US2019/062561 patent/WO2020112478A1/en unknown
- 2019-11-21 EP EP19888405.8A patent/EP3886696A4/en active Pending
- 2019-11-21 US US17/297,669 patent/US20220015714A1/en active Pending
- 2019-11-21 JP JP2021530139A patent/JP2022509835A/ja active Pending
- 2019-11-21 AU AU2019385818A patent/AU2019385818A1/en active Pending
- 2019-11-21 CA CA3120716A patent/CA3120716A1/en active Pending
- 2019-11-21 SG SG11202105063QA patent/SG11202105063QA/en unknown
- 2019-11-21 KR KR1020217020120A patent/KR20210099605A/ko active Search and Examination
-
2021
- 2021-05-26 IL IL283467A patent/IL283467A/en unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110144914A1 (en) * | 2009-12-09 | 2011-06-16 | Doug Harrington | Biomarker assay for diagnosis and classification of cardiovascular disease |
US20120271553A1 (en) * | 2011-04-22 | 2012-10-25 | Ge Global Research | Analyzing the expression of biomarkers in cells with clusters |
CN104573708A (zh) * | 2014-12-19 | 2015-04-29 | 天津大学 | 组合降采样极限学习机 |
US20180226153A1 (en) * | 2015-09-30 | 2018-08-09 | Inform Genomics, Inc. | Systems and Methods for Predicting Treatment-Regimen-Related Outcomes |
AU2018100796A4 (en) * | 2018-06-14 | 2018-07-19 | Macau University Of Science And Technology | A genetic feature identifying system and a search method for identifying features of genetic information |
Also Published As
Publication number | Publication date |
---|---|
SG11202105063QA (en) | 2021-06-29 |
KR20210099605A (ko) | 2021-08-12 |
IL283467A (en) | 2021-07-29 |
JP2022509835A (ja) | 2022-01-24 |
AU2019385818A1 (en) | 2021-07-08 |
WO2020112478A1 (en) | 2020-06-04 |
EP3886696A1 (en) | 2021-10-06 |
EP3886696A4 (en) | 2022-08-24 |
US20220015714A1 (en) | 2022-01-20 |
CA3120716A1 (en) | 2020-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Kukar et al. | COVID-19 diagnosis by routine blood tests using machine learning | |
Zhang et al. | Clinically applicable AI system for accurate diagnosis, quantitative measurements, and prognosis of COVID-19 pneumonia using computed tomography | |
CN113271849A (zh) | 结合类别不平衡集降采样与生存分析的疾病风险确定方法 | |
Sweeney et al. | A community approach to mortality prediction in sepsis via gene expression analysis | |
RU2640568C2 (ru) | Способы и системы для оценки риска рака желудочно-кишечного тракта | |
Tomás et al. | A general method to derive robust organ-specific gene expression-based differentiation indices: application to thyroid cancer diagnostic | |
Pepe | Problems with risk reclassification methods for evaluating prediction models | |
McClish | Analyzing a portion of the ROC curve | |
Zheng et al. | Prospective accuracy for longitudinal markers | |
US20130103321A1 (en) | Selection of Preferred Sample Handling and Processing Protocol for Identification of Disease Biomarkers and Sample Quality Assessment | |
CN105229471A (zh) | 用于基于生物化学标记分析确定先兆子痫风险的系统和方法 | |
Henning et al. | Physician judgment and circulating biomarkers predict 28-day mortality in emergency department patients | |
WO2016022437A1 (en) | Electronic phenotyping technique for diagnosing chronic kidney disease | |
Aguirre et al. | Diagnostic performance of machine learning models using cell population data for the detection of sepsis: a comparative study | |
Polilli et al. | Reliability of predictive models to support early decision making in the emergency department for patients with confirmed diagnosis of COVID-19: the Pescara Covid Hospital score | |
Zheng et al. | Semiparametric models of time-dependent predictive values of prognostic biomarkers | |
Jung et al. | How accurately can we control the FDR in analyzing microarray data? | |
Metcalfe et al. | Impact of observed versus hypothesized service utilization on the incremental cost of first trimester screening and prenatal diagnosis for trisomy 21 in a Canadian province | |
Kuemmerle et al. | Probe set selection for targeted spatial transcriptomics | |
Sweeney et al. | Mortality prediction in sepsis via gene expression analysis: a community approach | |
De Grandi et al. | Highly Elevated Plasma γ‐Glutamyltransferase Elevations: A Trait Caused by γ‐Glutamyltransferase 1 Transmembrane Mutations | |
Fostel et al. | Exploration of the gene expression correlates of chronic unexplained fatigue using factor analysis | |
Shen et al. | Cohort research in “Omics” and preventive medicine | |
Chen et al. | OMICmAge: An integrative multi-omics approach to quantify biological age with electronic medical records | |
US20150310169A1 (en) | Metabolic profiling in tissue and serum is indicative of tumor differentiation in prostate cancer |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20220308 Address after: Colorado, USA Applicant after: Private placement protein body Operation Co.,Ltd. Address before: Colorado, USA Applicant before: SOMALOGIC, Inc. |
|
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40059456 Country of ref document: HK |