CN116392166B - 一种孕囊及胚芽自动测量方法、系统、装置及介质 - Google Patents
一种孕囊及胚芽自动测量方法、系统、装置及介质 Download PDFInfo
- Publication number
- CN116392166B CN116392166B CN202310213679.1A CN202310213679A CN116392166B CN 116392166 B CN116392166 B CN 116392166B CN 202310213679 A CN202310213679 A CN 202310213679A CN 116392166 B CN116392166 B CN 116392166B
- Authority
- CN
- China
- Prior art keywords
- embryo
- segmentation
- sac
- early pregnancy
- ultrasonic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 210000001161 mammalian embryo Anatomy 0.000 title claims abstract description 134
- 230000035935 pregnancy Effects 0.000 title claims abstract description 104
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000011218 segmentation Effects 0.000 claims abstract description 139
- 210000001667 gestational sac Anatomy 0.000 claims abstract description 116
- 238000005259 measurement Methods 0.000 claims abstract description 33
- 244000052616 bacterial pathogen Species 0.000 claims abstract description 4
- 238000012549 training Methods 0.000 claims description 35
- 230000014509 gene expression Effects 0.000 claims description 20
- 230000007246 mechanism Effects 0.000 claims description 17
- 238000002604 ultrasonography Methods 0.000 claims description 14
- 238000010606 normalization Methods 0.000 claims description 9
- 238000012216 screening Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 7
- 238000000691 measurement method Methods 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 5
- 238000009432 framing Methods 0.000 claims description 4
- 238000001514 detection method Methods 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 18
- 238000012360 testing method Methods 0.000 description 10
- 238000002372 labelling Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000035945 sensitivity Effects 0.000 description 7
- 230000009286 beneficial effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 238000013135 deep learning Methods 0.000 description 5
- 238000003745 diagnosis Methods 0.000 description 5
- 210000002458 fetal heart Anatomy 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 230000004083 survival effect Effects 0.000 description 4
- 230000004913 activation Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000001605 fetal effect Effects 0.000 description 3
- 230000005906 menstruation Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000006467 substitution reaction Methods 0.000 description 3
- ORILYTVJVMAKLC-UHFFFAOYSA-N Adamantane Natural products C1C(C2)CC3CC1CC2C3 ORILYTVJVMAKLC-UHFFFAOYSA-N 0.000 description 2
- 208000009701 Embryo Loss Diseases 0.000 description 2
- 210000003484 anatomy Anatomy 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000013145 classification model Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 206010002659 Anovulatory cycle Diseases 0.000 description 1
- 206010027339 Menstruation irregular Diseases 0.000 description 1
- 206010036086 Polymenorrhoea Diseases 0.000 description 1
- 206010000210 abortion Diseases 0.000 description 1
- 231100000176 abortion Toxicity 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008828 contractile function Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000002592 echocardiography Methods 0.000 description 1
- 201000003511 ectopic pregnancy Diseases 0.000 description 1
- 210000002257 embryonic structure Anatomy 0.000 description 1
- 230000004720 fertilization Effects 0.000 description 1
- 230000008175 fetal development Effects 0.000 description 1
- 230000004578 fetal growth Effects 0.000 description 1
- 210000003754 fetus Anatomy 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000000265 homogenisation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 230000002980 postoperative effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011158 quantitative evaluation Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 230000009469 supplementation Effects 0.000 description 1
- 230000002861 ventricular Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0866—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving foetal diagnosis; pre-natal or peri-natal diagnosis of the baby
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/523—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10132—Ultrasound image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30044—Fetus; Embryo
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Theoretical Computer Science (AREA)
- Medical Informatics (AREA)
- General Physics & Mathematics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Physiology (AREA)
- Data Mining & Analysis (AREA)
- Gynecology & Obstetrics (AREA)
- Pregnancy & Childbirth (AREA)
- Quality & Reliability (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Geometry (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明公开了一种孕囊及胚芽自动测量方法、系统、装置及介质,方法包括:获取早孕期超声图像;利用孕囊及胚芽分割模型,对早孕期超声图像进行分析,获得早孕期超声图像的孕囊及胚芽的目标分割平面;根据目标分割平面,通过LSTM时间序列模型,获得标准平面;基于标准平面,确定测量经线,得到孕囊及胚芽的测量结果。本发明在获得早孕期超声图像后,利用预先建立的孕囊及胚芽分割模型,对该早孕期超声图像进行分析,获得目标分割平面,进而通过LSTM时间序列模型获取标准平面,实现测量经线的确定,能够实现自动且准确测量孕囊及胚芽,提高了孕囊及胚芽的测量精度,可广泛应用于图像检测技术领域。
Description
技术领域
本发明涉及图像检测技术领域,尤其是一种孕囊及胚芽自动测量方法、系统、装置及介质。
背景技术
妊娠早期(小于孕10周)是胎儿器官分化、形成的重要时期,也是流产、宫外孕等早孕期不良妊娠事件发生最频繁的时期。经阴道超声检查目前是评估孕龄和估计分娩时间的最佳方法,也是评估胎儿生长发育最早最直接的指标之一。通过对孕囊与胚芽的规范化测量,可以判断宫内妊娠、核准孕周及确认胚胎活性,合理指导产前检查与孕期保健时间、次数及临床决策。
然而,目前早孕期(妊娠6~13+6周)超声筛查面临技术标准缺乏、公开数据集少、早孕检查结果敏感性低等诸多难题,现有的大多数AI智能辅助诊断方法做的都是针对中晚孕期超声图像进行产筛切面对的最优标准切面分类(中国专利申请:CN112155602A),训练一个多标签分类网络模型或多个单疾病分类模型,然后对输入图像进行预测(中国专利申请:CN112155604A,CN112215806A)。以上研究对于图片质量要求高,将深度卷积神经网络模型学到的疾病特征信息通过权重比较是否更接近人工标注的标准切面,以此辅助医生诊断。对于动态超声视频中精细结构的小目标分割研究,需要大量的人工标注及资料收集,其基于深度学习框架相关研究较少,目前仅限于胎儿标准四腔心(CN 111062948A)、成人超声心动图左室收缩功能测定等相关多组织分割。
目前估测孕周的方法主要为:末次月经日期推算、超声医师手工测量和术后病理。在女性月经规律前提下,末次月经的第一天即妊娠龄的第一天。月经周期不规则或无排卵周期情况下,受精的确切日期未知,因此,用超声确定妊娠的日期成为建立孕周的最可靠方法。对于比较早的孕周,当胎儿相对较小,测量误差对孕周判断会产生更为显著的效应。因此,国际超声指南判断孕周最合适的时间是8到13+6周,早于孕8周前的测量不够精准。同时美国妇产超声协会提出,经阴道超声检查胚芽长度超过7mm时应有胎心搏动,平均孕囊直径大于25毫米,应有胚胎。否则为胚胎停育,该判断仅依靠操作者的肉眼观测及手工测量,存在一定的局限性,其敏感性、特异性较低。鉴于此,如何准确测量孕囊及胚芽是一个亟需解决的问题。
发明内容
有鉴于此,本发明实施例提供一种孕囊及胚芽自动测量方法、系统、装置及介质,能够实现孕囊及胚芽的准确测量。
一方面,本发明的实施例提供了一种孕囊及胚芽自动测量方法,包括:
获取早孕期超声图像;
利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面;其中,所述孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成的;所述孕囊及胚芽分割模型包括ResNet-50网络和UNet卷积网络;所述ResNet-50网络基于Mask RCNN框架搭建,所述UNet卷积网络添加有注意力机制模块;
根据所述目标分割平面,通过LSTM时间序列模型,获得标准平面;
基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果。
可选地,所述获取早孕期超声图像,包括:
获取早孕期超声视频;
对所述早孕期超声视频进行视频分帧、关键帧筛选和图像处理,得到早孕期超声图像;其中,所述图像处理包括归一化操作、尺度缩放和数据增强。
可选地,还包括:
基于已标注分割标签的早孕期超声图像,创建孕囊及胚芽分割模型。
可选地,所述基于已标注分割标签的早孕期超声图像,创建孕囊及胚芽分割模型,包括:
根据所述已标注分割标签的早孕期超声图像,确定训练集;
基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建First Trimester-Mask RCNN;
通过在UNet卷积网络中添加注意力机制模块搭建First Trimester-UNet;
根据所述First Trimester-Mask RCNN和所述First Trimester-UNet,创建多种多目标分割模型;
通过所述训练集对所述多种多目标分割模型进行分割训练,并基于训练结果,对所述多种多目标分割模型进行调整,获得孕囊及胚芽分割模型。
可选地,所述基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建FirstTrimester-Mask RCNN,包括:
基于Mask RCNN框架,使用ResNet-50网络作为骨干网络,结合特征金字塔网络结构和Point-Head,搭建得到First Trimester-UNet;其中,所述特征金字塔网络结构用于多尺度图像的特征提取,所述Point-Head用于分割边缘的加权细化。
可选地,所述利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面,包括:
利用孕囊及胚芽分割模型,提取所述早孕期超声图像的像素特征表达;
基于所述像素特征表达,通过所述注意力机制模块进行特征增强,得到增强特征的特征表示;
根据所述增强特征表示,确定分割结果,得到所述早孕期超声图像的孕囊及胚芽的目标分割平面。
可选地,所述基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果,包括:
基于所述标准平面,利用OpenCV工具获得测量经线,得到孕囊及胚芽的测量结果;
其中,所述孕囊及胚芽的测量结果包括评价孕囊直径和胚芽长度。
另一方面,本发明的实施例提供了一种孕囊及胚芽自动测量系统,包括:
第一模块,用于获取早孕期超声图像;
第二模块,用于利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面;其中,所述孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成的;所述孕囊及胚芽分割模型包括ResNet-50网络和UNet卷积网络;所述ResNet-50网络基于Mask RCNN框架搭建,所述UNet卷积网络添加有注意力机制模块;
第三模块,用于根据所述目标分割平面,通过LSTM时间序列模型,获得标准平面;
第四模块,用于基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果。
另一方面,本发明的实施例提供了一种孕囊及胚芽自动测量装置,包括处理器以及存储器;
所述存储器用于存储程序;
所述处理器执行所述程序实现如前面所述的方法。
另一方面,本发明的实施例提供了一种计算机可读存储介质,所述存储介质存储有程序,所述程序被处理器执行实现如前面所述的方法。
本发明实施例还公开了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器可以从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行前面的方法。
本发明实施例首先获取早孕期超声图像;利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面;其中,所述孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成的;所述孕囊及胚芽分割模型包括ResNet-50网络和UNet卷积网络;所述ResNet-50网络基于Mask RCNN框架搭建,所述UNet卷积网络添加有注意力机制模块;根据所述目标分割平面,通过LSTM时间序列模型,获得标准平面;基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果。本发明在获得早孕期超声图像后,利用预先建立的孕囊及胚芽分割模型,对该早孕期超声图像进行分析,获得目标分割平面,进而通过LSTM时间序列模型获取标准平面,实现测量经线的确定,能够实现自动且准确测量孕囊及胚芽,提高了孕囊及胚芽的测量精度。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种孕囊及胚芽自动测量方法的流程示意图;
图2为本发明实施例提供的加入注意力机制模块的分割模型的示意图;
图3为本发明实施例提供的一种孕囊及胚芽自动测量方法的总体流程示意图;
图4为本发明实施例提供的对孕囊实时分割与专家手工标注结果的比较示意图;
图5为本发明实施例提供的对胚芽实时分割与专家手工标注结果的比较示意图;
图6为本发明实施例提供的胚胎死活二分类的ROC曲线及混淆矩阵的示意图;
图7为本发明实施例提供的平均受试者工作特征曲线(AUC)的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在三甲医院中,日均产生的早孕期超声图像数量巨大,超声医生在操作仪器的同时又需要进行评估诊断,其日手动测量数千次孕囊、数百次胚芽长度,部分孕囊平均内径以及胚芽最长经线需要反复测量,由此来准确估测孕周和判断胚胎活性,此过程费时费力;另一方面,在长时间的工作过程中会逐渐累积疲劳度,进而可能会出现标注不准造成测量误差大的情况。胚芽数毫米的误差或导致孕周数的误判,使孕妇错过下一次产检时间窗(10~13+6周),未能进行重要无创产前检查(如胎儿颈后透明层测量)。肉眼评判胎心是否搏动直接判断停育存在误判风险,因此需要寻找一种更方便、快捷和精准的测量手段和评估方式。
本发明针对现有孕龄评估与超声手工测量方法的不足,提供在早孕期超声中进行孕囊、胚芽、胎心智能测量以准确估测孕龄判断存活的新方法。包括:
(1)自动分割关键解剖结构以估测孕龄,可用于提高超声医师工作效率以及准确判断孕龄;
(2)在前期分割及测量的基础上,根据指南判断胚胎存活。
本发明的目的是,提供一种基于动态超声视频数据快速目标检测分割的模型:通过孕囊及胚芽标准平面自动识别、细粒度特征提取、智能生物测量,可以实质性地减轻医生工作负担,作为一种既准确又经济的早孕期超声筛查方法,有利于基层医疗机构进行早孕期同质化诊断服务。
鉴于此,一方面,参照图1,本发明的实施例提供了一种孕囊及胚芽自动测量方法,包括:
S100、获取早孕期超声图像;
需要说明的是,一些实施例中,获取早孕期超声视频;对早孕期超声视频进行视频分帧、关键帧筛选和图像处理,得到早孕期超声图像;其中,图像处理包括归一化操作、尺度缩放和数据增强.
具体地,收集并获取早孕期超声视频图像进行预处理,进行视频分帧,筛除没有胚芽、孕囊的帧,再对图像进行归一化操作和尺度缩放,并进行数据增强,包括随机切割、随机翻转、色彩失真等。
S200、利用孕囊及胚芽分割模型,对早孕期超声图像进行分析,获得早孕期超声图像的孕囊及胚芽的目标分割平面;
需要说明的是,孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成的;孕囊及胚芽分割模型包括ResNet-50网络和UNet卷积网络;ResNet-50网络基于Mask RCNN框架搭建,UNet卷积网络添加有注意力机制模块;
其中,一些实施例中,还包括:基于已标注分割标签的早孕期超声图像,创建孕囊及胚芽分割模型。
一些实施例中,基于已标注分割标签的早孕期超声图像,创建孕囊及胚芽分割模型,包括:根据已标注分割标签的早孕期超声图像,确定训练集;基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建First Trimester-Mask RCNN;通过在UNet卷积网络中添加注意力机制模块搭建First Trimester-UNet;根据First Trimester-Mask RCNN和FirstTrimester-UNet,创建多种多目标分割模型;通过训练集对多种多目标分割模型进行分割训练,并基于训练结果,对多种多目标分割模型进行调整,获得孕囊及胚芽分割模型。
一些实施例中,基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建FirstTrimester-Mask RCNN,包括:基于Mask RCNN框架,使用ResNet-50网络作为骨干网络,结合特征金字塔网络结构和Point-Head,搭建得到First Trimester-UNet;其中,特征金字塔网络结构用于多尺度图像的特征提取,Point-Head用于分割边缘的加权细化。
具体地,如图2所示,通过将二维超声图像人工分割为含有孕囊、胚芽、心管的彩色掩模及黑色背景区域,得到已标注分割标签的早孕期超声图像。所有分割的二维超声图像均为匿名的jpg格式,彩色掩模为3通道RGB。所有图像均调整为96×96像素。将处理后的数据按设定比例分成训练集和测试集。
进而根据确认的训练集。基于深度学习框架搭建孕囊及胚芽分割模型,并利用Dice Loss为损失函数,基于确定的训练集对模型进行训练,用平均dice系数和像素准确率作为指标衡量其性能,保存网络参数,获得最佳分割模型,分割模型如图2。基于深度学习框架搭建多种多目标分割模型,本发明创新模型为First Trimester-Mask RCNN,FirstTrimester-Unet模型,包括:
1、First Trimester-Mask RCNN:基于Mask RCNN框架,使用的骨干网络为ResNet-50,增加了特征金字塔网络(FPN)结构用于适应多尺度图像,增加了Point-Head用于采样分割区域边缘易错点进行加权,细化分割边缘。其中使用骨干网络结合FPN进行多尺度特征提取,而后由解码器即FPN-Head进行像素分类,并由Point-Head对边缘难点进行进一步学习。模型使用随机梯度下降(SGD)进行优化,单个GPU的batchsize为4,使用4块GPU训练40000个iteration,并由mDice指标进行结果评价。
2、First Trimester-UNet:UNet卷积网络中添加了5处注意力机制模块,模型左半部分,由两个3x3的整流线性单元(Rectified LinearUnit,ReLU)再加上一个2x2的maxpooling层组成一个下采样的模块,右半部分,由一个上采样的卷积层与特征拼接concat及两个3x3的整流线性单元(ReLU)反复构成;这种通过通道数的拼接,可以得到更多的特征输出;该卷积块使用3*3大小的卷积核,步长为1;输入为1个输入通道,每层的输出通道分别为32、64、128和256;最大池化层用于对从卷积块导出的特征图进行下采样,比例因子为2;下采样时每一层的输出裁剪后连接到同层的上采样层做融合,编码器、解码器之间由注意力机制完成同层串联连接,用于信息补充。由Conv2d块在全连接层之前应用批处理归一化层,并在全连接层上连接一个softmax激活层,利用该激活层生成候选结节的预测概率。减少训练过程中过拟合的可能性。
作为优选的实施方式,模型的超参数设置:训练过程采用Adam优化器作为权重更新的优化算法,每10个epoch值衰减为0.1,总共训练了100个epoch;初始学习率设置为0.0004,batch size设置为1,为了将非线性性应用于模型,在中间层采用了校正线性单元(ReLU)激活函数。采用Adam优化器使损失函数最小化。
其中,通过结合二叉交叉熵(BCE)和骰子损失函数,并将其作为优化目标的损失函数。采用L2正则化和dropout层。如果在学习率下降后验证损失没有改善,则停止训练。模型使用Python 3.7.10和Torch深度学习框架(1.4.0;https://pytorch.org/)在Linux操作系统(Ubuntu 16.04.4;Canonical,伦敦,英国)与NVIDIA Quadro图形处理单元。
基于预先训练完成的孕囊及胚芽分割模型,一些实施例中,利用孕囊及胚芽分割模型,对早孕期超声图像进行分析,获得早孕期超声图像的孕囊及胚芽的目标分割平面,包括:利用孕囊及胚芽分割模型,提取早孕期超声图像的像素特征表达;基于像素特征表达,通过注意力机制模块进行特征增强,得到增强特征的特征表示;根据增强特征表示,确定分割结果,得到早孕期超声图像的孕囊及胚芽的目标分割平面。
具体地,像素特征表达通过骨干网络中间层得到,注意力机制模块(Object-Contextual Representations Attention)具体内容如下:
1.根据骨干网络中间层像素特征表达(Pixel Representations)预测软物体区域(Soft Object Regions)即(K个Soft Masks,每个Mask对应于一个语义类别);
其中,fk是第k个对象区域的表示,wik是第i个像素与第k个对象区域的关系。δ(·)和ρ(·)是变换函数。
2.根据软物体区域对网络深层的像素特征表达加权求和得到物体区域表示(Object Region Representations,ORR)即每一类都对应于一个物体区域表示;
其中,xi是像素pi的表示。是属于对象区域的像素的归一化度。使用归一化激活(spatial softmax)对每个对象区域Mk进行标准化。
3.像素特征表达作为需求(Query),物体区域表示作为键值,送入交叉注意力,输出作为目标上下文表达;然后把目标上下文表达和输入的像素特征表达拼接在一起经过融合之后得到增强特征特征表示,最后加一个分类器用于预测最后的语义分割结果;
计算每个像素和每个对象区域之间的关系如下:
其中,是非归一化关系函数,φ(x)和/>两个变换函数是否由1×1卷积层(Conv)→批归一化(Batch Normalization)→校正线性单元(ReLU)→卷积实现。
本发明的First Trimester-Mask RCNN,First Trimester-UNet模型自动学习关注不同形状和大小的目标结构,通过学习抑制输入图像中的无关区域,同时突出显示对特定任务有用的显著特征;能够不依赖于使用级联卷积神经网络目标区域定位,通过粗分割网络,直接输出像素级概率图,表示属于孕囊、胚芽区域的每个像素的置信度,范围从0~1;从而实现早孕期超声胚芽、孕囊、心管关键解剖结构的精准定位。基于训练优化后的孕囊及胚芽分割模型对早孕期超声图像进行孕囊、胚芽、心管分割后、寻找得到平均孕囊及胚芽最长的分割平面(即孕囊及胚芽的目标分割平面)。
S300、根据目标分割平面,通过LSTM时间序列模型,获得标准平面;
S400、基于标准平面,确定测量经线,得到孕囊及胚芽的测量结果;
需要说明的是,一些实施例中,基于标准平面,利用OpenCV工具获得测量经线,得到孕囊及胚芽的测量结果;其中,孕囊及胚芽的测量结果包括评价孕囊直径和胚芽长度。
具体地,根据标准平面,利用OpenCV工具获得测量经线后,通过孕囊、胚芽经线测量均可预测胎龄,其中胚芽经线最准确,孕龄计算公式如下:
孕龄的天数=平均孕囊直径mm+30;
孕龄的天数=胚芽长度mm+42;
孕龄的周数=胚芽长度cm+6.5(±4天);
据产前超声指南:经阴道超声检查胚芽长度超过7mm时应有胎心搏动,平均孕囊直径大于25毫米,应有胚胎。基于持续随访结果作为金标准,分别得到生存组及死亡组胚芽数据,将分割后的胚芽(其内包含胎心)图像使用efficientnet-b4进行二分类判断是否有心管搏动。以上综合所有结果估测早孕期孕龄及宫内胚胎存活情况。
综上,如图3所示,本发明通过将待孕5-8周超声视频数据输入到训练好的分割模型中,其中,训练数据中包括孕囊、胚芽、心管的分割标注结果;获取模型的输出信息,得到孕囊、胚芽、心管的测量结果,进而根据相关测量结果能够快速确定待分析超声视频数据对应的孕周估测及存活判断的结果。如图4和图5所示,分别为本发明的模型对于孕囊实时分割与专家手工标注结果的比较示意图以及胚芽实时分割与专家手工标注结果的比较示意图,本发明模型的分割结果与专家手工标注结果重合度极高,效果极佳。
作为优选地实施方式,本发明用Dice(DC)评分来评估人工分割和分割模型结果之间的相似性。通过准确度(AC)、灵敏度(SE)、特异性(SP)、精密度和Jaccard相似度(JS)等指标进行定量评估。此外、真阳性(TP)、真阴性(TN)、假阳性(FP)和假阴性(FN)作为效能评价,采用约登指数来确定最优阈值。DC及JS的计算公式如下:
其中,R表示目标区域的类别,GR表示模型分割出属于该类别的区域,SR表示真正属于该类别的区域。
1.多目标分割模型效能如表1的不同分割模型多组织平均分割效果表格,Attention U-net(即本发明的加入注意力机制模块的分割模型)与ResUnet模型效果均较好。
表1
Method | DICE | F1 | AC | SE | SP | precision | JS | IOU |
Unet | 0.9270 | 0.9319 | 0.9954 | 0.9298 | 0.9976 | 0.9366 | 0.8732 | 0.8666 |
Attention-UNet | 0.9267 | 0.9337 | 0.9955 | 0.9371 | 0.9974 | 0.9323 | 0.8761 | 0.8712 |
UNet++ | 0.9262 | 0.9306 | 0.9954 | 0.9280 | 0.9976 | 0.9359 | 0.8710 | 0.8549 |
FT-Mask RCNN | 0.8996 | 0.9014 | 0.8879 | 0.9126 | 0.8954 | 0.8900 | 0.8435 | 0.7012 |
DeepResUnet | 0.9279 | 0.9303 | 0.9954 | 0.9145 | 0.9981 | 0.9485 | 0.8704 | 0.7849 |
FT-U-Net | 0.9282 | 0.9306 | 0.9955 | 0.9097 | 0.9984 | 0.9547 | 0.8712 | 0.8971 |
2.最佳标准切面分类模型测试集上的各模型测试结果如表2,最终选择LSTM作为最佳网络模型(孕囊、胚芽、心管平均AUC值为0.9762,灵敏度为0.8613,特异性为0.9563,精度为0.8939,准确度为0.9279)。
表2
Model | AUC | SE | SP | PR | ACC |
SE-ResNet-50 | 0.9158 | 0.6131 | 0.9065 | 0.7368 | 0.8188 |
SENet-154 | 0.9133 | 0.7810 | 0.8723 | 0.7229 | 0.8449 |
LSTM | 0.9762 | 0.8613 | 0.9563 | 0.8939 | 0.9279 |
3.对胚芽进行了准确分割;在多中心数据集上其效能测试准确率达91%以上,如表3。
表3
测试集(n:孕妇例数) | Dice | Accuracy |
广妇儿前瞻性胚胎图像测试集(n=1085) | 0.902 | 0.919 |
医联体单位1前瞻性胚胎图像测试集(n=549) | 0.882 | 0.905 |
医联体单位2胚胎图像测试集(n=133) | 0.604 | 0.951 |
广州市妇儿胚胎历史图像测试集(n-1553) | 0.822 | 0.877 |
4.如图6和图7,根据1w后随访结果作为金标准基于已经预测的标准平面进行胚胎死活二分类,基于efficientnet-b4网络二分类后,AUC达0.95。
综上所述,本发明能够解决现有的超声成像技术的局限性,减轻早孕期超声医师参数测量的工作负担,解决孕周估测依赖手工测量、准确率较低的技术问题。包括以下步骤:收集并获取早孕期胚胎超声视频图像数据;对获取的图像数据进行多任务标注及标准平面定位,将处理后的数据按设定比例分成训练集和测试集;基于深度学习框架搭建多组织分割模型,基于训练集对模型进行训练,并进行参数优化。本发明可以实现多组织自动分割、像素级胎心识别,能实质性地减轻医生的和工作负担,减少早孕期超声对临床经验的依赖性,有利于基层医院超声医生进行准确的早孕期诊断,提高超声医师工作效率;减少误诊与漏诊情况的出现。相较于现有技术,本发明具有以下有益效果:
1、现有的早孕期超声小目标分割方法较少,且无法充分验证其算法具有较好的泛化性。本发明提出了多组织分割任务来测量孕囊及胚芽最长经线,通过通用公式估测孕周,在较大型多中心数据集上训练和测试网络模型,具有较好的泛化性,且本发明的网络是基于精确像素级语义标签来学习,而不是单个简单标签。
2、现有超声早孕期筛查技术依赖于人工标注,在低频率探头采集超声视频的过程中肉眼感知胚芽的最长经线及胎心是否搏动,本发明涉及多标签区域的分割,大大减少人工测量误差,此外分割后背景去噪,排除了母体血管、呼吸运动等干扰,有利于感兴趣区域--胚芽精细解剖特征(如原始心管)提取,在判断胚芽中心管是否搏动更加鲁棒、稳定,提升诊断准确率。
另一方面,本发明的实施例提供了一种孕囊及胚芽自动测量系统,包括:第一模块,用于获取早孕期超声图像;第二模块,用于利用孕囊及胚芽分割模型,对早孕期超声图像进行分析,获得早孕期超声图像的孕囊及胚芽的目标分割平面;其中,孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成的;孕囊及胚芽分割模型包括ResNet-50网络和UNet卷积网络;ResNet-50网络基于Mask RCNN框架搭建,UNet卷积网络添加有注意力机制模块;第三模块,用于根据目标分割平面,通过LSTM时间序列模型,获得标准平面;第四模块,用于基于标准平面,确定测量经线,得到孕囊及胚芽的测量结果。
本发明方法实施例的内容均适用于本系统实施例,本系统实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法达到的有益效果也相同。
本发明实施例的另一方面还提供了一种孕囊及胚芽自动测量装置,包括处理器以及存储器;
存储器用于存储程序;
处理器执行程序实现如前面的方法。
本发明方法实施例的内容均适用于本装置实施例,本装置实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法达到的有益效果也相同。
本发明实施例的另一方面还提供了一种计算机可读存储介质,所述存储介质存储有程序,所述程序被处理器执行实现如前面所述的方法。
本发明方法实施例的内容均适用于本计算机可读存储介质实施例,本计算机可读存储介质实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法达到的有益效果也相同。
本发明实施例还公开了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器可以从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行前面的方法。
在一些可选择的实施例中,在方框图中提到的功能/操作可以不按照操作示图提到的顺序发生。例如,取决于所涉及的功能/操作,连续示出的两个方框实际上可以被大体上同时地执行或所述方框有时能以相反顺序被执行。此外,在本发明的流程图中所呈现和描述的实施例以示例的方式被提供,目的在于提供对技术更全面的理解。所公开的方法不限于本文所呈现的操作和逻辑流程。可选择的实施例是可预期的,其中各种操作的顺序被改变以及其中被描述为较大操作的一部分的子操作被独立地执行。
此外,虽然在功能性模块的背景下描述了本发明,但应当理解的是,除非另有相反说明,所述的功能和/或特征中的一个或多个可以被集成在单个物理装置和/或软件模块中,或者一个或多个功能和/或特征可以在单独的物理装置或软件模块中被实现。还可以理解的是,有关每个模块的实际实现的详细讨论对于理解本发明是不必要的。更确切地说,考虑到在本文中公开的装置中各种功能模块的属性、功能和内部关系的情况下,在工程师的常规技术内将会了解该模块的实际实现。因此,本领域技术人员运用普通技术就能够在无需过度试验的情况下实现在权利要求书中所阐明的本发明。还可以理解的是,所公开的特定概念仅仅是说明性的,并不意在限制本发明的范围,本发明的范围由所附权利要求书及其等同方案的全部范围来决定。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行装置、装置或设备(如基于计算机的装置、包括处理器的装置或其他可以从指令执行装置、装置或设备取指令并执行指令的装置)使用,或结合这些指令执行装置、装置或设备而使用。就本说明书而言,“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行装置、装置或设备或结合这些指令执行装置、装置或设备而使用的装置。
计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行装置执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。
以上是对本发明的较佳实施进行了具体说明,但本发明并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可做出种种的等同变形或替换,这些等同的变形或替换均包含在本发明权利要求所限定的范围内。
Claims (6)
1.一种孕囊及胚芽自动测量方法,其特征在于,包括:
获取早孕期超声图像;
利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面;其中,所述孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成;生成所述孕囊及胚芽分割模型包括:
根据所述已标注分割标签的早孕期超声图像,确定训练集;
基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建First Trimester-MaskRCNN;
通过在UNet卷积网络中添加注意力机制模块搭建First Trimester-UNet;
根据所述First Trimester-Mask RCNN和所述First Trimester-UNet,创建多种多目标分割模型;
通过所述训练集对所述多种多目标分割模型进行分割训练,并基于训练结果,对所述多种多目标分割模型进行调整,获得孕囊及胚芽分割模型;
其中,所述利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面,包括:
利用孕囊及胚芽分割模型,提取所述早孕期超声图像的像素特征表达;
基于所述像素特征表达,通过所述注意力机制模块进行特征增强,得到增强特征的特征表示;
根据所述增强特征的特征表示,确定分割结果,得到所述早孕期超声图像的孕囊及胚芽的目标分割平面;
根据所述目标分割平面,通过LSTM时间序列模型,获得标准平面;
基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果;
其中,所述基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果,包括:
基于所述标准平面,利用OpenCV工具获得测量经线,得到孕囊及胚芽的测量结果;
其中,所述孕囊及胚芽的测量结果包括评价孕囊直径和胚芽长度。
2.根据权利要求1所述的一种孕囊及胚芽自动测量方法,其特征在于,所述获取早孕期超声图像,包括:
获取早孕期超声视频;
对所述早孕期超声视频进行视频分帧、关键帧筛选和图像处理,得到早孕期超声图像;其中,所述图像处理包括归一化操作、尺度缩放和数据增强。
3.根据权利要求1所述的一种孕囊及胚芽自动测量方法,其特征在于,所述基于MaskRCNN框架,使用ResNet-50网络作为骨干网络搭建First Trimester-Mask RCNN,包括:
基于Mask RCNN框架,使用ResNet-50网络作为骨干网络,结合特征金字塔网络结构和Point-Head,搭建得到First Trimester-Mask RCNN;其中,所述特征金字塔网络结构用于多尺度图像的特征提取,所述Point-Head用于分割边缘的加权细化。
4.一种孕囊及胚芽自动测量系统,其特征在于,包括:
第一模块,用于获取早孕期超声图像;
第二模块,用于利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面;其中,所述孕囊及胚芽分割模型通过已标注分割标签的早孕期超声图像训练生成;生成所述孕囊及胚芽分割模型包括:
根据所述已标注分割标签的早孕期超声图像,确定训练集;
基于Mask RCNN框架,使用ResNet-50网络作为骨干网络搭建First Trimester-MaskRCNN;
通过在UNet卷积网络中添加注意力机制模块搭建First Trimester-UNet;
根据所述First Trimester-Mask RCNN和所述First Trimester-UNet,创建多种多目标分割模型;
通过所述训练集对所述多种多目标分割模型进行分割训练,并基于训练结果,对所述多种多目标分割模型进行调整,获得孕囊及胚芽分割模型;
其中,所述利用孕囊及胚芽分割模型,对所述早孕期超声图像进行分析,获得所述早孕期超声图像的孕囊及胚芽的目标分割平面,包括:
利用孕囊及胚芽分割模型,提取所述早孕期超声图像的像素特征表达;
基于所述像素特征表达,通过所述注意力机制模块进行特征增强,得到增强特征的特征表示;
根据所述增强特征的特征表示,确定分割结果,得到所述早孕期超声图像的孕囊及胚芽的目标分割平面;
第三模块,用于根据所述目标分割平面,通过LSTM时间序列模型,获得标准平面;
第四模块,用于基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果;
其中,所述基于所述标准平面,确定测量经线,得到孕囊及胚芽的测量结果,包括:
基于所述标准平面,利用OpenCV工具获得测量经线,得到孕囊及胚芽的测量结果;
其中,所述孕囊及胚芽的测量结果包括评价孕囊直径和胚芽长度。
5.一种孕囊及胚芽自动测量装置,包括处理器以及存储器;
所述存储器用于存储程序;
所述处理器执行所述程序实现如权利要求1至3中任一项所述的孕囊及胚芽自动测量方法。
6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有程序,所述程序被处理器执行实现如权利要求1至3中任一项所述的孕囊及胚芽自动测量方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310213679.1A CN116392166B (zh) | 2023-03-07 | 2023-03-07 | 一种孕囊及胚芽自动测量方法、系统、装置及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310213679.1A CN116392166B (zh) | 2023-03-07 | 2023-03-07 | 一种孕囊及胚芽自动测量方法、系统、装置及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116392166A CN116392166A (zh) | 2023-07-07 |
CN116392166B true CN116392166B (zh) | 2024-02-23 |
Family
ID=87015013
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310213679.1A Active CN116392166B (zh) | 2023-03-07 | 2023-03-07 | 一种孕囊及胚芽自动测量方法、系统、装置及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116392166B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109886966A (zh) * | 2019-05-09 | 2019-06-14 | 湖南自兴智慧医疗科技有限公司 | 一种从超声波图像中提取目标特征的图像处理方法 |
CN110060223A (zh) * | 2019-06-11 | 2019-07-26 | 湖南自兴智慧医疗科技有限公司 | 一种基于特征提取及去噪的图像分割方法 |
WO2020103098A1 (zh) * | 2018-11-22 | 2020-05-28 | 深圳迈瑞生物医疗电子股份有限公司 | 超声成像方法、设备、存储介质,处理器及计算机设备 |
CN112132064A (zh) * | 2020-09-25 | 2020-12-25 | 新希望六和股份有限公司 | 基于人工智能的识别孕囊数量的方法、装置、设备和介质 |
CN113393456A (zh) * | 2021-07-13 | 2021-09-14 | 湖南大学 | 基于多任务的早孕期胎儿标准切面的自动质量控制方法 |
CN114049339A (zh) * | 2021-11-22 | 2022-02-15 | 江苏科技大学 | 一种基于卷积神经网络的胎儿小脑超声图像分割方法 |
CN115004223A (zh) * | 2020-01-16 | 2022-09-02 | 皇家飞利浦有限公司 | 用于在医学图像中自动检测解剖结构的方法和系统 |
-
2023
- 2023-03-07 CN CN202310213679.1A patent/CN116392166B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020103098A1 (zh) * | 2018-11-22 | 2020-05-28 | 深圳迈瑞生物医疗电子股份有限公司 | 超声成像方法、设备、存储介质,处理器及计算机设备 |
CN109886966A (zh) * | 2019-05-09 | 2019-06-14 | 湖南自兴智慧医疗科技有限公司 | 一种从超声波图像中提取目标特征的图像处理方法 |
CN110060223A (zh) * | 2019-06-11 | 2019-07-26 | 湖南自兴智慧医疗科技有限公司 | 一种基于特征提取及去噪的图像分割方法 |
CN115004223A (zh) * | 2020-01-16 | 2022-09-02 | 皇家飞利浦有限公司 | 用于在医学图像中自动检测解剖结构的方法和系统 |
CN112132064A (zh) * | 2020-09-25 | 2020-12-25 | 新希望六和股份有限公司 | 基于人工智能的识别孕囊数量的方法、装置、设备和介质 |
CN113393456A (zh) * | 2021-07-13 | 2021-09-14 | 湖南大学 | 基于多任务的早孕期胎儿标准切面的自动质量控制方法 |
CN114049339A (zh) * | 2021-11-22 | 2022-02-15 | 江苏科技大学 | 一种基于卷积神经网络的胎儿小脑超声图像分割方法 |
Also Published As
Publication number | Publication date |
---|---|
CN116392166A (zh) | 2023-07-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110060774B (zh) | 一种基于生成式对抗网络的甲状腺结节识别方法 | |
Zhang et al. | Detection of ovarian tumors in obstetric ultrasound imaging using logistic regression classifier with an advanced machine learning approach | |
CN112529894B (zh) | 一种基于深度学习网络的甲状腺结节的诊断方法 | |
US8107710B2 (en) | Automated placental measurement | |
CN113223005B (zh) | 一种甲状腺结节自动分割及分级的智能系统 | |
CN116681958B (zh) | 基于机器学习的胎儿肺脏超声影像成熟度预测方法 | |
WO2022110525A1 (zh) | 一种癌变区域综合检测装置及方法 | |
US8565507B2 (en) | Automated placental measurement | |
Włodarczyk et al. | Spontaneous preterm birth prediction using convolutional neural networks | |
CN111862075A (zh) | 一种基于深度学习的肺部图像分析系统及其分析方法 | |
Lu et al. | The JNU-IFM dataset for segmenting pubic symphysis-fetal head | |
CN114565572A (zh) | 一种基于图像序列分析的脑出血ct图像分类方法 | |
Thomas et al. | Deep learning measurement model to segment the nuchal translucency region for the early identification of down syndrome | |
CN117036288A (zh) | 一种面向全切片病理图像的肿瘤亚型诊断方法 | |
CN115187566A (zh) | 基于mra影像的颅内动脉瘤检测方法及装置 | |
Wang et al. | Deep learning based fetal middle cerebral artery segmentation in large-scale ultrasound images | |
CN113160256A (zh) | 一种多任务生成对抗模型的mr影像胎盘分割方法 | |
CN116392166B (zh) | 一种孕囊及胚芽自动测量方法、系统、装置及介质 | |
CN117333667A (zh) | 一种脑部ct图像出血区域自动分割方法及系统 | |
Cakir et al. | Automated Aortic Valve Calcific Area Segmentation in Echocardiography Images Using Fully Convolutional Neural Networks | |
CN118154975B (zh) | 基于大数据的肿瘤病理诊断图像分类方法 | |
WO2024192727A1 (zh) | 一种超声图像质量量化评价方法 | |
US20230394655A1 (en) | System and method for evaluating or predicting a condition of a fetus | |
CN116310604B (zh) | 一种胎盘植入分型评估工具和方法 | |
CN114494496B (zh) | 基于头部ct平扫影像的颅内出血自动勾画方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |