CN107767928A - 基于人工智能的医学影像报告生成系统及方法 - Google Patents

基于人工智能的医学影像报告生成系统及方法 Download PDF

Info

Publication number
CN107767928A
CN107767928A CN201710850288.5A CN201710850288A CN107767928A CN 107767928 A CN107767928 A CN 107767928A CN 201710850288 A CN201710850288 A CN 201710850288A CN 107767928 A CN107767928 A CN 107767928A
Authority
CN
China
Prior art keywords
medical
patient
medical image
image
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710850288.5A
Other languages
English (en)
Inventor
姚育东
钱唯
郑斌
马贺
齐守良
赵明芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Qianhai AnyCheck Information Technology Co Ltd
Original Assignee
Shenzhen Qianhai AnyCheck Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Qianhai AnyCheck Information Technology Co Ltd filed Critical Shenzhen Qianhai AnyCheck Information Technology Co Ltd
Priority to CN201710850288.5A priority Critical patent/CN107767928A/zh
Priority to PCT/CN2017/116663 priority patent/WO2019052062A1/zh
Publication of CN107767928A publication Critical patent/CN107767928A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Data Mining & Analysis (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明公开一种基于人工智能的医学影像报告生成系统及方法,该方法包括步骤:从医学影像信息库中获取医学影像信息;基于不同人体部位将医学影像信息分类处理;基于分类后的医学影像信息建立人体各部位的医学评估模型;对人体各部位的医学评估模型进行训练处理并保存医学模型参数;通过超声检查设备的身份证读卡器获取患者的身份信息;从超声检查设备对、获得患者的超声波影像;对超声波影像进行影像增强型处理得到医学检查影像;根据目标检查部位从存储单元中获取对应的医学模型参数;根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。本发明能够在医学检查报告中提供医学模型参数和提升医学检查影像的质量,有利于提高医学检查的效率和准确性。

Description

基于人工智能的医学影像报告生成系统及方法
技术领域
本发明涉及医学影像处理技术领域,尤其涉及一种基于人工智能的医学影像报告生成系统及方法。
背景技术
医疗机构的医学图像产出数据量十分庞大,而图像数据往往包含大量潜在信息。目前医疗市场主要依靠人工判读分析医学图像,效率较低且能挖掘的信息有限,无法充分利用数据资源。近年来,随着深度学习的快速发展,机器学习各领域包括计算机视觉迅速被深度学习占领,深度学习已经在图像识别、语音识别等领域取得了令人瞩目的成果。作为机器学习中的重要方法之一,其强大的自动特征提取复杂模型构建以及图像处理能力,非常适合处理医学影像数据分析所面临的新问题,引起了生物医学领域研究人员的广泛关注。目前,医学图像辅助处理不能根据人体各个不同部位对医学影像进行特征分类训练建立医学模型,影响医生对患者进行医学检查的效率和准确性。此外,医生对患者进行医学检查过程中,由于外界环境的影像造成医学检查影像的质量不佳难以保证医生对患者进行医学检查的准确性,从而容易造成漏诊和误诊的情况发生。
发明内容
本发明的主要目的在于提供一种基于人工智能的医学影像报告生成系统及方法,旨在解决现有医学检查报告没有为医生提供医学检查的医学模型参数以及医学检查影像的质量不佳而影响医学检查准确性的问题。
为实现上述目的,本发明提供了一种基于人工智能的医学影像报告生成系统,应用于服务器中,该服务器连接有医学影像信息库和超声检查设备。所述基于人工智能的医学影像报告生成系统包括:影像信息获取模块,用于从医学影像信息库中获取医学影像信息;影像信息分类模块,用于基于不同人体部位将医学影像信息分类处理;医学模型建立模块,用于基于分类后的医学影像信息建立对应人体各部位的医学评估模型;医学模型训练模块,用于对人体各部位的医学评估模型进行训练处理,从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在服务器的存储单元中;医学影像采集模块,用于通过超声检查设备的身份证读卡器获取患者的身份信息,控制超声检查设备对患者的目标检查部位进行超声波检查来获得患者的超声波影像,以及对获取的超声波影像进行影像增强型处理得到医学检查影像;医学报告生成模块,用于根据患者的目标检查部位从存储单元中获取对应的医学模型参数,以及根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。
优选的,所述医学模型训练模块包括特征训练子模块和模型微调子模块,其中:所述特征训练子模块用于从所述医学评估模型中抽取局部特征信息,并利用人工神经网络对局部特征信息进行特征训练来获得一组特征向量;所述模型微调子模块用于将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。
优选的,所述人工神经网络是通过自动编码器来实现的分层神经网络,该自动编码器将局部特征信息作为第一层的输入并进行特征训练,将第一层的输出作为第二层的输入并进行特征训练,以及将第二层的输出作为第三层的输入并进行特征训练。
优选的,所述卷积神经网络包括多个神经元、特征提取层以及特征映射层,其中,每个神经元与特征映射层相连,所述特征映射层从每个神经元中提取特征信息,所述特征映射层由多个特征向量映射组成。
优选的,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理。
本发明还提供一种基于人工智能的医学影像报告生成方法,应用于服务器中,该服务器连接有医学影像信息库和超声检查设备。所述基于人工智能的医学影像报告生成方法包括步骤:从医学影像信息库中获取医学影像信息;基于不同人体部位将医学影像信息分类处理;基于分类后的医学影像信息建立对应人体各部位的医学评估模型;对人体各部位的医学评估模型进行训练处理;从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在服务器的存储单元中;通过超声检查设备的身份证读卡器获取患者的身份信息;控制超声检查设备对患者的目标检查部位进行超声波检查来获得患者的超声波影像;对获取的超声波影像进行影像增强型处理得到医学检查影像;根据患者的目标检查部位从存储单元中获取对应的医学模型参数;根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。
优选的,所述对人体各部位的医学评估模型进行训练处理的步骤包括:从所述医学评估模型中抽取局部特征信息,并利用人工神经网络对抽取的局部特征信息进行特征训练来获得一组特征向量;将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。
优选的,所述人工神经网络是通过自动编码器来实现的分层神经网络,该自动编码器将局部特征信息作为第一层的输入并进行特征训练,将第一层的输出作为第二层的输入并进行特征训练,以及将第二层的输出作为第三层的优选的,所述卷积神经网络包括多个神经元、特征提取层以及特征映射层,其中,每个神经元与特征映射层相连,所述特征映射层从每个神经元中提取特征信息,所述特征映射层由多个特征向量映射组成。
优选的,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理。
相较于现有技术,本发明所述基于人工智能的医学影像报告生成系统及方法能够通过从医学影像信息库获取医学影像信息,基于不同部位将所述医学影像信息分类处理,然后基于分类后的医学影像信息,建立对应各人体部位的医学评估模型,对所述医学评估模型训练处理,最后保存模型参数为后续对患者进行医学检查提供参考依据。此外,能够通过超声检查设备采集患者的超声波影像并对其进行影像增强型处理得到医学检查影像,最后患者的身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告,作为医生为患者的医学影像检查作为参考依据,从而提高辅助医生对患者进行医学检查的效率及准确性。
附图说明
图1是本发明基于人工智能的医学影像报告生成系统优选实施例的应用环境示意图;
图2是本发明基于人工智能的医学影像报告生成方法的流程图。
本发明目的实现、功能特点及优点将结合实施例,参照附图做详细说明。
具体实施方式
为更进一步阐述本发明为达成上述目的所采取的技术手段及功效,以下结合附图及较佳实施例,对本发明的具体实施方式、结构、特征及其功效进行详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1所示,图1是本发明基于人工智能的医学影像报告生成系统优选实施例的应用环境示意图。在本实施例中,在本实施例中,所述医学影像报告生成系统10安装并运行于服务器1中。所述服务器1通过数据库连接与医学影像信息库2建立数据连接,以及通过通信网络4与超声检查设备3建立通信连接。所述服务器1可以为一种大型计算机、服务器等具有数据处理和通信功能的云端计算装置,所述数据库连接可以为开放数据库连接(OpenDatabase Connectivity,ODBC)以及Java数据库连接(Java Data Base Connectivity,JDBC)。所述医学影像信息库2存储有不同群体的人体医学影像信息,本发明所称不同群体可以按照性别来划分,例如男、女人群,也可以按照不同年龄段来划分,例如婴幼儿、儿童、少年、青少年、中年、老年人等群体。
所述超声检查设备3包括超声波装置31、身份证读卡器32以及通信接口33。所述超声检查设备3用于对患者的目标检查部位进行超声波检查,获得目标检查部位的超声波影像。在本实施例中,所述超声波装置31可以是现有医学影像检查的超声波装置。当患者靠近超声检查设备3时,医生开启超声检查设备3的开关,超声检查设备3的超声波装置31对患者的目标检查部位进行超声波检查,从而获得目标检查部位的超声波影像,并将超声波影像通过通信接口33发送至服务器1。所述身份证读卡器32为现有技术的读取个人身份信息的光电感应模块,当患者将居民二代省份证放置在身份证读卡器32的光电感应区域,能够读取患者的二代身份证磁条上存储的身份信息,包括姓名、年龄、出生年月日以及居住地址等信息直接读入,可以节省患者录入个人身份信息的时间,以及由于录入时的输入错误造成个人身份信息的录入错误。所述通信接口33与服务器1的通信单元13相匹配,两者均支持远程或近距离通讯,例如支持有线或近距离通信的无线通讯接口。所述通信接口33将个人身份信息以及超声波影像通过通信网络4发送至服务器1。
所述通信网络4可以是一种包括局域网(LAN)、广域网(WAN)的网际网络,或者是一种包括GSM、GPRS、CDMA的无线传输网络,用于医学影像信息的传输。
在本实施例中,所述服务器1包括,但不仅限于,医学影像报告生成系统10、存储单元11、处理单元12、通信单元13和输出单元14。所述存储单元11、通信单元13和输出单元14均通过数据总线连接至处理单元12,并能通过处理单元12与所述医学影像报告生成系统10进行信息交互。所述存储单元11可以为一种只读存储单元ROM,电可擦写存储单元EEPROM或快闪存储单元FLASH等存储器。所述处理单元12可以为一种中央处理器(CPU)、微处理器、微控制器(MCU)、数据处理芯片、或者具有数据处理功能的信息处理单元。所述通信单元13可以为一种具有远程无线通讯功能的无线通讯接口,例如支持GSM、GPRS、CDMA的通讯接口。所述输出单元14可以连接用于显示医学检查报告的显示屏,可以连接用于打印医学检查报告的打印机,亦可以通过通信网络4连接至供医生查看医学检查报告的医生工作站。
在本实施例中,所述医学影像报告生成系统10包括影像信息获取模块101、影像信息分类模块102、医学模型建立模块103、医学模型训练模块104、医学影像采集模块105以及医学报告生成模块106。其中,所述医学模型训练模块104包括特征训练子模块1041和模型微调子模块1042。本发明所称的模块是指一种能够被服务器1的处理单元12执行并且能够完成固定功能的一系列计算机程序指令段,其存储述服务器1的存储单元11中。
所述影像信息获取模块101用于从医学影像信息库2中获取医学影像信息。所述医学影像信息包括,但不限于,核磁、CT、超声、X光机、红外仪等医疗检测设备产生的医学检查影像,这些医学检查影像可以通过DICOM3.0国际标准接口以数字化的方式作为医学评估模型输入的影像信息。
所述影像信息分类模块102用于基于不同人体部位将所述医学影像信息进行分类处理。由于人体部位数据的非统一性,本发明将各部位的医学影像信息进行分类处理,将同一部位的医学影像信息作为一小类,便于后续的医学评估模型计算与处理。
所述医学模型建立模块103用于基于分类后的医学影像信息建立对应人体各部位的医学评估模型。在本实施例中,人体各部位对应的各个医学评估模型的建立是基于分类后的医学影像信息,所以各个医学评估模型之间是相互独立的,可以并行学习训练。
所述医学模型训练模块104用于对人体各部位的医学评估模型进行训练处理,从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在存储单元11中。本发明基于分类数据的医学评估模型建立与计算医学模型参数,为后续医生为患者进行医学检查提供参考依据。
所述特征训练子模块1041用于从所述医学评估模型中抽取局部特征信息,并利用人工神经网络(Artificial Neural Network,ANN)对抽取的局部特征信息进行特征训练来获得一组特征向量。在本实施例中,所述人工神经网络是通过自动编码器来实现的分层神经网络,该自动编码器将局部特征信息作为第一层的输入并进行特征训练,将第一层的输出作为第二层的输入并进行特征训练,将第二层的输出作为第三层的输入并进行特征训练。自动编码器将抽取的医学影像信息作为输入,通过第一层到第二层的编码来实现特征训练,以及通过第二层到第三层的解码来还原医学影像信息。
所述模型微调子模块1042用于将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。在本实施例中,所述卷积神经网络(Convolutional Neural Network,CNN)是一种前馈神经网络。一般地,所述卷积神经网络包括多个神经元、特征提取层以及特征映射层,其中,每个神经元与特征映射层相连,所述特征映射层从每个神经元中提取特征信息,所述特征映射层由多个特征向量映射组成。每个特征向量映射是一个平面,平面上所有神经元的权值相等。卷积神经网络中的每一个卷积层都紧跟着一个用来求局部平均与二次提取的计算层,这种特有的两次特征提取结构减小了特征分辨率。本发明对将深度学习中无监督特征训练与卷积神经网络相结合,不仅能够应用更多医学评估模型的医学影像信息,而且能够增强卷积神经网络的特征训练能力,降低医学评估模型训练难度。
所述医学影像采集模块105用于通过超声检查设备3的身份证读卡器32获取患者的身份信息。在本实施例中,所述超声检查设备3的身份证读卡器32获取患者的身份信息,并根据患者的身份信息生成二维识别码。在本实施例中,当患者将二代身份证放置在身份证读卡器32的读卡区域,身份证读卡器32从患者的二代身份证磁条上读取个人身份信息,包括姓名、年龄、出生年月日以及居住地址等信息,可以节省患者录入个人身份信息的时间,以及由于录入时的输入错误造成个人身份信息的录入错误。
所述医学影像采集模块105还用于控制超声检查设备3的超声波装置31对患者的目标检查部位进行超声波检查来获得患者的超声波影像,以及对获取的超声波影像进行影像增强型处理得到医学检查影像。具体地,当超声检查设备3的开关被医生或者患者开启时,医学影像采集模块105检测到通信端口11与超声检查设备3的通信单元33建立通信连接,并产生超声检查指令至超声检查设备3控制超声波装置31对目标检查部位进行超声波检查来获得目标检查部位的超声波影像。由于超声检查设备3发出的超声波会受到外界环境因素的干扰,可能会造成超声波影像失真,医学影像采集模块105能够对获取的超声波影像进行影像增强型处理得到医学检查影像,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理,影像增强型处理方式均为现有技术对图形处理的常用方式,本实例不作具体赘述。
所述医学报告生成模块106用于根据患者的目标检查部位从存储单元11中获取对应的医学模型参数,以及根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。在本实施例中,假如超声检查设备3采集了患者的肺部影像,医学报告生成模块106从存储单元11中获取患者肺部对应的医学模型参数。此外,医学报告生成模块106通过输出单元14输出患者的医学检查报告供医生查看。具体地,医学报告生成模块106将医学检查报告显示在连接至输出单元14的显示屏上,可以控制连接至输出单元14的打印机打医学检查报告,也可以将医学检查报告输出至连接至服务器1上的医生工作站供医生查看,以供医生对患者进行医学检查提供依据,可以辅助医生准确地对医学检查影像进行分析并做出医学检查报告,从而辅助医生提高对患者进行医学检查的效率及准确性。
如图2所示,图2是本发明基于人工智能的医学影像报告生成方法优选实施例的流程图。本实施例一并结合图1所示,所述基于人工智能的医学影像报告生成方法应用于服务器1中,该方法包括如下步骤S21至S30。
步骤S21,影像信息获取模块101从医学影像信息库2中获取医学影像信息。在本实施例中,所述医学影像信息包括,但不限于,核磁、CT、超声、X光机、红外仪等医疗检测设备产生的医学检查影像,这些医学检查影像可以通过DICOM3.0国际标准接口以数字化的方式作为医学评估模型输入的影像信息。
步骤S22,影像信息分类模块102基于不同人体部位将所述医学影像信息进行分类处理。由于人体部位数据的非统一性,本发明将各部位的医学影像信息进行分类处理,将同一部位的医学影像信息作为一小类,便于后续的医学评估模型计算与处理。
步骤S23,医学模型建立模块103基于分类后的医学影像信息建立对应人体各部位的医学评估模型。在本实施例中,人体各部位对应的各个医学评估模型的建立是基于分类后的医学影像信息,所以各个医学评估模型之间是相互独立的,可以并行学习训练。
步骤S24,医学模型训练模块104对人体各部位的医学评估模型进行训练处理。所述对人体各部位的医学评估模型进行训练处理包括如下步骤:从所述医学评估模型中抽取局部特征信息,并利用人工神经网络对抽取的局部特征信息进行特征训练来获得一组特征向量;将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。本发明对将深度学习中无监督特征训练与卷积神经网络相结合,不仅能够应用更多医学评估模型的医学影像信息,而且能够增强卷积神经网络的特征训练能力,降低医学评估模型训练难度。
步骤S25,医学模型训练模块104从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在存储单元11中。本发明基于分类数据的医学评估模型建立与计算医学模型参数,为后续医生为患者进行医学检查提供参考依据。
步骤S26,医学影像采集模块105通过超声检查设备3的身份证读卡器32获取患者的身份信息。在本实施例中,所述超声检查设备3的身份证读卡器32获取患者的身份信息,并根据患者的身份信息生成二维识别码。在本实施例中,当患者将二代身份证放置在身份证读卡器32的读卡区域,身份证读卡器32从患者的二代身份证磁条上读取个人身份信息,包括姓名、年龄、出生年月日以及居住地址等信息,可以节省患者录入个人身份信息的时间,以及由于录入时的输入错误造成个人身份信息的录入错误。
步骤S27,医学影像采集模块105控制超声检查设备3的超声波装置31对患者的目标检查部位进行超声波检查来获得患者的超声波影像。具体地,当超声检查设备3的开关被医生或者患者开启时,超声检查模块102检测到通信端口11与超声检查设备3的通信单元33建立通信连接,并产生超声检查指令至超声检查设备3控制超声波装置31对目标检查部位进行超声波检查来获得目标检查部位的超声波影像。
步骤S28,医学影像采集模块105对获取的超声波影像进行影像增强型处理得到医学检查影像。由于超声检查设备3发出的超声波会受到外界环境因素的干扰,可能会造成超声波影像失真,医学影像采集模块105能够对获取的超声波影像进行影像增强型处理得到医学检查影像,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理,影像增强型处理方式均为现有技术对图形处理的常用方式,本实例不作具体赘述。
步骤S29,医学报告生成模块106根据患者的目标检查部位从存储单元11中获取对应的医学模型参数。在本实施例中,假如超声检查设备3采集了患者的肺部影像,医学报告生成模块106从存储单元11中获取患者肺部对应的医学模型参数。
步骤S30,医学报告生成模块106根据患者的身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。此外,医学报告生成模块106通过输出单元14输出患者的医学检查报告供医生查看,具体地,医学报告生成模块106将医学检查报告显示在连接至输出单元14的显示屏上,可以控制连接至输出单元14的打印机打医学检查报告,也可以将医学检查报告输出至连接至服务器1上的医生工作站供医生查看,以供医生对患者进行医学检查提供依据,可以辅助医生准确地对医学检查影像进行分析并做出医学检查报告,从而辅助医生提高对患者进行医学检查的效率及准确性。
本发明所述基于人工智能的医学影像报告生成系统及方法通过从医学影像信息库获取医学影像信息,基于不同部位将所述医学影像信息分类处理,然后基于分类后的医学影像信息,建立对应各人体部位的医学评估模型,对所述医学评估模型训练处理,最后保存模型参数为后续对患者进行医学检查提供参考依据。通过超声检查设备采集患者的超声波影像并对其进行影像增强型处理得到医学检查影像,最后患者的身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告,作为医生为患者的医学影像检查作为参考依据,从而提高辅助医生对患者进行医学检查的效率及准确性。
本领域技术人员可以理解,上述实施方式中各种方法的全部或部分步骤可以通过相关程序指令完成,该程序可以存储于计算机可读存储介质中,存储介质可以包括:只读存储器、随机存储器、磁盘或光盘等。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效功能变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于人工智能的医学影像报告生成系统,应用于服务器中,该服务器连接有医学影像信息库和超声检查设备,其特征在于,所述基于人工智能的医学影像报告生成系统包括:
影像信息获取模块,用于从医学影像信息库中获取医学影像信息;
影像信息分类模块,用于基于不同人体部位将医学影像信息分类处理;
医学模型建立模块,用于基于分类后的医学影像信息建立对应人体各部位的医学评估模型;
医学模型训练模块,用于对人体各部位的医学评估模型进行训练处理,从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在服务器的存储单元中;
医学影像采集模块,用于通过超声检查设备的身份证读卡器获取患者的身份信息,控制超声检查设备对患者的目标检查部位进行超声波检查来获得患者的超声波影像,以及对获取的超声波影像进行影像增强型处理得到医学检查影像;
医学报告生成模块,用于根据患者的目标检查部位从存储单元中获取对应的医学模型参数,以及根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。
2.如权利要求1所述的基于人工智能的医学影像报告生成系统,其特征在于,所述医学模型训练模块包括特征训练子模块和模型微调子模块,其中:
所述特征训练子模块用于从所述医学评估模型中抽取局部特征信息,并利用人工神经网络对局部特征信息进行特征训练来获得一组特征向量;
所述模型微调子模块用于将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。
3.如权利要求2所述的基于人工智能的医学影像报告生成系统,其特征在于,所述人工神经网络是通过自动编码器来实现的分层神经网络,该自动编码器将局部特征信息作为第一层的输入并进行特征训练,将第一层的输出作为第二层的输入并进行特征训练,以及将第二层的输出作为第三层的输入并进行特征训练。
4.如权利要求2所述的基于人工智能的医学影像报告生成系统,其特征在于,所述卷积神经网络包括多个神经元、特征提取层以及特征映射层,其中,每个神经元与特征映射层相连,所述特征映射层从每个神经元中提取特征信息,所述特征映射层由多个特征向量映射组成。
5.如权利要求1所述的基于人工智能的医学影像报告生成系统,其特征在于,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理。
6.一种基于人工智能的医学影像报告生成方法,应用于服务器中,该服务器连接有医学影像信息库和超声检查设备,其特征在于,所述基于人工智能的医学影像报告生成方法包括步骤:
从医学影像信息库中获取医学影像信息;
基于不同人体部位将医学影像信息分类处理;
基于分类后的医学影像信息建立对应人体各部位的医学评估模型;
对人体各部位的医学评估模型进行训练处理;
从训练好的医学评估模型中抽取医学模型参数,并将医学模型参数保存在服务器的存储单元中;
通过超声检查设备的身份证读卡器获取患者的身份信息;
控制超声检查设备对患者的目标检查部位进行超声波检查来获得患者的超声波影像;
对获取的超声波影像进行影像增强型处理得到医学检查影像;
根据患者的目标检查部位从存储单元中获取对应的医学模型参数;
根据身份信息、医学检查影像及对应的医学模型参数生成患者的医学检查报告。
7.如权利要求6所述的基于人工智能的医学影像报告生成方法,其特征在于,所述对人体各部位的医学评估模型进行训练处理的步骤包括:
从所述医学评估模型中抽取局部特征信息,并利用人工神经网络对抽取的局部特征信息进行特征训练来获得一组特征向量;
将所述特征向量应用于卷积神经网络的训练中,并根据训练结果对医学评估模型进行微调处理。
8.如权利要求7所述的基于人工智能的医学影像报告生成方法,其特征在于,所述人工神经网络是通过自动编码器来实现的分层神经网络,该自动编码器将局部特征信息作为第一层的输入并进行特征训练,将第一层的输出作为第二层的输入并进行特征训练,以及将第二层的输出作为第三层的输入并进行特征训练。
9.如权利要求7所述的基于人工智能的医学影像报告生成方法,其特征在于,所述卷积神经网络包括多个神经元、特征提取层以及特征映射层,其中,每个神经元与特征映射层相连,所述特征映射层从每个神经元中提取特征信息,所述特征映射层由多个特征向量映射组成。
10.如权利要求6所述的基于人工智能的医学影像报告生成方法,其特征在于,所述影像增强型处理包括对医学检查影像进行灰度拉伸、色度扩展、轮廓增强处理。
CN201710850288.5A 2017-09-15 2017-09-15 基于人工智能的医学影像报告生成系统及方法 Pending CN107767928A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710850288.5A CN107767928A (zh) 2017-09-15 2017-09-15 基于人工智能的医学影像报告生成系统及方法
PCT/CN2017/116663 WO2019052062A1 (zh) 2017-09-15 2017-12-15 基于人工智能的医学影像报告生成系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710850288.5A CN107767928A (zh) 2017-09-15 2017-09-15 基于人工智能的医学影像报告生成系统及方法

Publications (1)

Publication Number Publication Date
CN107767928A true CN107767928A (zh) 2018-03-06

Family

ID=61266073

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710850288.5A Pending CN107767928A (zh) 2017-09-15 2017-09-15 基于人工智能的医学影像报告生成系统及方法

Country Status (2)

Country Link
CN (1) CN107767928A (zh)
WO (1) WO2019052062A1 (zh)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109065110A (zh) * 2018-07-11 2018-12-21 哈尔滨工业大学 一种基于深度学习方法的自动生成医学影像诊断报告的方法
CN109346143A (zh) * 2018-12-07 2019-02-15 蔡荣杰 一种提高超声检查报告编辑速度的方法
CN109685798A (zh) * 2018-12-26 2019-04-26 北京邮电大学 一种确定有效医学图像的方法及装置
CN109935294A (zh) * 2019-02-19 2019-06-25 广州视源电子科技股份有限公司 一种文本报告输出方法、装置、存储介质及终端
CN110162398A (zh) * 2019-04-11 2019-08-23 平安科技(深圳)有限公司 一种疾病分析模型的调度方法、装置及终端设备
CN110265140A (zh) * 2019-01-17 2019-09-20 中国医药大学附设医院 足畸形检测模型、足畸形检测系统及足畸形检测方法
CN110335259A (zh) * 2019-06-25 2019-10-15 腾讯科技(深圳)有限公司 一种医学影像识别方法、装置和存储介质
WO2019218451A1 (zh) * 2018-05-14 2019-11-21 平安科技(深圳)有限公司 一种医学报告的生成方法及设备
CN110490841A (zh) * 2019-07-18 2019-11-22 上海联影智能医疗科技有限公司 计算机辅助影像分析方法、计算机设备和存储介质
CN110634547A (zh) * 2018-06-22 2019-12-31 西门子医疗有限公司 求出诊断检查设备中检查持续时间的方法和诊断检查设备
CN111192682A (zh) * 2019-12-25 2020-05-22 上海联影智能医疗科技有限公司 一种影像操练数据处理方法、系统及存储介质
CN111341401A (zh) * 2018-12-27 2020-06-26 管伟 一种医学影像信息的存储及交换智慧医疗系统
CN111387981A (zh) * 2020-04-07 2020-07-10 解春丽 脑图谱分析系统
CN111583249A (zh) * 2020-05-12 2020-08-25 上海深至信息科技有限公司 一种医学图像的质量监控系统及方法
CN111882652A (zh) * 2019-05-02 2020-11-03 西门子医疗有限公司 生成三维图像的报告
CN112037164A (zh) * 2019-06-03 2020-12-04 睿传数据股份有限公司 医学影像中身体部位识别方法及装置
CN112055879A (zh) * 2018-03-16 2020-12-08 皇家飞利浦有限公司 用于基于医学报告中的文本数据来生成医学图像的方法和系统
CN112107332A (zh) * 2020-10-10 2020-12-22 高慧强 医疗超声影像的处理方法、设备和系统
CN112216381A (zh) * 2020-10-14 2021-01-12 南通市第一人民医院 一种影像科患者检查核对方法及系统
CN112652390A (zh) * 2019-10-11 2021-04-13 无锡祥生医疗科技股份有限公司 超声影像调节自定义方法、存储介质及超声诊断设备
CN112951384A (zh) * 2021-02-04 2021-06-11 慧影医疗科技(北京)有限公司 用于医学影像设备的数据模拟发生方法及系统
CN113053494A (zh) * 2019-12-27 2021-06-29 无锡祥生医疗科技股份有限公司 基于人工智能的pacs系统及其设计方法
CN113113118A (zh) * 2021-03-31 2021-07-13 上海深至信息科技有限公司 一种远程阅片系统及方法
CN113256596A (zh) * 2021-06-08 2021-08-13 北博(厦门)智能科技有限公司 一种基于神经网络模型的医院影像检查方法及终端
CN113539408A (zh) * 2021-08-31 2021-10-22 北京字节跳动网络技术有限公司 一种医学报告生成方法、模型的训练方法、装置及设备
CN113556978A (zh) * 2018-12-11 2021-10-26 深圳市智慧健康产业发展有限公司 一种b超智能辅助采集方法及系统
CN116072255A (zh) * 2023-04-07 2023-05-05 北京大学第三医院(北京大学第三临床医学院) 基于人工智能的颈椎退行性疾病ct检查结构化报告系统
TWI806238B (zh) * 2021-11-12 2023-06-21 台捷醫資股份有限公司 超音波影像辨識系統以及資料輸出模組

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112509660A (zh) * 2020-11-30 2021-03-16 北京百度网讯科技有限公司 体检报告生成方法、装置、设备和存储介质
CN116681681B (zh) * 2023-06-13 2024-04-02 富士胶片(中国)投资有限公司 内窥镜图像的处理方法、装置、用户设备及介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10964424B2 (en) * 2016-03-09 2021-03-30 EchoNous, Inc. Ultrasound image recognition systems and methods utilizing an artificial intelligence network
CN106570331A (zh) * 2016-11-07 2017-04-19 万里云医疗信息科技(北京)有限公司 一种动态诊断报告的生成方法及生成系统
CN106777953A (zh) * 2016-12-09 2017-05-31 江西中科九峰智慧医疗科技有限公司 医学影像数据的分析方法及系统
CN106909778B (zh) * 2017-02-09 2019-08-27 北京市计算中心 一种基于深度学习的多模态医学影像识别方法及装置
CN107145910A (zh) * 2017-05-08 2017-09-08 京东方科技集团股份有限公司 医学影像的表现生成系统、其训练方法及表现生成方法

Cited By (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112055879A (zh) * 2018-03-16 2020-12-08 皇家飞利浦有限公司 用于基于医学报告中的文本数据来生成医学图像的方法和系统
WO2019218451A1 (zh) * 2018-05-14 2019-11-21 平安科技(深圳)有限公司 一种医学报告的生成方法及设备
CN110634547B (zh) * 2018-06-22 2023-08-22 西门子医疗有限公司 求出诊断检查设备中检查持续时间的方法和诊断检查设备
US11647918B2 (en) 2018-06-22 2023-05-16 Siemens Healtchare GmbH Method and diagnostic examination device for estimating an examination duration that is tolerable by a patient
CN110634547A (zh) * 2018-06-22 2019-12-31 西门子医疗有限公司 求出诊断检查设备中检查持续时间的方法和诊断检查设备
CN109065110B (zh) * 2018-07-11 2021-10-19 哈尔滨工业大学 一种基于深度学习方法的自动生成医学影像诊断报告的方法
CN109065110A (zh) * 2018-07-11 2018-12-21 哈尔滨工业大学 一种基于深度学习方法的自动生成医学影像诊断报告的方法
CN109346143B (zh) * 2018-12-07 2021-05-11 蔡荣杰 一种提高超声检查报告编辑速度的方法
CN109346143A (zh) * 2018-12-07 2019-02-15 蔡荣杰 一种提高超声检查报告编辑速度的方法
CN113556978A (zh) * 2018-12-11 2021-10-26 深圳市智慧健康产业发展有限公司 一种b超智能辅助采集方法及系统
CN109685798A (zh) * 2018-12-26 2019-04-26 北京邮电大学 一种确定有效医学图像的方法及装置
CN111341401A (zh) * 2018-12-27 2020-06-26 管伟 一种医学影像信息的存储及交换智慧医疗系统
CN111341402A (zh) * 2018-12-27 2020-06-26 管伟 医学影像信息的存储及交换智慧医疗系统
CN111341402B (zh) * 2018-12-27 2024-04-16 声源康医疗科技(甘肃)有限公司 医学影像信息的存储及交换智慧医疗系统
CN110265140A (zh) * 2019-01-17 2019-09-20 中国医药大学附设医院 足畸形检测模型、足畸形检测系统及足畸形检测方法
CN109935294A (zh) * 2019-02-19 2019-06-25 广州视源电子科技股份有限公司 一种文本报告输出方法、装置、存储介质及终端
CN110162398A (zh) * 2019-04-11 2019-08-23 平安科技(深圳)有限公司 一种疾病分析模型的调度方法、装置及终端设备
CN110162398B (zh) * 2019-04-11 2024-05-03 平安科技(深圳)有限公司 一种疾病分析模型的调度方法、装置及终端设备
WO2020206911A1 (zh) * 2019-04-11 2020-10-15 平安科技(深圳)有限公司 一种疾病分析模型的调度方法、装置及终端设备
CN111882652A (zh) * 2019-05-02 2020-11-03 西门子医疗有限公司 生成三维图像的报告
CN112037164A (zh) * 2019-06-03 2020-12-04 睿传数据股份有限公司 医学影像中身体部位识别方法及装置
CN112037164B (zh) * 2019-06-03 2024-03-15 睿传数据股份有限公司 医学影像中身体部位识别方法及装置
CN110335259B (zh) * 2019-06-25 2021-08-31 腾讯科技(深圳)有限公司 一种医学影像识别方法、装置和存储介质
CN110335259A (zh) * 2019-06-25 2019-10-15 腾讯科技(深圳)有限公司 一种医学影像识别方法、装置和存储介质
CN110490841A (zh) * 2019-07-18 2019-11-22 上海联影智能医疗科技有限公司 计算机辅助影像分析方法、计算机设备和存储介质
CN110490841B (zh) * 2019-07-18 2022-07-05 上海联影智能医疗科技有限公司 计算机辅助影像分析方法、计算机设备和存储介质
CN112652390A (zh) * 2019-10-11 2021-04-13 无锡祥生医疗科技股份有限公司 超声影像调节自定义方法、存储介质及超声诊断设备
CN112652390B (zh) * 2019-10-11 2023-11-24 无锡祥生医疗科技股份有限公司 超声影像调节自定义方法、存储介质及超声诊断设备
CN111192682B (zh) * 2019-12-25 2024-04-09 上海联影智能医疗科技有限公司 一种影像操练数据处理方法、系统及存储介质
CN111192682A (zh) * 2019-12-25 2020-05-22 上海联影智能医疗科技有限公司 一种影像操练数据处理方法、系统及存储介质
CN113053494A (zh) * 2019-12-27 2021-06-29 无锡祥生医疗科技股份有限公司 基于人工智能的pacs系统及其设计方法
CN113053494B (zh) * 2019-12-27 2023-11-21 无锡祥生医疗科技股份有限公司 基于人工智能的pacs系统及其设计方法
CN111387981A (zh) * 2020-04-07 2020-07-10 解春丽 脑图谱分析系统
CN111583249A (zh) * 2020-05-12 2020-08-25 上海深至信息科技有限公司 一种医学图像的质量监控系统及方法
CN111583249B (zh) * 2020-05-12 2023-12-01 上海深至信息科技有限公司 一种医学图像的质量监控系统及方法
CN112107332A (zh) * 2020-10-10 2020-12-22 高慧强 医疗超声影像的处理方法、设备和系统
CN112216381A (zh) * 2020-10-14 2021-01-12 南通市第一人民医院 一种影像科患者检查核对方法及系统
CN112951384A (zh) * 2021-02-04 2021-06-11 慧影医疗科技(北京)有限公司 用于医学影像设备的数据模拟发生方法及系统
CN113113118A (zh) * 2021-03-31 2021-07-13 上海深至信息科技有限公司 一种远程阅片系统及方法
CN113256596A (zh) * 2021-06-08 2021-08-13 北博(厦门)智能科技有限公司 一种基于神经网络模型的医院影像检查方法及终端
CN113539408A (zh) * 2021-08-31 2021-10-22 北京字节跳动网络技术有限公司 一种医学报告生成方法、模型的训练方法、装置及设备
TWI806238B (zh) * 2021-11-12 2023-06-21 台捷醫資股份有限公司 超音波影像辨識系統以及資料輸出模組
CN116072255B (zh) * 2023-04-07 2023-06-27 北京大学第三医院(北京大学第三临床医学院) 基于人工智能的颈椎退行性疾病ct检查结构化报告系统
CN116072255A (zh) * 2023-04-07 2023-05-05 北京大学第三医院(北京大学第三临床医学院) 基于人工智能的颈椎退行性疾病ct检查结构化报告系统

Also Published As

Publication number Publication date
WO2019052062A1 (zh) 2019-03-21

Similar Documents

Publication Publication Date Title
CN107767928A (zh) 基于人工智能的医学影像报告生成系统及方法
CN107767935A (zh) 基于人工智能的医学影像分类处理系统及方法
CN108364006B (zh) 基于多模式深度学习的医学图像分类装置及其构建方法
Li et al. Accurate retinal vessel segmentation in color fundus images via fully attention-based networks
Zhang et al. Photoacoustic image classification and segmentation of breast cancer: a feasibility study
CN106056595B (zh) 基于深度卷积神经网络自动识别甲状腺结节良恶性的辅助诊断系统
CN112365464B (zh) 一种基于gan的医学图像病变区域弱监督定位方法
CN106780448A (zh) 一种基于迁移学习与特征融合的超声甲状腺结节良恶性分类方法
JP7373042B2 (ja) グラフモデルに基づく脳機能レジストレーション方法
Luo et al. Micro-vessel image segmentation based on the AD-UNet model
CN109035160A (zh) 医学影像的融合方法及基于融合医学影像学习的图像检测方法
CN106682616A (zh) 基于双通道特征深度学习的新生儿疼痛表情识别方法
CN107993221B (zh) 心血管光学相干断层oct图像易损斑块自动识别方法
CN105232081A (zh) 医学超声辅助自动诊断装置及方法
CN106408001A (zh) 基于深度核哈希的感兴趣区域快速检测方法
CN106991694A (zh) 基于显著区域面积匹配的心脏ct与超声图像配准方法
CN110689521B (zh) 一种医学影像所属人体部位的自动识别方法及系统
CN109645983A (zh) 一种基于多模块神经网络的不平衡心拍分类方法
CN111862075A (zh) 一种基于深度学习的肺部图像分析系统及其分析方法
CN110570446A (zh) 一种基于生成对抗网络的眼底视网膜图像分割方法
CN113782184A (zh) 一种基于面部关键点与特征预学习的脑卒中辅助评估系统
CN114398979A (zh) 一种基于特征解耦的超声图像甲状腺结节分类方法
CN113096137A (zh) 一种oct视网膜图像领域适应分割方法及系统
CN112036298A (zh) 一种基于双段区块卷积神经网络的细胞检测方法
Singh et al. Detail enhanced feature-level medical image fusion in decorrelating decomposition domain

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180306