CN114708362B - 一种基于web的人工智能预测结果的展示方法 - Google Patents
一种基于web的人工智能预测结果的展示方法 Download PDFInfo
- Publication number
- CN114708362B CN114708362B CN202210198817.9A CN202210198817A CN114708362B CN 114708362 B CN114708362 B CN 114708362B CN 202210198817 A CN202210198817 A CN 202210198817A CN 114708362 B CN114708362 B CN 114708362B
- Authority
- CN
- China
- Prior art keywords
- disease
- thermodynamic diagram
- image
- thermodynamic
- different
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013473 artificial intelligence Methods 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000010586 diagram Methods 0.000 claims abstract description 194
- 201000010099 disease Diseases 0.000 claims abstract description 151
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims abstract description 151
- 230000007170 pathology Effects 0.000 claims abstract description 41
- 238000002546 full scan Methods 0.000 claims abstract description 18
- 230000001575 pathological effect Effects 0.000 claims description 40
- 238000002372 labelling Methods 0.000 claims description 33
- 239000000126 substance Substances 0.000 claims description 15
- 230000006870 function Effects 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 claims description 11
- 238000013528 artificial neural network Methods 0.000 claims description 8
- 230000011218 segmentation Effects 0.000 claims description 8
- 230000003287 optical effect Effects 0.000 claims description 5
- 210000000056 organ Anatomy 0.000 claims description 4
- 239000000203 mixture Substances 0.000 claims description 3
- 238000000638 solvent extraction Methods 0.000 claims description 3
- 238000010438 heat treatment Methods 0.000 claims 3
- 238000005192 partition Methods 0.000 claims 1
- 238000012800 visualization Methods 0.000 abstract 1
- 230000003902 lesion Effects 0.000 description 17
- 230000009286 beneficial effect Effects 0.000 description 10
- 239000003086 colorant Substances 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000036285 pathological change Effects 0.000 description 2
- 231100000915 pathological change Toxicity 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000000120 cytopathologic effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002547 new drug Substances 0.000 description 1
- 238000010827 pathological analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/40—Filling a planar surface by adding surface attributes, e.g. colour or texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Investigating Or Analysing Biological Materials (AREA)
Abstract
本发明提供了一种基于web的人工智能预测结果的展示方法，包括获取病理全扫描图像；其中，所述病理全扫描图像为多层级可视化图像；将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图；基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果；根据所述预测结果，将所述完整热力图切割为病种分布小图；接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面；在所述小图加载到wed页面后，在所述wed页面上展示病种热力图。
Description
技术领域
本发明涉及医疗展示技术领域，特别涉及一种基于web的人工智能预测结果的展示方法。
背景技术
目前，随着人工智能技术的发展，人工智能也开始与医疗领域结合。人工智能在医疗领域的应用主要有以下四个方向：第一，医疗图像，包括X光、CT、眼底、病理等等。第二，基于人工智能的病例等大数据进行发病预测。第三，用人工智能帮助手术机器人寻找最优手术方案。第四，基于人工智能的新药研发。
其中凭借人工智能技术在图像识别领域的发展，人工智能技术在医疗图像的应用取得一定成效，但远未实现成熟的应用。相比于X光、CT等医疗影像，病理图像的人工智能辅助诊断面临着更大的挑战。
在现有技术中：现有的预测结果展示技术，主要使用标注线来显示人工智能模型预测的结果，该方法使用标注线圈定一个区域来表示预测结果，即病变区域，标注线提供的信息很少，只能通过标注线知道病变区域的轮廓，标注线只能表示简单的轮廓，复杂的轮廓使用标注线时，反而会导致信息难以理解。
首先借助计算机辅助病理诊断首先要将病理玻片数字化。借助专用的数字病理扫描仪通过扫描病理玻片得到全扫描图像（whole slide image，WSI）。病理全扫描图像通过人工智能系统预测，把病理图像上病变区域使用热力图的形式标记出来（热力图是通过颜色的值来显示病变区域的概率）。
本发明提出一种同时查看病理全扫描图片和预测结果的热力图的方法，该方法可以非常轻易的对比病变区域原图和热力图，将提高热力图辅助诊断的效率。
发明内容
本发明提供一种基于web的人工智能预测结果的展示方法，用以解决现有的预测结果展示技术，主要使用标注线来显示人工智能模型预测的结果，该方法使用标注线圈定一个区域来表示预测结果，即病变区域，标注线提供的信息很少，只能通过标注线知道病变区域的轮廓，标注线只能表示简单的轮廓，复杂的轮廓使用标注线时，反而会导致信息难以理解的情况。
一种基于web的人工智能预测结果的展示方法，其特征在于，包括：
获取病理全扫描图像；其中，
所述病理全扫描图像为多层级可视化图像；
将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图；
基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果；
根据所述预测结果，将所述完整热力图切割为病种分布小图；
接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面；
在所述小图加载到wed页面后，在所述wed页面上展示病种热力图。
作为本发明的一种实施例，所述获取病理全扫描图像，包括：
通过扫描设备对患者的器官组织进行扫描，获取高分辨率数字图像；其中，
所述扫描设备包括：全自动显微镜和光学方法装置；
将所述高分辨率数字图像通过无缝隙拼接处理，生成多层可视化图像；
将所述多层可视化图像作为病理全扫描图像。
作为本发明的一种实施例，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，包括：
将所述病理全扫描图像进行第一次切割，生成分割小图；
通过行和列对所述分割小图进行标记；
将分割标记后的分割小图输入预设的人工智能模型进行预测，生成热力图块；
将所述热力图块进行拼接，生成完整热力图。
作为本发明的一种实施例，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，还包括：
预先配置通用深度神经网络生成器；
获取历史病理扫描图像标注数据，确定标注规则，并生成图像标注模板；其中，
所述标注规则包括：轮廓标注规则和标注线规则；
预先将图像标注模板导入所述深度神经网络生成器，生成第一智能标注模型；
获取热力图的划分规则；其中，
所述划分规则包括：区域划分规则和颜色深度规则；
将所述划分规则代入所述第一智能标注模型，生成人工智能预测模型。
作为本发明的一种实施例，所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，包括：
获取所述完整热力图，并对所述完整热力图进行切割处理，生成多个热力小图；
获取病种数据和历史病理扫描图像标注数据，确定不同病种对应的病理扫描图像；
根据所述病理扫描图像，确定对应的标注图像；
根据所述标注图像和人工智能预测模型，确定所述标注图像对应的热力图的对应关系；
根据所述对应关系对所述热力小图进行预测，确定不同热力小图对应的热力病种数据；
根据所述热力病种数据，将所述热力小图拼接为完整热力图，确定所述完整热力图上不同区域的病种，生成预测结果。
作为本发明的一种实施例，所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，还包括：
步骤1：基于不同病种的不同热力图，构建确定病种热力图特征函数；
其中，
表示第
种病种的热力图的特征函数；
表示第
种病种的颜色特征；
表示第
种病种的分布特征；
表示第
种病种的热力图的混合高斯模型的期望值；
表
示不同病种热力图的混合高斯模型的平均期望值；
；
表示病种的总
数量；
步骤2：根据所述病种数据和历史病理扫描图像标注数据，构建病种标注的线性模型：
其中，
表示第
种病种的线性轮廓特征；
表示第
种病种的标注线特征；
步骤3：根据热力图的划分规则，构建不同病种的热力图模型：
其中，
表示第
种病种的区域划分特征；
表示第
种病种的颜色深度特征；
步骤4：根据所述热力图模型和线性模型，通过下式确定标注图像对应的热力图的对应关系的相关关系值：
其中，
表示标注图像对应的热力图的对应关系的相关关系值；
步骤5：根据所述相关关系值和病种热力图特征函数，构建病种预测模型：
其中，Y的值对应有唯一的病种热力图。
作为本发明的一种实施例，所述根据所述预测结果，将所述完整热力图切割为病种分布小图，包括：
根据所述预测结果，确定所述完整热力图上每个区域的病种信息；
根据所述病种信息，将所述热力图按照病种区域进行划分，生成病种分布小图；
将所述病种分布小图进行行数和列数标注，生成行列标注，并将每个病种分布小图以所述行列标注命名。
作为本发明的一种实施例，所述接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面，包括：
接收来自目标设备的加载请求；
根据所述加载请求，确定对应的wed页面地址；
根据所述wed页面地址将所述病种分布小图传输至所述wed页面进行加载；
根据加载结果，生成病种热力图。
作为本发明的一种实施例，所述在所述小图加载到we页面后，在所述wed页面上展示病种热力图，包括：
获取所述wed页面的病种分布小图的加载进度；
根据所述加载进度，判断所述病种分布小图是否完全加载至所述wed页面；
在所述病种分布小图全部加载至所述wed页面上时，对所述病种分布小图进行拼接，并在拼接完成后，通过wed页面展示并在热力图。
本发明有益效果在于：解决标注线展示信息不完整问题，热力图不仅可以展示病变区域轮廓，并且可以通过颜色来表示每个像素点上概率，这样可以清晰的展示该病变区域的概率分布；2.解决复杂标注线难以理解的问题，使用热力图之后，对于凹陷的区域，可以非常直观的展示；3.提供重点信息，使用标注线，只提供简单轮廓，无法直观的知道该关注的重点区域，在使用热力图后，我们通过颜色来区分概率高低，这样我们只需要关注深色区域即可。热力图简单明了，非常直观表达多种信息，包括预测位置，概率等，而且让使用的人关注重点区域（概率高，颜色深的区域）；可以加载多个热力图，不同模型预测的结果并不一样，可以切换不同的热力图，方便查看对比。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例中一种基于web的人工智能预测结果的展示方法的方法流程图；
图2为本发明实施例中一种基于web的人工智能预测结果的展示方法的执行流程图；
图3为本发明实施例中一种基于web的人工智能预测结果的展示方法中本发明的热力图的实际展示图；
图4为本发明实施例中现有技术中线性标注病理图像的实际展示图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
在现有技术中，病理图像的展示多是线性标注图，如附图4所示，我们可以看出，对于不同的病理程度是根本无法从页面显示出来，必须通过很多的标注信息才能判断，不利于我们进行疾病诊断。
实施例1：
如附图1和附图2所示，一种基于web的人工智能预测结果的展示方法，包括：
获取病理全扫描图像；其中，
所述病理全扫描图像为多层级可视化图像；
病理全扫描图像是通过全自动显微镜或光学放大系统扫描采集得到高分辨数字图像，通过计算机进行高精度多视野无缝隙拼接和处理，从而获得的多层级可视化的图像。
将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图；
在现有技术中，热力图是以特殊高亮的形式显示访客热衷的页面区域和访客所在的地理区域的图示。热力图可以显示不可点击区域发生的事情。在本发明中，本发明将细胞病变的区域以热力图那种特殊高亮的形式进行显示，同样对于病变程度的不同，颜色深度不同，也就构成了多层级的表现。
基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果；不同的疾病与不同病理图像对应，因此，其热力图也是不同的；所以本发明可以通过热力图的形式对病理细胞进行一个预测，这个预测包括预测是什么类型的疾病，以及疾病的程度。
根据所述预测结果，将所述完整热力图切割为病种分布小图；
任何的病理图都是需要让人能看懂其表示的是什么，所以就需要进行一些标注，但是如果病理图特别大，只能在边缘进行标注，可能存在指代不清楚的问题，所以本发明就进行切割，切割之后，每一小块队徽进行一个标注命名，例如标注疾病细胞的病变程度，病变等级和病变范围等等。
接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面；在wed页面中，在展示病理图像的时候，可以展示原始的大图，也可以展示某一个区域的小图，这也是本发明进行大图切割为病种分布小图的原因。
在所述小图加载到wed页面后，在所述wed页面上展示病种热力图，最终的展示页面如附图3所示，颜色深的地方就代表着病变程度深，在图上还分布一些线条和一些没有病变的区域，她们可以通过不同的颜色去表示，而线条内部就是病变的范围和预计会影响的范围。
本发明有益效果在于：1、解决标注线展示信息不完整问题，热力图不仅可以展示病变区域轮廓，并且可以通过颜色来表示每个像素点上概率，这样可以清晰的展示该病变区域的概率分布；2.解决复杂标注线难以理解的问题，使用热力图之后，对于凹陷的区域，可以非常直观的展示；3.提供重点信息，使用标注线，只提供简单轮廓，无法直观的知道该关注的重点区域，在使用热力图后，我们通过颜色来区分概率高低，这样我们只需要关注深色区域即可。热力图简单明了，非常直观表达多种信息，包括预测位置，概率等，而且让使用的人关注重点区域（概率高，颜色深的区域）；可以加载多个热力图，不同模型预测的结果并不一样，可以切换不同的热力图，方便查看对比。
实施例2：
作为本发明的一种实施例，所述获取病理全扫描图像，包括：
通过扫描设备对患者的器官组织进行扫描，获取高分辨率数字图像；其中，
所述扫描设备包括：全自动显微镜和光学方法装置；
将所述高分辨率数字图像通过无缝隙拼接处理，生成多层可视化图像；
将所述多层可视化图像作为病理全扫描图像。
本发明有益效果在于：本发明会对患者的器官组织进行扫描，这个扫描基于全扫描图像（whole slide image，WSI）：通过全自动显微镜或光学放大系统扫描采集得到高分辨数字图像，通过计算机进行高精度多视野无缝隙拼接和处理，从而获得的多层级可视化的图像。病理全扫描图像是疾病领域的病理细胞常用的扫描图像，不过一般的扫描图像就是高分辨率的图像；但是扫描不可能只是扫描一个地方，可能是扫描多个地方；多个地方进行单独处理的话处理难度比较麻烦，所以需要进行无缝隙拼接处理。
实施例3：
作为本发明的一种实施例，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，包括：
将所述病理全扫描图像进行第一次切割，生成分割小图；分割小图就是按照将病理全扫描图像分割之后，以行和列的形式排列，例如九宫格；然后在不同分割小图的行间隔和列间隔之间进行具体的病理内容标记。
通过行和列对所述分割小图进行标记；
将分割标记后的分割小图输入预设的人工智能模型进行预测，生成热力图块；预设的人工智能模型是一个将病理图像转换为热力图像的转换模型，它基于深度学习算法，由深度学习算法的卷积神经网络训练而来。
将所述热力图块进行拼接，生成完整热力图。
本发明有益效果在于：本发明能够根据分割的小图进行基于人工智能模型的预测，处理为热力图，进而实现小图的热力标注。
实施例4：
作为本发明的一种实施例，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，还包括：
预先配置通用深度神经网络生成器；深度神经网络生成器是一种构建深度神经网络网络模型的生成器，能够根据提供的要素用来生成各种各样深度神经网络模型，在这里我们提供的素材就是图像标注模板，从而生成一个标注模型。
获取历史病理扫描图像标注数据，确定标注规则，并生成图像标注模板；其中，
所述标注规则包括：轮廓标注规则和标注线规则；
轮廓标注规则包括不同病理细胞，不同病理程度用不同的颜色和线条进行标注，线条的宽度代表不同的，这需要根据具体实施时，通过管理员去设置这些规则。
预先将图像标注模板导入所述深度神经网络生成器，生成第一智能标注模型；
获取热力图的划分规则；其中，
所述划分规则包括：区域划分规则和颜色深度规则；
将所述划分规则代入所述第一智能标注模型，生成人工智能预测模型。
本发明有益效果在于：本发明会通过深度神经网络生成器对历史病理图像的标注方式，然后根据这个标注方式和热力图的标注方式进行融合替换，进而实现热力图对细胞进行标注。
实施例5：
作为本发明的一种实施例，所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，包括：
获取所述完整热力图，并对所述完整热力图进行切割处理，生成多个热力小图；
获取病种数据和历史病理扫描图像标注数据，确定不同病种对应的病理扫描图像；
根据所述病理扫描图像，确定对应的标注图像；
根据所述标注图像和人工智能预测模型，确定所述标注图像对应的热力图的对应关系；
根据所述对应关系对所述热力小图进行预测，确定不同热力小图对应的热力病种数据；
根据所述热力病种数据，将所述热力小图拼接为完整热力图，确定所述完整热力图上不同区域的病种，生成预测结果。
我们在进行预测的时候，首先因为扫描的图像就不是一个区域的，另外就算是同一个区域，病理程度，或者病变和没有病变都是不确定的。所以我们需要进行热力图的分割，分割之后，不同的热力小图的信息，我们可以进行更加详细的描述和标注，也能删除一些无效的病变图像，从而达到更加精准的预测到底得了什么疾病，以及病变程度。
本发明有益效果在于：本发明的在面对不同病理图像的时候，根据标注图像对应的热力图的对应关系，通过热力小图的预测后，重新拼接为完整热力图，判断出完整热力图上不同区域的病种，生成预测结果。
实施例6：
作为本发明的一种实施例，所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，还包括：
步骤1：基于不同病种的不同热力图，构建确定病种热力图特征函数；
其中，
表示第
种病种的热力图的特征函数；
表示第
种病种的颜色特征；
表示第
种病种的分布特征；
表示第
种病种的热力图的混合高斯模型的期望值；
表
示不同病种热力图的混合高斯模型的平均期望值；
；
表示病种的总
数量；
在步骤1中本发明采用了特征函数，计算出每一种疾病对应的是什么函数特征。同这个函数特征我们就可以实现病变特征的识别。
步骤2：根据所述病种数据和历史病理扫描图像标注数据，构建病种标注的线性模型：
其中，
表示第
种病种的线性轮廓特征；
表示第
种病种的标注线特征；
在步骤2中病种标注的线性模型，就是在不同疾病类型标注之后图像数据的特征
时什么，
是线性模型，其决定了不同的病种，标注线是什么样子，线性轮廓应该是什么样
子，并用一定的参数进行表示。
步骤3：根据热力图的划分规则，构建不同病种的热力图模型：
其中，
表示第
种病种的区域划分特征；
表示第
种病种的颜色深度特征；
对于热力图模型和线性模型我们通过同样的特征算法进行标识，其能够确定不同疾病如何进行区域划分，不同病种如何进行不同颜色深度，也就是病变程度的表示，并用一定的参数进行计算。
步骤4：根据所述热力图模型和线性模型，通过下式确定标注图像对应的热力图的对应关系的相关关系值：
其中，
表示标注图像对应的热力图的对应关系的相关关系值；
相关关系是标注图和热力图的相关关系，这是为了保证热力图和标注图像时相关的，时进行的直接转换。相关关系值为1的时候，表示转换的最正确。在实际实施的时候会设置一定的相关阀值，这个阀值确定了两种图表示的疾病是否对应。
步骤5：根据所述相关关系值和病种热力图特征函数，构建病种预测模型：
其中，Y的值对应有唯一的病种热力图。
最后的预测模型Y，其值具备唯一性，一种疾病会设置一个阈值，Y的值在那个疾病的阈值之内，就表示什么疾病。
本发明在确定病种和热力图的时候，采用了五个步骤，第一个步骤是为了提取热力图的特征，将热力图参数化，步骤2通过常规的标注，确定常规标注的标注参数。步骤3建立了热力图模型，然后步骤4确定标注图像对应的热力图的对应关系得到一个相关参数，而步骤5根据这个相关关系确定为不同热力图对应的唯一病种和病种热力图。
实施例7：
作为本发明的一种实施例，所述根据所述预测结果，将所述完整热力图切割为病种分布小图，包括：
根据所述预测结果，确定所述完整热力图上每个区域的病种信息；
预测结果上虽然只是一个值，但是热力图和线性标注图对应，就可以基于热力图和线性标注图的对应关系确定每个区域的疾病信息。线性标注图时历史线性标注图，也就是现有技术中的图，本发明的生成这种标注图的替代图，更加鲜明形象的显示病变疾病和病变细胞。
根据所述病种信息，将所述热力图按照病种区域进行划分，生成病种分布小图；
将所述病种分布小图进行行数和列数标注，生成行列标注，并将每个病种分布小图以所述行列标注命名。
本发明有益效果在于：本发明在进行病种预测的时候，还会把完整热力图进行再次分割，分割的目的时实施行列标注，进而实现不同病种的清晰区分，也便于wed界面加载。
实施例8：
作为本发明的一种实施例，所述接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面，包括：
接收来自目标设备的加载请求；
根据所述加载请求，确定对应的wed页面地址；
根据所述wed页面地址将所述病种分布小图传输至所述wed页面进行加载；
根据加载结果，生成病种热力图。
本发明在热力图转换出来之后，是需要通过电脑进行显示的，所以设置了加载的技术方案，这个方案通过设置每个病人，对应的病理信息地址，将这个图加载上去，病理信息的热力图和患者相对应。
本发明有益效果在于：
在接收到wed页面的加载请求后，本发明根据wed页面地址将热力图的小图进行传输，因为之前进行了行列标注，所以在wed页面上也可以显示出完整的病种热力图。
实施例9：
作为本发明的一种实施例，所述在所述小图加载到wed页面后，在所述wed页面上展示病种热力图，包括：
获取所述wed页面的病种分布小图的加载进度；
根据所述加载进度，判断所述病种分布小图是否完全加载至所述wed页面；
在所述病种分布小图全部加载至所述wed页面上时，对所述病种分布小图进行拼接，并在拼接完成后，通过we页面展示并在热力图。
拼接这是因为要展示完整的热力图；在不需要展示完整热力图，而是要展示局部，或者调用局部病理图的时候，就通过分布小图进行显示。
本发明有益效果在于：本发明在wed页面展示病种热力图的时候，会显示加载进度，而且在wed页面上会呈现一种拼接的状态，通过拼接后在wed页面上进行展示。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (7)
1.一种基于web的人工智能预测结果的展示方法，其特征在于，包括：
获取病理全扫描图像；其中，
所述病理全扫描图像为多层级可视化图像；
将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图；
基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果；
根据所述预测结果，将所述完整热力图切割为病种分布小图；
接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面；
在所述小图加载到wed页面后，在所述wed页面上展示病种热力图；
所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，包括：
获取所述完整热力图，并对所述完整热力图进行切割处理，生成多个热力小图；
获取病种数据和历史病理扫描图像标注数据，确定不同病种对应的病理扫描图像；
根据所述病理扫描图像，确定对应的标注图像；
根据所述标注图像和人工智能预测模型，确定所述标注图像对应的热力图的对应关系；
根据所述对应关系对所述多个热力小图进行预测，确定不同热力小图对应的热力病种数据；
根据所述热力病种数据，将所述多个热力小图拼接为完整热力图，确定所述完整热力图上不同区域的病种，生成预测结果；
所述基于不同病种的不同热力图，对所述完整热力图进行预测，确定预测结果，还包括：
步骤1：基于不同病种的不同热力图，构建确定病种热力图特征函数；
其中，
表示第
种病种的热力图的特征函数；
表示第
种病种的颜色特征；
表
示第
种病种的分布特征；
表示第
种病种的热力图的混合高斯模型的期望值；
表示不
同病种热力图的混合高斯模型的平均期望值；
；
表示病种的总数
量；
步骤2：根据所述病种数据和历史病理扫描图像标注数据，构建病种标注的线性模型：
其中，
表示第
种病种的线性轮廓特征；
表示第
种病种的标注线特征；
步骤3：根据热力图的划分规则，构建不同病种的热力图模型：
其中，
表示第
种病种的区域划分特征；
表示第
种病种的颜色深度特征；
步骤4：根据所述热力图模型和线性模型，通过下式确定标注图像对应的热力图的对应关系的相关关系值：
其中，
表示标注图像对应的热力图的对应关系的相关关系值；
步骤5：根据所述相关关系值和病种热力图特征函数，构建病种预测模型：
其中，Y的值对应有唯一的病种热力图。
2.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述获取病理全扫描图像，包括：
通过扫描设备对患者的器官组织进行扫描，获取高分辨率数字图像；其中，
所述扫描设备包括：全自动显微镜和光学方法装置；
将所述高分辨率数字图像通过无缝隙拼接处理，生成多层可视化图像；
将所述多层可视化图像作为病理全扫描图像。
3.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，包括：
将所述病理全扫描图像进行第一次切割，生成分割小图；
通过行和列对所述分割小图进行标记；
将分割标记后的分割小图输入预设的人工智能模型进行预测，生成热力图块；
将所述热力图块进行拼接，生成完整热力图。
4.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述将所述病理全扫描图像导入预设的人工智能预测模型进行处理，生成完整热力图，还包括：
预先配置通用深度神经网络生成器；
获取历史病理扫描图像标注数据，确定标注规则，并生成图像标注模板；其中，
所述标注规则包括：轮廓标注规则和标注线规则；
预先将图像标注模板导入所述深度神经网络生成器，生成第一智能标注模型；
获取热力图的划分规则；其中，
所述划分规则包括：区域划分规则和颜色深度规则；
将所述划分规则代入所述第一智能标注模型，生成人工智能预测模型。
5.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述根据所述预测结果，将所述完整热力图切割为病种分布小图，包括：
根据所述预测结果，确定所述完整热力图上每个区域的病种信息；
根据所述病种信息，将所述热力图按照病种区域进行划分，生成病种分布小图；
将所述病种分布小图进行行数和列数标注，生成行列标注，并将每个病种分布小图以所述行列标注命名。
6.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述接收wed页面加载热力图的加载请求，并将所述小图加载到wed页面，包括：
接收来自目标设备的加载请求；
根据所述加载请求，确定对应的wed页面地址；
根据所述wed页面地址将所述病种分布小图传输至所述wed页面进行加载；
根据加载结果，生成病种热力图。
7.如权利要求1所述的一种基于web的人工智能预测结果的展示方法，其特征在于，所述在所述小图加载到wed页面后，在所述wed页面上展示病种热力图，包括：
获取所述wed页面的病种分布小图的加载进度；
根据所述加载进度，判断所述病种分布小图是否完全加载至所述wed页面；
在所述病种分布小图全部加载至所述wed页面上时，对所述病种分布小图进行拼接，并在拼接完成后，通过wed页面展示并在热力图。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210198817.9A CN114708362B (zh) | 2022-03-02 | 2022-03-02 | 一种基于web的人工智能预测结果的展示方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210198817.9A CN114708362B (zh) | 2022-03-02 | 2022-03-02 | 一种基于web的人工智能预测结果的展示方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114708362A CN114708362A (zh) | 2022-07-05 |
| CN114708362B true CN114708362B (zh) | 2023-01-06 |
Family
ID=82166017
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210198817.9A Active CN114708362B (zh) | 2022-03-02 | 2022-03-02 | 一种基于web的人工智能预测结果的展示方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114708362B (zh) |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200085382A1 (en) * | 2017-05-30 | 2020-03-19 | Arterys Inc. | Automated lesion detection, segmentation, and longitudinal identification |
| TW202105245A (zh) * | 2019-04-01 | 2021-02-01 | 雲象科技股份有限公司 | 用於分析活檢樣本影像以決定其癌變機率之方法 |
| CN110232410A (zh) * | 2019-05-30 | 2019-09-13 | 清华大学 | 多层级的器官组织病理图像分析方法及分析装置 |
| CN111311578B (zh) * | 2020-02-17 | 2024-05-03 | 腾讯科技（深圳）有限公司 | 基于人工智能的对象分类方法以及装置、医学影像设备 |
| CN111310841B (zh) * | 2020-02-24 | 2023-06-20 | 中南大学湘雅医院 | 医学图像分类方法、装置、设备、计算机设备和存储介质 |
| CN111709929B (zh) * | 2020-06-15 | 2023-01-20 | 北京航空航天大学 | 一种肺部癌变区域分割与分类检测系统 |
| CN113449785B (zh) * | 2021-06-18 | 2022-08-05 | 浙江大学 | 基于深度学习的眼睑肿瘤数字化病理切片图像多分类方法 |
| CN113793305A (zh) * | 2021-08-23 | 2021-12-14 | 上海派影医疗科技有限公司 | 一种融合多信息的病理图像分类识别方法与系统 |
-
2022
- 2022-03-02 CN CN202210198817.9A patent/CN114708362B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN114708362A (zh) | 2022-07-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Yap et al. | Breast ultrasound region of interest detection and lesion localisation | |
| CN109583440B (zh) | 结合影像识别与报告编辑的医学影像辅助诊断方法及系统 | |
| CN105975793A (zh) | 一种基于数字病理图像的癌症辅助诊断方法 | |
| CN110059697B (zh) | 一种基于深度学习的肺结节自动分割方法 | |
| CN112101451B (zh) | 一种基于生成对抗网络筛选图像块的乳腺癌组织病理类型分类方法 | |
| EP3055835B1 (en) | Systems and methods for comprehensive multi-assay tissue analysis | |
| CN110853022B (zh) | 病理切片图像的处理方法、装置、系统及存储介质 | |
| CN112086197B (zh) | 基于超声医学的乳腺结节检测方法及系统 | |
| CN101203170A (zh) | 计算机辅助检测系统和方法 | |
| US11972567B2 (en) | System and method for analyzing medical images to detect and classify a medical condition using machine-learning and a case pertinent radiology atlas | |
| CN102395975A (zh) | 临床决策支持系统和方法 | |
| CN111681737B (zh) | 用于建设肝癌影像数据库的结构化报告系统及方法 | |
| CN110335668A (zh) | 基于深度学习的甲状腺癌细胞病理图辅助分析方法及系统 | |
| CN109003269A (zh) | 一种能提高医生效率的医学影像病灶的标注提取方法 | |
| KR102531400B1 (ko) | 인공 지능 기반 대장 내시경 영상 진단 보조 시스템 및 방법 | |
| CN111709950A (zh) | 一种乳腺钼靶ai辅助筛查方法 | |
| CN115713590A (zh) | 一种基于ct的三维重建图像处理方法及系统 | |
| CN111383328A (zh) | 一种面向乳腺癌病灶的3d可视化方法及系统 | |
| CN114693981A (zh) | 一种膝关节特征点自动识别方法 | |
| CN114708362B (zh) | 一种基于web的人工智能预测结果的展示方法 | |
| CN116779093B (zh) | 一种医学影像结构化报告的生成方法、装置和计算机设备 | |
| CN108898601A (zh) | 基于随机森林的股骨头图像分割装置及分割方法 | |
| CN112686897A (zh) | 一种基于弱监督的长短轴辅助肠胃淋巴结像素标注的方法 | |
| CN115880266B (zh) | 一种基于深度学习的肠道息肉检测系统和方法 | |
| CN113705318B (zh) | 基于图像的识别方法、装置、设备及可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20221020 Address after: 100000 608, Floor 6, No. 39, Lianhuachi East Road, Haidian District, Beijing Applicant after: Beijing Thorough Future Technology Co.,Ltd. Address before: Room 513, 5 / F, building C, 18 Xihuan South Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing Applicant before: TOUCHE IMAGE (BEIJING) TECHNOLOGY Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |