CN117789937A - 一种医学影像自动挂片方法、装置及设备 - Google Patents
一种医学影像自动挂片方法、装置及设备 Download PDFInfo
- Publication number
- CN117789937A CN117789937A CN202311825245.3A CN202311825245A CN117789937A CN 117789937 A CN117789937 A CN 117789937A CN 202311825245 A CN202311825245 A CN 202311825245A CN 117789937 A CN117789937 A CN 117789937A
- Authority
- CN
- China
- Prior art keywords
- image
- laid out
- medical
- hanging
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000003384 imaging method Methods 0.000 claims abstract description 156
- 238000004590 computer program Methods 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 6
- 238000002601 radiography Methods 0.000 claims description 5
- 238000005516 engineering process Methods 0.000 claims description 4
- 238000007781 pre-processing Methods 0.000 claims description 4
- 238000003745 diagnosis Methods 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 210000002082 fibula Anatomy 0.000 description 2
- 238000003709 image segmentation Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 210000000629 knee joint Anatomy 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 210000002320 radius Anatomy 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本申请公开了一种医学影像自动挂片方法、装置及设备。方法中获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；通过成像方位分类网络识别医学影像序列中包含的各医学影像的成像方位，得到医学影像序列的成像方位数量；根据成像方位数量确定挂片窗口的布局，并从医学影像序列中确定挂片窗口对应的待布局影像；通过图像结构分类网络识别待布局影像的结构类型；若待布局影像的结构类型为正确的结构类型，则将待布局影像布局到挂片窗口；若待布局影像的结构类型为需要调整的结构类型，则对待布局影像进行结构调整后布局到挂片窗口。相比于由医生手动挂片，以自动化的手段提升挂片效率和医生阅片效率，减少因挂片耗时长延误影像诊断。
Description
技术领域
本申请涉及医学影像技术领域，特别是涉及一种医学影像自动挂片方法、装置及设备。
背景技术
放射科医生在阅览医学影像时，一般都需要手动设置和调整医学影像在显示器上的布局，使得不同方位成像的图像可以同一个屏幕上对比显示。以大型三甲医院为例，每天的医学影像检查量约4000份左右，使得放射科医生往往需要花费大量的时间手动挂片。如此一来，不仅影响阅片效率，还延误了影像诊断。
发明内容
基于上述问题，本申请提供了一种医学影像自动挂片方法、装置及设备，目的是自动实现医学影像挂片，减少医生阅片时间。
本申请实施例公开了如下技术方案：
本申请第一方面提供了一种医学影像自动挂片方法，该方法包括：
获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；
通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量；
根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像；
通过图像结构分类网络识别所述待布局影像的结构类型；
若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。
在一种可选的实现方式中，所述图像结构分类网络支持识别以下四种结构类型：
正位、倒置、逆时针偏转和顺时针偏转，其中，正位为正确的结构类型，倒置、逆时针偏转和顺时针偏转均为需要调整的结构类型；
若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口，包括：
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。
在一种可选的实现方式中，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量；
所述根据所述成像方位数量确定挂片窗口的布局，包括：
若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位；
所述从所述医学影像序列中确定所述挂片窗口对应的待布局影像，包括：
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
在一种可选的实现方式中，所述医学影像序列的成像方位数量为2，成像方位分别为正位和侧位；
所述通过图像结构分类网络识别所述待布局影像的结构类型，包括：
通过第一图像结构分类网络识别成像方位为正位的待布局影像的结构类型，并通过第二图像结构分类网络识别成像方位为侧位的待布局影像的结构类型。
在一种可选的实现方式中，在所述通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位之前，所述方法还包括：
解析所述医学影像序列中图像的dicom信息，确定所述各医学影像的成像设备类型；
若所述成像设备类型为数字X线摄影技术DR，则将所述医学影像序列中各医学影像预处理后输入所述成像方位分类网络。
在一种可选的实现方式中，所述若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口，包括：
若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整；
对调整后的待布局影像进行前景和背景的分割，得到分割后的前景图像；
根据分割后的前景图像的区域大小与调整后的待布局影像的尺寸大小，将所述分割后的前景图像进行比例调整后布局到对应的挂片窗口。
本申请第二方面提供了一种医学影像自动挂片装置，该装置包括：
序列获取模块，用于获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；
成像方位分类模块，用于通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量；
布局确定模块，用于根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像；
图像结构分类模块，用于通过图像结构分类网络识别所述待布局影像的结构类型；
挂片模块，用于若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。
在一种可选的实现方式中，所述图像结构分类网络支持识别以下四种结构类型：
正位、倒置、逆时针偏转和顺时针偏转，其中，正位为正确的结构类型，倒置、逆时针偏转和顺时针偏转均为需要调整的结构类型；
所述挂片模块具体用于：
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。
在一种可选的实现方式中，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量；
所述布局确定模块，用于：
若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位；
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
本申请第三方面提供了一种医学影像自动挂片设备，该设备包括：
存储器，其上存储有计算机程序；
处理器，用于执行所述存储器中的所述计算机程序，以实现第一方面任一实现方式介绍的医学影像自动挂片方法的步骤。
相较于现有技术，本申请具有以下有益效果：
在本申请技术方案中提出一种医学影像自动挂片方法，该方法包括首先获取对目标对象的目标部位进行医学影像检查得到的医学影像序列。接着通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量。其后，根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像。通过图像结构分类网络识别所述待布局影像的结构类型，以识别出的结构类型指导挂片：若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。本方案可以通过成像方位分类网络自动实现医学影像的成像方位的识别，以此执行挂片窗口的自动布局，并通过图像结构分类网络识别待挂片的医学影像是否需要进行调整，以此执行影像的结构调整并在挂片窗口的自动展示，该方案相比于由医生手动挂片，以自动化的手段提升了挂片效率并进而提升了医生阅片效率，减少因挂片耗时长延误影像诊断。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种医学影像自动挂片方法的流程图；
图2为一种成像方位为正位的医学影像视图；
图3为一种成像方位为侧位的医学影像视图；
图4为本申请实施例提供的一种挂片窗口的布局示意图；
图5A为本申请实施例提供的一种网络级联示意图；
图5B为本申请实施例提供的另一种网络级联示意图；
图6为一种图像结构为正位的医学影像视图；
图7为一种图像结构为倒置的医学影像视图；
图8为一种图像结构为顺时针偏转的医学影像视图；
图9为一种图像结构为逆时针偏转的医学影像视图；
图10为倒置的医学影像经过调整后形成的正确视图；
图11为顺时针偏转的医学影像经过调整后形成的正确视图；
图12为逆时针偏转的医学影像经过调整后形成的正确视图；
图13为本申请实施例提供的一种医学影像自动挂片方法的示意图；
图14为本申请实施例提供的一种医学影像自动挂片装置的结构示意图。
具体实施方式
正如前文描述，目前医院中，医学影像的挂片多是通过人工实现。鉴于设备类型的多样化，检查部位的多样性，放射科医生往往需要花费较多的时间对影像进行梳理、挂片。智能化、灵活的挂片方案可以辅助医生高效挂片。
针对这一问题，发明人经过研究提出一种医学影像自动挂片方法、装置及设备。采用成像方位分类网络实现对影像成像方位的识别，另采用图像结构分类网络实现对影像的结构正确或需调整的情况的识别，从而更加快速辨析出如何布局、如何调整图像结构。基于此，以自动化的方式完成医学影像挂片，大大提升挂片、阅片的效率，并相应提升医生诊疗速度。此方案在医疗影像技术领域具有较好的应用前景。
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
参见图1，该图为本申请实施例提供的一种医学影像自动挂片方法的流程图。如图1所示，该医学影像自动挂片方法包括：
S101、获取对目标对象的目标部位进行医学影像检查得到的医学影像序列。
实际应用中，目标对象可以是指到医院就诊的病患、体检人员或者医学科研项目的受试者，此处对目标对象的具体人员类型不做限定。当对目标对象进行医学影像检查时，一般预先明确了需要进行影像检查的部位，针对该部位采用相应的技术手段进行成像。作为示例，被检部位可以为：手腕、腓骨、膝关节、桡骨、腓骨、双足等。
设备类型一般与检查项目有关，例如CT设备，DR设备等。其中，DR设备的中文全称是数字X线摄影技术，英文全称是：digital radiography。
为了更加准确清晰地获得目标对象其被检部位(本方案中命名为目标部位)的影像，从而实现更加准确的诊断，一般对目标对象目标部位需要进行多种方位的成像。本步骤中获取到的医学影像序列中，所包含的医学影像便可能涉及一种或多种方位。本方案中，需要识别影像的成像方位，从而在挂片时，将针对于目标对象目标部位的影像以多样化的方位展示，供医生阅览。
S102、通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量。
作为示例，成像方位一般有：从前往后、从后往前、从外侧到内侧以及从内侧到外侧等。结合具体的目标部位，成像方位可以简单地分为两类：正位和侧位。例如，目标对象自然站立时，对于手腕部位，从前往后或从后往前拍摄的影像，其成像方位属于侧位；从外侧到内侧以及从内侧到外侧拍摄的影像，其成像方位属于正位。
图2和图3分别展示了成像方位为正位、侧位的医学影像视图。结合图2和图3可以看到，不同的成像方位可以从不同的视角观察同一部位，从而获得更丰富的有关该部位的结构信息。
区别于肉眼辨识的方式，本申请中在S102处理阶段以分类网络识别影像的成像方位。成像方位分类网络具体可以使用Resnet系列，如Resnet50，Resnet108等，在网络中采用dropout、batchnormalization层，loss函数采用交叉熵函数。通过执行S102最终识别出医学影像为正位成像方位的影像或侧位成像方位的影像。
S103、根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像。
可以理解的是，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量。在医学影像序列中可能包括目标部位的0个、1个或多个正位成像方位的影像，也可能包括目标部位的0个、1个或多个侧位成像方位的影像。在进行挂片和展示时，同一种成像方位的影像一般不需要呈现多个，因此，对于挂片窗口的布局具体可以考虑识别出的成像方位的数量。若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位。例如识别出成像方位有两种，一种是正位，一种是侧位，则可以布局1*2个挂片窗口，其一用来展示正位的影像，另一用来展示侧位的影像。图4为本申请实施例提供的一种挂片窗口的布局示意图。
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则可以参考以下任一种方式确定待布局影像：
①响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像。
②将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像。
③将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
具体实现时，本申请技术方案提供手动交互功能，可以响应用户的触发动作，在多个相同成像方向的影像中，由用户将影像拖拽到挂片窗口中。从而，若窗口显示的图像不是用户需要查看的，可以自行选择和展示，支持更为灵活的阅片功能，参见以上方式①。例如，正位医学影像共3个，正位医学影像对应一个挂片窗口，则将3个影像中受用户触发以进行展示的影像作为该挂片窗口的待布局影像。
为了在医学影像序列中医学影像的数量大于医学影像序列的成像方位数量的情况下，更加迅捷地确定待布局影像，也可以结合其生成时间，选择最早生成的影像，参见以上方式②。例如，正位医学影像共3个，正位医学影像对应一个挂片窗口，则将3个影像中最早生成的影像作为该挂片窗口的待布局影像。
考虑到阅片诊断的主要目的，为了实现更加准确的诊断，提升医学影像的效用，也可以结合其图像质量确定待布局影像，参见以上方式③。例如，正位医学影像共3个，正位医学影像对应一个挂片窗口，则将3个影像中图像质量指标最高的医学影像作为该挂片窗口的待布局影像。
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则基于将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
在确定了挂片窗口的布局以及待布局影像后，考虑到一些影像可能存在倒置、偏转等问题，直接挂片有可能影响用户的舒适观看，为此，本申请还提出通过图像结构分类网络对待布局影像的结构类型进行识别，参见下方S104。
S104、通过图像结构分类网络识别所述待布局影像的结构类型，若所述待布局影像的结构类型为正确的结构类型，则执行S105；若所述待布局影像的结构类型为需要调整的结构类型，则执行S106。
图5A为本申请实施例提供的一种网络级联示意图，在该图中展示出了医学影像需先后经过成像方位分类网络及图像结构分类网络，图像结构分类网络可以将影像分为正确的结构类型或需要调整的结构类型。其中需要调整的结构类型具体可以包括倒置、逆时针偏转及顺时针偏转，这几种类型均是相对于正确的结构类型而言。正确的结构类型，即为用户正常站姿或坐姿观察视图时，不需要歪头或旋转图像便可以正常观看的图像结构。
逆时针偏转即指相对于正确的结构类型，当前医学影像存在逆时针偏转，有必要将其顺时针旋转回归正确的结构；顺时针偏转即指相对于正确的结构类型，当前医学影像存在顺时针偏转，有必要将其逆时针旋转回归正确的结构。
图5B为本申请实施例提供的另一种网络级联示意图。在图5B中可以看到，结合被成像方位分类网络分类的结果，针对不同的分类结果，后续相应的医学影像独立采用一个图像结构分类网络进行图像结构识别。如图5B中，针对于成像方位为正位的医学影像，采用第一图像结构分类网络进行图像结构识别；针对于成像方位为侧位的医学影像，采用第二图像结构分类网络进行图像结构识别。通过图5B所示的网络，可以针对不同的成像方位的医学影像，实现更加细粒度、精准的图像结构识别。此外，第一图像结构分类网络以及第二图像结构分类网络也相比于不区分成像方位的图像结构分类网络，更加易于训练。
图6为一种图像结构为正位的医学影像视图，其表示正确的图像结构，可以参照S105直接布局到挂片窗口。图7至图9依次展示了倒置、顺时针偏转和逆时针偏转的医学影像。这些图像不便于直接布局阅览，需要通过S106进行结构调整后再布局。
S105、将所述待布局影像布局到对应的挂片窗口。
S106、对所述待布局影像进行结构调整后布局到对应的挂片窗口。
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口。图10展示了图7所示医学影像进行调整后的效果。
若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。图11展示了图8所示医学影像进行调整后的效果。
若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口。图12展示了图9所示医学影像进行调整后的效果。
结合图10至图12所示，通过调整，使倒置或者存在偏转的医学影像回归正确的结构，方便用户挂片查看，可见本方案实现了自动化的图像识别(包括成像方位识别及图像结构识别)，并且对于结构不正确的图像还能够自动化的调整，节省了许多手动调整操作。更加快速、便捷实现医学影像挂片，用户阅览速度也能够得到提升。
图13为本申请实施例提供的一种医学影像自动挂片方法的示意图，在前文介绍的医学影像自动挂片方法执行最前期，还可以通过解析医学影像序列中影像的dicom信息来确定医学影像的成像设备类型。例如，本申请实施例介绍的医学影像自动挂片方法专为DR影像设计，是服务于DR设备拍摄的DR影像进行自动挂片的方案，则可以判断医学影像是否为DR影像，或者设备类型是否为DR设备，如果是，则进一步执行后续的其他操作。否则，退出挂片操作。
医学影像输入到分类网络之前，可以进行格式转换，例如，将dicom图像按照dicom中提供的窗宽窗位转化为JPG图像。例如，一般地,对于骨骼，窗位为2048，窗宽为4096。此外，考虑到分类网络的输入尺寸要求，可以将JPG图像缩放至224*224或者512*1024，以与分类网络更加适配。
如果拍摄的图像内容区域占据图像区域较小，即便进行了图像结构调整，依然有可能影像用户的观看体验，例如用户还需要执行放大操作，才能看清楚目标部位的影像细节。为此，若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整；将调整后的待布局影像进行前景和背景的分割，得到分割后的前景图像；根据分割后的前景图像的区域大小与分割前的影像(即调整后的待布局影像)的尺寸大小，将所述分割后的前景图像进行比例调整后布局到对应的挂片窗口。
对图像区域进行初步的分割的方式，可以使用分割类的神经网络如Unet系列，或者传统图像处理算法，如大津法等等。对分割后的前景图像进行比例调整的目的是令分割后的前景图像与挂片窗口尺寸适配。举例来说，计算分割提取的图像区域和原始的图像区域最长方向长度的比例，作为图像的缩放比例进行展示。
需要说明的是，图像分割和比例调整不限于图像结构需要调整的情况，针对于不需要结构调整的正确结构，也可以进行前景、背景的分割后，在对前景图像进行比例调整后挂片展示。
基于前述实施例介绍的一种医学影像自动挂片方法，相应地，本申请实施例还提供了一种医学影像自动挂片装置。图14为该装置的结构示意图，如图14所示，医学影像自动挂片装置包括：
序列获取模块1401，用于获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；
成像方位分类模块1402，用于通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量；
布局确定模块1403，用于根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像；
图像结构分类模块1404，用于通过图像结构分类网络识别所述待布局影像的结构类型；
挂片模块1405，用于若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。
本方案可以通过成像方位分类网络自动实现医学影像的成像方位的识别，以此执行挂片窗口的自动布局，并通过图像结构分类网络识别待挂片的医学影像是否需要进行调整，以此执行影像的结构调整并在挂片窗口的自动展示，该方案相比于由医生手动挂片，以自动化的手段提升了挂片效率并进而提升了医生阅片效率，减少因挂片耗时长延误影像诊断。
在一种可选的实现方式中，所述图像结构分类网络支持识别以下四种结构类型：
正位、倒置、逆时针偏转和顺时针偏转，其中，正位为正确的结构类型，倒置、逆时针偏转和顺时针偏转均为需要调整的结构类型；
所述挂片模块1405具体用于：
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口；若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口；若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。
在一种可选的实现方式中，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量；所述布局确定模块1403，用于：
若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位；
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
在可选的实现方式中，所述医学影像序列的成像方位数量为2，成像方位分别为正位和侧位；
所述图像结构分类模块1404具体用于通过第一图像结构分类网络识别成像方位为正位的待布局影像的结构类型，并通过第二图像结构分类网络识别成像方位为侧位的待布局影像的结构类型。
在可选的实现方式中，医学影像自动挂片装置还包括：
设备类型确定模块，用于解析所述医学影像序列中图像的dicom信息，确定所述各医学影像的成像设备类型；
影像预处理模块，用于若所述成像设备类型为数字X线摄影技术DR，则将所述医学影像序列中各医学影像预处理后输入所述成像方位分类网络。
在可选的实现方式中，挂片模块1405包括：
结构调整单元，用于若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整；
图像分割单元，用于对调整后的待布局影像进行前景和背景的分割，得到分割后的前景图像；
比例调整单元，用于根据分割后的前景图像的区域大小与调整后的待布局影像的尺寸大小，将所述分割后的前景图像进行比例调整后布局到对应的挂片窗口。
基于前文实施例介绍的医学影像自动挂片方法及医学影像自动挂片装置，相应地，本申请还提供了一种医学影像自动挂片设备。在本申请实施例中，医学影像自动挂片设备包括：
存储器，其上存储有计算机程序；
处理器，用于执行所述存储器中的所述计算机程序，以实现上文介绍的医学影像自动挂片方法的步骤。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置及设备实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置及设备实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元提示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述，仅为本申请的一种具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应该以权利要求的保护范围为准。
Claims (10)
1.一种医学影像自动挂片方法，其特征在于，包括：
获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；
通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量；
根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像；
通过图像结构分类网络识别所述待布局影像的结构类型；
若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。
2.根据权利要求1所述的医学影像自动挂片方法，其特征在于，所述图像结构分类网络支持识别以下四种结构类型：
正位、倒置、逆时针偏转和顺时针偏转，其中，正位为正确的结构类型，倒置、逆时针偏转和顺时针偏转均为需要调整的结构类型；
所述若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口，包括：
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。
3.根据权利要求1所述的医学影像自动挂片方法，其特征在于，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量；
所述根据所述成像方位数量确定挂片窗口的布局，包括：
若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位；
所述从所述医学影像序列中确定所述挂片窗口对应的待布局影像，包括：
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
4.根据权利要求1所述的医学影像自动挂片方法，其特征在于，所述医学影像序列的成像方位数量为2，成像方位分别为正位和侧位；
所述通过图像结构分类网络识别所述待布局影像的结构类型，包括：
通过第一图像结构分类网络识别成像方位为正位的待布局影像的结构类型，并通过第二图像结构分类网络识别成像方位为侧位的待布局影像的结构类型。
5.根据权利要求1所述的医学影像自动挂片方法，其特征在于，在所述通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位之前，所述方法还包括：
解析所述医学影像序列中图像的dicom信息，确定所述各医学影像的成像设备类型；
若所述成像设备类型为数字X线摄影技术DR，则将所述医学影像序列中各医学影像预处理后输入所述成像方位分类网络。
6.根据权利要求1所述的医学影像自动挂片方法，其特征在于，所述若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口，包括：
若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整；
对调整后的待布局影像进行前景和背景的分割，得到分割后的前景图像；
根据分割后的前景图像的区域大小与调整后的待布局影像的尺寸大小，将所述分割后的前景图像进行比例调整后布局到对应的挂片窗口。
7.一种医学影像自动挂片装置，其特征在于，包括：
序列获取模块，用于获取对目标对象的目标部位进行医学影像检查得到的医学影像序列；
成像方位分类模块，用于通过成像方位分类网络识别所述医学影像序列中包含的各医学影像的成像方位，得到所述医学影像序列的成像方位数量；
布局确定模块，用于根据所述成像方位数量确定挂片窗口的布局，并从所述医学影像序列中确定所述挂片窗口对应的待布局影像；
图像结构分类模块，用于通过图像结构分类网络识别所述待布局影像的结构类型；
挂片模块，用于若所述待布局影像的结构类型为正确的结构类型，则将所述待布局影像布局到对应的挂片窗口；若所述待布局影像的结构类型为需要调整的结构类型，则对所述待布局影像进行结构调整后布局到对应的挂片窗口。
8.根据权利要求7所述的医学影像自动挂片装置，其特征在于，所述图像结构分类网络支持识别以下四种结构类型：
正位、倒置、逆时针偏转和顺时针偏转，其中，正位为正确的结构类型，倒置、逆时针偏转和顺时针偏转均为需要调整的结构类型；
所述挂片模块具体用于：
若所述待布局影像的结构类型为倒置，则将所述待布局影像顺时针旋转180°或逆时针旋转180°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为逆时针偏转，则将所述待布局影像顺时针旋转90°后，布局到对应的挂片窗口；
若所述待布局影像的结构类型为顺时针偏转，则将所述待布局影像逆时针旋转90°后，布局到对应的挂片窗口。
9.根据权利要求7所述的医学影像自动挂片装置，其特征在于，所述医学影像序列中医学影像的数量大于或等于所述医学影像序列的成像方位数量；
所述布局确定模块，用于：
若通过成像方位分类网络识别所述医学影像序列中总共包含N种成像方位，则布局1*N挂片窗口；其中，N为整数，一个挂片窗口对应一种成像方位；
若所述医学影像序列中医学影像的数量大于所述医学影像序列的成像方位数量，则响应于交互操作从所述医学影像序列中确定所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中最早生成的医学影像作为所述挂片窗口对应的待布局影像，或者将所述成像方位分类网络识别为相同成像方位的多个医学影像中质量最高的医学影像作为所述挂片窗口对应的待布局影像；
若所述医学影像序列中医学影像的数量等于所述医学影像序列的成像方位数量，则将医学影像序列中N各医学影像分别作为1*N挂片窗口之一的待布局影像。
10.一种医学影像自动挂片设备，其特征在于，包括：
存储器，其上存储有计算机程序；
处理器，用于执行所述存储器中的所述计算机程序，以实现权利要求1-6中任一项所述医学影像自动挂片方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311825245.3A CN117789937A (zh) | 2023-12-27 | 2023-12-27 | 一种医学影像自动挂片方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311825245.3A CN117789937A (zh) | 2023-12-27 | 2023-12-27 | 一种医学影像自动挂片方法、装置及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117789937A true CN117789937A (zh) | 2024-03-29 |
Family
ID=90381238
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311825245.3A Pending CN117789937A (zh) | 2023-12-27 | 2023-12-27 | 一种医学影像自动挂片方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117789937A (zh) |
-
2023
- 2023-12-27 CN CN202311825245.3A patent/CN117789937A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10129553B2 (en) | Dynamic digital image compression based on digital image characteristics | |
| US8831324B2 (en) | Surgical method and workflow | |
| US20170039321A1 (en) | Database systems and interactive user interfaces for dynamic interaction with, and sorting of, digital medical image data | |
| US6697506B1 (en) | Mark-free computer-assisted diagnosis method and system for assisting diagnosis of abnormalities in digital medical images using diagnosis based image enhancement | |
| JP5837116B2 (ja) | トモシンセシスデータセットから２ｄ画像を生成するためのシステムおよび方法 | |
| US9020235B2 (en) | Systems and methods for viewing and analyzing anatomical structures | |
| EP3355273B1 (en) | Coarse orientation detection in image data | |
| US7756314B2 (en) | Methods and systems for computer aided targeting | |
| CN106569673B (zh) | 多媒体病历报告的显示方法及多媒体病历报告的显示设备 | |
| US20150317434A1 (en) | Control method of information terminal and computer-readable recording medium | |
| US20130088512A1 (en) | Examination information display device and method | |
| US8471846B2 (en) | Method and apparatus for determining medical image position | |
| EP4170673A1 (en) | Auto-focus tool for multimodality image review | |
| US8150121B2 (en) | Information collection for segmentation of an anatomical object of interest | |
| CN111080584A (zh) | 医学图像的质控方法、计算机设备和可读存储介质 | |
| JPWO2007000940A1 (ja) | 異常陰影候補検出方法、異常陰影候補検出装置 | |
| JP2007151645A (ja) | 医用画像診断支援システム | |
| JP2016202721A (ja) | 医用画像表示装置及びプログラム | |
| US20090185732A1 (en) | User interface and viewing workflow for mammography workstation | |
| CN111343922B (zh) | 放射线断层图像处理装置和放射线断层摄影装置 | |
| JP7275961B2 (ja) | 教師画像生成プログラム、教師画像生成方法、および教師画像生成システム | |
| US11080866B2 (en) | Dynamic image processing method and dynamic image processing device | |
| JP2004295184A (ja) | 診断支援画像処理サービスシステム | |
| CN117789937A (zh) | 一种医学影像自动挂片方法、装置及设备 | |
| Ikwuezunma et al. | Case of the missing vertebra: a report of a radiographic stitching error in a scoliosis patient |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |