CN111145877A - 交互方法、信息处理方法、显示方法及存储介质 - Google Patents
交互方法、信息处理方法、显示方法及存储介质 Download PDFInfo
- Publication number
- CN111145877A CN111145877A CN201911382730.1A CN201911382730A CN111145877A CN 111145877 A CN111145877 A CN 111145877A CN 201911382730 A CN201911382730 A CN 201911382730A CN 111145877 A CN111145877 A CN 111145877A
- Authority
- CN
- China
- Prior art keywords
- delineation
- medical image
- image
- line
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 230000003993 interaction Effects 0.000 title claims abstract description 30
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000003860 storage Methods 0.000 title claims abstract description 18
- 230000010365 information processing Effects 0.000 title claims abstract description 16
- 230000009471 action Effects 0.000 claims abstract description 63
- 238000003745 diagnosis Methods 0.000 claims abstract description 55
- 230000003902 lesion Effects 0.000 claims description 26
- 206010028980 Neoplasm Diseases 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 15
- 230000002452 interceptive effect Effects 0.000 claims description 9
- 208000024891 symptom Diseases 0.000 description 23
- 238000012545 processing Methods 0.000 description 13
- 230000001788 irregular Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 210000000481 breast Anatomy 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 238000002591 computed tomography Methods 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 6
- ZOKXTWBITQBERF-UHFFFAOYSA-N Molybdenum Chemical compound [Mo] ZOKXTWBITQBERF-UHFFFAOYSA-N 0.000 description 5
- 229910052750 molybdenum Inorganic materials 0.000 description 5
- 239000011733 molybdenum Substances 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000000994 depressogenic effect Effects 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 210000002445 nipple Anatomy 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 206010006187 Breast cancer Diseases 0.000 description 1
- 208000026310 Breast neoplasm Diseases 0.000 description 1
- 208000004434 Calcinosis Diseases 0.000 description 1
- 241001292396 Cirrhitidae Species 0.000 description 1
- 208000008771 Lymphadenopathy Diseases 0.000 description 1
- 208000020312 Thickened skin Diseases 0.000 description 1
- 230000002308 calcification Effects 0.000 description 1
- 210000000038 chest Anatomy 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000000474 nursing effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000010827 pathological analysis Methods 0.000 description 1
- 238000002600 positron emission tomography Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 239000004575 stone Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10088—Magnetic resonance imaging [MRI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10104—Positron emission tomography [PET]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30068—Mammography; Breast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
本公开涉及交互方法、信息处理方法、显示方法及存储介质，交互方法主要包括：捕捉操作体在医学影像诊断界面中对医学影像的感兴趣区域的点击动作和移动动作；在满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域提供给用户作为待诊断对象。信息处理方法主要包括：响应于手动勾勒，建立勾勒后区域的影像信息库，自动更新医学影像的感兴趣区域的诊断信息。显示方法主要提供用户交互界面供用户建立影像信息库。通过本公开的各实施例，通过手动勾勒出边缘勾勒的征象标记，可以更贴合征象边缘，节省用户定位征象的时间。
Description
技术领域
本公开涉及医疗影像处理、识别、显示技术领域，具体涉及一种医学影像诊断界面的交互方法、信息处理方法、医学影像诊断界面的显示方法及计算机可读存储介质。
背景技术
现有技术中，在医学影像分析诊断中，广泛存在的是通过椭圆的轮廓形状对病灶进行标记。因此，针对不规则、长条形等不规则外轮廓的征象，例如乳腺钼靶影像的征象，缺乏更为贴合征象边缘的标记方式。
发明内容
本公开意图提供一种医学影像诊断界面的交互方法、信息处理方法、医学影像诊断界面的显示方法及计算机可读存储介质，通过手动勾勒出边缘勾勒的征象标记，相比当前的椭圆病灶标记，可以更贴合征象边缘，节省用户定位征象的时间。
根据本公开的方案之一，提供医学影像诊断界面的交互方法，包括：
通过操作体在医学影像诊断界面中对医学影像的感兴趣区域进行操作；
捕捉操作体的点击动作和移动动作；
在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，所述预设条件至少包括该路径不存在交叉；
将该勾勒区域提供给用户作为待诊断对象。
在一些实施例中，其中，还包括：
当判断操作体的点击动作和移动动作所确定的路径不满足预设条件，提示用户，提示方式包括以下至少一种：
改变路径颜色；
改变路径线型；
中止捕捉操作体的点击动作和移动动作，输出提示信息。
在一些实施例中，其中，还包括：
基于操作体当前点击动作的次数，响应于操作体的操作，自动完成第一次点击动作对应的描点与最后一次点击动作对应的描点之间的路径，以界定所述勾勒区域。
在一些实施例中，其中，还包括：
通过操作体使第一次点击动作对应的描点与最后一次点击动作对应的描点重合；
当该两描点未重合，响应于操作体的操作，自动完成该两描点之间的路径，以界定所述勾勒区域。
在一些实施例中，其中，还包括：
通过操作体修改所述勾勒线，包括：
基于操作体点击动作在勾勒线上呈现描点，通过操作体移动所述描点的位置，以修改所述勾勒线的形状；或者
通过操作体移动所述勾勒线的位置。
根据本公开的方案之一，提供一种信息处理方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，建立勾勒后区域的影像信息库；
响应于所述影像信息库的建立，自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
在一些实施例中，其中，当感兴趣区域为肿块时，所述处理方法还包括：
确定手动勾勒的勾勒线中第一次点击动作对应的描点；
确定该描点与勾勒线中最远描点之间形成的线段；
将该线段分为N份，N≥3，当N＝3时，取第二段作为肿块的长径，当N>3时，取第二段到第N-1段作为肿块的长径；
以该线段中心做垂直线，得到与肿块标记相交的线段，将该线段以中心一分为二，两条线段分别二等分，取内部的两条线段形成的线段作为肿块的短径。
在一些实施例中，其中，当感兴趣区域为病灶时，所述建立勾勒后区域的影像信息库，包括：
通过在交互界面中勾选和/或填写的输入方式，描述该病灶的参数以建立所述影像信息库。
根据本公开的方案之一，提供一种医学影像诊断界面的显示方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，提供用户交互界面；其中：
所述用户交互界面包括：信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库，以自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
根据本公开的方案之一，提供计算机可读存储介质，其上存储有计算机可执行指令，所述计算机可执行指令由处理器执行时，实现：
根据上述的交互方法；或者
根据上述的信息处理方法；或者
根据上述的显示方法。
本公开的各种实施例的医学影像诊断界面的交互方法、信息处理方法、医学影像诊断界面的显示方法及计算机可读存储介质，通过手动勾勒出边缘勾勒的征象标记，相比当前的椭圆病灶标记，可以更贴合征象边缘，节省用户定位征象的时间。而且，当前的征象标记会与病灶列表、影像所见、影像印象对应描述项联动，从而在诊断系统中更容易定位到征象位置在影像中的位置以及相应的征象特征，提升医学影像及其所包含的感兴趣区域的分析诊断效率。
应当理解，前面的大体描述以及后续的详细描述只是示例性的和说明性的，并非对所要求保护的本公开的限制。
附图说明
在未必按照比例绘制的附图中，不同视图中相似的附图标记可以表示相似的构件。具有字母后缀的相似附图标记或具有不同字母后缀的相似附图标记可以表示相似构件的不同实例。附图通常作为示例而非限制地图示各种实施例，并且与说明书和权利要求书一起用于解释所公开的实施例。
图1示出本公开的实施例的手动勾勒，其中示出了描点和移动轨迹；
图2示出本公开的实施例涉及的预设规则，其中示出了交叉线；
图3示出本公开的实施例涉及的交互界面，其中示出了提示信息；
图4示出本公开的实施例所形成的一些勾勒线。
具体实施方式
为了使得本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例的附图，对本公开实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本公开的一部分实施例，而不是全部的实施例。基于所描述的本公开的实施例，本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
除非另外定义，本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。
为了保持本公开实施例的以下说明清楚且简明，本公开省略了已知功能和已知部件的详细说明。
针对本公开所涉及医学影像，可以为采用各类医学成像设备获取的人体及身体各部位或器官的立体医学影像，例如：核磁共振成像设备(MRI)获取的三维影像，三维立体医学影像也可以为计算机断层扫描设备(CT)扫描获取的三维影像，或者为对计算机断层扫描设备(CT)扫描的的CT二维切片影像进行重建获取的三维影像，本公开不限于此。二维切片影像是指利用医学成像设备获取的人体及身体各部位或器官的二维序列数字断层影像，例如，计算机断层扫描设备(CT)、核磁共振成像设备(MRI)、正电子发射计算机造影设备(PET)、超声设备(Ultrasound)获取的二维切片影像等，本公开不限于此。二维切片影像也可以指对三维立体医学影像的特征进行提取并重建影像后获得的二维影像。
本公开将通过具体实施例的方式，以X线影像主要说明示例，描述本公开的实施例的医学影像的显示方法、信息处理方法及计算机可读存储介质。例如，乳腺钼靶影像，乳腺机一般是钼靶，也即X线检查，单层压缩。机器视觉、图像处理中，从被处理的图像以方框、圆、椭圆、不规则多边形等方式勾勒出需要处理的区域，称为感兴趣区域，即ROI(region ofinterest)。在Halcon、OpenCV、Matlab等机器视觉软件上常用到各种算子(Operator)和函数来求得感兴趣区域ROI，并进行图像的下一步处理。在CT医学影像的分析和诊断过程，对于医学影像中需要分析和诊断的部位、病灶、异物、占位体等等，凡是具有临床分析和诊断意义的感兴趣区域，都符合本公开的各实施例的应用场景。结合临床，本领域技术人员应当理解：病灶可以理解为指机体上发生病变的部分；征象是病变病灶在影像扫描上的表现，举例来说征象可以包括，肿块，钙化，结构扭曲，不对称等；作为本公开实施例所涉及的实际产品也可以包括伴随征象，伴随征象可包括：淋巴结肿大，皮肤增厚，皮肤凹陷，乳头凹陷等。综合来说，以乳房诊断为例，征象是对某个病灶点的描述，伴随征象石对这个乳房整体的描述。比如，病灶点A是肿块，左乳有乳头凹陷。
在本公开的各实施例中，以乳腺钼靶影像所包含的感兴趣区域为肿块为例，例如乳腺肿块。
作为方案之一，本公开的实施例提供了一种医学影像诊断界面的交互方法，包括：
通过操作体在医学影像诊断界面中对医学影像的感兴趣区域进行操作；
捕捉操作体的点击动作和移动动作；
在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，所述预设条件至少包括该路径不存在交叉；
将该勾勒区域提供给用户作为待诊断对象。
由于乳腺钼靶影像的征象大多是长条形、不规则形，通过椭圆勾勒方式对于这类不规则轮廓的征象无法进行准确的界定。本公开通过操作体在诊断界面上的操作，能够手动勾勒ROI解决这一问题。本公开的实施例的操作体，可以是鼠标光标、触控笔、手指等等，例如鼠标光标在医学影像中点击、移动，点选当前诊断界面中诸如“新增征象-边缘勾勒”这样的选项进入本公开实施例的医学影像诊断界面的交互方法的步骤。如图1所示，点击鼠标，诊断系统捕捉鼠标的点击动作即可完成边缘勾勒的描点确定；移动鼠标，诊断系统捕捉鼠标的点击动作即可形成描点和鼠标所在位的勾勒线。以征象或者病灶的手动勾勒为例，在征象边缘勾勒过程中，诊断系统将实时判定鼠标的动作是否合法，即，判断操作体的点击动作和移动动作所确定的路径满足预设条件。一般来讲可以将这一判断过程定义为“判定是否合法”，合法判定条件至少包括该路径不存在交叉，具体实施过程可以为：勾勒线间不相交，和/描点不在勾勒线上。在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，以将该勾勒区域提供给用户作为待诊断对象。通过本公开的实施例的医学影像诊断界面的交互方法，在实际阅片过程中发现的征象，通过手动勾勒出边缘勾勒的征象标记，相比当前的椭圆病灶标记，可以更贴合征象边缘，节省用户定位征象的时间。而且，当前的征象标记会与病灶列表、影像所见、影像印象对应描述项联动，从而在系统中更容易定位到征象位置在影像中的位置以及相应的生理参数，提升阅片效率。实际诊断界面中，当病灶标记呈现点选状态时，将显示病灶标记的描点。诊断界面可以提供配置菜单，提供交互操作对象，供用户设置描点密度，例如，病灶标记的描点的密度可在设置中做配置(较密、适中、较稀)。
本公开所涉及的“影像所见”，可以理解为以“看图说话”的方式将图像中发现的病灶的征象，大小，位置等进行描述；本公开所涉及的“影像印象”是对读图后的结果，可以是由软件模拟人工读图后的输出内容，其中可以包括诊断内容和处理意见；本公开所涉及的“病灶卡片”是罗列病灶，并显示每个病灶对应的属性和参数；本公开所涉及的“病灶热区”是指被选中的病灶标记范围内的区域，若一个医学影像里有多个病灶，选中的会用黄色线标记，也就是热区，没被选中的用蓝色线标记。
优选的，当判断操作体的点击动作和移动动作所确定的路径不满足预设条件，提示用户，提示方式包括以下至少一种：
改变路径颜色；
改变路径线型；
中止捕捉操作体的点击动作和移动动作，输出提示信息。
具体的，若移动鼠标所在描点使该边缘勾勒不合法时，该不规则勾勒变色、呈虚线的方式，如图2中交叉线，实际诊断界面中可以以红色等显目颜色显示，提示用户此操作非法；用户此时强行点击描点，操作无效，弹出轻提示用户此操作非法，如图3中弹出的“禁止线条交叉”的小框，其弹出来后，根据实际显示需求，可以间隔时段显示、闪动、随鼠标光标移动、一段时间后自动消失，等等。
进一步的，鼠标移出不合法位，勾勒线显示正常，此时可正常描点。正常情况下，用户可通过描点使始点和终点重合时，完成边缘不规则勾勒。勾勒过程中，根据用户操作的一般性习惯，可以在本公开实施例的交互方法中配置操作规则，例如：双击鼠标右键可以撤回上一步操作，取消最近一次描点；单击鼠标右键可取消本次征象勾勒，等等，在后文中也可以适用这些配置操作规则。
作为一种优化实施方式，基于操作体当前点击动作的次数，响应于操作体的操作，自动完成第一次点击动作对应的描点与最后一次点击动作对应的描点之间的路径，以界定所述勾勒区域。
具体的，勾勒过程中，当前点击动作的次数满足预定次数，例如，当勾勒描点不小于三个，此时双击鼠标左键，连接描点始点和鼠标双击所在点位置为合法时，自动连接始点和终点完成征象的边缘不规则勾勒；结合上文，若非法，即操作无效，弹出轻提示提示用户此操作非法。
作为上文中点击“新增征象-边缘勾勒”的其他交互方法的步骤，通过操作体使第一次点击动作对应的描点与最后一次点击动作对应的描点重合。如图4中所示，拖拽鼠标，可形成鼠标拖拽路径形成的征象标记勾勒，以及连接始点和终点的预连接线，预连接线中心会有中心点，图中实线为鼠标拖拽路径，虚线为预连接线。拖拽鼠标使始点和终点重合时，征象标记勾勒完成，进一步可以结合后文所述，病灶列表会添加相应的病灶卡片(病灶卡片内包含征象小卡片)，影像所见和影像印象会添加针对该征象的描述，并同步到报告中。当该两描点未重合，响应于操作体的操作，自动完成该两描点之间的路径，以界定所述勾勒区域。具体的，病灶勾勒始点和终点未重合时，为了完成病灶标记勾勒，可以松开鼠标，此时将自动完成始点和终点的连接形成封闭的病灶标记，进一步可以结合后文所述，病灶列表会添加相应的病灶卡片(此时自动连接始点和终点的连接线点选后无描点)，影像所见和影像印象会添加针对该征象的描述，并同步到报告中。
作为进一步可对勾勒线进行修改的优化方案，本公开的实施例的交互方法还包括：
通过操作体修改所述勾勒线，包括：
基于操作体点击动作在勾勒线上呈现描点，通过操作体移动所述描点的位置，以修改所述勾勒线的形状；或者
通过操作体移动所述勾勒线的位置。
具体的，正常状态，征象边缘勾勒线为蓝色，鼠标移动到征象边缘勾勒线上，征象的边缘勾勒线呈点选状态(勾勒线显黄加粗，并显示勾勒描点)。鼠标移动到描点，拖拽鼠标可移动描点，从而修改征象边缘标记的形状；当鼠标移动描点使征象标记不合法时，例如上文中所述勾勒线间相交、描点在勾勒线上，等等，操作无效，描点回到最初位置，弹出轻提示提示用户此操作非法。作为修改病灶标记的热区的具体过程，可以为：基于正常状态下征象边缘勾勒线为蓝色，鼠标移动到征象边缘勾勒线上，边缘勾勒线呈点选状态(勾勒线显黄加粗，并显示勾勒描点)，鼠标移动到描点，拖拽鼠标可移动描点，拖拽可移动病灶标记的描点，从而实现修改病灶标记的热区。
作为方案之一，本公开的实施例提供了一种信息处理方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，建立勾勒后区域的影像信息库；
响应于所述影像信息库的建立，自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
具体的，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，以将该勾勒区域提供给用户作为待诊断对象。正常情况下，用户可通过描点使始点和终点重合时，完成边缘不规则勾勒。在诊断界面中完成征象的边缘勾勒后，病灶列表、影像所见、影像印象会添加针对该征象的特征描述。在一种情况下，拖拽鼠标使始点和终点重合时，征象标记勾勒完成，病灶列表会添加相应的病灶卡片(病灶卡片内包含征象小卡片)，影像所见和影像印象会添加针对该征象的描述，并同步到报告中。在一种情况下，病灶勾勒始点和终点未重合时，松开鼠标完成病灶标记勾勒，此时将自动完成始点和终点的连接形成封闭的病灶标记，病灶列表会添加相应的病灶卡片(此时自动连接始点和终点的连接线点选后无描点)，影像所见和影像印象会添加针对该征象的描述，并同步到报告中。
通过手动勾勒ROI，在形成手动勾勒线以后，确定待诊断对象，建立勾勒后区域的影像信息库。同样的，在已确定的手动勾勒线上，进行修改，能够响应对勾勒线修改更新影像信息库。例如，待诊断对象为病灶，可以通过呈现的方式在诊断界面的诊断信息区域中，病灶卡片会自动增加一个病灶卡片，并通过勾选和填写输入的方式完成对该病灶的参数描述；在完成病灶卡片后，会自动修改影像所见和影像印象的内容。也就是说只要勾勒出病灶，并选择病灶的参数，就自动生成影像所见和影像印象，对修改和撰写诊断报告很有利。
针对肿块，本公开的实施例的信息处理方法可以确定其长短径，具体为：
确定手动勾勒的勾勒线中第一次点击动作对应的描点；
确定该描点与勾勒线中最远描点之间形成的线段；
将该线段分为N份，N≥3，当N＝3时，取第二段作为肿块的长径，当N>3时，取第二段到第N-1段作为肿块的长径；例如，以将本实施例的线段分为四份为例,N＝4，即，取中间两份的线段：第二份的线段和第三分的线段(N-1＝3)作为肿块的长径。又如，以将本实施例的线段分为六份为例,N＝6，即，取中间四份的线段：第二份的线段至第五份的线段(N-1＝5)作为肿块的长径。当然，可以优选将该线段分为N等份。
以该线段中心做垂直线，得到与肿块标记相交的线段，将该线段以中心一分为二，两条线段分别二等分，取内部的两条线段形成的线段作为肿块的短径。
作为方案之一，本公开的实施例提供了一种医学影像诊断界面的显示方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，提供用户交互界面；其中：
所述用户交互界面包括：信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库，以自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
具体的，用户交互界面可以是通过当前诊断界面中所涉及的显示界面、显示区域中进行显示，也可以是独立于当前诊断界面所涉及的显示界面、显示区域，这些显示界面、显示区域可以被认为是当前操作所配置的当前显示界面。即，可以理解为，以区别于当前显示界面的显示界面为显示载体实现显示，以显示本公开各实施例的信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库。这些独立的显示界面可以通过：弹出显示界面、浮动显示界面、突出显示界面、高亮显示界面，甚至于不同于当前显示设备的远程显示界面实现显示。
具体来说，本公开的发明构思之一，旨在能够得到进一步对当前医学影像所包含的感兴趣区域的处理、显示，提供交互方法、信息处理方法、显示方法，通过手动勾勒出边缘勾勒的征象标记，相比当前的椭圆病灶标记，可以更贴合征象边缘，节省用户定位征象的时间。而且，当前的征象标记会与病灶列表、影像所见、影像印象对应描述项联动，从而在诊断系统中更容易定位到征象位置在影像中的位置以及相应的征象特征，提升医学影像及其所包含的感兴趣区域的分析诊断效率。
通过本公开的医学影像显示方法，基于本领域技术人员常识性了解，可以知晓同时公开了：
一种显示设备，包括显示单元和处理器，配置为：通过操作体在医学影像诊断界面中对医学影像的感兴趣区域进行操作；
捕捉操作体的点击动作和移动动作；
在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，所述预设条件至少包括该路径不存在交叉；
将该勾勒区域提供给用户作为待诊断对象。
同时公开了：
一种显示设备，包括显示单元和处理器，配置为：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，提供用户交互界面；其中：
所述用户交互界面包括：信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库，以自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
本公开各实施例所涉及的如上所述的显示设备，与上述各实施例中的医学影像的显示方法属于同一构思，其能够能够进一步对医学影像所包含的关注对象处理、显示，使得在医学影像分析和诊断过程中能够自动调整、显示当前医学影像影像的诊断信息，以提高对病灶信息诊断的准确度，一方面提高了诊断结果，另一方面有利于提高诊断效率，给医学影像的分析和诊断提供了极大的便利。有利于医学影像的分析和诊断，提高了效率和准确度，为临床提供了极大的便利。在此基础上的临床对诊治、用药、护理、康复等这些方面的策略选取，以及病理分析、病例库完善等等各方面，均能够达到良好的有益效果。
在一些实施例中，本公开各实施例所涉及的如上所述的显示设备可以采用各种方式整合在影像的现有处理平台上。例如，可以在胸部影像的现有处理平台上利用开发接口编写上述程序模块，从而实现与现有处理平台的兼容及对其的更新，从而降低硬件成本，更有助于显示设备的推广和应用。
本公开还提供了一种计算机可读存储介质，其上存储有计算机可执行指令，所述计算机可执行指令由处理器执行时，实现根据上述的医学影像诊断界面的交互方法，至少包括：
通过操作体在医学影像诊断界面中对医学影像的感兴趣区域进行操作；
捕捉操作体的点击动作和移动动作；
在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，所述预设条件至少包括该路径不存在交叉；
将该勾勒区域提供给用户作为待诊断对象。
本公开还提供了一种计算机可读存储介质，其上存储有计算机可执行指令，所述计算机可执行指令由处理器执行时，实现根据上述的信息处理方法，至少包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，建立勾勒后区域的影像信息库；
响应于所述影像信息库的建立，自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
本公开还提供了一种计算机可读存储介质，其上存储有计算机可执行指令，所述计算机可执行指令由处理器执行时，实现根据上述的医学影像诊断界面的显示方法，至少包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，提供用户交互界面；其中：
所述用户交互界面包括：信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库，以自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
在一些实施例中，执行算机可执行指令处理器可以是包括一个以上通用处理设备的处理设备，诸如微处理器、中央处理单元(CPU)、图形处理单元(GPU)等。更具体地，该处理器可以是复杂指令集计算(CISC)微处理器、精简指令集计算(RISC)微处理器、超长指令字(VLIW)微处理器、运行其他指令集的处理器或运行指令集的组合的处理器。该处理器还可以是一个以上专用处理设备，诸如专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、片上系统(SoC)等。
在一些实施例中，计算机可读存储介质可以为存储器，诸如只读存储器(ROM)、随机存取存储器(RAM)、相变随机存取存储器(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、电可擦除可编程只读存储器(EEPROM)、其他类型的随机存取存储器(RAM)、闪存盘或其他形式的闪存、缓存、寄存器、静态存储器、光盘只读存储器(CD-ROM)、数字通用光盘(DVD)或其他光学存储器、盒式磁带或其他磁存储设备，或被用于储存能够被计算机设备访问的信息或指令的任何其他可能的非暂时性的介质等。
在一些实施例中，计算机可执行指令可以实现为多个程序模块，多个程序模块共同实现根据本公开中任何一项所述的医学影像的显示方法。
本公开描述了各种操作或功能，其可以实现为软件代码或指令或者定义为软件代码或指令。显示单元可以实现为在存储器上存储的软件代码或指令模块，其由处理器执行时可以实现相应的步骤和方法。
这样的内容可以是可以直接执行(“对象”或“可执行”形式)的源代码或差分代码(“delta”或“patch”代码)。这里描述的实施例的软件实现可以通过其上存储有代码或指令的制品提供，或者通过操作通信接口以通过通信接口发送数据的方法提供。机器或计算机可读存储介质可以使机器执行所描述的功能或操作，并且包括以可由机器(例如，计算显示设备、电子系统等)访问的形式存储信息的任何机制，例如可记录/不可记录介质(例如，只读存储器(ROM)、随机存取存储器(RAM)、磁盘存储介质、光存储介质、闪存显示设备等)。通信接口包括与硬连线、无线、光学等介质中的任何一种接口以与其他显示设备通信的任何机制，例如存储器总线接口、处理器总线接口、因特网连接、磁盘控制器等。通信接口可以通过提供配置参数和/或发送信号来配置以准备通信接口，以提供描述软件内容的数据信号。可以通过向通信接口发送一个或多个命令或信号来访问通信接口。
本公开的实施例的计算机可执行指令可以组织成一个或多个计算机可执行组件或模块。可以用这类组件或模块的任何数量和组合来实现本公开的各方面。例如，本公开的各方面不限于附图中示出的和本文描述的特定的计算机可执行指令或特定组件或模块。其他实施例可以包括具有比本文所示出和描述的更多或更少功能的不同的计算机可执行指令或组件。
以上描述旨在是说明性的而不是限制性的。例如，上述示例(或其一个或更多方案)可以彼此组合使用。例如本领域普通技术人员在阅读上述描述时可以使用其它实施例。另外，在上述具体实施方式中，各种特征可以被分组在一起以简单化本公开。这不应解释为一种不要求保护的公开的特征对于任一权利要求是必要的意图。相反，本公开的主题可以少于特定的公开的实施例的全部特征。从而，以下权利要求书作为示例或实施例在此并入具体实施方式中，其中每个权利要求独立地作为单独的实施例，并且考虑这些实施例可以以各种组合或排列彼此组合。本公开的范围应参照所附权利要求以及这些权利要求赋权的等同形式的全部范围来确定。
以上实施例仅为本公开的示例性实施例，不用于限制本公开，本公开的保护范围由权利要求书限定。本领域技术人员可以在本公开的实质和保护范围内，对本公开做出各种修改或等同替换，这种修改或等同替换也应视为落在本公开的保护范围内。
Claims (10)
1.一种医学影像诊断界面的交互方法，包括：
通过操作体在医学影像诊断界面中对医学影像的感兴趣区域进行操作；
捕捉操作体的点击动作和移动动作；
在判断操作体的点击动作和移动动作所确定的路径满足预设条件下，确定勾勒线，提取由该勾勒线在医学影像上所界定的勾勒区域，所述预设条件至少包括该路径不存在交叉；
将该勾勒区域提供给用户作为待诊断对象。
2.根据权利要求1所述的交互方法，其中，还包括：
当判断操作体的点击动作和移动动作所确定的路径不满足预设条件，提示用户，提示方式包括以下至少一种：
改变路径颜色；
改变路径线型；
中止捕捉操作体的点击动作和移动动作，输出提示信息。
3.根据权利要求1所述的交互方法，其中，还包括：
基于操作体当前点击动作的次数，响应于操作体的操作，自动完成第一次点击动作对应的描点与最后一次点击动作对应的描点之间的路径，以界定所述勾勒区域。
4.根据权利要求1所述的交互方法，其中，还包括：
通过操作体使第一次点击动作对应的描点与最后一次点击动作对应的描点重合；
当该两描点未重合，响应于操作体的操作，自动完成该两描点之间的路径，以界定所述勾勒区域。
5.根据权利要求1所述的交互方法，其中，还包括：
通过操作体修改所述勾勒线，包括：
基于操作体点击动作在勾勒线上呈现描点，通过操作体移动所述描点的位置，以修改所述勾勒线的形状；或者
通过操作体移动所述勾勒线的位置。
6.一种信息处理方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，建立勾勒后区域的影像信息库；
响应于所述影像信息库的建立，自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
7.根据权利要求6所述的处理方法，其中，当感兴趣区域为肿块时，所述处理方法还包括：
确定手动勾勒的勾勒线中第一次点击动作对应的描点；
确定该描点与勾勒线中最远描点之间形成的线段；
将该线段分为N份，N≥3，当N＝3时，取第二段作为肿块的长径，当N>3时，取第二段到第N-1段作为肿块的长径；
以该线段中心做垂直线，得到与肿块标记相交的线段，将该线段以中心一分为二，两条线段分别二等分，取内部的两条线段形成的线段作为肿块的短径。
8.根据权利要求6所述的处理方法，其中，当感兴趣区域为病灶时，所述建立勾勒后区域的影像信息库，包括：
通过在交互界面中勾选和/或填写的输入方式，描述该病灶的参数以建立所述影像信息库。
9.一种医学影像诊断界面的显示方法，包括：
响应于在医学影像诊断界面中对医学影像的感兴趣区域的手动勾勒，提供用户交互界面；其中：
所述用户交互界面包括：信息选择栏和/或文本输入栏，供用户建立勾勒后区域的影像信息库，以自动更新医学影像的感兴趣区域的诊断信息，所述诊断信息至少包括影像所见和/或影像印象。
10.一种计算机可读存储介质，其上存储有计算机可执行指令，所述计算机可执行指令由处理器执行时，实现：
根据权利要求1至5中任一项所述的交互方法；或者
根据权利要求6至8中任一项所述的信息处理方法；或者
根据权利要求9所述的显示方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911382730.1A CN111145877A (zh) | 2019-12-27 | 2019-12-27 | 交互方法、信息处理方法、显示方法及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911382730.1A CN111145877A (zh) | 2019-12-27 | 2019-12-27 | 交互方法、信息处理方法、显示方法及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111145877A true CN111145877A (zh) | 2020-05-12 |
Family
ID=70521230
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911382730.1A Pending CN111145877A (zh) | 2019-12-27 | 2019-12-27 | 交互方法、信息处理方法、显示方法及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111145877A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111681739A (zh) * | 2020-06-15 | 2020-09-18 | 杭州依图医疗技术有限公司 | 病理信息的显示方法及计算机可读存储介质 |
| CN111899850A (zh) * | 2020-08-12 | 2020-11-06 | 上海依智医疗技术有限公司 | 医学影像的信息处理方法、显示方法及可读存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008138140A1 (en) * | 2007-05-15 | 2008-11-20 | Val-Chum, Societe En Commandite | A method for tracking 3d anatomical and pathological changes in tubular-shaped anatomical structures |
| US20100278424A1 (en) * | 2009-04-30 | 2010-11-04 | Peter Warner | Automatically Extending a Boundary for an Image to Fully Divide the Image |
| US20110137132A1 (en) * | 2009-11-24 | 2011-06-09 | Gustafson Gregory A | Mammography Information System |
| US20140033126A1 (en) * | 2008-12-08 | 2014-01-30 | Hologic, Inc. | Displaying Computer-Aided Detection Information With Associated Breast Tomosynthesis Image Information |
| CN106780316A (zh) * | 2017-01-25 | 2017-05-31 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像裁剪方法、图像裁剪装置和移动终端 |
| CN109712252A (zh) * | 2018-12-20 | 2019-05-03 | 上海联影医疗科技有限公司 | 图像的编辑方法、装置、计算机设备以及存储介质 |
-
2019
- 2019-12-27 CN CN201911382730.1A patent/CN111145877A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008138140A1 (en) * | 2007-05-15 | 2008-11-20 | Val-Chum, Societe En Commandite | A method for tracking 3d anatomical and pathological changes in tubular-shaped anatomical structures |
| US20140033126A1 (en) * | 2008-12-08 | 2014-01-30 | Hologic, Inc. | Displaying Computer-Aided Detection Information With Associated Breast Tomosynthesis Image Information |
| US20100278424A1 (en) * | 2009-04-30 | 2010-11-04 | Peter Warner | Automatically Extending a Boundary for an Image to Fully Divide the Image |
| US20110137132A1 (en) * | 2009-11-24 | 2011-06-09 | Gustafson Gregory A | Mammography Information System |
| CN106780316A (zh) * | 2017-01-25 | 2017-05-31 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像裁剪方法、图像裁剪装置和移动终端 |
| CN109712252A (zh) * | 2018-12-20 | 2019-05-03 | 上海联影医疗科技有限公司 | 图像的编辑方法、装置、计算机设备以及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 徐炳亭 主编: "《计算机应用基础》", vol. 2001, 28 February 2001, 北京：机械工业出版社, pages: 113 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111681739A (zh) * | 2020-06-15 | 2020-09-18 | 杭州依图医疗技术有限公司 | 病理信息的显示方法及计算机可读存储介质 |
| CN111899850A (zh) * | 2020-08-12 | 2020-11-06 | 上海依智医疗技术有限公司 | 医学影像的信息处理方法、显示方法及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111124233B (zh) | 医学影像的显示方法、交互方法及存储介质 | |
| JP4850892B2 (ja) | 眼底画像表示装置及びその制御方法、コンピュータプログラム | |
| CN104346821B (zh) | 用于医学成像的自动规划 | |
| CN102395318B (zh) | 诊断支援装置及诊断支援方法 | |
| CN103460245B (zh) | 信息处理设备和信息处理方法 | |
| CN103565470B (zh) | 基于三维虚拟图像的超声图像自动标注方法及系统 | |
| US10497123B1 (en) | Isolation of aneurysm and parent vessel in volumetric image data | |
| JP7132299B2 (ja) | 医用画像処理方法、医用画像処理装置、医用画像処理システム及び医用画像処理プログラム | |
| JP2017174039A (ja) | 画像分類装置、方法およびプログラム | |
| CN106388843A (zh) | 医学影像设备及其扫描方法 | |
| CN111430014B (zh) | 腺体医学影像的显示方法、交互方法及存储介质 | |
| CN111142753A (zh) | 交互方法、信息处理方法及存储介质 | |
| CN104424647A (zh) | 用于对医学图像进行配准的方法和设备 | |
| Kok et al. | Articulated planar reformation for change visualization in small animal imaging | |
| KR101953752B1 (ko) | 심층 신경망을 이용하여 영상의 분류 및 국소화를 수행하는 방법 및 이를 이용한 장치 | |
| US20170262584A1 (en) | Method for automatically generating representations of imaging data and interactive visual imaging reports (ivir) | |
| CN107481326A (zh) | 一种基于ct影像体渲染的解剖结构vr显示方法 | |
| CN113516700A (zh) | 图像处理方法、装置及其相关设备和存储介质 | |
| US20220318991A1 (en) | Artificial intelligence assisted diagnosis and classification of liver cancer from image data | |
| CN111145877A (zh) | 交互方法、信息处理方法、显示方法及存储介质 | |
| US11798249B1 (en) | Using tangible tools to manipulate 3D virtual objects | |
| US20150110369A1 (en) | Image processing apparatus | |
| CN113516758A (zh) | 图像显示方法及相关装置和电子设备、存储介质 | |
| CN108876783B (zh) | 图像融合方法及系统、医疗设备和图像融合终端 | |
| JP7246912B2 (ja) | 医用情報処理装置及び医用情報処理システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |