CN117877687A - 信息展示方法、装置、设备和存储介质 - Google Patents
信息展示方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN117877687A CN117877687A CN202311767430.1A CN202311767430A CN117877687A CN 117877687 A CN117877687 A CN 117877687A CN 202311767430 A CN202311767430 A CN 202311767430A CN 117877687 A CN117877687 A CN 117877687A
- Authority
- CN
- China
- Prior art keywords
- information
- target
- medical
- display
- medical image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000003860 storage Methods 0.000 title claims abstract description 16
- 230000004927 fusion Effects 0.000 claims description 18
- 238000003709 image segmentation Methods 0.000 claims description 17
- 230000001575 pathological effect Effects 0.000 claims description 16
- 230000004044 response Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 4
- 238000003745 diagnosis Methods 0.000 abstract description 15
- 230000000694 effects Effects 0.000 abstract description 7
- 230000003902 lesion Effects 0.000 description 52
- 210000001519 tissue Anatomy 0.000 description 46
- 230000000875 corresponding effect Effects 0.000 description 29
- 239000000284 extract Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 9
- 230000001960 triggered effect Effects 0.000 description 9
- 230000003190 augmentative effect Effects 0.000 description 8
- 230000002093 peripheral effect Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 238000002591 computed tomography Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 239000011521 glass Substances 0.000 description 5
- 208000007536 Thrombosis Diseases 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000002604 ultrasonography Methods 0.000 description 4
- 210000003484 anatomy Anatomy 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000001502 supplementing effect Effects 0.000 description 3
- 208000024891 symptom Diseases 0.000 description 3
- 238000002583 angiography Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000000153 supplemental effect Effects 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 210000002216 heart Anatomy 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 238000002595 magnetic resonance imaging Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000036285 pathological change Effects 0.000 description 1
- 231100000915 pathological change Toxicity 0.000 description 1
- 238000002601 radiography Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Engineering & Computer Science (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本申请提供一种信息展示方法、装置、设备和存储介质，本申请中的方法包括：在预设的目标显示区域显示目标医学影像；响应针对目标医学影像的对象选取操作，基于对象选取操作的操作位置信息提取目标医学影像中的目标医学对象；响应针对目标医学对象的关联信息获取操作，获取与目标医学对象对应的关联医学信息，基于关联医学信息与目标医学对象的目标对象信息进行结合，得到目标展示信息；根据预设投影模块的当前设备位置和目标显示区域确定目标展示信息的信息显示区域，将目标展示信息投射到信息显示区域进行显示，以使得在观看显示医学影像时，目标展示信息能够在目标医学影像中叠加显示。实现提高目标医学影像的辅助诊断效果，提高辅助诊断效率。
Description
技术领域
本申请涉及医学信息展示技术领域，具体涉及一种信息展示方法、装置、设备和存储介质。
背景技术
目前，随着医学扫描技术的飞速发展，通过不同医学扫描设备对目标对象进行扫描并在指定显示屏中显示目标医学影像在医疗辅助领域得到广泛的应用。然而现有的疾病复杂程度较高，且现有的医学影像在显示过程中只能单纯地显示医学影像，无法对医学影像中的影像信息进行提取并显示，这导致医生观看医学影像发现异常区域的时候，需要手动收集该病变相关的多种类型数据信息，通过反复比对、观察该病灶的不同影像类型或不同信息类型的数据信息，来做出最终的判断。这种医学影像展示方式需要医生手动获取影像信息且频繁切换观察不同信息，影响医生诊断效率和准确率。
发明内容
本申请实施例提供一种信息展示方法、装置、设备和存储介质，旨在解决现有技术中显示医学影像的辅助效果较差且效率低下的技术问题。
一方面，本申请实施例提供一种信息展示方法，所述信息展示方法包括以下步骤：
在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
在本申请一种可能的实现方式中，所述基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象，包括：
获取所述对象选取操作的操作位置信息，基于所述操作位置信息确定所述目标医学影像中被选中的目标关注区域；
根据预设的影像分割模型对所述目标关注区域进行影像分割，得到目标医学对象；
对所述目标医学对象进行信息提取，得到所述目标医学影像中的目标医学对象。
在本申请一种可能的实现方式中，所述响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对所述目标医学对象的第一信息获取操作，获取所述第一信息获取操作中的辅助信息类型；
根据所述辅助信息类型和所述操作位置信息调取预设数据库中的关联医学对象，以及所述关联医学对象的关联位置关系和候选对象信息；
若所述关联医学对象的关联位置信息和所述目标医学对象的解剖位置信息相同，则将所述关联医学对象的候选医学信息与所述目标医学对象关联，得到所述关联医学信息。
在本申请一种可能的实现方式中，所述响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对跨屏医学影像的第二信息获取操作，基于所述第二信息获取操作的跨屏位置信息和预设的影像分割模型提取所述跨屏医学影像中的跨屏医学对象；
根据所述目标医学对象的对象特征信息和/或对象位置信息与所述跨屏医学对象的跨屏对象信息进行关联，得到关联医学信息。
在本申请一种可能的实现方式中，所述基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
获取所述关联医学信息的关联信息类型，以及所述目标对象信息的对象信息类型；
获取所述关联信息类型中与各所述对象信息类型均不相同的优势信息类型，获取所述优势信息类型对应的目标补充信息；
将所述目标补充信息与所述目标对象信息进行补充结合，得到目标展示信息。
在本申请一种可能的实现方式中，所述基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
基于所述关联医学信息和所述目标对象信息输入预设融合模型进行信息融合，得到融合对象信息；
提取所述融合对象信息对应的对象特征信息，基于所述对象特征信息和预设重建算法进行影像重建，得到目标展示信息。
在本申请一种可能的实现方式中，所述根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，包括：
获取所述预设投影模块的当前设备位置，以及所述预设投影模块与所述目标显示区域的相对位置关系；
根据所述当前设备位置和所述相对位置关系确定所述目标展示信息待投射的信息显示区域；
将所述目标展示信息投射到所述信息显示区域进行显示。
另一方面，本申请提供一种信息展示装置，所述信息展示装置包括：
影像显示模块，被配置为在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
对象提取模块，被配置为响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
信息结合模块，被配置为响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
信息投射模块，被配置为根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
另一方面，本申请还提供一种信息展示设备，所述信息展示设备包括：
一个或多个处理器；
存储器；以及
一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现所述的信息展示方法的步骤。
另一方面，本申请还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行所述的信息展示方法中的步骤。
本申请中通过在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。实现在医学影像展示过程中通过响应用户操作信息，基于用户操作信息进行信息提取，并将提取到的展示信息通过AR或者投影方式投射到目标医学影像进行叠加显示，以使得用户在查看目标医学影像时，该目标医学影像能够充分展现不同类型的辅助信息，进而提高目标医学影像的辅助诊断效果，提高辅助诊断效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例信息展示方法的场景示意图；
图2为本申请实施例中信息展示方法的一个实施例的流程示意图；
图3为为本申请实施例提供的信息展示方法中进行信息整合展示的一个实施例的场景示意图；
图4为本申请实施例提供的信息展示方法中进行跨屏信息关联的一个实施例的流程示意图；
图5为本申请实施例提供的信息展示方法中进行信息结合，得到目标展示信息的一个实施例的流程示意图；
图6为本申请实施例提供的信息展示装置的一个实施例的结构示意图；
图7为本申请实施例提供的信息展示设备的一个实施例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本申请中，“示例性”一词用来表示“用作例子、例证或说明”。本申请中被描述为“示例性”的任何实施例不一定被解释为比其它实施例更优选或更具优势。为了使本领域任何技术人员能够实现和使用本发明，给出了以下描述。在以下描述中，为了解释的目的而列出了细节。应当明白的是，本领域普通技术人员可以认识到，在不使用这些特定细节的情况下也可以实现本发明。在其它实例中，不会对公知的结构和过程进行详细阐述，以避免不必要的细节使本发明的描述变得晦涩。因此，本发明并非旨在限于所示的实施例，而是与符合本申请所公开的原理和特征的最广范围相一致。
目前，随着医学扫描技术的飞速发展，通过不同医学扫描设备对目标对象进行扫描并在指定显示屏中显示目标医学影像在医疗辅助领域得到广泛的应用。然而现有的疾病复杂程度较高，且现有的医学影像在显示过程中只能单纯地显示医学影像，无法对医学影像中的影像信息进行提取并显示，这导致医生观看医学影像发现异常区域的时候，需要手动收集该病变相关的多种类型数据信息，通过反复比对、观察该病灶的不同影像类型或不同信息类型的数据信息，来做出最终的判断。这种医学影像展示方式需要医生手动获取影像信息且频繁切换观察不同信息，影响医生诊断效率和准确率。
基于此，本申请提出一种信息展示方法、装置、设备和计算机可读存储介质，以解决现有技术中显示扫描医学影像的辅助效果较差且效率低下的技术问题。
本发明实施例中的信息展示方法应用于信息展示装置，信息展示装置设置于信息展示设备，信息展示设备中设置有一个或多个处理器、存储器，以及一个或多个应用程序，其中一个或多个应用程序被存储于存储器中，并被配置为由处理器执行以实施信息展示方法；其中，信息展示设备可以是智能终端，例如投影设备、增强现实设备、虚拟现实设备或混合现实设备等；可选的，辅助显示设备还可以是一台与投影设备、增强现实设备、虚拟现实设备或混合现实设备通信连接的服务器，或者多台服务器组成的服务集群。
如图1所示，图1为本申请实施例信息展示方法的场景示意图，本发明实施例中信息展示场景包括信息展示设备100(信息展示设备100中集成有信息展示装置)和医学扫描设备200，信息展示设备100中运行有信息展示方法对应的计算机可读存储介质，以执行信息展示方法的步骤。该医学扫描设备200为对目标对象进行扫描并在指定的显示屏中显示目标医学影像的医学扫描设备。例如，该医学扫描设备可以为计算机断层摄影(CT，Computed Tomography)、4D超声和磁共振(MR，Magnetic resonance imaging)、造影扫描、DR扫描和超声扫描等任意成像系统。可以理解的是，图1所示信息展示方法场景中的信息展示设备，或者信息展示设备中包含的装置并不构成对本发明实施例的限制，即信息展示方法的场景中包含的信息展示设备的设备数量、设备种类，或者各个设备中包含的装置数、装置种类不影响本发明实施例中技术方案的整体实现，均可以算作本发明实施例要求保护技术方案的等效替换或者衍生。
本发明实施例中信息展示设备100主要用于：在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
本发明实施例中的信息展示设备100可以是独立的信息展示设备，例如投影设备、增强现实设备、虚拟现实设备或混合现实设备等，也可以是由多个信息展示设备组成的信息展示网络或信息展示集群。
本申请实施例提供一种信息展示方法、装置、设备和计算机可读存储介质，以下分别进行详细说明。
本领域技术人员可以理解的是，图1中所示出的应用环境，仅仅是与本申请方案相关的其中一种应用场景，并不构成对本申请方案应用场景的限定，其它的应用环境还可以包括比图1所示出的更多或更少的信息展示设备，或者信息展示网络连接关系，例如图1中仅示出一个信息展示设备，可以理解的是该信息展示方法的场景还可以包括一个或多个信息展示设备，具体在此不做限定；该信息展示设备100中还可以包括存储器，用于存储目标展示信息和其它数据。
需要说明的是，图1所示的信息展示方法的场景示意图仅仅是一个示例，本发明实施例描述的信息展示方法的场景是为了更加清楚的说明本发明实施例的技术方案，并不构成对本发明实施例提供的技术方案的限定。
基于上述信息展示方法的场景，提出本发明所公开的信息展示方法的各个实施例。
如图2所示，图2为本申请实施例中信息展示方法的一个实施例的流程示意图，该信息展示方法包括如下步骤201～步骤204：
201、在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
本实施例中的信息展示方法应用于信息展示设备，信息展示设备的种类和数量不做具体限定，即，信息展示设备可以是一个或多个智能终端，例如投影设备、增强现实设备、虚拟现实设备或混合现实设备等智能终端。例如，在一个具体实施例中，该辅助显示设备可以为在医生进行手术或诊断等临床场景下为医生提供更好地扫描影像显示或提示增强信息的增强现实设备。
其中，该目标医学影像为通过医学扫描设备扫描目标对象后，在医学扫描设备关联的至少一个目标显示屏中的目标显示区域中显示的扫描医学影像。该目标医学影像可以为CT(Computed Tomography,计算机断层扫描)影像、DSA(Digital SubtractionAngiography，数字减影-血管造影)影像、DR(digital radiography)影像和超声影像等成像系统扫描并显示在目标显示屏中的医学扫描影像。目标对象为医生进行手术或诊断等临床场景下的患者。
其中，该目标显示区域为在目标显示屏中显示该目标医学影像的显示界面，可选的，该目标显示区域的显示界面尺寸可以小于或等于该目标显示屏的屏幕尺寸，即，该目标显示区域可以为全屏显示区域，在其它实施例中，该目标显示区域可以为固定或可移动的窗口化显示区域。
具体的，医生利用医学扫描设备对目标对象的特定生理位置进行扫描，得到目标医学影像，并在该医学扫描设备对应的目标显示屏的目标显示区域中实时显示获取到的目标医学影像，其中，该目标医学影像中包含正常生理组织和/或病变生理组织。其中，该正常生理组织为目标对象中未发生病变的健康生理组织。病变生理组织是在正常生理组织内部或附近存在的异常生理组织。在一个具体实施例中，该正常生理组织包括心脏、肝脏、肺部、血管和骨骼等部位的生理组织。该病变生理组织所在区域为病灶区域。
具体的，医生在对目标对象进行扫描后，能够通过目标显示屏中目标显示区域所显示的目标医学影像检测该目标对象的正常生理组织状态和/或异常生理组织状态。然而，现有的医学扫描设备只能显示该目标医学影像，无法有效地获取该目标医学影像及目标对象的历史医学影像的影像信息并呈现在该目标显示区域。基于此，本实施例中，通过信息展示设备响应用户交互获取待展示的目标展示信息，并在目标医学影像中叠加显示该目标展示信息。
202、响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
具体的，在医学扫描设备对目标对象的特定生理位置进行扫描，得到目标医学影像，并在该医学扫描设备对应的目标显示屏的目标显示区域中实时显示获取到的目标医学影像的过程中，信息展示设备还能够响应针对目标医学影像的对象选取操作，并且基于该对象选取操作的操作位置信息提取该目标医学影像中的目标医学对象。
具体的，信息展示设备能够接收用户通过触屏、电子笔、键盘、鼠标、或者其它控制器(例如VR/AR/MR手柄)所触发针对该目标医学影像的点击或者框选的对象选取操作，信息展示设备在接收到该对象选取操作后，获取该对象选取操作的操作位置信息，并基于该操作位置信息提取该目标医学影像中的目标医学对象，其中，该目标医学对象为目标医学影像中被选中的正常生理组织、病变生理组织或者病变生理组织的病变周边组织等对象影像。例如，该目标医学对象可以为病变区域、病变相关征象区域和病变周围组织区域和被选中的生理组织区域中的任意一种或多种。
具体的，信息展示设备在获取到对象选取操作后，解析该对象选取操作，获取该对象选取操作的操作位置信息，其中，该操作位置信息可以为点击位置坐标或者对象选取操作对应的选取框的对角坐标等表征该对象选取操作位置的信息。信息展示设备在获取到该操作位置信息后，通过该操作位置信息定位该目标医学影像中被对象选取操作所选中的目标关注区域，其中，该目标关注区域为目标医学影像中被对象选取操作选中的影像区域。
可选的，该操作位置信息还可以为除坐标外的其它定位信息。例如，在其它实施例中，该操作位置信息可以为用户手部定位信息或者控制器定位信息，例如，在使用VR/AR/MR手柄进行触控选取或者隔空选取时，信息展示设备能够获取该手柄在触发对象选取操作时的六自由度信息，基于该六自由度信息确定该对象选取操作的操作位置信息。
可选的，若该对象选取操作为隔空选取操作，则信息展示设备调用拍摄模块拍摄该目标医学影像，并根据拍摄到的目标医学影像和对象选取操作进行影像分割，得到目标医学影像。
可选的，在其它实施例中，该信息展示设备为VR/AR/MR设备时，还能够在指定位置设置一预设操作空间，并将该目标医学影像导入到该预设操作空间，并在该预设操作空间中执行对象选取操作，根据该对象选取操作进行影像分割，得到目标医学影像。其中，该预设操作空间为基于VR/AR/MR技术生成的支持导入医学影像，并且能够响应针对医学影像的各操作指令的虚拟成像空间。
具体的，信息展示设备还预先设置了训练好的影像分割模型，信息展示设备在获取到被选中的目标关注区域后，通过该影像分割模型对该目标关注区域进行影像分割，得到目标医学对象。
可选的，在一个具体实施例中，目标显示屏的预设目标显示区域中显示的目标医学影像为血管造影影像，医生能够利用电子笔对血管造影影像中的任意区域进行圈画操作，从而触发针对该血管造影影像的对象选取操作，并根据该对象选取操作的操作位置信息确定对象选取操作的目标关注区域，并分割该目标关注区域中的目标医学对象。
203、响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
具体的，信息展示设备在提取到该目标医学对象后，还响应针对该目标医学对象的关联信息获取操作，获取该目标医学对象关联的关联医学信息，并基于该关联医学信息和目标医学对象的目标对象信息进行结合，得到目标展示信息。其中，该关联信息获取操作包括第一信息获取操作和第二信息获取操作，其中，第一信息获取操作为获取预设数据库中关联医学对象的关联医学信息的操作指令。第二信息获取操作为对其它显示屏中显示的其它医学影像进行关联信息提取的操作指令。即。信息展示设备能够提取后台数据库中的历史医学影像或其它模态的医学影像中关联医学对象的关联医学信息，或者提取其它显示屏中显示的医学影像中医学对象的关联医学信息。其中，该关联医学信息为表征关联医学对象的对象状态的医学信息。例如，该关联医学信息可以为病变位置信息、病变轮廓信息、病灶性质信息、病灶尺寸信息、病灶类型信息、病变相关区域信息(例如与病灶的解剖学关联的周边区域等相关区域)、相关区域生理结构名称信息、相关生理组织区域轮廓信息、病变程度信息、病变分布信息和病变征象等图片或文字信息中的至少一项或多项。
可选的，在一个具体实例中，信息展示设备响应用户触发的针对该目标医学影像的第一信息获取操作，并根据第一信息获取操作获取预设数据库中的关联医学对象，以及关联医学对象和目标医学对象关联的关联医学信息。
具体的，信息展示设备在提取到目标医学对象后，还能够在指定控制界面显示待观察的辅助信息类型按钮(可以为实体按钮或者虚拟按钮控件)，并响应用户通过触屏、电子笔、键盘、鼠标、或者其它控制器(例如VR/AR/MR手柄)对辅助信息类型按钮进行点击或选取所触发的第一信息获取操作。可选的，在一个具体实施例中，该指定控制界面可以设置于上述预设操作空间中的特定控制区域。其中，该指定控制界面可以为VR/AR/MR等技术生成的虚拟控制界面，可选的，该指定控制界面还可以为具备定位和投影功能的电子笔所投射包含辅助信息类型按钮控件和信息整合按钮控件的控制界面。
具体的，信息展示设备在获取到该第一信息获取操作后，解析该信息获取操作，确定该第一信息获取操作中的辅助信息类型，其中，该辅助信息类型为被选中的辅助信息类型按钮对应的待观察的医学信息类型。
具体的，信息展示设备将获取到的辅助信息类型和操作位置信息输入到预设数据库中，调取该预设数据库中存储的关联医学影像，并提取该关联医学影像中的关联医学对象，以及该关联医学对象中与该辅助信息类型相同的候选对象信息和关联位置关系。其中，该关联医学影像为与目标医学影像关联的历史医学影像或者不同模态的医学影像。
具体的，信息展示设备在获取到候选对象信息后，根据该候选对象信息和关联位置关系与目标医学对象进行关联，即，将关联医学对象的关联位置信息和目标医学对象的解剖位置关系进行匹配，或者基于关联医学对象的关联位置信息生成buff区域，若该关联医学对象的关联位置信息和目标医学对象的解剖位置信息相同，则将关联医学对象的候选医学信息与目标医学对象进行关联，得到该目标对象的关联医学信息。从而消除不同影像间目标对象发生的位置偏差，使得信息关联更加准确。
例如，在一个具体实施例中，在目标显示区域中显示的目标医学影像为血管造影影像，用户通过信息展示设备选择需要观察的辅助信息类型为斑块信息类型，则信息展示设备根据该斑块信息类型和该操作位置信息调取预设数据库中存储的关联医学影像，该关联医学影像可以为CTA医学影像和超声医学影像等医学影像，信息展示设备在获取关联医学影像后，还提取该关联医学影像中的关联医学对象，即斑块病灶对象，以及该斑块病灶对象的关联位置关系和候选对象信息，该候选对象信息为该斑块病灶对象的斑块病灶信息。信息展示设备根据获取到的关联位置信息和该学过造影影像中的目标医学对象的解剖位置进行匹配，并将匹配成功的斑块病灶信息与该目标医学对象进行关联，得到用户待观察的关联医学信息。
可选的，在其它实施例中，该信息展示设备还能够响应第二信息获取操作，将与目标医学影像不在同一显示屏或者同一显示区域的跨屏医学影像的对象信息进行关联，得到关联医学信息。
具体的，信息展示设备在获取到目标医学对象的关联医学信息后，还将该关联医学信息和目标医学对象的目标对象信息进行结合，得到待叠加展示于目标医学影像上的目标展示信息。其中，该目标对象信息可以为病变位置信息、病变轮廓信息、病灶性质信息、病灶尺寸信息、病灶类型信息、病变相关区域信息(例如与病灶的解剖学关联的周边区域等相关区域)、相关区域生理结构名称信息、相关生理组织区域轮廓信息、病变程度信息、病变分布信息和病变征象等图片或文字信息中的至少一项或多项。
可选的，将该关联医学信息和目标医学对象的目标对象信息进行结合包括优势信息补充结合、影像重建结合、病变变化趋势分析结合和病变尺寸计算结合等结合方式。
204、根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示。
具体的，信息展示设备在获取到目标展示信息后，还根据该预设投影模块的当前设备位置和目标显示区域确定该目标展示信息的信息显示区域，将该目标展示信息投射到该信息显示区域进行显示，从而使得用户在观看该显示医学影像时，目标展示信息能够在目标医学影像中叠加显示。
其中，该预设投影模块可以为投影仪或者虚拟现实投影模块、增强现实投影模块或混合现实投影模块等。在一个具体实施例中，该预设投影模块为可穿戴的增强现实显示端，例如，预设投影模块可以为AR眼镜。
具体的，信息展示设备获取该预设投影模块的当前设备位置，并且获取该目标显示区域的显示区域位置，根据该当前设备位置和显示区域位置计算预设投影模块和目标显示区域的相对位置关系，并根据该预设投影模块的当前设备位置和该相对位置关系计算该目标展示信息待投射的信息显示区域。
其中，该信息显示区域为能够接收并显示目标展示信息，以使得用户在使用VR/AR/MR显示端或者肉眼观看目标医学影像时，在视觉效果上能够呈现出目标展示信息叠加于该目标医学影像上显示的显示区域。
可选的，在一个具体实施例中，若该信息展示设备为VR/AR/MR设备，则该信息显示区域可以为该VR/AR/MR显示端(例如可穿戴VR/AR/MR智能眼镜)在指定区域或显示端中指定区域生成的虚拟显示区域。例如，该信息显示区域可以为VR/AR/MR显示端中生成的虚拟显示区域，也可以为基于VR/AR/MR技术在VR/AR/MR显示端外隔空生成的虚拟显示区域。
可选的，在一个具体实施例中，若该信息展示设备为智能投影设备，或者与该智能投影设备通信连接的智能终端，则该信息展示区域可以为目标显示屏中目标显示区域中的特定显示区域。
具体的，信息展示设备获取该预设投影模块的当前设备位置，并获取该预设投影模块与目标显示区域的相对位置关系，并根据该当前设备位置和相对位置关系确定该目标展示信息待投射的信息显示区域，并将该目标展示信息投射到信息显示区域进行显示，以使得用户在使用VR/AR/MR显示端或者肉眼观看目标医学影像时，在视觉效果上能够呈现出目标展示信息叠加于该目标医学影像上显示的显示区域。
可选的，若该预设投影模块为投影仪等光学投影设备时，则信息展示设备驱动该投影仪将该目标展示信息投影到信息显示区域，使得用户无需佩戴特定的显示设备即可用人眼观察到目标展示信息投射到信息显示区域与目标医学影像叠加后的实际显示影像，从而能够实现不对医学扫描设备进行处理的情况下即可提高医学扫描设备显示扫描影像的信息丰富度。
可选的，若该预设投影模块为增强现实设备(例如AR眼镜)，则信息展示设备在用户佩戴该AR眼镜且观看目标医学影像时，信息展示设备能够通过该AR眼镜将目标展示信息虚拟投射到信息显示区域，以使得用户能够通过该AR眼镜看到目标展示信息叠加显示于该目标医学影像中，并且该目标展示信息的显示效果还能够随用户的移动或交互进行对应控制更新。
可选的，如图3所示，图3为本申请实施例提供的信息展示方法中进行信息整合展示的一个实施例的场景示意图，在图3所示的实施例中，该信息展示设备可以为AR显示设备或者具备投影功能和定位功能的智能电子笔(图中未示出)，该信息展示设备够访问该后台数据库或者其它显示屏中的关联医学影像，确定该关联医学影像中与目标医学对象关联医学对象，提取该关联医学对象的关联医学信息，并基于该AR显示设备或者智能电子笔投射的控制菜单或者控制控件的触发指令将该关联医学信息和目标对象信息进行结合，得到目标展示信息，并将该目标展示信息投射到信息显示区域进行显示。
本实施例中，信息展示设备通过在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。实现在医学影像展示过程中通过响应用户操作信息，基于用户操作信息进行信息提取，并将提取到的展示信息通过AR或者投影方式投射到目标医学影像进行叠加显示，以使得用户在查看目标医学影像时，该目标医学影像能够充分展现不同类型的辅助信息，进而提高目标医学影像的辅助诊断效果，提高辅助诊断效率。
如图4所示，图4为本申请实施例提供的信息展示方法中进行跨屏信息关联的一个实施例的流程示意图，具体的，本实施例中，信息展示方法还包括步骤301～步骤302：
301、响应针对跨屏医学影像的第二信息获取操作，基于所述第二信息获取操作的跨屏位置信息和预设的影像分割模型提取所述跨屏医学影像中的跨屏医学对象；
302、根据所述目标医学对象的对象特征信息和/或对象位置信息与所述跨屏医学对象的跨屏对象信息进行关联，得到关联医学信息。
基于上述实施例，本实施例中，该信息展示设备还能够响应第二信息获取操作，将与目标医学影像不在同一显示屏或者同一显示区域的跨屏医学影像的对象信息进行关联，得到关联医学信息。
具体的，信息展示设备能够接收用户通过触屏、电子笔、键盘、鼠标、或者其它控制器(例如VR/AR/MR手柄)通过点击或选择其它显示屏中显示的跨屏医学影像所触发的第二信息获取操作，并获取该第二信息获取操作的跨屏位置信息，其中，该跨屏位置信息为表征该第二信息获取操作的操作定位信息。在一个具体实施例中，该跨屏位置信息包括第二信息获取操作中的选择框坐标信息。
具体的，信息展示设备在获取到跨屏位置信息后，确定该第二信息获取操作的跨屏关注区域，并根据预设的影像分割模型提取该跨屏医学影像中该跨屏关注区域的跨屏医学对象。其中，该跨屏医学对象为第二信息获取操作中被选中的正常/病变生理组织或生理组织周边区域的生理组织对象。例如，该跨屏医学对象可以为与跨屏医学影像中与目标医学对象关联的病变区域、病变相关征象区域和病变周围组织区域和被选中的生理组织区域中的任意一种或多种。
具体的，信息展示设备在获取到跨屏医学对象后，根据该目标医学对象的对象特征信息和/或对象位置信息与该跨屏医学对象的跨屏对象信息进行关联，以得到目标医学对象的关联医学信息。其中，该关联医学信息为表征关联医学对象的对象状态的医学信息。例如，该关联医学信息可以为病变位置信息、病变轮廓信息、病灶性质信息、病灶尺寸信息、病灶类型信息、病变相关区域信息(例如与病灶的解剖学关联的周边区域等相关区域)、相关区域生理结构名称信息、相关生理组织区域轮廓信息、病变程度信息、病变分布信息和病变征象等图片或文字信息中的至少一项或多项。
具体的，信息展示设备在获取到该关联医学信息后，还将该关联医学信息和目标医学对象的对象医学信息进行结合，得到目标展示信息，并根据该预设投影模块的当前设备位置和目标显示区域确定该目标展示信息的信息显示区域，将该目标展示信息投射到该信息显示区域进行显示，从而使得用户在观看该显示医学影像时，目标展示信息能够在目标医学影像中叠加显示。
可选的，在一个具体实施例中，目标医学影像为血管造影影像，信息展示设备通过响应用户基于电子笔对第一显示屏中目标显示区域显示的血管造影影像中血栓所在区域进行框选操作，触发对象选取操作，获取该显示区域中的血栓及周边区域影像作为目标医学对象。并响应用户基于电子笔对第二显示屏中显示的跨屏医学影像(CTA影像)对应血栓区域的框选操作，提取该CTA影像中的血栓及周边区域，得到跨屏医学对象，并基于目标对象的对象特征信息和/或对象位置信息与该跨屏医学对象的跨屏对象信息进行关联，并将关联结合后的目标展示信息投影到用户所佩戴的AR显示设备中的信息展示区域，从而将跨屏医学对象的超声数据信息叠加到该目标医学影像中，以供医生作为辅助诊断参考。
本实施例中，信息展示设备通过响应针对跨屏医学影像的第二信息获取操作，基于所述第二信息获取操作的跨屏位置信息和预设的影像分割模型提取所述跨屏医学影像中的跨屏医学对象；根据所述目标医学对象的对象特征信息和/或对象位置信息与所述跨屏医学对象的跨屏对象信息进行关联，得到关联医学信息。实现无需特定的影像融合软件，仅根据医生操作将其它显示屏中显示的跨屏展示信息同步到目标显示屏中指定区域进行叠加显示，提高目标医学影像的显示丰富度，进而提高辅助诊断效率。
如图4所示，图4为本申请实施例提供的信息展示方法中进行信息结合，得到目标展示信息的一个实施例的流程示意图，具体的，本实施例中，信息展示方法还包括步骤401～步骤403：
401、获取所述关联医学信息的关联信息类型，以及所述目标对象信息的对象信息类型；
402、获取所述关联信息类型中与各所述对象信息类型均不相同的优势信息类型，获取所述优势信息类型对应的目标补充信息；
403、将所述目标补充信息与所述目标对象信息进行补充结合，得到目标展示信息。
基于上述实施例，本实施例中，信息展示设备在获取到目标医学对象的关联医学信息后，还将该关联医学信息和目标医学对象的目标对象信息进行结合，得到待叠加展示于目标医学影像上的目标展示信息。
具体的，信息展示设备能够在指定显示区域中所投射的虚拟控制菜单，该虚拟控制菜单至少包含重建操作控件、补充操作控件、趋势检测控件和病变尺寸计算控件中至少一项或多项。
具体的，信息展示设备能够响应用户通过信息展示设备所投射的虚拟控制菜单中的补充操作控件所触发的信息补充指令，将该关联医学信息中的目标补充信息与目标对象信息进行结合。即，信息展示设备获取该关联医学信息的关联信息类型，以及目标对象信息的对象信息类型，并将该关联信息类型和对象信息类型进行匹配，从而获取该关联信息类型中与对象信息类型均不相同的优势信息类型，并将该优势信息类型对应的关联医学信息设置为目标补充信息。
具体的，信息展示设备在获取到目标补充信息后，将该目标补充信息与该目标对象信息进行补充结合，得到目标展示信息。
可选的，信息展示设备还能够响应用户通过信息展示设备所投射的虚拟控制菜单中的重建操作控件所触发的影像重建指令，对关联医学信息和目标对象信息进行影像重建结合。即，信息展示设备中预先设置了用于将关联医学信息和目标对象信息进行影像重建的预设融合模型，信息展示设备将该关联医学信息和目标对象信息输入到预设融合模型进行信息融合，得到融合对象信息，并提取该融合对象信息对应的对象特征信息，并基于对象特征信息和预设重建算法进行影像重建，得到目标展示信息。
可选的，信息展示设备还能够响应用户通过信息展示设备所投射的虚拟控制菜单中的趋势检测控件所触发的病变趋势分析指令，对关联医学信息和目标对象信息进行病变变化趋势分析结合，即信息展示设备将关联医学影像和目标对象信息进行信息结合，并根据结合后的对象信息进行病变趋势分析，得到能够展示病变整体变化趋势的目标展示信息。
可选的，信息展示设备还能够响应用户通过信息展示设备所投射的虚拟控制菜单中的病变尺寸计算控件所触发的病变尺寸计算指令，对关联医学信息和目标对象信息进行病变尺寸计算结合，即，信息展示设备将关联医学信息和目标对象信息进行结合，并根据结合后的对象信息计算病变尺寸信息，得到表征病变尺寸实际大小的目标展示信息。
具体的，信息展示设备在获取到目标展示信息后，还根据该预设投影模块的当前设备位置和目标显示区域确定该目标展示信息的信息显示区域，将该目标展示信息投射到该信息显示区域进行显示，从而使得用户在观看该显示医学影像时，目标展示信息能够在目标医学影像中叠加显示。
本实施例中，信息展示设备通过获取所述关联医学信息的关联信息类型，以及所述目标对象信息的对象信息类型；获取所述关联信息类型中与各所述对象信息类型均不相同的优势信息类型，获取所述优势信息类型对应的目标补充信息；将所述目标补充信息与所述目标对象信息进行补充结合，得到目标展示信息。实现将关联医学信息和目标对象信息进行结合，得到信息更加完整充分的目标展示信息，从而提高后续辅助诊断效率。
为了更好实施本申请实施例中信息展示方法，在信息展示方法基础之上，本申请实施例中还提供一种信息展示装置，如图6所示，图6为本申请实施例提供的信息展示装置的结构示意图，具体的，所述信息展示装置500包括：
影像显示模块501，被配置为在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
对象提取模块502，被配置为响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
信息结合模块503，被配置为响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
信息投射模块504，被配置为根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
在本实施例一种可能的实现方式中，信息展示装置基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象，包括：
获取所述对象选取操作的操作位置信息，基于所述操作位置信息确定所述目标医学影像中被选中的目标关注区域；
根据预设的影像分割模型对所述目标关注区域进行影像分割，得到目标医学对象；
对所述目标医学对象进行信息提取，得到所述目标医学影像中的目标医学对象。
在本实施例一种可能的实现方式中，信息展示装置响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对所述目标医学对象的第一信息获取操作，获取所述第一信息获取操作中的辅助信息类型；
根据所述辅助信息类型和所述操作位置信息调取预设数据库中的关联医学对象，以及所述关联医学对象的关联位置关系和候选对象信息；
若所述关联医学对象的关联位置信息和所述目标医学对象的解剖位置信息相同，则将所述关联医学对象的候选医学信息与所述目标医学对象关联，得到所述关联医学信息。
在本实施例一种可能的实现方式中，信息展示装置响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对跨屏医学影像的第二信息获取操作，基于所述第二信息获取操作的跨屏位置信息和预设的影像分割模型提取所述跨屏医学影像中的跨屏医学对象；
根据所述目标医学对象的对象特征信息和/或对象位置信息与所述跨屏医学对象的跨屏对象信息进行关联，得到关联医学信息。
在本实施例一种可能的实现方式中，信息展示装置基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
获取所述关联医学信息的关联信息类型，以及所述目标对象信息的对象信息类型；
获取所述关联信息类型中与各所述对象信息类型均不相同的优势信息类型，获取所述优势信息类型对应的目标补充信息；
将所述目标补充信息与所述目标对象信息进行补充结合，得到目标展示信息。
在本实施例一种可能的实现方式中，信息展示装置基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
基于所述关联医学信息和所述目标对象信息输入预设融合模型进行信息融合，得到融合对象信息；
提取所述融合对象信息对应的对象特征信息，基于所述对象特征信息和预设重建算法进行影像重建，得到目标展示信息。
在本实施例一种可能的实现方式中，信息展示装置根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，包括：
获取所述预设投影模块的当前设备位置，以及所述预设投影模块与所述目标显示区域的相对位置关系；
根据所述当前设备位置和所述相对位置关系确定所述目标展示信息待投射的信息显示区域；
将所述目标展示信息投射到所述信息显示区域进行显示。
本实施例中，信息展示装置通过在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。实现在医学影像展示过程中通过响应用户操作信息，基于用户操作信息进行信息提取，并将提取到的展示信息通过AR或者投影方式投射到目标医学影像进行叠加显示，以使得用户在查看目标医学影像时，该目标医学影像能够充分展现不同类型的辅助信息，进而提高目标医学影像的辅助诊断效果，提高辅助诊断效率。
本发明实施例还提供一种信息展示设备，如图7所示，图7为本申请实施例中提供的信息展示设备的一个实施例结构示意图。
信息展示设备集成了本发明实施例所提供的任意一种信息展示装置，该信息展示设备包括：
一个或多个处理器；
存储器；以及
一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行上述信息展示方法实施例中任一实施例中所述的信息展示方法中的步骤。
具体来讲：信息展示设备可以包括一个或者一个以上处理核心的处理器601、一个或一个以上计算机可读存储介质的存储器602、电源603和输入单元604等部件。本领域技术人员可以理解，图7中示出的信息展示设备结构并不构成对信息展示设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器601是该信息展示设备的控制中心，利用各种接口和线路连接整个信息展示设备的各个部分，通过运行或执行存储在存储器602内的软件程序和/或模块，以及调用存储在存储器602内的数据，执行信息展示设备的各种功能和处理数据，从而对信息展示设备进行整体监控。可选的，处理器601可包括一个或多个处理核心；优选的，处理器601可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器601中。
存储器602可用于存储软件程序以及模块，处理器601通过运行存储在存储器602的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器602可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、影像播放功能等)等；存储数据区可存储根据信息展示设备的使用所创建的数据等。此外，存储器602可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器602还可以包括存储器控制器，以提供处理器601对存储器602的访问。
信息展示设备还包括给各个部件供电的电源603，优选的，电源603可以通过电源管理系统与处理器601逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源603还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该信息展示设备还可包括输入单元604，该输入单元604可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出，信息展示设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，信息展示设备中的处理器601会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器602中，并由处理器601来运行存储在存储器602中的应用程序，从而实现各种功能，如下：
在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
为此，本发明实施例提供一种计算机可读存储介质，该计算机可读存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random AccessMemory)、磁盘或光盘等。其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行本发明实施例所提供的任一种信息展示方法中的步骤。例如，所述计算机程序被处理器进行加载可以执行如下步骤：
在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见上文针对其他实施例的详细描述，此处不再赘述。
具体实施时，以上各个单元或结构可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个单元或结构的具体实施可参见前面的方法实施例，在此不再赘述。
以上各个操作的具体实施可参见前面的实施例，在此不再赘述。
以上对本申请实施例所提供的一种信息展示方法进行了详细介绍，本文中应用了具体实施例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种信息展示方法，其特征在于，所述信息展示方法包括：
在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
2.根据权利要求1所述的信息展示方法，其特征在于，所述基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象，包括：
获取所述对象选取操作的操作位置信息，基于所述操作位置信息确定所述目标医学影像中被选中的目标关注区域；
根据预设的影像分割模型对所述目标关注区域进行影像分割，得到目标医学对象；
对所述目标医学对象进行信息提取，得到所述目标医学影像中的目标医学对象。
3.根据权利要求1所述的信息展示方法，其特征在于，所述响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对所述目标医学对象的第一信息获取操作，获取所述第一信息获取操作中的辅助信息类型；
根据所述辅助信息类型和所述操作位置信息调取预设数据库中的关联医学对象，以及所述关联医学对象的关联位置关系和候选对象信息；
若所述关联医学对象的关联位置信息和所述目标医学对象的解剖位置信息相同，则将所述关联医学对象的候选医学信息与所述目标医学对象关联，得到所述关联医学信息。
4.根据权利要求1所述的信息展示方法，其特征在于，所述响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，包括：
响应针对跨屏医学影像的第二信息获取操作，基于所述第二信息获取操作的跨屏位置信息和预设的影像分割模型提取所述跨屏医学影像中的跨屏医学对象；
根据所述目标医学对象的对象特征信息和/或对象位置信息与所述跨屏医学对象的跨屏对象信息进行关联，得到关联医学信息。
5.根据权利要求1-4任一项所述的信息展示方法，其特征在于，所述基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
获取所述关联医学信息的关联信息类型，以及所述目标对象信息的对象信息类型；
获取所述关联信息类型中与各所述对象信息类型均不相同的优势信息类型，获取所述优势信息类型对应的目标补充信息；
将所述目标补充信息与所述目标对象信息进行补充结合，得到目标展示信息。
6.根据权利要求1-4任一项所述的信息展示方法，其特征在于，所述基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息，包括：
基于所述关联医学信息和所述目标对象信息输入预设融合模型进行信息融合，得到融合对象信息；
提取所述融合对象信息对应的对象特征信息，基于所述对象特征信息和预设重建算法进行影像重建，得到目标展示信息。
7.根据权利要求1所述的信息展示方法，其特征在于，所述根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，包括：
获取所述预设投影模块的当前设备位置，以及所述预设投影模块与所述目标显示区域的相对位置关系；
根据所述当前设备位置和所述相对位置关系确定所述目标展示信息待投射的信息显示区域；
将所述目标展示信息投射到所述信息显示区域进行显示。
8.一种信息展示装置，其特征在于，所述信息展示装置包括：
影像显示模块，被配置为在预设的目标显示区域显示目标医学影像，所述目标医学影像中包含正常生理组织和/或病变生理组织；
对象提取模块，被配置为响应针对所述目标医学影像的对象选取操作，基于所述对象选取操作的操作位置信息提取所述目标医学影像中的目标医学对象；
信息结合模块，被配置为响应针对所述目标医学对象的关联信息获取操作，获取与所述目标医学对象对应的关联医学信息，基于所述关联医学信息与所述目标医学对象的目标对象信息进行结合，得到目标展示信息；
信息投射模块，被配置为根据预设投影模块的当前设备位置和所述目标显示区域确定所述目标展示信息的信息显示区域，将所述目标展示信息投射到所述信息显示区域进行显示，以使得在观看所述显示医学影像时，所述目标展示信息能够在所述目标医学影像中叠加显示。
9.一种信息展示设备，其特征在于，所述信息展示设备包括：
一个或多个处理器；
存储器；以及
一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现权利要求1至7中任一项所述的信息展示方法的步骤。
10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行权利要求1至7中任一项所述的信息展示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311767430.1A CN117877687A (zh) | 2023-12-20 | 2023-12-20 | 信息展示方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311767430.1A CN117877687A (zh) | 2023-12-20 | 2023-12-20 | 信息展示方法、装置、设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117877687A true CN117877687A (zh) | 2024-04-12 |
Family
ID=90580276
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311767430.1A Pending CN117877687A (zh) | 2023-12-20 | 2023-12-20 | 信息展示方法、装置、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117877687A (zh) |
-
2023
- 2023-12-20 CN CN202311767430.1A patent/CN117877687A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Sielhorst et al. | Advanced medical displays: A literature review of augmented reality | |
| US10952795B2 (en) | System and method for glass state view in real-time three-dimensional (3D) cardiac imaging | |
| US8630467B2 (en) | Diagnosis assisting system using three dimensional image data, computer readable recording medium having a related diagnosis assisting program recorded thereon, and related diagnosis assisting method | |
| EP1568322B1 (en) | Computer-aided diagnostic apparatus | |
| RU2711140C2 (ru) | Редактирование медицинских изображений | |
| CN103025227B (zh) | 图像处理设备、方法 | |
| US20060229513A1 (en) | Diagnostic imaging system and image processing system | |
| US20120293511A1 (en) | Method for displaying an area to be medically examined and/or treated | |
| US20070118100A1 (en) | System and method for improved ablation of tumors | |
| JP6214646B2 (ja) | 血管造影図における時間的な解剖学的標的タグ付け | |
| US20130257910A1 (en) | Apparatus and method for lesion diagnosis | |
| JP2006014928A (ja) | 画像表示方法および装置並びにプログラム | |
| JP7525248B2 (ja) | 医用情報処理装置及び医用情報処理プログラム | |
| US8907949B2 (en) | Image display apparatus, method and program | |
| US11075003B2 (en) | Assistance apparatus for assisting interpretation report creation and method for controlling the same | |
| CN113796960B (zh) | 导管导航装置、设备和存储介质 | |
| CN117877687A (zh) | 信息展示方法、装置、设备和存储介质 | |
| Cameron et al. | Virtual-reality-assisted interventional procedures. | |
| JP6643433B2 (ja) | 読影レポート作成のための支援装置およびその制御方法 | |
| Shoji et al. | Camera motion tracking of real endoscope by using virtual endoscopy system and texture information | |
| CN117747070A (zh) | 显示增强方法、装置、设备和存储介质 | |
| CN117976154A (zh) | 影像交互方法、装置、设备和存储介质 | |
| CN118297861A (zh) | 影像增强方法、装置、设备和存储介质 | |
| US20220344047A1 (en) | Medical image processing apparatus and medical image processing method | |
| CN117747069A (zh) | 辅助显示方法、装置、设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication |