CN113240645B - 显示处理方法、装置、存储介质、处理器及终端设备 - Google Patents
显示处理方法、装置、存储介质、处理器及终端设备 Download PDFInfo
- Publication number
- CN113240645B CN113240645B CN202110535381.3A CN202110535381A CN113240645B CN 113240645 B CN113240645 B CN 113240645B CN 202110535381 A CN202110535381 A CN 202110535381A CN 113240645 B CN113240645 B CN 113240645B
- Authority
- CN
- China
- Prior art keywords
- model
- target reference
- display area
- reference object
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 37
- 210000003484 anatomy Anatomy 0.000 claims abstract description 54
- 238000012545 processing Methods 0.000 claims abstract description 15
- 230000004044 response Effects 0.000 claims abstract description 13
- 210000003625 skull Anatomy 0.000 claims description 57
- 210000004556 brain Anatomy 0.000 claims description 21
- 210000005013 brain tissue Anatomy 0.000 claims description 16
- 238000000034 method Methods 0.000 claims description 12
- 230000008859 change Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 4
- 238000013136 deep learning model Methods 0.000 claims description 4
- 230000009286 beneficial effect Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000036544 posture Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000005481 NMR spectroscopy Methods 0.000 description 1
- 208000019155 Radiation injury Diseases 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000945 filler Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 210000003491 skin Anatomy 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/68—Analysis of geometric attributes of symmetry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10088—Magnetic resonance imaging [MRI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Geometry (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Abstract
本发明公开了一种显示处理方法、装置、存储介质、处理器及终端设备。显示处理方法包括:获取模型文件,模型文件包括人体模型和目标参考对象;控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。本发明的显示处理方法解决了现有技术中在确定参考对象的位置和/或角度时的精度较差的问题。
Description
技术领域
本发明涉及模型处理领域,具体而言,涉及一种显示处理方法、装置、存储介质、处理器及终端设备。
背景技术
在医学相关领域中,为了能够更加方便、直观地观察或分析人体模型,经常需要在人体模型文件中添加一些参考对象。
例如在口腔正畸治疗过程中,需要定位找到患者头颅的中线,以中线作为参照,基于左右对称原则,来确定和评估手术方案。
现有技术中,存在多种方式来寻找头颅中线,例如采用三个位于头面部中线上的解剖标志点构建头颅中线、利用眶耳平面寻找头颅中线等,但这些确定方式的精度都不高,会对后续的操作产生不利影响。
因此,现有技术中在确定参考对象的位置和/或角度时存在精度较差的问题,针对上述的问题,目前尚未提出有效的解决方案。
在背景技术部分中公开的以上信息只是用来加强对本文所描述技术的背景技术的理解。因此,背景技术中可能包含某些信息,这些信息对于本领域技术人员来说并未形成在已知的现有技术。
发明内容
本发明实施例提供了一种显示处理方法、装置、存储介质、处理器及终端设备,以至少解决现有技术中在确定参考对象的位置和/或角度时的精度较差的问题。
为了实现上述目的,根据本发明实施例的第一个方面,提供了一种显示处理方法,包括:获取模型文件,模型文件包括人体模型和目标参考对象;控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。
进一步地,显示处理方法还包括:接收第二控制信号,第二控制信号用于对任意一个模型显示区域内的解剖结构的位置和/或角度进行调整;响应于第二控制信号,对人体模型相对于目标参考对象的位置和/或角度进行调整。
进一步地,显示处理方法还包括:控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面,控制第一剖面显示区域、第二剖面显示区域以及第三剖面显示区域分别实时显示目标参考对象与基准参考对象的重叠结构;接收第三控制信号,第三控制信号用于对第一剖面显示区域内的重叠结构、第二剖面显示区域内的重叠结构或者第三剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于第三控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整。
进一步地,人体模型为人体头颅模型,目标参考对象为目标参考面,模型显示区域至少为两个,解剖结构至少包括以下解剖结构中的两种:脑模型、颅骨模型、皮肤模型。
进一步地,目标参考对象为目标参考面,基准参考对象包括第一基准面、第二基准面以及第三基准面,第一基准面与人体模型的轴状面共面,第二基准面与人体模型的冠状面共面,第三基准面与人体模型的矢状面共面。
进一步地,在控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面之前,显示处理方法还包括:根据人体的MRI影像数据,采用多平面重建算法生成人体模型的轴状面、冠状面以及矢状面。
进一步地,人体模型的解剖结构包括脑表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;去除MRI影像数据中的除脑组织外的其它结构的影像数据,得到脑组织的MRI影像数据;根据脑组织的MRI影像数据,采用表面重建方法生成脑表面模型。
进一步地,去除MRI影像数据中的与颅骨部分对应的影像数据,包括:将MRI影像数据输入预先训练得到的深度学习模型,得到脑组织的MRI影像数据。
进一步地,人体模型的解剖结构包括皮肤表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;根据MRI影像数据,采用等均值面方式生成皮肤表面模型。
进一步地,人体模型的解剖结构包括颅骨表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;根据MRI影像数据生成CT图像数据;根据CT图像数据,采用等均值面方式生成颅骨表面模型。
根据本发明实施例的第二个方面,提供了一种显示处理装置,包括:获取单元,用于获取模型文件,模型文件包括人体模型和目标参考对象;第一控制单元,用于控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;第一接收单元,用于接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;第一调整单元,用于响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。
根据本发明实施例的第三个方面,提供了一种非易失性存储介质,非易失性存储介质包括存储的程序,其中,在程序运行时控制非易失性存储介质所在设备执行上述的显示处理方法。
根据本发明实施例的第四个方面,提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述的显示处理方法。
根据本发明实施例的第五个方面,提供了一种终端设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行上述的显示处理方法。
应用本发明的技术方案的显示处理方法包括:获取模型文件,模型文件包括人体模型和目标参考对象;控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。这样,人体模型的多种解剖结构被分别单独显示在多个模型显示区域,从而能够清楚地观察各种解剖结构,每个模型显示区域都显示目标参考对象,当用户在任意一个模型显示区域调整目标参考对象的位置和/或角度时,目标参考对象在模型文件中的位置和/或角度便会调节,此时,其它的模型显示区域内的目标参考对象的位置和/或角度也会进行实时同步调节,即目标参考对象在多个模型显示区域内联动,从而在目标参考对象的调整过程中,能够更直观地显示目标参考对象与不同的解剖结构之间的关系,有利于精确地将目标参考对象调整到需要的位置,解决了现有技术中确定参考对象的位置和/或角度时的精度较差的问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明的显示处理方法的一种可选的实施例的流程示意图;
图2是根据本发明的显示处理方法的一种实施例的显示画面示意图;
图3是根据本发明的显示处理装置的一种可选的实施例的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应该理解的是,当元件(诸如层、膜、区域、或衬底)描述为在另一元件“上”时,该元件可直接在该另一元件上,或者也可存在中间元件。而且,在说明书以及权利要求书中,当描述有元件“连接”至另一元件时,该元件可“直接连接”至该另一元件,或者通过第三元件“连接”至该另一元件。
图1是根据本发明实施例的显示处理方法,如图1所示,该方法包括如下步骤:
步骤S102,获取模型文件,模型文件包括人体模型和目标参考对象;
步骤S104,控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;
步骤S106,接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;
步骤S108,响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。
采用上述方案的显示处理方法包括:获取模型文件,模型文件包括人体模型和目标参考对象;控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。这样,人体模型的多种解剖结构被分别单独显示在多个模型显示区域,从而能够清楚地观察各种解剖结构,每个模型显示区域都显示目标参考对象,当用户在任意一个模型显示区域调整目标参考对象的位置和/或角度时,目标参考对象在模型文件中的位置和/或角度便会调节,此时,其它的模型显示区域内的目标参考对象的位置和/或角度也会进行实时同步调节,即目标参考对象在多个模型显示区域内联动,从而在目标参考对象的调整过程中,能够更直观地显示目标参考对象与不同的解剖结构之间的关系,有利于精确地将目标参考对象调整到需要的位置,解决了现有技术中确定参考对象的位置和/或角度时的精度较差的问题。
在具体实施时,人体模型可以是指整个人体的模型,也可以是指人体局部结构的模型,例如头部、躯干、四肢等。人体模型的多种解剖结构也可以根据观察需要而进行灵活的选择,例如可以包括骨骼、肌肉、皮肤、血管、器官等等。目标参考对象根据需要可以是任意形状的对象,例如其可以是参考面、参考线或者其他规则或者不规则形状的参考对象(例如手术器械模型、填充物模型等),用于方便使用者对人体模型进行规划和分析。
具体地,显示处理方法还包括:接收第二控制信号,第二控制信号用于对任意一个模型显示区域内的解剖结构的位置和/或角度进行调整;响应于第二控制信号,对人体模型相对于目标参考对象的位置和/或角度进行调整。
当用户在任意一个模型显示区域调整相应的解剖结构的位置和/或角度时,人体模型在模型文件中的位置和/或角度便会随之调节,此时,其它的模型显示区域内的相应的解剖结构的位置和/或角度也会进行实施同步调节。
也就是说,不同的解剖结构在相应的模型显示区域内联动,当接收到对任意一个模型显示区域内的解剖结构的位置和/或角度进行调整的第二控制信号时,各个模型显示区域内的各种解剖结构的位置和/或角度会同步调整。这样,有利于更灵活地调整各种解剖结构的姿态,方便对各种解剖结构的观察,由于各种解剖结构在不同的模型显示区域内进行联动调整,有利于用户更方便地观察各种解剖结构与目标参考对象的位置关系,从而有利于用户更方便地将目标参考对象调整到需要的姿态。
具体地,显示处理方法还包括:控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面,控制第一剖面显示区域、第二剖面显示区域以及第三剖面显示区域分别实时显示目标参考对象与基准参考对象的重叠结构;接收第三控制信号,第三控制信号用于对第一剖面显示区域内的重叠结构、第二剖面显示区域内的重叠结构或者第三剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于第三控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整。
也就是说,通过第一剖面显示区域、第二剖面显示区域以及第三剖面显示区域显示出了模型文件的不同的剖视面,并在这些剖面显示区域内显示出了目标参考对象与基准参考对象的重叠结构,当用户对任意一个剖面显示区域内的重叠结构的位置和/或角度进行调整时,目标参考对象与基准参考对象之间的位置关系便会发生变化,即目标参考对象在模型文件中的位置和/或角度发生了变化,相应的,目标参考对象与基准参考对象的重叠部分在各个剖面显示区域内的位置和/或角度也会随之变化,目标参考对象在各个模型显示区域内的位置和/或角度同样会发生变化。这样设置的目的是提供一种剖面化的窗口来方便用户对目标参考对象的位置和/或角度进行调整,剖面化的窗口能够更直观地显示目标参考对象与基准参考对象的位置关系,能够有效地方便用户对目标参考对象的调节。
在本实施例中,显示处理方法还包括在第四剖面显示区域显示人体模型的目标剖视面,在第四剖面显示区域显示目标参考对象与基准参考对象的重叠结构;接收第四控制信号,第四控制信号用于对第四剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于第四控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整;其中,目标剖视面为用户事先配制的。这样,能够根据用户的观察需求灵活地选择相应的剖视面进行显示,方便用户的观察和对目标参考对象的调节。
具体地,人体模型为人体头颅模型,目标参考对象为目标参考面,模型显示区域至少为两个,解剖结构至少包括以下解剖结构中的两种:脑模型、颅骨模型、皮肤模型。
也就是说,在本实施例中,显示处理方法用于显示处理人体的头颅模型,通过将脑模型、颅骨模型以及皮肤模型中的至少两者分别显示于不同的模型显示区域,可方便用户清楚地查看相应的解剖结构,并调整参考面与这些解剖结构之间的关系,从而能够更方便、直管、准确地确定一些需要的参考面的位置,例如确定头颅中线平面、确定眶耳平面、确定脑中线平面等等,尤其是头颅中线平面的确定,现有技术中缺乏直观且准确的确定方式,很容易受生长、病理、治疗等因素的影响,确定很不准确直观。再例如脑中线平面的确定,现有技术中确定脑中线平面后,无法直观地与头颅形态进行对照和观察,不仅不利于对其准确性进行评估,而且也大大地限制了其应用。
具体地,目标参考对象为目标参考面,基准参考对象包括第一基准面、第二基准面以及第三基准面,第一基准面与人体模型的轴状面共面,第二基准面与人体模型的冠状面共面,第三基准面与人体模型的矢状面共面。
也就是说基准参考对象包括三个两两之间相互垂直的基准面,此时,目标参考对象与基准参考对象的重叠结构便为交线,利用者三个基准面与目标参考面的交线,能够更方便、直观、准确地了解目标参考面与各个基准面的关系,从而把握目标参考面与人体模型的关系,方便用户对目标参考对象或人体模型的调整。
在控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面之前,显示处理方法还包括:根据人体的MRI影像数据(核磁共振影像数据),采用多平面重建算法生成人体模型的轴状面、冠状面以及矢状面。
在本实施例中,人体模型的解剖结构包括脑表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;去除MRI影像数据中的除脑组织外的其它结构的影像数据,得到脑组织的MRI影像数据;根据脑组织的MRI影像数据,采用表面重建方法生成脑表面模型。
在具体实施时,去除MRI影像数据中的与颅骨部分对应的影像数据,包括:将MRI影像数据输入预先训练得到的深度学习模型,得到脑组织的MRI影像数据。
具体地,人体模型的解剖结构包括皮肤表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;根据MRI影像数据,采用等均值面方式生成皮肤表面模型。
由于MRI成像原理的限制,其对颅骨的成像并不突出,无法直接显示颅骨,人体模型的解剖结构包括颅骨表面模型;获取模型文件,模型文件包括人体模型和目标参考对象,包括:获取人体头颅部分的MRI影像数据;根据MRI影像数据生成CT图像数据;根据CT图像数据,采用等均值面方式生成颅骨表面模型。
这样,患者无需额外接收CT检查便可获取其颅骨表面模型,避免了对患者造成的射线伤害。根据MRI影像数据生成CT图像数据可采用现有的算法来实现,例如卷积神经网络模型、支持向量机、Adaboost算法等等来实现。
图2示出了本发明的显示处理装置的一种实施例的显示界面示意图,在图2中,模型文件包括人体头颅模型和目标参考面,基准参考对象包括第一基准面、第二基准面以及第三基准面,第一基准面与人体模型的轴状面共面,第二基准面与人体模型的冠状面共面,第三基准面与人体模型的矢状面共面。图2中的左上角窗口、右上角窗口以及左下角窗口为三个模型显示区域,三个模型显示区域分别对应显示了颅骨模型及目标参考面、脑模型及目标参考面、皮肤模型及目标参考面(该图中本窗口中的目标参考面被隐藏,仅显示了皮肤模型与目标参考面的交线)。当用户调整任意一个模型显示区域的目标参考面时,目标参考面相对于人体头颅模型的位置和/或角度便发生变化,从而各个模型显示区域内的目标参考面均发生同步变化,方便用户更直观地观察目标参考面与颅骨模型、脑模型以及皮肤模型之间的关系,从而方便对目标参考面进行调节,例如可用于寻找头颅中线平面等。在图2中的右下角窗口中,划分除了四个子窗口,其中,左上角的子窗口为第一剖面显示区域,其显示的是矢状面图像,并显示了目标参考面与第一基准面的交线A及目标参考面与第二基准面的交线H;右上角的子窗口为第二剖面显示区域,其显示的是轴状面图像,并显示了目标参考面与第一基准面的交线A及第一基准面与第二基准面的交线R;左下角的子窗口为第三剖面显示区域,其显示的是冠状面图像,并显示了目标参考面与第二基准面的交线H及第一基准面与第二基准面的交线R;右下角的子窗口为第四剖面显示区域,其显示内容可根据用户选择进行变化,在图2中,第四剖面显示区域显示的是第一剖面显示区域中显示的图像的局部区域的放大图。当用户调节各个剖面显示区域内的交线时,目标参考面的位置和/或角度便随之发生变化,目标参考面在相应的各个模型显示区域内的位置和/或角度也会发生变化,这样,便提供了一种剖面化的窗口来方便用户对目标参考对象的位置和/或角度进行调整,剖面化的窗口能够更直观地显示目标参考对象与基准参考对象的位置关系,能够有效地方便用户对目标参考对象的调节。
其次,如图3所示,本发明的实施例还提供了一种显示处理装置,包括:获取单元,用于获取模型文件,模型文件包括人体模型和目标参考对象;第一控制单元,用于控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个模型显示区域分别实时地显示目标参考对象;第一接收单元,用于接收第一控制信号,第一控制信号用于对目标参考对象在任意一个模型显示区域内的位置和/或角度进行调整;第一调整单元,用于响应于第一控制信号,对目标参考对象相对于人体模型的位置和/或角度进行调整。
具体地,显示处理装置还包括第二接收单元和第二调整单元:第二接收单元用于接收第二控制信号,第二控制信号用于对任意一个模型显示区域内的解剖结构的位置和/或角度进行调整;第二调整单元用于响应于第二控制信号,对人体模型相对于目标参考对象的位置和/或角度进行调整。
具体地,显示处理装置还包括第二控制单元、第三接收单元和第三调整单元:第二控制单元用于控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面,控制第一剖面显示区域、第二剖面显示区域以及第三剖面显示区域分别实时显示目标参考对象与基准参考对象的重叠结构;第三接收单元用于接收第三控制信号,第三控制信号用于对第一剖面显示区域内的重叠结构、第二剖面显示区域内的重叠结构或者第三剖面显示区域内的重叠结构的位置和/或角度进行调整;第三调整单元用于响应于第三控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整。
具体地,人体模型为人体头颅模型,目标参考对象为目标参考面,模型显示区域至少为两个,解剖结构至少包括以下解剖结构中的两种:脑模型、颅骨模型、皮肤模型。
具体地,目标参考对象为目标参考面,基准参考对象包括第一基准面、第二基准面以及第三基准面,第一基准面与人体模型的轴状面共面,第二基准面与人体模型的冠状面共面,第三基准面与人体模型的矢状面共面。
具体地,显示处理装置还包括生成单元:生成单元用于在控制第一剖面显示区域显示人体模型的轴状面,控制第二剖面显示区域显示人体模型的冠状面,控制第三剖面显示区域显示人体模型的矢状面之前,根据人体的MRI影像数据,采用多平面重建算法生成人体模型的轴状面、冠状面以及矢状面。
具体地,人体模型的解剖结构包括脑表面模型;获取单元包括第一获取模块、去除模块和重建模块:第一获取模块用于获取人体头颅部分的MRI影像数据;去除模块用于去除MRI影像数据中的除脑组织外的其它结构的影像数据,得到脑组织的MRI影像数据;重建模块用于根据脑组织的MRI影像数据,采用表面重建装置生成脑表面模型。
具体地,去除模块用于将MRI影像数据输入预先训练得到的深度学习模型,得到脑组织的MRI影像数据。
具体地,人体模型的解剖结构包括皮肤表面模型;获取单元包括第二获取模块和第一生成模块:第二获取模块用于获取人体头颅部分的MRI影像数据;第一生成模块用于根据MRI影像数据,采用等均值面方式生成皮肤表面模型。
具体地,人体模型的解剖结构包括颅骨表面模型;获取单元包括第三获取模块、第二生成模块以及第三生成模块:第三获取模块用于获取人体头颅部分的MRI影像数据;第二生成模块用于根据MRI影像数据生成CT图像数据;第三生成模块用于根据CT图像数据,采用等均值面方式生成颅骨表面模型。
另外,本发明的实施例还提供了一种非易失性存储介质,非易失性存储介质包括存储的程序,其中,在程序运行时控制非易失性存储介质所在设备执行上述的显示处理方法。
再次,本发明的实施例还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述的显示处理方法。
最后,本发明的实施例还提供了一种终端设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行上述的显示处理方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。而且,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种显示处理方法,其特征在于,包括:
获取模型文件,所述模型文件包括人体模型和目标参考对象;
控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个所述模型显示区域分别实时地显示目标参考对象;
接收第一控制信号,所述第一控制信号用于对所述目标参考对象在任意一个所述模型显示区域内的位置和/或角度进行调整;
响应于所述第一控制信号,对所述目标参考对象相对于所述人体模型的位置和/或角度进行调整;
接收第二控制信号,所述第二控制信号用于对任意一个所述模型显示区域内的解剖结构的位置和/或角度进行调整;
响应于所述第二控制信号,对所述人体模型相对于所述目标参考对象的位置和/或角度进行调整;
所述人体模型为人体头颅模型,所述目标参考对象为目标参考面,所述模型显示区域至少为两个,所述解剖结构至少包括以下解剖结构中的两种:脑模型、颅骨模型、皮肤模型;
控制第一剖面显示区域显示所述人体模型的轴状面,控制第二剖面显示区域显示所述人体模型的冠状面,控制第三剖面显示区域显示所述人体模型的矢状面,控制所述第一剖面显示区域、所述第二剖面显示区域以及所述第三剖面显示区域分别实时显示所述目标参考对象与基准参考对象的重叠结构;
接收第三控制信号,所述第三控制信号用于对所述第一剖面显示区域内的重叠结构、所述第二剖面显示区域内的重叠结构或者所述第三剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于所述第三控制信号,对所述目标参考对象在所述模型文件中的位置和/或角度进行调整;
所述基准参考对象包括第一基准面、第二基准面以及第三基准面,所述第一基准面与所述人体模型的轴状面共面,所述第二基准面与所述人体模型的冠状面共面,所述第三基准面与所述人体模型的矢状面共面;
以及,在第四剖面显示区域显示人体模型的目标剖视面,在第四剖面显示区域显示目标参考对象与基准参考对象的重叠结构;其中,第四剖面显示区域的显示内容根据用户选择进行变化,目标剖视面为用户根据需求事先进行配制的,所述第四剖面显示区域的显示内容包括第一剖面显示区域中显示的图像的局部区域的放大图;接收第四控制信号,第四控制信号用于对第四剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于第四控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整;
当用户调整任意一个模型显示区域的目标参考面时,目标参考面相对于人体头颅模型的位置和/或角度同步发生变化,各个模型显示区域内的目标参考面均发生同步变化;当用户调节各个剖面显示区域内的交线时,目标参考面的位置和/或角度同步发生变化,目标参考面在相应的各个模型显示区域内的位置和/或角度也同步发生变化。
2.根据权利要求1所述的显示处理方法,其特征在于,在控制第一剖面显示区域显示所述人体模型的轴状面,控制第二剖面显示区域显示所述人体模型的冠状面,控制第三剖面显示区域显示所述人体模型的矢状面之前,所述显示处理方法还包括:
根据人体的MRI影像数据,采用多平面重建算法生成所述人体模型的轴状面、冠状面以及矢状面。
3.根据权利要求1所述的显示处理方法,其特征在于,所述人体模型的解剖结构包括脑表面模型;获取模型文件,所述模型文件包括人体模型和目标参考对象,包括:
获取人体头颅部分的MRI影像数据;
去除所述人体头颅部分的MRI影像数据中的除脑组织外的其它结构的影像数据,得到脑组织的MRI影像数据;
根据所述脑组织的MRI影像数据,采用表面重建方法生成所述脑表面模型。
4.根据权利要求3所述的显示处理方法,其特征在于,去除所述MRI影像数据中的与颅骨部分对应的影像数据,包括:
将所述人体头颅部分的MRI影像数据输入预先训练得到的深度学习模型,得到所述脑组织的MRI影像数据。
5.根据权利要求1所述的显示处理方法,其特征在于,所述人体模型的解剖结构包括皮肤表面模型;获取模型文件,所述模型文件包括人体模型和目标参考对象,包括:
获取人体头颅部分的MRI影像数据;
根据所述人体头颅部分的MRI影像数据,采用等均值面方式生成所述皮肤表面模型。
6.根据权利要求1所述的显示处理方法,其特征在于,所述人体模型的解剖结构包括颅骨表面模型;获取模型文件,所述模型文件包括人体模型和目标参考对象,包括:
获取人体头颅部分的MRI影像数据;
根据所述人体头颅部分的MRI影像数据生成CT图像数据;
根据所述CT图像数据,采用等均值面方式生成所述颅骨表面模型。
7.一种显示处理装置,其特征在于,包括:
获取单元,用于获取模型文件,所述模型文件包括人体模型和目标参考对象;
第一控制单元,用于控制多个模型显示区域实时地对应显示人体模型的多种解剖结构,控制多个所述模型显示区域分别实时地显示目标参考对象;
第一接收单元,用于接收第一控制信号,所述第一控制信号用于对所述目标参考对象在任意一个所述模型显示区域内的位置和/或角度进行调整;
第一调整单元,用于响应于所述第一控制信号,对所述目标参考对象相对于所述人体模型的位置和/或角度进行调整;
第二接收单元,用于接收第二控制信号,所述第二控制信号用于对任意一个所述模型显示区域内的解剖结构的位置和/或角度进行调整;
第二调整单元,用于响应于所述第二控制信号,对所述人体模型相对于所述目标参考对象的位置和/或角度进行调整;
所述人体模型为人体头颅模型,所述目标参考对象为目标参考面,所述模型显示区域至少为两个,所述解剖结构至少包括以下解剖结构中的两种:脑模型、颅骨模型、皮肤模型;
所述显示处理装置还包括第二控制单元,所述第二控制单元用于控制第一剖面显示区域显示所述人体模型的轴状面,控制第二剖面显示区域显示所述人体模型的冠状面,控制第三剖面显示区域显示所述人体模型的矢状面,控制所述第一剖面显示区域、所述第二剖面显示区域以及所述第三剖面显示区域分别实时显示所述目标参考对象与基准参考对象的重叠结构,
所述显示处理装置还包括第三接收单元和第三调整单元,所述第三接收单元用于接收第三控制信号,所述第三控制信号用于对所述第一剖面显示区域内的重叠结构、所述第二剖面显示区域内的重叠结构或者所述第三剖面显示区域内的重叠结构的位置和/或角度进行调整;所述第三调整单元用于响应于所述第三控制信号,对所述目标参考对象在所述模型文件中的位置和/或角度进行调整;
所述基准参考对象包括第一基准面、第二基准面以及第三基准面,所述第一基准面与所述人体模型的轴状面共面,所述第二基准面与所述人体模型的冠状面共面,所述第三基准面与所述人体模型的矢状面共面;
所述显示处理装置还用于在第四剖面显示区域显示人体模型的目标剖视面,在第四剖面显示区域显示目标参考对象与基准参考对象的重叠结构;其中,第四剖面显示区域的显示内容根据用户选择进行变化,目标剖视面为用户根据需求事先进行配制的,所述第四剖面显示区域的显示内容包括第一剖面显示区域中显示的图像的局部区域的放大图;接收第四控制信号,第四控制信号用于对第四剖面显示区域内的重叠结构的位置和/或角度进行调整;响应于第四控制信号,对目标参考对象在模型文件中的位置和/或角度进行调整;
当用户调整任意一个模型显示区域的目标参考面时,目标参考面相对于人体头颅模型的位置和/或角度同步发生变化,各个模型显示区域内的目标参考面均发生同步变化;当用户调节各个剖面显示区域内的交线时,目标参考面的位置和/或角度同步发生变化,目标参考面在相应的各个模型显示区域内的位置和/或角度也同步发生变化。
8.一种非易失性存储介质,其特征在于,所述非易失性存储介质包括存储的程序,其中,在所述程序运行时控制所述非易失性存储介质所在设备执行权利要求1至6中任意一项所述的显示处理方法。
9.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至6中任意一项所述的显示处理方法。
10.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任意一项所述的显示处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110535381.3A CN113240645B (zh) | 2021-05-17 | 2021-05-17 | 显示处理方法、装置、存储介质、处理器及终端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110535381.3A CN113240645B (zh) | 2021-05-17 | 2021-05-17 | 显示处理方法、装置、存储介质、处理器及终端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113240645A CN113240645A (zh) | 2021-08-10 |
CN113240645B true CN113240645B (zh) | 2024-04-16 |
Family
ID=77134782
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110535381.3A Active CN113240645B (zh) | 2021-05-17 | 2021-05-17 | 显示处理方法、装置、存储介质、处理器及终端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113240645B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6888546B1 (en) * | 1999-06-30 | 2005-05-03 | Han-Joon Kim | Three-dimensional image display, display method, program for display |
CN1632834A (zh) * | 2003-12-22 | 2005-06-29 | 中国科学院自动化研究所 | 基于点重建的超大规模医学影像三维可视化方法 |
CN103534733A (zh) * | 2011-05-06 | 2014-01-22 | 皇家飞利浦有限公司 | 医学图像系统和方法 |
CN109978965A (zh) * | 2019-03-21 | 2019-07-05 | 江南大学 | 一种模拟ct图像生成方法、装置、计算机设备和存储介质 |
CN110010249A (zh) * | 2019-03-29 | 2019-07-12 | 北京航空航天大学 | 基于视频叠加的增强现实手术导航方法、系统及电子设备 |
CN110167445A (zh) * | 2016-08-19 | 2019-08-23 | 卫理公会医院体系公司 | 用于计算机辅助的正颌外科手术规划的系统和方法 |
CN110914866A (zh) * | 2017-05-09 | 2020-03-24 | 哈特弗罗公司 | 用于在图像分析中进行解剖结构分割的系统和方法 |
CN111345842A (zh) * | 2018-12-20 | 2020-06-30 | 深圳迈瑞生物医疗电子股份有限公司 | 一种医疗成像设备及其剖面成像方法 |
CN111583385A (zh) * | 2020-04-15 | 2020-08-25 | 滨州医学院 | 一种可变形数字人解剖学模型的个性化变形方法及系统 |
CN111583303A (zh) * | 2020-05-09 | 2020-08-25 | 江苏瑞尔医疗科技有限公司 | 基于mri图像生成伪ct图像的系统及方法 |
CN111627528A (zh) * | 2019-02-28 | 2020-09-04 | 未艾医疗技术(深圳)有限公司 | VRDS 4D医学影像多设备Ai联动显示方法及产品 |
CN112568933A (zh) * | 2019-09-29 | 2021-03-30 | 深圳迈瑞生物医疗电子股份有限公司 | 超声成像方法、设备和存储介质 |
-
2021
- 2021-05-17 CN CN202110535381.3A patent/CN113240645B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6888546B1 (en) * | 1999-06-30 | 2005-05-03 | Han-Joon Kim | Three-dimensional image display, display method, program for display |
CN1632834A (zh) * | 2003-12-22 | 2005-06-29 | 中国科学院自动化研究所 | 基于点重建的超大规模医学影像三维可视化方法 |
CN103534733A (zh) * | 2011-05-06 | 2014-01-22 | 皇家飞利浦有限公司 | 医学图像系统和方法 |
CN110167445A (zh) * | 2016-08-19 | 2019-08-23 | 卫理公会医院体系公司 | 用于计算机辅助的正颌外科手术规划的系统和方法 |
CN110914866A (zh) * | 2017-05-09 | 2020-03-24 | 哈特弗罗公司 | 用于在图像分析中进行解剖结构分割的系统和方法 |
CN111345842A (zh) * | 2018-12-20 | 2020-06-30 | 深圳迈瑞生物医疗电子股份有限公司 | 一种医疗成像设备及其剖面成像方法 |
CN111627528A (zh) * | 2019-02-28 | 2020-09-04 | 未艾医疗技术(深圳)有限公司 | VRDS 4D医学影像多设备Ai联动显示方法及产品 |
CN109978965A (zh) * | 2019-03-21 | 2019-07-05 | 江南大学 | 一种模拟ct图像生成方法、装置、计算机设备和存储介质 |
CN110010249A (zh) * | 2019-03-29 | 2019-07-12 | 北京航空航天大学 | 基于视频叠加的增强现实手术导航方法、系统及电子设备 |
CN112568933A (zh) * | 2019-09-29 | 2021-03-30 | 深圳迈瑞生物医疗电子股份有限公司 | 超声成像方法、设备和存储介质 |
CN111583385A (zh) * | 2020-04-15 | 2020-08-25 | 滨州医学院 | 一种可变形数字人解剖学模型的个性化变形方法及系统 |
CN111583303A (zh) * | 2020-05-09 | 2020-08-25 | 江苏瑞尔医疗科技有限公司 | 基于mri图像生成伪ct图像的系统及方法 |
Non-Patent Citations (3)
Title |
---|
李胜利.《胎儿畸形产前超声诊断学》.人民军医出版社,2004,第592-593页. * |
杨露菁 等.《智能图像处理及应用》.中国铁道出版社,2019,第74-79页. * |
诸葛斌.《医学图像三维重建》.浙江工业工商大学出版社,2008,第47-49页. * |
Also Published As
Publication number | Publication date |
---|---|
CN113240645A (zh) | 2021-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4717427B2 (ja) | 磁気共鳴断層撮影装置の作動方法および制御装置 | |
US8315689B2 (en) | MRI surgical systems for real-time visualizations using MRI image data and predefined data of surgical tools | |
US7817836B2 (en) | Methods for volumetric contouring with expert guidance | |
Shamir et al. | Fiducial optimization for minimal target registration error in image-guided neurosurgery | |
Gsaxner et al. | The HoloLens in medicine: A systematic review and taxonomy | |
Gargiulo et al. | New Directions in 3D Medical Modeling: 3D‐Printing Anatomy and Functions in Neurosurgical Planning | |
US20090220136A1 (en) | Image Guidance System for Deep Brain Stimulation | |
Shahidi et al. | Clinical applications of three-dimensional rendering of medical data sets | |
JP2010540021A (ja) | Mri画像データ及び外科用具の既定のデータを使用してリアルタイムで視覚化するmri外科システム | |
Souza et al. | Development and characterization of the InVesalius Navigator software for navigated transcranial magnetic stimulation | |
CN113100935A (zh) | 一种肺部穿刺手术术前穿刺路径规划方法及训练系统 | |
CN108765483A (zh) | 一种从脑部ct图像中确定中矢面的方法及系统 | |
CN109741290B (zh) | 用于神经追踪的方法、非暂时性计算机可读媒体及设备 | |
US7831077B2 (en) | Method and apparatus for generating an image using MRI and photography | |
CN111445575A (zh) | 威利斯环的图像重建方法、装置、电子设备、存储介质 | |
EP2821968B1 (en) | Processing model data representing a biological body section having a defect portion | |
CN113240645B (zh) | 显示处理方法、装置、存储介质、处理器及终端设备 | |
KR102213412B1 (ko) | 기복모델 생성방법, 장치 및 프로그램 | |
US20220354579A1 (en) | Systems and methods for planning and simulation of minimally invasive therapy | |
CN110718284A (zh) | 一种三维医疗影像数据的交互方法及系统 | |
WO2006067676A2 (en) | Visualization of a tracked interventional device | |
CN113893033B (zh) | 一种肺部经皮穿刺导航方法及系统 | |
CN108064148A (zh) | 用于体外受精的图像引导的胚胎转移 | |
Schenkenfelder et al. | Elastic registration of abdominal MRI scans and RGB-D images to improve surgical planning of breast reconstruction | |
WO2023287822A2 (en) | Augmented reality-driven guidance for interventional procedures |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |