CN105117000A - 一种医学三维图像处理方法及装置 - Google Patents
一种医学三维图像处理方法及装置 Download PDFInfo
- Publication number
- CN105117000A CN105117000A CN201510454099.7A CN201510454099A CN105117000A CN 105117000 A CN105117000 A CN 105117000A CN 201510454099 A CN201510454099 A CN 201510454099A CN 105117000 A CN105117000 A CN 105117000A
- Authority
- CN
- China
- Prior art keywords
- gesture
- coordinate
- pixel
- destination organization
- pixel value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种医学三维图像处理方法及装置。其方法包括:检测对目标组织定位的手势变化是否完成,如果完成,将对手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标;基于三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;根据查找到的像素点确定目标组织对应的闭合曲面;对医学三维图像中的闭合曲面内的图像进行目标操作。本发明实施例是基于手势识别对医学三维图像进行操作,能够满足手术过程中的卫生要求,可以由主刀医生亲自对医学三维图像进行操作,避免沟通问题、理解问题等等造成误操作。另外,能够降低甚至消除定位误差。
Description
技术领域
本发明涉及医学图像处理技术领域,尤其涉及一种医学三维图像处理方法及装置。
背景技术
目前,医学影像处理系统将从电子计算机断层扫描(ComputedTomogaraphy,CT)机或者影响归档和通信系统(PictureArchivingandCommunicationSystemes,PACS)获取到的CT图像进行计算机重建,将连续扫描的二维CT图像重建为三维图像(以下称为医学三维图像),让医生可以直观的观察到人体的组织器官之间的相互关系,并可以对医学三维图像进行任意角度的显示,对帮助医生进行手术前的可视化操作具有很大的帮助,能够帮助医生判断手术的可行性与成功率。在手术前或者手术中应用三维影像设备进行手术导航期间,一般需要对病变部位进行分割切除(以下简称切割),评估切除后的组织能否进行再生,是否有足够的血管给其供血,为实际手术过程提供参考。目前,医生可以通过鼠标控制屏幕上的医学三维图像操作。
在手术进行过程中,通过鼠标控制屏幕上的医学三维图像操作,需要操作者手持鼠标。而手术要求无菌进行,主刀医生操作完鼠标后,至少需要更换手套,甚至需要重新进行手部消毒,这无疑会严重影响手术进度。如果由主刀医生指挥其他人员进行医学三维图像操作,可能由于沟通问题、理解问题,导致医学三维图像操作不符合主刀医生要求,影响手术时间及效果。
需要一种解决方案,能够使得即使在手术过程中主刀医生也能准确的操控医疗三维图像,进行手术模拟的操作。
发明内容
本发明的目的是提供一种医学三维图像处理方法及装置,以解决手术进行过程中主刀医生能够准确实时操控三维图像从而为手术过程提供参考的问题。
本发明的目的是通过以下技术方案实现的:
一种医学三维图像处理方法,包括:
检测对目标组织定位的手势变化是否完成;
对目标组织定位的手势变化完成后,将对所述手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,所述第一手势坐标用于对目标组织进行定位;
基于全部或部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;
根据查找到的像素点确定目标组织对应的闭合曲面;
对所述医学三维图像中的所述闭合曲面内的图像进行目标操作。
一种医学三维图像处理装置,包括:
手势定位判断模块,用于检测对目标组织定位的手势变化是否完成;
坐标转换模块,用于对目标组织定位的手势变化完成后,将对所述手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,所述第一手势坐标用于对目标组织进行定位;
像素点查找模块,用于基于全部或部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;
闭合曲面确定模块,用于根据查找到的像素点确定目标组织对应的闭合曲面;
操作执行模块,用于对所述三维图像中的所述闭合曲面内的图像进行目标操作。
本发明实施例提供的方法及装置,是基于手势识别对医学三维图像进行操作。使用者不需要手持鼠标等设备。而为实现手势识别需要穿戴的信号发送设备,以目前的技术水平,可以实现超小型化,例如是贴在使用者手部的芯片,信号发送设备可以穿戴在手套里。现有的手势识别技术,使用者甚至可以不需要佩戴任何信号发送设备。可见,基于手势识别对医学三维图像进行操作能够尽量避免在手术过程中对手术进度的影响。进而,就可以由主刀医生亲自对医学三维图像进行操作,避免沟通问题、理解问题等等造成误操作,保证对医学三维图像的操作精度。
进一步的,本发明实施例提供的方法及装置,将对手势变化进行手势识别得到的手势坐标转换为三维图像坐标。该步骤即进行手势识别,并将手势轨迹反映到三维图像坐标系中。定位的目标组织通常是某部分器官组织(例如病变组织),这部分组织在医学三维图像中对应区域的像素值相差不大,为了降低使用者手部自然抖动等等手势误操作造成的定位误差,基于坐标转换得到的三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点,并根据查找到的像素点确定目标组织对应的闭合曲面,也就是对定位区域进行修订,降低甚至消除定位误差,提高定位的准确性,从而更进一步地提高了对医学三维图像的操作精度,可以提高手术效果。
附图说明
图1为本发明实施例提供的方法流程图;
图2为本发明实施例提供的系统架构图;
图3为按照本发明实施例提供的方法确定了闭合曲面后的医学三维图像剖面示意图;
图4为按照本发明实施例提供的方法切割目标组织后的医学三维图像示意图;
图5为本发明实施例提供的装置示意图。
具体实施方式
本发明实施例的应用场景为医疗影像处理,基于手势识别对医学三维图像进行操作。在对本发明实施例进行详细介绍之前,首先对本发明中涉及到的概念进行说明。
手势识别,是一种通过数学算法识别用户手势的技术。例如,用户在手上穿戴有信号发送设备,计算机连接有信号接收设备,计算机通过信号发送设备与信号接收设备之间的信号传递,捕捉到用户的手势变化。
手势帧,手势识别过程中,会按照一定的频率捕捉用户的手势变化。那么,每次捕捉到的手势信息,称作一个手势帧。如果捕捉到的手势信息为手势坐标,那么,一个手势帧的内容至少包括手势坐标。
手势坐标系,为进行手势识别所建立的空间坐标系。手势坐标系中的坐标称为手势坐标,其坐标值的单位可以是长度单位,例如毫米、厘米等等。
三维图像坐标系,三维图像所在的空间坐标系。空间坐标系中的坐标称为三维图像坐标,其坐标值的单位为像素点数量。
本发明实施例中,需要建立手势坐标系与三维图像坐标系的对应关系。一种实现方式可以是:首先建立手势坐标系的原点与三维图像坐标系的原点之间的对应关系。例如,设置三维图像坐标系的坐标原点为显示图像的左上顶点,那么建立手势坐标系的坐标原点与三维图像坐标系中显示图像的左上顶点的对应关系。然后,基于原点之间的对应关系,以及设置的手势坐标系中的手势坐标与三维图像坐标系中的三维图像坐标的线性匹配关系,建立手势坐标系中各坐标点与三维图像坐标系中各坐标点的对应关系。其中,可以根据经验、仿真等等设置上述线性匹配关系。
下面结合附图,对本发明实施例提供的技术方案进行详细说明。
图1为本发明实施例提供的基于手势识别控制的三维图像处理方法,具体包括如下操作:
步骤100、检测对目标组织定位的手势变化是否完成。
步骤110、对目标组织定位的手势变化完成后,将对该手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,其中,第一手势坐标用于对目标组织进行定位。
本发明实施例中,具体可以根据手势坐标系与三维图像坐标系的对应关系,进行坐标的转换。
本发明实施例中,第一手势坐标可以是手指坐标。可选的,第一手势坐标还可以包括掌心坐标、手指间坐标距离等等。
本发明实施例中,目标组织是指需要在医学三维图像中进行操作的图像区域对应的器官组织。例如,肝脏病变组织。
步骤120、基于全部或部分上述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点。
步骤130、根据查找到的像素点确定目标组织对应的闭合曲面。
步骤140、对上述三维图像中的上述闭合曲面内的图像进行目标操作。
本发明实施例提供的方法,是基于手势识别对医学三维图像进行操作。使用者不需要手持鼠标等设备。而为实现手势识别需要穿戴的信号发送设备,以目前的技术水平,可以实现超小型化,例如是贴在使用者手部的芯片,信号发送设备可以穿戴在手套里。现有的手势识别技术,使用者甚至可以不需要佩戴任何信号发送设备。可见,基于手势识别对医学三维图像进行操作能够尽量避免在手术过程中对手术进度的影响。进而,就可以由主刀医生亲自对医学三维图像进行操作,避免沟通问题、理解问题等等造成误操作,保证对医学三维图像的操作精度。
进一步的,本发明实施例提供的方法,将对手势变化进行手势识别得到的手势坐标转换为三维图像坐标。该步骤即进行手势识别,并将手势轨迹反映到三维图像坐标系中。定位的目标组织通常是某部分器官组织(例如病变组织),这部分组织在医学三维图像中对应区域的像素值相差不大,为了降低使用者手部自然抖动等等手势误操作造成的定位误差,基于坐标转换得到的三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点,并根据查找到的像素点确定目标组织对应的闭合曲面,也就是对定位区域进行修订,降低甚至消除定位误差,提高定位的准确性,从而更进一步地提高了对医学三维图像的操作精度,可以提高手术效果。
本发明实施例中,如果对目标组织定位的手势变化未完成,则继续检测。
本发明实施例中,检测对目标组织定位的手势变化是否完成的实现方式有多种。例如,可以通过语音判断,当使用者完成对目标组织定位的手势变化后,使用者本人或其他人员发声指示定位完成,通过声音识别检测手势变化完成。又例如,可以通过接收到的指令检测,当使用者完成对目标组织定位的手势变化后,使用者本人或其他人员通过遥控设备发出定位完成指令,根据接收到的定位完成指令检测手势变化完成。以下介绍一种优选的实现方式:
将通过手势识别实时获取的当前帧(即当前手势帧)的第二手势坐标与之前预定帧数的第二手势坐标进行比较。如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化小于第一坐标变化阈值,表示检测到对目标组织定位的手势变化完成;否则,表示对目标组织定位的手势变化还未完成,需要继续检测。
其中,第二手势坐标用于判断手势变化是否完成,其可以是手指之间的坐标距离和/或掌心坐标。可选的,第二手势坐标还可以包括手指坐标。
其中,参与比较的预定帧数以及第一坐标变化阈值均可以根据实际需要、使用者习惯等等设定。
本发明实施例中,可以将实时获取的当前帧的第二手势坐标,与之前预定帧数的第二手势坐标均值进行比较,如果当前帧的第二手势坐标与前述第二手势坐标均值的变化小于第一坐标变化阈值,则表示定位完成。也可以将实时获取的当前帧的第二手势坐标,分别与之前预定帧数的第二手势坐标进行比较,如果当前帧的第二手势坐标与之前预定帧数的每帧的第二手势坐标的变化均小于第一坐标变化阈值,则表示定位完成;其中,之前预定帧数中的每帧对应相同的第一坐标变化阈值,或对应不相同的第一坐标变化阈值,本发明对此不作限定。
发明人在实现本发明的过程中发现,使用者在完成对目标操作定位的的手势变化时,通常会有短暂的停顿。上述优选的实现方式就是利用这一特征判断本次手势定位是否完成。另一方面,即使是手势停顿,也不可避免的存在自然抖动。因此,上述优选的实现方式中,并非将比较结果无变化作为判断依据,而是设定一定的阈值,只要变化小于该阈值则认为手势停顿,定位完成。
本发明实施例提供的方法是基于手势识别实现的。而为了进行手势识别,就需要实时获取手势帧。因此,上述优选的实现方式,不需要利用额外的设备,仅需要通过对实时获取的手势帧中的第二手势坐标进行比较,来判断本次手势变化是否完成。当实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化小于第一坐标变化阈值时,表明本次手势变化完成,可以执行上述步骤110。
基于上述任意方法实施例,在某些应用场景下,例如整个手术过程中,对医学三维图像的操作就是对病变组织的切割,可能不需要任何确认,即可对闭合曲面内的图像进行目标操作。而在某些场景下,例如整个手术过程中,对医学三维图像的目标操作可能是分割,也可能是分割后的恢复,还可能是旋转等等,那么需要得到确认后再对闭合曲面内的图像进行目标操作。对于后一种情况,上述步骤140是在满足目标操作条件时执行的。相应的,判断是否满足目标操作条件,满足目标操作条件时,对上述三维图像中的闭合曲面内的图像进行目标操作。
本发明实施例中,目标操作有多种。例如,目标操作是切割操作、切割后的还原操作,等等。
如果目标操作是切割操作,那么,上述的目标操作条件是针对实时获取的当前帧的手势坐标与之前预定帧数的手势坐标的变化提出的,例如目标操作条件是:实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值。相应的,判断是否满足目标操作条件的实现方式为:将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较。如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,表示满足目标操作条件;否则,不满足目标操作条件。
如果目标操作是切割后的还原操作,那么,上述的目标操作条件可以是针对实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化提出的。例如,目标操作条件是:实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,这种情况下,切割操作对应的第二坐标变化阈值与还原操作对应的第二坐标变化阈值不同,具体可根据实际需要、使用者习惯等等确定。上述的目标操作条件也可以是:针对同一目标组织的前一个操作是切割操作,且实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,这种情况下,切割操作对应的第二坐标变化阈值与还原操作对应的第二坐标变化阈值可以相同,也可以不同,具体可根据实际需要、使用者习惯等等确定。
基于上述任意方法实施例,如果目标操作是切割操作,那么,步骤140的实现方式可以是:将上述三维图像中的上述闭合曲线内的各像素点的像素值设置为该三维图像的背景像素值。如果目标操作是切割后的还原操作,那么,步骤140的实现方式可以是:将上述三维图像中的上述闭合曲线内的各像素点的像素值还原为切割操作前的像素值。
基于上述任意方法实施例,上述步骤120的实现方式有多种。下面例举其中几种。
步骤120的实现方式一:
基于全部上述三维图像坐标,在医学三维图像中确定初始闭合曲面;基于该初始闭合曲面上的像素点,查找与上述目标组织的像素值的像素差值在预定像素差值范围内的像素点。
其中,一种情况下,上述三维图像坐标围成闭合曲面,则将该闭合曲面确定为初始闭合曲面。另一种情况下,基于上述三维图像坐标,结合手势的运动方向,确定初始闭合曲面。
其中,目标组织的像素值可以是预先设置的。医学三维图像通常会采用渲染机制,即通过渲染使得目标组织(例如病变组织)与其他部分的像素值区分开来,这一过程中会设置目标组织的像素值。
其中,查找方式有多种。例如,基于初始闭合曲面上的每个像素点,分别确定查询空间,在确定的查询空间中进行查找。进一步的,还可以基于查找到的像素点继续确定查询空间,直至查找不到符合要求的像素点。
其中,查询空间的形状不限,例如是球状空间。
其中,可以以像素点为中心确定查询空间,但并不限此种方式,只要确定的查询空间包括其所基于的像素点即可。
步骤120的实现方式二:
基于全部上述三维图像坐标,查找与目标组织的像素值的像素差值在预定像素差值范围内的像素点。
其中,目标组织的像素值可以是预先设置的。医学三维图像通常会采用渲染机制,即通过渲染使得目标组织(例如病变组织)与其他部分的像素值区分开来,这一过程中会设置目标组织的像素值。
其中,查找方式有多种。例如,基于每个上述三维图像坐标处的像素点,分别确定查询空间,在确定的查询空间中进行查找。进一步的,还可以基于查找到的像素点继续确定查询空间,直至查找不到符合要求的像素点。
其中,查询空间的形状不限,例如是球状空间。
其中,可以以像素点为中心确定查询空间,但并不限此种方式,只要确定的查询空间包括其所基于的像素点即可。
步骤120的实现方式三:
基于上述三维图像坐标中的有效坐标,查找与有效坐标处的像素值的像素差值在预定像素差值范围内的像素点,有效坐标处的像素值为目标组织的像素值。
其中,基于上述渲染机制确定有效坐标。
其中,查找方式有多种。例如,基于每个上述有效坐标处的像素点,分别确定查询空间,在确定的查询空间中进行查找。进一步的,还可以基于查找到的像素点继续确定查询空间,直至查找不到符合要求的像素点。
其中,查询空间的形状不限,例如是球状空间。
其中,可以以像素点为中心确定查询空间,但并不限此种方式,只要确定的查询空间包括其所基于的像素点即可。
下面以具体应用场景为例,对本发明实施例提供的技术方案进行详细说明。
如图2所示,本实施例提供的技术方案是通过如下模块配合实现的:手势识别模块、手势坐标缓存、手势解析模块、坐标映射模块、图像处理模块和图像数据库。
基于上述架构,医生需要在通过手术导航,在医学三维图像上模拟对肝脏器官的病变组织的切除。该医学三维图像已通过渲染机制处理,病变组织的像素亮度值与其他器官组织的像素亮度值有明显区别。当然,也可以通过其他像素值(例如色度值等)区分病变组织与其他器官组织。
基于该场景,进入手术导航模式后,手势识别模块实时捕捉医生的手势,将每次识别到的手势坐标作为一个手势帧保存到手势坐标缓存中。其中,一个手势帧至少包括一次识别到的手指坐标、掌心坐标和手指之间的坐标距离。
手势解析模块实时将新存入手势坐标缓存的掌心坐标和手指之间的坐标距离与之前缓存的预定帧数的掌心坐标和手指之间的坐标距离进行比较,如果掌心坐标的变化小于掌心坐标对应的坐标变化阈值,且手指之间的坐标距离的变化小于手指之间的坐标距离对应的坐标变化阈值,则表示本次手势定位完成,将手势坐标缓存中保存的手指坐标发送给坐标映射模块,然后清空手势坐标缓存,等待触发指令;如果定位未完成,则继续上述比较。其中,掌心坐标对应的坐标变化阈值和手指之间的坐标距离对应的坐标变化阈值,均是上述第一坐标变化阈值。
坐标映射模块根据手势坐标系与三维图像坐标系的对应关系,将本次手势变化的手指坐标转换为三维图像坐标,并将得到的三维图像坐标发送给图像处理模块。其具体实现方式可以参照上述实施例的描述,此处不再赘述。
图像处理模块以获取的每个三维图像坐标为中心,分别确定球形区域(即查询空间),并从图像数据库中获取基于三维图像坐标的像素值,对上述球形区域中的像素值进行遍历,查找与上述三维图像坐标处的像素值的像素差值在预定像素差值范围内的像素点,根据查找到的像素点确定闭合曲面,如图3所示,并向手势解析模块发送指示图像定位完成的触发指令。
手势解析模块接收到该触发指令后,实施将新存入手势坐标缓存的手指之间的坐标距离与之前缓存的预定帧数的手指之间的坐标距离进行比较,如果手指之间的坐标距离的变化大于目标操作的坐标变化阈值,则表示医生实施抓取操作,向图像处理模块发送切割指令;否则,继续比较。
图像处理模块接收到切割指令后,将上述三维图像中的上述闭合曲线内的各像素点的像素值设置为该三维图像的背景像素值,如图4所示。
另外,医生能够通过手势对病变组织定位的前提,是能够看到手势在医学三维图像中的位置。相应的,本实施例中,坐标映射模块还实时从手势坐标缓存中读取手势坐标,将读取到的手势坐标转换为三维图像坐标,并将三维图像坐标发送给图像处理模块,由图像处理模块根据这些三维图像坐标,创建手势三维图像,并将手势三维图像与医学三维图像叠加显示,以便医生可以直观观测到手势在医学三维图像的位置。应当指出的是,这一过程与上述过程之间相互独立。
基于与方法同样的发明构思,本发明实施例还提供一种基于手势识别控制的三维图像处理装置,如图5所示,包括:
手势定位判断模块501,用于检测对目标组织定位的手势变化是否完成
坐标转换模块502,用于对目标组织定位的手势变化完成后,将对所述手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,所述第一手势坐标用于对目标组织进行定位;
像素点查找模块503,用于基于全部或部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;
闭合曲面确定模块504,用于根据查找到的像素点确定目标组织对应的闭合曲面;
操作执行模块505,用于对所述三维图像中的所述闭合曲面内的图像进行目标操作。
本发明实施例提供的装置,是基于手势识别对医学三维图像进行操作。使用者不需要手持鼠标等设备。而为实现手势识别需要穿戴的信号发送设备,以目前的技术水平,可以实现超小型化,例如是贴在使用者手部的芯片,信号发送设备可以穿戴在手套里。现有的手势识别技术,使用者甚至可以不需要佩戴任何信号发送设备。可见,基于手势识别对医学三维图像进行操作能够尽量避免在手术过程中对手术进度的影响。进而,就可以由主刀医生亲自对医学三维图像进行操作,避免沟通问题、理解问题等等造成误操作,保证对医学三维图像的操作精度。
进一步的,本发明实施例提供的装置,将对手势变化进行手势识别得到的手势坐标转换为三维图像坐标。该步骤即进行手势识别,并将手势轨迹反映到三维图像坐标系中。定位的目标组织通常是某部分器官组织(例如病变组织),这部分组织在医学三维图像中对应区域的像素值相差不大,为了降低使用者手部自然抖动等等手势误操作造成的定位误差,基于坐标转换得到的三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点,并根据查找到的像素点确定目标组织对应的闭合曲面,也就是对定位区域进行修订,降低甚至消除定位误差,提高定位的准确性,从而更进一步地提高了对医学三维图像的操作精度,可以提高手术效果。
可选的,手势定位判断模块具体用于:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,所述第二手势坐标用于判断手势变化是否完成,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化小于第一坐标变化阈值,表示检测到对目标组织定位的手势变化完成。
可选的,所述操作执行模块用于:
判断是否满足目标操作条件;
满足目标操作条件时,对所述三维图像中的所述闭合曲面内的图像进行目标操作。
可选的,判断是否满足目标操作条件时,所述操作执行模块用于:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,表示满足目标操作条件。
基于上述任意装置实施例,可选的,所述闭合曲线确定模模块具体用于:
在医学三维图像中,基于所述三维图像坐标中的有效坐标,查找与所述有效坐标处的像素值的像素差值在预定像素差值范围内的像素点,所述有效坐标处的像素值为所述目标组织的像素值。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种医学三维图像处理方法,其特征在于,包括:
检测对目标组织定位的手势变化是否完成;
对目标组织定位的手势变化完成后,将对所述手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,所述第一手势坐标用于对目标组织进行定位;
基于全部或部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;
根据查找到的像素点确定目标组织对应的闭合曲面;
对所述医学三维图像中的所述闭合曲面内的图像进行目标操作。
2.根据权利要求1所述的方法,其特征在于,检测对目标组织定位的手势变化是否完成,包括:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,所述第二手势坐标用于判断手势变化是否完成,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化小于第一坐标变化阈值,表示检测到对目标组织定位的手势变化完成。
3.根据权利要求1所述的方法,其特征在于,所述对所述三维图像中的所述闭合曲面内的图像进行目标操作,包括:
判断是否满足目标操作条件;
满足所述目标操作条件时,对所述三维图像中的所述闭合曲面内的图像进行目标操作。
4.根据权利要求3所述的方法,其特征在于,判断是否满足目标操作条件,包括:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,表示满足目标操作条件。
5.根据权利要求1~4任一项所述的方法,其特征在于,所述基于部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点,包括:
在医学三维图像中,基于所述三维图像坐标中的有效坐标,查找与所述有效坐标处的像素值的像素差值在预定像素差值范围内的像素点,所述有效坐标处的像素值为所述目标组织的像素值。
6.一种医学三维图像处理装置,其特征在于,包括:
手势定位判断模块,用于检测对目标组织定位的手势变化是否完成;
坐标转换模块,用于对目标组织定位的手势变化完成后,将对所述手势变化进行手势识别得到的第一手势坐标转换为三维图像坐标,所述第一手势坐标用于对目标组织进行定位;
像素点查找模块,用于基于全部或部分所述三维图像坐标,在医学三维图像中查找与目标组织的像素值的像素差值小于预定像素差值的像素点;
闭合曲面确定模块,用于根据查找到的像素点确定目标组织对应的闭合曲面;
操作执行模块,用于对所述三维图像中的所述闭合曲面内的图像进行目标操作。
7.根据权利要求6所述的装置,其特征在于,所述手势定位判断模块用于:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,所述第二手势坐标用于判断手势变化是否完成,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化小于第一坐标变化阈值,表示检测到对目标组织定位的手势变化完成。
8.根据权利要求6所述的装置,其特征在于,所述操作执行模块用于:
判断是否满足目标操作条件;
满足所述目标操作条件时,对所述三维图像中的所述闭合曲面内的图像进行目标操作。
9.根据权利要求8所述的装置,其特征在于,判断是否满足目标操作条件时,所述操作执行模块用于:
将通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标进行比较,如果通过手势识别实时获取的当前帧的第二手势坐标与之前预定帧数的第二手势坐标的变化大于第二坐标变化阈值,表示满足目标操作条件。
10.根据权利要求6~9任一项所述的装置,其特征在于,所述像素点查找模块具体用于:
在医学三维图像中,基于所述三维图像坐标中的有效坐标,查找与所述有效坐标处的像素值的像素差值在预定像素差值范围内的像素点,所述有效坐标处的像素值为所述目标组织的像素值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510454099.7A CN105117000A (zh) | 2015-07-29 | 2015-07-29 | 一种医学三维图像处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510454099.7A CN105117000A (zh) | 2015-07-29 | 2015-07-29 | 一种医学三维图像处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105117000A true CN105117000A (zh) | 2015-12-02 |
Family
ID=54665016
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510454099.7A Pending CN105117000A (zh) | 2015-07-29 | 2015-07-29 | 一种医学三维图像处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105117000A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110025378A (zh) * | 2018-01-12 | 2019-07-19 | 中国科学院沈阳自动化研究所 | 一种基于光学定位法的手术辅助导航方法 |
CN112489013A (zh) * | 2020-03-20 | 2021-03-12 | 钱小萍 | 一种用于医疗图像精细化处理系统 |
CN113256794A (zh) * | 2021-05-31 | 2021-08-13 | 大连理工大学 | 适用集料粘连清除的沥青混凝土断层图像建模前处理方法 |
CN114077243A (zh) * | 2020-08-07 | 2022-02-22 | 上海联影医疗科技股份有限公司 | 一种医疗辅助设备的运动控制方法和系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102354345A (zh) * | 2011-10-21 | 2012-02-15 | 北京理工大学 | 一种具有体感交互方式的医学影像浏览设备 |
CN102999152A (zh) * | 2011-09-09 | 2013-03-27 | 康佳集团股份有限公司 | 一种手势动作识别方法和系统 |
CN103836040A (zh) * | 2014-02-12 | 2014-06-04 | 苏州金螳螂建筑装饰股份有限公司 | 多向连接头 |
-
2015
- 2015-07-29 CN CN201510454099.7A patent/CN105117000A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102999152A (zh) * | 2011-09-09 | 2013-03-27 | 康佳集团股份有限公司 | 一种手势动作识别方法和系统 |
CN102354345A (zh) * | 2011-10-21 | 2012-02-15 | 北京理工大学 | 一种具有体感交互方式的医学影像浏览设备 |
CN103836040A (zh) * | 2014-02-12 | 2014-06-04 | 苏州金螳螂建筑装饰股份有限公司 | 多向连接头 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110025378A (zh) * | 2018-01-12 | 2019-07-19 | 中国科学院沈阳自动化研究所 | 一种基于光学定位法的手术辅助导航方法 |
CN112489013A (zh) * | 2020-03-20 | 2021-03-12 | 钱小萍 | 一种用于医疗图像精细化处理系统 |
CN114077243A (zh) * | 2020-08-07 | 2022-02-22 | 上海联影医疗科技股份有限公司 | 一种医疗辅助设备的运动控制方法和系统 |
CN114077243B (zh) * | 2020-08-07 | 2023-12-05 | 上海联影医疗科技股份有限公司 | 一种医疗辅助设备的运动控制方法和系统 |
CN113256794A (zh) * | 2021-05-31 | 2021-08-13 | 大连理工大学 | 适用集料粘连清除的沥青混凝土断层图像建模前处理方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107016717B (zh) | 用于患者的透视视图的系统和方法 | |
KR101926123B1 (ko) | 수술영상 분할방법 및 장치 | |
CN109152615A (zh) | 在机器人手术过程期间识别和跟踪物理对象的系统和方法 | |
CN103371870A (zh) | 一种基于多模影像的外科手术导航系统 | |
JP2016524262A (ja) | 3次元ユーザインタフェース | |
JP2016503676A (ja) | 3次元トラッキングセンサを使用した位置決めおよびナビゲーション | |
CN105117000A (zh) | 一种医学三维图像处理方法及装置 | |
US20210145523A1 (en) | Robotic surgery depth detection and modeling | |
KR20160064834A (ko) | 사용자의 진단 의도에 기초한 컴퓨터 보조 진단 장치 및 방법 | |
US20230190136A1 (en) | Systems and methods for computer-assisted shape measurements in video | |
US10078906B2 (en) | Device and method for image registration, and non-transitory recording medium | |
CN116077155B (zh) | 基于光学追踪设备和机械臂的手术导航方法及相关装置 | |
WO2020117561A2 (en) | Improving robotic surgical safety via video processing | |
CN108697410B (zh) | 超声波拍摄装置、图像处理装置及其方法 | |
CN114387836B (zh) | 一种虚拟手术模拟方法、装置、电子设备及存储介质 | |
US20140241577A1 (en) | Method of tracking moving object, method of determining display state of moving object, and control apparatus for tracking moving object | |
EP4125676A1 (en) | Systems and methods for facilitating automated operation of a device in a surgical space | |
CN115443108A (zh) | 手术程序指导系统 | |
KR101864411B1 (ko) | 수술보조 영상 표시방법 및 프로그램 | |
US20240185432A1 (en) | System, method, and apparatus for tracking a tool via a digital surgical microscope | |
US12094061B2 (en) | System and methods for updating an anatomical 3D model | |
JP2014182662A (ja) | 操作装置及び操作方法 | |
JP2014212904A (ja) | 医用投影システム | |
CN114830638A (zh) | 用于具有空间记忆的远程图解的系统和方法 | |
CN114945990A (zh) | 用于基于操作情境提供外科手术辅助的系统和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20151202 |
|
RJ01 | Rejection of invention patent application after publication |