CN101534699B - 内窥镜插入形状分析系统 - Google Patents
内窥镜插入形状分析系统 Download PDFInfo
- Publication number
- CN101534699B CN101534699B CN2007800415775A CN200780041577A CN101534699B CN 101534699 B CN101534699 B CN 101534699B CN 2007800415775 A CN2007800415775 A CN 2007800415775A CN 200780041577 A CN200780041577 A CN 200780041577A CN 101534699 B CN101534699 B CN 101534699B
- Authority
- CN
- China
- Prior art keywords
- shape
- endoscope
- processing
- insertion section
- coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Abstract
本发明的内窥镜插入形状分析系统的特征在于,该内窥镜插入形状分析系统具有:插入状态取得部,其取得插入到被检体内的内窥镜的插入部中的多个部位的坐标值;插入形状检测部,其根据所述多个部位的坐标值,检测插入到所述被检体内的所述插入部中的至少一部分的插入形状;坐标平面设定部,其根据所述规定的多个部位的坐标值和所述插入形状设定多个坐标平面;插入形状投影部,其将所述插入形状投影到所述多个坐标平面各方上;以及插入形状判定部,其判定投影到所述多个坐标平面各方上的所述插入形状内是否存在规定形状。
Description
技术领域
本发明涉及内窥镜插入形状分析系统和活体观测系统,特别是涉及能取得用于辅助内窥镜的插入部的插入操作的信息的内窥镜插入形状分析系统和活体观测系统。
背景技术
内窥镜以往广泛用在医疗领域和工业领域等中。并且,内窥镜例如在医疗领域中,在对活体组织等进行观察和各种处置时使用。
特别是,在将内窥镜具有的插入部从被检者的肛门侧插入,对下部消化道进行观察和各种处置的情况下,为了将该插入部顺利地插入到弯曲的体腔内,与内窥镜一并使用可检测该插入部在体腔内的位置、弯曲状态等的内窥镜插入形状分析系统。
作为具有与所述的内窥镜插入形状检测系统大致相同功能的装置,例如有日本特开2004-358095号公报的内窥镜插入形状分析装置。
在日本特开2004-358095号公报中公开了这样的结构,即:将内窥镜的插入部中的相当于环形成候补的部分分割为n个,将投影到各分割点的规定平面(z=0平面)上的三维坐标值作为P型傅立叶描述符进行特征量化,并通过进行该特征量和教师数据的比较,判定相当于该环形成候补的部分是否形成环形状。
并且,日本特开2004-358095号公报的内窥镜插入形状分析装置具有这样的功能,即:在规定期间内检测出插入到大肠内的内窥镜的前端部的移动距离是规定阈值以下、且插入到该大肠内的内窥镜的插入部的长度继续增加的情况下,判定为发生该大肠的伸展。
而且,日本特开2004-358095号公报的内窥镜插入形状分析装置构成为具有:形状分析单元,其对内窥镜具有的插入部的形状进行分析; 以及信息提供单元,其根据所述形状分析单元的分析结果,提供该插入部的形状相关的信息。根据这种结构,日本特开2004-358095号公报的内窥镜插入形状分析装置可提供涉及提高内窥镜插入性的信息。
然而,在所述的日本特开2004-358095号公报记载的结构中,由于根据向规定平面上的投影坐标值来判断环形状的有无,因而很可能例如由于被检体的体位变换、或者被检体的肠的长度的个人差异而使环形状的检测精度下降。
另外,一般在内窥镜的前端部到达大肠内的脾弯曲部以后的情况下,由于内窥镜的插入部的中间部按压肠道而发生大肠伸展。然而,日本特开2004-358095号公报的内窥镜插入形状分析装置由于不具有用于确定在内窥镜的插入部的哪个位置发生大肠伸展的结构,因而有时不能检测所述的在内窥镜的插入部的中间部发生的大肠伸展。其结果,在日本特开2004-358095号公报的内窥镜插入形状分析装置中,产生用户不能顺利地进行内窥镜的插入部的插入操作的课题。
并且,日本特开2004-358095号公报的内窥镜插入形状分析装置具有这样的结构,即:在输出例如根据内窥镜的插入部的形状来警告发生了大肠伸展的消息之后,即使在由用户进行了解除该伸展的操作的情况下,也继续显示该消息一定时间。由此,日本特开2004-358095号公报的内窥镜插入形状分析装置具有这样的课题,即:使进行内窥镜的插入部的操作的用户产生所提供的信息内容与实际进行的操作不同的不协调感。
发明内容
本发明是鉴于上述方面而作成的,本发明的目的是提供一种能比以往高精度地检测由内窥镜的插入部形成的环形状的内窥镜插入形状分析系统。
并且,本发明是鉴于上述方面而作成的,本发明的目的是提供一种能比以往顺利地进行内窥镜的插入部的插入操作的内窥镜插入形状分析系统。
而且,本发明是鉴于上述方面而作成的,本发明的目的是提供一种根据对内窥镜的插入部的操作适当来进行信息提供,由此,与以往相比,可减轻用户的不协调感的活体观测系统。
本发明中的第1方式的内窥镜插入形状分析系统的特征在于,该内窥镜插入形状分析系统具有:插入状态取得部,其取得插入到被检体内的内窥镜的插入部中的多个部位的坐标值;插入形状检测部,其根据所述多个部位的坐标值,检测插入到所述被检体内的所述插入部中的至少一部分的插入形状;坐标平面设定部,其根据所述规定的多个部位的坐标值和所述插入形状设定多个坐标平面;插入形状投影部,其将所述插入形状投影到所述多个坐标平面各方上;以及插入形状判定部,其判定投影到所述多个坐标平面各方上的所述插入形状内是否存在规定形状。
本发明中的第2方式的内窥镜插入形状分析系统的特征在于,该内窥镜插入形状分析系统具有:插入形状检测部,其根据插入到被检体内的内窥镜的插入部中的多个部位的坐标值,检测所述插入部的插入形状;插入形状分割部,其生成与所述插入形状对应的线段,并在所述线段上设定多个分割点;以及插入停止点估计部,其根据所述插入部的基端侧的移动速度检测对所述插入部是否进行了插入操作,并检测所述多个分割点中规定的坐标轴上的坐标值为局部极大、且伴随所述插入操作而变动的所述移动速度的传递率不足规定阈值的一个分割点。
本发明中的第3方式的内窥镜插入形状分析系统的特征在于,该内窥镜插入形状分析系统具有:插入形状检测部,其根据插入到被检体内的内窥镜的插入部中的多个部位的坐标值,检测所述插入部的插入形状;插入形状分割部,其生成与所述插入形状对应的线段,并在所述线段上设定多个分割点;以及插入停止点估计部,其根据所述插入部的基端侧的移动速度检测对所述插入部是否进行了插入操作,并检测所述多个分割点中规定的坐标轴上的坐标值为局部极大、且伴随所述插入操作而变动的局部曲率半径不足规定阈值的一个分割点。
本发明中的活体观测系统的特征在于,该活体观测系统具有:插入状态取得部,其取得包含插入到被检体内的内窥镜的插入部中的规定的 多个部位的坐标值在内的信息即插入状态信息;分析处理部,其根据所述插入状态信息,生成与所述规定的多个部位的坐标值各方对应的分析数据;存储部,其存储所述分析数据;以及显示控制部,其根据存储在所述存储部内的分析数据中的最新的分析数据和一个或多个过去的分析数据来计算显示期间控制值,并根据该显示期间控制值,判定是否将能支持所述插入部的插入操作的信息即插入辅助信息显示在显示部上。
附图说明
图1是示出具有本发明的实施方式的内窥镜插入形状分析系统的活体观测系统的要部结构的一例的图。
图2是示出在图1的内窥镜插入形状检测装置中所检测的、设在图1的内窥镜的插入部上的源线圈的坐标的图。
图3A是示出在图1的内窥镜插入形状检测装置中所生成的插入形状数据的概要的图。
图3B是示出图3A的帧数据各方内包含的数据和信息的概要的图。
图3C是示出图3B的线圈坐标数据内包含的三维坐标数据的概要的图。
图4是示出在本发明的第1实施方式中,在判定环形状的有无时进行的处理的一例的流程图。
图5是以几何形式示出图4的流程图的处理概要的图。
图6是示出在本发明的第2实施方式中,在检测插入停止点时进行的处理的一例的流程图。
图7是示出在本发明的第2实施方式中,在评价通过图6的一系列处理检测出的插入停止点时进行的处理的一例的流程图。
图8是示出根据图7的一系列处理的处理结果显示在显示器上的第1标志的一例的图。
图9是示出根据图7的一系列处理的处理结果显示在显示器上的第2标志的一例的图。
图10是示出在本发明的第2实施方式中,在评价通过图6的一系列 处理检测出的插入停止点时进行的处理的与图7不同的例子的流程图。
图11是示出由图1的图像处理装置所实现的功能块的结构等的图。
图12是示出在本发明的第3实施方式中,由具有图11所示的结构的各块进行的处理流程的说明图。
图13是示出在本发明的第4实施方式中,由分析结果显示控制块进行的处理流程的说明图。
具体实施方式
以下,参照附图说明本发明的实施方式。
(第1实施方式)
图1至图5涉及本发明的第1实施方式。图1是示出本发明的实施方式的活体观测系统的要部结构的一例的图。图2是示出在图1的内窥镜插入形状检测装置中所检测的、设在图1的内窥镜的插入部上的源线圈的坐标的图。图3A是示出在图1的内窥镜插入形状检测装置中所生成的插入形状数据的概要的图。图3B是示出图3A的帧数据各方内包含的数据和信息的概要的图。图3C是示出图3B的线圈坐标数据内包含的三维坐标数据的概要的图。图4是示出在第1实施方式中,在判定环形状的有无时进行的处理的一例的流程图。图5是以几何形式示出图4的流程图的处理概要的图。
如图1所示,活体观测系统1构成为具有:内窥镜装置2,其能进行使用内窥镜6的被检体内部的观察;内窥镜插入形状检测装置3,其检测插入到该被检体的内部的内窥镜6的插入形状,并将该插入形状作为插入形状数据来输出;以及图像处理装置4,其进行与从内窥镜插入形状检测装置3输出的插入形状数据对应的各种处理。
内窥镜装置2构成为具有:内窥镜6,其能插入到存在于被检体内部的大肠等内,并拍摄该被检体的内部的被摄体,作为摄像信号来输出;光源装置7,其将用于对该被摄体进行照明的照明光提供给内窥镜6;视频处理器8,其对从内窥镜6输出的摄像信号进行信号处理,作为影像信号来输出;以及监视器9,其根据从视频处理器8输出的影像信号,将由 内窥镜6所拍摄的被摄体的像作为内窥镜观察图像来显示。
内窥镜6具有能插入到被检体的内部的细长的插入部11以及设在插入部11的后端的操作部12。在插入部11的内部插通有导光路13,该导光路13的一端侧配置在插入部11的前端部14,并且另一端侧能与光源装置7连接。由此,从光源装置7提供的照明光经由导光路13从设在插入部11的前端部14的未作图示的照明窗出射。
另外,在插入部11的前端部14的后端侧设有构成为自由弯曲的未作图示的弯曲部。然后,所述未作图示的弯曲部可通过设在操作部12上的未作图示的弯曲操作旋钮等的操作进行弯曲。
在前端部14上,在与未作图示的照明窗相邻设置的未作图示的观察窗上安装有物镜15。并且,在物镜15的成像位置上配置有由电荷耦合元件(简记为CCD)等构成的摄像元件16的摄像面。
摄像元件16经由信号线与视频处理器8连接,对由物镜15所成像的被摄体的像进行光电转换,作为摄像信号输出到视频处理器8。
视频处理器8根据从摄像元件16输出的摄像信号进行用于生成影像信号的信号处理。然后,视频处理器8将通过所述信号处理所生成的影像信号、例如RGB信号输出到监视器9。然后,在监视器9的显示面上显示在摄像元件16中所拍摄的被摄体的像作为内窥镜观察图像。
另外,光源装置7在提供由R(红)、G(绿)和B(蓝)构成的面顺序照明光的情况下,将与提供各个光的期间同步的同步信号输出到视频处理器8。此时,视频处理器8与从光源装置7输出的所述同步信号同步进行信号处理。
在内窥镜6的操作部12上,除了所述的未作图示的弯曲操作旋钮以外,还设有能进行释放指示等指示的未作图示的开关。
并且,在内窥镜6的插入部11的内部,在长度方向具有规定间隔地配置有多个源线圈C0、C1、…、CM-1(简记为C0~CM-1)。然后,源线圈C0~CM-1根据从内窥镜插入形状检测装置3输出的驱动信号,在各自周围产生磁场。
然后,在源线圈C0~CM-1中所产生的磁场由内窥镜插入形状检测装 置3具有的内置有多个感应线圈的感应线圈单元19来检测。
内窥镜插入形状检测装置3构成为具有:感应线圈单元19,其检测在设于内窥镜6上的源线圈C0~CM-1中所产生的磁场;形状处理装置21,其根据由感应线圈单元19检测出的磁场的检测信号估计插入部11的形状(插入形状);以及显示器22,其显示由形状处理装置21估计出的插入形状。
构成插入状态取得部的一部分的感应线圈单元19配置在患者所躺的检查床的周边部等上,检测由源线圈C0~CM-1产生的磁场,将检测出的该磁场作为检测信号输出到形状处理装置21。
构成插入状态取得部的一部分、且具有插入形状检测部的功能的形状处理装置21根据检测信号计算源线圈C0~CM-1的各位置坐标数据,并根据计算出的该位置坐标数据估计插入部11的插入形状。并且,形状处理装置21生成估计出的插入部11的插入形状的影像信号,并将所生成的影像信号、例如RGB信号输出到显示器22上。由此,在显示器22的显示画面上,对插入部11的插入形状进行图像显示。而且,形状处理装置21在进行使用内窥镜6的观察当中,连续生成表示插入部11的插入形状的三维坐标信息、以及形状显示属性等插入形状数据,经由通信端口21a输出到图像处理装置4。
另外,本实施方式的形状处理装置21可仅将例如在释放开关被操作时的插入形状数据输出到图像处理装置4中。
并且,本实施方式的内窥镜插入形状检测装置3可将经过形状处理装置21的形状检测处理生成后、显示在显示器22上的插入形状的图像的旋转角和放大缩小率等形状显示属性通过在未作图示的操作面板等中进行指示和输入来进行变更。
另外,视频处理器8具有未作图示的操作面板,该操作面板用于输入例如患者的姓名、出生年月日、性别、年龄、患者代码和检查日期时间等的信息即检查信息。然后,在所述未作图示的操作面板中所输入的检查信息经由通信端口8a也被发送到图像处理装置4中。
图像处理装置4具有:个人计算机(以下简称为PC)25,其根据从 内窥镜插入形状检测装置3输出的插入形状数据和从视频处理器8输出的检查信息,进行用于生成能辅助或支持用户的插入部11的插入操作的插入辅助信息的分析处理;鼠标26和键盘27,其能进行对PC 25的各种指示和输入;以及显示器28,其能再现或显示通过PC 25的分析处理所生成的插入辅助信息等。
PC 25具有:通信端口25a,其取入从内窥镜插入形状检测装置3的形状处理装置21的通信端口21a输出的插入形状数据;通信端口25b,其取入从所述内窥镜装置2的视频处理器8的通信端口8a输出的检查信息;动态图像输入板25c,其将由视频处理器8所生成的动态图像的影像信号转换成规定的压缩图像数据;CPU 31,其进行各种处理和控制;处理程序存储部32,其存储有用于CPU 31中的所述图像处理的处理程序;存储器33,其暂时存储由CPU 31处理后的数据等;以及硬盘(以下简称为HDD)34,其存储由CPU 31处理后的图像数据等。然后,PC 25具有的各部通过总线35相互连接。
由视频处理器8所生成的动态图像的影像信号、例如Y/C信号被输入到图像处理装置4的动态图像输入板25c。然后,动态图像输入板25c使用例如MJPEG形式等的规定压缩形式将所述动态图像的影像信号转换成压缩动态图像数据,并将该压缩动态图像数据输出到HDD 34等中。
另外,在通信端口25a中所取入的插入形状数据、以及在通信端口25b中所取入的检查信息例如通过输出到HDD 34,能保存在PC 25内。
并且,本实施方式的内窥镜插入形状分析系统构成为具有感应线圈单元19、形状处理装置21以及CPU 31作为要部。
这里,对内窥镜插入形状检测装置3在生成插入形状数据时进行的处理进行说明。
内窥镜插入形状检测装置3的形状处理装置21根据从内窥镜6的摄像元件16输出1帧的摄像信号的定时,生成包含内窥镜6的插入部11中内置的M个源线圈C0~CM-1的三维坐标的插入形状数据。并且,形状处理装置21将所述插入形状数据输出到图像处理装置4,并根据所述插入形状数据生成插入部11的插入形状的图像,将该插入形状的图像输出 到显示器22。
另外,第j帧(其中,j=0、1、2…)中的从插入部11的前端侧开始第i个(其中,i=0、1、…、M-1)源线圈Ci的三维坐标如图2那样表示为(Xi j,Yi j,Zi j)。
如图3A所示,包含由该内窥镜插入形状检测装置3检测出的源线圈C0~CM-1的坐标系的数据在内的插入形状数据构成为各帧相关的帧数据(即,第0帧数据、第1帧数据、…),并被依次发送到图像处理装置4。然后,如图3B所示,作为插入状态信息的各帧数据构成为具有插入形状数据的生成时刻、显示属性、附属信息以及源线圈的三维坐标数据(线圈坐标数据)等数据。
并且,如图3C所示,线圈坐标数据是分别表示从插入部11的前端侧依次配置在基端侧(操作部12侧)的源线圈C0~CM-1的三维坐标的数据。另外,内窥镜插入形状检测装置3的检测范围外的源线圈的三维坐标被设定为例如知道是检测范围外的规定的坐标值(例如(0,0,0))。
下面,对本实施方式中的活体观测系统1的作用进行说明。
当内窥镜6的插入部11由用户从被检体的肛门侧插入到体腔内时,由设在插入部11的前端部14上的摄像元件16拍摄存在于该体腔内的被摄体。由摄像元件16所拍摄的被摄体的像作为摄像信号被输出,由视频处理器8实施信号处理而转换成影像信号,之后被输出到监视器9。由此,在监视器9上显示由摄像元件16所拍摄的被摄体的像作为内窥镜观察图像。
内窥镜插入形状检测装置3在感应线圈单元19中检测从源线圈C0~CM-1各方所产生的磁场,并在形状处理装置21中基于根据该磁场而输出的检测信号来估计插入部11的插入形状。由此,在显示器22上显示在形状处理装置21中估计出的插入部11的插入形状。
并且,内窥镜插入形状检测装置3的形状处理装置21将包含各源线圈的位置信息的帧数据经由通信端口21a依次输出到图像处理装置4的PC 25具有的CPU 31中。
CPU 31根据从内窥镜插入形状检测装置3输出的插入形状数据,进 行用于判定插入到被检体内的插入部11是否形成环形状的处理,即图4的流程图所示的处理。另外,图5是以几何形式示出图4的流程图的处理概要的图。
首先,CPU 31根据从内窥镜插入形状检测装置3输出的插入形状数据具有的源线圈C0~CM-1的三维坐标数据,计算任意2个源线圈间的距离L(图4的步骤S1),并检测计算出的该距离L是否不足阈值T。然后,CPU 31在检测出距离L是阈值T以上的情况下(图4的步骤S2),进行后述的图4的步骤S3的处理。并且,CPU 31在检测出距离L是阈值T以上的情况下(图4的步骤S2),接下来针对全部源线圈C0~CM-1的组合,检测是否计算出2个源线圈间的距离L。另外,在本实施方式中,2个源线圈间的距离L表示从一个源线圈到另一个源线圈的直线距离。
然后,CPU 31在针对全部源线圈C0~CM-1的组合检测出计算了2个源线圈间的距离L的情况下(图4的步骤S16),结束一系列处理。并且,CPU 31在检测出有未计算2个源线圈间的距离L的源线圈C0~CM-1的组合的情况下(图4的步骤S16),再次进行图4的步骤S1及以后的处理。
当在图4的步骤S2中检测出距离L不足阈值T的2个源线圈时,CPU 31通过对根据在插入到被检体内的插入部11中的该2个源线圈间的插入形状而生成的线段即线段R进行分割,计算该线段R上的N个分割点的坐标值(图4的步骤S3)。另外,所述线段R可以是使用由内窥镜插入形状检测装置3估计出的插入部11的插入形状的一部分而生成的线段,并且也可以是通过对源线圈C0~CM-1的三维坐标数据应用Catmull-Rom曲线方程式而生成的线段。
之后,CPU 31根据在图4的步骤S3的处理中所生成的N个分割点,设定存在线段R的平面F1,并计算该平面F1上的法线矢量D(图4的步骤S4)。
具体地说,作为坐标平面设定部的CPU 31通过将线段R上的N个分割点的坐标值(V1x,V1y,V1z)、(V2x,V2y,V2z)、…、(VNx,VNy,VNz)分别代入一般的平面方程式,将下述算式(1)设定为平面 F1的方程式。
另外,算式(1)中的左边矩阵是由1行N列构成的矩阵。并且,算式(2)中的矩阵A是与算式(1)的右边第2个矩阵相同的矩阵,是由3行N列构成的矩阵。
然后,CPU 31通过上述算式(2)的矩阵A的伪逆矩阵A+的计算、以及上述算式(1)中的LU分解的应用,计算法线矢量D(a,b,c)的值。
然后,CPU 31计算使法线矢量D(a,b,c)相对于平面F1倾斜角度θ(例如10度)后的矢量α0(图4的步骤S5),并计算以该矢量α0作为法线矢量的平面A0(图4的步骤S6)。
然后,CPU 31将变量i(i=1,2,…,d)设定为1(图4的步骤S7)后,计算在平行于平面F1且存在矢量(α0-N)的平面上使矢量αi-1旋转规定角度β(例如45度)后的矢量αi(图4的步骤S8),并计算以该矢量αi作为法线矢量的平面Ai(图4的步骤S9)。
然后,作为坐标平面设定部的CPU 31重复进行所述的图4的步骤S8和步骤S9的处理,直到变量i=d,即,直到计算出具有矢量α1至αd各方作为法线矢量的平面A1~Ad为止(图4的步骤S10)。
作为插入形状投影部的CPU 31将线段R具有的各三维坐标值投影到使通过图4的步骤S3和步骤S4的处理计算出的平面F1、通过图4的步骤S5和步骤S6的处理计算出的平面A0、以及通过重复图4的步骤S7到步骤S10的处理计算出的平面A1~Ad合并后的(d+2)个平面的各方上(图4的步骤S11)。
之后,作为插入形状判定部的CPU 31根据投影到(d+2)个平面各方上的线段R的各三维坐标值,进行该(d+2)个平面各方上的环形状的判定处理(图4的步骤S12)。具体地说,CPU 31例如根据投影到(d+2)个平面各方上的线段R的各三维坐标值,计算基于P型傅立叶描述符的功率频谱,并将计算出的该功率频谱与预先写入在HDD 34等内的与一个或多个环形状的图形数据(教师数据)对应的规定的一个或多个功率频谱进行比较,在满足规定条件的情况下,判定为线段R形成环形状。另外,所述的使用P型傅立叶描述符和功率频谱来判定一个线段是否形成环形状的方法由于在日本特开2004-358095号公报中作了记载,因而这里省略详细说明。
作为插入形状判定部的CPU 31在根据图4的步骤S12中的环判定,在(d+2)个平面中的任一平面上未检测出环形状的存在(图4的步骤S13)的情况下,判定为线段R未形成环形状(图4的步骤S14),在与之前的处理对象的2个源线圈的组合不同的另外2个源线圈的组合中,再次进行图4的步骤S1及以后的处理。并且,作为插入形状判定部的CPU 31在根据图4的步骤S12中的环判定,在(d+2)个平面中的全部平面上检测出环形状的存在(图4的步骤S13)的情况下,判定为线段R形成环形状(图4的步骤S15),结束一系列处理。
如以上所述,具有本实施方式的内窥镜插入形状分析系统的活体观测系统1具有这样的结构,即:将投影有插入部11的插入形状的坐标平面设定在与该插入形状对应的多个坐标平面内,同时能判定该插入形状是否形成环形状。其结果,具有本实施方式的内窥镜插入形状分析系统的活体观测系统1与以往相比,可高精度地检测由内窥镜6的插入部11形成的环形状。
(第2实施方式)
图6至图10涉及本发明的第2实施方式。图6是示出在本发明的第2实施方式中,在检测插入停止点时进行的处理的一例的流程图。并且,图7是示出在本发明的第2实施方式中,在评价通过图6的一系列处理检测出的插入停止点时进行的处理的一例的流程图。图8是示出根据图7 的一系列处理的处理结果显示在显示器上的第1标志的一例的图。图9是示出根据图7的一系列处理的处理结果显示在显示器上的第2标志的一例的图。图10是示出在本发明的第2实施方式中,在评价通过图6的一系列处理检测出的插入停止点时进行的处理的与图7不同的例子的流程图。
另外,第2实施方式的活体观测系统具有与在第1实施方式中所说明的活体观测系统1大致相同的结构。因此,在本实施方式中,省略关于具有与第1实施方式的活体观测系统1相同的结构或作用的部分的说明,并主要进行关于具有与第1实施方式的活体观测系统1不同的结构或作用的部分的说明。并且,本实施方式的内窥镜插入形状分析系统构成为具有形状处理装置21和CPU 31作为要部。
下面,对本实施方式中的活体观测系统1的作用进行说明。
当内窥镜6的插入部11由用户从被检体的肛门侧插入到体腔内时,由设在插入部11的前端部14上的摄像元件16拍摄存在于该体腔内的被摄体。由摄像元件16所拍摄的被摄体的像作为摄像信号被输出,由视频处理器8实施信号处理而转换成影像信号,之后被输出到监视器9。由此,在监视器9上显示由摄像元件16所拍摄的被摄体的像作为内窥镜观察图像。
内窥镜插入形状检测装置3在感应线圈单元19中检测从源线圈C0~GM-1各方所产生的磁场,并在形状处理装置21中基于根据该磁场而输出的检测信号来估计插入部11的插入形状。由此,在显示器22上显示在形状处理装置21中估计出的插入部11的插入形状。
并且,内窥镜插入形状检测装置3的形状处理装置21将包含各源线圈的位置信息的帧数据经由通信端口21a依次输出到图像处理装置4的PC 25具有的CPU 31。
CPU 31根据从内窥镜插入形状检测装置3依次输出的帧数据,进行用于检测插入到被检体内的插入部11中使用户进行的插入部11的插入操作停止的要因所存在的部位即插入停止点的处理,即图6的流程图所示的插入停止点检测处理。
首先,作为插入形状分割部的CPU 31通过对从内窥镜插入形状检测装置3依次输出的帧数据具有的线圈坐标数据应用例如Catmull-Rom曲线方程式,计算由从配置在插入到被检体内的插入部11中最前端侧的源线圈(源线圈C0)到配置在插入到被检体内的插入部11中最基端侧的源线圈的各源线圈形成的与插入部11的插入状态对应的线段,并对该线段进行分割(图6的步骤S101)。另外,CPU 31在所述的图6的步骤S101的处理中,使用例如n个分割点D1~Dn对与插入部11的插入状态对应的线段进行分割。并且,在本实施方式中,各分割点是从前端侧到基端侧被设定为D1、D2、…、Dn-1、Dn的分割点。并且,各分割点是等间隔地进行分割设定以使相邻的分割点间的距离为规定值d的分割点。
并且,CPU 31根据从过去的帧数据求出的分割点坐标值与从当前的帧数据求出的分割点坐标值的差值,计算n个分割点D1~Dn的移动速度V1~Vn。然后,CPU 31根据Catmull-Rom曲线的一次微分值计算n个分割点D1~Dn的插入轴方向,并通过将移动速度V1~Vn朝n个分割点D1~Dn的插入轴方向投影,计算n个分割点D1~Dn的插入轴方向的移动速度Va1~Van。
然后,CPU 31通过进行所述的运算来取得分割点D1~Dn中存在于插入到被检体内的插入部11中的基端侧的第n个分割点Dn的插入轴方向的移动速度Van(图6的步骤S102),之后进一步检测该移动速度Van是否大于阈值T1(T1>0)。然后,CPU 31在检测出移动速度Van大于阈值T1的情况下(图6的步骤S103),判定为对插入部11进行了插入操作,继续进行后述的图6的步骤S104的处理。并且,CPU 31在检测出移动速度Van是阈值T1以下的情况下(图6的步骤S103),判定为对插入部11未进行插入操作,结束图6所示的插入停止点检测处理。
另外,在本实施方式中,第n个分割点Dn的插入轴方向的移动速度Van是恒定的,与时间无关。
CPU 31在图6的步骤S103的处理中检测出移动速度Van大于阈值T1后,将在前端部14侧与分割点Dn相邻的分割点Dn-1设定为分割点Dt(图6的步骤S104)。
然后,CPU 31读入例如存储在视频处理器8、存储器33以及HDD 34中的至少任一方内的内窥镜6的机型信息,并根据该机型信息检测在图6的步骤S104的处理中所设定的分割点Dt是否存在于插入部11的(未作图示)的弯曲部上。然后,CPU 31在检测出分割点Dt存在于插入部11的(未作图示)的弯曲部上的情况下(图6的步骤S105),判定为分割点Dt位于通过用户的操作能弯曲的位置,结束图6所示的插入停止点检测处理。并且,CPU 31在检测出分割点Dt不存在于插入部11的(未作图示)的弯曲部的情况下(图6的步骤S105),继续进行图6的步骤S106的处理。
当在图6的步骤S105的处理中检测出分割点Dt不存在于插入部11的(未作图示)的弯曲部上时,之后,CPU 31进一步取得分割点Dt的插入轴方向的移动速度Vat(图6的步骤S106),检测该移动速度Vat是否不足阈值T2。然后,CPU 31在检测出移动速度Vat不足阈值T2的情况下(图6的步骤S107),判定为有可能在分割点Dt存在使用户进行的插入部11的插入操作停止的要因,继续进行后述的图6的步骤S109的处理。并且,CPU 31在检测出移动速度Vat是阈值T2以上的情况下(图6的步骤S107),设定在前端部14侧与分割点Dt相邻的分割点Dt-1(图6的步骤S108),并对该分割点Dt-1再次进行图6的步骤S105到步骤S107的处理。
CPU 31在图6的步骤S107的处理中检测出移动速度Vat不足阈值T2后,将在前端部14侧与分割点Dt相邻的分割点Dt-1设定为分割点Dk(图6的步骤S109)。
然后,CPU 31根据所述的内窥镜6的机型信息,检测在图6的步骤S109的处理中所设定的分割点Dk是否存在于插入部11的(未作图示)的弯曲部上。然后,CPU 31在检测出分割点Dk存在于插入部11的(未作图示)的弯曲部上的情况下(图6的步骤S110),判定为分割点Dk位于通过用户的操作能弯曲的位置,结束图6所示的插入停止点检测处理。并且,CPU 31在检测出分割点Dk不存在于插入部11的(未作图示)的弯曲部上的情况下(图6的步骤S110),继续进行图6的步骤S111的处 理。
当在图6的步骤S110的处理中检测出分割点Dk不存在于插入部11的(未作图示)的弯曲部上时,之后,作为插入停止点估计部的CPU 31进一步检测分割点Dk的y坐标是否取极大值(图6的步骤S111)。另外,本实施方式中的y轴被设定为从体腔内近前侧(例如肛门侧)到内侧(例如胃侧)的坐标轴。
具体地说,CPU 31将分割点Dk-2、Dk-1、Dk、Dk+1和Dk+2的位于分割点Dk附近的这5个分割点的y坐标的值分别进行比较,在检测出该5个分割点的y坐标中的分割点Dk的y坐标值是最大值的情况下,判定为分割点Dk的y坐标取极大值。
CPU 31在判定为分割点Dk的y坐标取极大值的情况下(图6的步骤S111),判定为在分割点Dk存在使用户进行的插入部11的插入操作停止的要因,将该分割点Dk检测为插入停止点(图6的步骤S113),之后结束图6所示的插入停止点检测处理。并且,CPU 31在判定为分割点Dk的y坐标未取极大值的情况下(图6的步骤S111),设定在前端部14侧与分割点Dk相邻的分割点Dk-1(图6的步骤S112),并对该分割点Dk-1再次进行图6的步骤S110和步骤S111的处理。
之后,CPU 31根据与在图6的插入停止点检测处理中使用的帧数据相比在时序上存在于后面(例如从1起后数帧)的其他帧数据,进行用于执行对通过图6的插入停止点检测处理检测出的插入停止点Dk的评价的处理,即图7的流程图所示的插入停止点评价处理。
CPU 31根据所述其他帧数据,取得存在于插入到被检体内的插入部11中的基端侧的第n个分割点Dn的插入轴方向的移动速度Van(图7的步骤S121),并取得插入停止点Dk的插入轴方向的移动速度Vak(图7的步骤S122)。
并且,CPU 31根据所述其他帧数据取得插入停止点Dk的移动速度Vk,并使用下述算式(3)来计算插入停止点Dk的垂直于插入轴方向的方向的移动速度Vrk(图7的步骤S123)。
之后,CPU 31检测移动速度Van是否大于阈值T1。然后,CPU 31在检测出移动速度Van大于阈值T1的情况下(图7的步骤S124),判定为对插入部11进行了插入操作,继续进行后述的图7的步骤S125的处理。并且,CPU 31在检测出移动速度Van是阈值T1以下的情况下(图7的步骤S124),判定为是未进行插入部11的操作的状态、或者对插入部11进行了拔出操作的状态的任一状态,结束图7的一系列处理。
然后,作为插入停止点估计部的CPU 31检测移动速度Vak相对于移动速度Van的比例、即Vak/Van的值是否不足阈值T3。然后,CPU 31在检测出表示在插入部11被插入时的移动速度Van的传递率的值即Vak/Van的值不足阈值T3的情况下(图7的步骤S125),为了进行对插入停止点Dk的评价,继续进行后述的图7的步骤S126的处理。并且,CPU 31在检测出Vak/Van的值是阈值T3以上的情况下(图7的步骤S125),判定为消除了插入停止点Dk处的大肠伸展,结束图7的一系列处理。
CPU 31检测移动速度Vrk相对于移动速度Van的比例、即Vrk/Van的值是否不足阈值T4。然后,作为告知部的CPU 31在检测出Vrk/Van的值不足阈值T4的情况下(图7的步骤S126),判定为在插入停止点Dk处发生大肠伸展,并进行这样的控制,即:使作为表示该插入停止点Dk的位置的告知信息的第1标志处于例如图8所示的状态,即在使该第1标志与插入部11的插入形状重叠的同时使其显示在显示器28上(图7的步骤S127),之后结束图7的一系列处理。并且,作为告知部的CPU 31在检测出Vrk/Van的值是阈值T4以上的情况下(图7的步骤S126),判定为是在插入停止点Dk处大肠即将伸展前的状态,并进行这样的控制,即:使作为表示该插入停止点Dk的位置的告知信息的第2标志处于例如图9所示的状态,即在使该第2标志与插入部11的插入形状重叠的同时使其显示在显示器28上(图7的步骤S128),之后结束图7的一系列处理。
另外,CPU 31在图6的步骤S103、图7的步骤S124以及图7的步骤S125的各处理中,判定为是未进行插入部11的操作的状态、对插入部11进行了拔出操作的状态、以及消除了在插入停止点Dk处的大肠伸展的状态中的任一状态的情况下,一并进行使显示在显示器28上的各标 志为非显示的处理。
并且,CPU 31为了表示由于发生大肠伸展而对患者施加了大的负荷,例如如图8和图9所示,将表示由于插入部11而发生大肠伸展的位置的第1标志的形状和(或)尺寸在显示器28上显示成比表示由于插入部11而即将发生大肠伸张前的位置的第2标志的形状和(或)尺寸显著。
而且,本实施方式的图6所示的插入停止点检测处理、以及图7所示的插入停止点评价处理不限于按该顺序进行,也可以按相反顺序进行。
如以上所述,具有本实施方式的内窥镜插入形状分析系统的活体观测系统1通过进行图6和图7所示的各处理,可检测发生大肠伸展的位置并呈现给用户,其结果,与以往相比,可顺利地进行内窥镜6的插入部11的插入操作。
另外,CPU 31不限于根据插入停止点Dk处的垂直于插入轴方向的方向的移动速度Vrk来检测由于插入部11而发生大肠伸展的位置,可以根据例如该插入停止点Dk处的局部曲率半径来检测由于插入部11而发生大肠伸展的位置。在该情况下,CPU 31根据与在图6的插入停止点检测处理中使用的帧数据相比在时序上存在于后面(例如从1起后数帧)的其他帧数据,进行用于执行对通过图6的插入停止点检测处理检测出的插入停止点Dk的评价的处理,即图10的流程图所示的插入停止点评价处理(取代图7的插入停止点评价处理)。
这里,对图10的插入停止点评价处理的详情进行说明。
CPU 31根据所述其他帧数据,取得存在于插入到被检体内的插入部11中的基端侧的第n个分割点Dn的插入轴方向的移动速度Van(图10的步骤S131),并计算插入停止点Dk处的局部曲率半径Rk(图10的步骤S132)。另外,插入停止点Dk处的局部曲率半径Rk可通过例如使用Catmull-Rom曲线方程式的一次微分值和二次微分值来计算。
之后,CPU 31检测移动速度Van是否大于阈值T1。然后,CPU 31在检测出移动速度Van大于阈值T1的情况下(图10的步骤S133),判定为对插入部11进行了插入操作,继续进行后述的图10的步骤S134的处理。并且,CPU 31在检测出移动速度Van是阈值T1以下的情况下(图 10的步骤S133),判定为是未进行插入部11的操作的状态、或者对插入部11进行了拔出操作的状态的任一状态,结束图10的一系列处理。
然后,CPU 31检测插入停止点Dk处的局部曲率半径Rk是否不足阈值T5。然后,CPU 31在检测出插入停止点Dk处的局部曲率半径Rk不足阈值T5的情况下(图10的步骤S134),继续进行后述的图10的步骤S135的处理。并且,CPU 31在检测出插入停止点Dk处的局部曲率半径Rk是阈值T5以上的情况下(图10的步骤S134),判定为消除了在插入停止点Dk处的大肠伸展,结束图10的一系列处理。
之后,作为告知部的CPU 31检测插入停止点Dk处的局部曲率半径Rk是否不足阈值T6(T6<T5)。然后,CPU 31在检测出插入停止点Dk处的局部曲率半径Rk不足阈值T6的情况下(图10的步骤S135),判定为在插入停止点Dk处发生大肠伸展,并进行将作为表示该插入停止点Dk的位置的告知信息的第1标志显示在显示器28上的控制(图10的步骤S136),之后结束图10的一系列处理。并且,作为告知部的CPU 31在检测出插入停止点Dk处的局部曲率半径Rk是阈值T6以上的情况下(图10的步骤S135),判定为是在插入停止点Dk处大肠即将伸展前的状态,并进行将作为表示该插入停止点Dk的位置的告知信息的第2标志显示在显示器28上的控制(图10的步骤S1037),之后结束图10的一系列处理。
另外,CPU 31在图10的步骤S133和图10的步骤S134的各处理中,判定为是未进行插入部11的操作的状态、对插入部11进行了拔出操作的状态、以及消除了在插入停止点Dk处的大肠伸展的状态中的任一状态的情况下,一并进行使显示在显示器28上的各标志为非显示的处理。
并且,CPU 31为了表示由于发生大肠伸展而对患者施加了大的负荷,例如如图8所示,将表示由于插入部11而发生大肠伸展的位置的第1标志的形状和(或)尺寸在显示器28上显示成比表示由于插入部11而即将发生大肠伸张前的位置的第2标志的形状和(或)尺寸显著。
而且,本实施方式的图6所示的插入停止点检测处理、以及图10所示的插入停止点评价处理不限于按该顺序进行,也可以按相反顺序进行。
如以上所述,具有本实施方式的内窥镜插入形状分析系统的活体观 测系统1通过进行图6和图10所示的各处理,可检测发生大肠伸展的位置并呈现给用户,其结果,与以往相比,可顺利地进行内窥镜6的插入部11的插入操作。
另外,所述的第1标志和第2标志不限于使用图形的标志,也可以是例如使用能向用户告知大肠伸展的文字串或图表等的标志。并且,所述的第1标志和第2标志可以构成为伴随大肠的伸展状态而使显示状态阶段性地变化。
并且,本实施方式的CPU 31不限于进行图7和图10所示的插入停止点评价处理中的仅任一方,为了实现大肠伸展检测精度的提高,也可以是例如通过并行处理同时进行双方的插入停止点评价处理,根据该并行处理的结果评价发生大肠伸展的位置。
(第3实施方式)
图11至图12涉及本发明的第3实施方式。图11是示出由图1的图像处理装置实现的功能块的结构等的图。图12是示出在本发明的第3实施方式中,由具有图11所示的结构的各块进行的处理流程的说明图。
另外,第3实施方式的活体观测系统具有与在第1实施方式和第2实施方式中所说明的活体观测系统1大致相同的结构。因此,在本实施方式中,省略关于具有与第1实施方式和第2实施方式的活体观测系统1相同的结构或作用的部分的说明,并主要进行关于具有与第1实施方式和第2实施方式的活体观测系统1不同的结构或作用的部分的说明。并且,本实施方式和后述的第4实施方式中的插入状态取得部构成为具有感应线圈单元19和形状处理装置21。
在本实施方式和后述的第4实施方式中,图像处理装置4的CPU 31伴随使用内窥镜装置2的观察,进行基于存储在处理程序存储部32内的处理程序的处理。
如图11所示,由CPU 31执行的所述处理程序构成为具有:帧数据取得块41,其取得帧数据并存储在存储器33内;分析处理块42,其对存储在作为存储部的存储器33内的帧数据进行分析处理,将分析数据33b存储在存储器33内;以及分析结果显示控制块43,其进行分析结果的显 示,并控制与由多个分析数据33b构成的插入形状分析信息33c对应的插入辅助信息的显示(或显示特性)。
并且,如图11所示,帧数据取得块41和分析处理块42呈环状重复进行处理。
如图11所示,帧数据取得块41将从内窥镜插入形状检测装置3发送的帧数据存储在存储器33内,并且还存储在(图1所示)的HDD 34内。
作为分析处理部的分析处理块42使用存储器33的帧数据33a来计算在各源线圈位置插入部11所朝的方向、以及前一帧的源线圈的移动量等用于调查插入部11的(对插入操作的)响应动作状态的数据。然后,该分析处理块42将计算出的数据作为分析数据33b依次存储在存储器33内。
另一方面,分析结果显示控制块43是独立于所述的帧数据取得块41和分析处理块42的环处理的、按照一定期间重复执行的处理块。
作为显示控制部的分析结果显示控制块43取得存储在存储器33内的分析数据33b作为插入形状分析信息33c,并根据该插入形状分析信息33c计算配置在内窥镜6的插入部11的最前端侧的源线圈C0的移动速度和配置在内窥镜6的插入部11的最基端侧的源线圈CM-1的移动速度的速度比等。然后,分析结果显示控制块43根据所述计算结果,控制显示器28中的插入辅助信息的显示状态。
下面,对本实施方式中的活体观测系统1的作用进行说明。
当内窥镜6的插入部11由用户从被检体的肛门侧插入到体腔内时,由设在插入部11的前端部14上的摄像元件16拍摄存在于该体腔内的被摄体。由摄像元件16所拍摄的被摄体的像作为摄像信号被输出,由视频处理器8实施信号处理而转换成影像信号,之后被输出到监视器9中。由此,在监视器9上显示由摄像元件16所拍摄的被摄体的像作为内窥镜观察图像。
内窥镜插入形状检测装置3在感应线圈单元19中检测从源线圈C0~CM-1各方所产生的磁场,并且在形状处理装置21中基于根据该磁场而输 出的检测信号来估计插入部11的插入形状。由此,在显示器22上显示在形状处理装置21中估计出的插入部11的插入形状。
并且,内窥镜插入形状检测装置3的形状处理装置21将包含各源线圈的位置信息的帧数据经由通信端口21a依次输出到图像处理装置4的PC 25。
如图11所示,PC 25的CPU 31在处理程序的帧数据取得块41中,取得从内窥镜插入形状检测装置3所输出的帧数据,并将所取得的该帧数据存储在存储器33内。
并且,如图12所示,CPU 31通过在处理程序的分析处理块42中,对存储在存储器33内的帧数据33a实施分析处理,由此生成具有配置在插入部11的最前端侧的源线圈C0的移动速度和配置在插入部11的最基端侧的源线圈CM-1的移动速度的分析数据33b,并将所生成的该分析数据33b依次存储在存储器33内。另外,在本实施方式中,源线圈的移动速度是例如根据该源线圈的每一帧的移动量来计算的。并且,在本实施方式中,源线圈的移动速度在插入部11的插入方向取正值,在插入部11的拔出方向取负值。
分析结果显示控制块43按照规定期间取得存储在存储器33内的分析数据33b中的最新的分析数据和该最新的分析数据的前一个分析数据作为插入形状分析信息33c(图12的步骤S201)。然后,分析结果显示控制块43在所取得的插入形状分析信息33c中,根据最新的分析数据33b具有的、配置在插入部11的最基端侧的源线圈CM-1的移动速度的数据来设定校正比率g(图12的步骤S202)。
具体地说,分析结果显示控制块43根据插入形状分析信息33c具有的最新的分析数据,在配置于插入部11的最基端侧的源线圈CM-1的移动速度是20mm/sec以上的情况下,将校正比率g设定为0.75。并且,分析结果显示控制块43根据插入形状分析信息33c具有的最新的分析数据,在配置于插入部11的最基端侧的源线圈CM-1的移动速度是0mm/sec以上且不足20mm/sec的情况下,将校正比率g设定为0.5。而且,分析结果显示控制块43根据插入形状分析信息33c具有的最新的分析数据,在 配置于插入部11的最基端侧的源线圈CM-1的移动速度不足0mm/sec的情况下,将校正比率g设定为0.25。
另外,在本实施方式中,分析结果显示控制块43构成为,取得存储在存储器33内的各分析数据中的最新的分析数据和该最新的分析数据的前一个分析数据作为插入形状分析信息来设定校正比率g,然而不限于此,例如可以构成为,取得最新的分析数据和针对该最新的分析数据在时间上连续的P个过去的分析数据作为插入形状分析信息来设定校正比率g。
并且,在本实施方式中,分析结果显示控制块43可以取得例如插入部11的弯曲角度信息、插入部11的插入形状的形状图形信息、或者插入部11的插入量信息中的任一方作为插入形状分析信息33c来设定校正比率g(以及后述的显示期间控制值Rc)。
具体地说,分析结果显示控制块43可以根据插入部11的弯曲角度的增减来增减校正比率g(例如根据弯曲角度的减少来减少校正比率g)。并且,分析结果显示控制块43可以根据插入部11的插入形状的形状图形变化来增减校正比率g(例如根据从环形状向大致直线形状的转移来减少校正比率g)。而且,分析结果显示控制块43可以根据插入部11的插入量的增减来增减校正比率g(例如根据插入量的减少来减少校正比率g)。
之后,分析结果显示控制块43根据插入形状分析信息33c,计算最新的分析数据中的源线圈C0和CM-1的移动速度比Rb、以及该最新的分析数据的前一个分析数据中的源线圈C0和CM-1的移动速度比Rp。然后,分析结果显示控制块43利用根据移动速度比Rb、移动速度比Rp、以及在图12的步骤S202的处理中所设定的校正比率g所决定的下述算式(4),计算用于控制插入辅助信息的显示期间的显示期间控制值Rc(图12的步骤S203)。
Rc=g×Rb+(1-g)×Rp…(4)
然后,分析结果显示控制块43对在图12的步骤S203中计算出的显示期间控制值Rc和与显示期间控制值Rc相关的阈值Rcth进行比较。然 后,分析结果显示控制块43在检测出显示期间控制值Rc大于阈值Rcth时(图12的步骤S204),判定为插入部11不会形成环形状等而进行插入或拔出操作,进行用于删除显示在显示器28上的插入辅助信息的处理(图12的步骤S205)。并且,分析结果显示控制块43在检测出显示期间控制值Rc是阈值Rcth以下时(图12的步骤S204),判定为由于插入部11形成环形状等而未适当地进行插入部11的插入,进行用于将插入辅助信息显示在显示器28上的处理(图12的步骤S206)。
另外,在本实施方式中,显示在显示器28上的插入辅助信息是能支持由用户进行的插入部11的插入操作的例如表示大肠伸展的信息、或者插入部11的环形状的解除方法相关的信息等。
然后,分析结果显示控制块43按照一定期间重复进行图12的步骤S201到步骤S206的处理,由此在显示期间控制值Rc是阈值Rcth以下的期间中,继续显示插入辅助信息,并在显示期间控制值Rc不大于阈值Rcth的定时,删除插入辅助信息。
如以上所述,本实施方式的活体观测系统1具有能根据源线圈C0和CM-1的移动速度的变动适当变更用于支持用户进行的插入部11的插入操作的插入辅助信息的显示期间的结构。其结果,本实施方式的活体观测系统1根据对内窥镜6的插入部11的操作适当进行插入辅助信息的提供,由此,与以往相比,可减轻用户的不协调感。
并且,本实施方式的活体观测系统1由于具有所述的结构,因而即使在有可能误显示插入辅助信息这样的例如进行了由用户进行的插入部11的瞬间操作的情况下、以及在对源线圈C0和CM-1施加了噪声的情况等下,也不会无用地显示插入辅助信息。
(第4实施方式)
图13涉及本发明的第4实施方式。图13是示出在本发明的第4实施方式中,由分析结果显示控制块进行的处理流程的说明图。
另外,第4实施方式的活体观测系统具有与在第1实施方式至第3实施方式中所说明的活体观测系统1大致相同的结构。因此,在本实施方式中,省略关于具有与第1实施方式至第3实施方式的活体观测系统1 相同的结构或作用的部分的说明,并主要进行关于具有与第1实施方式至第3实施方式的活体观测系统1不同的结构或作用的部分的说明。
本实施方式的(活体观测系统1具有的)CPU 31在处理程序的分析结果显示控制块43A中,进行与第3实施方式的分析结果显示控制块43进行的处理不同的处理,即以下所述的一系列处理。
分析结果显示控制块43A按照规定期间取得将存储在存储器33内的分析数据中的最新的分析数据和针对该最新的分析数据在时间上连续的一个或多个过去的分析数据合并后的E个(例如5个)分析数据作为插入形状分析信息33c(图13的步骤S211)。
之后,分析结果显示控制块43A在所取得的E个分析数据各方中,计算源线圈C0和CM-1的移动速度比,并检测E个分析数据中所计算出的移动速度比取规定阈值(例如0.1)以下的值的J个分析数据(图13的步骤S212)。分析结果显示控制块43A将本实施方式中的作为显示期间控制值的J/E值与阈值TH(例如0.6)进行比较。分析结果显示控制块43A在检测出J/E值小于阈值TH时(图13的步骤S213),判定为插入部11不会形成环形状等而进行插入或拔出操作,进行用于删除显示在显示器28上的插入辅助信息的处理(图13的步骤S214)。并且,分析结果显示控制块43A在检测出J/E值是阈值TH以下时(图13的步骤S213),判定为由于插入部11形成环形状等而未适当地进行插入操作,进行用于将插入辅助信息显示在显示器28上的处理(图13的步骤S215)。
然后,分析结果显示控制块43A按照一定期间重复进行图13的步骤S211到步骤S215的处理,在J/E值是阈值TH以下的期间中,继续显示插入辅助信息,并在J/E值大于阈值TH的定时,删除插入辅助信息。
如以上所述,本实施方式的活体观测系统1具有能根据源线圈C0和CM-1的移动速度的变动来适当变更用于支持用户进行的插入部11的插入操作的插入辅助信息的显示期间的结构。其结果,本实施方式的活体观测系统1根据对内窥镜6的插入部11的操作适当进行插入辅助信息的提供,由此,与以往相比可减轻用户的不协调感。
并且,本实施方式的活体观测系统1由于具有所述的结构,因而即 使在有可能误显示插入辅助信息这样的例如进行了由用户进行的插入部11的瞬间操作的情况下、以及在对源线圈C0和CM-1施加了噪声的情况等下,也不会无用地显示插入辅助信息。
另外,本发明不限于上述的各实施方式,当然可在不背离发明主旨的范围内进行各种变更和应用。
本申请是以2006年11月13日在日本申请的日本特願2006-306974号、2006年11月13日在日本申请的日本特願2006-306975号、以及2006年11月30日在日本申请的日本特願2006-324901号作为优先权主张的基础来进行申请的,上述公开内容被引用在本申请说明书、权利要求书和附图中。
Claims (3)
1.一种内窥镜插入形状分析系统,其特征在于,该内窥镜插入形状分析系统具有:
插入状态取得部,其取得插入到被检体内的内窥镜的插入部中的多个部位的坐标值;
插入形状检测部,其根据所述多个部位的坐标值,检测插入到所述被检体内的所述插入部中的至少一部分的插入形状;
坐标平面设定部,其根据规定的所述多个部位的坐标值和所述插入形状设定多个坐标平面;
插入形状投影部,其将所述插入形状投影到所述多个坐标平面各方上;以及
插入形状判定部,其判定投影到所述多个坐标平面各方上的所述插入形状内是否存在规定形状。
2.根据权利要求1所述的内窥镜插入形状分析系统,其特征在于,所述坐标平面设定部根据规定的所述多个部位的坐标值和所述插入形状,至少设定存在所述插入形状的一个坐标平面和基于该一个坐标平面的法线矢量的另一坐标平面。
3.根据权利要求1所述的内窥镜插入形状分析系统,其特征在于,所述规定形状是环形状。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP306975/2006 | 2006-11-13 | ||
JP2006306974A JP4855901B2 (ja) | 2006-11-13 | 2006-11-13 | 内視鏡挿入形状解析システム |
JP306974/2006 | 2006-11-13 | ||
JP2006306975A JP4855902B2 (ja) | 2006-11-13 | 2006-11-13 | 生体観測システム |
JP324901/2006 | 2006-11-30 | ||
JP2006324901A JP4855912B2 (ja) | 2006-11-30 | 2006-11-30 | 内視鏡挿入形状解析システム |
PCT/JP2007/063882 WO2008059636A1 (fr) | 2006-11-13 | 2007-07-12 | Système d'analyse de forme lors de l'insertion d'un endoscope et système d'observation d'un corps vivant |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010605413.4A Division CN102078194B (zh) | 2006-11-13 | 2007-07-12 | 内窥镜插入形状分析系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101534699A CN101534699A (zh) | 2009-09-16 |
CN101534699B true CN101534699B (zh) | 2011-02-16 |
Family
ID=39504660
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2007800415775A Active CN101534699B (zh) | 2006-11-13 | 2007-07-12 | 内窥镜插入形状分析系统 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4855901B2 (zh) |
CN (1) | CN101534699B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102958416B (zh) * | 2010-07-01 | 2015-08-26 | 奥林巴斯医疗株式会社 | 探针形状检测装置 |
WO2016098254A1 (ja) * | 2014-12-19 | 2016-06-23 | オリンパス株式会社 | 挿抜支援装置及び挿抜支援方法 |
WO2016098251A1 (ja) * | 2014-12-19 | 2016-06-23 | オリンパス株式会社 | 挿抜支援装置及び挿抜支援方法 |
WO2016098255A1 (ja) * | 2014-12-19 | 2016-06-23 | オリンパス株式会社 | 挿抜支援装置及び挿抜支援方法 |
CN107105969B (zh) * | 2014-12-19 | 2019-10-22 | 奥林巴斯株式会社 | 插拔辅助装置及插拔辅助方法 |
WO2018069992A1 (ja) | 2016-10-12 | 2018-04-19 | オリンパス株式会社 | 挿入システム |
CN109579689B (zh) * | 2017-09-29 | 2020-12-08 | 西门子公司 | 曲率测量装置 |
JP6968289B2 (ja) | 2018-08-24 | 2021-11-17 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP6632020B1 (ja) * | 2019-09-20 | 2020-01-15 | 株式会社Micotoテクノロジー | 内視鏡画像処理システム |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1694643A (zh) * | 2002-10-29 | 2005-11-09 | 奥林巴斯株式会社 | 内窥镜信息的处理装置及处理方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4274854B2 (ja) * | 2003-06-06 | 2009-06-10 | オリンパス株式会社 | 内視鏡挿入形状解析装置 |
JP4656988B2 (ja) * | 2005-04-11 | 2011-03-23 | オリンパスメディカルシステムズ株式会社 | 内視鏡挿入形状解析装置および、内視鏡挿入形状解析方法 |
-
2006
- 2006-11-13 JP JP2006306974A patent/JP4855901B2/ja active Active
-
2007
- 2007-07-12 CN CN2007800415775A patent/CN101534699B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1694643A (zh) * | 2002-10-29 | 2005-11-09 | 奥林巴斯株式会社 | 内窥镜信息的处理装置及处理方法 |
Non-Patent Citations (2)
Title |
---|
JP特开2004-358095A 2004.12.24 |
JP特开2006-288752A 2006.10.26 |
Also Published As
Publication number | Publication date |
---|---|
JP2008119259A (ja) | 2008-05-29 |
CN101534699A (zh) | 2009-09-16 |
JP4855901B2 (ja) | 2012-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102078194B (zh) | 内窥镜插入形状分析系统 | |
CN101534699B (zh) | 内窥镜插入形状分析系统 | |
CN101065052B (zh) | 医疗图像处理装置和医疗图像处理方法 | |
EP2301411B1 (en) | Endoscope system | |
US7319781B2 (en) | Method and system for multiple passes diagnostic alignment for in vivo images | |
EP2447909B1 (en) | Medical image processing apparatus and medical image processing method | |
JP7096445B2 (ja) | 内視鏡用プロセッサ、プログラム、情報処理方法及び情報処理装置 | |
JP4789545B2 (ja) | 内視鏡挿入形状解析装置 | |
EP3028624A1 (en) | Image processing device, image processing method, and program | |
EP2783622A1 (en) | Image processing device, image processing method, and image processing program | |
CN102378594A (zh) | 将传感器位置与图像位置相关联 | |
US20220409030A1 (en) | Processing device, endoscope system, and method for processing captured image | |
US7559888B2 (en) | Endoscope insertion direction detecting system | |
US20220000338A1 (en) | Location estimation apparatus, location estimation method, and computer readable recording medium | |
JP4855912B2 (ja) | 内視鏡挿入形状解析システム | |
JPWO2021171464A5 (zh) | ||
EP1571999B1 (en) | Method of tomographic imaging | |
Figueiredo et al. | Dissimilarity measure of consecutive frames in wireless capsule endoscopy videos: a way of searching for abnormalities | |
Figueiredo et al. | An elastic image registration approach for wireless capsule endoscope localization | |
Deguchi et al. | New image similarity measure for bronchoscope tracking based on image registration | |
EP4191527A1 (en) | An endoscope image processing device | |
WO2023181175A1 (ja) | 内視鏡検査支援システム、内視鏡検査支援方法および記憶媒体 | |
JPH04117945A (ja) | 平面断層像補間表示装置 | |
CN115132355A (zh) | 一种炎症性肠病的智能数据辅助诊断系统 | |
JPH0654813A (ja) | 複数箇所の体表面から採取した脈波を用いる診断方法並びに装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20151118 Address after: Tokyo, Japan, Japan Patentee after: Olympus Corporation Address before: Tokyo, Japan Patentee before: Olympus Medical Systems Corp. |