CN102123650A - 内窥镜系统 - Google Patents
内窥镜系统 Download PDFInfo
- Publication number
- CN102123650A CN102123650A CN2009801314395A CN200980131439A CN102123650A CN 102123650 A CN102123650 A CN 102123650A CN 2009801314395 A CN2009801314395 A CN 2009801314395A CN 200980131439 A CN200980131439 A CN 200980131439A CN 102123650 A CN102123650 A CN 102123650A
- Authority
- CN
- China
- Prior art keywords
- image
- target location
- information
- section
- endoscopic system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00039—Operational features of endoscopes provided with input arrangements for the user
- A61B1/00042—Operational features of endoscopes provided with input arrangements for the user for mechanical operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00147—Holding or positioning arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/0051—Flexible endoscopes with controlled bending of insertion part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/31—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the rectum, e.g. proctoscopes, sigmoidoscopes, colonoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
- A61B5/061—Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
- A61B5/062—Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body using magnetic field
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2476—Non-optical details, e.g. housings, mountings, supports
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Veterinary Medicine (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
本发明的内窥镜系统具有:内窥镜,其具有对体腔内的被摄体进行摄像的摄像部;位置设定部,其根据从被摄体的图像获得的一个信息,在图像内设定一个位置;以及位置修正部,其根据从图像获得的其它信息来修正在位置设定部中设定的一个位置,由此设定与一个位置不同的其它位置。
Description
技术领域
本发明涉及内窥镜系统,尤其涉及可支持内窥镜插入体腔等被检体内的内窥镜系统。
背景技术
在医疗领域以及工业领域等中,一直以来广泛应用内窥镜,例如在医疗领域中,当对体腔内的活体组织等进行观察以及各种处置时使用内窥镜。
另外,在日本特开平7-155289号公报中公开了如下的技术:其用于提取内窥镜所获得的观察图像内的暗部区域,并适当设定插入该内窥镜时的目标位置(行进方向以及移动量),使该暗部区域的中心位置成为观察图像的中心位置。
但是,日本特开平7-155289号公报所公开的技术只不过是在设定配置于体腔内的内窥镜的前端部的目标位置时,进行依赖于该内窥镜所获得的观察图像内的暗部区域的提取结果的运算。换言之,日本特开平7-155289号公报所公开的技术可以说是进行基本上忽略了观察图像内的暗部区域的提取结果以外的图像要素的运算。
结果,在日本特开平7-155289号公报所公开的技术中产生如下这样的问题:当根据目标位置的设定结果来插入内窥镜时,该内窥镜前端面的一部分与肠管褶壁等接触的可能性变高,因此不能顺畅地插入该内窥镜。
发明内容
本发明是鉴于前述情况而作出的,其目的是提供与以往相比能够顺畅地进行内窥镜插入的内窥镜系统。
本发明的内窥镜系统的特征是具有:内窥镜,其具有对体腔内的被摄体进行摄像的摄像部;位置设定部,其根据从所述被摄体的图像获得的一个信息,在所述图像内设定一个位置;以及位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个位置,由此设定与所述一个位置不同的其它位置。
本发明的内窥镜系统的特征是具有:内窥镜,其具有对体腔内的被摄体进行摄像的摄像部;位置设定部,其根据从所述被摄体的图像获得的一个信息,在所述图像内设定一个位置;位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个位置,由此设定与所述一个位置不同的其它位置;以及摄像状态调整部,其根据在所述位置修正部中设定的所述其它位置的信息,调整所述摄像部的摄像状态。
本发明的内窥镜系统的特征是具有:内窥镜,其具有插入体腔内的插入部、设置在该插入部的前端部的摄像部和使该插入部弯曲的弯曲部;位置设定部,其根据从所述摄像部所拍摄的被摄体的图像获得的一个信息,在所述图像内设定使所述前端部通过的一个目标位置;位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个目标位置,由此在所述图像内设定与所述一个目标位置不同的其它目标位置;以及弯曲控制部,其根据在所述位置修正部中设定的所述其它目标位置的信息,进行使所述弯曲部弯曲的控制。
本发明的内窥镜系统的特征是具有:内窥镜,其具有插入体腔内的插入部、设置在该插入部的前端部的摄像部和使该插入部弯曲的弯曲部;位置设定部,其在所述摄像部所拍摄的被摄体的图像内设定使所述前端部通过的一个目标位置;位置修正部,其根据所述图像的亮部区域的信息来修正在所述位置设定部中设定的所述一个目标位置,由此在所述图像内设定与所述一个目标位置不同的其它目标位置;以及弯曲控制部,其根据在所述位置修正部中设定的所述其它目标位置的信息,进行使所述弯曲部弯曲的控制。
附图说明
图1是示出本发明实施方式的内窥镜系统的要部结构的一例的图。
图2是示出设定弯曲目标位置时进行的处理的一例的图。
图3是示出原图像内的弯曲目标位置的一例的图。
图4是示出在原图像内设定模拟内窥镜前端部的前端面的圆时的一例的图。
图5是示出弯曲目标位置的修正用矢量的一例的图。
图6是示出将图3的弯曲目标位置修正为新的弯曲目标位置时的一例的图。
图7是示出在设定弯曲目标位置时进行的处理的第1变形例的图。
图8是示出设定弯曲目标位置时进行的处理的第2变形例的图。
图9是示出设定弯曲目标位置时进行的处理的第3变形例的图。
图10是示出在原图像内设定模拟内窥镜前端部的前端面的圆、并将包含该圆的内部以及边界的部分分割为多个小区域时的一例的图。
图11是示出沿从亮部向暗部的梯度方向依次搜索时取得的路径的一例的图。
具体实施方式
以下参照附图来说明本发明的实施方式。
图1~图11涉及本发明的实施方式。图1是示出本发明实施方式的内窥镜系统的要部结构的一例的图。图2是示出设定弯曲目标位置时进行的处理的一例的图。图3是示出原图像内的弯曲目标位置的一例的图。图4是示出在原图像内设定模拟内窥镜前端部的前端面的圆时的一例的图。图5是示出在图2的处理中获得的弯曲目标位置的修正用矢量的图。图6是示出将图3的弯曲目标位置修正为新的弯曲目标位置时的一例的图。图7是示出设定弯曲目标位置时进行的处理的第1变形例的图。图8是示出在设定弯曲目标位置时进行的处理的第2变形例的图。图9是示出设定弯曲目标位置时进行的处理的第3变形例的图。图10是示出在原图像内设定模拟内窥镜前端部的前端面的圆、并将包含该圆的内部以及边界的部分分割为多个小区域时的一例的图。图11是示出沿从亮部向暗部的梯度方向依次搜索时取得的路径的一例的图。
内窥镜系统1如图1所示具有:插入作为被检体的患者的体腔内、并且对该体腔内的被摄体像进行摄像的内窥镜2;可相对于内窥镜2上设置的连接器14进行拆装的处理器6;配置在该患者所躺卧的床的周边部的感应线圈单元7;内窥镜插入形状检测装置8;终端装置9;和监视器10a以及10b。
另外,处理器6具有:光源部3,其将用于对作为摄像对象的被摄体进行照明的照明光提供给内窥镜2;信号处理部4,其通过对从内窥镜2输出的摄像信号进行信号处理来生成视频信号并输出;弯曲控制部5,其进行内窥镜2的弯曲控制;以及源线圈驱动部43。
内窥镜2具有:插入被检体体腔内的细长的插入部11;设置在插入部11后端的操作部12;以及从操作部12延伸出的通用缆线13。并且,在该通用缆线13的后端设置有可相对于处理器6拆装的连接器14。
插入部11具有:设置在前端侧的硬质的前端部15;与前端部15的后端连接的弯曲部16;以及设置在弯曲部16的后端与操作部12的前端之间的具有可挠性的可挠管部17。另外,在插入部11的内部近似等间隔地设置了n个源线圈C1、C2、…Cn,这n个源线圈C1、C2、…Cn产生与源线圈驱动部43所施加的源线圈驱动信号对应的磁场。
前端部15具有圆形形状的前端面而构成。另外,在前端部15上设置有摄像部15a,该摄像部15a具有:使被摄体像成像的物镜光学系统和将经过该物镜光学系统成像的该被摄体像作为摄像信号输出的摄像元件等。
在操作部12中设置有:镜体开关18,其指示冻结图像(静态图像)取得等;弯曲模式切换开关19,其进行用于将弯曲部16的弯曲模式切换为手动模式或自动模式的某一个的指示;以及弯曲用操作杆20,其在选择了该手动模式时进行弯曲部16的弯曲方向以及弯曲角度的指示。另外,在可挠管部17的后端侧、处于操作部12前端附近的部分设置有通向可贯插处置器具等的未图示的处置器具用通道的处置器具插入口39。
在内窥镜2的插入部11等的内部中贯插了将从光源部3供给的照明光向前端部15传送的光导21。
光导21的一个端面(入射端面)被配置为从连接器14突出的状态。另外,光导21的另一端面(出射端面)被配置在前端部15所设置的未图示的照明光学系统的附近。通过这样的结构,从光源部3供给的照明光在连接器14与处理器6连接的状态下经过光导21以及未图示的照明光学系统之后,对作为摄像部15a的摄像对象的被摄体进行照明。
具有作为光源装置的功能的光源部3具有:灯22,其发出例如作为白色光的照明光;灯驱动部23,其提供驱动灯22时所需的电源;光圈24;光圈控制部25,其根据从信号处理部4输出的视频信号使光圈24的光圈量(开口量)增减;以及会聚光学系统26,其会聚通过光圈24后的照明光并且提供到光导21的入射端面。
光圈控制部25例如根据所输入的视频信号的亮度分量来计算平均明度,然后根据从该平均明度减去与适当明度相当的基准值而得出的值即差分值来增减光圈24的光圈量(开口量),由此使通过光圈24的照明光的光量适当变化。
信号处理部4具有:摄像元件驱动部36,其输出用于驱动设置在摄像部15a内的摄像元件的摄像元件驱动信号;以及视频处理部37,其通过对从摄像部15a输出的摄像信号进行信号处理,来生成视频信号并输出。由此,在监视器10a上显示与所述视频信号相应的内窥镜图像Ia。
在根据弯曲模式切换开关19中进行的指示把弯曲部16的弯曲模式切换为手动模式的情况下,弯曲控制部5进行根据弯曲用操作杆20的倾斜方向以及倾斜量来变更弯曲部16的弯曲方向以及弯曲角度的控制。另外,在根据弯曲模式切换开关19中进行的指示把弯曲部16的弯曲模式切换为自动模式的情况下,弯曲控制部5进行根据终端装置9的运算结果来变更弯曲部16的弯曲方向以及弯曲角度的控制。
源线圈驱动部43与设置在插入部11内部的n个源线圈C1、C2、…Cn连接,对各个该源线圈依次施加交流的源线圈驱动信号。由此,在设置于插入部11内部的各个源线圈的周围产生交变磁场。
在感应线圈单元7中设置有感应线圈组44,其分别检测从设置于插入部11内部的n个源线圈C1、C2、…Cn发出的磁场,并作为磁场检测信号输出。
内窥镜插入形状检测装置8具有:放大器45,其放大从感应线圈单元7输出的磁场检测信号;源线圈位置/方向检测部46,其根据从放大器45输出的磁场检测信号来检测n个源线圈C1、C2、…Cn的3维坐标位置以及方向,并作为插入形状信息输出;以及插入形状估计部47,其根据从源线圈位置/方向检测部46输出的插入形状信息来估计插入部11的插入形状,并作为插入形状图像信号输出。由此,在监视器10b上显示与所述插入形状图像信号相应的插入部11的插入形状图像Ib。
终端装置9具有运算处理部91,该运算处理部91根据从视频处理部37输出的视频信号和从源线圈位置/方向检测部46输出的插入形状信息,进行与弯曲部16的弯曲模式是自动模式时进行的弯曲控制相关的运算,并将运算结果向弯曲控制部5输出。此外,在运算处理部91中进行的所述运算的具体内容在后面进行叙述。
另外,在终端装置9中设置有可暂时存储运算处理部91的运算结果等的未图示的存储器。
接着,对内窥镜系统1的作用进行说明。另外,以下省略了对于弯曲模式切换开关19切换为手动弯曲模式时的控制的说明,并且主要对弯曲模式切换开关19切换为自动弯曲模式时的控制进行说明。
首先,手术者在连接并启动内窥镜系统1的各部之后,将内窥镜2的插入部11插入患者体腔内,并且将弯曲模式切换开关19切换为自动弯曲模式。与此相应,开始内窥镜2的摄像部15a中的被摄体摄像,并且在设置于插入部11内的各源线圈中开始产生磁场。
伴随着被摄体的摄像而从摄像部15a输出的摄像信号经由通用缆线13以及连接器14向处理器6输出,在视频处理部37中变换为视频信号,然后输入到终端装置9的运算处理部91。另外,伴随着设置在插入部11内的各源线圈中的磁场产生而从感应线圈单元7输出的磁场检测信号被放大器45放大,通过源线圈位置/方向检测部46变换为该各源线圈的3维坐标信息,通过插入形状估计部47估计插入形状,然后作为插入形状图像信号输入至终端装置9的运算处理部91。
终端装置9的运算处理部91进行基于所输入的视频信号以及插入形状图像信号等的处理,由此设定作为前端部15的通过目标的弯曲目标位置(通过目标位置),并将所设定的该弯曲目标位置的信息向弯曲控制部5输出。
这里,叙述在设定所述弯曲目标位置时运算处理部91进行的处理。
首先,运算处理部91取得与所输入的视频信号对应的原图像(图2的步骤S1)。
接着,具有作为位置设定部的功能的运算处理部91提取出在图2的步骤S1中取得的原图像内的暗部区域之后,通过采用公知的处理,将该暗部区域的中心设定为弯曲部16的弯曲目标位置(前端部15的通过目标位置)(图2的步骤S2)。通过这样的处理,将原图像内的例如图3所示的像素位置设定为弯曲目标位置。
另外,运算处理部91将模拟前端部15的前端面的圆设定在所取得的原图像的中心(图2的步骤S3),然后提取该原图像中的最亮部区域以及该最亮部区域的边界线(图2的步骤S4)。此外,模拟前端部15的前端面的圆例如图4所示。
这里,叙述在提取最亮部区域时进行的处理的具体例。
首先,运算处理部91将原图像分割为多个等间隔的矩形区域,并确定与像素值的平均值最高的矩形区域的重心相当的一个像素,然后对与所述一个像素邻接的附近4个像素的像素值与规定阈值进行比较。
接着,运算处理部91将具有所述规定阈值以上的像素值的像素视为属于最亮部区域的像素,并且对新的属于最亮部区域的各像素附近的4个像素的像素值与规定阈值进行比较。
并且,反复进行上述的比较处理,直至没有被视为属于最亮部区域的像素,由此能够获得最亮部区域以及该最亮部区域的边界线的提取结果。
另一方面,运算处理部91计算图2的步骤S4中提取出的最亮部区域中属于图2的步骤S3中设定的圆内部的部分的面积(图2的步骤S5)。
然后,运算处理部91判定图2的步骤S3中设定的圆内部的最亮部区域的面积与整个圆的面积之间的面积比是否在0.2以上(图2的步骤S6)。并且,运算处理部91在检测出所述面积比小于0.2的情况下,视为不需要修正图2的步骤S2中计算的弯曲目标位置,并将该弯曲目标位置的计算结果向弯曲控制部5输出。另外,运算处理部91在检测出所述面积比是0.2以上的情况下,视为需要修正图2的步骤S2中计算出的弯曲目标位置,并继续进行图2的步骤S7以后的处理。
运算处理部91例如通过进行霍夫变换等处理,来使属于图2的步骤S3中设定的圆内部的最亮部区域的边界线直线化(图2的步骤S7)。
另外,运算处理部91计算相对于图2的步骤S7中直线化后的边界线的法线方向(图2的步骤S8)。具体地说,运算处理部91计算属于圆内部的最亮部区域的重心所在的方向的逆方向,作为相对于图2的步骤S7中直线化后的边界线的法线方向。
接着,运算处理部91如图5所示的那样,计算以图2的步骤S3中设定的圆的中心D1为起点、具有与该圆的半径R1相同的大小、且朝着与图2的步骤S8中计算出的法线方向相同方向的弯曲目标位置修正用矢量Va(图2的步骤S9)。另外,运算处理部91在图2的步骤S9的处理前后,进行计算以图2的步骤S3中设定的圆的中心D1为起点、以图2的步骤S2中计算出的弯曲目标位置为终点的矢量Vb的处理。
具有作为位置修正部的功能的运算处理部91在生成了所述矢量Va以及Vb按第1比例相加而成的合成矢量之后,将位于该合成矢量的终点处的像素位置设定为修正后的弯曲目标位置(图2的步骤S10)。通过这样的处理,图2的步骤S2中计算出的弯曲目标位置修正为例如图6所示的新弯曲目标位置。
然后,运算处理部91将图2的步骤S10中获得的修正后的弯曲目标位置的计算结果输出至弯曲控制部5。
并且,弯曲控制部5可通过进行基于图2所示的一连串处理的处理结果的控制,来使弯曲部16弯曲,以尽量避免前端部15的前端面与存在于体腔内的褶壁或体壁接触。
此外,根据本实施方式,例如作为以后的各变形例所示的那样,可采用原图像中的暗部区域的提取结果和该原图像中的最亮部区域的提取结果以外的要素来修正弯曲目标位置。
这里,参照图7,说明作为本实施方式的第1变形例的、采用原图像中的暗部区域的提取结果和该原图像中的边缘提取结果来修正弯曲目标位置时进行的一连串处理。
首先,运算处理部91取得与所输入的视频信号相应的原图像(图7的步骤S21)。
接着,运算处理部91在提取出图7的步骤S21中取得的原图像内的暗部区域之后,通过采用公知的处理,将该暗部区域的中心设定为弯曲部16的弯曲目标位置(前端部15的通过目标位置)(图7的步骤S22)。
另外,运算处理部91在将模拟前端部15的前端面的圆设定在所取得的原图像中心(图7的步骤S23)之后,提取该圆内部所包含的边缘(图7的步骤S24)。
然后,运算处理部91计算与图7的步骤S24中提取的边缘对应的法线方向(图7的步骤S25)。具体地说,运算处理部91计算与从边缘中心向着弯曲目标位置的矢量所构成的角度小于90°的方向,作为该边缘的法线方向。
接着,运算处理部91计算以图7的步骤S23中设定的圆的中心D2为起点、具有与该圆的半径R2相同大小且朝着与图7的步骤S25中计算的法线方向相同方向的弯曲目标位置修正用矢量Vc(图7的步骤S26)。另外,运算处理部91在图7的步骤S26的处理前后,进行计算以图7的步骤S23中设定的圆的中心D2为起点、以图7的步骤S22中计算的弯曲目标位置为终点的矢量Vd的处理。
运算处理部91在生成了所述矢量Vc以及Vd按第2比例相加而成的合成矢量之后,将位于该合成矢量的终点处的像素位置设定为修正后的弯曲目标位置(图7的步骤S27)。通过这样的处理,将图7的步骤S22中计算出的弯曲目标位置修正为新弯曲目标位置。
然后,运算处理部91将图7的步骤S27中获得的修正后的弯曲目标位置的计算结果输出至弯曲控制部5。
并且,弯曲控制部5可通过进行基于图7所示的一连串处理的处理结果的控制来使弯曲部16弯曲,以尽量避免前端部15的前端面与存在于体腔内的褶壁或体壁接触。
这里,参照图8说明作为本实施方式的第2变形例的、采用原图像中的暗部区域的提取结果与该原图像中的色调的提取结果来修正弯曲目标位置时进行的一连串处理。
首先,运算处理部91取得与所输入的视频信号相应的原图像(图8的步骤S41)。
接着,运算处理部91在提取出图8的步骤S41中取得的原图像内的暗部区域之后,通过采用公知的处理,将该暗部区域的中心设定为弯曲部16的弯曲目标位置(前端部15的通过目标位置)(图8的步骤S42)。
另外,运算处理部91在将模拟前端部15的前端面的圆设定在所取得的原图像的中心(图8的步骤S43)之后,在该原图像内连接色调相似的接近像素彼此间并进行填涂,由此将该原图像分割为多个小区域(图8的步骤S44)。此外,作为图8中的步骤S44的处理,运算处理部91进行采用分水岭算法或基于图像锥的分割算法等的处理。
运算处理部91检测图8的步骤S44中获得的多个小区域中具有与图8的步骤S43中设定的圆内部重复的部分的小区域的色调(图8的步骤S45)。
然后,运算处理部91根据在图8的步骤S45中检测到的小区域的色调,来判定该小区域是否是表示残渣的区域(图8的步骤S46)。
这里,叙述根据色调来判定是否是残渣时进行的处理的具体例。
首先,运算处理部91通过采用公知的处理,来将图8的步骤S45中检测到的小区域的RGB值向色度坐标(x、y)变换。
接着,运算处理部91判定所获得的色度坐标(x、y)在CIExy色度图上是否满足下式(1)的关系。
并且,运算处理部91在所获得的色度坐标(x、y)不满足上式(1)的关系时,判定为在图8的步骤S45中检测出的小区域表示残渣以外的其它要素(血液等),并且视为不需要修正图8的步骤S42中计算出的弯曲目标位置,将该弯曲目标位置的计算结果向弯曲控制部5输出。另外,运算处理部91在所获得的色度坐标(x、y)满足上式(1)的关系时,判定为图8的步骤S45中检测出的小区域表示残渣,并且视为需要修正图8的步骤S42中计算出的弯曲目标位置,继续进行图8的步骤S47以后的处理。
然后,运算处理部91利用椭圆来近似取得了表示残渣的判定结果的小区域(图8的步骤S47)。
运算处理部91根据在图8的步骤S47中获得的椭圆,计算以原图像中心为起点且以该椭圆中的切点为终点的2个切线矢量Ve1和Ve2。另外,运算处理部91计算以图8的步骤S43中设定的圆的中心D3为起点、以图8的步骤S42中计算出的弯曲目标位置为终点的矢量Vf。
并且,运算处理部91将2个切线矢量Ve1以及Ve2中的与矢量Vf所成角度相对小的一个切线矢量计算为弯曲目标位置修正用矢量(图8的步骤S48)。
运算处理部91在生成了所述一个切线矢量(Ve1或Ve2)及矢量Vf按第3比例相加而得的合成矢量之后,将位于该合成矢量的终点处的像素位置设定为修正后的弯曲目标位置(图8的步骤S49)。通过这样的处理,在图8的步骤S42中计算出的弯曲目标位置被修正为新弯曲目标位置。
然后,运算处理部91将图8的步骤S49中获得的修正后的弯曲目标位置的计算结果向弯曲控制部5输出。
并且,弯曲控制部5可通过进行基于图8所示的一连串处理的处理结果的控制,使弯曲部16弯曲,以尽量避免前端部15的前端面与存在于体腔内的残渣接触。
这里,参照图9等来说明作为本实施方式的第3变形例的、采用原图像中的暗部区域的提取结果与该原图像中的像素值梯度的提取结果来修正弯曲目标位置时进行的一连串处理。
首先,运算处理部91取得与所输入的视频信号相应的原图像(图9的步骤S61)。
接着,运算处理部91在提取出图9的步骤S61中取得的原图像内的暗部区域之后,通过采用公知的处理,将该暗部区域的中心设定为弯曲部16的弯曲目标位置(前端部15的通过目标位置)(图9的步骤S62)。
另外,运算处理部91在将模拟前端部15的前端面的圆设定在所取得的原图像的中心(图9的步骤S63)之后,将包含该圆的内部以及边界的部分分割为矩形形状的多个小区域(图9的步骤S64)。具体地说,在图9的步骤S63中设定的圆通过图9的步骤S64的处理被分割为例如图10所示的多个小区域。
接着,运算处理部91计算在图9的步骤S64中获得的各小区域内的像素值的平均值(图9的步骤S65)。
此外,运算处理部91采用图9的步骤S65的处理所计算出的各小区域内的像素值的平均值,针对该各个小区域来检测从亮部向着暗部的梯度方向(图9的步骤S66)。具体地说,运算处理部91分别对一个小区域中的像素值的平均值与该一个小区域附近的8个小区域中的像素值平均值进行比较,并将该附近8个小区域中像素值的平均值比该一个小区域低的小区域所在的方向检测为所述梯度方向(针对每个区域)。
另一方面,运算处理部91通过沿在图9的步骤S66中检测出的梯度方向依次搜索,来取得从包含图9的步骤S63中设定的圆的中心的小区域到该圆的边界附近的小区域的路径。所述路径可作为例如图11所示的路径来取得。
然后,运算处理部91计算以图9的步骤S63中设定的圆的中心D4为起点、具有与该圆的半径R4相同的大小且朝着与包含所述路径的起点的小区域中的梯度方向或包含所述路径的终点的小区域中的梯度方向相同方向的弯曲目标位置修正用矢量vg(图9的步骤S67)。另外,运算处理部91在图9的步骤S67的处理前后,进行计算以图9的步骤S63中设定的圆中心D4为起点、以图9的步骤S62中计算出的弯曲目标位置为终点的矢量Vh的处理。
运算处理部91在生成了所述矢量Vg以及Vh按第4比例相加而得的合成矢量之后,将位于该合成矢量的终点处的像素位置设定为修正后的弯曲目标位置(图9的步骤S68)。通过这样的处理,在图9的步骤S62中计算出的弯曲目标位置被修正为新弯曲目标位置。
然后,运算处理部91将在图9的步骤S68中获得的修正后的弯曲目标位置的计算结果向弯曲控制部5输出。
然后,弯曲控制部5可通过进行基于图9所示的一连串处理的处理结果的控制,来使弯曲部16弯曲,以尽量避免前端部15的前端面与存在于体腔内的褶壁或体壁接触。
如以上所述,根据本实施方式的内窥镜系统1,可通过进行采用原图像中的暗部区域的提取结果和该原图像中的暗部区域的提取结果以外的图像要素的运算,来设定使得前端部15的前端面不会与存在于内窥镜2的插入方向上的对象物接触的适当弯曲目标位置(通过目标位置)。因此,根据本实施方式的内窥镜系统1,与以往相比可顺畅地进行内窥镜的插入。
另一方面,根据本实施方式,除了修正预先设定的一个弯曲目标位置并根据修正后的其它弯曲目标位置使弯曲部弯曲以外,例如还可以考虑修正预先设定的一个摄像对象位置并根据修正后的其它摄像对象位置来调整摄像部的摄像状态这样的应用例。
具体地说,作为与上述应用例对应的结构,例如可举出摄像部15a的物镜光学系统具有变焦镜头且处理器6具有用于驱动该变焦镜头的镜头驱动控制部这样的结构。
另外,作为与上述结构对应的作用,运算处理部91进行如下处理:在根据从摄像部15a所拍摄的被摄体图像获得的一个信息(暗部区域的信息)设定一个摄像对象位置之后,根据从该图像获得的其它信息(亮部区域、边缘、色调或像素值梯度中的任意一个信息)来计算与该一个摄像对象位置不同的其它摄像对象位置。此外,在上述处理之后,所述镜头驱动控制部在所述其它摄像对象位置处于所述图像外部(摄像部15a的观察视野范围之外)时,进行将摄像部15a的变焦镜头驱动到广角侧的控制。
并且,在实施了具有以上所述的结构以及作用的应用例时,也能够获得与以往相比顺畅地进行内窥镜插入的效果。
此外,本发明不限于上述实施方式,显然在不脱离发明主旨的范围内可进行各种变更及应用。
本申请以2009年1月29日向日本国申请的日本特愿2009-18485号为优先权基础,上述公开内容已引入到本申请的说明书、权利要求书以及附图中。
Claims (10)
1.一种内窥镜系统,其特征在于,具有:
内窥镜,其具有对体腔内的被摄体进行摄像的摄像部;
位置设定部,其根据从所述被摄体的图像获得的一个信息,在所述图像内设定一个位置;以及
位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个位置,由此设定与所述一个位置不同的其它位置。
2.一种内窥镜系统,其特征在于,具有:
内窥镜,其具有对体腔内的被摄体进行摄像的摄像部;
位置设定部,其根据从所述被摄体的图像获得的一个信息,在所述图像内设定一个位置;
位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个位置,由此设定与所述一个位置不同的其它位置;以及
摄像状态调整部,其根据在所述位置修正部中设定的所述其它位置的信息,调整所述摄像部的摄像状态。
3.一种内窥镜系统,其特征在于,具有:
内窥镜,其具有插入体腔内的插入部、设置在该插入部的前端部的摄像部和使该插入部弯曲的弯曲部;
位置设定部,其根据从所述摄像部所拍摄的被摄体的图像获得的一个信息,在所述图像内设定使所述前端部通过的一个目标位置;
位置修正部,其根据从所述图像获得的其它信息来修正在所述位置设定部中设定的所述一个目标位置,由此在所述图像内设定与所述一个目标位置不同的其它目标位置;以及
弯曲控制部,其根据在所述位置修正部中设定的所述其它目标位置的信息,进行使所述弯曲部弯曲的控制。
4.根据权利要求1至3中任意一项所述的内窥镜系统,其特征在于,
所述一个信息是所述图像的暗部区域的信息。
5.根据权利要求1至3中任意一项所述的内窥镜系统,其特征在于,
所述其它信息是所述图像的亮部区域的信息。
6.根据权利要求1至3中任意一项所述的内窥镜系统,其特征在于,
所述其它信息是所述图像的边缘的信息。
7.根据权利要求1至3中任意一项所述的内窥镜系统,其特征在于,
所述其它信息是所述图像的色调的信息。
8.根据权利要求1至3中任意一项所述的内窥镜系统,其特征在于,
所述其它信息是所述图像的像素值梯度的信息。
9.根据权利要求4所述的内窥镜系统,其特征在于,
所述其它信息是所述图像的亮部区域的信息、所述图像的边缘的信息、所述图像的色调的信息或所述图像的像素值梯度的信息中的任意一个。
10.一种内窥镜系统,其特征在于,具有:
内窥镜,其具有插入体腔内的插入部、设置在该插入部的前端部的摄像部和使该插入部弯曲的弯曲部;
位置设定部,其在所述摄像部所拍摄的被摄体的图像内设定使所述前端部通过的一个目标位置;
位置修正部,其根据所述图像的亮部区域的信息来修正在所述位置设定部中设定的所述一个目标位置,由此在所述图像内设定与所述一个目标位置不同的其它目标位置;以及
弯曲控制部,其根据在所述位置修正部中设定的所述其它目标位置的信息,进行使所述弯曲部弯曲的控制。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009018485 | 2009-01-29 | ||
JP2009-018485 | 2009-01-29 | ||
PCT/JP2009/067554 WO2010087057A1 (ja) | 2009-01-29 | 2009-10-08 | 内視鏡システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102123650A true CN102123650A (zh) | 2011-07-13 |
CN102123650B CN102123650B (zh) | 2014-04-16 |
Family
ID=42395325
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200980131439.5A Active CN102123650B (zh) | 2009-01-29 | 2009-10-08 | 内窥镜系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8167792B2 (zh) |
EP (1) | EP2382909A4 (zh) |
JP (1) | JP4624486B2 (zh) |
CN (1) | CN102123650B (zh) |
WO (1) | WO2010087057A1 (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102631178A (zh) * | 2012-05-15 | 2012-08-15 | 重庆大学 | 微创伤超细内窥镜系统 |
CN103249349A (zh) * | 2010-12-02 | 2013-08-14 | 奥林巴斯株式会社 | 内窥镜图像处理装置以及程序 |
CN106371374A (zh) * | 2016-11-07 | 2017-02-01 | 福州幻科机电科技有限公司 | 一种微创内窥镜四自由度定位机的智能控制电路系统 |
CN110267577A (zh) * | 2017-02-22 | 2019-09-20 | 奥林巴斯株式会社 | 内窥镜操作部和具有它的内窥镜 |
CN115553689A (zh) * | 2022-10-25 | 2023-01-03 | 深圳市星辰海医疗科技有限公司 | 内窥镜手柄 |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011237525A (ja) * | 2010-05-07 | 2011-11-24 | Olympus Corp | 撮像モジュール |
CN104361608B (zh) * | 2014-10-27 | 2017-02-01 | 浙江大学宁波理工学院 | 一种工业用柔性导管内窥镜的定位跟踪方法 |
WO2021048925A1 (ja) * | 2019-09-10 | 2021-03-18 | オリンパス株式会社 | 内視鏡制御装置、内視鏡制御装置の作動方法及びプログラム |
US11445108B1 (en) * | 2021-03-05 | 2022-09-13 | International Business Machines Corporation | Turn direction guidance of an endoscopic device |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5018509A (en) * | 1989-02-21 | 1991-05-28 | Olympus Optical Co., Ltd. | Endoscope insertion controlling apparatus |
US5036464A (en) * | 1989-11-24 | 1991-07-30 | Olympus Optical Co., Ltd. | Methods of detecting endoscope insertion direction |
US5658238A (en) * | 1992-02-25 | 1997-08-19 | Olympus Optical Co., Ltd. | Endoscope apparatus capable of being switched to a mode in which a curvature operating lever is returned and to a mode in which the curvature operating lever is not returned |
CN1553782A (zh) * | 2002-06-21 | 2004-12-08 | ��ʿ�ٿ�ѧ����˾ | 具有无线接口的自动内诊镜 |
JP2007282857A (ja) * | 2006-04-17 | 2007-11-01 | Olympus Medical Systems Corp | 内視鏡挿入方向検出装置及び内視鏡挿入方向検出方法 |
WO2008155828A1 (ja) * | 2007-06-20 | 2008-12-24 | Olympus Medical Systems Corp. | 内視鏡システム、撮像システム及び画像処理装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2225188B (en) * | 1988-11-16 | 1993-05-12 | Olympus Optical Co | Methods of detecting endoscope insertion direction |
GB8830465D0 (en) * | 1988-12-31 | 1989-03-01 | Olympus Optical Co | Methods of detecting endoscope insertion direction |
US5347987A (en) * | 1991-04-08 | 1994-09-20 | Feldstein David A | Self-centering endoscope system |
US5469840A (en) * | 1991-12-10 | 1995-11-28 | Olympus Optical, Ltd. | Electromotive warping type endoscope with velocity control |
JP3179167B2 (ja) * | 1992-02-25 | 2001-06-25 | オリンパス光学工業株式会社 | 内視鏡装置 |
US5469254A (en) * | 1992-04-06 | 1995-11-21 | Olympus Optical Co., Ltd. | Method and apparatus for measuring three-dimensional position of a pipe from image of the pipe in an endoscopic observation system |
JP3523672B2 (ja) | 1993-12-02 | 2004-04-26 | オリンパス株式会社 | 内視鏡装置 |
JP4885388B2 (ja) * | 2001-09-25 | 2012-02-29 | オリンパス株式会社 | 内視鏡挿入方向検出方法 |
US6835173B2 (en) | 2001-10-05 | 2004-12-28 | Scimed Life Systems, Inc. | Robotic endoscope |
JP4077716B2 (ja) * | 2002-11-20 | 2008-04-23 | オリンパス株式会社 | 内視鏡挿入方向検出装置 |
JP4695420B2 (ja) * | 2004-09-27 | 2011-06-08 | オリンパス株式会社 | 湾曲制御装置 |
WO2006070669A1 (ja) * | 2004-12-27 | 2006-07-06 | Olympus Corporation | 医療画像処理装置及び医療画像処理方法 |
JP2009018485A (ja) | 2007-07-11 | 2009-01-29 | Niigata Machine Techno Co Ltd | 射出成形方法と射出成形装置 |
EP2215960B1 (en) * | 2007-11-29 | 2017-12-27 | Olympus Corporation | Endoscope curve control apparatus |
-
2009
- 2009-10-08 CN CN200980131439.5A patent/CN102123650B/zh active Active
- 2009-10-08 EP EP09839246A patent/EP2382909A4/en not_active Withdrawn
- 2009-10-08 JP JP2010518441A patent/JP4624486B2/ja active Active
- 2009-10-08 WO PCT/JP2009/067554 patent/WO2010087057A1/ja active Application Filing
-
2010
- 2010-05-19 US US12/783,040 patent/US8167792B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5018509A (en) * | 1989-02-21 | 1991-05-28 | Olympus Optical Co., Ltd. | Endoscope insertion controlling apparatus |
US5036464A (en) * | 1989-11-24 | 1991-07-30 | Olympus Optical Co., Ltd. | Methods of detecting endoscope insertion direction |
US5658238A (en) * | 1992-02-25 | 1997-08-19 | Olympus Optical Co., Ltd. | Endoscope apparatus capable of being switched to a mode in which a curvature operating lever is returned and to a mode in which the curvature operating lever is not returned |
CN1553782A (zh) * | 2002-06-21 | 2004-12-08 | ��ʿ�ٿ�ѧ����˾ | 具有无线接口的自动内诊镜 |
JP2007282857A (ja) * | 2006-04-17 | 2007-11-01 | Olympus Medical Systems Corp | 内視鏡挿入方向検出装置及び内視鏡挿入方向検出方法 |
WO2008155828A1 (ja) * | 2007-06-20 | 2008-12-24 | Olympus Medical Systems Corp. | 内視鏡システム、撮像システム及び画像処理装置 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103249349A (zh) * | 2010-12-02 | 2013-08-14 | 奥林巴斯株式会社 | 内窥镜图像处理装置以及程序 |
CN103249349B (zh) * | 2010-12-02 | 2015-12-16 | 奥林巴斯株式会社 | 内窥镜图像处理装置以及图像处理方法 |
CN102631178A (zh) * | 2012-05-15 | 2012-08-15 | 重庆大学 | 微创伤超细内窥镜系统 |
CN106371374A (zh) * | 2016-11-07 | 2017-02-01 | 福州幻科机电科技有限公司 | 一种微创内窥镜四自由度定位机的智能控制电路系统 |
CN110267577A (zh) * | 2017-02-22 | 2019-09-20 | 奥林巴斯株式会社 | 内窥镜操作部和具有它的内窥镜 |
CN110267577B (zh) * | 2017-02-22 | 2021-11-16 | 奥林巴斯株式会社 | 内窥镜操作部和具有它的内窥镜 |
CN115553689A (zh) * | 2022-10-25 | 2023-01-03 | 深圳市星辰海医疗科技有限公司 | 内窥镜手柄 |
CN115553689B (zh) * | 2022-10-25 | 2023-09-26 | 深圳市星辰海医疗科技有限公司 | 内窥镜手柄 |
Also Published As
Publication number | Publication date |
---|---|
JP4624486B2 (ja) | 2011-02-02 |
EP2382909A1 (en) | 2011-11-02 |
US8167792B2 (en) | 2012-05-01 |
JPWO2010087057A1 (ja) | 2012-07-26 |
EP2382909A4 (en) | 2012-11-28 |
CN102123650B (zh) | 2014-04-16 |
WO2010087057A1 (ja) | 2010-08-05 |
US20100283841A1 (en) | 2010-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102123650B (zh) | 内窥镜系统 | |
CN102123651B (zh) | 内窥镜系统 | |
CN102469914B (zh) | 内窥镜装置以及弯曲驱动控制方法 | |
EP2289390B1 (en) | Detection of endoscope inserting direction | |
EP2215960B1 (en) | Endoscope curve control apparatus | |
US8147402B2 (en) | Endoscope system | |
CN102238894B (zh) | 内窥镜装置 | |
US10413157B2 (en) | Endoscope system with image pasting on planar model | |
JP6072372B2 (ja) | 内視鏡システム | |
JP4745833B2 (ja) | 電子内視鏡システム | |
WO2012153568A1 (ja) | 医用画像処理装置及び医用画像処理方法 | |
EP2756790A1 (en) | Endoscopic system | |
JP5078486B2 (ja) | 医療用画像処理装置及び医療用画像処理装置の作動方法 | |
JP2006223850A (ja) | 電子内視鏡システム | |
JP2008093220A (ja) | プロセッサおよび電子内視鏡システム | |
CN106068644B (zh) | 传送系统和处理装置 | |
JP4217501B2 (ja) | 自動焦点調節装置 | |
CN102631178A (zh) | 微创伤超细内窥镜系统 | |
JPH02203831A (ja) | 内視鏡 | |
CN116649872A (zh) | 一种内窥镜系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20151119 Address after: Tokyo, Japan, Japan Patentee after: Olympus Corporation Address before: Tokyo, Japan, Japan Patentee before: Olympus Medical Systems Corp. |