CN102834043A - 内窥镜系统和视野不良判定方法 - Google Patents

内窥镜系统和视野不良判定方法 Download PDF

Info

Publication number
CN102834043A
CN102834043A CN2011800177805A CN201180017780A CN102834043A CN 102834043 A CN102834043 A CN 102834043A CN 2011800177805 A CN2011800177805 A CN 2011800177805A CN 201180017780 A CN201180017780 A CN 201180017780A CN 102834043 A CN102834043 A CN 102834043A
Authority
CN
China
Prior art keywords
treatment instrument
visual field
barrier
situation
bad
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800177805A
Other languages
English (en)
Other versions
CN102834043B (zh
Inventor
森山宏树
梅本义孝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Publication of CN102834043A publication Critical patent/CN102834043A/zh
Application granted granted Critical
Publication of CN102834043B publication Critical patent/CN102834043B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion

Landscapes

  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Signal Processing (AREA)
  • Endoscopes (AREA)

Abstract

内窥镜系统具有:摄像部,其设置在内窥镜中并进行摄像;判定部,其判定在摄像部的摄像区域内是否存在特定观察对象物;识别部,其判定是否处于能够从摄像部拍摄的所述摄像区域内的摄像图像中作为图像识别出特定观察对象物的状态;以及视野不良判定输出部,其在判定部判定为特定观察对象物存在于所述摄像区域内、且所述识别部无法作为图像识别出特定观察对象物的情况下,判定为摄像部视野不良,输出视野不良的判定结果。

Description

内窥镜系统和视野不良判定方法
技术领域
本发明涉及通过内窥镜的摄像单元进行摄像并判定视野不良的内窥镜系统和视野不良判定方法。
背景技术
近年来,在患部组织的观察、诊断等中广泛采用具有摄像单元的内窥镜。并且,在内窥镜观察下通过构成高频烧灼装置的高频处置器械进行手术的情况下,也广泛使用内窥镜。
在基于内窥镜的观察下,例如将高频处置器械的前端部附近的处置部捕捉到摄像单元的摄像区域内,对患部组织进行烧灼等处置。在对组织进行处置时,有时产生烟或雾。
在作为第1现有例的日本特开平11-318909号公报中公开了如下的系统:在硬性内窥镜的观察下使用高频烧灼装置进行高频烧灼处置的情况下,设置根据由摄像单元得到的图像来检测烟的烟检测单元,在检测到产生烟的情况下,控制气腹单元,进行控制以去除烟。
并且,在作为第2现有例的日本特开2007-159738号公报中公开了如下的内窥镜系统:具有判别单元,该判别单元根据摄像单元的摄像图像,判别处置器械的前端部的处置部位于设定在摄像单元的摄像区域的内侧的第1区域、和设定在该第1区域的周围的第2区域的哪个区域中。
并且,在该第2现有例中,还公开了如下技术:根据判别单元的判别结果,告知处置部所处的区域,并且,在处置部位于第2区域内的情况下,进行控制使其移动到第1区域。
如上所述,有时由于处置部的动作而产生烟或雾,由于所产生的烟或雾而妨碍要处置的组织或处置部的观察。
并且,不限于构成高频烧灼装置的高频处置器械,有时处置器械的前端部或处置部被周围脏器等遮挡而无法作为图像进行观察。
在第1现有例中,在检测到产生烟的情况下,控制气腹装置以去除烟,但是,有时无法掌握该情况下的处置器械的前端部或处置部的状况。即,通过去除烟的控制,有时会成为能够通过摄像单元对前端部或处置部进行观察(摄像)的状态,但是,例如在烟的产生显著时,有时会变成无法观察的视野不良而不会改善摄像状况。并且,在该第1现有例中,在产生烟的情况下,不知道是否是前端部或处置部存在于摄像区域的内部的状态。
并且,第2现有例的目的在于,将用于进行处置的处置部设定在第1区域中,并没有对应于处置部被脏器等遮挡的情况、产生烟或雾的情况。
如上所述,在基于内窥镜的观察下使用处置器械进行处置的情况下,在从处置器械的前端部或处置部等特定观察对象物能够作为图像进行观察的状态起产生无法观察的视野不良的状况的情况下,期望能够迅速判定该状况。如果能够迅速进行这种判定,则能够向手术医生告知该状况等,易于迅速地进行与视野不良的产生对应的适当操作或处置等。
本发明是鉴于上述情况而完成的,其目的在于,提供如下的内窥镜系统和视野不良判定方法:尽管特定观察对象物存在于摄像区域的内部,但是,能够迅速判定处于无法作为图像进行观察的视野不良的状态的情况。
发明内容
用于解决课题的手段
本发明的一个方式的内窥镜系统具有:摄像单元,其设置在内窥镜中并进行摄像;判定单元,其判定在所述摄像单元的摄像区域内是否存在特定观察对象物;识别单元,其判定是否处于能够从所述摄像单元拍摄的所述摄像区域内的摄像图像中作为图像识别出所述特定观察对象物的状态;以及视野不良判定输出单元,其在所述判定单元判定为所述特定观察对象物存在于所述摄像区域内、且所述识别单元无法作为图像识别出所述特定观察对象物的情况下,判定为所述摄像单元视野不良,输出视野不良的判定结果。
本发明的一个方式的视野不良判定方法具有以下步骤:显示步骤,在该步骤中,显示通过摄像部对体腔内的观察对象部位进行摄像而得到的摄像图像作为内窥镜图像;处置器械位置取得步骤,在该步骤中,位置判定部取得用于对所述观察对象部位进行处置的处置器械的前端部的位置;位置判定步骤,在该步骤中,位置判定部判定所述处置器械的前端部的位置是否位于作为所述摄像图像的区域的摄像区域的内部;识别步骤,在该步骤中,图像识别部进行如下的图像识别:是否能够通过对所述摄像图像的图像处理而作为所述摄像区域内部的图像识别出所述处置器械的前端部;以及视野不良判定输出步骤,在该步骤中,在通过所述位置判定步骤判定为所述处置器械的前端部位于所述摄像区域内、且通过所述识别步骤得到无法作为所述摄像区域内的图像识别出所述处置器械的前端侧的识别结果的情况下,视野不良判定部判定为视野不良,输出视野不良的判定结果。
附图说明
图1是示出本发明的第1实施方式的内窥镜系统的整体结构的结构图。
图2是示出图1中的内窥镜的其他更加详细的结构的图。
图3是示出根据位置判定部的判定结果和识别部的识别结果而得到的摄像部针对处置器械的摄像状态的判定结果的图。
图4是示出第1实施方式中的视野不良判定方法的处理顺序的流程图。
图5是示出本发明的第2实施方式的内窥镜系统的整体结构的结构图。
图6(A)~图6(E)是示意性地示出作为产生视野不良的障碍物的种类的内脏、烟、雾、出血、其他处置器械的情况下的内窥镜图像例的图。
图7A是示出与障碍物为内脏的情况对应的R和G的图像信号的亮度值的像素数分布的柱状图的特性例的图。
图7B是与图7A对应地示出使用用于估计障碍物为内脏的情况的阈值的估计表的图。
图8是示出本发明的第2实施方式中的视野不良判定方法的处理顺序的流程图。
图9是示出变形例中的处置器械的前端侧部分的图。
图10是示出本发明的第3实施方式的内窥镜系统的整体结构的结构图。
图11是示出设置有外管的处置器械的结构例的图。
图12是示出第3实施方式中的视野不良判定方法的处理顺序的流程图。
图13是示出第3实施方式的变形例的内窥镜系统的整体结构的结构图。
图14是示出具有异常状态检测部的内窥镜系统的整体结构的结构图。
图15是示出具有第1和第2控制部的内窥镜系统的整体结构的结构图。
图16是示出具有状态检测部的内窥镜系统的整体结构的结构图。
图17是示出图16的处理内容的流程图。
图18是利用表来示出根据检测到异常状态的设备而使各设备的动作继续或停止的例子的图。
具体实施方式
下面,参照附图对本发明的实施方式进行说明。
(第1实施方式)
如图1所示,本发明的第1实施方式的内窥镜系统1具有被插入体内的内窥镜2、贯穿插入在该内窥镜2的处置器械用通道(简记为通道)3内的处置器械4、以及对内窥镜2供给照明光的光源装置5。
并且,该内窥镜系统1具有:作为信号处理单元的处理器7,其对设于内窥镜2中的作为摄像单元的摄像部6进行信号处理;以及作为显示单元的监视器8,其显示与处理器7生成的图像信号对应的内窥镜图像。
另外,也可以利用信号线连接光源装置5和处理器7,根据处理器7的图像信号的明亮度的信号,对光源装置5的照明光的光量进行调整。
并且,该内窥镜系统1具有作为判定单元的处置器械位置判定部(以下简记为位置判定部)10,该位置判定部10判定设于处置器械4的前端部中且进行处置的处置部9是否存在于能够通过摄像部6摄像的摄像区域的内部,换言之,判定(作为特定观察对象物的)处置器械4的前端部是否存在于摄像部6的视场内的位置。
并且,该内窥镜系统1具有作为识别单元的摄像区域内处置器械图像识别部(以下简记为图像识别部)11,该图像识别部11判定是否能够从基于摄像部6的摄像区域的摄像图像、或(与摄像区域的摄像图像对应的)内窥镜图像中作为图像识别出(作为特定观察对象物的)处置器械4的前端部。
并且,该内窥镜系统1具有作为视野不良判定输出单元的视野不良判定部12,该视野不良判定部12根据位置判定部10的判定结果的信息和图像识别部11的识别结果的信息,判定当前的基于摄像部6的处置器械的前端部的摄像状态是处于视野良好的状态还是处于视野不良的状态等。
该视野不良判定部12将判定结果的信息输出到处理器7。处理器7利用监视器8显示该判定结果的信息并对手术医生等进行告知。因此,该监视器8形成对手术医生等告知判定结果的信息的告知单元。手术医生等用户能够根据监视器8所显示的信息,在产生视野不良的情况下,迅速掌握该状态。另外,也可以代替基于显示的告知,或者与基于显示的告知一起,设置基于蜂鸣器或扬声器等的以声音方式进行告知的告知单元。
另外,在图1中,示出在处理器7的外部设置位置判定部10、图像识别部11、视野不良判定部12的结构例,但是,例如也可以构成为,在处理器7的内部设置位置判定部10、图像识别部11、视野不良判定部12。
图2示出图1中的内窥镜2的其他更加详细的结构。内窥镜2具有被插入体腔内的细长的插入部15、以及在该插入部15的后端设置的操作部16。插入部15具有在其前端设置的前端部17、在前端部17的后端设置的弯曲自如的弯曲部18、以及从该弯曲部18的后端到操作部16的前端的具有挠性的挠性部19。
弯曲部18构成为以转动自如的方式连结多个弯曲块,手术医生通过对设于操作部16中的未图示的弯曲操作旋钮进行操作,能够使弯曲部18向期望方向弯曲。
在插入部15内贯穿插入有传送照明光的光导21,该光导21的基端以装卸自如的方式与内窥镜2外部的光源装置5连接。光源装置5产生的照明光通过光导21进行传送。
光导21的前端固定在前端部17的照明窗上,被传送的照明光从该照明窗出射。
在与该照明窗相邻的观察窗中安装有物镜22,在其成像位置配置有作为摄像元件的例如电荷耦合元件(简记为CCD)23。
物镜22使被从照明窗出射的照明光照明的体腔内的患部等被摄体的光学像在CCD 23的摄像面上成像。CCD 23对所成像的光学像进行光电转换。通过物镜22和CCD 23,形成对体腔内的患部等进行摄像的摄像部6。
另外,如图2所示,物镜22使(视场角θ所示的)规定视场范围内的被摄体的光学像在CCD 23的摄像面上成像。该视场角θ成为能够摄像的摄像区域(摄像范围)。
CCD 23经由在插入部15和操作部16内等贯穿插入的信号线而与处理器7的CCD驱动电路24和图像处理电路25连接。CCD驱动电路24产生CCD驱动信号,并将该CCD驱动信号施加给CCD 23。
CCD 23通过施加CCD驱动信号,输出进行光电转换后的信号作为由(摄像部6的)CCD 23摄像而得到的摄像信号。通过图像处理电路25对该摄像信号进行图像处理(影像处理),生成能够在监视器8中显示的图像信号。通过从图像处理电路25输入该图像信号,监视器8显示由摄像部6摄像而得到的摄像图像作为内窥镜图像。
并且,在内窥镜的插入部15内设有通道3,该通道3的后端在操作部16的前端附近作为插入口3a而开口,通道3的前端在前端部17的前端面作为前端开口(或出口)3b而开口。
并且,在内窥镜2中设有ID产生部26,该ID产生部26产生包括设于各内窥镜2中的摄像部6的摄像特性和通道3的配置等的信息在内的固有信息(ID信息)。
基于该ID产生部26的ID信息被设于处理器7中的内窥镜信息取得电路27参照,内窥镜信息取得电路27参照ID信息,取得实际使用的内窥镜2中的主要是其前端部17的信息、特别是与摄像部6的摄像区域(视场角θ)和通道3的前端开口3b的配置相关联的信息。另外,还能够根据ID信息而取得内窥镜2中的通道3的长度信息。
内窥镜信息取得电路27生成判定用信息,该判定用信息用于在决定摄像部6的摄像区域的物镜22的视场角θ中,根据其周围配置的通道3的前端开口3b的配置信息,在处置器械4的前端侧(从前端部17的前端面稍微)突出的情况下,判定是否处于对处置器械4的前端部、主要是处置部9进行观察(摄像)的状态。该判定用信息被输出到位置判定部10。
在图2的结构例中,示出在处理器7内设置有内窥镜信息取得电路27的结构,但是,也可以在位置判定部10内设置内窥镜信息取得电路27。处置器械4具有细长的管状部件31、在该管状部件31的后端设置的操作部32、在管状部件31的前端设置的进行处置的处置部9。手术医生通过对设于操作部32中的钩指部33进行开闭操作,能够对构成处置部9的成对的切除片进行开闭,进行切除患部组织等的处置。
如图2所示,该处置器械4中的管状部件31从插入口3a贯穿插入通道3内。并且,在该处置器械4中的后端侧设有传感器部34。
该传感器部34例如配置在插入口3a中,在该传感器部34的引导孔内配置有旋转编码器,该旋转编码器与贯穿插入引导孔内的管状部件31的外表面接触。而且,当管状部件31沿着引导孔移动时,旋转编码器接触并旋转,根据其旋转量,检测管状部件31的前端部沿着通道3的长度方向插入的位置。
由传感器部34检测的通道3的插入口3a处的处置器械4的前端部的位置信息被输入到位置判定部10内的设定电路10a。设定电路10a通过对该位置信息减去(从ID信息中取得的)通道3的长度等,计算处置器械4的前端部从通道3的前端开口3b突出的突出位置(突出量)的信息。
另外,不限于使用这种传感器部34的情况,例如也可以在内窥镜2的前端部和处置器械4的前端部分别配置例如产生磁场的第1和第2线圈,在内窥镜2所插入的患者的周围的规定位置配置对由所述第1和第2线圈产生的磁场进行检测的多个第3线圈。
而且,也可以通过该第3线圈的检测信号,检测在内窥镜2的前端部和处置器械4的前端部分别配置的第1和第2线圈的三维位置,进而,能够计算从通道3的前端开口3b突出的处置器械4的前端部的突出位置。
另外,在处置器械4的前端部或前端部附近设有例如易于以光学方式识别的标记35a。作为该标记35a,例如如图1或图2所示,设有被着色为特定颜色(例如蓝和红)的2个彩色环。另外,也可以使处置部9也着色为特定颜色(例如绿),形成易于以光学方式识别的标记35b。
这样,在处置器械4的前端部附近设有特定颜色的并且形成为环状的标记35a和特定颜色的标记35b。
被输入来自处理器7的判定用信息的位置判定部10具有阈值设定电路10b,该阈值设定电路10b对用于根据判定用信息判定处置器械4的前端部是否存在于(位于)摄像区域的内部的突出量设定阈值。
而且,位置判定部10利用比较电路10c对经由设定电路10a而由传感器部34检测到的突出位置和阈值进行比较,根据比较结果,将处置器械4的前端部是否位于摄像区域的内部、即摄像区域内或摄像区域外的判定信号输出到视野不良判定部12。
上述图像识别部11通过图像处理(或图像解析),识别在由处理器7的图像处理电路25生成的图像信号中是否能够作为图像识别出上述标记35a、35b。
因此,图像识别部11具有由特定颜色检测电路11a和特定形状判定电路11b构成的图像处理单元(或图像解析单元),该特定颜色检测电路11a根据图像信号检测(形成标记35a、35b的)特定颜色,该特定形状判定电路11b针对检测到的特定颜色部分,进一步判定是否为(与标记35a的环形状或标记35b的2条线形状相当的)特定形状。
仅在能够通过特定颜色检测电路11a检测标记35a、35b的特定颜色、且在能够检测为特定颜色的部分中进一步通过特定形状判定电路11b判定为与标记35a的环形状和标记35b的2条线形状相当的形状的情况下,图像识别部11判定为处于能够作为摄像区域内部的图像而识别出处置器械4的前端部的状态、即图像可识别。
在除此之外的判定结果的情况下,图像识别部11判定为处于无法作为摄像区域内部的图像而识别出处置器械4的前端部的图像的状态、即图像不可识别。基于该图像识别部11的识别结果的信息被输出到视野不良判定部12。
视野不良判定部12根据位置判定部10和图像识别部11的判定信息,如图3所示,判定摄像部6针对处置器械4的摄像状态。因此,视野不良判定部12具有LUT12a,该LUT 12a例如将位置判定部10的判定信息和图像识别部11的判定信息作为地址输入,输出预先存储在与该地址对应的存储区域中的信息。该LUT 12a的输入输出的信息成为图3所示的表。
并且,视野不良判定部12将判定结果的信息输出到处理器7的图像处理电路25。图像处理电路25在内窥镜图像的图像信号上重叠判定结果的信息并输出到监视器8,在监视器8上也显示判定结果的信息。
由于显示判定结果的信息,所以手术医生能够迅速掌握其状态,在处于视野不良等状态的情况下,能够迅速进行与该状态对应的操作或处置。例如,在处置器械4的前端部从能够观察的状态成为被周边脏器等遮挡而无法观察的情况下,在相同的监视器8的画面上,成为告知视野不良的状态。因此,手术医生通过对处置器械4的近前侧进行操作等,能够迅速地消除视野不良。
这种结构的内窥镜系统1具有:作为摄像单元的摄像部6,其设置在内窥镜2的插入部15的前端部17并进行摄像;以及作为判定单元的位置判定部10,其判定在所述摄像单元的摄像区域内是否存在作为特定观察对象物的处置器械4的前端部。
并且,该内窥镜系统1的特征在于,具有:作为识别单元的图像识别部11,其判定是否处于能够从所述摄像单元拍摄的所述摄像区域内的摄像图像中作为图像识别出所述特定观察对象物识别的状态;以及作为视野不良判定输出单元的视野不良判定部12,其在所述判定单元判定为所述特定观察对象物存在于所述摄像区域的内部、且所述识别单元无法作为图像识别出所述特定观察对象物的情况下,判定为所述摄像单元视野不良,输出视野不良的判定结果。
接着,包含本实施方式的动作在内对图4所示的视野不良判定方法的顺序进行说明。手术医生将内窥镜2的插入部15插入到患者的体腔内。
并且,将对患部进行处置的处置器械4贯穿插入到通道3内。该情况下,例如将处置器械4的前端部的位置设定为插入部15的前端面的位置,在该状态下由传感器部34和设定电路36检测到的处置器械4的突出位置的值被设定为0。另外,在以下的说明中,简化说明传感器部34具有设定电路10a的功能的情况(传感器部34对处置器械4的前端部的突出位置进行检测)。
如图4的步骤S1所示,内窥镜2的摄像部6对体腔内进行摄像,将由摄像部6摄像的摄像图像作为内窥镜图像显示在监视器8中。
通过处理器7的图像处理电路25对由设于插入部15的前端部17中的摄像部6摄像而得到的体腔内的患部等观察对象部位的摄像图像进行图像处理后,在监视器8的显示画面中显示为内窥镜图像。
手术医生观察内窥镜图像,诊断观察对象部位的状态。然后,在需要处置的情况下,对处置器械4的近前侧进行操作,使处置器械4的前端侧从前端部17的前端面突出。
传感器部34对处置器械4的(从内窥镜2的前端面突出的)突出位置进行检测,输出到位置判定部10内的比较电路10c。即,如步骤S2所示,位置判定部10取得处置器械4的前端部的突出位置(突出量)的信息。
如接下来的步骤S3所示,位置判定部10对处置器械4的前端部的突出位置与阈值进行比较,判定处置器械4的前端部是否位于摄像区域的内部。
在步骤S3的判定中处置器械4的前端部的突出位置小于阈值的情况下,如步骤S4所示,位置判定部10判定为处置器械4的前端部位于(存在于)摄像区域的外部。然后,该判定结果被输出到视野不良判定部12,如图3所示,视野不良判定部12判定为处置器械4的前端部位于视场外。
另一方面,在步骤S3的判定中处置器械4的前端部的突出位置为阈值以上的情况下,位置判定部10判定为处置器械4的前端部位于摄像区域的内部。该判定结果被输出到视野不良判定部12。
在处置器械4的前端部位于摄像区域的内部的判定结果的情况下,如步骤S5所示,图像识别部11取得是否能够作为摄像区域内部的图像而识别出处置器械4的前端部的处理结果的信息。
在本实施方式中,利用针对设置在处置器械4的前端部的标记35a、35b的图像识别,取得是否能够在摄像区域的内部作为图像识别出处置器械4的前端部的处理结果的信息。
然后,如接下来的步骤S6所示,图像识别部11根据图像识别的处理结果,判定是否能够在摄像区域的内部作为图像识别出处置器械4的前端部。
通过该步骤S6的判定处理,在图像识别部11能够识别图像的情况下,如图3所示,判定为图像可识别。该判定结果被输出到视野不良判定部12。然后,如步骤S7所示,如图3所示,该视野不良判定部12判定为视野良好。另外,在步骤S7之后,通过步骤S9在监视器8中显示判定结果。图2示出该显示例。
另一方面,通过步骤S6,在图像识别部11无法识别图像的情况下,如图3所示,图像识别部11判定为图像不可识别。该判定结果被输出到视野不良判定部12。然后,如步骤S8所示,如图3所示,该视野不良判定部12判定为视野不良。
步骤S4、S7、S8的判定结果的信息被送到处理器7,处理器7将其转换为在监视器8中显示判定结果的图像信号后,输出到监视器8。如步骤S9所示,在监视器8中显示判定结果,对手术医生告知判定结果。另外,作为步骤S9的处理,不限于通过显示来告知判定结果的情况,也可以利用声音进行告知。并且,也可以是将判定结果输出到(基于显示或声音的)告知单元的处理(视野不良输出处理)。
手术医生被告知处于视野不良,由此,能够迅速进行与视野不良对应的处置。
手术医生根据内窥镜图像确认处置器械4的前端侧的状态,由此,易于迅速掌握由于处置器械4的前端侧被处置对象部位周围的脏器遮挡等而导致的视野不良的原因。
在步骤S9的处理之后,返回步骤S2的处理,反复进行步骤S2-S9的处理。
由上述图4的第1实施方式形成的视野不良判定方法具有:作为显示步骤的步骤S1,显示通过摄像部对体腔内的观察对象部位进行摄像而得到的摄像图像作为内窥镜图像;以及作为处置器械位置取得步骤的步骤S2,取得用于对所述观察对象部位进行处置的处置器械的前端部的位置。
并且,视野不良判定方法具有:作为位置判定步骤的步骤S3,判定所述处置器械的前端部的位置是否位于作为所述摄像图像的区域的摄像区域的内部;以及作为识别步骤的步骤S5,进行如下的图像识别:是否能够通过对所述摄像图像的图像处理而作为所述摄像区域内部的图像识别出所述处置器械的前端部。
并且,视野不良判定方法的特征在于,具有作为视野不良判定输出步骤的步骤S9,在通过所述位置判定步骤判定为所述处置器械的前端部位于所述摄像区域内、且通过所述识别步骤得到无法作为所述摄像区域内的图像而识别出所述处置器械的前端部的识别结果的情况下,判定为视野不良(步骤S8),输出视野不良的判定结果。
根据这样动作的本实施方式,在正在由摄像单元摄像的状态下,尽管作为特定观察对象物的处置器械的前端侧存在于摄像区域的内部,但是,能够迅速判定处于无法观察的视野不良的状态。
并且,由于具有在处于无法观察的视野不良的状态的情况下对手术医生进行告知的告知单元,所以手术医生能够迅速识别视野不良的状态。而且,在产生视野不良的状态的情况下,手术医生也易于迅速进行适当的应对。
另外,在本实施方式中,说明了手动切除病变组织等的处置器械4的情况,但是,也可以应用于功能不同的处置器械的情况。并且,也可以应用于使用高频电能进行处置的高频处置器械、使用超声波能进行处置的超声波处置器械这样的能量处置器械的情况。
(第2实施方式)
接着,参照图5~图9对本发明的第2实施方式进行说明。图5示出本发明的第2实施方式的内窥镜系统1B的整体结构。
图5所示的内窥镜系统1B在图1的内窥镜系统1中,代替处置器械4而使用利用高频电能进行处置的高频处置器械4B,该高频处置器械4B与作为电能供给装置的高频电源装置41连接。
并且,该高频电源装置41与进行高频电流的输出和输出停止(接通/断开)的指示操作的脚踏开关(图5中简记为FS)42连接。通过高频处置器械4B、高频电源装置41和脚踏开关42形成高频烧灼装置43。
例如与第1实施方式同样,该高频处置器械4B具有由在管状部件31的前端部进行开闭而进行切除的成对的刀(简记为刀)构成的处置部9b。
而且,在脚踏开关42接通的情况下,高频电流被供给到刀,能够通过高频电流切除与刀接触的处置对象的活体组织。
并且,本实施方式中的图像识别部11’和视野不良判定部12’具有如下功能:在图2的图像识别部11和视野不良判定部12中判定为视野不良的情况下,进一步估计作为产生视野不良的原因的障碍物或障碍物的种类,对手术医生告知估计出的结果。
因此,图像识别部11’具有柱状图计算电路11c,该柱状图计算电路11c计算作为例如R、G、B的3原色的图像信号的亮度值的像素数分布的柱状图。并且,图像识别部11’具有分别对烟的候选和雾的候选进行检测的烟检测电路11d和雾检测电路11e。
进而,图像识别部11’具有其他处置器械检测电路11f,该其他处置器械检测电路11f检测其他处置器械,使得在高频处置器械4B的前端侧成为产生视野不良的障碍物的情况下,也能够估计与高频处置器械4B一起使用的其他处置器械。
并且,在本实施方式中,在高频处置器械4B的前端部附近设有环数比第1实施方式的情况多的环形状的标记35c和线形状的标记35b。即,在高频处置器械4B的前端部附近设有环形状的标记35c,该标记35c在其长度方向上形成为比第1实施方式的情况长,并且以覆盖规定长度的方式设定为特定颜色。
因此,在本实施方式中,也使用第1实施方式中说明的特定颜色检测电路11a和特定形状判定电路11b。
但是,本实施方式的特定颜色检测电路11a具有检测例如3种颜色以上的特定颜色的功能,能够进行如下判定等:根据能够与标记35b一起检测到标记35c的情况下的环数,能够检测到高频处置器械4B的前端部侧的全部(或几乎全部)作为图像,还是能够检测到高频处置器械4B的前端部侧的一部分作为图像。
并且,由这些特定颜色检测电路11a~其他处置器械检测电路11f检测到的信号被输入到视野不良判定部12’,视野不良判定部12’在根据这些信号判定为视野不良的情况下,进一步估计作为产生该视野不良的原因的障碍物或其种类。
因此,视野不良判定部12’具有阈值设定部12b,该阈值设定部12b存储由柱状图计算电路11c计算出的R、G、B的像素数的柱状图、用于根据烟检测电路11d和雾检测电路11e估计障碍物或其种类的阈值。
而且,视野不良判定部12’通过将与阈值设定部12b的阈值进行比较后的比较输出输入到例如一览表(LUT)12a,估计障碍物或其种类,输出估计出的判定结果。
例如,图6(A)~图6(E)示出高频处置器械4B的前端部侧由于(作为障碍物的)脏器、烟、雾、出血、其他处置器械而处于视野不良的情况下的内窥镜图像例。即,分别由Ia、Ib、Ic、Id、Ie示出图6(A)~图6(E)的内窥镜图像中的作为障碍物的脏器、烟、雾、出血、其他处置器械的图像。并且,由It示出高频处置器械4B(的前端部侧)的图像。
并且,图7A示出例如在图6(A)中的脏器成为障碍物的情况下的柱状图例、以及为了估计障碍物为脏器而设定的阈值的设定例。
图7A中的上段示出针对R的图像信号中的亮度值的柱状图而设定的阈值Rth1、Rth2的设定例,下段示出针对G的图像信号中的柱状图而设定的阈值Gth1、Gth2的设定例。横轴的亮度值例如表示8比特的比特数的情况下的亮度值。
另外,虽然与B的图像信号有关的亮度值的柱状图和阈值没有图示,但是,与G的图像信号中的柱状图的情况大致同样地设定阈值Bth1、Bth2。然后,在产生视野不良的情况下,使用图7A所示的阈值,仅在符合图7B所示的规定条件(图7B中由○所示的条件)的情况下,视野不良判定部12’使用LUT 12a估计为障碍物是脏器。
即,在满足R的图像信号的像素数R(为了简化而由R表示)为Rth1>R>Rth2的条件、G的图像信号的像素数G(为了简化而由G表示)为Gth1>G>Gth2的条件、B的图像信号的像素数B(为了简化而由B表示)为Bth1>B>Bth2的条件的情况下,视野不良判定部12’估计为障碍物是脏器。
将满足这种条件的情况记载为符合脏器估计表的情况。在不满足这种条件的情况下、即不符合脏器估计表的情况下,估计为障碍物不是由于脏器。
并且,例如在满足Rth1>R>Rth2的条件、Gth2>G的条件、Bth2>B的条件的情况下,视野不良判定部12’估计为障碍物是出血。将满足这种条件的情况记载为符合出血估计表的情况。
在不满足这种条件的情况下,估计为障碍物不是由于出血。
并且,烟检测电路11d根据图像信号检测图6(B)所示的白色的烟。例如,该烟检测电路11d使用窗口型比较器检测是否以二维方式存在超过规定值且具有大致相同的亮度值的R、G、B的图像信号。
然后,烟检测电路11d将检测结果的信号输出到视野不良判定部12’。视野不良判定部12’使用LUT 12a,在由烟检测电路11d检测到具有大致相同的亮度值的R、G、B的图像信号的区域超过预先设定的阈值且连续存在的情况下,符合烟估计表,估计为障碍物是烟。在除此之外的情况下,估计为障碍物不是烟。
并且,雾检测电路11e如烟检测电路11d那样,使用窗口型比较器检测是否以二维方式存在超过规定值且具有大致相同的亮度值的R、G、B的图像信号。
但是,雾检测电路11e检测是否不连续而以离散的方式检测到超过规定值且具有大致相同的亮度值的R、G、B的图像信号。另外,雾检测电路11e也可以构成为,检测在R、G、B中的任意一方的图像信号中仅超过规定值的亮度值是否在二维区域中以离散的方式被检测到多个。
如图6(C)所示,由于雾具有超过规定值的亮度值且如雾气或雨那样产生,所以通过检测其特征(多以离散的方式在二维区域中产生的特征),能够高精度地估计障碍物的种类是雾的情况。
该雾检测电路11e的检测结果被输出到视野不良判定部12’。视野不良判定部12’使用LUT 12a,在符合障碍物是雾的特征的情况下、即符合雾估计表的情况下,判定为障碍物是雾。在不符合该雾估计表的判定结果的情况下,估计为障碍物不是雾。
并且,其他处置器械检测电路11f参照预先设定的处置器械的前端侧的形状、颜色等的特征,检测障碍物是否是其他处置器械。其他处置器械检测电路11f例如在检测到图像信号中的例如具有超过阈值的亮度值、且为管状或臂状的形状的情况下,检测为其他处置器械是障碍物。该检测结果被输出到视野不良判定部12’。
视野不良判定部12’在判定为障碍物不符合上述脏器、烟、雾、出血中的任意一方的情况下,在其他处置器械检测电路11f检测到其他处置器械是障碍物的情况下,通过使用LUT 12a的其他处置器械估计表,判定为障碍物是其他处置器械。
并且,视野不良判定部12’在障碍物不符合这些脏器、烟、雾、出血、其他处置器械中的任意一方的情况下,判定或估计为其他障碍物成为原因。其他结构与第1实施方式相同。
对这种结构的第2实施方式的图8所示的视野不良判定方法进行说明。
图8中的最初的步骤S11~S18是与图4的步骤S1~S8大致相同的处理。
在最初的步骤S11中,摄像部6对体腔内的患部等观察对象部位进行摄像,将由摄像部6摄像的摄像图像作为内窥镜图像显示在监视器8中。
在接下来的步骤S12中,传感器部34取得对观察对象部位进行处置的高频处置器械4B的前端部的位置。然后,在接下来的步骤S13中,位置判定部10判定高频处置器械4B的前端部的位置是否位于摄像区域的内部。
在判定为高频处置器械4B的前端部不位于摄像区域的内部的情况下,如步骤S14所示,位置判定部10判定为高频处置器械4B的前端部位于(存在于)摄像区域的外部。
然后,该判定结果被输出到视野不良判定部12’,视野不良判定部12’判定为高频处置器械4B的前端部位于视场外。
另一方面,高频处置器械4B的前端部位于摄像区域的内部的判定结果被输出到视野不良判定部12’。
在高频处置器械4B的前端部位于摄像区域的内部的判定结果的情况下,如步骤S15所示,图像识别部11’取得是否能够作为摄像区域内部的图像而识别出高频处置器械4B的前端部的处理结果的信息。
如接下来的步骤S16所示,图像识别部11’根据图像识别的处理结果,判定是否能够在摄像区域的内部作为图像识别出高频处置器械4B的前端部。
通过该步骤S16,在图像识别部11’能够识别图像的情况下,如图3所示,判定为图像可识别。该判定结果被输出到视野不良判定部12’。
如接下来的步骤S17所示,如图3所示,该视野不良判定部12’判定为视野良好。另外,通过步骤S17之后的步骤S18在监视器8中显示判定结果。然后,对手术医生告知判定结果。
另一方面,通过步骤S16,在图像识别部11无法识别图像的情况下,如图3所示,判定为图像不可识别。该判定结果被输出到视野不良判定部12。然后,如步骤S19所示,如图3所示,该视野不良判定部12判定为视野不良。
在本实施方式中,在判定为视野不良的情况下,该判定结果被送到图像识别部11’。然后,在接下来的步骤S20中,图像识别部11’进行估计产生视野不良的原因的障碍物(或其种类)的图像处理。在接下来的步骤S20中,图像识别部11’将由柱状图计算电路11c等计算出的柱状图等图像处理后的信息输出到视野不良判定部12’。
然后,在接下来的步骤S21A中,视野不良判定部12’判定被输入的信息是否符合脏器是障碍物时的条件(脏器估计表)。在被输入的信息符合脏器是障碍物时的条件的判定结果的情况下,在接下来的步骤S22A中,视野不良判定部12’判定为由脏器遮挡了高频处置器械4B的前端部。
然后,视野不良判定部12’将该判定结果的信息送到处理器7,处理器7将由脏器遮挡高频处置器械4B的前端部的可能性高这样的判定结果的信息输出到监视器8。在步骤S18中,监视器8显示由脏器遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
在步骤S21A中不符合脏器估计表的情况下,在步骤S21B中,视野不良判定部12’判定被输入的信息是否符合烟是障碍物时的条件(烟估计表)。在被输入的信息符合烟是障碍物时的条件的判定结果的情况下,在接下来的步骤S22B中,视野不良判定部12’判定为由烟遮挡了高频处置器械4B的前端部。
然后,视野不良判定部12’将该判定结果的信息送到处理器7,处理器7将由烟遮挡高频处置器械4B的前端部的可能性高这样的判定结果的信息输出到监视器8。在步骤S18中,监视器8显示由烟遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
在步骤S21B中不符合烟估计表的情况下,在步骤S21C中,视野不良判定部12’判定被输入的信息是否符合雾是障碍物时的条件(雾估计表)。
在被输入的信息符合雾估计表的判定结果的情况下,在接下来的步骤S22C中,视野不良判定部12’判定为由雾遮挡了高频处置器械4B的前端部。
然后,视野不良判定部12’将该判定结果的信息送到处理器7,处理器7将由雾遮挡高频处置器械4B的前端部的可能性高这样的判定结果的信息输出到监视器8。在步骤S18中,监视器8显示由雾遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
在步骤S21C中不符合雾估计表的情况下,在步骤S21D中,视野不良判定部12’判定被输入的信息是否符合出血是障碍物时的条件(出血估计表)。然后,在符合出血估计表的情况下,在步骤S22D中,视野不良判定部12’判定为由出血(部分)遮挡了高频处置器械4B的前端部。
进而,在步骤S18中,显示由出血部分遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
在步骤S21D中不符合出血估计表的情况下,在步骤S21E中,视野不良判定部12’判定被输入的信息是否符合其他处置器械是障碍物时的条件(其他处置器械估计表)。
然后,在符合其他处置器械估计表的情况下,在步骤S22E中,视野不良判定部12’判定为由其他处置器械遮挡了高频处置器械4B的前端部。进而,在步骤S18中,显示由其他处置器械遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
在步骤S21E中不符合其他处置器械估计表的情况下,视野不良判定部12’判定为被输入的信息是上述脏器、烟、雾、出血、其他处置器械具以外的障碍物(称为其他障碍物)。
然后,在步骤S23中,视野不良判定部12’判定为由其他障碍物遮挡了高频处置器械4B的前端部。进而,在步骤S18中,显示由其他障碍物遮挡高频处置器械4B的前端部的可能性高的意思的判定结果,对手术医生进行告知。
根据本实施方式,由于在处于视野不良的情况下,在监视器8中显示产生视野不良的原因的障碍物或其种类,所以手术医生能够迅速进行与该障碍物的种类对应的处置。除此之外,具有与第1实施方式相同的效果。
另外,在第2实施方式中,在高频处置器械4B的前端部附近,沿其长度方向设置环形状的标记35c,但是,也可以如图9所示,沿前端部附近的长度方向设置刻度35d。
能够根据在对该刻度35d进行图像识别的情况下所识别的刻度部分,判定高频处置器械4B的前端侧部分的识别状态(能够识别前端侧部分的全部还是仅能够识别一部分等)。该情况下,代替特定颜色检测电路11a而使用对刻度部分进行检测的电路。并且,也可以按照规则变更刻度的粗细等,易于识别各刻度部分。
另外,可以在处置部9b上形成上述标记35b,但是,除此之外,也可以利用反射率高的部件进行涂层,易于在明亮的状态下对处置部9b进行图像识别。
另外,在本实施方式中,说明了使用高频电能进行处置的高频处置器械4B的情况,但是,也能够大致同样地应用于使用超声波能进行处置的超声波处置器械的情况。
(第3实施方式)
接着,参照图10~图12对本发明的第3实施方式进行说明。图10示出本发明的第3实施方式的内窥镜系统1C的整体结构。
内窥镜系统1C在图5所示的第2实施方式的内窥镜系统1B中,代替手动的高频处置器械4B,而使用具有以能动方式驱动可动部的驱动部50的能动型高频处置器械(简记为高频处置器械)4C。而且,通过该高频处置器械4C、高频电源装置41和脚踏开关42形成高频烧灼装置43C。
并且,本实施方式的内窥镜系统1C具有控制部51,该控制部51对高频处置器械4C的动作进行控制,并且,对作为能量供给装置的高频电源装置41的能量供给的动作进行控制。该控制部51根据视野不良判定部12’的判定结果对高频烧灼装置43C的动作进行控制。
上述高频处置器械4C在管状部件31的前端侧设有构成弯曲部52的多个关节53a、53b。在管状部件31的前端和关节53a的后端、关节53a的前端和关节53b的后端、关节53b的前端分别设有转动自如的构成可动部的关节轴54a、54b、54c。
另外,关节轴54a、54b构成弯曲部52,关节轴54c构成开闭机构,该开闭机构使构成处置部9b的成对的刀中的例如一方转动而对成对的刀进行开闭。
在关节轴54a、54b、54c上,分别以卷绕的方式固定有成对的线55a、55b、55c的前端,各个成对的线55a、55b、55c的后端分别固定在带轮57a、57b、57c上,该带轮57a、57b、57c例如安装在设于管状部件31后端的驱动部50内的马达56a、56b、56c的旋转轴上。
另外,在图10中,仅简略地示出线55a、马达56a、带轮57a。
构成驱动单元的各马达56i(i=a、b、c)通过从控制部51供给的马达驱动信号而进行旋转驱动。在各马达56i的旋转轴上安装有编码器58i(图10中仅示出58a),编码器58i检测马达56i的旋转角度,并输出到控制部51。
并且,在关节轴54a、54b、54c上设有对各自的旋转角度进行检测的传感器59a、59b、59c。由各传感器59i检测到的检测信号被输入到弯曲和开闭检测部59。该弯曲和开闭检测部59根据传感器59a、59b的检测信号对弯曲部52的弯曲方向和弯曲角度(所构成的弯曲信息)进行检测,并且,根据传感器59c的检测信号对刀的开闭角度进行检测。
由弯曲和开闭检测部59检测到的弯曲部52的弯曲信息和刀的开闭信息被输入到控制部51。
并且,在控制部51上连接有操纵杆等操作部60,该操作部60进行使弯曲部52弯曲的指示操作,并且进行使刀开闭的指示操作。控制部51进行根据来自操作部60的指示操作而对驱动部50进行驱动的控制动作。并且,该控制部51与视野不良判定部12’连接,并且还与高频电源装置41连接。
而且,控制部51具有进行与脚踏开关42和操作部60的操作对应的控制动作的通常的控制模式(第1控制模式)、以及进行与视野不良判定部12’的视野不良的判定结果(更详细地讲为障碍物的种类的判定结果)对应的控制动作的第2控制模式。
换言之,控制部51在未从视野不良判定部12’输入视野不良的判定结果的情况下,在通常的控制模式下进行控制动作。控制部51具有控制模式切替部51a的功能,在从视野不良判定部12’输入了视野不良的判定结果的情况下,从通常的控制模式起对控制模式进行切换,使得在第2控制模式下进行控制动作。
另外,在图10中,说明了关节53a、53b分别绕关节轴54a、54b转动自如的情况,但是,也可以采用在与关节轴54a、54b正交的方向上转动自如的构造的弯曲部52。并且,在图10中示出2个关节53a、53b,但是,也可以利用个数更多的关节构成弯曲部52。
并且,在本实施方式中,通过控制部51的控制,能够使管状部件31沿通道3的长度方向移动,特别地,能够将由刀形成的处置部9b收纳在通道3内、或图11所示的外管61内。
在图10的结构中,例如在传感器部34内,除了上述第1实施方式中说明的旋转编码器以外,还配置有将旋转轴连接在辊上的(构成用于使高频处置器械4C移动并使处置部9b退避的移动单元的)马达62。
通过控制部51对该马达62的移动动作进行控制。通过对该马达62进行旋转驱动,能够使与辊滑动接触的管状部件31沿其长度方向移动,将形成高频处置器械4C的前端部的处置部9b的刀收纳在通道3内(即,退避到刀不从通道3的前端开口3b突出的状态)。
另外,在图10中示出在管状部件31的前端部形成弯曲部52的结构,但是,如图11所示,也可以构成为设置用于收纳管状部件31及其前端侧的弯曲部52的具有挠性的外管61。
该情况下,外管61通过在通道3的插入口3a的位置配置的传感器部63,根据插入口3a的位置检测外管61的规定位置、例如外管61的前端开口的位置。
进而,外管61的内侧的管状部件31的规定位置、例如前端部的位置由与传感器部63相邻配置的传感器部34检测。另外,该传感器部34内的未图示的辊和旋转编码器经由在外管61的后端侧的周方向的多个部位形成的长槽,与外管61的内侧的管状部件31滑动接触。
并且,在传感器部63的内侧,除了上述旋转编码器以外,还配置有将旋转轴连接在辊上的马达62。
通过对该马达62进行旋转驱动,能够使与辊滑动接触的管状部件31沿其长度方向移动,将高频处置器械4C的前端部的刀收纳在外管61的前端开口内(即,退避到刀不从前端开口突出的状态)。另外,传感器部34、63的检测信号被输入到控制部51,控制部51在从视野不良判定部12’输入了视野不良的判定结果的情况下,对马达62的动作进行控制。其他结构与第2实施方式相同。
接着,参照图12对本实施方式的动作进行说明。另外,在以下的说明中,对高频处置器械4C贯穿插入到外管61内的结构例进行说明。
在本实施方式中,进行第2实施方式中说明的图8的处理,并且,还通过控制部51进行图12所示的追加处理。
如图8中说明的那样,在步骤S19中判定为视野不良,在步骤S20中进行估计障碍物的处理。然后,在步骤S21A中进行判定障碍物是否是脏器的处理,在判定为障碍物是脏器的情况下,在步骤S22A中判定为高频处置器械4C的前端部被脏器遮挡。另外,这里,高频处置器械4C的前端部意味着包括弯曲部52和处置部9b,但是,为了更加明确地包括弯曲部52和处置部9b,也可以代替高频处置器械4C的前端部而使用高频处置器械4C的前端部周边部。
在接下来的步骤S31中,视野不良判定部12’判定由脏器遮挡了弯曲部52和构成处置部9b的刀的全部,还是遮挡了弯曲部52和刀的一部分。
在全部被遮挡的判定结果的情况下,如步骤S32所示,控制部51针对高频电源装置41进行高频电流的输出停止的指示。
并且,控制部51在视野不良的期间内停止构成弯曲部52的关节轴54a、54b的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
在步骤S31的判定中得到一部分被遮挡的判定结果的情况下,如步骤S33所示,控制部51针对高频电源装置41进行高频电流的输出停止(能量供给的停止)的指示。
控制部51在视野不良的期间内停止被遮挡的关节轴的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
如步骤S21B和步骤S22B、或步骤S21C和步骤S22C所示,在判定为由烟或雾遮挡了高频处置器械4C的前端部的情况下,如步骤S34所示,控制部51针对高频电源装置41进行高频电流的输出停止的指示。
并且,控制部51停止或(以降低响应速度的方式)限制构成视野不良的弯曲部52的关节轴的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
如步骤S21D和步骤S22D所示,在判定为由出血遮挡了高频处置器械4C的前端部的情况下,如步骤S35所示,控制部51针对高频电源装置41进行高频电流的输出停止的指示。
并且,控制部51停止或(以降低响应速度的方式)限制构成视野不良的弯曲部52的关节轴的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
如步骤S21E和步骤S22E所示,在判定为由其他处置器械遮挡了高频处置器械4C的前端部的情况下,如步骤S36所示,控制部51针对高频电源装置41进行高频电流的输出停止的指示。
并且,控制部51(以降低响应速度的方式)限制构成视野不良的弯曲部52的关节轴的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
另外,如步骤S23所示,在判定为由其他障碍物遮挡了高频处置器械4C的前端部的情况下,如步骤S37所示,控制部51例如如步骤S32或S33那样进行控制。具体而言,针对高频电源装置41进行高频电流的输出停止的指示。
并且,控制部51停止构成视野不良的弯曲部52的关节轴的旋转动作,并且,也停止使刀开闭的关节轴54c的旋转动作。并且,控制部51使马达62旋转驱动,将刀收纳在外管61的前端开口内。
在步骤S32-S37的处理之后,在步骤S38中,通过监视器8告知判定结果和控制部51的控制内容,结束该处理。
另外,如图8所示,在步骤S22A-S22E的处理之后,在进行了利用监视器8显示判定结果的告知的情况下,也可以在步骤S32-S36的处理之后,进行利用监视器8显示控制部51的控制结果的信息的告知。
并且,在烟或雾是障碍物的情况下,也可以在图像处理中判定是否能够以某种程度识别处置器械的轮廓,根据判定结果对由控制部51控制的动作进行变更。
例如,虽然由于烟或雾使得与完全没有烟或雾的状态相比不鲜明,但是,在足够观察刀或弯曲部52的轮廓的情况下,也可以减慢响应动作,继续进行基于高频处置器械4C的动作。
根据进行这种动作的本实施方式,在使用能动型的高频处置器械4C的情况下,在产生视野不良的情况下,根据产生视野不良的原因的障碍物的种类或状况,对高频处置器械4C和高频电源装置41的动作进行控制,所以,能够减轻手术医生必须手动操作的劳力和时间。
因此,当必须在产生视野不良的状况下进行处置的情况下,手术医生也能够容易地进行顺畅的处置。除此之外,具有与第2实施方式相同的效果。
另外,在判定为烟或雾是障碍物的情况下,通过使高频电流的输出停止,换言之,在高频处置器械4C及其前端部侧不流过高频电流,能够使烟或雾的产生迅速停止。
因此,在产生烟或雾的初始阶段,控制部51通过进行高频电流的输出停止的控制,能够从视野不良的状态恢复为能够确保视野的状态的可能性高。
因此,在判定为烟或雾是障碍物的情况下,控制部51可以进行如下控制:在停止了高频电流的输出停止后,以与操作部60的指示操作对应地减慢驱动部50驱动的关节的动作的响应速度的方式限制其动作,并且,暂时停止刀的动作或以减慢响应速度的方式限制其动作(不进行以下的将处置部9b(刀)收纳在处置部收纳部内的控制)。
这样,在判定为障碍物是烟或雾的情况下、以及判定为烟或雾以外的障碍物的情况下,也可以对控制部51控制的控制内容进行变更。另外,在判定为烟或雾以外的障碍物的情况下,控制部51进行如下控制:使处置部9b(构成处置部9b的刀)后退,将其收纳在通道3的前端开口3b内或外管61的前端开口内、即处置部收纳部内。并且,控制部51可以进行如下控制:在判定为障碍物是烟或雾的情况下减慢驱动部50驱动的动作的响应速度,在判定为烟或雾以外的障碍物的情况下停止驱动部50驱动的动作。并且,在进行这种控制的情况下,也可以利用监视器8等显示其控制内容,手术医生容易掌握或识别控制内容。
图13示出变形例的内窥镜系统1D的整体结构。该内窥镜系统1D在例如图10所示的第3实施方式的内窥镜系统1C中,设置监视部64,该监视部64对由驱动部50的编码器58i等检测到的驱动量和传感器59a-59c的检测值等进行监视。
并且,还设置经时存储驱动部50的驱动量和传感器59a-59c的检测值等的存储部65。另外,存储部65也可以存储从高频电源装置41输出的高频电流值等。
另外,监视部64可以直接监视编码器58i、传感器59a-59c的输出信号,如图13所示,也可以经由控制部51进行监视。监视部64还可以监视其他动作。
并且,在存储部65中预先存储驱动部50的驱动特性、弯曲部52的弯曲特性等,监视部64具有如下的正常/异常状态判定部66的功能:参照存储部65的特性,判定所监视的驱动量和检测值是处于被容许的容许范围内的驱动量和检测值的正常状态,还是脱离容许范围的异常状态。
正常/异常状态判定部66的判定结果被送到控制部51。控制部51进行与该判定结果对应的控制动作。在正常状态的情况下,控制部51如上述第3实施方式那样进行控制动作。
在异常状态的情况下,控制部51在与异常状态对应的控制模式(第3控制模式)下进行控制动作。在该控制模式中,控制部51停止检测到异常状态的驱动部50的驱动动作,或者不使用检测到异常状态的传感器的检测值对高频处置器械4C和高频电源装置41的动作进行控制。并且,在消除了异常状态的情况下,成为与第3实施方式大致相同的动作(但是,进行第3实施方式中不进行的监视动作)。
另外,也可以经由处理器7而在监视器8中显示控制部51的控制模式的信息等,对手术医生等进行告知。
其他结构与第3实施方式相同。根据本变形例,在异常状态的情况下,也能够进行与异常状态对应的控制动作。另外,在第3实施方式及其变形例中,说明了高频处置器械4C的情况,但是,也可以大致同样地应用于超声波处置器械等的情况。
但是,也可以构成以下的图14以后说明的内窥镜系统。
图14所示的内窥镜系统1E具有作为能动医疗设备的能动内窥镜(简记为内窥镜)2E、光源装置5、处理器7E、监视器8、对内窥镜2E的动作进行控制的控制部51E。
内窥镜2E在前端部附近设有由多个关节构成的能动弯曲机构71,该能动弯曲机构71经由线72而与近前侧的驱动部73连接。该内窥镜2E相当于将图2的内窥镜2中的弯曲部18置换为能动弯曲机构71而得到的结构。
通过控制部51E控制驱动部73对能动弯曲机构71的关节进行驱动的动作。并且,通过驱动量检测部74检测驱动部73的驱动量,并将其输出到控制部51E。
并且,在控制部上连接有异常状态检测部75,该异常状态检测部75检测该内窥镜系统1E中的各部、设备由于故障等而成为与通常的动作状态不同的异常状态。另外,在存储部75a中存储有驱动部73等的动作特性等用于检测异常状态的信息,异常状态检测部75参照存储在该存储部75a中的信息等。
该异常状态检测部75始终监视驱动部73的驱动状态(驱动转矩、驱动量)、构成能动弯曲机构71的关节的变位量、内窥镜2E的摄像部6的状态这样的内窥镜2E的动作状态、以及光源装置5、处理器7E、内窥镜周边设备的动作状态,检查设备等的功能是否正常动作。另外,处理器7E与在图2的处理器7中不具有内窥镜图像信息取得电路27的结构相同,但是,也可以构成为具有内窥镜图像信息取得电路27。
假设在异常状态检测部75判断为上述功能的一部分异常时,例如对在控制部51E内设置的停止部76以及控制部51E外部的提示部77发送表示异常的信号,停止部76停止内窥镜2E的功能,提示部77例如经由处理器7E而通过监视器8对操作者发出警告。另外,提示部77自身也可以进行警告动作。
并且,在内窥镜系统1E中具有对控制部51E输入各种指示操作的操作输入部78、在产生异常状态的情况下进行正常的功能部分的动作指示的恢复指示部(动作指示部)79、以及根据该恢复指示部79的动作指示而对例如控制部51E进行正常的功能部分的动作的恢复部(动作控制部)80。
在这种结构的内窥镜系统1E中,例如在通过内窥镜2E进行诊断或处置时,如果一部分关节异常而使内窥镜2E的全部功能停止,则进行诊断或处置的功能大幅降低。
因此,在本内窥镜系统1E中,使用恢复部80,选择性地使作为内窥镜2E的摄像功能的摄像部6进行恢复,设定为使视觉功能进行动作的动作状态,由此,能够容易地进行诊断或处置。
进而,在拔出内窥镜2E而想进行最低限度的动作的情况下,选择正常动作的部分的关节或使该关节动作的驱动部73,仅使正常关节进行动作恢复,在进行能动控制的情况下,也能够确保可靠性高的动作。
因此,本内窥镜系统1E在检测到异常状态时,暂时停止全部功能,但是,通过选择性地使正常功能恢复,在结束手术等的情况下也能够进行最低限度的动作,能够提高对能动医疗设备进行处理时的操作性。
图15所示的内窥镜系统1F具有内窥镜2F、贯穿插入到内窥镜2F的通道内的能动处置器械4F、光源装置5、处理器7E、监视器8、以及具有对能动处置器械4F进行控制的第1控制部81a、81b的处置器械控制部51F。
能动处置器械4F在前端部附近设有由多个关节构成的能动弯曲机构71F,该能动弯曲机构71F经由线72而与由近前侧的马达构成的驱动部73F连接。
通过处置器械控制部51F控制驱动部73F对能动弯曲机构71F的关节进行驱动的动作。在能动弯曲机构71F中设有用于对各关节的变位量进行检测的由传感器等构成的检测部82。
通过由编码器构成的驱动量检测部74F检测驱动部73F的驱动量,并将其输出到处置器械控制部51F。
并且,由检测部82检测到的信号被输入到处置器械控制部51F,并且,被输入到在该处置器械控制部51F内设置的检测部异常状态判定部83。该检测部异常状态判定部83判定(检测)在能动弯曲机构71F中设置的检测部82的由于故障等而导致的异常状态。
检测部异常状态判定部83在判定为检测部82正常动作的通常时,经由控制部切换部84切换为使用第1控制部81a进行控制。
该情况下,第1控制部81a根据检测部82的信号对能动处置器械4F的动作进行控制。
另一方面,检测部异常状态判定部83在判定为检测部82处于异常动作状态的异常时,经由控制部切换部84切换为使用第2控制部81b进行控制。
第2控制部81b进行独立控制构成能动弯曲机构71F的各关节的控制动作,在构成检测部82的多个传感器中的一部分产生故障的情况下,根据正常动作的传感器的信号,仅对由该传感器检测的关节进行控制。
并且,控制部切换部84与对第1控制部81a、81b进行指示输入的第1操作输入部85a和第2操作输入部85b连接。进而,处置器械控制部51F具有用于对操作者提示该处置器械控制部51F的状态的提示部86。
对这种内窥镜系统1F中的控制方法进行说明。一般地,在进行能动医疗设备的控制时,在设备的一部分产生故障的情况下,停止处置等并从体内拔出能动医疗设备,但是,在多自由度的能动处置器械4F的情况下,如果在各关节的弯曲形状较大时产生故障等,则有时很难从体内拔出。
并且,在正在进行处置的情况下,需要进行最低限度的处置并结束手术。本内窥镜系统1F是着眼于这种情况的能动处置器械4F的控制方法。
首先,对通常时的能动处置器械4F的控制方法进行说明。在通常时,使用第1操作输入部85a和第1控制部81a进行控制。每当从检测部82获得检测值时,搭载于处置器械控制部51F中的检测部异常状态判定部83判定检测值正常还是异常。
作为主要的判定方法,采用由于断线或物理破损导致的检测值不可获得而判断为异常(故障)的方法、由于噪声这样的电或热使检测值成为异常值进而连续获得该异常值而判定为异常的方法等。另外,如果为暂时的误检测,则能够利用滤波器等进行应对。
第1控制部81a的控制方法是对能动处置器械4F的前端部的位置、姿势进行控制的方法,操作者通过第1操作输入部85b输入期望的位置、姿势。
于是,第1控制部81a根据输入值计算各关节的弯曲角度,对与计算结果对应的构成驱动部73F的马达的旋转量进行控制。在采用该方法的情况下,能够直观地操作多自由度的能动处置器械。
这里,在设于某个关节中的传感器产生故障的情况下,检测部异常状态判定部83判定为异常,对控制部切换部84和提示部86发送表示异常状态的信号,控制部切换部84对第1控制部81a、81b发送表示传感器处于异常状态的信号。
此时,第1控制部81a在各设备起动下次动作之前的期间内,停止能动处置器械4F的动作,不允许从第1操作输入部85a进行输入。提示部86经由处理器7E而利用监视器8对操作者提示表示传感器产生故障的信号。另外,除了显示以外,提示方法也可以是声音等警告手段。
在对操作者提示信息后,控制部切换部84从第1控制部81a切换为第2控制部81b进行控制动作,对提示部86发送表示用于指示输入操作从第1操作输入部85a切换为第2操作输入部85b的信号,提示部86对操作者进行提示。
另外,控制部的切换也可以是基于来自操作者的切换指示的方法。并且,也可以是如下方法:操作输入部不是2台,在1台操作输入部中搭载多个输入模式而进行切换。
在操作者从第2操作输入部85b开始进行操作输入指示时,第2控制部81b开始进行能动处置器械4F的控制。如上所述,第2控制部81b的控制方法是独立控制能动处置器械4F的各关节的方法,在一部分关节的传感器产生故障的情况下,能够仅对传感器正常的关节进行控制。
另外,在传感器全部产生故障的情况下,也可以实施使用构成驱动量检测部74F的编码器值的控制方法。
根据以上方法,在搭载于前端部中的传感器产生故障的情况下,能够对能动处置器械4F进行控制。
也可以采用对图15的内窥镜系统1F的结构的一部分进行变更后的图16的内窥镜系统1G。
该内窥镜系统1G在图15的内窥镜系统1F中,通过控制部81控制驱动部73F。并且,驱动部73F与驱动状态计算部91连接,该驱动状态计算部91计算作为该驱动部73F的驱动状态的驱动输出。驱动量检测部74F和检测部82与状态检测部92连接。控制部81与操作输入部85连接。
在该内窥镜系统1G中,使用构成搭载于能动处置器械4F的前端部的检测部82的传感器检测值,检测能动处置器械4F的线破断或对前端部施加的外力,预测马达故障,根据检测结果对能动处置器械4F进行控制。
控制部81根据在各关节中设置的传感器信息进行能动处置器械4F的控制。另外,在马达控制中,如果还利用编码器的检测值进行控制,则能够提高精度。
接着,使用图17对能动处置器械4F的状态检测方法进行说明。如步骤S41所示,对于操作输入部85的输入,根据该输入值使驱动部73F的马达进行动作(步骤S42)。驱动量检测部74F取得与马达的驱动量对应的编码器值(步骤S43)。
并且,在马达进行动作时,驱动状态计算部91计算马达的输出转矩,与能动处置器械4F的通常动作时的输出转矩、即适当的输出转矩值进行比较(步骤S44)。
在输出转矩大于通常时的输出转矩时,状态检测部92检测到对马达施加的负荷较大(更具体而言,当继续该负荷状态时,马达可能损伤)(步骤S45)。
状态检测部92在检测到所述两种状态的情况下,对控制部81发送表示所述状态的信号,控制部81预测马达的烧损,限制针对马达(驱动部)的输出(步骤S46)。限制方法具有转矩控制、电流控制、电压控制等。
进而,状态检测部92按照如下方式检测两种状态。
第一状态是指如下状态:由于能动处置器械4F的前端部与体内的脏器等接触而对能动处置器械4F的动作造成负担,第二状态是指如下状态:在介于马达与关节之间的能动处置器械4F的插入部内施加负荷。
通过状态检测部92对设于关节中的传感器的检测值和马达的旋转量进行比较,从而进行这些状态的判别。然后,状态检测部92判定前端部的检测值是否适当(步骤S47)。
在该判定中为不适当的情况下,状态检测部92判定(检测)为在插入部中施加了负荷(步骤S48)。另一方面,在上述判定中为检测值适当的情况下,判定为在动作状态下承受外力(步骤S49)。
并且,在上述步骤S44的判定中为适当的输出转矩值的情况下,状态检测部92判定是否能够通过传感器取得前端部的检测值(传感器值)(步骤S50)。
在状态检测部92无法正常取得前端部的传感器值的情况下,状态检测部92判断为传感器故障或断线(步骤S51)。并且,状态检测部92对控制部81发送表示该状态的信号。
控制部81在接受到所述信号时,针对马达进行输出停止或输出限制。
另外,关于所述传感器产生故障时的控制方法,除了停止和限制以外,也可以是如下方法:如使用马达的旋转量的控制那样,不使用前端部的传感器值,具有不同的控制块并进行切换。
并且,在马达烧损的预测时,在取得前端部的传感器检测值时,也进行该判定。
状态检测部92在判定为能够正常取得检测部检测到的值时,判定所取得的检测值是否适当(步骤S52)。关于判定方法,通过与之前状态的检测值的比较、与其他传感器的比较等来进行。
在检测值适当的情况下,状态检测部92判定为能动处置器械4F正常动作,继续进行控制(步骤S53)。
另一方面,状态检测部92在判定为不适当的情况下,根据检测结果检测下述三个状态,将检测结果送到控制部81。
首先,在尽管检测马达的旋转量但是检测部82的检测结果没有变化的情况下,判断为没有对前端部的关节传递动力而处于线破断的状态(步骤S54)。
接着,在检测部82的检测结果是与能动处置器械4F的关节的动作没有关联性的值、且连续取得该值时,状态检测部92判断为处于传感器发生电气故障的状态(步骤S55)。
最后,针对被输入的位置或姿势,在尽管进行驱动的马达和关节维持输入状态但是此后关节的检测值发生变化的情况下,状态检测部92判断为处于前端部的关节承受脏器的按压等的外力的状态(步骤S56)。
在接受到这些状态信号时,控制部81进行以下控制。
(线的破断检测时)使马达的动作停止或仅使线没有破断的关节进行动作。(传感器故障时)使马达动作停止。(外力检测时)限制马达的输出。
如上所述,不仅进行传感器的故障检测,还以控制的方式检测以往由操作者识别的有无线的破断或外力导致的影响,由此,能够提高能动处置器械4F的控制的可靠性,减轻手术医生等的操作作业的劳力和时间,能够提高操作性。
另外,在例如图16所示的内窥镜系统1G中,也可以构成为,使能动处置器械4F(或处置机械手)与其他设备进行通信,并且检测能动处置器械4F与其他设备的正常/异常状态,控制部81进行与正常/异常状态对应的控制。
并且,该情况下,作为其他设备,例如也可以构成为具有处理器7(或成像装置)、高频处置器械等能量器件、气腹器。而且,也可以如图18那样,根据检测到异常状态的设备,控制部81对构成内窥镜系统的各设备的停止、暂时停止、或继续动作等动作进行控制。
如果这样进行控制,则即使在手术中处于异常状态时,也能够针对整体进行与该异常状态对应的适当设定,易于顺畅地进行适当操作。
另外,通过对上述实施方式等进行部分组合等而构成的实施方式也属于本发明。并且,不变更主旨的范围内的变形例也属于本发明。
本申请以2010年9月14日在日本申请的日本特愿2010-205896号为优先权主张的基础进行申请,上述公开内容被引用到本申请说明书、权利要求书和附图中。

Claims (12)

1.一种内窥镜系统,其特征在于,
该内窥镜系统具有:
摄像单元,其设置在内窥镜中并进行摄像;
判定单元,其判定在所述摄像单元的摄像区域内是否存在特定观察对象物;
识别单元,其判定是否处于能够从所述摄像单元拍摄的所述摄像区域内的摄像图像中作为图像识别出所述特定观察对象物的状态;以及
视野不良判定输出单元,其在所述判定单元判定为所述特定观察对象物存在于所述摄像区域内、且所述识别单元无法作为图像识别出所述特定观察对象物的情况下,判定为所述摄像单元视野不良,输出视野不良的判定结果。
2.根据权利要求1所述的内窥镜系统,其特征在于,
所述内窥镜系统还具有告知单元,该告知单元告知所述视野判定输出单元判定的所述视野不良的判定结果。
3.根据权利要求1所述的内窥镜系统,其特征在于,
所述特定观察对象物是处置器械的前端部,
所述内窥镜系统还具有控制单元,该控制单元根据所述视野不良的判定结果,进行停止或限制所述处置器械的动作的控制。
4.根据权利要求1所述的内窥镜系统,其特征在于,
所述内窥镜系统还具有障碍物估计单元,在所述视野判定输出单元输出所述视野不良的判定结果的情况下,该障碍物估计单元估计产生所述视野不良的障碍物或障碍物的种类。
5.根据权利要求4所述的内窥镜系统,其特征在于,
所述内窥镜系统还具有告知单元,该告知单元告知由所述障碍物估计单元估计出的障碍物或障碍物的种类的信息。
6.根据权利要求4所述的内窥镜系统,其特征在于,
所述特定观察对象物是处置器械的前端部,
所述内窥镜系统还具有对所述处置器械的动作进行控制的控制单元,根据由所述障碍物估计单元估计出的障碍物或障碍物的种类,所述控制单元进行停止或限制所述处置器械的动作的控制。
7.根据权利要求4所述的内窥镜系统,其特征在于,
所述特定观察对象物是通过驱动部使多个关节转动的能动处置器械的前端部,
所述内窥镜系统还具有对所述能动处置器械的所述驱动部的动作进行控制的控制单元,根据由所述障碍物估计单元估计出的障碍物或障碍物的种类,所述控制单元进行停止或限制所述能动处置器械的所述驱动部的动作的控制。
8.根据权利要求7所述的内窥镜系统,其特征在于,
在所述能动处置器械使用从能量供给装置供给的能量进行处置的情况下,根据由所述障碍物估计单元估计出的障碍物或障碍物的种类,所述控制单元进行如下控制:停止或限制所述能动处置器械的所述驱动部的动作,并且,停止能量供给装置的能量供给的动作。
9.根据权利要求8所述的内窥镜系统,其特征在于,
在估计为所述障碍物是烟或雾的情况下、和估计为所述障碍物是烟或雾以外的情况下,所述控制单元变更针对所述能动处置器械的控制内容。
10.根据权利要求8所述的内窥镜系统,其特征在于,
在估计为所述障碍物是烟或雾的情况下,所述控制单元对所述能动处置器械进行控制,以减慢所述驱动部响应于指示操作而进行驱动的动作的响应速度,在估计为所述障碍物是烟或雾以外的情况下,所述控制单元对所述能动处置器械进行控制,以停止所述驱动部进行驱动的动作。
11.根据权利要求8所述的内窥镜系统,其特征在于,
在估计为所述障碍物是烟或雾的情况下,所述控制单元对所述能动处置器械进行控制,以减慢对设于所述能动处置器械的前端且用于进行处置的处置部进行驱动的动作的响应速度,在估计为所述障碍物是烟或雾以外的情况下,所述控制单元对所述能动处置器械进行控制,以停止所述处置部的动作,并且使处置部后退而收纳在处置部收纳部内。
12.一种视野不良判定方法,其特征在于,
该视野不良判定方法具有以下步骤:
显示步骤,在该步骤中,显示通过摄像部对体腔内的观察对象部位进行摄像而得到的摄像图像作为内窥镜图像;
处置器械位置取得步骤,在该步骤中,位置判定部取得用于对所述观察对象部位进行处置的处置器械的前端部的位置;
位置判定步骤,在该步骤中,位置判定部判定所述处置器械的前端部的位置是否位于作为所述摄像图像的区域的摄像区域的内部;
识别步骤,在该步骤中,图像识别部进行如下的图像识别:是否能够通过对所述摄像图像的图像处理而作为所述摄像区域内部的图像识别出所述处置器械的前端部;以及
视野不良判定输出步骤,在该步骤中,在通过所述位置判定步骤判定为所述处置器械的前端部位于所述摄像区域内、且通过所述识别步骤得到无法作为所述摄像区域内的图像识别出所述处置器械的前端侧的识别结果的情况下,视野不良判定部判定为视野不良,输出视野不良的判定结果。
CN201180017780.5A 2010-09-14 2011-08-17 内窥镜系统和视野不良判定方法 Active CN102834043B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010205896 2010-09-14
JP2010-205896 2010-09-14
PCT/JP2011/068626 WO2012035923A1 (ja) 2010-09-14 2011-08-17 内視鏡システム及び視界不良判定方法

Publications (2)

Publication Number Publication Date
CN102834043A true CN102834043A (zh) 2012-12-19
CN102834043B CN102834043B (zh) 2015-07-01

Family

ID=45831397

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180017780.5A Active CN102834043B (zh) 2010-09-14 2011-08-17 内窥镜系统和视野不良判定方法

Country Status (5)

Country Link
US (1) US8497898B2 (zh)
EP (1) EP2532299B1 (zh)
JP (1) JP5065538B2 (zh)
CN (1) CN102834043B (zh)
WO (1) WO2012035923A1 (zh)

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105377105A (zh) * 2013-10-11 2016-03-02 奥林巴斯株式会社 内窥镜系统
CN106455920A (zh) * 2014-09-05 2017-02-22 奥林巴斯株式会社 内窥镜系统
CN107431784A (zh) * 2015-02-18 2017-12-01 索尼公司 在解剖手术期间检测烟的系统和方法
CN108778086A (zh) * 2016-04-18 2018-11-09 奥林巴斯株式会社 控制装置和插入装置
CN108882966A (zh) * 2016-12-28 2018-11-23 奥瑞斯健康公司 用于柔性器械插入的装置
CN109640782A (zh) * 2017-03-10 2019-04-16 株式会社Mpi 诊察视野确保式视频内窥镜
CN110392546A (zh) * 2017-03-07 2019-10-29 索尼公司 信息处理设备、辅助系统和信息处理方法
CN110831485A (zh) * 2017-03-21 2020-02-21 斯特赖克公司 使外科手术干预自动化的方法和系统
US10903725B2 (en) 2016-04-29 2021-01-26 Auris Health, Inc. Compact height torque sensing articulation axis assembly
CN112566538A (zh) * 2018-08-17 2021-03-26 富士胶片株式会社 内窥镜系统
US11026758B2 (en) 2017-06-28 2021-06-08 Auris Health, Inc. Medical robotics systems implementing axis constraints during actuation of one or more motorized joints
US11213363B2 (en) 2013-03-14 2022-01-04 Auris Health, Inc. Catheter tension sensing
US11278703B2 (en) 2014-04-21 2022-03-22 Auris Health, Inc. Devices, systems, and methods for controlling active drive systems
US11350998B2 (en) 2014-07-01 2022-06-07 Auris Health, Inc. Medical instrument having translatable spool
US11376085B2 (en) 2013-03-15 2022-07-05 Auris Health, Inc. Remote catheter manipulator
US11382650B2 (en) 2015-10-30 2022-07-12 Auris Health, Inc. Object capture with a basket
US11439419B2 (en) 2019-12-31 2022-09-13 Auris Health, Inc. Advanced basket drive mode
US11452844B2 (en) 2013-03-14 2022-09-27 Auris Health, Inc. Torque-based catheter articulation
US11504195B2 (en) 2013-03-15 2022-11-22 Auris Health, Inc. Active drive mechanism for simultaneous rotation and translation
US11510736B2 (en) 2017-12-14 2022-11-29 Auris Health, Inc. System and method for estimating instrument location
US11517717B2 (en) 2013-03-14 2022-12-06 Auris Health, Inc. Active drives for robotic catheter manipulators
US11534249B2 (en) 2015-10-30 2022-12-27 Auris Health, Inc. Process for percutaneous operations
US11564759B2 (en) 2016-08-31 2023-01-31 Auris Health, Inc. Length conservative surgical instrument
US11571229B2 (en) 2015-10-30 2023-02-07 Auris Health, Inc. Basket apparatus
US11660153B2 (en) 2013-03-15 2023-05-30 Auris Health, Inc. Active drive mechanism with finite range of motion
US11690977B2 (en) 2014-05-15 2023-07-04 Auris Health, Inc. Anti-buckling mechanisms for catheters
US11737845B2 (en) 2019-09-30 2023-08-29 Auris Inc. Medical instrument with a capstan
US11771309B2 (en) 2016-12-28 2023-10-03 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
US11771521B2 (en) 2015-09-09 2023-10-03 Auris Health, Inc. Instrument device manipulator with roll mechanism
US11779414B2 (en) 2013-03-14 2023-10-10 Auris Health, Inc. Active drive for robotic catheter manipulators
US11839439B2 (en) 2017-12-11 2023-12-12 Auris Health, Inc. Systems and methods for instrument based insertion architectures
US11864842B2 (en) 2018-09-28 2024-01-09 Auris Health, Inc. Devices, systems, and methods for manually and robotically driving medical instruments
US11896330B2 (en) 2019-08-15 2024-02-13 Auris Health, Inc. Robotic medical system having multiple medical instruments
US11950872B2 (en) 2019-12-31 2024-04-09 Auris Health, Inc. Dynamic pulley system

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130172679A1 (en) * 2011-07-01 2013-07-04 Fujifilm Corporation Endoscope insertion assisting device
US9452276B2 (en) 2011-10-14 2016-09-27 Intuitive Surgical Operations, Inc. Catheter with removable vision probe
US20130303944A1 (en) * 2012-05-14 2013-11-14 Intuitive Surgical Operations, Inc. Off-axis electromagnetic sensor
US10238837B2 (en) 2011-10-14 2019-03-26 Intuitive Surgical Operations, Inc. Catheters with control modes for interchangeable probes
US9131957B2 (en) 2012-09-12 2015-09-15 Gyrus Acmi, Inc. Automatic tool marking
WO2014157480A1 (ja) * 2013-03-29 2014-10-02 富士フイルム株式会社 内視鏡下外科手術装置
EP2926714A4 (en) 2013-06-18 2016-07-13 Olympus Corp ENDOSCOPE SYSTEM AND METHOD OF CONTROLLING ENDOSCOPE SYSTEM
EP2982290A4 (en) * 2013-08-07 2017-01-18 Olympus Corporation Endoscope system and endoscope system operation method
JP2017063801A (ja) * 2014-02-06 2017-04-06 オリンパス株式会社 挿入装置
DE102014007909A1 (de) 2014-05-27 2015-12-03 Carl Zeiss Meditec Ag Chirurgisches Mikroskop
WO2015194317A1 (ja) * 2014-06-19 2015-12-23 オリンパス株式会社 内視鏡装置
JP6432770B2 (ja) 2014-11-12 2018-12-05 ソニー株式会社 画像処理装置、画像処理方法、並びにプログラム
DE112015006562T5 (de) * 2015-06-29 2018-03-22 Olympus Corporation Bildverarbeitungsvorrichtung, Endoskopsystem, Bildverarbeitungsverfahren und Bildverarbeitungsprogramm
JP6834184B2 (ja) * 2016-06-16 2021-02-24 ソニー株式会社 情報処理装置、情報処理装置の作動方法、プログラム及び医療用観察システム
JP2020518342A (ja) * 2017-06-19 2020-06-25 ボストン サイエンティフィック サイムド,インコーポレイテッドBoston Scientific Scimed,Inc. 自動流体管理システム
JP6889282B2 (ja) * 2017-12-22 2021-06-18 富士フイルム株式会社 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム
JP6957424B2 (ja) * 2018-08-16 2021-11-02 富士フイルム株式会社 内視鏡の制御装置、内視鏡装置、内視鏡の状態識別方法、内視鏡の状態識別プログラム
US11715199B2 (en) 2019-12-31 2023-08-01 Stryker Corporation Systems and methods for surgical smoke management
EP3861920A1 (de) * 2020-02-05 2021-08-11 Erbe Elektromedizin GmbH Chirurgisches instrument mit einer positionserkennungseinrichtung
JPWO2022044617A1 (zh) * 2020-08-24 2022-03-03
US11830602B2 (en) 2020-10-02 2023-11-28 Cilag Gmbh International Surgical hub having variable interconnectivity capabilities
US11748924B2 (en) 2020-10-02 2023-09-05 Cilag Gmbh International Tiered system display control based on capacity and user operation
US11877897B2 (en) 2020-10-02 2024-01-23 Cilag Gmbh International Situational awareness of instruments location and individualization of users to control displays
US12016566B2 (en) 2020-10-02 2024-06-25 Cilag Gmbh International Surgical instrument with adaptive function controls
US11883052B2 (en) 2020-10-02 2024-01-30 Cilag Gmbh International End effector updates
US20220104765A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Surgical visualization and particle trend analysis system
US12064293B2 (en) 2020-10-02 2024-08-20 Cilag Gmbh International Field programmable surgical visualization system
US11963683B2 (en) 2020-10-02 2024-04-23 Cilag Gmbh International Method for operating tiered operation modes in a surgical system
US11672534B2 (en) 2020-10-02 2023-06-13 Cilag Gmbh International Communication capability of a smart stapler
US11883022B2 (en) 2020-10-02 2024-01-30 Cilag Gmbh International Shared situational awareness of the device actuator activity to prioritize certain aspects of displayed information
US20220104713A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Tiered-access surgical visualization system
US11877792B2 (en) 2020-10-02 2024-01-23 Cilag Gmbh International Smart energy combo control options
US11992372B2 (en) 2020-10-02 2024-05-28 Cilag Gmbh International Cooperative surgical displays
US11911030B2 (en) 2020-10-02 2024-02-27 Cilag Gmbh International Communication capability of a surgical device with component
US20220117673A1 (en) * 2020-10-19 2022-04-21 Arthur C. McKinley EndoInspect Apparatus, System and Method
EP4398782A1 (en) * 2021-09-07 2024-07-17 Intuitive Surgical Operations, Inc. Selective use of different video streams generated by an imaging device to perform an image-based operation
CN118510436A (zh) * 2022-02-04 2024-08-16 奥林巴斯株式会社 医疗用系统、通知方法以及医疗用系统的工作方法
JPWO2023166742A1 (zh) * 2022-03-04 2023-09-07

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08336497A (ja) * 1995-06-09 1996-12-24 Olympus Optical Co Ltd 体腔内観察装置
JPH11318909A (ja) * 1998-05-14 1999-11-24 Olympus Optical Co Ltd 煙除去システム
JP2005124756A (ja) * 2003-10-22 2005-05-19 Olympus Corp 内視鏡用画像処理装置
US20090088634A1 (en) * 2007-09-30 2009-04-02 Intuitive Surgical, Inc. Tool tracking systems and methods for image guided surgery
CN101404924A (zh) * 2006-03-28 2009-04-08 奥林巴斯医疗株式会社 医疗用图像处理装置和医疗用图像处理方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3310349B2 (ja) * 1992-09-22 2002-08-05 オリンパス光学工業株式会社 内視鏡装置
JPH09149876A (ja) * 1995-11-30 1997-06-10 Olympus Optical Co Ltd 内視鏡装置
JPH09266882A (ja) * 1996-04-02 1997-10-14 Olympus Optical Co Ltd 内視鏡装置
JPH10243919A (ja) * 1997-03-07 1998-09-14 Olympus Optical Co Ltd 内視鏡装置
JP3762512B2 (ja) * 1997-04-03 2006-04-05 オリンパス株式会社 内視鏡装置
JPH11309156A (ja) * 1998-04-27 1999-11-09 Olympus Optical Co Ltd 排煙装置
WO2006062163A1 (ja) 2004-12-10 2006-06-15 Olympus Corporation 医用画像処理方法
JP2006166939A (ja) * 2004-12-10 2006-06-29 Olympus Corp 画像処理方法
US7860555B2 (en) 2005-02-02 2010-12-28 Voyage Medical, Inc. Tissue visualization and manipulation system
WO2007033326A2 (en) * 2005-09-14 2007-03-22 Welch Allyn, Inc. Medical apparatus comprising and adaptive lens
JP5084139B2 (ja) 2005-12-12 2012-11-28 オリンパスメディカルシステムズ株式会社 内視鏡装置
JP5131951B2 (ja) 2006-02-21 2013-01-30 富士フイルム株式会社 体腔内観察装置
JP2008301968A (ja) 2007-06-06 2008-12-18 Olympus Medical Systems Corp 内視鏡画像処理装置
JP2009131466A (ja) * 2007-11-30 2009-06-18 Olympus Medical Systems Corp 排煙制御装置、排煙装置、及び内視鏡手術システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08336497A (ja) * 1995-06-09 1996-12-24 Olympus Optical Co Ltd 体腔内観察装置
JPH11318909A (ja) * 1998-05-14 1999-11-24 Olympus Optical Co Ltd 煙除去システム
JP2005124756A (ja) * 2003-10-22 2005-05-19 Olympus Corp 内視鏡用画像処理装置
CN101404924A (zh) * 2006-03-28 2009-04-08 奥林巴斯医疗株式会社 医疗用图像处理装置和医疗用图像处理方法
US20090088634A1 (en) * 2007-09-30 2009-04-02 Intuitive Surgical, Inc. Tool tracking systems and methods for image guided surgery

Cited By (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11452844B2 (en) 2013-03-14 2022-09-27 Auris Health, Inc. Torque-based catheter articulation
US11779414B2 (en) 2013-03-14 2023-10-10 Auris Health, Inc. Active drive for robotic catheter manipulators
US11517717B2 (en) 2013-03-14 2022-12-06 Auris Health, Inc. Active drives for robotic catheter manipulators
US11213363B2 (en) 2013-03-14 2022-01-04 Auris Health, Inc. Catheter tension sensing
US11504195B2 (en) 2013-03-15 2022-11-22 Auris Health, Inc. Active drive mechanism for simultaneous rotation and translation
US11376085B2 (en) 2013-03-15 2022-07-05 Auris Health, Inc. Remote catheter manipulator
US11660153B2 (en) 2013-03-15 2023-05-30 Auris Health, Inc. Active drive mechanism with finite range of motion
CN105377105A (zh) * 2013-10-11 2016-03-02 奥林巴斯株式会社 内窥镜系统
US11278703B2 (en) 2014-04-21 2022-03-22 Auris Health, Inc. Devices, systems, and methods for controlling active drive systems
US11690977B2 (en) 2014-05-15 2023-07-04 Auris Health, Inc. Anti-buckling mechanisms for catheters
US11350998B2 (en) 2014-07-01 2022-06-07 Auris Health, Inc. Medical instrument having translatable spool
CN106455920A (zh) * 2014-09-05 2017-02-22 奥林巴斯株式会社 内窥镜系统
CN107431784A (zh) * 2015-02-18 2017-12-01 索尼公司 在解剖手术期间检测烟的系统和方法
CN107431784B (zh) * 2015-02-18 2020-02-18 索尼公司 在解剖手术期间检测烟的系统和方法
US11771521B2 (en) 2015-09-09 2023-10-03 Auris Health, Inc. Instrument device manipulator with roll mechanism
US11571229B2 (en) 2015-10-30 2023-02-07 Auris Health, Inc. Basket apparatus
US11559360B2 (en) 2015-10-30 2023-01-24 Auris Health, Inc. Object removal through a percutaneous suction tube
US11382650B2 (en) 2015-10-30 2022-07-12 Auris Health, Inc. Object capture with a basket
US11534249B2 (en) 2015-10-30 2022-12-27 Auris Health, Inc. Process for percutaneous operations
CN108778086A (zh) * 2016-04-18 2018-11-09 奥林巴斯株式会社 控制装置和插入装置
CN108778086B (zh) * 2016-04-18 2021-04-23 奥林巴斯株式会社 控制装置和插入装置
US10903725B2 (en) 2016-04-29 2021-01-26 Auris Health, Inc. Compact height torque sensing articulation axis assembly
US11564759B2 (en) 2016-08-31 2023-01-31 Auris Health, Inc. Length conservative surgical instrument
CN108882966B (zh) * 2016-12-28 2022-04-12 奥瑞斯健康公司 用于柔性器械插入的装置
US11771309B2 (en) 2016-12-28 2023-10-03 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
CN108882966A (zh) * 2016-12-28 2018-11-23 奥瑞斯健康公司 用于柔性器械插入的装置
CN110392546A (zh) * 2017-03-07 2019-10-29 索尼公司 信息处理设备、辅助系统和信息处理方法
CN109640782B (zh) * 2017-03-10 2022-04-01 株式会社Mpi 诊察视野确保式视频内窥镜
CN109640782A (zh) * 2017-03-10 2019-04-16 株式会社Mpi 诊察视野确保式视频内窥镜
CN110831485A (zh) * 2017-03-21 2020-02-21 斯特赖克公司 使外科手术干预自动化的方法和系统
US11026758B2 (en) 2017-06-28 2021-06-08 Auris Health, Inc. Medical robotics systems implementing axis constraints during actuation of one or more motorized joints
US11832907B2 (en) 2017-06-28 2023-12-05 Auris Health, Inc. Medical robotics systems implementing axis constraints during actuation of one or more motorized joints
US11839439B2 (en) 2017-12-11 2023-12-12 Auris Health, Inc. Systems and methods for instrument based insertion architectures
US11510736B2 (en) 2017-12-14 2022-11-29 Auris Health, Inc. System and method for estimating instrument location
CN112566538A (zh) * 2018-08-17 2021-03-26 富士胶片株式会社 内窥镜系统
US11864842B2 (en) 2018-09-28 2024-01-09 Auris Health, Inc. Devices, systems, and methods for manually and robotically driving medical instruments
US11896330B2 (en) 2019-08-15 2024-02-13 Auris Health, Inc. Robotic medical system having multiple medical instruments
US11737845B2 (en) 2019-09-30 2023-08-29 Auris Inc. Medical instrument with a capstan
US11439419B2 (en) 2019-12-31 2022-09-13 Auris Health, Inc. Advanced basket drive mode
US11950872B2 (en) 2019-12-31 2024-04-09 Auris Health, Inc. Dynamic pulley system

Also Published As

Publication number Publication date
JPWO2012035923A1 (ja) 2014-02-03
EP2532299A4 (en) 2013-01-23
CN102834043B (zh) 2015-07-01
EP2532299B1 (en) 2014-11-05
JP5065538B2 (ja) 2012-11-07
EP2532299A1 (en) 2012-12-12
US20120182409A1 (en) 2012-07-19
WO2012035923A1 (ja) 2012-03-22
US8497898B2 (en) 2013-07-30

Similar Documents

Publication Publication Date Title
CN102834043A (zh) 内窥镜系统和视野不良判定方法
CN101652092B (zh) 内窥镜系统、摄像系统以及图像处理装置
CN106231980B (zh) 内窥镜装置
US20220095903A1 (en) Augmented medical vision systems and methods
US9125560B2 (en) Endoscope shape detecting apparatus
CN104114077B (zh) 图像处理装置和图像处理方法
CN102626340B (zh) 医疗操作机系统
CA2523302C (en) Image display apparatus, image display method, and image display program
EP2583616B1 (en) Endoscope
US9538907B2 (en) Endoscope system and actuation method for displaying an organ model image pasted with an endoscopic image
JP4656988B2 (ja) 内視鏡挿入形状解析装置および、内視鏡挿入形状解析方法
US8036615B2 (en) Portable simplified image display apparatus and receiving system
US20060202998A1 (en) Display processor
CN103140159A (zh) 医疗用控制装置
CN107548291A (zh) 内窥镜管理系统、内窥镜装置、管理内窥镜装置的管理装置以及内窥镜装置的管理方法
CN101252874B (zh) 移动式简易图像显示装置和接收系统
CN114430668A (zh) 内窥镜控制装置、内窥镜控制方法及程序
JP2007307395A (ja) 画像表示装置、画像表示方法および画像表示プログラム
CN209059133U (zh) 基于图像识别的可控胶囊式内窥镜诊查系统
JP7368074B2 (ja) 挿管装置
JP4276747B2 (ja) 内視鏡装置
JP2007307396A (ja) 画像表示装置、画像表示方法および画像表示プログラム
KR102313319B1 (ko) 증강현실 대장 내시경 시스템 및 이를 이용한 모니터링 방법
CN102319052B (zh) 摄像系统、胶囊型医疗系统以及图像处理装置
CN112969402A (zh) 内窥镜系统以及用于内窥镜系统的图像处理装置和图像处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151116

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan, Japan

Patentee before: Olympus Medical Systems Corp.