CN110418596A - 测量辅助装置、内窥镜系统及处理器 - Google Patents
测量辅助装置、内窥镜系统及处理器 Download PDFInfo
- Publication number
- CN110418596A CN110418596A CN201880017670.0A CN201880017670A CN110418596A CN 110418596 A CN110418596 A CN 110418596A CN 201880017670 A CN201880017670 A CN 201880017670A CN 110418596 A CN110418596 A CN 110418596A
- Authority
- CN
- China
- Prior art keywords
- measurement
- image
- index
- luminous point
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00055—Operational features of endoscopes provided with output arrangements for alerting the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1076—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions inside body cavities, e.g. using catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6844—Monitoring or controlling distance between sensor and tissue
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
- A61B2090/061—Measuring instruments not otherwise provided for for measuring dimensions, e.g. length
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
- A61B2090/067—Measuring instruments not otherwise provided for for measuring angles
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Veterinary Medicine (AREA)
- Molecular Biology (AREA)
- Public Health (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Signal Processing (AREA)
- Dentistry (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
本发明的一方式所涉及的测量辅助装置中,在光点位置附近显示指标图形(标记)时,在基于所显示的指标图形的特定区域的测量有效的情况和无效的情况下以不同的方式显示指标图形,因此通过指标图形的显示方式能够轻松地掌握测量的有效性,由此能够轻松地进行有效的测量。并且,上述方式中显示根据光点的位置设定的大小的指标图形,因此无需进行距离测量,结构简单且处理负荷低。并且,在光点的位置附近显示指标图形,因此光点位置与标记位置的偏移少,作为指标准确,且不在大范围显示指标图形,因此处理负荷少。
Description
技术领域
本发明涉及一种测量辅助装置、内窥镜系统及处理器(内窥镜系统的处理器),尤其涉及一种利用测量辅助光测量受检体的大小的测量辅助装置、内窥镜系统及处理器。
背景技术
内窥镜等测量装置的领域中,进行受检体为止的距离的测量或受检体的长度、大小的计算。例如,专利文献1中,记载有利用立体摄像机测量被摄体距离,根据被摄体距离和内窥镜的视场角,计算成为被摄体大小的标准的记号的大小,与被摄体图像一同显示记号,通过该记号能够得知被摄体的大小。
并且,专利文献2中记载有利用测定光求出观察部(观察对象)为止的距离及观察部的大小的技术。专利文献2中,通过相对于照明光的照射方向倾斜地照射测定光,测量从内窥镜插入部的末端至观察部为止的距离及观察部的位置的分辨率的提高。并且,专利文献2中记载有在所获取的图像上重叠显示尺度图像来用于测量。
现有技术文献
专利文献
专利文献1:日本特开2008-122759号公报
专利文献2:日本特开平7-136101号公报
发明内容
发明要解决的技术课题
上述专利文献1中,通过立体摄像机测量距离,因此需要2台相机,内窥镜末端部变大,因此对受检体的负担变高。而且,进行距离测量并根据其结果计算记号的大小,因此系统结构及处理变得复杂。
利用内窥镜进行观察时,被摄体上存在凹凸的情况较多,此时,摄像光学系统并不会正对被摄体。因此,在测量光的光点所在的位置,测量用指标作为大小的指标最可靠,越远离光点的位置,则作为指标变得越不准确,因此若如专利文献2那样使尺度图像向任意的位置及角度移动、旋转,则作为指标容易变得不准确。并且,内窥镜使用广角透镜的情况较多,此时图像的周边等中畸变像差大,很难进行有效的测量(准确的测量)。而且,若拍摄距离近,则有时指标图形(标记、尺度图形等)超出显示范围,并且若拍摄距离远,则在图像上指标图形及测量对象变小,任一情况下均很难进行有效的测量。
如上所述,根据测量情况有时测量无效,但在以往的技术中未考虑到这种情况,很难进行有效的测量。
本发明是鉴于这种情况而完成的,其目的在于提供一种能够轻松地进行有效的测量的测量辅助装置、内窥镜系统及处理器(内窥镜系统的处理器)。
用于解决技术课题的手段
为了实现上述目的,本发明的一方式所涉及的测量辅助装置具备:头部,射出测量辅助光;摄像部,经由摄像光学系统及摄像元件拍摄通过测量辅助光形成有光点的被摄体图像;测量部,测量图像中的光点的位置;及显示控制部,在被摄体图像中在光点的位置附近显示指标图形,所述指标图形表示被摄体中的特定区域的实际尺寸,且为根据图像中的光点的位置设定的大小的指标图形,头部射出测量辅助光,所述测量辅助光在将测量辅助光的光轴投影到包含摄像光学系统的光轴的平面时,相对于摄像光学系统的光轴具有非0度的倾角且横穿摄像光学系统的视场角,显示控制部在所测量的光点的位置附近显示指标图形时,在基于所显示的指标图形的特定区域的测量有效的情况和无效的情况下以不同的方式显示指标图形。
根据本方式,在光点位置附近显示指标图形(标记)时,在基于所显示的指标图形的特定区域的测量有效的情况和无效的情况下以不同的方式显示指标图形,因此通过指标图形的显示方式能够轻松地掌握测量的有效性,由此能够轻松地进行有效的测量。并且,第1方式中显示根据光点的位置设定的大小的指标图形(标记),因此无需进行距离测量,结构简单且处理负荷低。并且,在光点的位置附近显示指标图形(例如,以光点的位置作为中心显示指标图形),因此光点位置与标记位置的偏移少,作为指标准确,且不在大范围显示指标图形,因此处理负荷少。
在本方式及后述的各方式中,被摄体图像及指标图形能够显示于各种监视器、显示器等显示装置中。另外,在本方式中,图像中的光点的位置与拍摄距离对应,因此光点位置不同时,即使实际尺寸相同,所显示的图像中的标记的显示尺寸不同。
并且,根据本方式,测量辅助光的光轴在投影到包含摄像光学系统的光轴的平面时,相对于摄像光学系统的光轴具有非0度的倾角且横穿摄像光学系统的视场角,因此通过适当地设定倾角,在观察距离短的情况下,也能够使测量辅助光进入摄像光学系统的视野内。而且,测量辅助光的光轴在投影到包含摄像光学系统的光轴的平面时,相对于摄像光学系统的光轴具有非0度的倾角,因此相对于观察距离的变化的光点的位置变化的灵敏度高,且测量精度高。
如此,根据本发明的一方式所涉及的测量辅助装置,能够轻松地进行有效的测量。另外,在本方式中,指标图形的显示可以实时(按获取到光点图像的帧、或者针对多帧进行1次)进行,也可以离线进行(只要获取形成有光点的图像,则能够事后进行指标图形的显示)。
本发明的其他方式所涉及的测量辅助装置在第1方式中,当光点的位置在对图像设定的能够测量区域的内侧时,显示控制部判断为基于指标图形的特定区域的测量有效。第2方式表示测量有效性的判断基准的一方式,“能够测量区域”例如能够设定于光点的移动轨迹的一部分(视场角的中央部分等)。
第3方式所涉及的测量辅助装置在第1或第2方式中,根据光点的位置计算出的图像的拍摄距离在可测量范围内时,显示控制部判断为基于指标图形的特定区域的测量有效。第3方式表示测量有效性的判断基准的另一方式,例如,能够通过一边改变拍摄距离一边获取形成有光点的图像来事先测定拍摄距离与光点位置的关系,并根据所测量的光点位置参考该关系来计算距离。
第4方式所涉及的测量辅助装置在第1至第3方式中的任一个中,在基于指标图形的特定区域的测量有效的情况和无效的情况下,显示控制部改变指标图形的颜色及形状中的至少一个来显示。根据摄像光学系统的特性,例如,有时在视场角的周边部畸变像差变大,在这种区域中很难进行准确的测量。并且,存在拍摄距离过近而指标图形变大,导致从图像显示范围超出的情况,或者拍摄距离过远而指标图形变小,变得很难进行测量的情况。鉴于这种情况,第4方式中在基于指标图形的特定区域的测量有效的区域和无效的区域中,改变指标图形的颜色及形状中的至少一个来显示,由此能够轻松地判断在光点位置附近的测量的有效性。
第5方式所涉及的测量辅助装置在第1至第4方式中的任一个中,具备图像记录部,记录形成有光点的被摄体图像,显示控制部读出记录于图像记录部的被摄体图像,在读出的被摄体图像上重叠显示指标图形。根据第5方式,将形成有光点的被摄体图像事先记录于图像记录部,在从图像记录部读出的被摄体图像上重叠显示指标图形,由此能够进行事后测量、离线测量。由此,能够缩短测量辅助装置对受检体的使用时间,能够减少对受检体的负担。另外,第5方式中,通过将被摄体图像与光点的位置建立关联来存储,能够在从图像记录部读出的图像上重叠显示指标图形。并且,指标图形的显示能够参考光点位置与构成指标图形的点之间的关系来进行。
第6方式所涉及的测量辅助装置在第5方式中,图像记录部将被摄体图像与指标图形建立关联来记录,显示控制部读出记录于图像记录部的被摄体图像和指标图形,将读出的指标图形重叠显示于读出的被摄体图像上。第6方式中,作为“建立被摄体图像与指标图形的关联”,例如能够将被摄体图像与构成指标图形的点建立关联来存储,由此能够迅速且轻松地显示指标图形。
第7方式所涉及的测量辅助装置在第1至第6方式中的任一个中,显示控制部将以光点作为中心并表示实际尺寸的圆作为指标图形重叠显示于图像上。根据第7方式,由于以光点作为中心,因此作为指标准确,并且显示表示实际尺寸的圆,因此能够在所有周向上测量实际尺寸。
第8方式所涉及的测量辅助装置在第1至第7方式中的任一个中,在改变图像的拍摄距离时,显示控制部将表示光点在图像中移动的轨迹的信息重叠显示于图像上。根据第8方式,显示表示改变拍摄距离时的光点的移动轨迹的信息,因此可轻松地改变拍摄距离使光点向测量对象(例如,肿瘤等特定区域)的附近移动,能够迅速且轻松地进行测量。
为了实现上述目的,第9方式所涉及的内窥镜系统具备:第1至第8方式中的任一个所涉及的测量辅助装置;及内窥镜,其具有插入到受检体的插入部及连接于插入部的基端侧的操作部,所述插入部具有末端硬质部、连接于末端硬质部的基端侧的弯曲部及连接于弯曲部的基端侧的软性部,头部和使光点的光学像成像于摄像元件的摄像透镜设置于末端硬质部。第9方式所涉及的内窥镜系统中,具备第1至第8方式中的任一个所涉及的测量辅助装置,因此能够轻松地进行有效的测量。
第10方式所涉及的内窥镜系统在第9方式中,内窥镜具备存储表示指标图形的信息的信息存储部。如第10方式,内窥镜具备存储表示指标图形的信息的信息存储部,由此能够作为内窥镜系统整体应对多种类型的内窥镜。
第11方式所涉及的内窥镜系统在第9或第10方式中,具备显示条件设定部,设定指标图形的显示条件。根据第11方式,用户能够根据所希望的显示条件进行测量。
为了实现上述目的,第12方式所涉及的处理器为第9至第11方式中的任一个所涉及的内窥镜系统的处理器,其具备测量部及显示控制部。根据第12方式,能够与第1方式同样地轻松地进行有效的测量。
第13方式所涉及的处理器在第12方式中,还具备信息获取部,获取内窥镜的信息,显示控制部根据所获取的信息判断基于所显示的指标图形的特定区域的测量是否有效。如第13方式,通过根据连接于处理器的内窥镜的信息判断测量的有效性,处理器能够应对多种内窥镜。
发明效果
如以上说明,根据本发明的测量辅助装置、内窥镜系统及处理器(内窥镜系统的处理器),能够轻松地进行有效的测量。
附图说明
图1是表示本发明的第1实施方式所涉及的内窥镜系统的整体结构的图。
图2是表示本发明的第1实施方式所涉及的内窥镜系统的结构的框图。
图3是表示末端硬质部的末端侧端面的结构的图。
图4是表示激光模块的结构的图。
图5是表示激光光源模块的结构的剖视图。
图6是表示摄像光学系统的光轴与测量辅助光的光轴之间的关系的图。
图7是表示将内窥镜的插入部插入到受检体内的情况的图。
图8是表示测量辅助方法的处理的流程图。
图9是表示测量辅助光的光轴横穿摄像光学系统的拍摄视场角的情况的图。
图10是表示光点位置根据摄影距离发生变化的情况的图。
图11是表示波长与滤色器的灵敏度之间的关系的图。
图12是表示在测量有效的情况和无效的情况下以不同的方式显示标记的情况的图。
图13是表示在测量有效的情况和无效的情况下以不同的方式显示标记的情况的另一图。
图14是表示针对光点的移动轨迹上的多个点存储表示圆形标记的点的坐标的情况的图。
图15是表示光点位置与表示圆形标记的点的坐标之间的关系的图。
图16是表示将光点位置与表示圆形标记的点的坐标建立关联来存储的情况的图。
图17是表示显示条件设定画面的例子的图。
图18是表示显示条件设定画面的例子的另一图。
图19是表示显示条件设定画面的例子的又一图。
图20是表示示出有标记及光点的移动轨迹的画面的例子的图。
图21是用于对测量有效区域进行说明的图。
图22是表示形成有光点的图像的图。
图23是表示存储形成有光点的图像的情况的图。
图24是表示将从图像记录部读出的标记重叠显示于被摄体图像上的情况的图。
图25是表示将被摄体图像与表示标记的点的坐标建立关联来存储的情况的图。
图26是表示利用光点的移动轨迹的操作步骤的图。
具体实施方式
以下,参考附图,对本发明所涉及的测量辅助装置、内窥镜系统及处理器(内窥镜系统的处理器)的实施方式进行详细说明。
<第1实施方式>
图1是表示第1实施方式所涉及的内窥镜系统10(测量辅助装置、内窥镜系统、处理器)的外观图,图2是表示内窥镜系统10的主要部分结构的框图。如图1、图2所示,内窥镜系统10由内窥镜主体100(内窥镜)、处理器200(处理器)、光源装置300及监视器400(显示装置)构成。
<内窥镜主体的结构>
内窥镜主体100具备手持操作部102(操作部)及相连设置于该手持操作部102的插入部104(插入部)。施术者把持手持操作部102来进行操作,将插入部104插入到受检体的体内来进行观察。在手持操作部102设置有存储器139(信息存储部),存储器139中存储有如下信息:表示受检体(被摄体)中的特定区域的实际尺寸的圆形标记(指标图形),且为在图像中的光点的位置设定的大小的圆形标记。存储器139中也存储有改变拍摄距离时表示光点在图像中移动的轨迹的信息,根据经由操作部208等的显示条件设定操作而显示。作为存储器139,能够利用ROM(只读存储器,Read Only Memory)、EEPROM(电子可擦除可编程只读存储器,Electronically Erasable and Programmable Read Only Memory)等非易失性记录介质(非临时性记录介质)。并且,在手持操作部102设置有供气供水按钮BT1、吸引按钮BT2及分配各种功能(通常模式与测量模式的切换等)的功能按钮BT3。插入部104从手持操作部102侧依次由软性部112(软性部)、弯曲部114(弯曲部)、末端硬质部116(末端硬质部)构成。通过对手持操作部102进行操作,能够使弯曲部114弯曲,向上下左右改变末端硬质部116的方向。在末端硬质部116设置有摄像光学系统130(摄像光学系统、摄像部)、照明部123、钳道口126、激光模块500等(参考图1~图3)。另外,图2中对存储器139设置于手持操作部102的情况进行了说明,但存储器139可以设置于光导件连接器108内,也可以设置于连接处理器200与内窥镜主体100的电连接器109内(参考图1)。
进行观察、处置时,通过操作部208(参考图2)的操作,能够从照明部123的照明用透镜123A、123B照射可见光和红外光中的任一个或这两者。并且,通过供气供水按钮BT1的操作,能够从未图示的供水喷嘴放出清洗水,清洗摄像光学系统130的摄像透镜132(摄像透镜)及照明用透镜123A、123B。在末端硬质部116中开口的钳道口126上连通有未图示的管路,在该管路插通用于摘除肿瘤等的未图示的处置器具,适当进退来对受检体实施必要的处置。
如图1~图3所示,在末端硬质部116的末端侧端面116A配设有摄像透镜132。在摄像透镜132的深处配设有CMOS(互补金属氧化半导体,Complementary Metal-OxideSemiconductor)型摄像元件134(摄像元件、摄像部)、驱动电路136、AFE138(AFE:模拟前端,Analog Front End),通过这些要件输出图像信号。摄像元件134为彩色摄像元件,具备多个像素,该要素由以特定的图案排列(拜耳排列、X-Trans(注册商标)排列、蜂窝阵列等)配置(2维排列)成矩阵状的多个受光元件构成。摄像元件134的各像素包含微透镜、红(R)、绿(G)或蓝(B)的滤色器及光电转换部(光电二极管等)。摄像光学系统130还能够根据红、绿、蓝的三个颜色的像素信号生成彩色图像,还能够根据红、绿、蓝中的任意一个颜色或两个颜色的像素信号生成图像。另外,第1实施方式中,对摄像元件134为CMOS型摄像元件的情况进行说明,但摄像元件134也可以是CCD(电荷耦合元件,Charge Coupled Device)型。
受检体(肿瘤部、病变部)的图像、光点(后述)的光学像通过摄像透镜132成像于摄像元件134的受光面(摄像面)并转换为电信号,经由未图示的信号电缆输出至处理器200并转换为视频信号。由此,在连接于处理器200的监视器400显示观察图像、圆形标记等。另外,也可以将用于经由画面进行后述的显示条件设定操作(参考图17~图20)的触摸面板设置于监视器400。
并且,在末端硬质部116的末端侧端面116A,与摄像透镜132相邻而设置有照明部123的照明用透镜123A(可见光用)、123B(红外光用)。在照明用透镜123A、123B的深处配设后述的光导件170的射出端,该光导件170插通于插入部104、手持操作部102及通用电缆106,光导件170的入射端配置于光导件连接器108内。
在末端侧端面116A还设置有激光模块500的激光头506(头部),经由棱镜512(参考图4)照射点光(测量辅助光)。激光模块500的结构在后文叙述。另外,第1实施方式中,如图3所示,分开设置了激光头506和钳道口126,但也可以将激光头506以能够插拔的方式插通于与在末端硬质部116开口的钳道口126连通的管路(未图示)。并且,也可以在摄像透镜132与钳道口126之间设置激光头506。
<激光模块的结构>
如图2及图4所示,激光模块500具备激光光源模块502、光纤504及激光头506(头部)。光纤504的基端侧(激光光源模块502侧)被纤维外皮501包覆,末端侧(射出激光束的一侧)插入于金属箍508(金属箍:ferrule)并用粘接剂粘接,端面被研磨。在金属箍508的末端侧安装GRIN透镜510(GRIN:渐变折射率,Graded Index),在GRIN透镜510的末端侧安装棱镜512而形成接合体。金属箍508是用于保持、连接光纤504的部件,在中心部沿轴向(图4的左右方向)开出用于插通光纤504的孔。在金属箍508及纤维外皮501的外侧设置增强材料507来保护光纤504等。金属箍508、GRIN透镜510及棱镜512容纳于壳体509,与增强材料507及纤维外皮501成为一体而构成激光头506。
在激光头506中,金属箍508例如能够使用直径为0.8mm~1.25mm的金属箍。为了小型化,优选为细径的金属箍。通过上述的结构,能够将整个激光头506的直径设为1.0mm~1.5mm。
如此构成的激光模块500安装于插入部104。具体而言,如图2所示,激光光源模块502设置于手持操作部102,激光头506设置于末端硬质部116,光纤504从激光光源模块502向激光头506引导激光束。另外,也可以将激光光源模块502设置于光源装置300内,并通过光纤504将激光束引导至末端硬质部116。
图5所示的激光光源模块502为尾纤型模块(TOSA;发射激光学子组件,Transmitter Optical Sub Assembly),该尾纤型模块具备:VLD(可见激光二极管,VisibleLaser Diode),从未图示的电源供给电力而射出激光束;及聚光透镜503,对从VLD射出的激光束进行聚光。能够通过处理器200(CPU210)的控制根据需要射出激光束,通过仅在进行测量时(测量模式)射出激光束,在非射出时能够与通常的内窥镜同样地使用(通常模式)。
第1实施方式中,由VLD射出的激光束能够设为基于半导体激光器的波长650nm的红色激光束。但是,本发明中的激光束的波长并不限定于该方式。利用聚光透镜503聚光的激光束通过光纤504引导至GRIN透镜510。光纤504是以单横模传播激光束的光纤,能够形成直径小且鲜明的光点,因此能够准确地测量被摄体(测量对象)的大小。也可以在光纤504的中途设置中继连接器。另外,根据被摄体的种类、大小等观察条件,光点直径的大小、清晰度在测量上不成问题时,作为光纤504,可使用以多模传播激光束的光纤。并且,作为光源,可代替半导体激光器使用LED(发光二极管,Light-Emitting Diode),也可以以振荡阈值以下的LED发光状态使用半导体激光器。
GRIN透镜510是折射率在光轴最高且随着朝向半径方向外侧而减少的圆筒型渐变折射率型透镜(径向型),作为将通过光纤504引导并入射的激光束设为平行的光束来射出的准直器发挥作用。能够通过调节GRIN透镜510的长度来调节从GRIN透镜510射出的光束的扩展,为了射出平行光束的激光束,设为(λ/4)间距(λ为激光束的波长)左右即可。
在GRIN透镜510的末端侧安装有棱镜512。该棱镜512为用于变更测量辅助光的射出方向的光学部件,通过变更射出方向,将测量辅助光的光轴投影到包含摄像光学系统的光轴的平面时,测量辅助光的光轴相对于摄像光学系统的光轴具有非0度的倾角,测量辅助光横穿摄像光学系统的视场角。棱镜512形成为接近GRIN透镜510的透镜直径的大小,前端面被倾斜地截断而具有与上述的倾角相应的顶角AL1。顶角AL1的值能够根据激光束的射出方向和其他条件设定。
<摄像光学系统的光轴与测量辅助光的光轴的关系>
图6是表示从前方(被摄体侧)观察第1实施方式所涉及的末端硬质部116的状态的图,是与图3的结构对应的图。第1实施方式中,测量辅助光的光轴L1和摄像光学系统的光轴L2存在于同一平面上,并在该同一平面上交叉。因此,若从前方(被摄体侧)观察末端硬质部116,则如图6所示,看起来光轴L1通过光轴L2上。
另外,本发明中的测量辅助光的光轴L1与摄像光学系统的光轴L2的关系并不限定于上述的“测量辅助光的光轴与摄像光学系统的光轴存在于同一平面上,并在该同一平面上交叉”的方式,测量辅助光的光轴与摄像光学系统的光轴可以不存在于同一平面上。然而,在这种情况下,也设为将测量辅助光的光轴投影到包含摄像光学系统的光轴的平面时,测量辅助光的光轴相对于摄像光学系统的光轴具有非0度的倾角,且横穿摄像光学系统的视场角。
进行利用测量辅助光的测量时,若测量辅助光的光轴与摄像光学系统的光轴平行(倾角为0度),则根据光轴彼此的间隔,测量辅助光的光轴横穿摄像光学系统的视场角的点为止的距离变远,其结果,在最近距离无法对光点进行摄影,很难测量。并且,若测量辅助光的光轴与摄像光学系统的光轴平行,则光点位置变化相对于观察距离变化的灵敏度低,有时无法获得充分的测量精度。相对于此,如第1实施方式,采用“将测量辅助光的光轴投影到包含摄像光学系统的光轴的平面时,测量辅助光的光轴相对于摄像光学系统的光轴具有非0度的倾角,且横穿摄像光学系统的视场角”这种结构。通过这种结构,能够以从最近距离至远距离的大范围的观察距离进行测量,并且光点位置变化相对于距离变化的灵敏度高,因此能够以高精度进行测量。
<光源装置的结构>
如图2所示,光源装置300由照明用光源310、光圈330、聚光透镜340及光源控制部350等构成,使照明光(可见光或红外光)入射于光导件170。光源310具备可见光源310A及红外光源310B,能够照射可见光及红外光中的其中一个或这两者。基于可见光源310A及红外光源310B的照明光的照度通过光源控制部350控制,拍摄光点来测量时(测量模式时),能够根据需要降低照明光的照度或停止照明。
通过将光导件连接器108(参考图1)连结于光源装置300,从光源装置300照射的照明光经由光导件170传输至照明用透镜123A、123B,从照明用透镜123A、123B照射于观察范围。
<处理器的结构>
根据图2对处理器200(测量部、显示控制部、显示条件设定部、信息获取部)的结构进行说明。处理器200经由图像输入控制器202输入从内窥镜主体100输出的图像信号,在图像处理部204(测量部、显示控制部、显示条件设定部、信息获取部)进行所需的图像处理并经由视频输出部206输出。由此,在监视器400(显示装置)显示观察图像。这些处理在CPU210(CPU:Central Processing Unit;中央处理装置)的控制下进行。即,CPU210具有作为测量部、显示控制部、显示条件设定部、信息获取部的功能。图像处理部204中,除了白平衡调整等图像处理以外,还进行显示于监视器400的图像的切换、重叠显示、电子变焦处理、与操作模式相应的图像的显示、从图像信号的特定成分(例如,亮度信号)提取等。并且,图像处理部204中,进行摄像元件134的摄像面中的光点位置的测定、基于所测定的位置的标记的大小(像素数)的计算等(后述)。图像记录部207(图像记录部)中记录有形成有光点的被摄体的图像。语音处理部209通过CPU210及图像处理部204的控制,从扬声器209A输出显示条件设定时的警告消息(语音)。
作为图像处理部204的具体的硬件结构,可举出CPU(中央处理器,CentralProcessing Unit)、FPGA(现场可编程门阵列,Field Programmable Gate Array)、ASIC(专用集成电路,Application Specific Integrated Circuit)等处理器(电路)。图像处理部204可以由一个处理器构成,也可以组合多个处理器来构成。存储器212(存储部)包含各种处理时的临时存储用的存储元件和非易失性的存储元件(非临时性记录介质),通过CPU210和/或图像处理部204的控制,光点的坐标与表示圆形标记的点的坐标建立关联而存储(后述),所述圆形标记表示被摄体中的测量对象的实际尺寸。并且,存储器212中存储有使CPU210和/或图像处理部204执行后述的测量辅助方法的程序的计算机可读取的代码。
并且,处理器200具备操作部208。操作部208具备未图示的操作模式设定开关等,并且能够操作可见光和/或红外光的照射。并且,操作部208包含未图示的键盘、鼠标等器件,用户能够经由这些器件输入各种处理条件、显示条件等。关于基于操作部208的显示条件设定,将在后面叙述详细内容(参考图17~图20)。另外,关于操作模式的设定,也可以如上述那样对手持操作部102的功能按钮BT3(参考图1)分配操作模式设定功能(测量模式与通常模式的切换等)来进行。
<基于内窥镜的观察>
图7是表示将内窥镜主体100的插入部104插入到受检体内的状态的图,示出经由摄像光学系统130针对拍摄范围IA获取观察图像的情况。图7中,示出光点SP0形成于肿瘤tm(黑色且隆起的部分)附近的情况。
<测量处理的流程>
对利用内窥镜系统10进行的受检体的测量辅助方法进行说明。图8是表示测量辅助方法的处理的流程图。
首先,将内窥镜主体100的插入部104插入到受检体,将内窥镜系统10设定为通常观察模式(步骤S10)。通常观察模式是将从光源装置300照射的照明光照射于被摄体来获取图像,由此观察被摄体的模式。关于通常观察模式的设定,可以在内窥镜系统10启动时由处理器200自动进行,也可以根据基于用户的操作部208的操作来进行。
若内窥镜系统10设定为通常观察模式,则照射照明光来拍摄被摄体并将所得到的图像显示于监视器400(步骤S12)。作为被摄体的图像,可以拍摄静态图像,也可以拍摄动态图像。拍摄时,优选根据被摄体的种类、观察目的等切换照明光的种类(可见光或红外光)。用户一边观察显示于监视器400的图像,一边对插入部104进行进退和/或弯曲操作来将末端硬质部116朝向观察对象,拍摄欲测量的被摄体。
在步骤S14中,判断是否从通常观察模式转换为测量模式。该判断可以根据有无经由操作部208的用户操作来进行,也可以根据有无来自处理器200的切换指令来进行。并且,也可以由处理器200以一定的帧间隔(按每一个帧、按每两个帧等)交替设定通常观察模式和测量模式。若步骤S14的判断为否定,则返回步骤S12继续进行通常观察模式下的拍摄,若判断为肯定,则进入步骤S16,切换为测量模式。
测量模式是从激光头506照射激光束(测量辅助光)来在被摄体形成光点,根据形成有光点的被摄体的图像生成及显示用于测量被摄体的大小(长度)的标记的模式。测量模式中,显示表示测量对象的实际尺寸圆形标记(指标图形)。如对详细内容进行后述,圆形标记在测量有效的情况和无效的情况下,以不同的方式显示(参考图12、图13等)。并且测量模式中,通过后述的显示条件的设定,也能够在改变拍摄距离时显示表示光点在图像中移动的轨迹的信息(参考图13、图20等)。第1实施方式中,作为测量辅助光使用红色激光束,但在内窥镜图像中,在消化管中有较多发红的部分,因此根据测量条件,存在很难识别光点的情况。因此,在测量模式中,在获取光点的图像及测量位置时,关闭照明光或将照度降低至不会对光点的识别产生影响的程度(步骤S18),并从激光头506照射测量辅助光(步骤S20)。这种控制能够通过处理器200及光源控制部350进行。
在步骤S22中,拍摄通过测量辅助光形成有光点的被摄体的图像。观察距离在测量范围内时,光点形成于摄像光学系统130的摄影视场角内。如以下的详细说明,根据观察距离,图像内的(摄像元件上的)光点的位置不同,应显示的标记的大小(像素数)根据光点的位置而不同。
<与观察距离相应的光点位置的变化>
第1实施方式中,将测量辅助光的光轴L1投影到包含摄像光学系统的光轴L2的平面时,光轴L1相对于光轴L2具有非0度的倾角,且横穿摄像光学系统130的视场角。因此,图像(摄像元件)中的光点的位置根据到被摄体为止的距离而不同。例如,如图9(表示在包含光轴L1及光轴L2的平面内,从侧面方向观察末端硬质部116的状态的图)所示,假设在观察距离的范围R1内能够观察。此时,可知在范围R1的最近端E1、中央附近的距离E2及最远端E3,各点上的拍摄范围(用箭头Q1、Q2、Q3表示)内的光点的位置(各箭头与光轴L1相交的点)不同。另外,
图9中,实线的内侧为摄像光学系统130的拍摄视场角,单点划线的内侧为测量视场角。在摄像光学系统130的拍摄视场角中像差少的中央部分进行测量。图9中的范围R1及测量视场角与“摄像图像中,基于圆形标记的测量对象的大小测量有效的范围”对应。
图10是表示与图6同样地从正面观察末端硬质部116的状态的图,是虚拟地示出摄像光学系统130的光轴L1、测量辅助光的光轴L2及摄像元件134的拍摄范围R2的关系的图。图10表示光轴L1、L2存在于同一平面上,且在该平面上交叉的情况。图10的例子中,示出与观察距离相应的光点位置P4、P5、P6(与观察距离分别为最近端附近、中央附近、最远端附近的情况对应)。
如图10所示,可知观察距离为最近端附近的情况下的光点位置P4和观察距离为最远端附近的情况下的光点位置P6相对于摄像光学系统130的光轴L1,位于相反侧。因此第1实施方式中,光点位置的移动相对于观察距离变化的灵敏度高,能够以高精度测量被摄体的大小。
如此,摄像图像内(摄像元件134上)的光点位置根据摄像光学系统130的光轴L2与测量辅助光的光轴L1的关系及观察距离而不同,若观察距离近,则表示相同的实际尺寸(例如,直径5mm)的像素数增多,若观察距离远,则像素数减少。因此,如对详细内容进行后述,事先将光点的位置(坐标)与表示圆形标记的点的坐标建立关联来存储于存储器139,所述圆形标记表示被摄体中的测量对象(例如,肿瘤、病变等特定区域)的实际尺寸,根据所测量的光点位置(坐标)参考所存储的信息,由此能够获取表示圆形标记的点的坐标。可以在进行测量处理时将存储于存储器139的信息展开于存储器212,并参考展开于存储器212的信息。第1实施方式中,获取表示圆形标记的点的坐标时无需测定观察距离本身,因此结构简单且处理负荷低。
返回图8的流程图,对摄像元件134的摄像面中的光点的位置测量(步骤S24)进行说明。步骤S24中的光点的位置测量根据如下图像进行,该图像根据配设有红(R)色的滤波器颜色的滤色器的像素的像素信号生成。其中,配设于摄像元件134的各像素的各颜色(红、绿、蓝)的滤色器中的波长与灵敏度的关系如图11,并且如上所述,从激光头506射出的激光束为波长650nm的红色激光束。即,光点位置的测定根据如下图像进行,该图像根据配设有(红、绿、蓝)的滤色器中相对于激光束的波长的灵敏度最高的红色的滤色器的像素(R像素)的图像信号生成。此时,对像素信号的位图数据或RAW(原始图像格式,Raw image format)数据的R像素的信号强度设置阈值来进行二值化,计算白色部分(信号强度高于阈值的像素)的重心,由此能够快速识别光点的位置。另外,根据实际图像(根据所有颜色的像素信号生成的图像)识别光点时,优选对配设有绿色及蓝色滤色器的像素(G像素、B像素)的像素信号设置阈值,仅提取具有位图数据的G像素及B像素的像素信号的值为阈值以下的像素。
另外,在测量模式中,如上述那样获取光点的图像(步骤S22)及测量位置(步骤S24)时,关闭照明光或将照度降低至不会对光点的识别产生影响的程度(步骤S18),并从激光头506照射测量辅助光(步骤S20)。由此能够获取光点鲜明的图像,并能够准确地测量光点的位置来生成及显示适当的大小的标记。
步骤S26中,处理器200(CPU210,图像处理部204)获取表示圆形标记的点的坐标。如上所述,监视器400上的标记的大小根据图像内的(即,摄像元件134的摄像面上的)光点的位置而不同,因此预先将光点的坐标与表示圆形标记的点的坐标建立关联来存储于存储器139(或获取存储器139的信息来存储于存储器212),所述圆形标记表示被摄体中的测量对象的实际尺寸。处理器200根据在步骤S24中测量的光点位置,参考存储器139(或存储器212),获取表示圆形标记的点的坐标。关于求出光点位置与表示圆形标记的点的坐标的关系的步骤,将在后面叙述其详细内容。并且,当显示表示光点的移动轨迹的信息时,处理器200也从存储器139(或存储器212)获取该信息。
步骤S28中,根据所设定的显示条件,将观察图像、圆形标记等显示于监视器400(显示装置)(例如,参考图20的例子)。另外,如以下说明,在测量有效区域和除此以外的区域中以不同的方式显示圆形标记。
<与测量的有效性相应的标记的显示方式>
<例1>
图12是表示在基于标记的测量有效的区域和除此以外的区域中改变标记的显示方式的情况的图。具体而言,如图12的(a)部分所示,当光点SP4N存在于测量有效区域的范围外(最近端侧)时,及如图12的(c)部分所示,当光点SP4F存在于测量有效区域的范围外(最远侧)时,基于标记的肿瘤tm4的测量无效,因此分别显示有十字形的标记M4N、M4F。另外图12中,在最近端侧、最远侧以虚线显示有标记,但可以在最近端侧和最远侧改变线型,也可以改变色彩。另一方面,如图12的(b)部分,当光点SP4存在于基于圆形标记M4(与标记M4N、M4F不同的形状的标记)的测量有效的区域中时,以实线显示圆形标记M4。可以在圆形标记M4和标记M4N、M4F中改变颜色。
<例2>
图13是表示在基于标记的测量有效的区域和除此以外的区域中改变标记的显示方式的情况的另一图。关于图12,上述的例1中,测量有效区域中显示圆形标记,除此以外的区域中显示有十字形的标记(改变了标记的形状),但图13的例子中,未基于区域显示圆形标记,在测量有效区域和除此以外的区域中改变了标记的线型。并且,对例1中未显示光点的移动轨迹,但例2中显示移动轨迹的情况进行说明。具体而言,如图13的(a)部分所示那样光点SP5N存在于移动轨迹T1的最近端侧的区域T1N的情况及如图13的(c)部分所示那样光点SP5F存在于移动轨迹T1的最远侧的区域T1F的情况下,基于圆形标记M5N、M5F的肿瘤tm5的测量无效,因此以虚线显示圆形标记M5N、M5F。图13中,在最近端侧、最远侧以虚线显示有圆形标记,但也可以在最近端侧和最远侧改变线型(例如,虚线和单点划线),也可以改变色彩(例如,红色和黑色)。另一方面,如图13的(b)部分那样光点SP5存在于基于圆形标记M5的测量有效的区域T1E的情况下,以实线(例如,白色)显示圆形标记M5。
第1实施方式中,通过如例1、例2那样的标记的显示方式,能够轻松地判断基于标记的测量是否有效,由此能够迅速且轻松地进行测量。
如图12、图13那样显示圆形标记时,若圆形标记显示于远离光点的位置,则作为指标会变得不准确,因此优选显示于观察图像中光点的附近(例如,以光点为中心)。可以将实际尺寸不同的圆形标记(例如,3mm、5mm等)显示为同心圆状,也可以除了圆形标记以外还显示其他标记(例如,十字形标记)。并且,关于圆形标记,由处理器200(CPU210、图像处理部204)获取存储于存储器139(信息存储部)中的信息来显示。显示时,也可以将存储于存储器139的信息展开于存储器212,处理器200参考存储器212(关于光点的移动轨迹也相同)。如此,通过处理器200获取存储于内窥镜主体100的信息来显示,处理器200能够应对多种内窥镜主体。
另外,关于显示条件(标记的种类、数量、实际尺寸、颜色、移动轨迹显示的有无等),如对详细内容进行后述,能够通过经由操作部208(显示条件设定部)和/或监视器400的用户的操作进行设定(参考图17~图20)。
若显示图像、标记等,比较标记与观察对象(肿瘤等)来测量观察对象的大小。如上所述,在测量有效区域和除此以外的区域中以不同的方式显示圆形标记,因此能够通过圆形标记的显示方式轻松地掌握测量的有效性,由此能够轻松地进行有效的测量。进行测量时,根据需要,对手持操作部102(或者操作部208)进行释放操作(指示进行图像记录的操作),将形成有光点的图像记录于图像记录部207(图像记录部)。若事先将图像、光点位置等记录于图像记录部207,则如在后面进行详细叙述,能够离线(事后)进行圆形标记显示等处理(参考图22~图25)。
若上述的测量及图像等的记录结束,则在步骤S30中判断测量模式是否结束。该判断可以根据有无经由操作部208的用户操作来进行,也可以根据有无来自处理器200的切换指令来进行。并且,与向测量模式转变时同样地,也可以如下,即,若经过一定帧数,则自动结束测量模式,恢复到通常观察模式。若步骤S30的判断为否定,则回到步骤S20,反复进行步骤S20至步骤S28的处理。若步骤S30的判断为肯定,则进入步骤S32,关闭测量辅助光,接着在步骤S34中将照明光的照度恢复到通常照度,恢复到通常观察模式(返回步骤S10)。另外,若不妨碍通常观察模式下的观察,则也可以不关闭测量辅助光。
如以上说明,第1实施方式所涉及的内窥镜系统10中,将根据图像中的光点的位置而设定的大小的圆形标记显示于光点的附近,在测量有效的区域和无效的区域以不同的方式显示圆形标记,因此能够轻松地掌握测量的有效性,能够迅速且轻松地进行测量。
<测量辅助方法的各处理的详细内容>
以下,对上述测量辅助方法的各处理的详细内容进行说明。
<表示圆形标记的点的坐标>
第1实施方式中,事先将摄像元件134的摄像面中的光点的位置与表示圆形标记的点的坐标建立关联来存储于存储器139(信息存储部)或存储器212(信息存储部),根据所测量的光点位置,参考存储器139或存储器212来获取坐标。以下,对坐标的存储进行说明。
<标记坐标的存储>
第1实施方式中,针对改变观察距离(拍摄距离)时光点在摄像图像中移动的轨迹上的多个点,存储表示圆形标记的点的坐标。关于改变拍摄距离时的摄像图像中的光点的移动轨迹,根据测量辅助光的光轴L1与摄像光学系统130的光轴L2的关系来确定,在图10所示的关系的情况下,成为直线,但在摄像光学系统130中存在畸变像差时,会根据该畸变像差而产生畸变。
图14是表示坐标存储的情况的图,表示针对光点的移动轨迹T1上的K个点(点P1~PK;K为2以上的整数)存储表示圆形标记的点的坐标的情况。点P1~点PK为基于圆形标记的大小测量有效的范围(移动轨迹T1的实线部分;与图9中的单点划线的内侧对应),点P1表示当为测量有效范围的最近端时的光点位置,点PK表示当为最远端时的光点位置。另外,图14中的移动轨迹T1为虚拟地示出的移动轨迹。
光点存在于移动轨迹T1的虚线部分(摄像图像的周边部分)时,畸变像差变大。并且,存在如下问题,即,光点存在于移动轨迹T1的最近端侧(以虚线表示的区域T1N的部分)时,圆形标记的一部分成为图像外,或者存在于最远端侧(以虚线表示的区域T1F的部分)时,标记变小,均不适于测量。因此,第1实施方式中,与基于圆形标记的测量对象的大小测量有效的光点位置的范围(以实线表示的区域T1E的部分)对应而存储坐标。
图15是表示光点位置与表示圆形标记的点的坐标之间的关系的图,通过将点Pi(光点的位置)作为中心的L个点(点Pi1、Pi2、…、Pij、…、PiL;L为整数)表示圆形标记。L的值能够根据标记的形状精度的要求来确定,数量越多,越能够显示准确的标记。也可以用直线或曲线连结L个点之间。并且,图16表示将光点位置与表示圆形标记的点的坐标建立关联来存储的情况。
<坐标的获取>
显示圆形标记时,处理器200(CPU210、图像处理部204)根据所测量的光点的坐标,参考存储器139(信息存储部)或存储器212(信息存储部)获取表示圆形标记的点的坐标。在此所说的“获取”包含利用所存储的坐标及利用根据所存储的坐标生成的坐标。
分别对图14所示的点P1~PK的K个点(光点位置),如图15所示那样存储有表示圆形标记的L个点的坐标。例如,对移动轨迹T1上的点Pi,存储有点Pi1~PiL的坐标。具体而言,如图16所示,光点位置与表示圆形标记的点的坐标建立对应关联而存储于存储器139(或存储器212)。此时,可事先与多个实际尺寸(例如,2mm、3mm、5mm、7mm、10mm等)的各个尺寸对应而存储坐标,根据测量目的切换所显示的圆形标记的实际尺寸。越增加存储坐标的光点位置的数量(图14~图16的例子中为K个)及表示圆形标记的点的数量(图14~图16的例子中为L个),越能够显示准确的圆形标记。
关于表示圆形标记的点的坐标,事先针对移动轨迹T1上的一部分点(例如,图14的例子中为点P1~PK的K个点)存储即可。此时,针对未存储有坐标的点(光点位置),能够通过如下方式(第1方式)获取标记的坐标,该方式利用针对自所测量的光点位置的距离在阈值以内的点存储的坐标。并且,通过内插与夹着所测量的光点的两个以上的点对应的坐标来获取坐标的方式(第2方式)、外插与夹着所测量的光点的两个以上的点对应的坐标来获取坐标的方式(第3方式)等,也能够获取标记的坐标。
另一方面,也可以事先针对移动轨迹T1上的所有点(像素)存储坐标,并直接获取所存储的坐标。这种方式的情况下,能够省略点彼此的距离的计算、插值计算等。
另一方面,也可以事先针对移动轨迹T1上的所有点(像素)存储坐标,并直接获取所存储的坐标。这种方式的情况下,能够省略点彼此的距离的计算、插值计算等。
<坐标的生成>
表示圆形标记的点(图15的例子中为点Pi1~PiL)的坐标例如能够通过以下方法生成。具体而言,一边改变拍摄距离一边拍摄正方格子状的图表。此时,操作手持操作部来使光点位于格子的交点,对光点的上下左右的4个点实际测量坐标。除此以外的点的坐标通过对实际测量的点的坐标进行插值来生成。所拍摄的图表中,优选格子的间隔为实际尺寸以下,且间隔尽可能窄。并且,为了使上述的“光点的上下左右的4个点”位于格子的交点,所拍摄的图表中,优选格子的间隔为所希望的实际尺寸的(1/整数)的间隔(圆形标记的实际尺寸为直径5mm时,格子的间隔为0.5mm、1mm、1.25mm、2.5mm等)。并且,也可以根据实际测量的光点位置及上下左右的4个点,生成表示十字形等其他形状的标记的点的坐标。
<画面显示条件的设定>
以下,对摄像图像、圆形标记、光点的移动轨迹等的显示条件设定及基于所设定的条件的显示方式进行说明。图17是表示用于设定画面显示条件的整个画面的例子的图。图17中,对画面显示条件的各项目示出有条件名(区域C01~C08)、设定条件的内容(数值等;区域V01~V08)及条件设定用按钮A01~A08。设置于画面下部的按钮B01为显示条件确定用按钮,按钮B02为条件变更的取消用按钮,按钮B03为条件变更的清空(返回初始值)用按钮。图17的画面显示于监视器400,能够通过经由监视器400的触摸面板和/或操作部208的未图示的键盘及鼠标进行的用户操作设定显示条件。这种显示条件设定可以在图8的流程图的执行中随时进行。另外,以下说明的显示条件设定画面的布局及显示项目表示显示条件设定的一例,能够根据需要采用其他方式。
区域C01、V01表示是否显示标记,能够通过经由按钮A01的选择操作对标记显示进行打开或关闭。区域C02、V02表示标记的实际尺寸,通过经由按钮A02的操作能够选择3mm、5mm等的大小。区域C03、V03表示测量有效区域中的标记的显示方式,通过经由按钮A03的操作能够选择实线圆、实线同心圆等方式(参考图18)。区域C04、V04表示测量有效区域中的标记的颜色,能够通过经由按钮A04的选择操作选择白色、蓝色等颜色。区域C05、V05表示测量无效区域中的标记的显示方式,通过经由按钮A05的选择操作能够选择虚线圆、实线十字、虚线十字等方式(参考图19)。区域C06、V06表示测量无效区域中的标记的颜色,通过经由按钮A06的操作能够选择红色、黑色等颜色。区域C07、V07表示是否显示光点的移动轨迹,通过经由按钮A07的操作能够选择打开或关闭(有、或无显示)。区域C08、V08表示是否识别显示测量有效区域(例如,如图13所示,以实线显示测量有效区域、以虚线显示除此以外的区域),通过经由按钮A08的操作能够选择打开或关闭(有、或无识别显示)。
<显示条件设定的具体例>
对显示条件设定操作的具体例进行说明。图18是表示设定测量有效区域中的标记的显示方式的画面的例子的图,若在图17的画面中,通过监视器400所具备的触摸面板的操作或者经由操作部208进行的操作等(对其他项目也设为相同)指定按钮A03,则区域V03被下拉显示而转变为图18的状态。另外,图18中,对测量有效区域中的标记的显示方式以外的项目,省略了图示。图18中,作为测量有效区域中的显示方式而设定的条件(此时,实线圆及实线同心圆)显示于区域V03,用户通过按钮A03a、A03b上下移动选择范围来选择方式(例如,实线圆),并指定按钮B01(确认按钮),由此能够确定显示方式。
图19是表示设定测量无效区域(基于标记的测量无效的区域)中的标记的显示方式的画面的例子的图,若在图17的画面中指定按钮A05,则区域V05下拉显示并转变为图19的状态(关于除了测量无效区域中的标记的显示方式以外的项目,省略图示)。在图19的例子中,显示方式能够从“虚线圆、实线十字及虚线十字”中选择,用户只要利用按钮A05a,A05b及滑动杆A05c上下移动选择范围来选择显示方式(图19中为虚线圆;参考图13的(a)部分、(c)部分),并指定按钮B01即可。
上述的显示条件的设定中,对各个项目设定的条件不匹配时,可经由监视器400和/或扬声器209A输出警告消息。
<基于其他操作机构的显示条件的设定>
上述例子中,对通过监视器400的触摸面板和/或操作部208的未图示的键盘及鼠标设定标记显示条件的情况进行了说明,但也可经由其他操作机构进行显示条件的设定。例如,也可以对手持操作部102的功能按钮BT3分配功能来设定显示条件。并且,也可以通过脚踏板、语音输入、视线输入、姿势输入等设定显示条件。操作内窥镜主体100时,存在用户无法自由移动双手的情况,这种情况下这些操作机构是有效的。
<画面显示的具体例>
将图17所示的条件下的画面显示的例子示于图20。如图20所示,显示于监视器400的画面由图像显示区域D01及信息显示区域D02构成。在图像显示区域D01,在肿瘤tm1上形成有光点SP1,以白色显示有将光点SP1作为中心的圆形标记M1(实际尺寸为直径5mm)。并且,显示有光点的移动轨迹T1,基于圆形标记M1的测量有效的区域T1E和除此以外的区域(最近端侧的区域T1N及最远端侧的区域T1F)以不同的方式显示。在区域T1E的端点显示有标记M1N、M1F。这种识别显示中,“测量有效的区域”是在摄像图像的中心附近,摄像光学系统130的畸变像差的影响少,并且标记不会从图像超出或变得过小的区域(相当于图9的范围R1),在这种区域中能够进行准确的测量。另外,移动轨迹的识别显示中,如图20所示,并不限于改变实线和虚线的方式,可以利用其它线型,也可以改变线的粗细、色彩、所使用的图形和/或记号等。
上述的“基于标记的测量有效的区域”(测量有效区域)可以设定于图像的一部分,也可以针对拍摄距离的范围而设定。例如,能够一边改变拍摄距离一边拍摄形成有光点的格子状的图表,测定各距离中的格子的大小、格子的畸变情况等,并根据该测定结果设定测量有效区域。图21的(a)部分概念性地示出通过这种步骤针对拍摄距离设定的可测量范围(D1~D2)及与此对应的光点位置(X坐标为X1~X2)。并且,图21的(b)部分概念性地示出针对拍摄距离设定的可测量范围(D1~D2)及与此对应的光点位置(Y坐标为Y1~Y2)。图21的例子中,在光点位置的X坐标为X1~X2且Y坐标为Y1~Y2的情况(能够测量区域的内侧)及拍摄距离为可测量范围(拍摄距离为D1~D2)的情况下判断为“基于标记的测量有效”。另外,这种测量有效区域的信息能够事先存储于存储器139(信息存储部),由处理器200(CPU210、图像处理部204)获取该信息来判断“基于标记的测量是否有效”。通过如此根据连接于处理器200的内窥镜主体100的信息判断测量的有效性,处理器200能够应对多种内窥镜。
返回到图20的说明,在信息显示区域D02,内窥镜系统10为“测量模式”的内容显示于区域D02A,当前的显示条件显示于区域D02B。若指定按钮B04,则变更为通常观察模式,若指定按钮B05,则显示如图17那样的显示条件设定画面。
在第1实施方式所涉及的内窥镜系统10中,能够通过上述的信息显示区域D02轻松地确认、变更显示条件,由此能够迅速且轻松地进行测量。另外,信息显示区域D02可设为不同画面,通过在观察模式时隐藏、缩小等,扩大图像显示区域D01。
<基于图像等的记录的离线处理>
在第1实施方式所涉及的内窥镜系统10中,标记的显示等处理及基于该显示的测量可以是实时(每获取到形成有光点的图像或者按多帧,显示标记、轨迹),也可以如以下说明那样进行离线处理(事后处理)。为了进行离线处理,如图22所示,将在肿瘤tm6上形成有光点SP6的图像存储于图像记录部207。此时,如图23所示,将图像(图像文件)与光点位置(坐标)建立关联来记录。如上所述,光点位置与表示圆形标记的点的坐标建立关联来存储于存储器139(或存储器212)(参考图16)。因此,通过根据与图像建立关联而记录的光点位置来参考存储器139(或存储器212),能够获取表示圆形标记的点的坐标,由此能够在从图像记录部207读出的图像上重叠显示圆形标记。图24是基于离线处理的显示的例子,将以光点SP6作为中心的圆形标记M6重叠显示于肿瘤tm6的图像上。
不仅是上述的方式,还可以将图像与圆形标记建立关联来记录。例如,如图25所示,将图像(图像文件)、光点位置(坐标)及表示圆形标记的点的坐标(能够参考存储器139或存储器212来获取)建立关联来记录于图像记录部207。由此,能够读出所记录的图像及表示圆形标记的点的坐标,并将圆形标记重叠显示于图像上(参考图24)。
如上所述,通过将所拍摄的图像、光点位置、表示圆形标记的点的坐标等建立关联来记录,能够实现圆形标记显示等事后的处理及测量,能够缩短将内窥镜插入到受检体的时间,并能够减轻对受检体的负担。另外,用于测量的图像等不仅可以利用记录于图像记录部207的图像,还可以经由图像输入接口205(参考图2)从CD(光盘,Compact Disk)、DVD(数字多功能盘,Digital Versatile Disc)等非临时性记录介质获取。
<利用光点的移动轨迹的操作>
在画面显示光点的移动轨迹的情况下,对利用了所显示的移动轨迹的操作进行说明。首先,施术者操作手持操作部102,向上下左右改变末端硬质部116的方向,通过筛选发现病变(圆形观察;步骤1)。将步骤1的状态示于图26的(a)部分。在步骤1的状态下,光点SP2及圆形标记M2(以光点SP2作为中心)存在于远离肿瘤tm2的位置,圆形标记M2作为测量用的指标是无效的。因此,施术者进一步操作手持操作部102,向上下左右改变末端硬质部116的方向,如图26的(b)部分,将肿瘤tm2放在光点的移动轨迹T2上(步骤2)。移动轨迹T2表示改变了拍摄距离时的光点的移动轨迹,因此通过从步骤2的状态推拉插入部104,能够将光点SP2放在肿瘤tm2上。第1实施方式中,图26的左下为拍摄距离的最近侧且右上为最远侧,因此通过从图26的(b)部分的状态向手边拉靠插入部104,光点SP2在移动轨迹T2上向最近侧移动,能够如图26的(c)部分那样将光点SP2放在肿瘤tm2上(步骤3)。通过步骤3,圆形标记M2与肿瘤tm2重叠,因此施术者对圆形标记M2的实际尺寸(例如,5mm)与肿瘤tm2进行比较来测量肿瘤tm2的大小(步骤4)。并且,根据需要,对手持操作部102(或者操作部208)进行释放操作(指示进行图像记录的操作),将形成有光点SP2的图像记录于图像记录部207(图像记录部)(步骤5)。如在后面进行详细叙述,若事先将图像、光点位置等记录于图像记录部207,则能够离线(事后)进行圆形标记显示等处理(参考图22~图25)。
如此,通过将圆形标记及光点的移动轨迹显示于光点的附近,施术者通过内窥镜的操作能够轻松地掌握光点及圆形标记如何移动,能够迅速且轻松地进行测量。
<其他>
本发明的测量辅助装置、内窥镜系统及内窥镜系统的处理器除了测量作为生物体的受检体以外,还适用于测量配管等非生物体的受检体的情况。并且,本发明的测量辅助装置并不限于内窥镜,还能够适用于测量工业用组件等的尺寸、形状的情况。
以上,对本发明的实施方式进行了说明,但本发明并不限定于上述方式,能够在不脱离本发明精神的范围内进行各种变形。
符号说明
10-内窥镜系统,100-内窥镜主体,102-手持操作部,104-插入部,106-通用电缆,108-光导件连接器,109-电连接器,112-软性部,114-弯曲部,116-末端硬质部,116A-末端侧端面,123-照明部,123A-照明用透镜,123B-照明用透镜,126-钳道口,130-摄像光学系统,132-摄像透镜,134-摄像元件,136-驱动电路,138-AFE,139-存储器,170-光导件,200-处理器,202-图像输入控制器,204-图像处理部,205-图像输入接口,206-视频输出部,207-图像记录部,208-操作部,209-语音处理部,209A-扬声器,210-CPU,212-存储器,300-光源装置,310-光源,310A-可见光源,310B-红外光源,330-光圈,340-聚光透镜,350-光源控制部,400-监视器,500-激光模块,501-纤维外皮,502-激光光源模块,503-聚光透镜,504-光纤,506-激光头,507-增强材料,508-金属箍,509-壳体,510-GRIN透镜,512-棱镜,A01-按钮,A02-按钮,A03-按钮,A03a-按钮,A03b-按钮,A04-按钮,A05-按钮,A05a-按钮,A05c-滑动杆,A06-按钮,A07-按钮,A08-按钮,AL1-顶角,B01-按钮,B02-按钮,B03-按钮,B04-按钮,B05-按钮,BT1-供气供水按钮,BT2-吸引按钮,BT3-功能按钮,C01-区域,C02-区域,C03-区域,C04-区域,C05-区域,C06-区域,C07-区域,C08-区域,D01-图像显示区域,D02-信息显示区域,D02A-区域,D02B-区域,E1-最近端,E2-距离,E3-最远端,IA-拍摄范围,L1-光轴,L2-光轴,M1-圆形标记,M1N-标记,M2-圆形标记,M4-圆形标记,M4N-标记,M5-圆形标记,M5N-圆形标记,M6-圆形标记,P4-光点位置,P5-光点位置,P6-光点位置,Q1-箭头,Q2-箭头,Q3-箭头,R1-范围,R2-拍摄范围,S10~S34-测量辅助方法的各步骤,SP0-光点,SP1-光点,SP2-光点,SP4-光点,SP4F-光点,SP4N-光点,SP5-光点,SP5F-光点,SP5N-光点,SP6-光点,T1-移动轨迹,T1E-区域,T1F-区域,T1N-区域,T2-移动轨迹,V01-区域,V02-区域,V03-区域,V04-区域,V05-区域,V06-区域,V07-区域,V08-区域,tm-肿瘤,tm1-肿瘤,tm2-肿瘤,tm4-肿瘤,tm5-肿瘤,tm6-肿瘤。
Claims (13)
1.一种测量辅助装置,其具备:
头部,其射出测量辅助光;
摄像部,其借助摄像光学系统以及摄像元件而对通过所述测量辅助光形成有光点的被摄体的图像进行拍摄;
测量部,其测量所述图像中的所述光点的位置;以及
显示控制部,其在所述被摄体的图像中在所述光点的位置附近显示指标图形,所述指标图形表示所述被摄体中的特定区域的实际尺寸,该指标图形的大小是根据所述图像中的所述光点的位置而设定的,
所述头部射出如下的所述测量辅助光,所述测量辅助光在将所述测量辅助光的光轴投影到包含所述摄像光学系统的光轴的平面时,相对于所述摄像光学系统的光轴具有非0度的倾角且横穿所述摄像光学系统的视场角,
所述显示控制部在所述测量的所述光点的位置附近显示了所述指标图形时,在基于所述显示的所述指标图形的所述特定区域的测量有效的情况和无效的情况下,以不同的方式显示所述指标图形。
2.根据权利要求1所述的测量辅助装置,其中,
当所述光点的位置位于对所述图像设定的能够测量的区域的内侧时,所述显示控制部判断为基于所述指标图形的所述特定区域的测量有效。
3.根据权利要求1或2所述的测量辅助装置,其中,
当根据所述光点的位置而计算出的所述图像的拍摄距离在能够测量的范围内时,所述显示控制部判断为基于所述指标图形的所述特定区域的测量有效。
4.根据权利要求1至3中任意一项所述的测量辅助装置,其中,
在基于所述指标图形的所述特定区域的测量有效的情况和无效的情况下,所述显示控制部改变所述指标图形的颜色以及形状中的至少一方而进行显示。
5.根据权利要求1至4中任意一项所述的测量辅助装置,其中,该测量辅助装置具备:
图像记录部,其记录形成有所述光点的所述被摄体的图像,
所述显示控制部读出记录于所述图像记录部的所述被摄体的图像,在所述读出的所述被摄体的图像上重叠显示所述指标图形。
6.根据权利要求5所述的测量辅助装置,其中,
所述图像记录部将所述被摄体的图像与所述指标图形关联起来记录,
所述显示控制部读出记录于所述图像记录部的所述被摄体的图像和所述指标图形,将所述读出的所述指标图形重叠于所述读出的所述被摄体的图像上而进行显示。
7.根据权利要求1至6中任意一项所述的测量辅助装置,其中,
所述显示控制部将以所述光点作为中心并表示所述实际尺寸的圆作为所述指标图形而重叠于所述图像上而进行显示。
8.根据权利要求1至7中任意一项所述的测量辅助装置,其中,
在改变了所述图像的拍摄距离时,所述显示控制部将表示所述光点在所述图像中移动的轨迹的信息重叠于所述图像上而进行显示。
9.一种内窥镜系统,其具备:
权利要求1至8中任意一项所述的测量辅助装置;以及
内窥镜,其具有插入到受检体的插入部以及连接于所述插入部的基端侧的操作部,所述插入部具有末端硬质部、连接于所述末端硬质部的基端侧的弯曲部以及连接于所述弯曲部的基端侧的软性部,
所述头部和使所述光点的光学像成像于所述摄像元件的摄像透镜设置于所述末端硬质部。
10.根据权利要求9所述的内窥镜系统,其中,
所述内窥镜具备信息存储部,该信息存储部存储表示所述指标图形的信息。
11.根据权利要求9或10所述的内窥镜系统,其中,该内窥镜系统具备:
显示条件设定部,该显示条件设定部设定所述指标图形的显示条件。
12.一种处理器,其为权利要求9至11中任意一项所述的内窥镜系统的处理器,
所述处理器具备所述测量部以及所述显示控制部。
13.根据权利要求12所述的处理器,其中,该处理器还具备:
信息获取部,该信息获取部获取所述内窥镜的信息,
所述显示控制部根据获取的所述信息而判断基于所述显示的所述指标图形的所述特定区域的测量是否有效。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017063543 | 2017-03-28 | ||
JP2017-063543 | 2017-03-28 | ||
PCT/JP2018/008355 WO2018180249A1 (ja) | 2017-03-28 | 2018-03-05 | 計測支援装置、内視鏡システム、及びプロセッサ |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110418596A true CN110418596A (zh) | 2019-11-05 |
CN110418596B CN110418596B (zh) | 2021-12-24 |
Family
ID=63675481
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880017670.0A Active CN110418596B (zh) | 2017-03-28 | 2018-03-05 | 测量辅助装置、内窥镜系统及处理器 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11419694B2 (zh) |
EP (1) | EP3603477A4 (zh) |
JP (1) | JP6666518B2 (zh) |
CN (1) | CN110418596B (zh) |
WO (1) | WO2018180249A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11399707B2 (en) * | 2018-07-04 | 2022-08-02 | Fujifilm Corporation | Endoscope apparatus |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6934725B2 (ja) * | 2017-01-26 | 2021-09-15 | オリンパス株式会社 | 光学ユニット |
CN110461211A (zh) * | 2017-03-24 | 2019-11-15 | 柯惠有限合伙公司 | 内窥镜和治疗方法 |
WO2019207742A1 (ja) * | 2018-04-26 | 2019-10-31 | オリンパス株式会社 | 内視鏡用光モジュール、内視鏡、および内視鏡用光モジュールの製造方法 |
JP2020151250A (ja) * | 2019-03-20 | 2020-09-24 | 富士フイルム株式会社 | 内視鏡装置及びその作動方法並びに内視鏡装置用プログラム |
EP4020055A4 (en) * | 2019-08-23 | 2022-10-26 | FUJIFILM Corporation | ENDOSCOPE DEVICE, METHOD OF OPERATION THEREOF AND PROGRAM FOR ENDOSCOPE DEVICE |
CN114286961A (zh) * | 2019-08-28 | 2022-04-05 | 富士胶片株式会社 | 内窥镜系统及其工作方法 |
CN111064934A (zh) * | 2019-12-30 | 2020-04-24 | 元力(天津)科技有限公司 | 一种医用影像处理系统及方法 |
Citations (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE3629435A1 (de) * | 1985-08-29 | 1987-03-12 | Toshiba Kawasaki Kk | Endoskopanordnung |
JPH03231622A (ja) * | 1990-02-06 | 1991-10-15 | Olympus Optical Co Ltd | 内視鏡装置 |
JPH0430831A (ja) * | 1990-05-25 | 1992-02-03 | Olympus Optical Co Ltd | 計測用内視鏡装置 |
US5090400A (en) * | 1987-03-31 | 1992-02-25 | Kabushiki Kaisha Toshiba | Measuring endoscope |
JPH07136101A (ja) * | 1993-11-16 | 1995-05-30 | Sony Corp | 計測機能付き内視鏡 |
CN1550039A (zh) * | 2001-07-06 | 2004-11-24 | О | 成像系统以及采用倒易空间光学设计的方法 |
WO2005077272A1 (de) * | 2004-02-11 | 2005-08-25 | Karl Storz Gmbh & Co. Kg | Verfahren und vorrichtung zum erstellen zumindest eines ausschnitts eines virtuellen 3d-modells eines körperinnenraums |
CN1695546A (zh) * | 2004-05-10 | 2005-11-16 | 富士能株式会社 | 体腔诊断系统 |
CN1917805A (zh) * | 2004-02-04 | 2007-02-21 | 奥林巴斯株式会社 | 内窥镜用信号处理装置 |
US20070081168A1 (en) * | 2005-08-23 | 2007-04-12 | University Of Washington - Uw Techtransfer | Distance determination in a scanned beam image capture device |
AT502919A1 (de) * | 2005-12-14 | 2007-06-15 | Univ Innsbruck | Medizinisches navigationssystem |
US20070197874A1 (en) * | 2006-02-23 | 2007-08-23 | Olympus Corporation | Endoscope observation device, observation device and observation method using endoscope |
CN101208037A (zh) * | 2005-03-08 | 2008-06-25 | 威神斯扣普技术有限公司 | 使用微型内窥镜的便携式成像系统 |
EP2106748A1 (en) * | 2008-03-31 | 2009-10-07 | HOYA Corporation | Endoscope measuring 3-D profile |
WO2010071683A1 (en) * | 2008-12-17 | 2010-06-24 | Dialco, Llc | Device for preventing endoscope damage by errant laser fire in a surgical laser |
CN101902961A (zh) * | 2007-10-15 | 2010-12-01 | 基文影像公司 | 用于估算体腔内物体大小的装置、系统及方法 |
EP2263520A1 (en) * | 2009-06-18 | 2010-12-22 | Fujifilm Corporation | Endoscope system, endoscope, and method for measuring distance and illumination angle |
CN102429625A (zh) * | 2010-09-29 | 2012-05-02 | 富士胶片株式会社 | 内窥镜装置 |
CN102469931A (zh) * | 2009-07-06 | 2012-05-23 | 富士胶片株式会社 | 内窥镜用照明装置及内窥镜装置 |
WO2012107041A1 (de) * | 2011-02-11 | 2012-08-16 | Olaf Christiansen | Endoskopisches bildverarbeitungssystem mit mitteln, welche im erfassungsbereich einer optischen digitalkamera eine geometrische vermessungsinformation erzeugen |
CN102821670A (zh) * | 2010-03-31 | 2012-12-12 | 富士胶片株式会社 | 内窥镜观察辅助系统、方法、装置和程序 |
CN103068300A (zh) * | 2010-08-06 | 2013-04-24 | 奥林巴斯株式会社 | 内窥镜系统、控制方法以及摄像装置 |
CN103120584A (zh) * | 2011-10-27 | 2013-05-29 | 柯惠Lp公司 | 用于原位手术应用的测量学系统中的点大小光照 |
EP2648600A1 (en) * | 2011-01-21 | 2013-10-16 | Alcon Research, Ltd. | Combined surgical endoprobe for optical coherence tomography, illumination or photocoagulation |
CN103415240A (zh) * | 2011-10-27 | 2013-11-27 | 奥林巴斯医疗株式会社 | 内窥镜系统 |
CN103654686A (zh) * | 2012-09-07 | 2014-03-26 | 富士胶片株式会社 | 内窥镜系统及其处理器装置、内窥镜图像的显示控制方法及胶囊内窥镜系统 |
CN203693533U (zh) * | 2013-12-30 | 2014-07-09 | 深圳市开立科技有限公司 | 一种内窥镜系统、内窥镜冷光源及其聚光透镜 |
CN104146711A (zh) * | 2014-08-01 | 2014-11-19 | 深圳市开立科技有限公司 | 一种基于内窥镜的病灶尺寸测量方法和系统 |
US20140357986A1 (en) * | 2013-06-03 | 2014-12-04 | Faculty Physicians And Surgeons Of Loma Linda University School Of Medicine | Methods and apparatuses for fluoro-less or near fluoro-less percutaneous surgery access |
CN104271040A (zh) * | 2012-05-09 | 2015-01-07 | 皇家飞利浦有限公司 | 用于使光学形状感测稳定的系统和方法 |
EP2843360A1 (de) * | 2013-09-03 | 2015-03-04 | Universität Stuttgart | Robustes One-Shot-Interferometer und OCT- Verfahren, insbesondere zur Materialmessung und auch Tumorzellen-Erkennung |
CN104434000A (zh) * | 2013-09-23 | 2015-03-25 | 富士胶片株式会社 | 内窥镜系统和内窥镜系统的工作方法 |
CN104768446A (zh) * | 2012-09-10 | 2015-07-08 | 俄勒冈健康科学大学 | 用光学相干断层扫描血管造影对局部循环进行量化 |
CN105025774A (zh) * | 2013-03-06 | 2015-11-04 | 奥林巴斯株式会社 | 被检体观察系统以及方法 |
CN105050473A (zh) * | 2013-03-27 | 2015-11-11 | 奥林巴斯株式会社 | 图像处理装置、内窥镜装置、程序以及图像处理方法 |
CN105105852A (zh) * | 2015-09-16 | 2015-12-02 | 广州乔铁医疗科技有限公司 | 具有测距功能的3d胆道镜系统 |
CN105142494A (zh) * | 2013-07-12 | 2015-12-09 | 奥林巴斯株式会社 | 内窥镜系统 |
US20160198982A1 (en) * | 2005-05-13 | 2016-07-14 | G.I. View Ltd. | Endoscope measurement techniques |
CN106163367A (zh) * | 2014-03-31 | 2016-11-23 | 富士胶片株式会社 | 医用图像处理装置及其工作方法以及内窥镜系统 |
US20160338590A1 (en) * | 2015-05-20 | 2016-11-24 | Comprehensive Telemedicine | Multipurpose Diagnostic Examination Apparatus And System |
CN106419821A (zh) * | 2016-08-31 | 2017-02-22 | 北京大学第三医院 | 一种关节镜下测量关节内结构的方法和装置 |
CN106455941A (zh) * | 2014-05-04 | 2017-02-22 | 捷锐士阿希迈公司(以奥林巴斯美国外科技术名义) | 在碎石术期间定位碎片 |
JP2017038958A (ja) * | 2016-11-16 | 2017-02-23 | 富士フイルム株式会社 | 内視鏡装置 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3817635A (en) | 1967-08-08 | 1974-06-18 | Olumpus Co Ltd | Device for measuring the actual dimension of an object at the forward end portion of an endoscope |
US3595220A (en) | 1967-08-08 | 1971-07-27 | Olympus Optical Co | Device for measuring the distance of an object from the forward end portion of an endoscope |
JPS5145911B1 (zh) * | 1967-08-08 | 1976-12-06 | ||
JPS5145911A (ja) | 1974-10-17 | 1976-04-19 | Matsushita Electric Ind Co Ltd | Terebijonjuzoki |
JPS6273223A (ja) * | 1985-09-26 | 1987-04-03 | Toshiba Corp | 内視鏡装置 |
JPS6249208A (ja) * | 1985-08-29 | 1987-03-03 | Toshiba Corp | 距離測定機能付内視鏡 |
DE3723228A1 (de) * | 1987-07-14 | 1989-01-26 | Wolf Gmbh Richard | Endoskopische fernsehanlage |
US4935810A (en) | 1988-10-26 | 1990-06-19 | Olympus Optical Co., Ltd. | Three-dimensional measuring apparatus |
JPH02216404A (ja) | 1989-02-17 | 1990-08-29 | Olympus Optical Co Ltd | 計測用内視鏡装置 |
US4980763A (en) * | 1989-06-12 | 1990-12-25 | Welch Allyn, Inc. | System for measuring objects viewed through a borescope |
JPH0473763A (ja) | 1990-07-16 | 1992-03-09 | Kansai Paint Co Ltd | 光硬化性電着塗料組成物 |
JPH04323505A (ja) | 1991-04-23 | 1992-11-12 | Minolta Camera Co Ltd | 測長装置を内蔵したカメラ |
US5669871A (en) * | 1994-02-21 | 1997-09-23 | Olympus Optical Co., Ltd. | Endoscope measurement apparatus for calculating approximate expression of line projected onto object to measure depth of recess or the like |
DE4439227C1 (de) * | 1994-11-03 | 1996-01-11 | Wolf Gmbh Richard | Endoskop und Verfahren zur Ermittlung von Objektabständen |
JP3720727B2 (ja) * | 2001-05-07 | 2005-11-30 | オリンパス株式会社 | 内視鏡形状検出装置 |
JP2002336188A (ja) | 2001-05-21 | 2002-11-26 | Olympus Optical Co Ltd | 計測用内視鏡装置 |
FR2868550B1 (fr) * | 2004-04-02 | 2006-09-29 | Tokendo Soc Par Actions Simpli | Dispositif de metrologie par pointage laser pour sonde videoendoscopique |
JP2009521978A (ja) * | 2005-12-29 | 2009-06-11 | ギブン イメージング リミテッド | 体内管腔の物体の大きさを推定するためのシステム、装置、及び方法 |
JP5026769B2 (ja) | 2006-11-14 | 2012-09-19 | オリンパス株式会社 | 計測用内視鏡装置、プログラム、および記録媒体 |
JP5441527B2 (ja) | 2009-07-07 | 2014-03-12 | エフ・エーシステムエンジニアリング株式会社 | 立体映像表示装置の立体スケール像形成装置 |
JP2011069965A (ja) | 2009-09-25 | 2011-04-07 | Japan Atomic Energy Agency | 撮像装置、画像表示方法、及び画像表示プログラムが記録された記録媒体 |
JP5576739B2 (ja) | 2010-08-04 | 2014-08-20 | オリンパス株式会社 | 画像処理装置、画像処理方法、撮像装置及びプログラム |
JP5684033B2 (ja) | 2011-04-11 | 2015-03-11 | オリンパス株式会社 | 撮像装置及び内視鏡装置の作動方法 |
US20130027548A1 (en) * | 2011-07-28 | 2013-01-31 | Apple Inc. | Depth perception device and system |
US9498182B2 (en) | 2012-05-22 | 2016-11-22 | Covidien Lp | Systems and methods for planning and navigation |
CN105531720B (zh) | 2013-10-02 | 2019-05-17 | 基文影像公司 | 用于体内对象的大小估计的系统和方法 |
EP2903250A1 (de) * | 2014-01-31 | 2015-08-05 | WolfVision Innovation GmbH | Bildaufnahmeverfahren mit adaptiver Markierlichtemission und ebensolches Bildaufnahmegerät |
EP3150103A4 (en) | 2014-09-25 | 2018-02-21 | Olympus Corporation | Endoscope system |
WO2017168986A1 (ja) | 2016-03-31 | 2017-10-05 | ソニー株式会社 | 制御装置、内視鏡撮像装置、制御方法、プログラムおよび内視鏡システム |
-
2018
- 2018-03-05 WO PCT/JP2018/008355 patent/WO2018180249A1/ja unknown
- 2018-03-05 EP EP18775941.0A patent/EP3603477A4/en active Pending
- 2018-03-05 CN CN201880017670.0A patent/CN110418596B/zh active Active
- 2018-03-05 JP JP2019509088A patent/JP6666518B2/ja active Active
-
2019
- 2019-08-19 US US16/543,619 patent/US11419694B2/en active Active
Patent Citations (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE3629435A1 (de) * | 1985-08-29 | 1987-03-12 | Toshiba Kawasaki Kk | Endoskopanordnung |
US5090400A (en) * | 1987-03-31 | 1992-02-25 | Kabushiki Kaisha Toshiba | Measuring endoscope |
JPH03231622A (ja) * | 1990-02-06 | 1991-10-15 | Olympus Optical Co Ltd | 内視鏡装置 |
JPH0430831A (ja) * | 1990-05-25 | 1992-02-03 | Olympus Optical Co Ltd | 計測用内視鏡装置 |
JPH07136101A (ja) * | 1993-11-16 | 1995-05-30 | Sony Corp | 計測機能付き内視鏡 |
CN1550039A (zh) * | 2001-07-06 | 2004-11-24 | О | 成像系统以及采用倒易空间光学设计的方法 |
CN1917805A (zh) * | 2004-02-04 | 2007-02-21 | 奥林巴斯株式会社 | 内窥镜用信号处理装置 |
WO2005077272A1 (de) * | 2004-02-11 | 2005-08-25 | Karl Storz Gmbh & Co. Kg | Verfahren und vorrichtung zum erstellen zumindest eines ausschnitts eines virtuellen 3d-modells eines körperinnenraums |
CN1695546A (zh) * | 2004-05-10 | 2005-11-16 | 富士能株式会社 | 体腔诊断系统 |
CN101208037A (zh) * | 2005-03-08 | 2008-06-25 | 威神斯扣普技术有限公司 | 使用微型内窥镜的便携式成像系统 |
US20160198982A1 (en) * | 2005-05-13 | 2016-07-14 | G.I. View Ltd. | Endoscope measurement techniques |
US20070081168A1 (en) * | 2005-08-23 | 2007-04-12 | University Of Washington - Uw Techtransfer | Distance determination in a scanned beam image capture device |
AT502919A1 (de) * | 2005-12-14 | 2007-06-15 | Univ Innsbruck | Medizinisches navigationssystem |
US20070197874A1 (en) * | 2006-02-23 | 2007-08-23 | Olympus Corporation | Endoscope observation device, observation device and observation method using endoscope |
CN101902961A (zh) * | 2007-10-15 | 2010-12-01 | 基文影像公司 | 用于估算体腔内物体大小的装置、系统及方法 |
EP2106748A1 (en) * | 2008-03-31 | 2009-10-07 | HOYA Corporation | Endoscope measuring 3-D profile |
WO2010071683A1 (en) * | 2008-12-17 | 2010-06-24 | Dialco, Llc | Device for preventing endoscope damage by errant laser fire in a surgical laser |
EP2263520A1 (en) * | 2009-06-18 | 2010-12-22 | Fujifilm Corporation | Endoscope system, endoscope, and method for measuring distance and illumination angle |
CN102469931A (zh) * | 2009-07-06 | 2012-05-23 | 富士胶片株式会社 | 内窥镜用照明装置及内窥镜装置 |
CN102821670A (zh) * | 2010-03-31 | 2012-12-12 | 富士胶片株式会社 | 内窥镜观察辅助系统、方法、装置和程序 |
CN103068300A (zh) * | 2010-08-06 | 2013-04-24 | 奥林巴斯株式会社 | 内窥镜系统、控制方法以及摄像装置 |
CN102429625A (zh) * | 2010-09-29 | 2012-05-02 | 富士胶片株式会社 | 内窥镜装置 |
EP2648600A1 (en) * | 2011-01-21 | 2013-10-16 | Alcon Research, Ltd. | Combined surgical endoprobe for optical coherence tomography, illumination or photocoagulation |
WO2012107041A1 (de) * | 2011-02-11 | 2012-08-16 | Olaf Christiansen | Endoskopisches bildverarbeitungssystem mit mitteln, welche im erfassungsbereich einer optischen digitalkamera eine geometrische vermessungsinformation erzeugen |
CN103415240A (zh) * | 2011-10-27 | 2013-11-27 | 奥林巴斯医疗株式会社 | 内窥镜系统 |
CN103120584A (zh) * | 2011-10-27 | 2013-05-29 | 柯惠Lp公司 | 用于原位手术应用的测量学系统中的点大小光照 |
CN104271040A (zh) * | 2012-05-09 | 2015-01-07 | 皇家飞利浦有限公司 | 用于使光学形状感测稳定的系统和方法 |
CN103654686A (zh) * | 2012-09-07 | 2014-03-26 | 富士胶片株式会社 | 内窥镜系统及其处理器装置、内窥镜图像的显示控制方法及胶囊内窥镜系统 |
CN104768446A (zh) * | 2012-09-10 | 2015-07-08 | 俄勒冈健康科学大学 | 用光学相干断层扫描血管造影对局部循环进行量化 |
CN105025774A (zh) * | 2013-03-06 | 2015-11-04 | 奥林巴斯株式会社 | 被检体观察系统以及方法 |
CN105050473A (zh) * | 2013-03-27 | 2015-11-11 | 奥林巴斯株式会社 | 图像处理装置、内窥镜装置、程序以及图像处理方法 |
US20140357986A1 (en) * | 2013-06-03 | 2014-12-04 | Faculty Physicians And Surgeons Of Loma Linda University School Of Medicine | Methods and apparatuses for fluoro-less or near fluoro-less percutaneous surgery access |
CN105142494A (zh) * | 2013-07-12 | 2015-12-09 | 奥林巴斯株式会社 | 内窥镜系统 |
EP2843360A1 (de) * | 2013-09-03 | 2015-03-04 | Universität Stuttgart | Robustes One-Shot-Interferometer und OCT- Verfahren, insbesondere zur Materialmessung und auch Tumorzellen-Erkennung |
CN104434000A (zh) * | 2013-09-23 | 2015-03-25 | 富士胶片株式会社 | 内窥镜系统和内窥镜系统的工作方法 |
CN203693533U (zh) * | 2013-12-30 | 2014-07-09 | 深圳市开立科技有限公司 | 一种内窥镜系统、内窥镜冷光源及其聚光透镜 |
CN106163367A (zh) * | 2014-03-31 | 2016-11-23 | 富士胶片株式会社 | 医用图像处理装置及其工作方法以及内窥镜系统 |
CN106455941A (zh) * | 2014-05-04 | 2017-02-22 | 捷锐士阿希迈公司(以奥林巴斯美国外科技术名义) | 在碎石术期间定位碎片 |
CN104146711A (zh) * | 2014-08-01 | 2014-11-19 | 深圳市开立科技有限公司 | 一种基于内窥镜的病灶尺寸测量方法和系统 |
US20160338590A1 (en) * | 2015-05-20 | 2016-11-24 | Comprehensive Telemedicine | Multipurpose Diagnostic Examination Apparatus And System |
CN105105852A (zh) * | 2015-09-16 | 2015-12-02 | 广州乔铁医疗科技有限公司 | 具有测距功能的3d胆道镜系统 |
CN106419821A (zh) * | 2016-08-31 | 2017-02-22 | 北京大学第三医院 | 一种关节镜下测量关节内结构的方法和装置 |
JP2017038958A (ja) * | 2016-11-16 | 2017-02-23 | 富士フイルム株式会社 | 内視鏡装置 |
Non-Patent Citations (3)
Title |
---|
张文德: "内窥镜测量尺", 《中原医刊》 * |
李艳军: "全光纤OCT内窥镜技术及长周期光纤光栅形成机理研究", 《中国博士学位论文全文数据库 信息科技辑》 * |
王泽平: "高分辨率可见光傅里叶变换光谱测量方法研究", 《中国优秀硕士学位论文全文数据库 基础科学辑》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11399707B2 (en) * | 2018-07-04 | 2022-08-02 | Fujifilm Corporation | Endoscope apparatus |
Also Published As
Publication number | Publication date |
---|---|
WO2018180249A1 (ja) | 2018-10-04 |
JP6666518B2 (ja) | 2020-03-13 |
US11419694B2 (en) | 2022-08-23 |
EP3603477A1 (en) | 2020-02-05 |
US20190388175A1 (en) | 2019-12-26 |
JPWO2018180249A1 (ja) | 2020-01-16 |
CN110418596B (zh) | 2021-12-24 |
EP3603477A4 (en) | 2020-02-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110418596A (zh) | 测量辅助装置、内窥镜系统及处理器 | |
US12059126B2 (en) | Endoscope system | |
US11536556B2 (en) | Measurement support device, endoscope system, processor for endoscope system, and measurement support method for measuring object size | |
US10708553B2 (en) | Measurement support device, endoscope system, processor for endoscope system | |
US11490785B2 (en) | Measurement support device, endoscope system, and processor measuring size of subject using measurement auxiliary light | |
WO2019017018A1 (ja) | 内視鏡装置及び計測支援方法 | |
JP6644899B2 (ja) | 計測支援装置、内視鏡システム、及び内視鏡システムのプロセッサ | |
JP2019187598A (ja) | 内視鏡装置 | |
JP6738465B2 (ja) | 内視鏡システム | |
JP2008125989A (ja) | 内視鏡ポイント光照射位置調整システム | |
CN110799081B (zh) | 内窥镜装置及测量支持方法 | |
JP6549021B2 (ja) | 内視鏡システム、及び計測装置の作動方法 | |
JP7343594B2 (ja) | 内視鏡 | |
JP2020151250A (ja) | 内視鏡装置及びその作動方法並びに内視鏡装置用プログラム | |
JP2024508315A (ja) | シーン深度推測を強化するための視鏡修正 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |