CN115209785A - 内窥镜系统、控制方法及控制程序 - Google Patents
内窥镜系统、控制方法及控制程序 Download PDFInfo
- Publication number
- CN115209785A CN115209785A CN202180016651.8A CN202180016651A CN115209785A CN 115209785 A CN115209785 A CN 115209785A CN 202180016651 A CN202180016651 A CN 202180016651A CN 115209785 A CN115209785 A CN 115209785A
- Authority
- CN
- China
- Prior art keywords
- information
- image
- endoscope
- examination
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000004458 analytical method Methods 0.000 claims description 87
- 238000003384 imaging method Methods 0.000 claims description 57
- 238000012545 processing Methods 0.000 claims description 46
- 238000005286 illumination Methods 0.000 claims description 40
- 238000003780 insertion Methods 0.000 claims description 28
- 230000037431 insertion Effects 0.000 claims description 27
- 206010028980 Neoplasm Diseases 0.000 claims description 13
- 230000001678 irradiating effect Effects 0.000 claims description 13
- 238000001514 detection method Methods 0.000 claims description 9
- 210000000056 organ Anatomy 0.000 claims description 6
- 238000001228 spectrum Methods 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 19
- 230000003287 optical effect Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 12
- 238000005096 rolling process Methods 0.000 description 9
- 210000002784 stomach Anatomy 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 230000002792 vascular Effects 0.000 description 7
- 239000004065 semiconductor Substances 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 4
- 238000005859 coupling reaction Methods 0.000 description 4
- 238000002604 ultrasonography Methods 0.000 description 4
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 3
- 238000005452 bending Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 229910052760 oxygen Inorganic materials 0.000 description 3
- 239000001301 oxygen Substances 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000000295 emission spectrum Methods 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 210000002429 large intestine Anatomy 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 206010061218 Inflammation Diseases 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 210000001198 duodenum Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012840 feeding operation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000004054 inflammatory process Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00039—Operational features of endoscopes provided with input arrangements for the user
- A61B1/0004—Operational features of endoscopes provided with input arrangements for the user for electronic operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/07—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/12—Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
- A61B8/469—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/26—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes using light guides
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00165—Optical arrangements with light-conductive means, e.g. fibre optics
Abstract
本发明提供一种能够简单地切换显示在分割画面上的信息的内窥镜系统、控制方法及控制程序。显示器(7)的画面(70)包括主画面(71)及子画面(72、73)和输入一览画面(74)。在由内窥镜(1)进行检查时,控制装置(4)将与检查相关的多种信息分别显示在主画面(71)及子画面(72、73)上。并且,控制装置(4)将显示在主画面(71)及子画面(72、73)中所包含的切换对象的信息区域中的信息的选项显示在输入一览画面(74)上。然后,控制装置(4)根据选择选项的用户操作来切换显示在切换对象的信息区域中的信息。
Description
技术领域
本发明涉及一种内窥镜系统、控制方法及控制程序。
背景技术
以往,已知有一种内窥镜系统,其一边将白色光等通常光照射到受检体内一边进行连续摄像,并显示实时图像。并且,已知有一种内窥镜系统,其一边将窄频带光等特殊光照射到受检体内一边进行连续摄像,并进行IEE(Image-Enhanced Endoscopy:图像增强内镜)等分析。
在专利文献1中,记载有一种医疗用图像处理装置,其生成将内窥镜观察图像设为父画面(Parent screen)且将内窥镜插入形状图像设为子画面的合成图像、或将内窥镜观察图像设为父画面且将捕获预览图像设为子画面的合成图像。
在专利文献2中,记载有一种电子内窥镜系统,其通过设定按钮的操作,能够将监视器上的显示模式设定为将单一的图像显示在监视器上的单一图像显示模式、或将多个图像显示在监视器上的多个图像显示模式。
以往技术文献
专利文献
专利文献1:日本特开2009-219547号公报
专利文献2:日本特开2013-153991号公报
发明内容
发明要解决的技术课题
然而,在上述以往技术中,在分割画面上同时显示与内窥镜检查等检查相关的多种信息的结构中,无法简单地切换显示在分割画面上的信息。
例如,在内窥镜检查中,要求在显示器上主要显示使用了通过设置于内窥镜的摄像元件而获得的摄像图像的实时图像,并且也显示例如根据通过设置于内窥镜的摄像元件而获得的摄像图像由AI(Artificial Intelligence:人工智能)进行的分析的结果等的辅助信息。
应与该实时图像一起显示的辅助信息存在多种。然后,希望通过根据内窥镜检查的状况由检查者(例如,医生)进行的判断来简单地切换该多种辅助信息中与实时图像一起显示的信息。但是,在上述专利文献1、2中没有公开解决这种课题的手段。
本发明是鉴于上述情况而完成的,其目的在于,提供一种能够简单地切换显示在分割画面上的信息的内窥镜系统、控制方法及控制程序。
用于解决技术课题的手段
本发明为内窥镜系统,其包括在由内窥镜进行检查时检查者能够视觉辨认的显示器和处理器,其中,上述显示器的画面包含多个信息区域和选择区域,在进行上述检查时,上述处理器进行如下处理:将与上述检查相关的多种信息分别显示在上述多个信息区域中;将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中;根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
并且,本发明为内窥镜系统的控制方法,上述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,其中,上述显示器的画面包含多个信息区域和选择区域,在进行上述检查时,将与上述检查相关的多种信息分别显示在上述多个信息区域中,将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中,根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
并且,本发明为控制内窥镜系统的控制程序,上述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,上述控制程序用于使计算机执行如下处理:上述显示器的画面包含多个信息区域和选择区域;在进行上述检查时,将与上述检查相关的多种信息分别显示在上述多个信息区域中;将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中;根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
发明效果
根据本发明,能够提供一种能够简单地切换显示在分割画面上的信息的内窥镜系统、控制方法及控制程序。
附图说明
图1是表示本发明的一实施方式的内窥镜装置100的一例的图。
图2是表示图1所示的内窥镜装置100的内部结构的示意图。
图3是表示由图2所示的光源装置5产生的光的光谱的一例的图。
图4是表示图2所示的摄像元件23的概略结构的平面示意图。
图5是表示图2所示的信号处理部42的功能框图的一例的图。
图6是表示内窥镜装置100中的照明光的切换的一例的图。
图7是表示显示在显示器7上的画面的一例的图。
图8是表示显示信息的切换对象的信息区域的变更的一例的图。
图9是表示显示信息的切换的一例的图。
具体实施方式
以下,参考附图并对本发明的实施方式进行说明。
<本发明的一实施方式的内窥镜装置100>
图1是表示本发明的一实施方式的内窥镜装置100的一例的图。
内窥镜装置100为本发明的内窥镜系统的一例。如图1所示,内窥镜装置100具备内窥镜1和与该内窥镜1连接的控制装置4及光源装置5。光源装置5为能够切换并照射特性不同的多种照明光的光源的一例。
控制装置4与显示器7和输入部6连接,所述显示器7显示由内窥镜1拍摄受检体内而获得的摄像图像等,所述输入部6为用于对控制装置4输入各种信息的接口。控制装置4控制内窥镜1、光源装置5及显示器7。
显示器7具有显示像素以二维状排列的显示面,通过在该显示面的各显示像素上描绘构成图像数据的像素数据来进行基于该图像数据的图像的显示。显示器7为在由内窥镜1进行检查时检查者(例如,医生)能够视觉辨认的显示器的一例。
内窥镜1包括:插入部10,为沿一个方向延伸的管状部件,并且插入到受检体内;操作部11,设置于插入部10的基端部,并且设置有用于进行观察模式切换操作、摄像记录操作、钳子操作、送气送水操作及抽吸操作等的操作部件;弯角钮12,与操作部11相邻而设置;及通用塞绳13,包括将内窥镜1分别装卸自如地连接于控制装置4和光源装置5上的连接器部13A、13B。
另外,虽在图1中省略,但是在操作部11及插入部10的内部设置有插入用于采集细胞或息肉等生物组织的钳子的钳子孔、送气及送水用通道、抽吸用通道等各种通道。
插入部10由具有挠性的柔性部10A、设置于柔性部10A的前端的弯曲部10B及设置于弯曲部10B的前端的硬质的前端部10C构成。
弯曲部10B构成为通过弯角钮12的转动操作而弯曲自如。该弯曲部10B根据使用内窥镜1的受检体的部位等,能够向任意方向及任意角度弯曲,从而能够使前端部10C朝向所希望的方向。
<图1所示的内窥镜装置100的内部结构>
图2是表示图1所示的内窥镜装置100的内部结构的示意图。图3是表示由图2所示的光源装置5产生的光的光谱的一例的图。
光源装置5能够切换并照射通常光和特殊光作为照明光。通常光为具有白色光等适合由医生等人类识别的发光光谱的光。特殊光为发光光谱与通常光不同的、具有适合由IEE等计算机进行图像分析的发光光谱的光。
具体而言,光源装置5具备光源用处理器51、光源部52及光路耦合部54。光源用处理器51与控制装置4的系统控制部44连接,并根据来自系统控制部44的指令来控制光源部52。
光源部52例如具有多个半导体光源,将它们分别点亮或熄灭,在点亮的情况下,通过控制各半导体光源的发光量来发出照亮观察对象的照明光。在本实施方式中,光源部52具有V-LED(Violet Light Emitting Diode:紫光发光二极管)52a、B-LED(Blue LightEmitting Diode:蓝光发光二极管)52b、G-LED(Green Light Emitting Diode:绿光发光二极管)52c及R-LED(Red Light Emitting Diode:红光发光二极管)52d这4种颜色的LED。
光源用处理器51通过分别独立地控制V-LED52a、B-LED52b、G-LED52c及R-LED52d,能够将紫色光V、蓝色光B、绿色光G或红色光R分别独立地改变光量来发光。如图3所示,V-LED52a产生中心波长405±10nm、波长范围380~420nm的紫色光V。B-LED52b产生中心波长450±10nm、波长范围420~500nm的蓝色光B。G-LED52c产生波长范围达到480~600nm的绿色光G。R-LED52d产生中心波长为620~630nm且波长范围达到600~650nm的红色光R。
并且,在照射通常光时,光源用处理器51控制各LED52a~52d,以使紫色光V、蓝色光B、绿色光G及红色光R之间的光量比成为Vc∶Bc∶Gc∶Rc的白色光发光。另外,Vc、Bc、Gc、Rc>0。
并且,在照射特殊光时,光源用处理器51控制各LED52a~52d,以使作为短波长的窄频带光的紫色光V、蓝色光B、绿色光G及红色光R之间的光量比成为Vs∶Bs∶Gs∶Rs的特殊光发光。
光量比Vs∶Bs∶Gs∶Rs与照射通常光时所使用的光量比Vc∶Bc∶Gc∶Rc不同,根据观察目的适当确定。例如,在强调表层血管的情况下,优选使Vs大于其他Bs、Gs、Rs,在强调中深层血管的情况下,优选使Gs大于其他Vs、Gs、Rs。
光路耦合部54将从V-LED52a、B-LED52b、G-LED52c及R-LED52d射出的各光进行耦合,并将耦合的光作为照明光射出。从光源部52的光路耦合部54射出的照明光入射到内置在通用塞绳13中的后述光导件53上,并穿过设置于插入部10的前端部10C的照明用透镜50而照射到被摄体上。
在内窥镜1的前端部10C设置有包括物镜21及透镜组22的摄像光学系统、穿过该摄像光学系统而拍摄被摄体的摄像元件23、RAM(Random Access Memory:随机存取存储器)等存储器25、通信接口(I/F)26、摄像驱动部27、用于将从光源部52射出的照明光引导到照明用透镜50的光导件53。
光导件53从前端部10C延伸至通用塞绳13的连接器部13A。在通用塞绳13的连接器部13A与光源装置5连接的状态下,从光源装置5的光源部52射出的照明光成为能够入射到光导件53的状态。
摄像元件23可以使用CCD(Charge Coupled Device:电荷耦合元件)图像传感器或CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)图像传感器等。在本实施方式中,摄像元件23为使用卷帘快门的CMOS。
摄像元件23具有多个像素以二维状配置的受光面,将通过上述摄像光学系统在该受光面上成像的光学像在各像素中转换成电信号(摄像信号)。然后,摄像元件23将转换后的摄像信号从模拟信号转换成规定位数的数字信号,并将转换成数字信号的摄像信号输出至存储器25。摄像元件23例如可以使用搭载原色或补色等滤色器的摄像元件。将从摄像元件23的受光面的各像素输出的摄像信号的集合称为摄像图像信号。
摄像元件23可以在受光面与物镜21的光轴Ax垂直的状态下配置于前端部10C,也可以在受光面与物镜21的光轴Ax平行的状态下配置于前端部10C。
设置于内窥镜1上的摄像光学系统由摄像元件23与物镜21之间的位于来自被摄体的光的光路上的透镜、棱镜等光学部件(包括上述透镜组22)和物镜21构成。摄像光学系统也有时仅由物镜21构成。
存储器25临时记录从摄像元件23输出的数字摄像信号。
通信I/F26与控制装置4的通信接口(I/F)41连接。通信I/F26通过通用塞绳13内的信号线将记录于存储器25中的摄像信号传输至控制装置4中。
摄像驱动部27经由通信I/F26与控制装置4的系统控制部44连接。摄像驱动部27根据由通信I/F26接收的来自系统控制部44的指令来驱动摄像元件23及存储器25。
控制装置4具备通过通用塞绳13与内窥镜1的通信I/F26连接的通信I/F41、信号处理部42、显示控制器43、系统控制部44及记录介质45。
通信I/F41接收从内窥镜1的通信I/F26传输过来的摄像信号并传递至信号处理部42中。
信号处理部42内置有临时记录从通信I/F41接收到的摄像信号的存储器,对作为记录于存储器中的摄像信号的集合的摄像图像信号进行处理(去马赛克处理或伽马补正处理等图像处理)以生成能够进行识别处理等的形式的摄像图像信息。由信号处理部42生成的摄像图像信息记录于硬盘或闪存等记录介质45中。
显示控制器43将基于由信号处理部42生成的摄像图像信息的摄像图像显示在显示器7上。构成由信号处理部42生成的摄像图像信息的各像素数据的坐标与构成显示器7的显示面的任一个显示像素的坐标建立关联而进行管理。
系统控制部44控制控制装置4的各部,并向内窥镜1的摄像驱动部27和光源装置5的光源用处理器51发送指令,从而集中控制内窥镜装置100的整体。例如,系统控制部44经由摄像驱动部27进行摄像元件23的控制。并且,系统控制部44经由光源用处理器51进行光源部52的控制。
系统控制部44、信号处理部42及显示控制器43包括执行程序而进行处理的各种处理器、RAM及ROM(Read Only Memory:只读存储器)。
作为各种处理器,包括执行程序而进行各种处理的通用的处理器即CPU(CentralProcessing Unit:中央处理器)、FPGA(Field Programmable Gate Array:现场可编程阵列)等在制造后能够变更电路结构的处理器即可编程逻辑器件(Programmable LogicDevice:PLD)或ASIC(Application Specific Integrated Circuit:专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。
更具体而言,这些各种处理器的结构为将半导体元件等电路元件组合而成的电路。
系统控制部44、信号处理部42及显示控制器43可以由各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上的处理器的组合(例如,多个FPGA的组合或CPU与FPGA的组合)构成。
<具备超声波振子的结构>
内窥镜1除了摄像元件23以外,还可以具备用于获得生物体内的超声波图像的超声波振子。超声波振子为使超声波振荡且照射所振荡的超声波的振子。并且,超声波振子也作为接收所照射的超声波的回波信号并输出所接收的回波信号的超声波换能器进行动作。例如,能够通过由控制装置4的处理器对从该超声波振子输出的回波信号实施各种图像处理来获得超声波图像。
<图2所示的摄像元件23的概略结构>
图4是表示图2所示的摄像元件23的概略结构的平面示意图。
摄像元件23具备:摄像面60,由在行方向X上排列的多个像素61形成的像素行62在与行方向X正交的列方向Y上排列多个;驱动电路63,驱动在摄像面60上排列的像素61;及信号处理电路64,对从在摄像面60上排列的像素行62的各像素61读出到信号线的像素信号进行处理。摄像面60构成受光面。
以下,在图4中,将摄像面60的列方向Y的其中一端侧(图中的上侧)的端部称为上端,将摄像面60的列方向Y的另一端侧(图中的下侧)的端部称为下端。
图4所示的驱动电路63根据来自摄像驱动部27的信号,独立驱动各像素行62,并进行像素行62中所包括的各像素61的复位(排出积蓄在光电转换元件中的电荷)、与积蓄在该各像素61的光电转换元件中的电荷对应的像素信号向信号线的读出等。
图4所示的信号处理电路64对从像素行62的各像素61读出到信号线的像素信号进行相关双采样处理,并将相关双采样处理后的像素信号转换成数字信号而输出。信号处理电路64由摄像驱动部27控制。
信号处理部42对从摄像元件23输出的像素信号实施去马赛克处理及伽马补正处理等信号处理而生成摄像图像信息。
内窥镜装置100搭载有根据1次摄像指示连续生成多个摄像图像信息的连拍模式。在连拍模式下,系统控制部44通过摄像驱动部27以卷帘快门方式驱动摄像元件23而拍摄被摄体。
卷帘快门方式的驱动包含卷帘复位驱动和卷帘读出驱动。卷帘复位驱动为一边改变像素行62一边依次进行将像素行62的各像素61复位并开始该各像素61的曝光的处理的驱动。卷帘读出驱动为一边改变像素行62一边依次进行从被曝光的像素行62的各像素61读出信号并结束该像素行62的曝光的处理的驱动。
<图2所示的信号处理部42的功能框图>
图5是表示图2所示的信号处理部42的功能框图的一例的图。
信号处理部42的处理器例如通过执行存储于内置在信号处理部42中的ROM中的控制程序来作为具备摄像图像信息生成部42a、实时图像生成部42b、分析部42c及分析图像生成部42d的控制装置而发挥作用。
摄像图像信息生成部42a通过对由摄像元件23的摄像而获得的摄像信号进行去马赛克处理或伽马补正处理等图像处理而生成摄像图像信息。摄像图像信息生成部42a将所生成的摄像图像信息中的、基于通过照射通常光时的摄像而获得的摄像信号的摄像图像信息作为摄像帧输出至实时图像生成部42b,并将基于通过照射特殊光时的摄像而获得的摄像信号的摄像图像信息作为摄像帧输出至分析部42c。摄像帧为通过1次摄像而获得的摄像信号。
实时图像生成部42b根据从摄像图像信息生成部42a输出的摄像帧来生成用于显示实时图像的实时图像信息,并将所生成的实时图像信息作为摄像图像信息输出至显示控制器43(参考图2)。实时图像为实时显示基于摄像元件23的连续的摄像结果的动态图像。
分析部42c进行基于从摄像图像信息生成部42a输出的摄像帧的分析(图像分析),并将其分析的结果输出至分析图像生成部42d。作为一例,分析部42c进行摄像图像的轮廓提取作为分析。例如,分析部42c确定在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中映入的生物结构的轮廓。特定对象的生物结构例如为表层血管结构、中层血管结构或深层血管结构等。由分析部42c进行的分析与实时图像的显示并行进行。
分析图像生成部42d生成用于显示表示从分析部42c输出的分析的结果的IEE图像的IEE图像信息,并将所生成的IEE图像信息作为摄像图像信息输出至显示控制器43(参考图2)。IEE图像为基于通过照射蓝色激光等特殊光时的摄像而获得的摄像信号的、强调了被摄体的结构的轮廓的图像。此时,蓝色激光等特殊光构成图像增强观察用的光。例如,IEE图像为强调了表层血管结构的图像、强调了中层血管结构的图像、强调了深层血管结构的图像等。
另外,由分析图像生成部42d生成的图像并不限于摄像图像或对摄像图像进行加工而获得的图像,也可以为基于由分析部42c进行的分析的、表示数值(数量、准确度等)或字符(肿瘤类别)等的图像。
如在图5中所说明那样,内窥镜装置100具备分析部42c,所述分析部42c进行基于摄像图像信息中的、通过照射特殊光的第2期间的摄像而获得的摄像图像信息的分析。另一方面,内窥镜装置100显示基于摄像图像信息中的、通过照射通常光的第1期间的摄像而获得的摄像图像信息的实时图像。由此,能够进行基于通常光的动态图像显示,并且进行基于特殊光的分析。
<内窥镜装置100中的照明光的切换>
图6是表示内窥镜装置100中的照明光的切换的一例的图。
照明光时刻65为光源装置5根据来自控制装置4的指令照射照明光的时刻。照明光时刻65中的WLI为光源装置5照射白色光等通常光作为照明光的时刻。
照明光时刻65中的IEE1为光源装置5照射窄频带光等具有第1特性的第1特殊光作为照明光的时刻。照明光时刻65中的IEE2为光源装置5照射具有与第1特性不同的第2特性的第2特殊光作为照明光的时刻。
如照明光时刻65所示,光源装置5以周期T反复执行预先设定的照射动作。该照射动作为照射通常光,然后照射特殊光(第1特殊光或第2特殊光)的动作。在图6所示的例中,光源装置5按每个周期T将要照射的特殊光交替切换为第1特殊光和第2特殊光。但是,光源装置5也可以将每个周期T的特殊光仅设为第1特殊光。
摄像时刻66为摄像元件23根据来自控制装置4的指令进行摄像(曝光)的时刻。摄像时刻66中的纵向表示像素行62的列方向Y(参考图4)的位置。如上所述,本实施方式中的摄像元件23进行卷帘快门方式的摄像,因此摄像时刻66按每个像素行62错开。在图6所示的例中,摄像元件23以60fps(frames per second:每秒帧数)的帧速率进行摄像。
如照明光时刻65及摄像时刻66所示,光源装置5连续照射通常光的第1期间历经基于摄像元件23的摄像中的连续的多个帧。并且,光源装置5连续照射特殊光的第2期间历经基于摄像元件23的摄像中的至少1帧。在图6所示的例中,第2期间历经基于摄像元件23的连续的多个帧。
如此,光源装置5反复进行如下动作,即,在历经连续的多个摄像动作帧而连续照射通常光(第1特性的照明光)之后,照射特殊光(第2特性的照明光)。然后,如上所述,控制装置4根据在照射通常光时获得的摄像图像将实时图像(动态图像)显示在显示器7上,并且进行基于在照射特殊光时获得的摄像图像的分析。
<显示在显示器7上的画面>
图7是表示显示在显示器7上的画面的一例的图。图8是表示显示信息的切换对象的信息区域的变更的一例的图。图9是表示显示信息的切换的一例的图。
显示控制器43根据在由内窥镜1进行检查时从信号处理部42输出的摄像图像信息,例如将图7所示的画面70显示在显示器7上。画面70包含主画面71、子画面72、73及输入一览画面74。主画面71及子画面72、73为本发明的多个信息区域的一例。输入一览画面74为本发明的选择区域的一例。
主画面71、子画面72、73及输入一览画面74例如为在显示器7的1个画面上通过控制装置4的控制而被软件分割的4个分割画面。但是,画面70也可以硬件分割成主画面71、子画面72、73及输入一览画面74这4个部分。
在主画面71上显示基于从信号处理部42的实时图像生成部42b输出的实时图像信息的实时图像。在子画面72、73上显示相对于实时图像成为辅助定位的信息。例如,在图7所示的例中,在子画面72上显示有胃映射图,在子画面73上显示有插入形状图像。
此时,主画面71构成显示利用了从设置于内窥镜1上的摄像元件23获得的摄像图像的动态图像的第1信息区域。子画面72、73构成显示与动态图像不同的信息的第2信息区域。
子画面72上的胃映射图为表示内窥镜1的插入对象的受检体的胃的图像。胃映射图例如可以为拍摄受检体内而获得的图像,也可以为预先准备的一般大肠的图像。
子画面73的插入形状图像为表示插入到受检体内的胃中的内窥镜1的插入部10的形状的图像。例如,插入形状图像为根据从内窥镜1的前端部10C中所具备的磁场产生元件产生的磁场的检测结果而生成的图像。此时,例如,内窥镜装置100还具备检测来自从受检体外部插入到受检体内的内窥镜1的磁场产生元件的磁场的磁场检测装置,系统控制部44根据基于该磁场检测装置的检测结果来生成插入形状图像。
并且,插入形状图像可以为根据基于内窥镜1的前端部10C中所具备的磁场检测元件的磁场的检测结果而生成的图像。此时,例如,内窥镜装置100还具备从受检体外部朝向受检体内产生磁场的磁场产生元件,系统控制部44根据基于内窥镜1中所具备的磁场检测元件的磁场的检测结果来生成插入形状图像。
通过观察胃映射图及插入形状图像,内窥镜1的操作者能够容易地将内窥镜1的插入部10插入到胃中。
输入一览画面74例如为表示能够显示在主画面71及子画面72、73的各自上的信息的选项(菜单)的一览的图像。在图7所示的例中,输入一览画面74包含缩小图像74a~74e。
缩小图像74a~74e分别为实时图像、超声波图像、胃映射图、插入形状图像及生物信息图像的缩小图像。某个图像的缩小图像为与将该图像显示在主画面71或子画面72、73上的情况相比,将该图像缩小后的图像。例如,缩小图像74a为以与显示在主画面71及子画面72、73中的任一个上的情况相比更小的尺寸(面积)示出实时图像的图像。
在缩小图像74a~74e上分别标有编号“1”~“5”。这些编号例如为用于通过输入部6中所包括的数字键盘等进行指示的编号。
在图7中围绕子画面73的单点划线框75为主画面71及子画面72、73中表示显示信息的切换对象的信息区域(在图7所示的例中为子画面73)的信息。单点划线框75例如能够通过经由输入部6等用户界面的用户操作来移动至主画面71及子画面72、73中的任意信息区域中。
例如,每次对输入部6进行特定的用户操作时,由单点划线框75包围的信息区域按主画面71、子画面72、子画面73、主画面71、……的顺序切换。图8示出由单点划线框75包围的信息区域从主画面71变为子画面72的状态。在图8所示的例中,子画面72为显示信息的切换对象。
例如,在图8所示的状态下,在由检查者通过输入部6的数字键盘指定“2”时,如图9所示,显示在子画面72上的信息从胃映射图切换为与标有编号“2”的缩小图像74b对应的超声波图像。
如此,在由内窥镜1进行检查时,控制装置4将与该检查相关的多种(在图7所示的例中为3种)信息分别显示在多个信息区域(主画面71及子画面72、73)中。
并且,控制装置4显示在多个信息区域中所包含的切换对象的信息区域(图8所示的状态中子画面72)中,并将缩小图像74a~74e作为与检查相关的信息的选项显示在输入一览画面74(选择区域)上。然后,根据选择显示在输入一览画面74上的选项的用户操作(例如,基于输入部6的数字键盘的编号的指定)来切换显示在切换对象的信息区域(在图8所示的状态下为子画面72)中的信息。
如此,根据内窥镜装置100,在分割画面上同时显示与内窥镜检查相关的多种信息的结构中,能够简单地切换显示在分割画面上的信息。
例如,在内窥镜检查中,能够在显示器7的主画面71上主要显示使用了通过设置于内窥镜1上的摄像元件23而获得的摄像图像的实时图像,并且也能够同时显示能够显示在子画面72、73上的辅助信息的选项。因此,能够通过根据内窥镜检查的状况由检查者(例如,医生)进行的判断来简单地切换与实时图像一起显示的辅助信息。
并且,如图7所示,显示在输入一览画面74上且能够显示在主画面71及子画面72、73上的信息的选项为该信息的缩小图像,从而检查者能够直观地掌握该选项所表示的信息的内容。由此,能够更简单地切换显示在分割画面上的信息。
并且,能够显示在主画面71及子画面72、73上的信息的选项包含根据由内窥镜1进行检查的过程而更新的信息的选项。例如,如上所述,实时图像为实时显示基于摄像元件23的连续的摄像结果的动态图像,并根据检查的过程进行更新。并且,超声波图像、插入形状图像、生物信息图像等也能够成为根据检查的过程而更新的信息。
控制装置4可以根据由内窥镜1进行检查的过程来更新根据由内窥镜1进行检查的过程而更新的信息的选项在输入一览画面74上的显示。例如,可以将显示在输入一览画面74上的缩小图像74a设为实时显示基于摄像元件23的连续的摄像图像的小尺寸的动态图像。作为另一例,例如可以将显示在输入一览画面74上的缩小图像74b设为实时显示由超声波振子获得的连续的超声波图像的小尺寸的动态图像。由此,检查者能够直观地掌握该选项所表示的信息的内容,从而能够更简单地切换显示在分割画面上的信息。
而且,在将根据由内窥镜1进行检查的过程而更新的信息显示在主画面71及子画面72、73中的任一个上的情况下,控制装置4可以以第1频度更新该信息的显示,也可以以比第1频度低的第2频度更新该信息的选项在输入一览画面74上的显示。
作为一例,在将实时图像显示在主画面71上的情况下,控制装置4以60fps的显示速率更新实时图像。并且,控制装置4以显示速率比60fps低的6fp s的显示速率更新显示在输入一览画面74上的实时图像的缩小图像74a。由此,检查者能够容易掌握缩小图像74a所表示的信息为实时图像,并且能够减少在更新缩小图像74a的显示时所需要的处理量。
另外,图7所示的输入一览画面74中所包含的各信息为一例,能够任意设定。例如,输入一览画面74中所包含的各信息可以为图7所示的信息的一部分。并且,除了图7所示的信息以外或代替图7所示的信息,还可以在输入一览画面74上包含其他信息(例如,由分析部42c进行的分析的结果)。
并且,对在主画面71及子画面72、73上能够显示的信息的选项相同的结构进行了说明,但是也可以设为在主画面71及子画面72、73上能够显示的信息的选项不同的结构。此时,控制装置4可以在输入一览画面74上仅显示能够显示在主画面71及子画面72、73中被单点划线框75包围的信息区域(切换对象的信息区域)中的信息。
并且,对显示的切换对象的信息区域为主画面71及子画面72、73中通过用户操作所选择的信息区域的结构进行了说明,但是并不限于这种结构。例如,由主画面71显示的信息被固定为实时图像,通过单点划线框75能够选择的信息区域可以仅为子画面72、73(第2信息区域)。此时,例如在能够显示在子画面72、73上的信息的选项中包含由分析部42c进行的分析的结果,从而检查者能够参考实时图像,并观察作为辅助信息的分析的结果。
或者,显示的切换对象的信息区域也可以不可由用户选择。例如,主画面71及子画面72、73中仅子画面73可以为显示的切换对象的信息区域。此时,单点划线框75固定显示在子画面73上或不显示在画面70上。
并且,单点划线框75为能够识别主画面71及子画面72、73中切换对象的信息区域的信息的一例,能够识别切换对象的信息区域的信息并不限于单点划线框75。
并且,作为选择显示在输入一览画面74上的选项的用户操作的例,对基于输入部6的数字键盘的编号的指定进行了说明,但是并不限于此。例如,输入部6包括鼠标等指示设备,选择显示在输入一览画面74上的选项的用户操作可以设为通过该指示设备指示(点击等)缩小图像74a~74e中的任一个。或者,将显示器7设为能够进行触摸操作的触摸面板,选择显示在输入一览画面74上的选项的用户操作可以设为通过该触摸面板触摸缩小图像74a~74e中的任一个。
(分析的另一例)
对提取摄像图像的轮廓作为由基于通过照射特殊光时的摄像而获得的摄像图像信息的分析部42c(信号处理部42)进行的分析进行了说明,但是由分析部42c进行的分析并不限于此。
例如,分析部42c可以进行内窥镜1的插入形状的分析作为上述分析。具体而言,内窥镜1的插入形状的分析为插入到受检体内的内窥镜1的插入部10的插入形状的确定。例如,分析部42c根据通过照射特殊光时的摄像而获得的摄像图像信息的变化来确定内窥镜1的插入形状。分析图像生成部42d生成用于显示表示由分析部42c确定的内窥镜1的插入形状的图像的图像信息。由此,表示内窥镜1的插入形状的图像显示在子画面72上,内窥镜1的操作者能够容易将内窥镜1的插入部10插入到受检体内。
或者,分析部42c可以进行插入有内窥镜1的受检体内的关注区域的检测作为上述分析。例如,分析部42c根据通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像来检测受检体内的关注区域。关注区域为受检体内的观察中推荐关注的区域,例如病变的可能性高的区域等。分析图像生成部42d生成用于显示在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中强调了由分析部42c检测到的关注区域的关注区域强调图像的图像信息。由此,关注区域强调图像显示在子画面72上,内窥镜1的操作者能够容易识别受检体内的关注区域。或者,分析图像生成部42d也可以生成用于显示在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中进行了色差扩展处理的色差扩展图像的图像信息,所述色差扩展处理扩展作为关注区域的异常部(病变部等)与正常部的色差。由此,色差扩展图像显示在子画面72上,内窥镜1的操作者能够容易分辨受检体内的异常部和正常部。
或者,分析部42c可以进行类似病例图像的选择作为上述分析。例如,分析部42c通过搜索内窥镜装置100能够访问的数据库来选择与通过照射特殊光时的摄像而获得的摄像图像信息类似的病例图像。分析图像生成部42d生成用于显示表示由分析部42c选择的结果的图像的图像信息。由分析部42c选择的结果可以为分析部42c选择的病例图像本身,也可以为在上述数据库中与分析部42c选择的病例图像建立关联的、和其病例图像相关的诊断结果等信息。由此,类似病例图像的选择结果显示在子画面72上,内窥镜1的操作者能够容易进行观察中的受检体内的状态与类似病例的比较。
或者,分析部42c可以进行肿瘤及非肿瘤的判别作为上述分析。例如,分析部42c判别在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中映入的生物区域是否为肿瘤。分析图像生成部42d生成用于显示表示由分析部42c判别的结果的图像的图像信息。由分析部42c判别的结果可以为表示在最近拍摄到的图像中映入的生物区域是否为肿瘤的信息,也可以为表示在当前的检查开始之后判别为肿瘤的生物区域的数量的信息等。由此,肿瘤及非肿瘤的判别结果显示在子画面72上,能够辅助由内窥镜1的操作者进行的观察或内窥镜1的操作。
或者,分析部42c可以进行器官的状态的确定作为上述分析。例如,分析部42c确定在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中映入的器官的状态。器官的状态例如为每个区域的氧饱和度、血管结构的粗细、密度、花纹、均匀性或大肠的表面结构(例如pit样结构)、十二指肠的表面结构(例如绒毛结构)等。分析图像生成部42d生成用于显示表示由分析部42c确定的结果的图像的图像信息。例如,分析图像生成部42d生成将每个所确定的区域的氧饱和度图像化的氧饱和度图像。由此,器官的状态的确定结果显示在子画面72上,能够辅助由内窥镜1的操作者进行的观察或内窥镜1的操作。
或者,分析部42c可以进行切离预定线的生成作为上述分析。例如,分析部42c确定在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中映入的生物区域中的、为了去除肿瘤等而应切离的线即切离预定线(分界线)。分析图像生成部42d生成用于显示在通过照射特殊光时的摄像而获得的摄像图像信息所表示的图像中附加了由分析部42c确定的切离预定线的图像的图像信息。由此,附加有切离预定线的图像显示在子画面72上,内窥镜1的操作者能够容易识别受检体内的切离预定线。
(第1期间、第2期间及周期T的变形例)
对照射通常光的第1期间及照射特殊光的第2期间的各长度在每个周期T的反复中恒定的结构进行了说明,但是照射通常光的第1期间及照射特殊光的第2期间的各长度在每个周期T的反复中也可以不恒定(也可以不定)。例如,一个周期T中的第1期间及第2期间的各长度之比为3∶1,另一个周期T中的第1期间及第2期间的各长度之比可以为3∶2。
并且,对照射通常光及特殊光的动作的反复周期即周期T恒定的情况进行了说明,但是周期T也可以不定。并且,对在周期T中,首先照射通常光,然后照射特殊光的结构进行了说明,但是也可以设为在周期T中,首先照射特殊光,然后照射通常光的结构。
并且,通常光的光谱可以在每个周期T的反复中恒定,也可以在每个周期T的反复中不定。同样地,特殊光的光谱可以在每个周期T的反复中恒定,也可以在每个周期T的反复中不定。
并且,对在刚照射通常光的第1期间之后,成为照射特殊光的第2期间的结构进行了说明,但是在第1期间与第2期间之间,可以存在光源装置5不照射照明光的无照射期间。
并且,可以设为同时照射窄频带短波调光和白色光作为上述通常光或特殊光的结构。由此,对颜色的微细的差异进行色彩强调而显示,从而容易进行炎症观察或拾取观察等观察。
(摄像元件23的另一例)
对使用卷帘快门方式的摄像元件23的结构进行了说明,但是可以设为使用全局快门方式的摄像元件23的结构。
(内窥镜系统的另一种方式)
作为本发明的内窥镜系统的一例,对内窥镜装置100进行了说明,但是本发明的内窥镜系统可以通过经由网络彼此连接的多个装置来实现。例如,可以设为通过经由网络与内窥镜装置100连接的其他装置来执行基于上述控制装置4的处理中的至少一部分的结构。
(控制程序)
存储于控制装置4的ROM中的控制程序存储于计算机能够读取程序的非临时性(non-transitory)存储介质中。这种“计算机能够读取的存储介质”例如包括CD-ROM(Compact Disc-ROM:只读光盘)等光学介质或USB(Universal Serial Bus:通用串行总线)存储器或存储卡等磁存储介质等。并且,也能够通过经由网络的下载来提供这种程序。
如以上所说明,在本说明书中公开有以下事项。
(1)
一种内窥镜系统,其包括在由内窥镜进行检查时检查者能够视觉辨认的显示器和处理器,其中,
上述显示器的画面包含多个信息区域和选择区域,
在进行上述检查时,上述处理器进行如下处理:
将与上述检查相关的多种信息分别显示在上述多个信息区域中;
将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中;
根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
(2)
根据(1)所述的内窥镜系统,其中,
上述切换对象的信息区域为上述多个信息区域中通过用户操作所选择的信息区域。
(3)
根据(1)或(2)所述的内窥镜系统,其中,
上述信息的选项为包含上述信息的缩小图像的图像。
(4)
根据(1)至(3)中任一项所述的内窥镜系统,其中,
上述信息的选项包含根据上述检查的过程而更新的信息的选项。
(5)
根据(4)所述的内窥镜系统,其中,
上述处理器根据上述检查的过程来更新根据上述检查的过程而更新的信息的选项在上述选择区域中的显示。
(6)
根据(4)或(5)所述的内窥镜系统,其中,
上述处理器进行如下处理:
在将根据上述检查的过程而更新的信息显示在上述信息区域中的情况下,以第1频度更新该信息的显示;
以比上述第1频度低的第2频度更新根据上述检查的过程而更新的信息的选项在上述选择区域中的显示。
(7)
根据(1)至(6)中任一项所述的内窥镜系统,其中,
上述多个信息区域包含:第1信息区域,显示利用了从设置于上述内窥镜的摄像元件获得的摄像图像的动态图像;及第2信息区域,显示与上述动态图像不同的信息,
上述切换对象的信息区域包含在上述第2信息区域中。
(8)
根据(7)所述的内窥镜系统,其中,
上述第2信息区域能够切换并显示包含基于上述摄像图像的分析的结果的与上述检查相关的多种信息,
上述选择区域显示包含上述分析的结果的与上述检查相关的多种信息来作为上述选项。
(9)
根据(8)所述的内窥镜系统,其包括能够切换并照射特性不同的多种照明光的光源,
上述光源反复进行如下动作,即,在历经连续的多个摄像动作帧的第1期间连续照射第1特性的照明光之后,在历经至少1个摄像动作帧的第2期间照射与上述第1特性不同的第2特性的照明光,
上述处理器根据在上述第2期间获得的上述摄像图像来进行上述分析。
(10)
根据(9)所述的内窥镜系统,其中,
上述第1特性的照明光为白色光,上述第2特性的照明光为图像增强观察用的光。
(11)
根据(9)或(10)所述的内窥镜系统,其中,
上述第1期间及上述第2期间的各长度在反复进行上述动作时为恒定,或在反复进行上述动作时为不定。
(12)
根据(9)至(11)中任一项所述的内窥镜系统,其中,
上述第1特性的照明光及上述第2特性的照明光的光谱在反复进行上述动作时为恒定,或在反复进行上述动作时为不定。
(13)
根据(9)至(12)中任一项所述的内窥镜系统,其中,
在上述第1期间与上述第2期间之间存在上述光源的无照射期间。
(14)
根据(9)至(13)中任一项所述的内窥镜系统,其中,
上述第1期间为比上述第2期间长的期间。
(15)
根据(8)至(14)中任一项所述的内窥镜系统,其中,
上述分析包含具备上述摄像元件的内窥镜的插入形状的分析。
(16)
根据(8)至(15)中任一项所述的内窥镜系统,其中,
上述分析包含上述摄像图像的轮廓的提取。
(17)
根据(8)至(16)中任一项所述的内窥镜系统,其中,
上述分析包含插入有具备上述摄像元件的内窥镜的受检体内的关注区域的检测。
(18)
根据(8)至(17)中任一项所述的内窥镜系统,其中,
上述分析包含类似病例图像的选择。
(19)
根据(8)至(18)中任一项所述的内窥镜系统,其中,
上述分析包含辅助肿瘤及非肿瘤的判别的信息。
(20)
根据(8)至(19)中任一项所述的内窥镜系统,其中,
上述分析包含器官的状态的确定。
(21)
根据(8)至(20)中任一项所述的内窥镜系统,其中,
上述分析包含切离预定线的生成。
(22)
一种内窥镜系统的控制方法,上述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,其中,
上述显示器的画面包含多个信息区域和选择区域,
在进行上述检查时,
将与上述检查相关的多种信息分别显示在上述多个信息区域中,
将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中,
根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
(23)
一种控制内窥镜系统的控制程序,上述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,上述控制程序用于使计算机执行如下处理:
上述显示器的画面包含多个信息区域和选择区域;
在进行上述检查时,
将与上述检查相关的多种信息分别显示在上述多个信息区域中;
将显示在上述多个信息区域中所包含的切换对象的信息区域中的上述信息的选项显示在上述选择区域中;
根据选择上述选项的用户操作来切换显示在上述切换对象的信息区域中的上述信息。
产业上的可利用性
根据本发明,能够提供一种能够简单地切换显示在分割画面上的信息的内窥镜系统、控制方法及控制程序。
符号说明
1-内窥镜,4-控制装置,5-光源装置,6-输入部,7-显示器,10-插入部,10A-柔性部,10B-弯曲部,10C-前端部,11-操作部,12-弯角钮,13-通用塞绳,13A、13B-连接器部,21-物镜,22-透镜组,23-摄像元件,25-存储器,26、41-通信I/F,27-摄像驱动部,42-信号处理部,42a-摄像图像信息生成部,42b-实时图像生成部,42c-分析部,42d-分析图像生成部,43-显示控制器,44-系统控制部,45-记录介质,50-照明用透镜,51-光源用处理器,52-光源部,52a-V-LED,52b-B-LED,52c-G-LED,52d-R-LED,53-光导件,54-光路耦合部,60-摄像面,61-像素,62-像素行,63-驱动电路,64-信号处理电路,65-照明光时刻,66-摄像时刻,70-画面,71-主画面,72、73-子画面,74-输入一览画面,74a~74e-缩小图像,75-单点划线框,100-内窥镜装置。
Claims (23)
1.一种内窥镜系统,其包括在由内窥镜进行检查时检查者能够视觉辨认的显示器和处理器,其中,
所述显示器的画面包含多个信息区域和选择区域,
在进行所述检查时,所述处理器进行如下处理:
将与所述检查相关的多种信息分别显示在所述多个信息区域中;
将显示在所述多个信息区域中所包含的切换对象的信息区域中的所述信息的选项显示在所述选择区域中;
根据选择所述选项的用户操作来切换显示在所述切换对象的信息区域中的所述信息。
2.根据权利要求1所述的内窥镜系统,其中,
所述切换对象的信息区域为所述多个信息区域中通过用户操作所选择的信息区域。
3.根据权利要求1或2所述的内窥镜系统,其中,
所述信息的选项为包含所述信息的缩小图像的图像。
4.根据权利要求1至3中任一项所述的内窥镜系统,其中,
所述信息的选项包含根据所述检查的过程而更新的信息的选项。
5.根据权利要求4所述的内窥镜系统,其中,
所述处理器根据所述检查的过程来更新根据所述检查的过程而更新的信息的选项在所述选择区域中的显示。
6.根据权利要求4或5所述的内窥镜系统,其中,
所述处理器进行如下处理:
在将根据所述检查的过程而更新的信息显示在所述信息区域中的情况下,以第1频度更新该信息的显示;
以比所述第1频度低的第2频度更新根据所述检查的过程而更新的信息的选项在所述选择区域中的显示。
7.根据权利要求1至6中任一项所述的内窥镜系统,其中,
所述多个信息区域包含:
第1信息区域,显示利用了从设置于所述内窥镜的摄像元件获得的摄像图像的动态图像;及
第2信息区域,显示与所述动态图像不同的信息,
所述切换对象的信息区域包含在所述第2信息区域中。
8.根据权利要求7所述的内窥镜系统,其中,
所述第2信息区域能够切换并显示包含基于所述摄像图像的分析的结果的与所述检查相关的多种信息,
所述选择区域显示包含所述分析的结果的与所述检查相关的多种信息来作为所述选项。
9.根据权利要求8所述的内窥镜系统,其中,
所述内窥镜系统包括能够切换并照射特性不同的多种照明光的光源,
所述光源反复进行如下动作,即,在历经连续的多个摄像动作帧的第1期间连续照射第1特性的照明光之后,在历经至少1个摄像动作帧的第2期间照射与所述第1特性不同的第2特性的照明光,
所述处理器根据在所述第2期间获得的所述摄像图像来进行所述分析。
10.根据权利要求9所述的内窥镜系统,其中,
所述第1特性的照明光为白色光,所述第2特性的照明光为图像增强观察用的光。
11.根据权利要求9或10所述的内窥镜系统,其中,
所述第1期间及所述第2期间的各长度在反复进行所述动作时为恒定,或在反复进行所述动作时为不定。
12.根据权利要求9至11中任一项所述的内窥镜系统,其中,
所述第1特性的照明光及所述第2特性的照明光的光谱在反复进行所述动作时为恒定,或在反复进行所述动作时为不定。
13.根据权利要求9至12中任一项所述的内窥镜系统,其中,
在所述第1期间与所述第2期间之间存在所述光源的无照射期间。
14.根据权利要求9至13中任一项所述的内窥镜系统,其中,
所述第1期间为比所述第2期间长的期间。
15.根据权利要求8至14中任一项所述的内窥镜系统,其中,
所述分析包含具备所述摄像元件的内窥镜的插入形状的分析。
16.根据权利要求8至15中任一项所述的内窥镜系统,其中,
所述分析包含所述摄像图像的轮廓的提取。
17.根据权利要求8至16中任一项所述的内窥镜系统,其中,
所述分析包含插入有具备所述摄像元件的内窥镜的受检体内的关注区域的检测。
18.根据权利要求8至17中任一项所述的内窥镜系统,其中,
所述分析包含类似病例图像的选择。
19.根据权利要求8至18中任一项所述的内窥镜系统,其中,
所述分析包含辅助肿瘤及非肿瘤的判别的信息。
20.根据权利要求8至19中任一项所述的内窥镜系统,其中,
所述分析包含器官的状态的确定。
21.根据权利要求8至20中任一项所述的内窥镜系统,其中,
所述分析包含切离预定线的生成。
22.一种内窥镜系统的控制方法,所述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,其中,
所述显示器的画面包含多个信息区域和选择区域,
在进行所述检查时,
将与所述检查相关的多种信息分别显示在所述多个信息区域中,
将显示在所述多个信息区域中所包含的切换对象的信息区域中的所述信息的选项显示在所述选择区域中,
根据选择所述选项的用户操作来切换显示在所述切换对象的信息区域中的所述信息。
23.一种控制内窥镜系统的控制程序,所述内窥镜系统包括在由内窥镜进行检查时检查者能够视觉辨认的显示器,所述控制程序用于使计算机执行如下处理:
所述显示器的画面包含多个信息区域和选择区域;
在进行所述检查时,
将与所述检查相关的多种信息分别显示在所述多个信息区域中;
将显示在所述多个信息区域中所包含的切换对象的信息区域中的所述信息的选项显示在所述选择区域中;
根据选择所述选项的用户操作来切换显示在所述切换对象的信息区域中的所述信息。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020053412 | 2020-03-24 | ||
JP2020-053412 | 2020-03-24 | ||
PCT/JP2021/001025 WO2021192524A1 (ja) | 2020-03-24 | 2021-01-14 | 内視鏡システム、制御方法、及び制御プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115209785A true CN115209785A (zh) | 2022-10-18 |
Family
ID=77891337
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180016651.8A Pending CN115209785A (zh) | 2020-03-24 | 2021-01-14 | 内窥镜系统、控制方法及控制程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11950759B2 (zh) |
JP (1) | JP7470779B2 (zh) |
CN (1) | CN115209785A (zh) |
WO (1) | WO2021192524A1 (zh) |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07154687A (ja) * | 1993-11-29 | 1995-06-16 | Olympus Optical Co Ltd | 画像合成装置 |
DE69426057T2 (de) | 1993-11-29 | 2001-05-10 | Olympus Optical Co | Anordnung zur Bildrotation und Überlagerung |
JP3996712B2 (ja) * | 1998-11-18 | 2007-10-24 | オリンパス株式会社 | 医療用画像再生装置 |
JP2002032068A (ja) * | 2000-07-18 | 2002-01-31 | Olympus Optical Co Ltd | 画像処理装置 |
JP2002272679A (ja) | 2001-03-16 | 2002-09-24 | Fuji Photo Optical Co Ltd | 電子内視鏡装置 |
JP2005110878A (ja) * | 2003-10-06 | 2005-04-28 | Olympus Corp | 手術支援システム |
JP4634731B2 (ja) | 2004-03-30 | 2011-02-16 | 株式会社東芝 | 携帯型医用画像表示装置 |
JP5137634B2 (ja) | 2008-03-13 | 2013-02-06 | オリンパスメディカルシステムズ株式会社 | 医療用画像処理装置 |
WO2012008299A1 (ja) | 2010-07-13 | 2012-01-19 | オリンパスメディカルシステムズ株式会社 | 画像合成システム |
JP5247785B2 (ja) | 2010-10-12 | 2013-07-24 | 富士フイルム株式会社 | 内視鏡装置 |
JP5133386B2 (ja) | 2010-10-12 | 2013-01-30 | 富士フイルム株式会社 | 内視鏡装置 |
JP5967952B2 (ja) | 2012-01-31 | 2016-08-10 | Hoya株式会社 | 電子内視鏡システム |
JP2015195845A (ja) * | 2014-03-31 | 2015-11-09 | 富士フイルム株式会社 | 内視鏡システム、内視鏡システムの作動方法、プロセッサ装置、プロセッサ装置の作動方法 |
JP6389136B2 (ja) | 2015-03-30 | 2018-09-12 | 富士フイルム株式会社 | 内視鏡撮影部位特定装置、プログラム |
EP3547095A4 (en) | 2016-11-28 | 2019-12-04 | Sony Corporation | APPARATUS AND METHOD FOR INFORMATION PROCESSING AND PROGRAM |
JP7016068B2 (ja) | 2017-01-13 | 2022-02-04 | ディーブイエックス株式会社 | 映像統合システム |
JP6920931B2 (ja) | 2017-09-01 | 2021-08-18 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置 |
EP3804605A4 (en) | 2018-06-04 | 2021-08-18 | FUJIFILM Corporation | IMAGE PROCESSING DEVICE, ENDOSCOPE SYSTEM AND IMAGE PROCESSING METHOD |
-
2021
- 2021-01-14 JP JP2022509301A patent/JP7470779B2/ja active Active
- 2021-01-14 WO PCT/JP2021/001025 patent/WO2021192524A1/ja active Application Filing
- 2021-01-14 CN CN202180016651.8A patent/CN115209785A/zh active Pending
-
2022
- 2022-08-15 US US17/819,837 patent/US11950759B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2021192524A1 (zh) | 2021-09-30 |
JP7470779B2 (ja) | 2024-04-18 |
WO2021192524A1 (ja) | 2021-09-30 |
US11950759B2 (en) | 2024-04-09 |
US20220386848A1 (en) | 2022-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7346285B2 (ja) | 医療画像処理装置、内視鏡システム、医療画像処理装置の作動方法及びプログラム | |
US20230086972A1 (en) | Medical image processing device, endoscope system, medical image processing method, and program | |
JP7176041B2 (ja) | 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム | |
JP7125484B2 (ja) | 内視鏡システム | |
JP2010172673A (ja) | 内視鏡システム、内視鏡用プロセッサ装置、並びに内視鏡検査支援方法 | |
JP7326308B2 (ja) | 医療画像処理装置及び医療画像処理装置の作動方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム | |
JP7289296B2 (ja) | 画像処理装置、内視鏡システム及び画像処理装置の作動方法 | |
JP7289373B2 (ja) | 医療画像処理装置、内視鏡システム、診断支援方法及びプログラム | |
JPWO2020184257A1 (ja) | 医用画像処理装置及び方法 | |
JP7289241B2 (ja) | ファイリング装置、ファイリング方法及びプログラム | |
CN115209785A (zh) | 内窥镜系统、控制方法及控制程序 | |
JP7335976B2 (ja) | 内視鏡システム、制御プログラム、及び表示方法 | |
CN115066196A (zh) | 医用图像处理装置、内窥镜系统、医用图像处理方法及程序 | |
WO2021117330A1 (ja) | 内視鏡システム、制御方法、及び制御プログラム | |
JP7470776B2 (ja) | 内視鏡システム、制御方法、及び制御プログラム | |
WO2021176890A1 (ja) | 内視鏡システム、制御方法、及び制御プログラム | |
JP7257544B2 (ja) | 情報表示システムおよび情報表示方法 | |
WO2022181748A1 (ja) | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム | |
EP4302681A1 (en) | Medical image processing device, medical image processing method, and program | |
US20230186588A1 (en) | Image processing apparatus, method, and program | |
EP4356814A1 (en) | Medical image processing device, medical image processing method, and program | |
WO2023282143A1 (ja) | 情報処理装置、情報処理方法、内視鏡システム及びレポート作成支援装置 | |
WO2022186109A1 (ja) | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム | |
CN111989026A (zh) | 内窥镜装置、内窥镜操作方法及程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |