CN104168813B - 荧光观察装置和荧光观察装置的工作方法 - Google Patents

荧光观察装置和荧光观察装置的工作方法 Download PDF

Info

Publication number
CN104168813B
CN104168813B CN201380014542.8A CN201380014542A CN104168813B CN 104168813 B CN104168813 B CN 104168813B CN 201380014542 A CN201380014542 A CN 201380014542A CN 104168813 B CN104168813 B CN 104168813B
Authority
CN
China
Prior art keywords
fluoroscopic image
image
light
imaging apparatus
light sensitivitys
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380014542.8A
Other languages
English (en)
Other versions
CN104168813A (zh
Inventor
久保圭
石原康成
志田裕美
竹腰聪
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN104168813A publication Critical patent/CN104168813A/zh
Application granted granted Critical
Publication of CN104168813B publication Critical patent/CN104168813B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00055Operational features of endoscopes provided with output arrangements for alerting the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F04POSITIVE - DISPLACEMENT MACHINES FOR LIQUIDS; PUMPS FOR LIQUIDS OR ELASTIC FLUIDS
    • F04CROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT MACHINES FOR LIQUIDS; ROTARY-PISTON, OR OSCILLATING-PISTON, POSITIVE-DISPLACEMENT PUMPS
    • F04C2270/00Control; Monitoring or safety arrangements
    • F04C2270/04Force
    • F04C2270/041Controlled or regulated
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/12Circuits of general importance; Signal processing
    • G01N2201/124Sensitivity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Biochemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Immunology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Endoscopes (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

提供一种荧光观察装置(1),其具有:摄像元件(19),其获取被摄体(A)的荧光图像;感光度调节部(23),其根据荧光图像的灰度值,设定摄像元件(19)的针对荧光的感光度;报知部(25),其从由摄像元件(19)以该感光度调节部(23)所设定的感光度而获取的荧光图像中提取病变部并对操作者进行提示;以及显示切换部(24),其在摄像元件(19)的感光度为规定的阈值以下的情况下,使显示部(7)显示荧光图像,在感光度比规定的阈值大的情况下,使报知部(25)提示表示存在病变部的信息。

Description

荧光观察装置和荧光观察装置的工作方法
技术领域
本发明涉及荧光观察装置和荧光观察装置的工作方法。
背景技术
以往,公知有如下的内窥镜:将激励被摄体中所包含的荧光物质的激励光照射到被摄体上,拍摄来自被摄体的荧光,并从荧光图像中提取病变部(例如,参照专利文献1)。荧光图像是对被摄体内的特定结构进行了强调的图像,因此,容易进行病变部的识别。
现有技术文献
专利文献
专利文献1:日本特开2010-172673号公报
发明内容
发明要解决的课题
但是,在专利文献1的情况下存在如下问题:在从离开被摄体的位置进行拍摄时等射向摄像元件的荧光的入射光量不充分的情况下,荧光图像中的病变部的图像变得不清楚,不能可靠地提取病变部。另一方面,通过摄像元件的像素的合并、曝光时间的延长、增益的增大,能够提高摄像元件的针对荧光的拍摄感光度。但是,在通过这种手段提高摄像元件的拍摄感光度的情况下,会产生荧光图像的分辨率的降低、图像的模糊、干扰的增大等,荧光图像的画质降低。在低画质的荧光图像中很难可靠地提取病变部。并且,在将低画质的荧光图像叠加到白色光图像上的情况下,产生白色光图像也不清晰并很难观察这样的不良状况。
本发明是鉴于上述情况而完成的,其目的在于提供一种荧光观察装置和荧光观察装置的工作方法,其中,该荧光观察装置能够使操作者可靠地并且明确地识别出观察视野内的病变部的存在。
用于解决课题的手段
为了达成上述目的,本发明提供以下的手段。
本发明的第1方式是一种荧光观察装置,其具有:激励光源,其向被摄体照射激励光;荧光图像获取部,其具有摄像元件,该摄像元件对通过从该激励光源照射所述激励光而在所述被摄体中产生的荧光进行拍摄而获取荧光图像;感光度调节部,其根据由所述摄像元件获取的荧光图像的灰度值,设定所述摄像元件的针对荧光的感光度;报知部,其从由所述摄像元件以该感光度调节部所设定的感光度而获取的所述荧光图像中提取灰度值比规定的灰度阈值大的区域,并将表示存在所提取的所述区域的信息提示给操作者;显示部,其显示由所述摄像元件获取的所述荧光图像;以及显示切换部,其在所述感光度调节部对所述摄像元件设定的所述感光度为规定的感光度阈值以下的情况下,使所述显示部显示所述摄像元件所获取的所述荧光图像,在所述感光度比所述规定的感光度阈值大的情况下,使所述报知部提示所述信息。
根据本发明的第1方式,通过从激励光源向被摄体照射激励光,在被摄体上荧光物质被激励,通过荧光图像获取部的摄像元件对所产生的荧光进行拍摄并获取荧光图像。在所获取的荧光图像中,病变部被显示为具有高灰度值的区域。
这里,在射向摄像元件的荧光的入射光量足够多的情况下,通过感光度调节部将摄像元件的感光度设定为足够低,通过显示切换部的动作使显示部显示摄像元件所获取的荧光图像。此时在显示部中显示的荧光图像是摄像元件以低感光度所获取的高画质的图像,因此,操作者能够可靠地并且明确地识别出荧光图像中的病变部的存在。
另一方面,在射向摄像元件的荧光的入射光量不充分的情况下,通过感光度调节部将摄像元件的感光度设定为足够高。由此,通过摄像元件能够可靠地检测出拍摄视野内的病变部。由摄像元件以高感光度所获取的荧光图像成为低画质的图像。因此,显示切换部取代低画质的荧光图像,使报知部向操作者报知从荧光图像中提取出的病变部的存在。由此,操作者能够可靠地并且明确地识别出观察视野内的病变部的存在。
在上述第1方式中,还可以具有:照明光源,其向所述被摄体照射照明光;以及参照图像获取部,其对从该照明光源照射到所述被摄体的所述照明光的来自所述被摄体的反射光进行拍摄而获取参照图像,所述报知部生成表示所述区域的位置的标记作为所述信息,所述表示切换部在所述感光度为所述规定的感光度阈值以下的情况下,将所述荧光图像叠加到由所述参照图像获取部获取的所述参照图像上并使所述显示部进行显示,在所述感光度比所述规定的感光度阈值大的情况下,将由所述报知部生成的所述标记叠加到所述参照图像上并使所述显示部进行显示。
这样,当荧光图像获取部的摄像元件所获取的荧光图像为高画质时,将荧光图像叠加到参照图像上。另一方面,当荧光图像为低画质时,将表示病变部的位置的标记叠加到参照图像上。由此,既可以向操作者明确地提示出病变部的位置,也可以提示出清晰的参照图像。
上述第1方式中,还可以具有图像校正部,该图像校正部通过使所述荧光图像除以所述参照图像,生成对所述荧光图像进行了校正后的校正荧光图像,所述报知部从由所述图像校正部生成的校正荧光图像中提取所述区域。
这样,荧光图像除以参照图像所得到的校正荧光图像的灰度值除去了依赖于观察距离和观察角度的荧光强度的变化,更准确地反映出被摄体中产生的荧光的强度。由此,可以由报知部提高病变部的提取精度。
本发明的第2方式是一种荧光观察装置的工作方法,根据由摄像元件获取的被摄体的荧光图像的灰度值,调节所述摄像元件的针对荧光的感光度,该荧光观察装置的工作方法包含:显示步骤,显示所述荧光图像;提示步骤,提示如下信息:该信息表示在所述荧光图像中存在灰度值比规定的灰度阈值大的区域;以及切换步骤,对所述显示步骤和所述提示步骤进行择一的切换,在该切换步骤中,在获取所述荧光图像时的所述摄像元件的感光度为规定的感光度阈值以下的情况下,选择所述显示步骤,在获取所述荧光图像时的所述摄像元件的感光度比所述规定的感光度阈值大的情况下,选择所述提示步骤。
发明效果
根据本发明,能够实现如下效果:使操作者可靠地并且明确地识别出观察视野内的病变部的存在。
附图说明
图1是示出本发明的一个实施方式所涉及的荧光观察装置的整体结构图。
图2A是示出通过图1的荧光观察装置,在通常模式中所生成的重叠图像的图。
图2B是示出通过图1的荧光观察装置,在警告模式中所生成的重叠图像的图。
图3是示出图1的荧光观察装置的动作的流程图。
图4是示出图1的荧光观察装置的变形例的整体结构图。
具体实施方式
以下,参照附图对本发明的一个实施方式所涉及的荧光观察装置1进行说明。
如图1所示,本实施方式所涉及的荧光观察装置1具有:细长的插入部2,其插入到体内;光源(激励光源、照明光源)3;照明单元4,其将来自该光源3的激励光以及照明光从插入部2的前端向被摄体A进行照射;摄像单元5,其设置于插入部2的前端,并获取作为被摄体A的活体组织的图像信息;图像处理部6,其配置于插入部2的基端侧,对摄像单元5所获取的图像信息进行处理;以及显示部7,其显示由该图像处理部6所处理的图像。
光源3具有:氙灯9;滤镜10,其将从该氙灯9发出的光切出激励光以及照明光(例如,波段为400nm~740nm);以及耦合透镜11,其对由滤镜10切出的激励光以及照明光进行会聚。
照明单元4具有:光导纤维12,其配置在插入部2的长度方向的大致全长的范围内;以及照明光学系统13,其设置在插入部2的前端。光导纤维12对耦合透镜11所会聚的激励光以及照明光进行引导。照明光学系统13使光导纤维12引导来的激励光以及照明光扩散,并照射到与插入部2的前端面相对的被摄体A上。
摄像单元5具有:物镜14,其对来自被摄体A的规定的观察范围的光进行会聚;分色镜15,其使该物镜14所会聚的光中的激励波长以上的光(激励光以及荧光)反射,使波长比激励波长短的白色光透射;2个会聚透镜16、17,它们对该分色镜15所反射的荧光以及透射过分色镜15的白色光分别进行会聚;以及CMOS这样的2个摄像元件18、19(参照图像获取部、荧光图像获取部),它们对会聚透镜16、17所会聚的白色光以及荧光进行拍摄。图中,标号20是遮断由分色镜15反射的光中的激励光(例如,仅透射波段760nm~850nm的光)的激励光截止滤波器。
图像处理部6具有:白色光图像生成部21,其根据由摄像元件18获取的白色光图像信息S1,生成白色光图像G1(参照图像);荧光图像生成部22,其根据由摄像元件19获取的荧光图像信息S2,生成荧光图像G2;感光度调节部23,其调节摄像元件19的针对荧光的感光度;显示切换部24,其根据感光度调节部23为摄像元件19设定的感光度,对显示模式进行择一地切换;提取部(报知部)25,其从荧光图像G2中提取病变部并生成表示该病变部的位置的标记M;以及重叠图像生成部26,其生成对白色光图像G1和荧光图像G2或由提取部25生成的标记M进行了重叠的重叠图像G。
感光度调节部23根据由荧光图像生成部22生成的荧光图像G2的灰度值来设定摄像元件19的合并像素数N,由此调节摄像元件19的针对荧光的拍摄感光度。具体而言,感光度调节部23计算荧光图像G2的灰度值的代表值。使用荧光图像G2的所有像素的灰度值的平均值或者中央值作为代表值。感光度调节部23在所算出的代表值比作为灰度阈值的规定的第1阈值小的情况下,使摄像元件19的合并像素数N按照例如2×2、4×4、8×8这样阶段性地增加。另一方面,在所算出的代表值比大于第1阈值的作为灰度阈值的规定的第2阈值大的情况下,感光度调节部23使摄像元件19的合并像素数N按照例如4×4、2×2、1×1这样阶段性地减少。
如上所述,每当生成荧光图像G2时,感光度调节部23重复进行对摄像元件19的合并像素数N的设定,使得荧光图像G2的灰度值的代表值的范围为第1阈值以上第2阈值以下。在重复进行了合并像素数N的增加的结果是合并像素数N达到了规定的上限值的情况下,感光度调节部23为摄像元件19设定该上限值。
显示切换部24暂时地保持由感光度调节部23为摄像元件19设定的合并像素数N的信息,并根据该合并像素数N来选择“通常模式”和“警告模式”中的任意一个作为显示模式。并且,显示切换部24根据所选择的显示模式,将荧光图像G2分配到重叠图像生成部26或提取部25,其中,该荧光图像G2是由摄像元件19根据该合并像素数N进行拍摄并由荧光图像生成部22发送来的。
即,在合并像素数N低于作为感光度阈值的规定的阈值时,显示切换部24选择“通常模式”,将根据该合并像素数N所拍摄的荧光图像G2发送到重叠图像生成部26。另一方面,在合并像素数N大于规定的阈值时,显示切换部24选择“警告模式”,将根据该合并像素数N所拍摄的荧光图像G2发送到提取部25。
合并像素数N的感光度阈值例如被设定为8×8。即,在合并像素数N为8×8以下(例如,4×4)时,选择“通常模式”,另一方面,在合并像素数N大于8×8时,选择“警告模式”。
并且,将根据该合并像素数N所拍摄的荧光图像G2发送到感光度调节部23。感光度调节部23根据发送来的该荧光图像G2的灰度值重新设定合并像素数N,并将该合并像素数N的信息发送到摄像元件19和显示切换部24。
提取部25从显示切换部24所发送的荧光图像G2中提取具有规定的阈值以上的灰度值的区域作为病变部。并且,提取部25生成表示所提取的病变部的位置的标记M。例如,使用指示病变部的箭头或包围病变部的圆等作为标记M。
如图2A以及图2B所示,重叠图像生成部26通过将从显示切换部24发送来的荧光图像G2或从提取部25发送来的标记M叠加到白色光图像G1上,生成重叠图像G。重叠图像生成部26将所生成的重叠图像G输出到显示部7。当选择“通常模式”时,如图2A所示,在重叠图像G中显示荧光图像G2内的荧光区域F,当选择“警告模式”时,如图2B所示,在重叠图像G中显示标记M。在图2B中,例示出包围病变部的圆作为标记M。图2A的荧光区域F内的不同的阴影表示出荧光强度的差别,并且阴影内是比阴影外荧光强度高的区域。
另外,当选择“通常模式”时,作为显示在重叠图像G上的荧光图像G2,也可以使用在显示切换部24中实施了用于除去背景信号的阈值处理后的荧光图像。
接着,参照图3对这样构成的本实施方式所涉及的荧光观察装置1的作用进行说明。
要想使用本实施方式所涉及的荧光观察装置1进行荧光观察,就得将从光源3射出的照明光以及激励光经由光导纤维12引导到插入部2的前端,并由照明光学系统13进行扩散而照射到被摄体A。通过将特异地积累在病变部的荧光物质预先投入到被摄体A,在被摄体A内的病变部中产生荧光。并且,在被摄体A的表面反射照明光。
在被摄体A内产生的荧光以及在被摄体A的表面上反射的照明光的反射光由单一的物镜14进行会聚后,由分色镜15分支为2道光,并由2个摄像元件18、19进行拍摄。由摄像元件18对反射光进行拍摄所获取的白色光图像信息S1被发送到图像处理部6的白色光图像生成部21,并生成白色光图像G1。另一方面,由摄像元件19对荧光进行拍摄所获取的荧光图像信息S2被发送到图像处理部6的荧光图像生成部22,并生成荧光图像G2(步骤S1)。
所生成的荧光图像G2被发送到感光度调节部23。感光度调节部23计算荧光图像G2的灰度值的代表值,并计算使所算出的代表值处于规定的范围内的合并像素数N(步骤S2),为摄像元件19设定所算出的合并像素数N(步骤S3)。由此,根据射向摄像元件19的荧光的入射光量来调节摄像元件19的拍摄感光度,并由摄像元件19对被摄体A中产生的荧光进行可靠地拍摄。
感光度调节部23为摄像元件19设定的合并像素数N被发送到显示切换部24。在摄像元件19的合并像素数N为规定的阈值以下的情况下(步骤S4的“是”,切换步骤),显示切换部24选择“通常模式”(步骤S5)。并且,重叠图像生成部26生成将从显示切换部24发送来的荧光图像G2叠加到白色光图像G1上的重叠图像G(步骤S6),并输出到显示部7(步骤S10,显示步骤)。
另一方面,在摄像元件19的合并像素数N比规定的阈值大的情况下(步骤S4的“否”),显示切换部24选择“警告模式”(步骤S7)。并且,提取部25从显示切换部24所发送的荧光图像G2中提取病变部,生成表示所提取的病变部的位置的标记M(步骤S8),并将生成的标记M发送到重叠图像生成部26。重叠图像生成部26生成将标记M叠加到白色光图像G1上的重叠图像G(步骤S9),并输出到显示部7(步骤S10,提示步骤)。在荧光图像G2不存在具有规定的阈值以上的灰度值的区域的情况下,重叠图像生成部26将白色光图像G1直接作为重叠图像G输出到显示部7(步骤S10)。
这里,在将插入到体内的插入部2引导到病变部的期间,观察视野中不存在病变部,因此,荧光图像G2的灰度值整体足够低,摄像元件19的合并像素数N被设定为上限值。因此,生成低分辨率的荧光图像G2。显示部7中不显示该低分辨率的荧光图像G2,而显示清晰的白色光图像G1作为重叠图像G。
当观察视野内出现病变部时,荧光图像G2的灰度值的代表值上升。在从充分离开病变部的位置俯视病变部的期间,射向摄像元件19的入射光量足够少,因此由感光度调节部23设定的摄像元件19的合并像素数N足够多,显示切换部24继续选择“警告模式”。其中,由于通过提取部25提取病变部,因此,表示该病变部的标记M出现在显示于显示部7的重叠图像G上。
当操作者使插入部2的前端接近由标记M所显示的位置时,射向摄像元件19的荧光的入射光量增大,由感光度调节部23设定的摄像元件19的合并像素数N降低。并且,在插入部2的前端充分接近病变部时,合并像素数N变为规定的阈值以下,显示切换部24从“警告模式”切换为“通常模式”。由此,在重叠图像G中,标记M消失,显示荧光图像G2。此时所显示的荧光图像G2是由摄像元件19以足够少的合并像素数N所获取的高分辨率的图像。因此,操作者能够可靠地并且明确地在重叠图像G中识别出病变部。
这样,根据本实施方式所涉及的荧光观察装置1,在射向摄像元件19的荧光的入射光量较少时,通过增加摄像元件19的合并像素数N,能够可靠地检测出在观察视野内存在的病变部。并且,所检测出的病变部的存在以及位置取代伴随着合并像素数N的增大而画质降低的不清晰的荧光图像G2,由标记M表示。由此,操作者能够明确地识别出病变部的存在及其位置。进而,低分辨率的荧光图像未重叠到白色光图像G1上,因此,操作者能够在重叠图像G中观察清晰的白色光图像G1。
在本实施方式中,感光度调节部23通过调节摄像元件19的合并像素数N来调节摄像元件19的针对荧光的拍摄感光度,但是,也可以取而代之,调节摄像元件19的曝光时间或来自各像素的信号的放大率。该情况下,感光度调节部23代替合并像素数N而将曝光时间或放大率发送到显示切换部24。该显示切换部24根据曝光时间或放大率来切换显示模式。
曝光时间的感光度阈值例如设定为100毫秒。该情况下,在曝光时间为100毫秒以下(10帧以上)的情况下,选择“通常模式”,在曝光时间大于100毫秒(小于10帧)的情况下,选择“警告模式”。放大率的感光度阈值例如设定为20dB。该情况下,在放大率为20dB以下(放大率为10倍以下)的情况下,选择“通常模式”,在放大率大于20dB(放大率大于10倍)的情况下,选择“警告模式”。
为了提高摄像元件19的针对荧光的感光度,在延长了摄像元件19的曝光时间的情况下,在荧光图像G2中产生了图像模糊,在增大了摄像元件19的放大率的情况下,在荧光图像G2中增大了噪声。通过代替这种低画质的荧光图像G2来显示标记M,向操作者明确地提示出病变部的存在以及位置,并且,能够提示出清晰的白色光图像G1。
在本实施方式中,将由重叠图像生成部26叠加了白色光图像G1和荧光图像G2或标记M而得到的重叠图像G显示到显示部7上,但是,也可以取而代之,将白色光图像G1和荧光图像G2或标记M并列地显示到显示部7上。并且,也可以在“通常模式”中,并列地显示白色光图像G1和荧光图像G2,在“警告模式”中,将标记M叠加到白色光图像G1上进行显示。
如图4所示,在本实施方式中,还可以具有图像校正部27,该图像校正部27通过荧光图像生成部22所生成的荧光图像G2除以白色光图像生成部21所生成的白色光图像G1,生成校正荧光图像G3,感光度调节部23、提取部25以及重叠图像生成部26可以取代荧光图像G2而对图像校正部27所生成的校正荧光图像G3进行处理。
由摄像元件18、19拍摄的荧光或反射光的强度依赖于观察距离和观察角度而变化。在校正荧光图像G3中,除去了依赖于该观察距离和观察角度的荧光强度的变化。即,校正荧光图像G3的灰度值如实地反映出被摄体A中的荧光的实际的强度分布。因此,通过使用校正荧光图像G3,能够更准确地进行感光度调节部23对合并像素数N的设定以及提取部25对病变部的提取。
在本实施方式中,使用显示在重叠图像G上的标记M,作为将“警告模式”中的荧光图像G2内的病变部的存在报知给操作者的手段,但是,也可以取而代之,输出声音。这样,操作者能够明确地识别出在当前观察的视野内存在病变部。
在本实施方式中,例示出内窥镜作为荧光观察装置,但是,荧光观察装置的形态不仅限定于此,例如,也可以是光学显微镜的结构。
从上述的实施方式导出以下的观察方法所涉及的发明。
本发明的另一个方式是一种观察方法,该观察方法是使用了荧光观察装置的观察方法,其中,该观察方法包含如下步骤:俯视被摄体;以及在该俯视步骤中由报知部提示信息的情况下,使摄像元件接近俯视步骤中的观察视野,其中,所述荧光观察装置具有:激励光源,其向被摄体照射激励光;荧光图像获取部,其具有摄像元件,该摄像元件对通过从该激励光源照射激励光而在被摄体中产生的荧光进行拍摄而获取荧光图像;感光度调节部,其根据由摄像元件所获取的荧光图像的灰度值,设定摄像元件的针对荧光的感光度;报知部,其从摄像元件所获取的荧光图像中提取灰度值比规定的阈值大的区域,并将表示存在所提取的区域的信息提示给操作者;显示部,其显示由摄像元件获取的荧光图像;以及显示切换部,其在感光度调节部为摄像元件设定的感光度为规定的阈值以下的情况下,使显示部显示摄像元件所获取的荧光图像,在感光度比规定的阈值大的情况下,使报知部提示信息。
根据该观察方法,通过俯视被摄体,搜寻包含病变部的观察视野,在找到包含病变部的观察视野的情况下,对该观察视野进行接近扩大观察。这里,在俯视病变部时,通过提高摄像元件的感光度,能够可靠地检测出病变部,通过报知部的信息将病变部的存在报知给操作者。并且,在摄像元件接近病变部且射向摄像元件的荧光的入射光量足够多,由摄像元件利用低感光度获取高画质的荧光图像时,由显示切换部的工作将荧光图像提示到显示部。由此,能够使操作者可靠地并且明确地识别出观察视野内的病变部的存在。
标号说明
1:荧光观察装置;2:插入部;3:光源(激励光源,照明光源);4:照明单元;5:摄像单元;6:图像处理部;7:显示部;18:摄像元件(荧光图像获取部);19:摄像元件(参照图像获取部);21:白色光图像生成部;22:荧光图像生成部;23:感光度调节部;24:显示切换部;25:提取部(报知部);26:重叠图像生成部;27:图像校正部;A:被摄体;M:标记;G:重叠图像。

Claims (4)

1.一种荧光观察装置,其具有:
激励光源,其向被摄体照射激励光;
荧光图像获取部,其具有摄像元件,该摄像元件对通过从该激励光源照射所述激励光而在所述被摄体中产生的荧光进行拍摄而获取荧光图像;
感光度调节部,其根据由所述摄像元件获取的荧光图像的灰度值,设定所述摄像元件的针对荧光的感光度;
报知部,其从由所述摄像元件以该感光度调节部所设定的感光度而获取的所述荧光图像中提取灰度值比规定的灰度阈值大的区域,并将表示存在所提取的所述区域的信息提示给操作者;
显示部,其显示由所述摄像元件获取的所述荧光图像;以及
显示切换部,其在所述感光度调节部对所述摄像元件设定的所述感光度为规定的感光度阈值以下的情况下,使所述显示部显示所述摄像元件所获取的所述荧光图像,在所述感光度比所述规定的感光度阈值大的情况下,使所述报知部提示所述信息。
2.根据权利要求1所述的荧光观察装置,其中,
所述荧光观察装置具有:
照明光源,其向所述被摄体照射照明光;以及
参照图像获取部,其对从该照明光源照射到所述被摄体的所述照明光的来自所述被摄体的反射光进行拍摄而获取参照图像,
所述报知部生成表示所述区域的位置的标记作为所述信息,
所述显示切换部在所述感光度为所述规定的感光度阈值以下的情况下,将所述荧光图像叠加到由所述参照图像获取部获取的所述参照图像上并使所述显示部进行显示,在所述感光度比所述规定的感光度阈值大的情况下,将由所述报知部生成的所述标记叠加到所述参照图像上并使所述显示部进行显示。
3.根据权利要求2所述的荧光观察装置,其中,
所述荧光观察装置具有图像校正部,该图像校正部通过使所述荧光图像除以所述参照图像,生成对所述荧光图像进行了校正后的校正荧光图像,
所述报知部从由所述图像校正部生成的校正荧光图像中提取所述区域。
4.一种荧光观察装置的工作方法,根据由摄像元件获取的被摄体的荧光图像的灰度值,调节所述摄像元件的针对荧光的感光度,该荧光观察装置的工作方法包含:
显示步骤,显示所述荧光图像;
提示步骤,提示如下信息:该信息表示在所述荧光图像中存在灰度值比规定的灰度阈值大的区域;以及
切换步骤,对所述显示步骤和所述提示步骤进行择一的切换,
在该切换步骤中,在获取所述荧光图像时的所述摄像元件的感光度为规定的感光度阈值以下的情况下,选择所述显示步骤,在获取所述荧光图像时的所述摄像元件的感光度比所述规定的感光度阈值大的情况下,选择所述提示步骤。
CN201380014542.8A 2012-04-04 2013-03-28 荧光观察装置和荧光观察装置的工作方法 Expired - Fee Related CN104168813B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012085258A JP5993184B2 (ja) 2012-04-04 2012-04-04 蛍光観察装置および蛍光観察装置の作動方法
JP2012-085258 2012-04-04
PCT/JP2013/059251 WO2013150954A1 (ja) 2012-04-04 2013-03-28 蛍光観察装置および蛍光観察装置の作動方法

Publications (2)

Publication Number Publication Date
CN104168813A CN104168813A (zh) 2014-11-26
CN104168813B true CN104168813B (zh) 2016-06-22

Family

ID=49300444

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380014542.8A Expired - Fee Related CN104168813B (zh) 2012-04-04 2013-03-28 荧光观察装置和荧光观察装置的工作方法

Country Status (5)

Country Link
US (1) US9518924B2 (zh)
EP (1) EP2835092A4 (zh)
JP (1) JP5993184B2 (zh)
CN (1) CN104168813B (zh)
WO (1) WO2013150954A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5993184B2 (ja) * 2012-04-04 2016-09-14 オリンパス株式会社 蛍光観察装置および蛍光観察装置の作動方法
EP3037030A4 (en) * 2013-08-23 2017-04-19 Olympus Corporation Fluorescence observation apparatus
JP6357377B2 (ja) * 2014-07-24 2018-07-11 オリンパス株式会社 観察装置
JP6833310B2 (ja) * 2015-07-27 2021-02-24 オリンパス株式会社 内視鏡システム
WO2017221336A1 (ja) * 2016-06-21 2017-12-28 オリンパス株式会社 内視鏡システム、画像処理装置、画像処理方法およびプログラム
WO2018094696A1 (zh) * 2016-11-25 2018-05-31 深圳迈瑞生物医疗电子股份有限公司 一种内窥镜系统及其光源装置
US20190346367A1 (en) 2017-02-28 2019-11-14 Sony Corporation Image processing apparatus, image processing method, and program
JP7059297B2 (ja) * 2017-10-20 2022-04-25 富士フイルム株式会社 医療画像処理装置
CN112040831A (zh) * 2018-05-31 2020-12-04 松下i-PRO传感解决方案株式会社 相机设备、图像处理方法和相机系统
JP7257829B2 (ja) * 2019-03-15 2023-04-14 ソニー・オリンパスメディカルソリューションズ株式会社 画像処理装置、画像処理方法およびプログラム
US20220358640A1 (en) * 2019-07-29 2022-11-10 Nidek Co., Ltd. Medical image processing device and medical image processing program
CN114298980A (zh) * 2021-12-09 2022-04-08 杭州海康慧影科技有限公司 一种图像处理方法、装置及设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102046062A (zh) * 2008-05-28 2011-05-04 奥林巴斯株式会社 信号处理系统和信号处理程序
CN102247116A (zh) * 2010-04-15 2011-11-23 奥林巴斯株式会社 图像处理装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS56128138A (en) * 1980-03-14 1981-10-07 Olympus Optical Co Phtographing apparatus for endoscope
JPS60179713A (ja) * 1984-02-28 1985-09-13 Olympus Optical Co Ltd 内視鏡装置
JPS6464619A (en) * 1987-09-03 1989-03-10 Olympus Optical Co Control apparatus for endoscope
US5799099A (en) * 1993-02-12 1998-08-25 George S. Allen Automatic technique for localizing externally attached fiducial markers in volume images of the head
US6333971B2 (en) * 1995-06-07 2001-12-25 George S. Allen Fiducial marker
ATE391451T1 (de) * 1998-01-26 2008-04-15 Massachusetts Inst Technology Endoskop zur erfassung von fluoreszenzbilder
US6396938B1 (en) * 1998-02-27 2002-05-28 University Of Arkansas, N.A. Automatic feather sexing of poultry chicks using ultraviolet imaging
DE60031349T2 (de) * 1999-11-18 2007-05-24 Fuji Photo Film Co., Ltd., Minami-Ashigara Verfahren und Vorrichtung zur Erzeugung von Fluoreszenzbildern
US7123756B2 (en) * 2001-04-27 2006-10-17 Fuji Photo Film Co., Ltd. Method and apparatus for standardized fluorescence image generation
JP2005006856A (ja) * 2003-06-18 2005-01-13 Olympus Corp 内視鏡装置
JP2006153460A (ja) * 2004-11-25 2006-06-15 Hitachi High-Technologies Corp 蛍光検出方法、検出装置及び蛍光検出プログラム
JP4587811B2 (ja) * 2005-01-11 2010-11-24 オリンパス株式会社 蛍光観察内視鏡装置
US9265409B2 (en) * 2007-05-22 2016-02-23 Olympus Corporation Capsule medical device and capsule medical system
WO2010044432A1 (ja) * 2008-10-17 2010-04-22 オリンパスメディカルシステムズ株式会社 内視鏡システムおよび内視鏡画像処理装置
JP2010172673A (ja) * 2009-02-02 2010-08-12 Fujifilm Corp 内視鏡システム、内視鏡用プロセッサ装置、並びに内視鏡検査支援方法
JP5656170B2 (ja) * 2009-02-26 2015-01-21 国立大学法人北海道大学 ターゲット追跡装置および放射線治療装置
JP5393216B2 (ja) * 2009-03-24 2014-01-22 オリンパス株式会社 蛍光観察システムおよび蛍光観察システムの作動方法
JP5690327B2 (ja) * 2010-03-09 2015-03-25 オリンパス株式会社 蛍光内視鏡装置
JP5669416B2 (ja) * 2010-03-23 2015-02-12 オリンパス株式会社 蛍光観察装置
EP2656774B1 (en) * 2011-01-31 2016-05-11 Olympus Corporation Fluorescence observation apparatus
WO2012114934A1 (ja) * 2011-02-21 2012-08-30 オリンパス株式会社 蛍光観察装置
JP5993184B2 (ja) * 2012-04-04 2016-09-14 オリンパス株式会社 蛍光観察装置および蛍光観察装置の作動方法
JP6017219B2 (ja) * 2012-08-01 2016-10-26 オリンパス株式会社 蛍光観察装置および蛍光観察システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102046062A (zh) * 2008-05-28 2011-05-04 奥林巴斯株式会社 信号处理系统和信号处理程序
CN102247116A (zh) * 2010-04-15 2011-11-23 奥林巴斯株式会社 图像处理装置

Also Published As

Publication number Publication date
WO2013150954A1 (ja) 2013-10-10
US20150016705A1 (en) 2015-01-15
US9518924B2 (en) 2016-12-13
EP2835092A1 (en) 2015-02-11
JP5993184B2 (ja) 2016-09-14
CN104168813A (zh) 2014-11-26
EP2835092A4 (en) 2015-12-09
JP2013212323A (ja) 2013-10-17

Similar Documents

Publication Publication Date Title
CN104168813B (zh) 荧光观察装置和荧光观察装置的工作方法
US9279973B2 (en) Image processing apparatus, fluorescence microscope apparatus, and image processing program
JP5814698B2 (ja) 自動露光制御装置、制御装置、内視鏡装置及び内視鏡装置の作動方法
JP5855358B2 (ja) 内視鏡装置及び内視鏡装置の作動方法
US9498109B2 (en) Fluorescence endoscope device
CN103687529B (zh) 荧光内窥镜装置
JP6461797B2 (ja) 蛍光観察装置
CN103220960B (zh) 荧光内窥镜装置
JP6190768B2 (ja) 電子顕微鏡装置およびそれを用いた撮像方法
KR102358848B1 (ko) 이미지 재건 방법, 장치 및 현미 이미징 장치
EP2620092B1 (en) Fluorescence observation device
CN103561626B (zh) 荧光观察装置和荧光观察方法
JP2007306982A (ja) 内視鏡プロセッサ、画像処理プログラム、および内視鏡システム
JP5038027B2 (ja) 画像処理装置およびこれを備えた内視鏡装置
US20100245619A1 (en) Fluoroscopy apparatus
WO2016088628A1 (ja) 画像評価装置、内視鏡システム、画像評価装置の作動方法および画像評価装置の作動プログラム
JP2004113390A (ja) 光プローブ装置
US20210290050A1 (en) Ocular fundus image processing apparatus
US11256078B2 (en) Continuous scanning for localization microscopy
US10264190B2 (en) Adaptive optical methods and devices for enhancing image contrast in the presence of bright background
JP2017209343A (ja) 制御装置
JP4415162B2 (ja) 電子内視鏡装置
JP6257294B2 (ja) 顕微鏡装置
JP2013109064A (ja) バーチャルスライド装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20151116

Address after: Tokyo, Japan, Japan

Applicant after: Olympus Corporation

Address before: Tokyo, Japan, Japan

Applicant before: Olympus Corporation

Applicant before: Olympus Medical Systems Corp.

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160622

Termination date: 20190328