CN108024701B - 内窥镜装置和视频处理器 - Google Patents
内窥镜装置和视频处理器 Download PDFInfo
- Publication number
- CN108024701B CN108024701B CN201680052921.XA CN201680052921A CN108024701B CN 108024701 B CN108024701 B CN 108024701B CN 201680052921 A CN201680052921 A CN 201680052921A CN 108024701 B CN108024701 B CN 108024701B
- Authority
- CN
- China
- Prior art keywords
- light
- mode
- period
- image pickup
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0676—Endoscope light sources at distal tip of an endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/02—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the intensity of light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- General Physics & Mathematics (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
内窥镜装置(1)具有:发光元件(13);滚动快门方式的摄像元件(11),其具有接受来自被光照射的被检体的反射光的多个行,该摄像元件(11)交替地切换同时进行多个行的曝光的曝光期间(AL)和从多个行依次读出各行的摄像信号的读出期间(IR);以及控制部(21)。控制部(21)控制发光元件(13)所发出的光的强度。此外,控制部(21)能够切换在曝光期间和读出期间中照射来自发光元件(13)的光的第1照明模式(M1)和仅在曝光期间中照射来自发光元件(13)的光的第2照明模式(M2),在控制为光的强度为规定的值的情况下,进行从第1模式(M1)和第2模式(M2)中的一方向另一方切换的控制。
Description
技术领域
本发明涉及内窥镜装置和视频处理器。
背景技术
以往,内窥镜装置在医疗领域和工业领域中被广泛使用。内窥镜装置将插入部插入到被检体内,向检查部位照射照明光,用摄像元件接受来自检查部位的反射光,生成作为被检体图像的内窥镜图像。
近年来存在使用CMOS图像传感器作为摄像元件的内窥镜装置。在CMOS图像传感器中,采用使定时按照每行错开而进行曝光和读出的滚动快门方式,从曝光到读出的处理根据按照每行而不同的定时来进行。
在使用CMOS图像传感器的情况下,当进行脉冲照明时,有时会因照明光的发光定时而产生曝光不均,因此如日本特许第5452785号公报所公开的那样,提出了如下技术:在影像读出的定时(即影像读出期间)保持照明光的强度恒定,在影像读出期间以外的所有行同时曝光的定时(即所有行同时曝光期间)通过PWM(Pulse Width Modulation:脉宽调制)控制来进行脉冲照明。根据该提案,通过由所有行同时曝光期间中的PWM控制和影像读出期间中的强度恒定控制组合而成的照明控制,消除了曝光不均而防止画质的降低。
并且,在通过上述提案那样的两个控制的组合来进行照明控制的情况下,为了使照明光量进一步降低,还提出了如下方法:从在影像读出期间进行强度恒定控制并且在所有行同时曝光期间进行PWM控制的控制状态,转移到停止影像读出期间中的强度恒定控制而仅在所有行同时曝光期间进行电流电平控制和PWM控制的控制状态(参照图15)。
而且,为了使照明光量在该转移的前后连续地变化,进行转移后的所有行同时曝光期间的电流电平控制以使得转移前的影像读出期间的光量与转移后的所有行同时曝光期间的光量相同。
但是,在该提案的情况下,由于进行了从在转移前的所有行曝光期间不照明的状态向所有行同时曝光期间的电流电平控制的转移,因此存在如下问题:照明光的强度的变化量较大,在转移时,所输出的图像上的亮度不均会很明显。即,从在所有行曝光期间不射出照明光的状态开始转移时,进行了在所有行曝光期间射出大量的照明光的照明定时的变更,因此图像的亮度不均会很明显。
因此,本发明的目的在于,提供在进行照明定时的变更时减少亮度不均的内窥镜装置和视频处理器。
发明内容
用于解决课题的手段
本发明的一个方式的内窥镜装置具有:发光部,其发出用于照明被检体的光;滚动快门方式的摄像元件,其具有接受来自被所述光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的摄像信号;发光控制部,其控制所述发光部所发出的所述光的强度;以及切换控制部,其能够切换在所述曝光期间和所述读出期间中照射来自所述发光部的光的第1模式和仅在所述曝光期间中照射来自所述发光部的光的第2模式,当在所述光量控制部中控制成所述光的强度为规定的值的情况下,该切换控制部进行从所述第1模式和所述第2模式中的一方向另一方切换的控制。
本发明的一个方式的视频处理器供来自滚动快门方式的摄像元件的摄像信号输入而生成内窥镜图像,该摄像元件具有接受来自被发光部的光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的所述摄像信号,该发光部发出用于照明被检体的所述光,该视频处理器的特征在于,具有:发光控制部,其控制所述发光部所发出的所述光的强度;以及切换控制部,其能够切换在所述曝光期间和所述读出期间中照射来自所述发光部的光的第1模式和仅在所述曝光期间中照射来自所述发光部的光的第2模式,当在所述光量控制部中控制为所述光的强度为规定的值的情况下,该切换控制部进行从所述第1模式和所述第2模式中的一方向另一方切换的控制。
本发明的一个方式的内窥镜装置具有:发光部,其发出用于照明被检体的光;滚动快门方式的摄像元件,其具有接受来自被所述光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的摄像信号;发光控制部,其控制所述发光部所发出的所述光的强度;以及切换控制部,其在进行从第1模式和第2模式这两个模式中的一方向另一方的模式的切换时,对所述发光控制部进行控制以使得所述光的强度在所述模式的切换后成为规定的值,其中,该第1模式至少在所述读出期间中照射来自所述发光部的光,该第2模式仅在所述曝光期间中照射来自所述发光部的光。
本发明的一个方式的视频处理器供来自滚动快门方式的摄像元件的摄像信号输入而生成内窥镜图像,该摄像元件具有接受来自被发光部的光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的所述摄像信号,该发光部发出用于照明被检体的所述光,该视频处理器的特征在于,具有:发光控制部,其控制用于发出照明被检体的光的发光部所发出的所述光的强度;以及切换控制部,其在进行从第1模式和第2模式这两个模式中的一方向另一方的模式的切换时,对所述发光控制部进行控制以使得所述光的强度在所述模式的切换后成为规定的值,其中,该第1模式至少在所述读出期间中照射来自所述发光部的光,该第2模式仅在所述曝光期间中照射来自所述发光部的光。
附图说明
图1是示出本发明的实施方式的内窥镜装置的结构的框图。
图2是用于说明本发明的实施方式的内窥镜装置1的摄像时的摄像元件11的曝光期间和读出期间与发光元件13所射出的照明光的输出之间的关系的示意性的图。
图3是用于说明本发明的实施方式的照明模式的图。
图4是示出本发明的实施方式的照明模式的切换处理的流程的例子的流程图。
图5是用于说明本发明的实施方式的变形例1的内窥镜装置1的摄像时的摄像元件11的曝光期间和读出期间与发光元件13所射出的照明光的输出之间的关系的示意性的图。
具体实施方式
下面,参照附图对本发明的实施方式进行说明。
图1是示出本实施方式的内窥镜装置的结构的框图。内窥镜装置1具有内窥镜2、视频处理器3、光源装置4以及监视器5。另外,在图1中,仅示出与本实施方式的照明定时的变更相关的构成要素,省略了其它的构成要素。
内窥镜2构成为具有摄像元件11、模拟前端部(以下称作AFE部)12以及发光元件13。
摄像元件11是CMOS图像传感器,该摄像元件11被后述的摄像元件驱动部23驱动,将摄像信号输出到AFE部12。摄像元件11具有受光部,该受光部具有多条水平行,各行包含多个像素。摄像元件11利用滚动快门方式生成图像,该滚动快门方式使定时按照每水平行错开而进行曝光和读出。
AFE部12在对所输入的作为模拟信号的摄像信号进行降噪处理、放大处理等之后,转换成数字信号而输出给视频处理器3。
发光元件13例如是射出白色光的发光二极管(LED),是被后述的发光元件驱动部24驱动而发出用于照明被检体的照明光的发光部。
摄像元件11和发光元件13配置于内窥镜2的插入部的前端部。
视频处理器3构成为具有控制部21、明亮度检测部22以及摄像元件驱动部23。
控制部21包含中央处理装置(CPU)、ROM、RAM等,该控制部21进行内窥镜装置1整体的控制和各部分的控制。具体来说,控制部21对摄像元件11和发光元件13进行驱动控制,对来自摄像元件11的摄像信号实施各种图像处理而生成显示在监视器5上的图像,将图像记录到未图示的存储器等。
明亮度检测部22是如下的电路:根据来自内窥镜2的摄像元件11的摄像信号IS,从包含在规定的范围(例如帧图像整体范围)内的多个像素的像素值来计算图像的明亮度。
摄像元件驱动部23是如下的电路:根据来自控制部21的摄像元件控制信号CS1来生成驱动信号SC,对摄像元件11进行驱动。在驱动信号SC中包含对摄像元件11赋予曝光定时和读出定时的同步信号。
光源装置4构成为具有发光元件驱动部24。
如后述那样,控制部21在规定的定时输出发光元件驱动控制信号CS2。
发光元件驱动部24是如下的电路:根据来自控制部21的发光元件驱动控制信号CS2来生成作为电流信号的驱动信号I,对发光元件13进行驱动。根据从发光元件驱动部24输出的驱动信号I的大小(即电流值),发光元件13所射出的光的强度会发生变化。
控制部21对后述的两个照明模式的切换进行控制,并且在各照明模式中,根据明亮度检测部22所检测出的明亮度信号B,对发光元件13所发出的照明光的强度进行控制以使图像的明亮度成为适当的明亮度。即,控制部21构成对作为发光部的发光元件13所发出的光的强度进行控制的发光控制部。
来自设置于内窥镜2的插入部的前端部的发光元件13的照明光对被检体的观察部位进行照明,摄像元件11接受其反射光而生成摄像信号IS。
监视器5是显示内窥镜图像和菜单图像的液晶显示器等显示装置。
如上所述,明亮度检测部22根据来自AFE部12的摄像信号IS来检测每帧的图像的明亮度,将表示各帧图像的明亮度的明亮度信号B输出到控制部21。控制部21根据所接收的摄像信号IS来生成显示图像,并且根据所接收的明亮度信号B将发光元件驱动控制信号CS2输出到发光元件驱动部24。
因此,控制部21对摄像元件驱动部23进行控制来驱动摄像元件11,根据利用滚动快门方式生成的图像数据来生成内窥镜图像,并输出给监视器5而进行显示。
图2是用于说明内窥镜装置1的摄像时的摄像元件11的曝光期间和读出期间与发光元件13所射出的照明光的输出之间的关系的示意性的图。
在图2中,在上段的G1所示的范围中示意性地示出了摄像元件11的各行的曝光期间和读出期间的定时。在下段的G2中示出了流过发光元件13的驱动信号I的变化。横轴是时间t的轴。
摄像元件11是CMOS图像传感器,摄像元件11具有由n行的行构成的受光部,各行由多个像素构成。摄像元件11利用滚动快门方式来生成图像数据,该滚动快门方式使定时按照每行错开而进行曝光和读出。
具体来说,摄像元件11在连续地拍摄多帧的情况下,按照每1条水平行进行所积蓄的电荷的读出。从摄像元件11的受光部的第1行(图2中的第1行的行)到作为最后行的第n行(n是自然数,图2中的第n行的行)为依次读出行,读出像素信号。因此,在第1行的行与第n行的行之间,在读出定时中会产生时间差。
在摄像元件11的第1行的像素数据的读出开始后到第n行的像素数据的读出结束为止的期间是影像读出期间IR。
周期地产生的影像读出期间IR以外的期间(即对所有行同时进行曝光的期间)是所有行同时曝光期间AL。如图2所示,在图像的1场或1帧的期间T中包含所有行同时曝光期间AL和影像读出期间IR。
由于摄像元件11是滚动快门方式,因此所有行同时曝光期间AL和影像读出期间IR交替切换。
另外,1场(或1帧)的期间T和所有行同时曝光期间AL的时间t1根据摄像元件11的规格来确定。
如上所述,设置于内窥镜的插入部的摄像元件11是滚动快门方式的摄像元件,该摄像元件11具有接受来自被光照射的被检体的反射光的多个行,对同时进行多个行的曝光的曝光期间AL和从多个行依次读出各行的摄像信号的读出期间IR进行交替地切换。
发光元件驱动部24所输出的驱动信号I在规定的最小值Imin与规定的最大值Imax之间发生变化。控制部21将发光元件驱动控制信号CS2输出给发光元件驱动部24。即,发光元件驱动控制信号CS2是使发光元件驱动部24所输出的驱动信号I处于规定的最小值Imin与规定的最大值Imax之间的信号。
当将内窥镜2的插入部插入到被检体内而利用摄像元件11来拍摄被检体内时,控制部21根据明亮度检测部22所检测出的图像的明亮度,将发光元件驱动控制信号CS2输出给发光元件驱动部24,其中,该发光元件驱动控制信号CS2使发光元件13按照使图像为适当的明亮度的强度射出照明光。其结果是,在监视器5中显示适当的明亮度的内窥镜图像。即,控制部21通过调整流过发光元件13的驱动信号I的大小,执行进行调光的电流电平控制。电流电平控制例如是PAM(Pulse Amplitude Modulation:脉幅调制)控制。
在图2中,流过发光元件13的驱动信号I的电流值的大小在期间T2中比在期间T1中小。例如,由于插入部的前端接近被检体,因此明亮度信号B变大,需要使照明光的强度下降,因此在期间T2中,驱动发光元件13的驱动信号I的电流值降低。
在期间T1和T2的各期间中,在所有行同时曝光期间AL和影像读出期间IR中,利用射出与图像的明亮度对应的一定强度的照明光的第1照明模式M1来进行照明控制。如上所述,在第1照明模式M1中,驱动信号I被调整在规定的最小值Imin与规定的最大值Imax之间,但当内窥镜2的插入部的前端部过于接近被检体时,即使驱动信号I是最小值Imin,图像的明亮度也会成为规定的明亮度以上。
即,控制部21通常为了获得适当的明亮度的图像而执行在所有行同时曝光期间AL和影像读出期间IR中射出相同强度的照明光的第1照明模式M1下的照明控制。
但是,如上所述,因插入部的前端接近被检体而在所有行同时曝光期间AL和影像读出期间IR中射出照明光从而导致照明光的强度过强时,控制部21为了获得适当的明亮度的图像而切换照明模式,以执行仅在所有行同时曝光期间AL中射出照明光的第2照明模式M2下的照明控制。
由于仅在所有行同时曝光期间AL中射出照明光,在影像读出期间IR中不射出照明光,因此第2照明模式M2是在所需的光量较少时执行的模式。在第2照明模式M2中,同时使用使驱动信号I的大小增减来控制光的强度的电流控制和通过发光的时间来控制照明光量的PWM控制。
在图2的期间T4和T5中,利用仅在所有行同时曝光期间AL中射出照明光的第2照明模式M2来进行照明控制。在第2照明模式M2中,驱动信号I也被调整在规定的最小值Imin与规定的最大值Imax之间。
第1照明模式M1和第2照明模式M2根据画面的明亮度L来进行切换。
图2示出了在从期间T3转移到期间T4时进行从第1照明模式M1向第2照明模式M2的照明控制的转移。
(作用)
接着,对内窥镜装置1的动作进行说明。
如上所述,第1照明模式M1和第2照明模式M2根据画面的明亮度L来进行切换,对第1照明模式M1和第2照明模式M2的切换处理进行说明。
图3是用于对照明模式进行说明的图。图3的纵轴表示明亮度L。通常情况下,控制部21根据明亮度检测部22所检测出的明亮度信号B对发光元件13所发出的照明光的强度进行控制,以使图像的明亮度成为适当的明亮度。但是,在内窥镜的前端部过于接近检查部位时,即使上述的驱动电流I成为最小值Imin,所获得的图像的明亮度L也不会成为适当的明亮度,而成为规定的阈值Lth以上。
这里,如果根据来自明亮度检测部22的明亮度信号B计算出的图像的明亮度L为规定的阈值Lth以上,则控制部21利用第2照明模式M2来执行照明控制,在图像的明亮度L小于规定的阈值Lth时,利用第1照明模式M1来执行照明控制。在明亮度L为规定的阈值Lth以上时和明亮度L小于规定的阈值Lth时,进行照明模式的切换。
图4是示出照明模式的切换处理的流程的例子的流程图。在利用第1照明模式M1和第2照明模式M2执行照明控制时始终执行图4的处理。
控制部21根据来自明亮度检测部22的明亮度信号B来判定图像的明亮度L是否为规定的阈值Lth以下(S1)。
当图像的明亮度L为规定的阈值Lth以下时(S1:是),控制部21判定目前的照明模式是否为第1照明模式M1(S6),在为第1照明模式M1时(S6:是),不进行任何处理。在图2中,在期间T1和T2中进行第1照明模式M1的照明控制。
当图像的明亮度L超过规定的阈值Lth时(S1:否),控制部21判定目前的照明模式是否为第2照明模式M2(S2),在不是第2照明模式M2时(S2:否),实施校正运算处理(S3)。
在图2中到期间T3为止利用第1照明模式M1来进行照明控制,在期间T3中图像的明亮度L为规定的阈值Lth以上,从下一个期间T4起利用第2照明模式M2来进行照明控制。
在从期间T4起利用第2照明模式M2开始照明控制时,进行校正运算处理(S3),确定利用第2照明模式M2开始照明控制时的最初的场(这里是指期间T4)中的电流值。
如图2所示,在将期间T3的影像读出期间IR中的驱动信号I的电流值设为I1,将期间T4的所有行同时曝光期间AL中的驱动信号I的电流值设为I2时,为了使与在期间T3的影像读出期间IR中读出的摄像信号对应的图像的明亮度和与在期间T4的影像读出期间IR中读出的摄像信号对应的图像的明亮度一致,以满足如下的式(1)的方式确定电流值I2。
(T-t1)I1/2=t1(I2-I1)···(1)
式(1)的左边表示图2中的斜线区域R1的面积。式(1)的右边表示图2中的斜线区域R2的面积。
因此,在从第1照明模式M1向第2照明模式M2转移后的最初的场(在图2中是期间T4)中,由于光的强度的增加量(换言之从期间T3的电流值I1到期间T4中的电流值I2的变化量)较小,因此转移时的光量不均不明显。
此外,由于转移后的期间T5的所有行同时曝光期间AL中的驱动信号I的电流值不能超过最大值Imax,因此电流值I1和I2需要满足如下的式(2)。
2(I2-I1)+I1≦Imax···(2)
因此,当在S2中为“否”的情况下,控制部21执行对满足上述式(1)的条件的电流值I2进行计算的校正运算处理(S3),根据校正运算的结果是否满足上述的式(2)的条件,判定是否能够进行照明模式的切换(S4)。
另外,如上所述,由于摄像元件11的1场(或1帧)的期间T和所有行同时曝光期间AL的时间t1根据摄像元件11的规格来确定,因此各照明模式下的电流值I1和I2满足如下的式(3)和(4)。
Imin≦I1≦(t1/T)Imax···(3)
I2≦((T+t1)/2T)Imax···(4)
在判定为能够进行照明模式的切换时(S4:是),控制部21根据校正运算处理的结果,利用仅在所有行同时曝光期间AL中射出照明光的第2照明模式M2来进行照明控制(S5)。这里,进行照明模式的切换。
在S5中,控制部21进行从第1照明模式M1向第2照明模式M2转移后的最初的场(T4)中的照明控制,以使得在发光元件13中流过在S3中确定的电流值I2。在之后的场(T5及以后)中,根据图像的明亮度,利用仅在所有行同时曝光期间AL中射出照明光的第2照明模式M2来进行照明控制。
如上所述,在进行从第1照明模式M1和第2照明模式M2这两个模式中的一方向另一方的模式的切换时,控制部21在此处构成切换控制部,该切换控制部进行控制以使光的强度在从第1照明模式M1向第2照明模式M2的模式切换后成为规定的值,其中,该第1照明模式M1在作为曝光期间的所有行同时曝光期间AL和作为读出期间的影像读出期间IR中照射来自发光元件13的光,该第2照明模式M2仅在作为曝光期间的所有行同时曝光期间AL中照射来自发光元件13的光。
然后,控制部21对发光元件13所发出的光的强度进行控制以使得摄像元件11被曝光而接受的光量在模式的切换前后的场或帧中相等。但是,在刚切换后的场或帧中,控制部21对发光元件13所发出的光的强度进行控制,以使得即将要切换模式前的场或帧中的读出期间IR的光量的一部分(这里是指一半)与即将要切换模式前的场或帧中的曝光期间AL的光量相加后的光量成为刚切换模式后的场或帧中的曝光期间AL的光量。
具体来说,控制部21对发光元件13进行控制,以使得在将即将要切换模式前的光的强度(这里是指电流值)设为I1,将刚切换模式后的光的强度(这里是指电流值)设为I2,将曝光期间设为t1,将摄像元件11中的1场或1帧的期间设为T时满足式(1)的关系。此外,控制部21对发光元件13进行控制,以使得在将发光元件13中的最大发光强度设为Imax时满足式(2)的关系。
在没有判定出能够进行照明模式的切换时(S4:否),控制部21不进行任何处理,其结果是不进行照明模式的切换。
另外,在判定目前的照明模式是否为第2照明模式M2时,如果是第2照明模式M2(S2:是),则控制部21不进行任何处理,其结果是继续进行第2照明模式M2下的照明控制。
另外,当图像的明亮度L为规定的阈值Lth以上时(S1:否),控制部21判定目前的照明模式是否为第1照明模式M1(S6),当不是第1照明模式M1时(S6:否),执行校正运算处理(S7)。
在S7的校正运算处理中,以满足上述的式(1)的方式确定从第2照明模式M2向第1照明模式M1转移后的最初的场的驱动信号I的电流值I1。
即,当在S6中为“否”的情况下,控制部21执行对满足上述的式(1)的条件的电流值I1进行计算的校正运算处理(S7),根据校正运算的结果是否满足上述的式(2)的条件,判定是否能够进行照明模式的切换(S8)。
在判定为能够进行照明模式的切换时(S8:是),控制部21根据校正运算处理的结果,利用在所有行同时曝光期间AL和影像读出期间IR中射出照明光的第1照明模式M1来进行照明控制(S9)。之后,根据图像的明亮度,利用在所有行同时曝光期间AL和影像读出期间IR中射出照明光的第1照明模式M1来进行照明控制。
在S9中,控制部21进行从第2照明模式M2向第1照明模式M1转移后的最初的场中的照明控制,以使得在发光元件13中流过在S7中确定的电流值I1。在之后的场中,根据图像的明亮度,利用在所有行同时曝光期间AL和影像读出期间IR中射出照明光的第1照明模式M1来进行照明控制。
如上所述,控制部21构成切换控制部,该切换控制部进行控制以使光量在从第2照明模式M2向第1照明模式M1的模式切换后成为规定的值。
在没有判定出能够进行照明模式的切换时(S8:否),控制部21不进行任何处理,其结果是不进行照明模式的切换。
另外,在判定目前的照明模式是否为第1照明模式M1时,如果是第1照明模式M1(S6:是),则如上所述,控制部21不进行任何处理,其结果是继续进行第1照明模式M1下的照明控制。
如上所述,根据上述的实施方式,能够提供在进行照明定时的变更时减少亮度不均的内窥镜装置和视频处理器。
另外,在上述的实施方式中,发光元件13射出白色光,但也可以使用射出RGB等多个颜色的光的多个发光元件,在该情况下,控制部在射出各色的光的定时的切换时进行上述那样的照明光的强度控制。
此外,在上述的实施方式的内窥镜装置中,照明模式根据图像的明亮度来进行切换,但切换也可以不基于图像的明亮度来进行。例如,也可以在切换成第2照明模式M2后的驱动信号I不超过Imax的I1下,在任意的时间从第1照明模式M1向第2照明模式M2变更。另外,也可以在切换成第1照明模式M1后的驱动信号I不低于Imin的I2下,在任意的时间从第2照明模式M2向第1照明模式M1变更。具体来说,当在本实施例中满足上述的式(1)和(2)时,也可以在任意的时间进行照明模式的切换。
接着,对上述的实施方式的变形例进行说明。
(变形例1)
在上述的实施方式中,在整个第1照明模式M1的所有行曝光期间中输出驱动信号I,但也可以在第1照明模式M1的所有行曝光期间中进行PWM控制。
图5是用于说明本变形例1的内窥镜装置1的摄像时的摄像元件11的曝光期间和读出期间与发光元件13所射出的照明光的输出之间的关系的示意性的图。由于图5是与图2同样的图,因此对共同的部分省略说明。
如图5所示,在图像的1场或1帧的期间T中的所有行同时曝光期间AL中,发光元件13通过PWM控制不是在所有行同时曝光期间AL的整个期间中射出光。
如上所述,摄像元件11也可以不在所有行同时曝光期间AL的整个期间中同时进行多个行的曝光,而是在所有行同时曝光期间AL的一部分期间中同时进行多个行的曝光。
在本变形例中,也可以在切换成第2照明模式M2后的驱动信号I不超过Imax的I1下,在任意的时间从第1照明模式M1向第2照明模式M2变更。另外,也可以在切换成第1照明模式M1后的驱动信号I不低于Imin的I2下,在任意的时间从第2照明模式M2向第1照明模式M1变更。
在通过PWM控制使发光元件13仅在读出期间发光的情况下,也可以进行在影像读出期间IR发光的第1照明模式M1与仅在所有行同时曝光期间AL发光的第2照明模式M2之间的切换。另外,在从第1照明模式M1和第2照明模式M2中的一方向另一方切换时,也可以与其他的实施方式同样,对驱动信号I进行控制以使图像的明亮度在模式切换前后相等。
(变形例2)
在刚切换模式后的图像(例如从上述的第1照明模式M1向第2照明模式M2转移后的最初的场或帧(在图2中是期间T4))中,受到期间T3的影像读出期间IR中的照明的影响,在期间T4中输出的图像中存在因行间的亮度差而导致的亮度不均,因此控制部21也可以对从第1照明模式M1向第2照明模式M2转移后的最初的场(在图2中是期间T4)中获得的图像进行如下的图像处理:校正该图像以消除其亮度不均。
即,控制部21也可以具有作为校正部的功能,该校正部对刚切换模式后的场或帧的图像进行如下的处理:校正因即将要切换模式前的场或帧中的影像读出期间IR的光量的影响而导致的亮度不均。
如以上说明的那样,根据上述的实施方式和各变形例,能够提供在进行照明定时的变更时减少亮度不均的内窥镜装置和视频处理器。
本发明并不限定于上述的实施方式,可以在不改变本发明的主旨的范围内进行各种变更和改变等。
本申请是以2015年9月16日在日本申请的日本特愿2015-183168号为优先权主张的基础进行申请的,上述的公开内容被引用于本申请说明书、权利要求书中。
Claims (7)
1.一种内窥镜装置,该内窥镜装置具有:
发光部,其发出用于照明被检体的光;
驱动部,其生成用于从所述发光部发出所述光的驱动信号;
滚动快门方式的摄像元件,其具有接受来自被所述光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的摄像信号;以及
控制部,其根据所述摄像元件所生成的所述摄像信号来生成内窥镜图像,
其特征在于,
所述驱动部能够根据所述驱动信号的电流值来变更所述发光部所发出的所述光的光量,
所述控制部对第1模式和第2模式进行切换控制,当在所述第1模式中所述驱动信号的电流值为规定的下限值、并且进一步使所述内窥镜图像的明亮度降低的情况下,从所述第1模式切换成所述第2模式,其中,在所述第1模式中,对所述驱动部进行控制以使得在所述曝光期间和所述读出期间中从所述发光部照射所述光,在所述第2模式中,对所述驱动部进行控制以使得仅在所述曝光期间中从所述发光部照射所述光,
所述控制部对所述驱动部进行控制,以使得所述摄像元件在所述曝光期间的整个期间中同时进行所述多个行的曝光,并且所述控制部对所述驱动部进行控制,以使得即将要从所述第1模式切换成所述第2模式前的场或帧中的所述读出期间的光量的一部分与即将要从所述第1模式切换成所述第2模式前的场或帧中的所述曝光期间的光量相加后的光量成为刚从所述第1模式切换成所述2模式后的场或帧中的所述曝光期间的光量。
2.根据权利要求1所述的内窥镜装置,其中,
所述控制部对所述驱动部进行控制,以使得所述摄像元件被曝光而接受的光量在从所述第1模式切换成所述第2模式的前后的场或帧中相等。
3.根据权利要求1所述的内窥镜装置,其中,
所述控制部对所述驱动部进行控制,以使得在将即将要从所述第1模式切换成所述第2模式前的光的强度设为I1,将刚从所述第1模式切换成所述第2模式后的所述光的强度设为I2,将所述曝光期间设为t1,将所述摄像元件中的1场或1帧的期间设为T时满足如下的式(1)的关系,
(T-t1)I1/2=t1(I2-I1)···(1)。
4.根据权利要求3所述的内窥镜装置,其中,
所述控制部进一步对所述驱动部进行控制,以使得在将所述发光部中的最大发光强度设为Imax时满足如下的式(2)的关系,
2(I2-I1)+I1≦Imax···(2)。
5.根据权利要求1所述的内窥镜装置,其中,
该内窥镜装置具有校正部,该校正部对刚从所述第1模式切换成所述第2模式后的场或帧的图像进行如下的处理:校正因即将要从所述第1模式切换成所述第2模式前的场或帧中的所述读出期间的光量的影响而导致的亮度不均。
6.根据权利要求1所述的内窥镜装置,其中,
所述摄像元件是CMOS图像传感器。
7.一种视频处理器,该视频处理器供来自滚动快门方式的摄像元件的摄像信号输入而生成内窥镜图像,该摄像元件具有接受来自被发光部的光照射的被检体的反射光的多个行,该摄像元件交替地切换曝光期间和读出期间,其中,在所述曝光期间中,进行所述多个行的曝光,在所述读出期间中,从所述多个行依次读出各行的所述摄像信号,该发光部发出用于照明被检体的所述光,其特征在于,
该视频处理器具有控制部,该控制部对第1模式和第2模式进行切换控制,当在所述第1模式中驱动信号的电流值为规定的下限值、并且进一步使所述内窥镜图像的明亮度降低的情况下,从所述第1模式切换成所述第2模式,其中,在所述第1模式中,对驱动部进行控制以使得在所述曝光期间和所述读出期间中从所述发光部照射所述光,所述驱动部能够根据用于从所述发光部发出所述光的所述驱动信号的电流值来变更所述发光部所发出的所述光的光量,在所述第2模式中,对所述驱动部进行控制以使得仅在所述曝光期间中从所述发光部照射所述光,
所述控制部对所述驱动部进行控制,以使得所述摄像元件在所述曝光期间的整个期间中同时进行所述多个行的曝光,并且所述控制部对所述驱动部进行控制,以使得即将要从所述第1模式切换成所述第2模式前的场或帧中的所述读出期间的光量的一部分与即将要从所述第1模式切换成所述第2模式前的场或帧中的所述曝光期间的光量相加后的光量成为刚从所述第1模式切换成所述2模式后的场或帧中的所述曝光期间的光量。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015-183168 | 2015-09-16 | ||
JP2015183168 | 2015-09-16 | ||
PCT/JP2016/053220 WO2017047113A1 (ja) | 2015-09-16 | 2016-02-03 | 内視鏡装置及びビデオプロセッサ |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108024701A CN108024701A (zh) | 2018-05-11 |
CN108024701B true CN108024701B (zh) | 2019-12-06 |
Family
ID=58288570
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680052921.XA Active CN108024701B (zh) | 2015-09-16 | 2016-02-03 | 内窥镜装置和视频处理器 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10624535B2 (zh) |
JP (1) | JP6234632B2 (zh) |
CN (1) | CN108024701B (zh) |
WO (1) | WO2017047113A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4413946A3 (en) | 2017-02-06 | 2024-10-23 | Intuitive Surgical Operations, Inc. | System and method for extracting multiple feeds from a rolling-shutter sensor |
JP7069290B2 (ja) * | 2018-02-14 | 2022-05-17 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
US10638921B2 (en) * | 2018-07-20 | 2020-05-05 | Arthrex, Inc. | Medical imaging system |
CN109171609A (zh) * | 2018-09-29 | 2019-01-11 | 合肥京东方光电科技有限公司 | 一种内窥镜系统及其控制方法 |
DE102018127287B4 (de) * | 2018-10-31 | 2023-01-12 | Schölly Fiberoptic GmbH | Bildaufnahmeverfahren und Bildaufnahmevorrichtung |
US11445123B2 (en) | 2020-09-28 | 2022-09-13 | Brompton Technology Ltd. | System and method for PWM control of a video display screen |
EP4272427A1 (en) | 2020-12-30 | 2023-11-08 | Stryker Corporation | Systems and methods for mitigating artifacts in medical imaging |
US20230146673A1 (en) * | 2021-11-09 | 2023-05-11 | Karl Storz Imaging, Inc. | Dynamic light source status indication for endoscopic systems |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103841881A (zh) * | 2012-05-25 | 2014-06-04 | 奥林巴斯医疗株式会社 | 摄像系统 |
CN104135908A (zh) * | 2012-03-28 | 2014-11-05 | 富士胶片株式会社 | 摄像装置以及具备其的内窥镜装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5850630B2 (ja) * | 2011-04-04 | 2016-02-03 | 富士フイルム株式会社 | 内視鏡システム及びその駆動方法 |
CN103583038B (zh) * | 2012-04-16 | 2017-03-22 | 奥林巴斯株式会社 | 摄像系统、摄像方法 |
JP5735478B2 (ja) | 2012-12-14 | 2015-06-17 | 富士フイルム株式会社 | 内視鏡装置及びその作動方法 |
JP6248491B2 (ja) * | 2013-09-17 | 2017-12-20 | 株式会社ニコン | 撮像装置の制御装置、撮像装置、撮像方法、撮像プログラム、記憶媒体、及び顕微鏡装置 |
-
2016
- 2016-02-03 CN CN201680052921.XA patent/CN108024701B/zh active Active
- 2016-02-03 JP JP2017505598A patent/JP6234632B2/ja active Active
- 2016-02-03 WO PCT/JP2016/053220 patent/WO2017047113A1/ja active Application Filing
-
2018
- 2018-03-15 US US15/922,340 patent/US10624535B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104135908A (zh) * | 2012-03-28 | 2014-11-05 | 富士胶片株式会社 | 摄像装置以及具备其的内窥镜装置 |
CN103841881A (zh) * | 2012-05-25 | 2014-06-04 | 奥林巴斯医疗株式会社 | 摄像系统 |
Also Published As
Publication number | Publication date |
---|---|
JP6234632B2 (ja) | 2017-11-22 |
WO2017047113A1 (ja) | 2017-03-23 |
US20180199805A1 (en) | 2018-07-19 |
JPWO2017047113A1 (ja) | 2017-09-14 |
US10624535B2 (en) | 2020-04-21 |
CN108024701A (zh) | 2018-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108024701B (zh) | 内窥镜装置和视频处理器 | |
US11337593B2 (en) | Endoscope apparatus and video processor | |
JP5379932B1 (ja) | 撮像システム、撮像方法 | |
JP5452785B1 (ja) | 撮像システム | |
US8721532B2 (en) | Endoscope apparatus and method for controlling fluorescence imaging apparatus | |
US9307600B2 (en) | Synchronized light source for rolling shutter imagers | |
JP6360988B1 (ja) | 内視鏡および内視鏡システム | |
WO2013161900A1 (ja) | 撮像システム | |
US20130050456A1 (en) | Imaging device, endoscope device | |
US20230363630A1 (en) | Light source device and endoscope system | |
CN108463157B (zh) | 内窥镜用处理器 | |
CN116113866A (zh) | 光源装置和内窥镜系统 | |
JP7394547B2 (ja) | 制御装置、医療用観察システム、制御方法およびプログラム | |
US11503990B2 (en) | Imaging system, processing device and illumination control method to set emission timing of illumination light in readout period of signal value of imager | |
JP2012085790A (ja) | 内視鏡装置 | |
JP7224985B2 (ja) | 医療用光源装置及び医療用観察システム | |
WO2017047166A1 (ja) | 内視鏡装置及びビデオプロセッサ | |
JP7235608B2 (ja) | 光源制御装置、医療用観察システム、光源制御方法およびプログラム | |
EP3175774A1 (en) | Imaging system | |
JP6735586B2 (ja) | 電子内視鏡システムおよび電子内視鏡システムの作動方法 | |
JP2017109037A (ja) | 撮像システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |