CN103260499A - 摄像装置 - Google Patents

摄像装置 Download PDF

Info

Publication number
CN103260499A
CN103260499A CN2012800040046A CN201280004004A CN103260499A CN 103260499 A CN103260499 A CN 103260499A CN 2012800040046 A CN2012800040046 A CN 2012800040046A CN 201280004004 A CN201280004004 A CN 201280004004A CN 103260499 A CN103260499 A CN 103260499A
Authority
CN
China
Prior art keywords
image pickup
pickup part
light accepting
image
pixel information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012800040046A
Other languages
English (en)
Other versions
CN103260499B (zh
Inventor
大野涉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Publication of CN103260499A publication Critical patent/CN103260499A/zh
Application granted granted Critical
Publication of CN103260499B publication Critical patent/CN103260499B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00193Optical arrangements adapted for stereoscopic vision
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • A61B1/051Details of CCD assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/445Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by skipping some contiguous pixels within the read portion of the array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels

Abstract

本发明的内窥镜系统(100)具有:第1受光部(28A)和第2受光部(28B);调谐部(81),其设定第1受光部(28A)和第2受光部(28B)中的读出对象像素,使得从第1受光部(28A)和第2受光部(28B)中交替读出像素信息,并且相关联地对第1受光部(28A)和第2受光部(28B)中的曝光处理的定时、以及针对第1受光部(28A)和第2受光部(28B)的像素信息读出处理的定时进行控制;以及集合缆线(31),其通过同一传送路径传送从第1受光部(28A)和第2受光部(28B)中读出的像素信息。

Description

摄像装置
技术领域
本发明涉及具有能够从摄像用的多个像素中的被任意指定为读出对象的像素输出光电转换后的电信号作为像素信息的多个摄像部的摄像装置。
背景技术
以往,在医疗领域中,在对被检体的脏器内部进行观察时使用内窥镜系统。一般地,内窥镜系统是一种摄像装置:在患者等被检体的体腔内插入呈细长形状的挠性的插入部,经由该插入的插入部对体腔内的活体组织照射白色光,通过插入部前端的摄像部接受其反射光,对体内图像进行摄像。这样进行摄像而得到的活体图像的图像信号经由插入部内的传送缆线传送到体外的图像处理装置,在图像处理装置中进行图像处理后,显示在内窥镜系统的监视器中。医师等用户通过监视器中显示的体内图像对被检体的体腔内进行观察。
作为包含内窥镜系统的摄像装置,提出了如下结构:设置2个摄像部,并且,对应于各摄像部而设置2个传送路径和2个图像处理部,能够同时显示各摄像部进行摄像而得到的图像(例如参照专利文献1)。并且,作为包含内窥镜系统的摄像装置,提出了如下结构:针对各成像光学系统和滤波器设置切换机构和调整机构,利用一个摄像元件取得彩色图像和其他图像。
现有技术文献
专利文献
专利文献1:日本特开2010-130570号公报
发明内容
发明要解决的课题
由于内窥镜系统的插入部被导入被检体的体腔内,所以,要求细径化,可使用的空间也存在极限。但是,在专利文献1的结构中,为了取得多种图像,必须分别对应于2个摄像部而在内窥镜插入部内分别搭载2个传送路径,存在很难实现插入部的细径化的问题。并且,在专利文献1的结构中,必须在图像处理装置中对应于2个摄像部而设置2个图像处理部,存在图像处理装置的装置结构复杂的问题。
本发明是鉴于上述情况而完成的,其目的在于,提供能够利用简单的结构取得多种图像的摄像装置。
用于解决课题的手段
为了解决上述课题并实现目的,本发明的摄像装置的特征在于,该摄像装置具有:第1摄像部和第2摄像部,它们能够从摄像用的多个像素中的被任意设定为读出对象的像素输出光电转换后的电信号作为像素信息;读出部,其从在所述第1摄像部和所述第2摄像部中被设定为读出对象的像素读出像素信息;控制部,其设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得通过所述读出部从所述第1摄像部和所述第2摄像部中交替读出像素信息,并且,相关联地对所述第1摄像部和所述第2摄像部中的曝光处理的定时、以及所述读出部的针对所述第1摄像部和所述第2摄像部的像素信息读出处理的定时进行控制;传送部,其通过同一传送路径传送从所述第1摄像部和所述第2摄像部中读出的像素信息;以及图像处理部,其根据由所述传送部传送的像素信息生成图像。
并且,本发明的摄像装置的特征在于,所述多个像素呈二维矩阵状配置,所述控制部设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得所述读出部交替地从所述第1摄像部和所述第2摄像部中按照规定行间隔读出水平行的像素信息。
并且,本发明的摄像装置的特征在于,所述第1摄像部和所述第2摄像部具有相同的摄像特性。
并且,本发明的摄像装置的特征在于,所述第1摄像部和所述第2摄像部具有不同的摄像特性。
并且,本发明的摄像装置的特征在于,所述第1摄像部具有对彩色图像进行摄像的特性,所述第2摄像部具有对单色图像进行摄像的特性。
并且,本发明的摄像装置的特征在于,所述像素信息包含亮度值,所述控制部使所述读出部在包含有规定数量的像素的块内将像素的亮度值相加起来进行输出,作为所述第2摄像部的像素的亮度值。
并且,本发明的摄像装置的特征在于,所述控制部进行如下控制:对单位期间进行分割,在分割后的期间内,分别交替进行所述第1摄像部和所述第2摄像部中的曝光处理、以及所述读出部的针对所述第1摄像部和所述第2摄像部的像素信息读出处理。
并且,本发明的摄像装置的特征在于,所述控制部按照所述第1摄像部和所述第2摄像部的特性,将所述单位期间分割为相互不同时间的期间。
并且,本发明的摄像装置的特征在于,所述多个像素二维纵横配置,所述控制部设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得所述读出部以规定行间隔从所述第1摄像部和所述第2摄像部的至少一方中读出一个水平行的像素信息。
并且,本发明的摄像装置的特征在于,所述单位期间是所述第1摄像部中的曝光处理和针对所述第1摄像部的全部像素的读出处理所需要的期间。
并且,本发明的摄像装置的特征在于,所述摄像装置还具有转换部,该转换部对所述读出部读出的像素信息进行并行/串行转换后将其输出到所述传送部。
并且,本发明的摄像装置的特征在于,所述图像处理部根据所述读出部从所述第1摄像部和所述第2摄像部中交替读出的像素信息,生成分别与所述第1摄像部和所述第2摄像部对应的2张图像。
并且,本发明的摄像装置的特征在于,所述图像处理部使用所述读出部从所述第1摄像部和所述第2摄像部中交替读出的像素信息,生成1张图像。
并且,本发明的摄像装置的特征在于,所述摄像装置是具有以下部分的内窥镜装置:被导入被检体内的前端部,其具有所述第1摄像部、所述第2摄像部、所述读出部和所述控制部;以及通过所述传送部与所述前端部连接的信号处理装置,其具有所述图像处理部和显示所述图像处理部生成的图像的显示部。
发明效果
本发明的摄像装置通过设定第1摄像部和第2摄像部中的读出对象像素,使得通过读出部从第1摄像部和第2摄像部中交替读出像素信息,并且,相关联地对第1摄像部和第2摄像部中的曝光处理的定时、以及读出部的针对第1摄像部和第2摄像部的像素信息读出处理的定时进行控制,能够使用同一传送路径适当传送从第1摄像部和第2摄像部中读出的像素信息,即使是简单的装置结构,也能够适当取得多种图像。
附图说明
图1是示出实施方式1的内窥镜部分的概略结构的图。
图2是示出图1所示的内窥镜的前端部的前端面的图。
图3是示出沿着A-A线切断图2所示的前端部的切断面的一部分的图。
图4是示出沿着B-B线切断图2所示的前端部的切断面的一部分的图。
图5是说明图4所示的基板的主面的图。
图6是示出实施方式1的内窥镜系统的结构的框图。
图7A是说明实施方式1的第1受光部的读出对象像素的图。
图7B是说明实施方式1的第2受光部的读出对象像素的图。
图7C是说明实施方式1的像素信息的传送处理的图。
图7D是说明实施方式1的图像处理部生成的图像的图。
图8A是说明实施方式1的变形例1的第1受光部的读出对象像素的图。
图8B是说明实施方式1的变形例1的第2受光部的读出对象像素的图。
图8C是说明实施方式1的变形例1的像素信息的传送处理的图。
图8D是说明实施方式1的变形例1的图像处理部生成的图像的图。
图9是示出切断实施方式1的变形例2的内窥镜的前端部的切断面的一部分的图。
图10A是说明实施方式1的变形例2的第1受光部的读出对象像素的图。
图10B是说明实施方式1的变形例2的第2受光部的读出对象像素的图。
图11是说明实施方式1的变形例2的读出处理和像素信号的转送处理的图。
图12是说明实施方式1的变形例2的读出处理和像素信号的转送处理的其他例子的图。
图13是说明实施方式2的第1受光部和第2受光部中的曝光处理和针对第1受光部和第2受光部的像素信息的读出处理的图。
图14是说明全行读出方式和行间疏读出方式的同时曝光时间的图。
图15是示出受光部的单位像素的结构的电路图。
图16是包含与针对图15所示的晶体管的导通/截止控制有关的时序图的图。
图17是说明实施方式2的变形例1的第1受光部和第2受光部中的曝光处理和针对第1受光部和第2受光部的像素信息的读出处理的图。
图18是说明实施方式2的变形例1的第1受光部和第2受光部中的曝光处理和针对第1受光部和第2受光部的像素信息的读出处理的其他例子的图。
具体实施方式
下面,作为本发明的实施方式,说明在插入部前端具有摄像元件、对患者等被检体的体腔内的图像进行摄像并显示的医疗用内窥镜系统。另外,本发明不由该实施方式限定。并且,在附图的记载中,对相同部分标注相同标号。并且,附图是示意性的,需要留意各部件的厚度与宽度的关系、各部件的比率等与现实不同。在附图彼此之间还包含相互尺寸关系、比率不同的部分。
(实施方式1)
首先,对实施方式1的内窥镜系统进行说明。在本实施方式1中,以能够取得基于白色光的通常的彩色图像和不同于彩色图像的荧光观察用图像等其他图像的内窥镜系统为例进行说明。图1是示出本实施方式1的内窥镜系统的内窥镜部分的概略结构的图。如图1所示,本实施方式1的内窥镜1具有细长的插入部2、位于该插入部2的基端侧且由内窥镜装置操作者把持的操作部3、以及从该操作部3的侧部延伸的挠性的通用缆线4。通用缆线4内置有光缆和电缆等。
插入部2具有内置了CMOS传感器作为摄像元件的前端部5、由多个弯曲块构成的弯曲自如的弯曲部6、设置在该弯曲部6的基端侧的具有挠性的长条状的挠性管部7。
在通用缆线4的端部设有连接器部8。在连接器部8中设有以装卸自如的方式与光源装置连接的光导连接器9、为了将由CMOS传感器进行光电转换后的被摄体像的电信号传送到信号处理用的控制装置而与控制装置连接的电触点部10、用于向前端部5的喷嘴送出空气的送气接头11等。这里,光源装置具有白色光源和特殊光源等,向经由光导连接器9连接的内窥镜1供给来自白色光源或特殊光源的光作为照明光。并且,控制装置是对摄像元件供给电源并从摄像元件输入光电转换后的电信号的装置,对由摄像元件摄像而得的电信号进行处理并在所连接的显示部中显示图像,并且,输出进行摄像元件的增益调整等控制和驱动的驱动信号。
在操作部3中设有:使弯曲部6向上下方向和左右方向弯曲的弯曲旋钮12;向体腔内插入活检钳子、激光探针等处置器械16的处置器械插入部13;以及对控制装置、光源装置或送气、送水、送雾单元等周边设备进行操作的多个开关14。从处置器械插入部13插入的处置器械16经由内部设置的处置器械用通道而从插入部2前端的开口部15露出。例如,在处置器械16为活检钳子的情况下,进行通过活检钳子取得患部组织的活检等。
接着,对插入部2的前端部5中的结构进行说明。图2是示出图1所示的内窥镜1的前端部5的前端面的图。图3是示出沿着A-A线切断图2所示的前端部5的切断面的一部分的图。图4是示出沿着B-B线切断图2所示的前端部5的切断面的一部分的图。
如图2所示,在图1所示的内窥镜1的前端部5的前端面设有处置器械露出用的开口部15、清洗用喷嘴17、照明光射出的照明窗18、观察窗21和观察窗22。
如图3所示,在照明窗18中,经由由玻璃纤维束等构成的光导19,从照明透镜18a射出从光源装置供给的白色光或特殊光。处置器械露出用的开口部15与处置器械用通道20连通。
如图4所示,观察窗21和观察窗22被堵住。经由观察窗21从外部入射的光入射到由多个透镜23a、23b构成的第1光学系统23A,会聚后入射到第1受光部28A。经由观察窗22从外部入射的光入射到由多个透镜23c、23d构成的第2光学系统23B,会聚后入射到第2受光部28B。
第1受光部28A具有呈二维矩阵状配置的摄像用的多个像素,配置成入射有从第1光学系统23A射出的光。第1受光部28A对经由第1光学系统23A入射的光进行受光,对体腔内进行摄像。在第1受光部28A的受光面侧设有玻璃罩25A。在玻璃罩25A与第1受光部28A之间设有与第1受光部28A的像素排列对应地排列有红(R)、绿(G)或蓝(B)的滤波器的片上滤波器27A,第1受光部28A对彩色图像进行摄像。另外,片上滤波器27A也可以是排列有青色、品红、黄和绿的滤波器的补色滤波器。
第2受光部28B具有呈二维矩阵状配置的摄像用的多个像素,配置成入射有从第2光学系统23B射出的光。在第2受光部28B的受光面侧设有仅透射规定波段的光的分光滤波器24和玻璃罩25B,第2受光部28B具有将与规定波段的荧光对应的荧光观察用图像摄像为单色图像的特性。
第1受光部28A和第2受光部28B与驱动器29、转换电路30等一起安装在电路基板26上,所述驱动器29对第1受光部28A和第2受光部28B指示摄像定时并进行电源供给,所述转换电路30读出第1受光部28A和第2受光部28B的图像信号并将其转换为电信号。如图5所示,第1受光部28A和第2受光部28B以受光面左右排列的方式安装在电路基板26上。在电路基板26上设有电极32。电极32例如经由各向异性导电性树脂膜与信号线31a连接,该信号线31a与控制装置之间传送电信号。除了传送受光部28输出的作为电信号的图像信号的信号线31a以外,还通过包含从控制装置传送控制信号的信号线的多个信号线形成集合缆线31。
在该实施方式1的内窥镜系统中,作为摄像元件,采用能够仅读出第1受光部28A和第2受光部28B的像素中的任意设定的地址的像素的CMOS摄像元件80。而且,在实施方式1的内窥镜系统中,从第1受光部28A和第2受光部28B中交替读出像素信息,并且,对第1受光部28A和第2受光部28B中的曝光处理以及针对第1受光部28A和第2受光部28B的像素信息读出处理的定时进行同步控制。而且,在实施方式1的内窥镜系统中,通过同一传送路径传送从第1受光部28A和第2受光部28B中读出的像素信息,根据该传送的像素信息生成图像。
对实施方式1的内窥镜系统的结构进行详细说明。图6是示出本实施方式1的内窥镜系统的结构的框图。如图6所示,实施方式1的内窥镜系统100具有:经由具有多个信号线的集合缆线31与设于前端部5中的CMOS摄像元件80连接的控制装置40;供给白色光或特殊光的光源装置60;输出与体内观察有关的信息的输出部73,该输出部73具有显示由CMOS摄像元件80进行摄像而得到的体内图像的显示部71;输入体内观察所需要的各种指示信息的输入部72;以及存储体内图像等的存储部74。
在前端部5中设有CMOS摄像元件80。CMOS摄像元件80包括第1受光部28A;控制电路33A;定时发生器34A;由噪声去除部36A、增益调整部37A和A/D转换部38A构成的AFE(Analog Front End:模拟前端)部35A;第2受光部28B;控制电路33B;定时发生器34B;由噪声去除部36B、增益调整部37B和A/D转换部38B构成的AFE(Analog Front End)部35B;将所输入的数字信号从并行信号转换为串行信号的P/S转换部39;以及调谐部81。构成CMOS摄像元件80的第1受光部28A、第2受光部28B和CMOS传感器周边电路例如被单片化。
第1受光部28A和第2受光部28B从呈二维矩阵状配置的摄像用的多个像素中的被任意指定为读出对象的像素输出光电转换后的电信号作为像素信息。各像素信息包含亮度值。第1受光部28A作为权利要求范围中的第1摄像部发挥功能。第1受光部28A对基于白色光的彩色图像进行摄像。如上所述,第2受光部28B作为权利要求范围中的第2摄像部发挥功能,对作为与规定波段的荧光对应的荧光观察用图像的单色图像进行摄像。
控制电路33A根据从控制装置40输出的设定数据,在后述调谐部81的控制下,对第1受光部28A中的曝光处理、针对第1受光部28A的摄像处理、第1受光部28A的摄像速度、从第1受光部28A的像素读出像素信息的读出处理以及所读出的像素信息的传送处理进行控制。控制电路33B在后述调谐部81的控制下,对第2受光部28B中的曝光处理、针对第2受光部28B的摄像处理、第2受光部28B的摄像速度、从第2受光部28B的像素读出像素信息的读出处理以及所读出的像素信息的传送处理进行控制。
定时发生器34A在后述调谐部81的控制下,按照与读出地址设定部53的设定对应的读出顺序,从在构成第1受光部28A的多个像素中被指定为读出对象的位置(地址)的像素输出光电转换后的电信号作为像素信息。定时发生器34B具有与定时发生器34A相同的功能,从在构成第2受光部28B的多个像素中被指定为读出对象的位置的像素输出光电转换后的电信号作为像素信息。
噪声去除部36A去除从第1受光部28A的规定像素输出的像素信息的信号的噪声。增益调整部37A以在从控制部55输出的设定数据中指示的放大率对从噪声去除部36A输出的像素信息的亮度值进行放大后,将其输出到A/D转换部38A。A/D转换部38A将噪声去除后的像素信息的信号从模拟信号转换为数字信号,并输出到P/S转换部39。并且,噪声去除部36B去除从第2受光部28B的规定像素输出的像素信息的信号的噪声。增益调整部37B以在从控制部55输出的设定数据中指示的放大率对从噪声去除部36B输出的像素信息的亮度值进行放大后,将其输出到A/D转换部38B。A/D转换部38B将噪声去除后的像素信息的信号从模拟信号转换为数字信号,并输出到P/S转换部39。
P/S转换部39将通过定时发生器34A和AFE部35A从第1受光部28A中读出的像素信息和通过定时发生器34B和AFE部35B从第2受光部28B中读出的像素信息转换为串行信号的图像信号后,将其输出到集合缆线31的规定信号线。定时发生器34A和AFE部35A以及定时发生器34B和AFE部35B作为权利要求范围中的读出部发挥功能。
调谐部81根据读出地址设定部53的设定,来设定第1受光部28A和第2受光部28B的读出对象像素,使得通过定时发生器34A、34B和AFE部35A、35B从第1受光部28A和第2受光部28B中交替读出像素信息。调谐部81相关联地对第1受光部28A和第2受光部28B中的曝光处理、以及定时发生器34A、34B和AFE部35A、35B的针对第1受光部28A和第2受光部28B的像素信息读出处理的定时进行控制。而且,通过同一传送路径传送从第1受光部28A和第2受光部28B中读出的像素信息。即,经由集合缆线31的规定信号线从第1受光部28A和第2受光部28B中读出的像素信息经由集合缆线31内的信号线中的相同信号线输出到控制装置40。
控制装置40对图像信号进行处理并在显示部71上显示体内图像,并且,对内窥镜系统100的各结构部位进行控制。控制装置40具有S/P转换部41、图像处理部42、明亮度检测部51、调光部52、读出地址设定部53、CMOS驱动信号生成部54、控制部55和基准时钟生成部56。
S/P转换部41将从前端部5接收到的作为数字信号的图像信号从串行信号转换为并行信号。
图像处理部42根据从S/P转换部41输出的并行形式的图像信号、即定时发生器34A、34B和AFE部35A、35B从第1受光部28A、第2受光部28B中交替读出的像素的像素信息,生成显示在显示部71中的图像。图像处理部42根据定时发生器34A、34B和AFE部35A、35B读出的第1受光部28A的像素的地址、第2受光部28B的像素的地址,生成体内图像。图像处理部42对应于从S/P转换部41输出的并行形式的图像信号的输出定时,对图像处理定时进行调整。
图像处理部42具有同时化部43、WB调整部44、增益调整部45、γ校正部46、D/A转换部47、格式变更部48、采样用存储器49和静止图像用存储器50。
同时化部43将所输入的各R、G、B像素的图像信号输入到按照每个像素设置的存储器(未图示),与定时发生器34A、34B和AFE部35A、35B分别读出的第1受光部28A和第2受光部28B的像素的地址对应地,利用所输入的各图像信号依次对各存储器的值进行更新并保持,并且,将这3个存储器的各图像信号同时化为RGB图像信号。同时化部43在与从第1受光部28A和第2受光部28B中的哪个受光部中读出对应起来后,将从S/P转换部41输出的各像素信息临时存储在帧存储器43a中。同时化的RGB图像信号依次输出到WB调整部44,并且,同时化的RGB图像信号中的若干个RGB图像信号还输出到采样用存储器49进行保持,用于明亮度检测等图像解析。
WB调整部44对RGB图像信号的白平衡进行调整。增益调整部45进行RGB图像信号的增益调整。γ校正部46与显示部71对应地对RGB图像信号进行灰度转换。
D/A转换部47将灰度转换后的RGB图像信号从数字信号转换为模拟信号。格式变更部48将转换为模拟信号后的图像信号变更为高清方式等格式并输出到显示部71。其结果,在显示部71中显示1张体内图像。另外,由增益调整部45进行增益调整后的RGB图像信号中的一部分也保持在静止图像用存储器50中,用于静止图像显示、放大图像显示或强调图像显示。
明亮度检测部51根据采样用存储器49中保持的RGB图像信号检测与各像素对应的明亮度电平,将检测到的明亮度电平存储在设于明亮度检测部51内部的存储器中。并且,明亮度检测部51根据检测到的明亮度电平计算增益调整值和光照射量。计算出的增益调整值被输出到增益调整部45,计算出的光照射量被输出到调光部52。进而,明亮度检测部51的检测结果还被输出到控制部55。
调光部52在控制部55的控制下,根据从明亮度检测部51输出的光照射量设定对各光源供给的电流量、减光滤波器的驱动条件,将包含设定条件的光源同步信号输出到光源装置60。调光部52设定光源装置60发出的光的类别、光量、发光定时。
读出地址设定部53能够任意设定受光部28中的读出对象像素和读出顺序。即,读出地址设定部53能够任意设定定时发生器34A、34B和AFE部35A、35B读出的第1受光部28A、第2受光部28B的像素的地址。并且,读出地址设定部53将所设定的读出对象像素的地址输出到同时化部43。
CMOS驱动信号生成部54生成用于驱动受光部28和CMOS传感器周边电路的驱动用的定时信号,经由集合缆线31内的规定信号线输出到定时发生器34A、34B。另外,该定时信号包含读出对象像素的地址。
控制部55由CPU等构成,通过读入存储在未图示的存储器中的各种程序并执行程序所示的各处理顺序,进行各结构部的各驱动控制、针对这些各结构部的信息的输入输出控制、以及用于与这些各结构部之间输入输出各种信息的信息处理。控制装置40经由集合缆线31内的规定信号线向前端部5的控制电路33输出摄像控制用的设定数据。设定数据包含第1受光部28A和第2受光部28B中的曝光处理、第1受光部28A和第2受光部28B的摄像速度、指示从第1受光部28A和第2受光部28B的任意像素读出像素信息的读出速度的指示信息、指示所读出的像素信息的亮度值的放大率的指示信息、所读出的像素信息的传送控制信息等。
控制部55对读出地址设定部53设定的读出对象像素和读出顺序进行变更。而且,控制部55根据取得对象的图像,对读出地址设定部53设定的读出对象像素和读出顺序进行变更。控制部55对应于取得对象的图像,对读出地址设定部53的读出对象像素的设定处理、定时发生器34A、34B和AFE部35A、35B的读出处理以及图像处理部42的图像生成处理进行控制。
基准时钟生成部56生成作为内窥镜系统100的各结构部的动作基准的基准时钟信号,向内窥镜系统100的各结构部供给所生成的基准时钟信号。
光源装置60在控制部55的控制下进行光照射处理。光源装置60具有:白色光源61,其由LED等构成,照射白色光;特殊光光源62,其照射波段与白色照射光的波段不同的、由窄带带通滤波器进行窄带化后的RGB中的任意一种光作为特殊光;光源驱动电路63,其根据从调光部52发送的光源同步信号,控制对白色光源61或特殊光光源62供给的电流量或减光滤波器的驱动;以及LED驱动器64,其在光源驱动电路63的控制下,对白色光源61或特殊光光源62供给规定量的电流。从白色光源61或特殊光光源62发出的光经由光导19供给到插入部2,从前端部5前端射出到外部。
在该实施方式1中,通过同一传送路径传送从第1受光部28A和第2受光部28B这2个受光部中读出的像素信息。这里,设1帧期间是第1受光部28A中的曝光处理和针对第1受光部28A的全部像素的读出和转送处理所需要的期间。在实施方式1中,不是从第1受光部28A的全部像素和第2受光部28B的全部像素读出像素信息,而是仅从第1受光部28A和第2受光部28B中的像素间疏读出像素信息,由此,即使在从第1受光部28A和第2受光部28B这2个受光部中读出像素信息的情况下,也使集合缆线31的传送图像信号的信号线的每单位时间的传送量与从1个受光部中读出全部像素的像素信息并发送的情况相等,使帧期间与具有1个受光部的情况相等。因此,在实施方式1中,以与具有1个受光部的情况下的帧速率相同的帧速率同时显示第1受光部28A和第2受光部28B进行摄像而得到的各图像。
参照图7A~图7D对针对各受光部的读出处理和图像处理进行具体说明。在使用拜耳(Bayer)排列型的片上滤波器27A的情况下,在第1受光部28A中,作为显示用图像的1个像素,如图7A所示,对应有由上下左右相邻的R、G、G、B的4个像素构成的块P。因此,为了不使与显示用图像的1个像素对应的像素信息分离,在第1受光部28A中,每隔上下相邻的2列的水平行读出像素信息。读出构成第1受光部28A的水平行中的由水平行La1、La2构成的行对Lap1和由水平行La5、La6构成的行对Lap3的像素信息,并转送到控制装置40。与此相对,不读出行对Lap1的下一个行对Lap2和行对Lap3的下一个行对Lap4的像素信息,也不进行转送。同样,如图7B所示,在第2受光部28B中,也每隔上下相邻的2列的水平行读出像素信息。即,读出构成第2受光部28B的水平行中的由水平行Lb1、Lb2构成的行对Lbp1的像素信息和行对Lbp3的像素信息并进行转送,不读出行对Lbp1的下一个行对Lbp2的像素信息和行对Lbp3的下一个行对Lbp4的像素信息,也不进行转送。
此时,调谐部81使第1受光部28A和第2受光部28B中的曝光处理以及针对第1受光部28A和第2受光部28B的像素信息的读出处理的定时同步,使得以上述所示的规定行间隔从第1受光部28A和第2受光部28B中交替读出水平行的像素信息并进行转送。具体而言,如图7C所示,在读出构成第1受光部28A的行对Lap1的水平行La1、La2的像素信息并进行转送后,读出构成第2受光部28B的行对Lbp1的水平行Lb1、Lb2的像素信息并进行转送,然后,读出构成第1受光部28A的行对Lap3的水平行La5、La6的像素信息并进行转送。
然后,在控制装置40中,图像处理部42根据按照图7C所示的顺序转送的行对的像素信息,使用第1受光部28A和第2受光部28B进行摄像而得到的各图像,生成1张图像。具体而言,如图7D所示,图像处理部42通过按照转送顺序沿纵向逐行配置按照图7C所示的顺序转送的行对Lap1、Lbp1、Lap3、Lbp3的像素信息,生成重合了通常的彩色图像和作为特殊图像的荧光图像而得到的图像G1。该图像G1显示在显示部71中。或者,图像处理部42将按照图7C所示的顺序转送的行对的像素信息划分为与第1受光部28A对应的像素信息和与第2受光部28B对应的像素信息后,分别生成彩色图像和荧光图像,显示部71同时显示彩色图像和荧光图像。该情况下生成的彩色图像和荧光图像成为每隔2列的水平行对像素信息进行间疏而得到的图像。
这样,由于交替读出第1受光部28A和第2受光部28B这2个摄像部的像素信息并交替进行转送,所以,能够使用同一传送路径将在2个受光部中进行摄像而得到的多个像素信息适当传送到控制装置40,并且,即使不对应于2个受光部而分别设置2个图像处理部,也能够适当取得取得对象的图像。
并且,在实施方式1中,通过以规定行间隔对第1受光部28A和第2受光部28B这2个受光部的像素信息进行间疏,并交替读出水平行的像素信息进行转送,能够使集合缆线31的传送图像信号的信号线的每单位时间的传送量与发送从1个受光部的全部行中读出的像素信息的情况相等,并且,能够以与具有1个受光部的结构中的帧速率相同的帧速率同时显示第1受光部28A和第2受光部28B进行摄像而得到的各图像。因此,根据实施方式1,不需要为了同时显示第1受光部28A和第2受光部28B进行摄像而得到的各图像而分别对应于2个受光部在内窥镜插入部内搭载2个传送路径,能够维持插入部的细径化。
另外,调谐部81根据从控制装置40输出的设定数据和定时信号,控制第1受光部28A和第2受光部28B的曝光处理和读出处理以使它们同步。或者,调谐部81使得与控制电路33A根据从控制装置40输出的设定数据和定时信号对第1受光部28A的曝光处理和读出处理进行控制同步地,对第2受光部28B的曝光处理和读出处理进行控制。
并且,关于第2受光部28B,除了利用具有与第1受光部28A相同数量像素和同等感光度的元件构成以外,也可以由像素数比第1受光部28A少且感光度比第1受光部28A高的元件构成。
(实施方式1的变形例1)
接着,作为实施方式1的变形例1,说明对第2受光部28B进行所谓的组合(binning)处理的情况。
如图8A所示,与实施方式1同样,在第1受光部28A中,每隔上下相邻的2列的水平行读出像素信息。即,读出构成第1受光部28A的水平行中的行对Lap1和行对Lap3的像素信息并进行转送,不读出行对Lap2和行对Lap4的像素信息。
而且,在第2受光部28B中,以上下2列的水平行间隔从水平行中读出像素信息。而且,在第2受光部28B中,进行在包含4个像素的块P内将像素的亮度值相加起来输出的组合处理,以块P为单位转送亮度值。即,如图8B所示,在第2受光部28B中,读出行对Lbp1的像素信息和行对Lbp3的像素信息后进行组合处理,并进行转送。与此相对,在第2受光部28B中,不读出行对Lbp2和行对Lbp4的像素信息。
然后,如图8C所示,在对构成第1受光部28A的行对Lap1的水平行La1、La2的像素信息进行转送后,对构成第2受光部28B的行对Lbp1的水平行Lb1、Lb2的像素信息(Lbp1-B)进行转送。该情况下,在第2受光部28B中,由于按照由4个像素构成的每个块进行组合处理,所以,第2受光部28B的行对的像素信息(Lbp1-B)的信息量成为第1受光部28A的行对Lap1的像素信息的信息量的四分之一。因此,第2受光部28B的每个行对的像素信息的转送时间比第1受光部28A的每个行对的像素信息的转送时间短。调谐部81对第2受光部28B进行控制,使得将由于转送时间的缩短而剩余的时间T1分配给曝光时间,延长曝光时间。由于荧光本身的强度较弱,所以,通过延长曝光时间,能够提高第2受光部28B中的荧光的受光量,能够进行荧光受光量的高感光度检测。
接着,在控制装置40中,如图8D所示,图像处理部42通过按照转送顺序沿纵向逐行配置行对Lap1、Lbp1-B、Lap3、Lbp3-B的像素信息,生成重合了基于白色光的通常的彩色图像和作为特殊图像的荧光图像而得到的图像G2。其中,行对Lbp1、Lbp3的像素信息成为按照由4个像素构成的每个块将亮度值相加而得到的像素信息Lbp1-B、Lbp3-B。当然,图像处理部42也可以将被转送的各行对的像素信息划分为与第1受光部28A对应的像素信息和与第2受光部28B对应的像素信息后,分别生成彩色图像和荧光图像。
这样,在实施方式1的变形例1中,通过对第2受光部28B进行组合处理,与实施方式1的传送量相比,能够减少集合缆线31的传送图像信号的信号线的每单位时间的传送量。进而,在实施方式1的变形例1中,由于能够缩短第2受光部28B的像素信息的转送时间,所以,相应地延长曝光时间,能够实现第2受光部28B中的高感光度摄像。
(实施方式1的变形例2)
接着,作为实施方式1的变形例2,说明如下情况:针对第2受光部也设置片上滤波器,分别同时对第1受光部和第2受光部投影彩色的右图像和左图像,生成所谓的立体图像。
图9是示出切断实施方式1的变形例2的内窥镜的前端部的切断面的一部分的图。如图9所示,在实施方式1的变形例2的前端部105中,代替第2受光部28B而设置与第1受光部28A同样具有对彩色图像进行摄像的特性的第2受光部128B,在第2受光部128B的受光面侧,与第1受光部28A同样,在与玻璃罩25B之间设有结构与片上滤波器27A相同的片上滤波器127B。第1受光部28A和第2受光部128B以受光面左右并列的方式安装在电路基板26上,第1受光部28A例如对右图像进行摄像,第2受光部128B例如对左图像进行摄像。
该情况下,也与实施方式1同样,在第1受光部28A中,每隔上下相邻的2列的水平行读出像素信息。即,如图10A和图11所示,读出构成第1受光部28A的水平行中的行对Lap1和行对Lap3的像素信息并进行转送,不读出行对Lap2和行对Lap4的像素信息。
而且,在第2受光部128B中,也以上下2列的水平行间隔从水平行中读出像素信息。即,如图10B和图11所示,在第2受光部128B中,读出行对Lbp1-1的像素信息和行对Lbp1-3的像素信息后进行转送,不读出行对Lbp1-2和行对Lbp1-4的像素信息。
而且,如图11所示,对第1受光部28A的行对Lap1的像素信息进行转送后,对第2受光部128B的行对Lbp1-1的像素信息进行转送,然后,对第1受光部28A的行对Lap3的像素信息进行转送。这样,交替转送第1受光部28A的行对的像素信息和第2受光部128B的行对的像素信息。然后,在控制装置中,图像处理部按照每个受光部来划分在1帧期间Tf内依次交替转送的第1受光部28A的行对的像素信息和第2受光部128B的行对的像素信息,生成第1受光部28A进行摄像而得到的右图像和第2受光部128B进行摄像而得到的左图像后,对所生成的右图像和左图像进行合成,生成1张立体图像。
这样,在同时取得右图像和左图像并生成立体图像的实施方式1的变形例2中,由于以规定行间隔对第1受光部28A和第2受光部128B这2个受光部的像素信息进行间疏并交替读出进行转送,所以,实现与实施方式1相同的效果。
另外,在实施方式1的变形例2中,在取得通常的平面图像的情况下,仅对第1受光部28A和第2受光部128B中的第1受光部28A进行摄像处理即可。该情况下,由于仅对一个受光部进行摄像处理,所以,如图12那样,能够在1帧期间Tf内读出第1受光部28A的全部行对La1~Lpn并进行转送,所以,可以不进行间疏读出。并且,关于第2受光部128B,除了以与第1受光部28A相同数量的像素构成以外,像素数也可以比第1受光部28A少。
(实施方式2)
接着,对实施方式2进行说明。实施方式2的内窥镜具有与实施方式1的内窥镜相同的结构。图13是说明实施方式2的第1受光部和第2受光部中的曝光处理和针对第1受光部和第2受光部的像素信息的读出处理的图。
在实施方式2中,采用全局快门方式,使得在一定期间内同时对受光部的全部行进行曝光,如图13所示,调谐部81将1帧期间Tf二分割成相同期间,在分割后的期间内,分别交替进行第1受光部28A和第2受光部28B中的曝光处理、以及针对第1受光部28A和第2受光部28B的像素信息的读出/转送处理。调谐部81在对1帧期间Tf进行二分割后的前半期间内,使第1受光部28A进行读出/转送处理,并且使第2受光部28B进行曝光处理。然后,调谐部81在对1帧期间Tf进行二分割后的后半期间内,使第1受光部28A进行曝光处理,并且使第2受光部28B进行读出/转送处理。
该情况下,调谐部81对读出/转送处理进行控制,使得针对第1受光部28A和第2受光部28B中的任意一方,均以2列间隔从水平行中读出像素信号。其结果,在实施方式2中,能够使集合缆线31的传送图像信号的信号线的每单位时间的传送量与发送从1个受光部的全部行中读出的像素信息的情况相等,能够以与具有1个受光部的结构的帧速率相同的帧速率同时进行显示。
图像处理部42通过按照每个行对交替配置第1受光部28A的各行对的像素信息和第2受光部28B的各行对的像素信息,生成重合了基于白色光的通常的彩色图像和作为特殊图像的荧光图像而得到的图像。或者,图像处理部42根据被转送的第1受光部28A的像素信息和第2受光部28B的像素信息,生成彩色图像和荧光图像作为不同图像。
这里,与图14(1)所示的从全部行中读出像素信息的全部行读出方式相比,在图14(2)所示的对行进行间疏而读出像素信息的行间疏读出方式中转送的像素信息的信息量较少,所以,能够使读出/转送期间TFc比全部行读出方式中的读出/转送期间TFf短。在行间疏读出方式中,与全部行读出方式中的针对全部行的同时曝光时间TLf相比,针对全部行的同时曝光时间TLc能够延长该读出/转送期间的缩短量。
这样,在实施方式2中,在对1帧期间进行二分割,按照每个分割后的期间分别交替进行第1受光部28A和第2受光部28B中的曝光处理、以及针对第1受光部28A和第2受光部28B的像素信息的读出/转送处理的情况下,也能够使用同一传送路径适当地将2个受光部中进行摄像而得到的多个像素信息传送到控制装置40,并且,不用对应于2个受光部而分别设置2个图像处理部,能够适当取得取得对象的图像。
并且,在实施方式2中,通过以规定行间隔对第1受光部28A和第2受光部28B这2个受光部的像素信息进行间疏并进行读出、转送,能够使集合缆线31的传送图像信号的信号线的每单位时间的传送量与发送从1个受光部的全部行中读出的像素信息的情况相等。其结果,在实施方式2中,与实施方式1同样,不需要为了同时显示第1受光部28A和第2受光部28B进行摄像而得到的各图像而分别对应于2个受光部在内窥镜插入部内搭载2个传送路径,能够维持插入部的细径化。
并且,在实施方式2中,通过以规定行间隔对第1受光部28A和第2受光部28B这2个受光部的像素信息进行间疏并进行读出、转送,能够充分确保针对全部行的同时曝光时间。
另外,在第1受光部28A、第2受光部28B中,能够以像素为单位对曝光时间进行调整。图15是示出受光部的单位像素的结构的电路图。如图15所示,单位像素具有:光电二极管PD,其将入射光光电转换为与其光量对应的信号电荷量并进行蓄电;转送晶体管F-TR,其在导通期间内将光电二极管PD中转换蓄电的信号电荷转送到电容器FD;第1复位晶体管R-TR,其在导通期间内释放电容器FD中蓄积的信号电荷并进行复位;第2复位晶体管R2-TR,其在导通期间内释放光电二极管PD中蓄电的信号电荷并对光电二极管PD进行复位;以及输出晶体管SF-TR,其在选择晶体管S-TR导通时,将由转送晶体管F-TR读出的电压(转换信号电压)转换为相同电平的像素信号Vp-out并输出到规定信号线。在选择包含该单位像素的水平行作为读出对象行的情况下,对选择晶体管S-TR进行导通控制。
如图16所示,在调谐部81的控制下,在对1帧期间Tf进行二分割后的前半期间(时间T1~时间T2之间)内,特殊光光源62进行照明处理,与其对应地,第2受光部28B进行曝光处理。具体而言,在第2受光部28B的全部单位像素中,对第1复位晶体管R-TR、第2复位晶体管R2-TR和转送晶体管F-TR进行截止控制,在光电二极管PD中蓄电有与入射光量对应的信号电荷。并且,在该前半期间(时间T1~时间T2之间)内,第1受光部28A进行读出/转送处理。第1受光部28A中的各晶体管的动作控制在后面叙述。
接着,在对1帧期间Tf进行二分割后的后半期间(时间T2~时间T3之间)内,白色光源61进行照明处理,与其对应地,第1受光部28A进行曝光处理。具体而言,在第1受光部28A的全部单位像素中,对第1复位晶体管R-TR、第2复位晶体管R2-TR和转送晶体管F-TR进行截止控制,在光电二极管PD中蓄电有与入射光量对应的信号电荷。
并且,在该后半期间(时间T2~时间T3之间)内,第2受光部28B进行读出/转送处理。具体而言,在第2受光部28B中的包含于读出对象行对的单位像素中,在时间T2~时间T21之间,对转送晶体管F-TR进行导通控制,光电二极管PD的信号电荷被转送到电容器FD。然后,在时间T21~时间T3之间,在读出对象行中,按照读出顺序依次对选择晶体管S-TR进行导通控制,依次输出各行的像素信息。在包含于读出对象行对的单位像素中,在时间T21~时间T3之间,对转送晶体管F-TR进行截止控制,并且对第2复位晶体管R2-TR进行导通控制,对光电二极管PD进行复位。然后,在时间T22~时间T3之间,对第1复位晶体管R-TR进行导通控制,对电容器FD进行复位。
在下一帧中也同样在前半期间(时间T3~时间T4之间)内,特殊光光源62进行照明处理,与其对应地,第2受光部28B进行曝光处理。具体而言,在第2受光部28B的全部单位像素中,对第1复位晶体管R-TR、第2复位晶体管R2-TR和转送晶体管F-TR进行截止控制,在光电二极管PD中蓄电有与入射光量对应的信号电荷。
并且,在该前半期间(时间T3~时间T4之间)内,第1受光部28A进行读出/转送处理。具体而言,在第1受光部28A中的包含于读出对象行对的单位像素中,在时间T3~时间T31之间,对转送晶体管F-TR进行导通控制,光电二极管PD的信号电荷被转送到电容器FD。然后,在时间T31~时间T4之间,在读出对象行中,按照读出顺序依次对选择晶体管S-TR进行导通控制,依次输出各行的像素信息。在包含于读出对象行对的单位像素中,在时间T31~时间T4之间,对转送晶体管F-TR进行截止控制,并且对第2复位晶体管R2-TR进行导通控制,对光电二极管PD进行复位。然后,在时间T32~时间T4之间,对第1复位晶体管R-TR进行导通控制,对电容器FD进行复位。
(实施方式2的变形例1)
在实施方式2中,不是必须将1帧期间二分割为相同时间的期间,如图17所示,也可以按照第1受光部28A和第2受光部28B的性能,将1帧期间分割为相互不同长度的时间的期间。例如,调谐部81以1帧期间的前半期间Tf1比后半期间Tf2长的方式进行分割。例如,以前半期间Tf1为后半期间Tf2的2倍期间的方式对1帧期间进行分割。
然后,调谐部81在期间较长的前半期间Tf1中,使第2受光部28B进行曝光处理。在第2受光部28B中,由于在较长期间内进行曝光,所以,能够提高第2受光部28B中的荧光的受光量,能够进行荧光受光量的高感光度检测。并且,调谐部81在该前半期间Tf1中使第1受光部28A进行读出/转送处理。
接着,在期间较短的后半期间Tf2中,调谐部81使第2受光部28B进行转送处理。该情况下,调谐部81设定第2受光部28B的读出对象像素,使得间疏量比实施方式2的读出对象像素的间疏量更多。并且,在该后半期间Tf2中,使第1受光部28A进行曝光处理。另外,在生成重合了基于白色光的彩色图像和作为特殊图像的荧光图像而得到的图像的情况下,由于只要能够判别发出荧光的部位即可,所以,荧光图像的分辨率不是特别重要,所以,在读出对象像素的间疏量较多的情况下,也能够适当生成图像。
不限于将1帧期间分割为相同期间的情况,如该实施方式2的变形例1那样,只要能够适当取得生成对象的图像即可,也可以按照第1受光部28A和第2受光部28B的性能,将1帧期间分割为相互不同时间的期间。
当然,进行分割的单位期间不限于1帧期间。例如,如图18所示,也可以将2帧期间作为单位期间,对该单位期间进行二分割,按照分割后的1帧期间交替进行第1受光部28A和第2受光部28B中的曝光处理以及针对第1受光部28A和第2受光部28B的像素信息的读出/转送处理。即,调谐部81在前半部分的1帧期间内使第1受光部28A进行读出/转送处理,并且使第2受光部28B进行曝光处理。然后,调谐部81在后半部分的2帧期间内使第1受光部28A进行曝光处理,并且使第2受光部28B进行读出/转送处理。
并且,本实施方式不限于内窥镜系统,还能够应用于经由较长缆线连接摄像部和显示监视器的电视摄像机。当然,本实施方式还能够应用于数字照相机、数字单反照相机、数字摄像机或带照相机的便携电话等摄影装置。
产业上的可利用性
如上所述,本发明的摄像装置在利用简单的结构取得多种图像的方面是有用的。
标号说明
1:内窥镜;2:插入部;3:操作部;4:通用缆线;5、105:前端部;6:弯曲部;7:挠性管部;8:连接器部;9:光导连接器;10:电触点部;11:送气接头;12:弯曲旋钮;13:处置器械插入部;14:开关;15:开口部;16:处置器械;17:清洗用喷嘴;18:照明窗;18a:照明透镜;19:光导;20:处置器械用通道;21、22:观察窗;23A:第1光学系统;23B:第2光学系统;23a~23d:透镜;24:分光滤波器;25A、25B:玻璃罩;26:电路基板;27A、127B:片上滤波器;28A:第1受光部;28B、128B:第2受光部;29:驱动器;30:转换电路;31:集合缆线;31a:信号线;32:电极;33A、33B:控制电路;34A、34B:定时发生器;35A、35B:AFE部;36A、36B:噪声去除部;37A、37B:增益调整部;38A、38B:A/D转换部;39:P/S转换部;40:控制装置;41:S/P转换部;42:图像处理部;43:同时化部;43a:帧存储器;44:WB调整部;45:增益调整部;46:γ校正部;47:D/A转换部;48:格式变更部;49:采样用存储器;50:静止图像用存储器;51:明亮度检测部;52:调光部;53:读出地址设定部;54:CMOS驱动信号生成部;55:控制部;56:基准时钟生成部;60:光源装置;61:白色光源;62:特殊光光源;63:光源驱动电路;64:LED驱动器;71:显示部;72:输入部;73:输出部;74:存储部;81:调谐部;100:内窥镜系统。

Claims (14)

1.一种摄像装置,其特征在于,该摄像装置具有:
第1摄像部和第2摄像部,它们能够从摄像用的多个像素中的被任意设定为读出对象的像素输出光电转换后的电信号作为像素信息;
读出部,其从在所述第1摄像部和所述第2摄像部中被设定为读出对象的像素读出像素信息;
控制部,其设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得通过所述读出部从所述第1摄像部和所述第2摄像部中交替读出像素信息,并且,相关联地对所述第1摄像部和所述第2摄像部中的曝光处理的定时、以及所述读出部的针对所述第1摄像部和所述第2摄像部的像素信息读出处理的定时进行控制;
传送部,其通过同一传送路径传送从所述第1摄像部和所述第2摄像部中读出的像素信息;以及
图像处理部,其根据由所述传送部传送的像素信息生成图像。
2.根据权利要求1所述的摄像装置,其特征在于,
所述多个像素呈二维矩阵状配置,
所述控制部设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得所述读出部交替地从所述第1摄像部和所述第2摄像部中按照规定行间隔读出水平行的像素信息。
3.根据权利要求2所述的摄像装置,其特征在于,
所述第1摄像部和所述第2摄像部具有相同的摄像特性。
4.根据权利要求2所述的摄像装置,其特征在于,
所述第1摄像部和所述第2摄像部具有不同的摄像特性。
5.根据权利要求4所述的摄像装置,其特征在于,
所述第1摄像部具有对彩色图像进行摄像的特性,
所述第2摄像部具有对单色图像进行摄像的特性。
6.根据权利要求5所述的摄像装置,其特征在于,
所述像素信息包含亮度值,
所述控制部使所述读出部在包含有规定数量像素的块内将像素的亮度值相加起来进行输出,作为所述第2摄像部的像素的亮度值。
7.根据权利要求1所述的摄像装置,其特征在于,
所述控制部进行如下控制:对单位期间进行分割,在所分割的期间内,分别交替进行所述第1摄像部和所述第2摄像部中的曝光处理、以及所述读出部的针对所述第1摄像部和所述第2摄像部的像素信息读出处理。
8.根据权利要求7所述的摄像装置,其特征在于,
所述控制部按照所述第1摄像部和所述第2摄像部的特性,将所述单位期间分割为相互不同时间的期间。
9.根据权利要求7所述的摄像装置,其特征在于,
所述多个像素二维纵横配置,
所述控制部设定所述第1摄像部和所述第2摄像部中的读出对象像素,使得所述读出部按照规定行间隔从所述第1摄像部和所述第2摄像部的至少一方中读出一个水平行的像素信息。
10.根据权利要求7所述的摄像装置,其特征在于,
所述单位期间是所述第1摄像部中的曝光处理和针对所述第1摄像部的全部像素的读出处理所需要的期间。
11.根据权利要求1所述的摄像装置,其特征在于,
所述摄像装置还具有转换部,该转换部对所述读出部读出的像素信息进行并行/串行转换后将其输出到所述传送部。
12.根据权利要求1所述的摄像装置,其特征在于,
所述图像处理部根据由所述读出部从所述第1摄像部和所述第2摄像部中交替读出的像素信息,生成分别与所述第1摄像部和所述第2摄像部对应的两张图像。
13.根据权利要求1所述的摄像装置,其特征在于,
所述图像处理部使用由所述读出部从所述第1摄像部和所述第2摄像部中交替读出的像素信息,生成一张图像。
14.根据权利要求1所述的摄像装置,其特征在于,
所述摄像装置是具有以下部分的内窥镜装置:
被导入被检体内的前端部,其具有所述第1摄像部、所述第2摄像部、所述读出部和所述控制部;以及
通过所述传送部与所述前端部连接的信号处理装置,其具有所述图像处理部和显示所述图像处理部生成的图像的显示部。
CN201280004004.6A 2011-08-15 2012-08-09 摄像装置 Active CN103260499B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-177692 2011-08-15
JP2011177692 2011-08-15
PCT/JP2012/070366 WO2013024788A1 (ja) 2011-08-15 2012-08-09 撮像装置

Publications (2)

Publication Number Publication Date
CN103260499A true CN103260499A (zh) 2013-08-21
CN103260499B CN103260499B (zh) 2016-01-20

Family

ID=47715107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280004004.6A Active CN103260499B (zh) 2011-08-15 2012-08-09 摄像装置

Country Status (5)

Country Link
US (1) US8823789B2 (zh)
EP (1) EP2636359B1 (zh)
JP (1) JP5245022B1 (zh)
CN (1) CN103260499B (zh)
WO (1) WO2013024788A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105473052A (zh) * 2014-06-23 2016-04-06 奥林巴斯株式会社 摄像装置以及内窥镜装置

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103416071B (zh) 2011-03-08 2015-11-25 瑞萨电子株式会社 摄像装置
US9456735B2 (en) * 2012-09-27 2016-10-04 Shahinian Karnig Hrayr Multi-angle rear-viewing endoscope and method of operation thereof
EP3028622A4 (en) 2013-08-01 2017-03-22 Olympus Corporation Imaging device
EP3117757B1 (en) * 2014-03-12 2020-02-19 FUJIFILM Corporation Endoscope system
JP6151850B2 (ja) * 2014-03-28 2017-06-21 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP6166841B2 (ja) * 2014-03-31 2017-07-19 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5881916B1 (ja) * 2014-05-09 2016-03-09 オリンパス株式会社 固体撮像素子、内視鏡および内視鏡システム
JP6317622B2 (ja) * 2014-05-13 2018-04-25 浜松ホトニクス株式会社 固体撮像装置
DE112015006176T5 (de) 2015-03-19 2017-10-26 Olympus Corporation Endoskopvorrichtung
JP6633065B2 (ja) * 2015-05-20 2020-01-22 ソニー・オリンパスメディカルソリューションズ株式会社 信号処理装置及び医療用観察システム
CN107306492B (zh) * 2016-02-25 2019-10-25 奥林巴斯株式会社 内窥镜系统和内窥镜系统的工作方法
KR102576159B1 (ko) * 2016-10-25 2023-09-08 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
CN110022751B (zh) 2016-12-02 2021-11-30 奥林巴斯株式会社 内窥镜用图像处理装置
WO2018131141A1 (ja) * 2017-01-13 2018-07-19 オリンパス株式会社 内視鏡用画像処理装置および内視鏡用画像処理方法
DE112018001670T5 (de) * 2017-03-30 2019-12-19 Hoya Corporation Elektronische endoskopvorrichtung

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994015521A1 (en) * 1993-01-05 1994-07-21 American Surgical Technologies Corporation Medical video endoscope system
JPH1132982A (ja) * 1997-07-18 1999-02-09 Toshiba Iyou Syst Eng Kk 電子内視鏡装置
JP2004040480A (ja) * 2002-07-03 2004-02-05 Olympus Corp 撮像装置
CN101098653A (zh) * 2005-01-07 2008-01-02 奥林巴斯医疗株式会社 内窥镜用插入部
JP2008079823A (ja) * 2006-09-27 2008-04-10 Olympus Medical Systems Corp 撮像装置
CN101164495A (zh) * 2006-10-17 2008-04-23 奥林巴斯医疗株式会社 内窥镜
EP2110069A1 (en) * 2008-04-15 2009-10-21 Olympus Medical Systems Corporation Image pickup apparatus
CN101583304A (zh) * 2007-01-18 2009-11-18 奥林巴斯株式会社 荧光观察装置和荧光观察方法
JP2010130570A (ja) * 2008-11-28 2010-06-10 Samsung Digital Imaging Co Ltd 撮像装置及び撮像方法
WO2010110138A1 (ja) * 2009-03-24 2010-09-30 オリンパス株式会社 蛍光観察装置、蛍光観察システムおよび蛍光画像処理方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5436655A (en) * 1991-08-09 1995-07-25 Olympus Optical Co., Ltd. Endoscope apparatus for three dimensional measurement for scanning spot light to execute three dimensional measurement
JP3423347B2 (ja) * 1992-06-09 2003-07-07 オリンパス光学工業株式会社 立体撮像装置
US5751341A (en) * 1993-01-05 1998-05-12 Vista Medical Technologies, Inc. Stereoscopic endoscope system
US6515701B2 (en) * 1997-07-24 2003-02-04 Polaroid Corporation Focal plane exposure control system for CMOS area image sensors
US6489987B1 (en) * 1998-01-09 2002-12-03 Fuji Photo Optical Co., Ltd. Electronic endoscope apparatus
US7057647B1 (en) * 2000-06-14 2006-06-06 E-Watch, Inc. Dual-mode camera system for day/night or variable zoom operation
JP2000258697A (ja) * 1999-03-05 2000-09-22 Olympus Optical Co Ltd 立体内視鏡システム
TW457510B (en) * 1999-05-21 2001-10-01 Sony Corp Image control device and method, and image display device
JP4518616B2 (ja) * 2000-04-13 2010-08-04 ソニー株式会社 固体撮像装置およびその駆動方法並びにカメラシステム
US6899675B2 (en) * 2002-01-15 2005-05-31 Xillix Technologies Corp. Fluorescence endoscopy video systems with no moving parts in the camera
JP4394356B2 (ja) * 2003-02-07 2010-01-06 Hoya株式会社 電子内視鏡装置
JP2005006856A (ja) * 2003-06-18 2005-01-13 Olympus Corp 内視鏡装置
JP3813961B2 (ja) * 2004-02-04 2006-08-23 オリンパス株式会社 内視鏡用信号処理装置
KR100583250B1 (ko) * 2004-03-05 2006-05-24 한국전기연구원 개선된 영상 검출 모듈을 갖는 형광 내시경 장치
DE602005026825D1 (de) * 2004-08-30 2011-04-21 Olympus Co Endoskop
EP1814434A4 (en) * 2004-11-25 2009-10-21 Optiscan Pty Ltd Borescope
JP4772357B2 (ja) * 2005-03-31 2011-09-14 オリンパスメディカルシステムズ株式会社 光源装置及び撮像装置
JP4782532B2 (ja) * 2005-10-14 2011-09-28 富士フイルム株式会社 固体撮像装置および固体撮像素子の駆動制御方法
US7839439B2 (en) * 2007-01-12 2010-11-23 Sony Corporation Solid-state imaging device and imaging device
DE102008047413A1 (de) * 2008-09-16 2010-04-15 Hella Kgaa Hueck & Co. Vorrichtung und Verfahren zur Detektion von Objekten
JP5435916B2 (ja) * 2008-09-18 2014-03-05 富士フイルム株式会社 電子内視鏡システム
US20110292258A1 (en) * 2010-05-28 2011-12-01 C2Cure, Inc. Two sensor imaging systems
JP5777942B2 (ja) * 2010-07-02 2015-09-09 オリンパス株式会社 撮像装置
US8684914B2 (en) * 2011-08-12 2014-04-01 Intuitive Surgical Operations, Inc. Image capture unit and an imaging pipeline with enhanced color performance in a surgical instrument and method

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994015521A1 (en) * 1993-01-05 1994-07-21 American Surgical Technologies Corporation Medical video endoscope system
JPH1132982A (ja) * 1997-07-18 1999-02-09 Toshiba Iyou Syst Eng Kk 電子内視鏡装置
JP2004040480A (ja) * 2002-07-03 2004-02-05 Olympus Corp 撮像装置
CN101098653A (zh) * 2005-01-07 2008-01-02 奥林巴斯医疗株式会社 内窥镜用插入部
JP2008079823A (ja) * 2006-09-27 2008-04-10 Olympus Medical Systems Corp 撮像装置
CN101164495A (zh) * 2006-10-17 2008-04-23 奥林巴斯医疗株式会社 内窥镜
CN101583304A (zh) * 2007-01-18 2009-11-18 奥林巴斯株式会社 荧光观察装置和荧光观察方法
EP2110069A1 (en) * 2008-04-15 2009-10-21 Olympus Medical Systems Corporation Image pickup apparatus
JP2010130570A (ja) * 2008-11-28 2010-06-10 Samsung Digital Imaging Co Ltd 撮像装置及び撮像方法
WO2010110138A1 (ja) * 2009-03-24 2010-09-30 オリンパス株式会社 蛍光観察装置、蛍光観察システムおよび蛍光画像処理方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105473052A (zh) * 2014-06-23 2016-04-06 奥林巴斯株式会社 摄像装置以及内窥镜装置
CN105473052B (zh) * 2014-06-23 2017-08-08 奥林巴斯株式会社 摄像装置以及内窥镜装置
US9775492B2 (en) 2014-06-23 2017-10-03 Olympus Corporation Image device for synchronizing timing of imaging by first and second image sensors, and endoscopic device

Also Published As

Publication number Publication date
CN103260499B (zh) 2016-01-20
EP2636359A1 (en) 2013-09-11
US20130208101A1 (en) 2013-08-15
JPWO2013024788A1 (ja) 2015-03-05
WO2013024788A1 (ja) 2013-02-21
EP2636359A4 (en) 2015-03-25
US8823789B2 (en) 2014-09-02
JP5245022B1 (ja) 2013-07-24
EP2636359B1 (en) 2018-05-30

Similar Documents

Publication Publication Date Title
CN103260499B (zh) 摄像装置
CN103124515B (zh) 摄像装置
US8866893B2 (en) Imaging apparatus
US6717609B2 (en) Electronic endoscope selector and electronic endoscope system
EP2896354A1 (en) Endoscope device
JP5452776B2 (ja) 撮像装置
CN103262522A (zh) 摄像装置
CN105407789A (zh) 内窥镜系统、内窥镜系统的工作方法
CN103919521B (zh) 内窥镜装置及其操作方法
CN103081456A (zh) 摄像装置
CN105163646B (zh) 内窥镜
EP3494864B1 (en) Improved vocal cord stroboscopy
CN106455959B (zh) 摄像系统
CN104271027A (zh) 摄像装置和摄像系统
JP5850630B2 (ja) 内視鏡システム及びその駆動方法
CN107072506A (zh) 摄像装置和处理装置
JP2009131324A (ja) フィールドシーケンシャル撮像表示システム
JP2007029746A (ja) 内視鏡装置
CN214157259U (zh) 内窥镜的数据传输装置及内窥镜
JP2014183908A (ja) 撮像システム
CN105338882A (zh) 摄像装置
WO2022013953A1 (ja) 撮像システム、内視鏡および制御装置
JP2967751B2 (ja) 内視鏡装置
JP2008253505A (ja) 電子内視鏡の映像特性測定装置及び映像特性測定方法
JP2981437B2 (ja) 内視鏡用光源装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20151105

Address after: Tokyo, Japan, Japan

Applicant after: Olympus Corporation

Address before: Tokyo, Japan, Japan

Applicant before: Olympus Medical Systems Corp.

C14 Grant of patent or utility model
GR01 Patent grant