CN102740757A - 图像处理装置、内窥镜系统、程序以及图像处理方法 - Google Patents

图像处理装置、内窥镜系统、程序以及图像处理方法 Download PDF

Info

Publication number
CN102740757A
CN102740757A CN2011800083371A CN201180008337A CN102740757A CN 102740757 A CN102740757 A CN 102740757A CN 2011800083371 A CN2011800083371 A CN 2011800083371A CN 201180008337 A CN201180008337 A CN 201180008337A CN 102740757 A CN102740757 A CN 102740757A
Authority
CN
China
Prior art keywords
image
interest
region
elapsed time
display mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800083371A
Other languages
English (en)
Other versions
CN102740757B (zh
Inventor
鹤冈建夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN102740757A publication Critical patent/CN102740757A/zh
Application granted granted Critical
Publication of CN102740757B publication Critical patent/CN102740757B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/005—Flexible endoscopes
    • A61B1/0051—Flexible endoscopes with controlled bending of insertion part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
    • A61B1/2736—Gastroscopes

Abstract

提供能够抑制关注区域的漏看并且进行可靠性高的识别的图像处理装置、内窥镜系统、程序以及图像处理方法等。图像处理装置包含：第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；关注区域检测部，其根据第2图像内的像素特征量来检测第2图像中的关注区域；显示方式设定部，其根据第1图像生成的显示图像进行显示方式设定处理；以及经过时间设定部，其根据关注区域的检测结果进行经过时间的设定处理。显示方式设定部根据所设定的经过时间进行显示方式设定处理。

Description

图像处理装置、内窥镜系统、程序以及图像处理方法
技术领域
本发明涉及图像处理装置、内窥镜系统、程序以及图像处理方法等。
背景技术
近年来，在内窥镜或显微镜等领域中，除了采用普通的白色光的普通光图像之外，还利用了采用具有特定分光特性的特殊光的特殊光图像。
例如，在专利文献1中公开了如下这样的内窥镜装置，该内窥镜装置从已投放荧光物质的被检体中交替地取得采用普通白色光的普通光图像和在采用规定的激励光时获得的荧光图像，并将两个图像记录到存储装置内，从而同时进行显示。根据该专利文献1的技术，可在普通光图像中提高病变部等关注区域的识别能力。
另外，在专利文献2中公开了如下这样的内窥镜装置，该内窥镜装置交替地取得采用普通白色光的普通光图像和采用特定波长的特殊光的特殊光图像，并将两个图像记录到存储装置内，对两个图像进行不同的图像处理，并独立或合成地显示两个图像。根据该专利文献2的技术，可获得最优的普通光图像和特殊光图像，并能够在普通光图像中提高病变部等关注区域的识别能力。
现有技术文献
专利文献
专利文献1：日本特开昭63-122421号公报
专利文献2：日本特开2004-321244号公报
发明内容
发明所要解决的问题
但是，在专利文献1、2的现有技术中，可能会同时显示普通光图像和特殊光图像，但病变部等关注区域的识别依赖于作为使用者的医生等。因此具有如下这样的课题：在如内窥镜装置等那样动态地进行摄像等的情况下，即使关注区域存在于特殊光图像上也会在短时间内向其它区域移动，此时使用者无法识别到。另外还具有如下这样的课题：即使在静止状态下进行摄像时，如果特殊光图像上的关注区域的面积小，使用者也无法识别到。
在专利文献1、2的现有技术中还具有如下这样的课题：因为利用1比1的比例来交替地取得普通光图像与特殊光图像，所以在利用动态图像进行观察时作为基本的普通光图像的时间分辨率不足，从而难以观察。
根据本发明的几个方式，可提供能够抑制关注区域的漏看并进行可靠性高的识别的图像处理装置、内窥镜系统、程序以及图像处理方法等。
另外，根据本发明的几个方式，可提供在以动态图像进行观察的情况下能够抑制作为基本的第1图像的时间分辨率的降低并取得高品位的显示图像的图像处理装置、内窥镜系统、程序以及图像处理方法等。
用于解决问题的手段
本发明的一方式涉及图像处理装置，其包含：第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；关注区域检测部，其根据上述第2图像内的像素特征量来检测上述第2图像中的关注区域；显示方式设定部，其对根据上述第1图像生成的显示图像进行显示方式设定处理；以及经过时间设定部，其根据上述关注区域的检测结果进行经过时间的设定处理，上述显示方式设定部根据所设定的上述经过时间进行上述显示方式设定处理。另外，本发明涉及使计算机作为上述各个部发挥功能的程序或存储该程序的计算机可读取的信息存储介质。
根据本发明的一方式，取得第1、第2图像，从第2图像中检测到关注区域。然后根据关注区域的检测结果进行经过时间的设定处理，根据所设定的经过时间进行显示图像的显示方式设定处理。这样当检测到关注区域时设定经过时间，并进行反映所设定的经过时间的显示图像的显示方式设定处理，所以可提供能够抑制关注区域的漏看并进行可靠性高的识别的图像处理装置。
另外，本发明的其它方式涉及图像处理装置，其包含：第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；关注区域检测部，其根据上述第2图像内的像素特征量来检测上述第2图像中的关注区域；提醒信息输出部，其输出关于检测到的上述关注区域的提醒信息；以及经过时间设定部，其根据上述关注区域的检测结果进行经过时间的设定处理，上述提醒信息输出部在所设定的上述经过时间经过之前的期间输出上述提醒信息。另外，本发明涉及使计算机作为上述各个部发挥功能的程序或存储该程序的计算机可读取的信息存储介质。
根据本发明的其它方式，取得第1、第2图像，从第2图像中检测到关注区域。然后根据关注区域的检测结果进行经过时间的设定处理，在所设定的经过时间经过之前的期间，输出提醒信息。这样在经过时间经过之前的期间，输出提醒信息，由此可提供能够抑制关注区域的漏看并进行可靠性高的识别的图像处理装置。
另外，本发明的其它方式涉及内窥镜系统，其包含：第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；关注区域检测部，其根据上述第2图像内的像素特征量来检测上述第2图像中的关注区域；显示方式设定部，其对根据上述第1图像生成的显示图像进行显示方式设定处理；经过时间设定部，其根据上述关注区域的检测结果进行经过时间的设定处理；以及显示部，其显示上述显示图像，上述显示方式设定部根据所设定的上述经过时间进行上述显示方式设定处理。
另外，本发明的其它方式涉及以下的图像处理方法：取得具有白色光波长频带下的信息的图像作为第1图像；取得具有特定波长频带下的信息的图像作为第2图像，根据上述第2图像内的像素特征量来检测上述第2图像中的关注区域，根据上述第1图像生成的显示图像进行显示方式设定处理，根据上述关注区域的检测结果进行经过时间的设定处理，并且根据所设定的上述经过时间来进行上述显示方式设定处理。
另外，本发明的其它方式涉及以下的图像处理方法：取得具有白色光波长频带下的信息的图像作为第1图像；取得具有特定波长频带下的信息的图像作为第2图像，根据上述第2图像内的像素特征量来检测上述第2图像中的关注区域，输出关于检测到的上述关注区域的提醒信息，根据上述关注区域的检测结果进行经过时间的设定处理，并且在所设定的上述经过时间经过之前的期间，输出上述提醒信息。
附图说明
图1（A）、图1（B）是现有方法的说明图。
图2是根据关注区域的检测结果来变更显示图像的显示方式的方法说明图。
图3是本实施方式的经过时间设定方法的说明图。
图4是利用关注区域的检测来重新设定经过时间的方法说明图。
图5是本实施方式的第1结构例。
图6（A）、图6（B）是关于CCD的滤色镜的说明图。
图7（A）、图7（B）是关于照明光和旋转滤镜的分光特性的说明图。
图8是取得普通光图像以及特殊光图像的周期期间的说明图。
图9（A）、图9（B）是基于关注区域检测的经过时间设定方法的说明图。
图10是关注区域检测部的结构例。
图11是用于关注区域检测的色调/饱和度的阈值的说明图。
图12是经过时间设定部的结构例。
图13（A）、图13（B）是检测信息的更新方法的说明图。
图14是显示方式设定部的结构例。
图15是提醒信息的附加方法的说明图。
图16是在软件处理中使用的计算机的结构例。
图17是在软件处理中使用的计算机的结构例。
图18是说明本实施方式的整体处理的流程图。
图19是说明关注区域检测处理的流程图。
图20是说明经过时间设定处理的流程图。
图21是说明显示方式设定处理的流程图。
图22是本实施方式的第2结构例。
图23是与运动量相应的经过时间的设定方法的说明图。
图24是经过时间设定部的结构例。
图25是关于运动量与经过时间的关系的说明图。
图26是显示方式设定部的结构例。
图27是本实施方式的第3结构例。
图28是关于照明光的滤色镜的说明图。
具体实施方式
以下，对本实施方式进行说明。此外，以下说明的本实施方式并非不当地限定权利要求书所述的本发明内容。另外，在本实施方式中说明的全部结构未必是本发明的必要技术特征。
1.本实施方式的方法
首先，对本实施方式的概要进行说明。图1（A）以及图1（B）示出现有的方法。图1（A）示出普通光的观察状况。虽然能够获得整体明亮、容易观察的图像，但对于扁平上皮癌等一部分病变难以视觉识别。另外，图1（B）示出特殊光（例如窄频带光或者荧光）的观察状况。例如，以褐色来显示扁平上皮癌等病变之类的与普通光观察相比能够提高一部分病变的视觉识别性，但由于整体较暗，而成为难以观察的图像。
作为解决这样的问题的方法还考虑了图2所示的方法。在该方法中，由特殊光图像（第2图像）来确定例如扁平上皮癌等病变部等关注区域，并根据该关注区域的检测结果来加工普通光图像，以提高病变部等关注区域的视觉识别性。具体地说，在关注区域中进行普通光图像的颜色与规定颜色的合成处理，或者进行利用规定颜色的线来包围关注区域的周缘部等的图像处理，以提高关注区域的视觉识别性。
但是，即使采用此方法，当如图2所示医生专注于设备操作时，有可能会漏看病变部等关注区域。尤其，在利用内窥镜来拍摄动态图像的情况下，具有在特殊光图像上检测到的关注区域在短时间内移动到其它区域这样的问题。
在本实施方式中，为了能够抑制这样的关注区域漏看并且进行可靠性高的识别，而采用以下说明的这种方法。
首先，在本实施方式中如图3的A1、A2所示，取得普通光图像（广义上为第1图像）和特殊光图像（广义上为第2图像）。这些普通光图像以及特殊光图像可通过利用普通视野（scope）型内窥镜进行实时摄影来取得，或者可通过从存储装置中读出胶囊型内窥镜等所拍摄的图像来取得。
然后，当如图3的A2所示从特殊光图像中检测出关注区域时，如A3所示设定关于显示图像的显示方式变更处理的经过时间。并且在经过时间经过之前的期间进行变更显示图像的显示方式的处理（使显示图像变化的处理）。具体地说，如A4所示在经过时间经过之前的期间，生成在普通光图像中已设定（附加、重叠、混合）针对关注区域的提醒信息的显示图像，并显示到显示部上。然后在经过时间已经过时，不进行该显示方式的变更处理，例如将普通光图像作为显示图像进行显示。
此外，在图3中，即使如A5所示没有从特殊光图像中检测到关注区域时，在A3的经过时间经过之前的期间，如A6所示变更显示图像的显示方式。由此，在没有检测到关注区域之后的片刻期间输出提醒信息，从而能够有效地抑制医生等使用者的漏看。
另外，在图4中，取得IMN1～IMN9作为普通光图像，取得IMS1～IMS9作为特殊光图像。与IMS1～IMS9的各个特殊光图像对应地取得这些IMN1～IMN9的各个普通光图像。
并且，当如图4的B1所示在特殊光图像IMS1中检测到作为病变部等的关注区域时，设定如B2所示的经过时间。然后通过B2的经过时间的设定，使该经过时间内的普通光图像IMN2～IMN6成为显示方式变更处理的对象，并将已变更IMN2～IMN6的显示方式的图像作为显示图像进行显示。
另外如图4的B2所示在经过时间内，当如B3所示在下一特殊光图像IMS2中检测到关注区域时，如B4所示重新设定经过时间。具体地说，设定以B3的关注区域的检测定时为起点的新经过时间，来延长经过时间。根据该B4的经过时间的重新设定，除了普通光图像IMN2～IMN6之外，IMN7也成为显示方式变更处理的对象，并将已变更普通光图像IMN2～IMN7的显示方式的图像作为显示图像进行显示。然后在B5的特殊光图像IMS3中未检测到关注区域，因此不进行经过时间的重新设定，B6的普通光图像IMN8不是显示方式变更处理的对象，显示方式不变更。
根据以上本实施方式的方法，取得普通光图像（第1图像）和特殊光图像（第2图像），例如根据特殊光图像的像素特征量来检测关注区域，根据检测结果进行经过时间的设定处理，根据所设定的经过时间来进行显示图像的显示方式设定处理。因此，即使在动态的观察中仅在短时间内检测到关注区域时，医生等使用者也能够识别出关注区域存在于当前位置的附近。因此，能够抑制关注区域的漏看，进行可靠性高的识别。尤其如图3的A5所示在特殊光图像中没有检测到关注区域时，只要是经过时间内也可以如A6所示变更显示图像的显示方式。因此，即使在如图2那样医生等使用者专注于设备的操作而漏看关注区域时，也会在片刻期间内输出提醒信息。由此，能够让使用者发现关注区域的存在，此外还能够进行可靠性高的识别。
另外，在本实施方式中，如后所述，在规定的每个周期期间内取得普通光图像和特殊光图像，而且使普通光图像的取得比例高于特殊光图像。因此，能够抑制作为基本的普通光图像的时间分辨率的降低，并获得高品位的普通光图像。而且如图3的A4所示，将普通光图像的例如周缘部设定为提醒区域并附加提醒信息（提醒图像），所以能够提供不妨碍普通光图像的观察且具有良好操作性的图像处理装置。
2.第1结构例
2.1整体结构
图5示出实现以上这种方法的本实施方式的第1结构例。该第1结构例是本实施方式的图像处理装置90以及包含该图像处理装置90的内窥镜系统（内窥镜装置）的结构例。此外，本实施方式的图像处理装置90、内窥镜系统不限定于图5的结构，可实施省略该构成要素的一部分或者追加其它构成要素等各种变形。
经由处于内窥镜前端部（插入部）的镜头系统100（广义上为光学系统）以及CCD101（广义上为摄像元件）拍摄的影像信号通过增益放大器104进行放大，利用A/D转换部105转换为数字信号。在内窥镜前端部中，来自照明光源102的照明光透过安装于旋转滤镜103上的滤镜（F1、F2），该透射光经由光纤照射至被摄体。来自A/D转换部105的数字影像信号经由缓存器106传送至WB（白平衡）部107、测光评价部108、切换部109。WB部107与增益放大器104连接，测光评价部108与照明光源102、增益放大器104连接。
如图5所示，本实施方式的图像处理装置90（图像处理部）包含切换部109、第1图像取得部110、第2图像取得部111、关注区域检测部112、经过时间设定部113、显示方式设定部114。此外，可实施省略这些构成要素的一部分或者追加其它构成要素等各种变形。
切换部109与第1图像取得部110以及第2图像取得部111连接。第1图像取得部110经由显示方式设定部114与液晶显示器等的显示部115（广义上为输出部）连接。第2图像取得部111与关注区域检测部112连接，关注区域检测部112与经过时间设定部113连接，经过时间设定部113与显示方式设定部114连接。
由微型计算机等实现的控制部116与旋转滤镜103、增益放大器104、A/D转换部105、WB部107、测光评价部108、切换部109、第1图像取得部110、第2图像取得部111、关注区域检测部112、经过时间设定部113、显示方式设定部114、显示部115双向连接。另外，外部I/F（接口）部117与控制部116双向连接。该外部I/F部117具备电源开关、快门按钮、用于进行在摄影时切换各种模式等的设定的接口。
接着，对图5的第1结构例的动作进行说明。使用者在经由外部I/F部117设定摄影条件之后，通过按压快门按钮来转移至摄像模式。将经由镜头系统100、CCD101拍摄的影像信号作为模拟信号以规定时间间隔连续地输出。在本实施方式中，假定1/30秒作为上述规定时间间隔。另外，假定在前表面配置Bayer型原色滤镜的单板CCD作为CCD101。
图6（A）示出Bayer型原色滤镜的结构例。Bayer型将2×2像素作为基本单位，红（R）、蓝（B）滤镜每配置1像素，绿（G）滤镜配置2像素。图6（B）示出三种滤色镜R、G、B的分光特性。
而且，在本实施方式中，假定将氙气灯等的普通的白色光用光源作为照明光源102，在旋转滤镜103中安装有二种滤镜。关于上述二种滤镜，一个是普通光图像用滤镜F1，另一个是特殊光图像用滤镜F2。
图7（A）示出将照明光源102的照明光的分光特性与普通光图像用滤镜F1组合后的分光特性。普通光图像用滤镜F1具有在整个可视区域中均匀透射的特性，作为组合后的分光特性与照明光源102的照明光的分光特性相同。与图6（B）所示的Bayer型CCD的分光特性对照来获得普通光图像的R、G、B信号。
图7（B）示出将照明光源102的照明光的分光特性与特殊光图像用滤镜F2组合后的分光特性。特殊光图像用滤镜F2如日本特开2002-95635所公开的那样，具有仅透过获得表层血管信息的蓝色光的窄频带（390～445nm）和获得深层血管信息的绿色光的窄频带（530～550nm）的特性，组合后的分光特性成为由蓝色光的窄频带和绿色光的窄频带这2个窄频带构成的分光特性。与图6（B）所示的Bayer型CCD的分光特性对照来获得B信号为蓝色光的窄频带、G信号为绿色光的窄频带、R信号为0的信号作为特殊光图像。
旋转滤镜103中的普通光图像用滤镜F1与特殊光图像用滤镜F2在圆周方向上的面积比被设定为29：1。另外，假定旋转滤镜103以1旋转/秒的速度进行旋转。在此情况下，周期期间（T）为1秒，进行普通光图像用的照明的期间（T1）为29/30秒，进行特殊光图像用的照明的期间（T2）为1/30秒。在本实施方式中，因为以1/30秒来拍摄影像信号，所以将1秒作为周期期间来交替地获得29张普通光图像和1张特殊光图像。因此，可充分维持与普通光图像相关的时间分辨率。
例如图8所示，第1图像取得部110在每个规定的周期期间（T）取得至少1帧量的普通光图像（第1图像），具体地说，取得K帧量的普通光图像IN1～IN29（K张特殊光图像）。另外，第2图像取得部111在每个周期期间（T）取得至少1帧量的特殊光图像，具体地说，取得L帧量的特殊光图像IS1（L张特殊光图像）。这里，普通光图像IN1～IN29是经由图5的普通光图像用滤镜F1利用照明光对被摄体进行照明时获得的图像，特殊光图像IS1是经由特殊光图像用滤镜F2照明时获得的图像。
并且，在图8中K=29、L=1，K>L的关系成立。这样，由于K>L的关系成立，从而关于在各周期期间（各图像取得期间）所取得的图像的张数，普通光图像一方较多。因此，可充分维持与普通光图像相关的时间分辨率，并能够抑制利用特殊光图像检测关注区域而引起的显示图像的动态图像品质劣化等。另外，关于特殊光图像，例如未直接显示到显示部115上，而是作为例如后台处理来执行关注区域的检测处理。因此，即使在各周期期间取得的特殊光图像的张数L少，也不会产生大的问题。
另外，当将在图3、图4的方法中设定的经过时间的长度设为TE、将周期期间的长度设为T时，如图8所示TE>T的关系成立。通过这样，能够使经过时间的长度TE相对于周期期间的长度T充分长。因此，在如图4的B5那样检测不到关注区域之后，如B7所示，能够在经过时间经过之前的片刻期间显示关注区域的提醒信息。
根据控制部116的控制，与CCD101的摄影动作同步地进行在内窥镜前端部设置的旋转滤镜103的旋转。利用摄影动作获得的模拟影像信号经由增益放大器104来放大规定量，并通过A/D转换部105转换为数字信号向缓存器106传送。缓存器106可记录1张普通光图像或特殊光图像的数据，并且伴随着摄影来覆盖图像。
根据控制部116的控制以规定的时间间隔间歇地向WB部107以及测光评价部108传送缓存器106内的普通光图像。在WB部107中通过使规定电平的信号按对应于滤色镜的每个颜色信号来累计，从而计算白平衡系数。并向增益放大器104传送上述白平衡系数，使上述白平衡系数与每个颜色信号不同的增益相乘，由此来执行白平衡调整。测光评价部108控制照明光源102的光量或增益放大器104的放大率等，以成为适当曝光。
切换部109根据控制部116的控制，当缓存器106内记录有普通光图像时向第1图像取得部110传送图像，当记录有特殊光图像时向第2图像取得部111传送图像。
第1图像取得部110根据控制部116的控制，从切换部109读入单板状态的普通光图像，进行公知的插补处理、灰度处理等，向显示方式设定部114传送处理后的普通光图像。
第2图像取得部111根据控制部116的控制，从切换部109读入单板状态的特殊光图像进行公知的插补处理、灰度处理等。此外如日本特开2002-95635所公开的那样，还根据与蓝色光的窄频带对应的B信号和与绿色光的窄频带对应的G信号一并进行生成伪彩色图像的处理。向关注区域检测部112传送处理后的特殊光图像。
关注区域检测部112根据控制部116的控制，从第2图像取得部111读入特殊光图像，进行规定的关注区域在本实施方式中为血管密集存在的病变部的检测处理。向经过时间设定部113传送检测处理结果。
经过时间设定部113根据控制部116的控制，从关注区域检测部112读入关注区域的检测处理结果，并针对普通光图像来决定设定提醒信息的经过时间，该提醒信息发出与检测处理结果相关的信息。
在本实施方式中，在检测到关注区域时例如设定5周期期间即5秒作为经过时间，以后，即使没有检测到关注区域也设定5秒期间的提醒信息。另外，当在设定的经过时间内检测到新的关注区域时，如图4的B4所说明的那样，以此时刻为起点重新设定5秒的经过时间。经过时间设定部113判断当前时刻（当前时点）是否属于所设定的经过时间内，并向显示方式设定部114传送该判断结果。
显示方式设定部114（显示方式决定部、显示控制部）根据控制部116的控制，从经过时间设定部113读入是否属于经过时间内的判断结果，在属于经过时间内的情况下，选择对普通光图像设定（附加、重叠）提醒信息（提醒区域）的处理。另一方面，在当前时刻不属于经过时间内的情况下，不特别进行处理。此时，设定有提醒信息的普通光图像是在检测到关注区域的特殊光图像之后取得的普通光图像。例如在通过图4中B1的特殊光图像IMS1检测到关注区域时，对特殊光图像IMS1之后取得的普通光图像IMN2设定（附加，重叠）提醒信息来变更显示方式。
向显示部115传送并依次显示在显示方式设定部114中生成的显示图像。当选择提醒信息的设定（显示方式的变更）时，将对普通光图像设定有提醒信息的图像作为显示图像进行传送，当选择不设定提醒信息（显示方式不变更）时，将普通光图像直接作为显示图像进行传送。
此外，在图5中作为输出部的一例示出显示部115，但本实施方式的输出部不仅限于此，还能够以在硬盘或存储卡等记录介质中依次记录保存普通光图像的方式来实现。另外，作为提醒信息可输出声音提醒信息而不是图像。
如以上这样在本实施方式中，如图8所示，第1图像取得部110按照周期期间（T）来取得至少1帧量（K帧量）的普通光图像，第2图像取得部111按照周期期间来取得至少1帧量（L帧量）的特殊光图像。
然后，如图9（A）的C1所示，当在周期期间TN（第N的周期期间）中从特殊光图像内检测到关注区域时，如C2所示利用经过时间设定部113来设定经过时间。这样，显示方式设定部114在周期期间TN之后的周期期间TN+1（第N+1周期期间）中，进行变更显示图像的显示方式的处理。当在例如图8的G1所示的特殊光图像IS1中检测到关注区域时，针对在下一周期期间取得的G2所示的IN1以后的普通光图像设定提醒信息，来变更显示方式。
然后，如图9（A）的C1所示在周期期间TN中从特殊光图像内检测到关注区域，如C3所示在周期期间TN+1中从特殊光图像内没有检测到关注区域。这是在图8的G1所示的特殊光图像IS1中检测到关注区域、在G3所示的特殊光图像IS1中没有检测到关注区域的情况。在此情况下，显示方式设定部114如图9（A）所示，在周期期间TN+1～周期期间TN+5（广义上为第N+1周期期间～第M周期期间）中，变更显示图像的显示方式。
另外，如图9（B）的C4所示在周期期间TN中检测到关注区域，如C5所示设定了经过时间，然后如C6所示在下一周期期间TN+1的特殊光图像中也检测到关注区域。这相当于在图8的G1的特殊光图像IS1中检测到关注区域、在G3的特殊光图像IS1中也检测到关注区域的情况。在此情况下，如图9（B）的C7所示重新设定经过时间，使经过时间延长。然后，当如C8所示在下一周期期间TN+2的特殊光图像中也检测到关注区域时，如C9所示重新设定经过时间，使经过时间进一步延长。这样，只要检测到关注区域就进行显示图像的显示方式的变更处理，在检测不到关注区域之后，在经过时间经过之前的期间内也继续显示方式的变更处理。
2.2关注区域检测部
图10示出关注区域检测部112的结构例。图10的关注区域检测部112包含缓存器200、色调/饱和度计算部201、关注区域判定部202、阈值用ROM203、缓存器204、可靠度计算部205。此外，可实施省略这些构成要素的一部分或者追加其它构成要素等各种变形。
在图10中，第2图像取得部111经由缓存器200与色调/饱和度计算部201连接。色调/饱和度计算部201以及阈值用ROM203与关注区域判定部202连接。关注区域判定部202经由缓存器204与可靠度计算部205连接。可靠度计算部205与经过时间设定部113连接。控制部116与色调/饱和度计算部201、关注区域判定部202、阈值用ROM203、可靠度计算部205双向连接。
第2图像取得部111向缓存器200传送被伪彩色图像化的特殊光图像。色调/饱和度计算部201根据控制部116的控制，从缓存器200读入被伪彩色图像化的特殊光图像。伪彩色图像化的特殊光图像由R、G、B这3个信号构成，例如采用下式（1）～（3）将这三个信号转换为亮度信号Y以及色差信号Cb、Cr。
Y=0.29900R+0.58700G+0.11400B（1）
Cb=-0.16874R-0.33126G+0.50000B（2）
Cr=0.50000R-0.41869G-0.08131B（3）
而且，采用下式（4）、（5）来计算色调H、饱和度C。
H=tan-1（Cb/Cr）（4）
C=（Cb·Cb+Cr·Cr）1/2（5）
向关注区域判定部202以像素为单位依次传送所计算的色调H、饱和度C。关注区域判定部202根据控制部116的控制，从色调/饱和度计算部201读入色调H、饱和度C，从阈值用ROM203读入与色调和饱和度相关的阈值。
图11示出在阈值用ROM203中记录的阈值的一例。在被伪彩色图像化的特殊光图像中，红褐色状地显示病变部等表层血管密集的区域。因此，图11所示的扇状区域为病变部即关注区域。当假定为信号是8位级时，例如可利用下式（6）、（7）来规定上述关注区域。
-70°<色调H<30°（6）
16<饱和度C<128（7）
在阈值用ROM203中记录有上式（6）、（7）所示的与色调H相关的上限值以及下限值和与饱和度C相关的上限值以及下限值共计4个阈值。关注区域判定部202读入这4个阈值。然后关于满足上式（6）、（7）的像素将标签值=1向缓存器204输出，关于不满足的像素将标签值=0向缓存器204输出。由此在缓存器204中关于特殊光图像的全部像素记录有是否属于关注区域的标签值。
可靠度计算部205所具有的面积判定部206根据控制部116的控制，从缓存器204读入上述标签值，并求出属于关注区域的像素数总和，由此来计算关注区域的面积。在本实施方式中，采用关注区域的面积来作为表示关注区域概率（是病变的概率）的指标即可靠度。即，根据关注区域的面积来计算可靠度。并且在所计算的关注区域的面积超过规定阈值时，将该关注区域评价为可靠度高，并判断为检测到关注区域。例如当所计算的关注区域的面积超过例如全部图像面积的1%这样的阈值时，判断为检测到关注区域。另一方面，当所计算的关注区域的面积小于等于规定阈值时，将该关注区域评价为可靠度低，并判断为没有检测到关注区域。向经过时间设定部113传送这样的表示关注区域的检测结果的检测信息。
2.3经过时间设定部
图12示出经过时间设定部113（经过时间决定部）的结构例。该经过时间设定部113包含更新部300、检测信息记录部301、控制信息输出部302（加工控制部）。此外，可以实施省略这些构成要素的一部分或追加其它构成要素等各种变形。
如图12所示，关注区域检测部112经由更新部300，检测信息记录部301与控制信息输出部302连接。控制信息输出部302与显示方式设定部114连接。控制部116与更新部300、检测信息记录部301、控制信息输出部302双向连接。
当通过电源接通等使图像处理装置初始化时，控制部116使检测信息记录部301初始化，将检测信息的值设定为初始值0。更新部300根据控制部116的控制，从关注区域检测部112读入在特殊光图像中是否检测到关注区域的检测信息。
更新部300在检测到关注区域的情况下，向检测信息记录部301输出规定值，在本实施方式中输出5作为检测信息。另一方面，在没有检测到关注区域的情况下，使在检测信息记录部301中记录的检测信息的值减1。如果，在检测信息的值为负数时将值置换为0。
控制信息输出部302根据控制部116的控制，读入在检测信息记录部301中记录的检测信息的值。然后，在检测信息的值大于等于1的情况下，对显示方式设定部114输出指示显示方式的变更（提醒信息的设定）的控制信息。另一方面，在检测信息的值是0的情况下，对显示方式设定部114输出指示显示方式不变更（不设定提醒信息）的控制信息。
在本实施方式中，如图8所说明的那样，周期期间（T）的长度是1秒，假定在此周期期间中拍摄1张特殊光图像。因此，一旦检测到关注区域时，使作为检测信息的值从5减至0而需要5周期期间即5秒。因此，变更显示方式的经过时间（设定提醒信息的经过时间）为5秒。另外，当在该5秒内重新检测到关注区域时，使检测信息的值复位为5，所以从重新检测到的时刻起5秒期间，变更显示图像的显示方式。
图13（A）、图13（B）是说明本实施方式的经过时间设定方法的图。在本实施方式中，检测信息记录部301记录关注区域的检测信息（表示在各个周期期间是否检测到关注区域的信息），更新部300根据来自关注区域检测部112的检测结果，进行检测信息（计数值）的更新处理（计数更新处理）。具体地说，更新部300按照例如图8所说明的每个周期期间（T）来进行检测信息的更新处理。然后控制信息输出部302根据检测信息记录部301所记录的检测信息，来输出对显示方式设定部114中的显示方式设定处理进行控制的控制信息。
例如图13（A）的D1所示，假设在周期期间TN中从特殊光图像中检测到关注区域。在此情况下如D2所示，更新部300将检测信息的值VD设定为与经过时间对应的第1值VD1=5。由此，设定进行如D3所示的显示方式变更处理的经过时间（5秒）。
另一方面，如图13（A）的D4、D5所示，假设在例如周期期间TN之后的周期期间TN+1、TN+2等中从特殊光图像内没有检测到关注区域。在此情况下如D6、D7所示，更新部300进行使检测信息的值VD从第1值VD1=5向第2值VD2=0变化的更新处理。即，进行使检测信息的值VD例如减至VD2=0的更新处理。此外，更新处理可以是使VD增加的处理。
然后，控制信息输出部302在检测信息的值VD达到VD2=0之前的期间，输出对显示方式设定部114指示显示方式的变更的控制信息。另一方面，如图13（A）的D8所示，在VD达到VD2=0的情况下，如D9所示输出对显示方式设定部114指示显示方式不变更的控制信息。
另一方面，图13（B）的D10与图13（A）的D4不同，在周期期间TN之后的周期期间TN+1中，从特殊光图像内再次检测到关注区域。在此情况下如D11所示，将检测信息的值VD重新设定（复位）为第1值VD1=5。然后如D12、D13所示，在之后的周期期间TN+2、TN+3中，从特殊光图像内没有检测到关注区域，所以如D14、D15所示更新部300使VD从VD1=5向VD2=0变化。然后如D16所示，当VD达到VD2=0时，如D17所示指示显示方式不变更。
如以上那样在本实施方式中，在检测信息记录部301内记录检测信息，并利用图13（A），图13（B）的方法来进行检测信息的更新处理，由此实现图3，图4的方法。因此，可利用简单的结构或处理来实现基于关注区域检测结果的经过时间的设定处理或基于经过时间内的关注区域检测的经过时间的重新设定处理。
2.4显示方式设定部
图14示出显示方式设定部114（显示状态决定部）的结构例。该显示方式设定部114包含缓存器410、加工部400，加工部400包含选择部401（加工法选择部）、提醒信息附加部402。此外，可以实施省略这些构成要素的一部分或追加其它构成要素等各种变形。
在图14中，第1图像取得部110经由缓存器410与选择部401连接。经过时间设定部113与选择部401连接。选择部401与提醒信息附加部402以及显示部115连接。提醒信息附加部402与显示部115连接。控制部116与选择部401、提醒信息附加部402双向连接。
向缓存器410传送并记录来自第1图像取得部110的普通光图像。选择部401根据控制部116的控制，从经过时间设定部113读入指示显示方式的变更或不变更的控制信息。另外，根据控制部116的控制，从缓存器410中读入普通光图像。然后，当所读入的控制信息指示了显示方式的变更（附加提醒信息、重叠提醒区域）时，向提醒信息附加部402传送从缓存器410读入的普通光图像。另一方面，当指示了显示方式不变更时，向显示部115传送所读入的普通光图像。
提醒信息附加部402根据控制部116的控制，在从选择部401传送来普通光图像时，对普通光图像进行附加提醒信息的处理。图15示出提醒信息的附加处理的例子。在图15中，对普通光图像的周缘部（周边部）的提醒区域进行例如重叠红色等警告色的处理。
2.5软件处理
以上，主要说明构成图像处理装置90的各个部由硬件构成的情况，但本实施方式不仅限于此。例如，可构成为CPU对采用胶囊型内窥镜等摄像装置预先取得的图像进行各个部的处理，并通过CPU执行程序来作为软件进行实现。或者，可由软件构成各个部进行的一部分处理。
在作为软件来实现图像处理装置90的各个部进行的处理时，可将工作站或个人计算机等公知的计算机系统用作图像处理装置。然后，预先准备用于实现图像处理装置90的各个部进行的处理的程序（图像处理程序），并通过计算机系统的CPU执行该图像处理程序来进行实现。
图16是示出本变形例中的计算机系统600的结构的系统构成图，图17是示出该计算机系统600中的主体部610的结构的框图。如图16所示，计算机系统600具备：主体部610、用于根据来自主体部610的指示在显示画面621上显示图像等信息的显示器620、用于向该计算机系统600输入各种信息的键盘630和用于指定显示器620的显示画面621上的任意位置的鼠标640。
另外，该计算机系统600中的主体部610如图17所示具备：CPU611、RAM612、ROM613、硬盘驱动器（HDD）614、能放入CD-ROM660的CD-ROM驱动器615、可拆装地连接USB存储器670的USB端口616、连接显示器620、键盘630以及鼠标640的I/O接口617和用于与局域网或广域网（LAN/WAN）N1连接的LAN接口618。
而且，在该计算机系统600上连接有用于与互联网等公共线路N3连接的调制解调器650，并且经由LAN接口618以及局域网或广域网N1来连接其它计算机系统即个人计算机（PC）681、服务器682、打印机683等。
然后，该计算机系统600参照在规定的记录介质中记录的图像处理程序（例如图18～图21）来读出并执行用于实现后述处理顺序的图像处理程序，由此实现图像处理装置。这里，所谓规定的记录介质包括记录有可利用计算机系统600读取的图像处理程序的所有记录介质（存储介质），如“可移动物理介质”、“固定物理介质”、“通信介质”等，该“可移动物理介质”除了CD-ROM660或USB存储器670之外，还包括MO盘、DVD盘、软盘（FD）、光磁盘、IC卡等；该“固定物理介质”是在计算机系统600内外具备的HDD614、RAM612或ROM613等；该“通信介质”如经由调制解调器650连接的公共线路N3、连接其它计算机系统（PC）681或服务器682的局域网或广域网N1等那样在发送程序时短期存储程序。
即，在“可移动的物理介质”“固定物理介质”“通信介质”等记录介质以计算机可读取的方式记录有图像处理程序，计算机系统600通过从这样的记录介质中读出并执行图像处理程序来实现图像处理装置。此外，不仅限于由计算机系统600执行图像处理程序的情况，在其它计算机系统（PC）681或服务器682执行图像处理程序的情况或它们联动地执行图像处理程序这样的情况下，同样也可以应用本发明。
作为由软件构成各个部进行的一部分处理时的一例，采用图18～图20的流程图来说明针对预先取得的图像利用软件来实现图像处理装置90的处理时的处理顺序。
图18是用于说明本实施方式的整体处理的流程图。首先读入影像信号（步骤S1）。具体地说在本实施方式中，假定对来自Bayer型单板CCD的影像信号进行处理，如图8所说明的那样将1秒作为1周期期间，按照每1周期期间来交替地输入29张（29帧量）第1图像即普通光图像和1张（1帧量）第2图像即特殊光图像。
接着，进行普通光图像与特殊光图像的切换处理（步骤S2），在输入普通光图像时转移至第1图像取得处理（步骤S3），当输入特殊光图像时，转移至第2图像取得处理（步骤S4）。并且当转移至第1图像取得处理（步骤S3）时，对第1图像即普通光图像进行公知的插补处理、灰度处理等。
另一方面，当转移至第2图像取得处理（步骤S4）时，对第2图像即特殊光图像进行公知的插补处理、灰度处理等，此外还进行伪彩色图像化处理。然后进行关注区域的检测处理（步骤S5）。接着，设定（决定）对普通光图像设定（重叠）提醒信息（提醒区域）的经过时间，该提醒信息发出与检测处理结果相关的信息（步骤S6）。
在显示方式设定处理（步骤S7）中，在当前时刻属于经过时间内的情况下，对普通光图像进行提醒信息的设定处理，在不属于经过时间内的情况下，不进行提醒信息的设定处理。并且，输出这样生成的显示图像（步骤S8）。接着，判断全部影像信号的处理是否已完成，在没有完成的情况下返回步骤S2，在已完成的情况下结束处理。
图19是说明图18的步骤S5的关注区域检测处理的流程图。首先进行上式（1）～（5）所说明的色调或饱和度的计算处理（步骤S20）。接着，进行上式（6）、（7）所示的阈值判定处理，以像素为单位来判定是否属于关注区域（步骤S21）。然后，求出属于关注区域的像素数的总和，当像素数的总和超过规定阈值时，判断为已检测到关注区域，当小于或等于规定阈值时判断为没有检测到关注区域（步骤S22）。然后输出检测处理结果的检测信息（步骤S23）。
图20是说明图18的步骤S6的经过时间设定处理的流程图。首先读入检测处理结果的检测信息（步骤S30）。然后进行图13（A）、图13（B）所说明的检测信息的更新处理（步骤S31）。具体地说，在检测到关注区域的情况下，将检测信息的值VD设定为第1值VD1=5，当没有检测到关注区域时，使VD减1。当检测信息的值VD为负数时，设定为VD=0。接着进行与加工法相关的控制信息的设定处理（步骤S32）。具体地说，在检测信息的值VD大于或等于1的情况下，设定指示附加提醒信息的控制信息，在VD=0的情况下，设定指示不附加提醒信息的控制信息。然后输出所设定的控制信息（步骤S33）。
图21是说明图18的步骤S7的显示方式设定处理的流程图。首先，读入与加工法相关的控制信息（步骤S40）。然后，根据所读入的控制信息来判断是否变更显示方式（步骤S41），在变更显示方式的情况下，进行在普通光图像的周缘部重叠红色等警告色的提醒信息附加处理，将已附加提醒信息的图像作为显示图像输出（步骤S42）。另一方面，在不变更显示方式的情况下，将普通光图像直接作为显示图像输出。
如以上这样，在本实施方式中，图像处理装置90包含第1图像取得部110、第2图像取得部111、关注区域检测部112、经过时间设定部113和显示方式设定部114。
第1图像取得部110取得具有白色光的波长频带下的信息（信号）的图像来作为第1图像（狭义上为普通光图像）。另外，第2图像取得部111取得具有特定波长频带（狭义上为窄频带光或荧光等的波长频带）下的信息（信号）的图像来作为第2图像（狭义上为特殊光图像）。然后，关注区域检测部112根据第2图像内的像素特征量（狭义上为色调、饱和度、亮度等）来检测第2图像中的关注区域。另外，显示方式设定部114根据第1图像生成的显示图像（在显示部115中显示的图像）进行显示方式设定处理（显示方式的决定或变更的处理），经过时间设定部113根据关注区域检测部112中的关注区域的检测结果（检测信息）进行经过时间的设定处理（经过时间的决定或变更的处理）。
然后在本实施方式中，显示方式设定部114根据经过时间设定部113所设定的经过时间来进行显示方式的设定处理。例如图3、图4所说明的那样，在经过时间经过之前的期间进行变更显示图像的显示方式的处理。具体地说如图15所例示的那样，在经过时间经过之前的期间，进行在显示部115上显示设定有关于关注区域的提醒信息的显示图像的处理。提醒信息是发出关注区域的检测结果的信息，例如进行对在第1图像的周缘部等处设定的提醒区域设定提醒信息（提醒图像）的处理。
根据这样构成的本实施方式，即使在例如动态的观察中仅短时间内未检测到关注区域时，使用者也能够识别出关注区域存在于当前位置的附近，从而能够抑制关注区域的漏看，并进行可靠性高的识别。另外，因为在第1图像的周缘部等处设定提醒信息，所以能够抑制妨碍观察第1图像的情况等。
此外，显示图像是至少采用第1图像来生成的图像即可，例如可以是第1图像和第2图像的合成图像。另外，显示图像的显示方式变更不限于图15这样的提醒信息的附加。例如可将第1图像的周缘部以外的区域设定为提醒区域，来设定提醒信息（提醒图像）。另外，作为显示方式的变更处理，可进行变更与在第2图像中检测到的关注区域对应的第1图像中的对应关注区域图像的处理。例如可进行使第1图像的对应关注区域中的颜色接近于规定颜色、或者针对对应关注区域的图像实施强调处理或者在对应关注区域中合成第1图像和第2图像（混合）的处理。
另外，所谓关注区域就是对于使用者来说观察的优先级比其它区域相对高的区域，例如在使用者为医生且希望治疗的情况下是指已拍摄有粘膜部或病变部的区域。另外，作为其它例，如果医生希望观察的对象是泡或便，则关注区域是拍摄有该泡部分或便部分的区域。即，使用者应该关注的对象根据其观察目的而不同，但无论如何在观察时，对于使用者来说观察的优先级比其它区域相对高的区域为关注区域。另外，如上述式子（1）～（7）所说明的那样，可采用第2图像的像素特征量（色调、饱和度等）来检测关注区域，例如针对式子（6）、（7）的特征量的阈值根据关注区域的种类进行变化。例如针对第1种关注区域的色调、饱和度等特征量阈值与针对第2种关注区域的特征量阈值为不同的值。并且，在关注区域的种类已经改变的情况下，仅改变该特征量的阈值即可，关于关注区域的检测后的处理（经过时间的设定处理、显示方式的设定处理等），可通过与本实施方式所说明的处理同样的处理来实现。
另外，在本实施方式中，如图3的A5、A6所说明的那样，显示方式设定部114即使在经过时间内没有从第2图像中检测到关注区域时，至少在经过时间经过之前的期间内进行变更显示图像的显示方式的处理。
这样，因为检测不到关注区域之后也在片刻期间内显示已变更显示方式的显示图像，所以能够更有效地抑制使用者漏看关注区域这样的情况。
另外，在本实施方式中，如图4的B3、B4所说明的那样，经过时间设定部113在经过时间内从第2图像中检测到关注区域时，可进行设定以关注区域的检测定时为起点的新经过时间的处理。
这样，每当检测到关注区域时，重新设定经过时间并使经过时间延长，所以能够实现与关注区域的检测对应的适当的经过时间设定处理。此外，设定新经过时间的起点的定时可以是检测到关注区域的周期期间的下一周期期间内的定时，也可以是检测到关注区域的周期期间内的定时。
另外，在本实施方式中，如图8所说明的那样，第1图像取得部110按照规定的周期期间（图像取得期间）取得至少1帧量（1张）的第1图像，第2图像取得部111按照周期期间取得至少1帧量（1张）第2图像。然后，显示方式设定部114在第N周期期间（TN。N是自然数）内从第2图像中检测到关注区域时，在第N周期期间之后的第N+1周期期间（TN+1）中可进行变更显示图像的显示方式的处理。
这样，在各个周期期间中进行关注区域的检测处理，当检测到关注区域时，可在下一周期期间以后变更显示图像的显示方式，令使用者知晓检测到关注区域。因此，能够将向使用者显示关注区域的提醒信息等时的迟延时间抑制到最小，并能够更有效地抑制关注区域的漏看。
另外，在本实施方式中，第1图像取得部110按照周期期间来取得K帧量（K是自然数）的第1图像，第2图像取得部111按照周期期间来取得L帧量（L是自然数）的第2图像。具体地说，第2图像取得部111按照周期期间来取得例如1帧量（L=1）的第2图像。然后，如图8所说明的那样，在K与L之间K>L的关系可成立。
这样，按照周期期间来取得K帧量的普通光图像与L帧量的特殊光图像，而且设K>L，由此能够使普通光图像的取得比例高于特殊光图像。因此，能够抑制作为基本的普通光图像的时间分辨率的降低，能够获得高品位的显示图像（例如动态图像）。
此外，在将周期期间的长度设为T、将经过时间的长度设为TE时，如图3所示TE>T的关系可成立。
这样，能够使经过时间比作为关注区域的检测单位的期间即周期期间长，所以变更显示方式的期间变长，能够有效地抑制使用者漏看关注区域的情况。
另外，在本实施方式中如图9（A）的C1、C2、C3所说明的那样，当在第N周期期间（TN）中从第2图像内检测到关注区域、在第N+1的周期期间（TN+1）中从第2图像内没有检测到上述关注区域时，显示方式设定部114在第N+1周期期间～第M周期期间（TN+1～TN+5。M是M>N+1的整数）中，也可以进行变更显示图像的显示方式的处理。
这样，在第N+1周期期间（TN+1）中检测到关注区域时，至少到之后的第M周期期间（TN+5）为止也变更显示图像的显示方式，与周期期间相比能够将经过时间的长度设定得较长。
另外如图12所说明的那样，经过时间设定部113可包含：检测信息记录部301，其记录关注区域的检测信息；更新部300，其根据来自关注区域检测部112的检测结果进行检测信息的更新处理；以及控制信息输出部302，其输出控制信息，该控制信息根据检测信息记录部301所记录的检测信息来控制显示方式设定部114中的显示方式设定处理。
通过这样的结构可实现基于关注区域的检测信息的经过时间设定处理。另外，一旦检测到关注区域时，在检测信息记录部301中记录并保持该检测信息，所以即使在之后检测不到关注区域时，也能够利用检测信息记录部301所保持的检测信息来设定经过时间。
此时，如图13所说明的那样，更新部300在从第2图像中检测到关注区域时，将检测信息的值VD设定为与经过时间对应的第1值VD1（例如VD1=5）。另一方面，当从第2图像中没有检测到关注区域时，进行使检测信息的值VD从第1值VD1向第2值VD2（例如VD2=0）变化（减少、增加等）的更新处理。例如更新部300按照周期期间进行检测信息的更新处理。具体地说，当在第N周期期间（TN）中检测到关注区域时，将VD设定为VD1，当在第N周期期间（TN）之后的周期期间（TN+1、TN+2…）中没有检测到关注区域时，进行使VD从VD1向VD2变化的更新处理。
然后，控制信息输出部302在检测信息的值VD达到第2值VD2之前的期间，输出对显示方式设定部114指示显示图像的显示方式变更的控制信息（控制信号、控制用标志），当达到第2值VD2时，输出指示显示方式不变更的控制信息。
这样，可通过在检测信息记录部301中记录的检测信息的值的更新处理来有效地实现图3、图4等所说明的经过时间的设定处理。
另外，如图13（B）所说明的那样，更新部300当在第N周期期间（TN）之后的周期期间（TN+1、TN+2····）中从第2图像内检测到关注区域时，可将检测信息的值VD重新设定为第1值VD1（例如VD=VD1=5）。
这样，可通过检测信息的值的重新设定来实现在经过时间内检测到关注区域时重新设定经过时间的处理。然后，重新设定检测信息的值直到变为检测不到关注区域为止，由此能够延长经过时间。
另外，如图14所示，显示方式设定部114包含加工部400。并且，加工部400在通过来自图12的控制信息输出部302的控制信息指示显示图像的显示方式变更时，对第1图像实施加工处理（提醒信息的附加等），将已实施加工处理的第1图像作为显示图像输出。另一方面，在利用控制信息来指示显示方式不变更时，将未实施加工处理的第1图像作为显示图像输出。
这样，在经过时间设定部113的控制信息输出部302中设定控制信息，显示方式设定部114的加工部400根据该控制信息来进行第1图像的加工处理，由此能够实现基于关注区域的检测以及经过时间的设定的显示方式的变更处理。然后，加工部400仅根据来自经过时间设定部113的控制信息进行加工处理即可，所以能够使加工部400的结构或处理简化。
另外，如图10所示，关注区域检测部112包含可靠度计算部205。该可靠度计算部205进行计算可靠度（表示是关注区域的概率的尺度）的处理，该可靠度表示所检测到的关注区域的概率。具体地说，根据检测到的关注区域的面积来计算可靠度。
这样，与没有采用可靠度的方法相比，能够提高关注区域的精度（例如可将病变部作为关注区域适当进行捕捉的精度等）。另外，在面积大的情况下检测为关注区域，在面积小的情况下不检测为关注区域，所以能够减轻噪音的影响等。
此外，在本实施方式中，假定5周期期间（5秒）为检测到关注区域之后的经过时间，但本实施方式不仅限于此，可进行任意的经过时间的设定。或者，使用者可经由外部I/F部117来设定任意的经过时间。另外，虽然假定旋转滤镜103中的旋转速度为1转/秒、普通光图像用滤镜F1与特殊光图像用滤镜F2在圆周方向上的面积比为29：1，但本实施方式不仅限于此，可进行自由的设定。例如还可以构成为使作为基本的普通光图像的时间分辨率优先并且增加特殊光图像的配额（L相对于K的比率）。
另外，在本实施方式中虽然假定了在摄像系统的前表面配置有Bayer型原色滤镜的单板CCD，但本实施方式不仅限于此。例如，也可以应用于二板、三板的CCD。另外，虽然假定了日本特开2002-95635所公开的使用蓝色光与绿色光的窄频带作为特殊光图像的结构，但无需限定于这样的结构。例如，还可以适用于如日本特开昭63-122421所公开的使用荧光的结构或可红外观察等的特殊光图像。此外还假定了为了进行普通光图像的摄影和特殊光图像的摄影而使用旋转滤镜103的结构，但无需限定于这样的结构。例如，还可以使用LED光源等，通过切换白色光和窄频带光的光源本身的结构来实现。
另外，在本实施方式中假定了与由镜头系统100、CCD101、照明光源102、旋转滤镜103、增益放大器104、A/D转换部105、WB部107、测光评价部108构成的摄像部一体化的结构，但本实施方式不限于这样的结构。例如，还可以如胶囊型内窥镜那样将分体的摄像部所拍摄的影像信号以未处理的Raw数据形式保存到记录介质内，并以其它途径来处理来自记录介质的影像信号。
另外，本实施方式还可以应用于使计算机作为本实施方式的各个部（第1图像取得部、第2图像取得部、关注区域检测部、显示方式设定部、经过时间设定部、运动量检测部等）发挥功能的程序。
由此，例如胶囊型内窥镜等那样，首先积蓄图像数据，然后可针对所积蓄的图像数据利用PC等计算机系统以软件的方式进行处理。
另外，本实施方式还可以适用于记录有能实现本实施方式的各个部（第1图像取得部、第2图像取得部、关注区域检测部、显示方式设定部、经过时间设定部、运动量检测部等）的程序代码的计算机程序产品。
这里，计算机程序产品例如是记录有程序代码的信息存储介质（DVD等光盘介质、硬盘介质、存储器介质等）、记录有程序代码的计算机、记录有程序代码的互联网系统（例如，包含服务器和客户机终端的系统）等已装入程序代码的信息存储介质、装置、设备或者系统等。在此情况下，利用各个模块来安装本实施方式的各构成要素或各处理过程，并在计算机程序产品中记录由这些已安装的模块构成的程序代码。
3.第2结构例
图22示出本实施方式的第2结构例。第2结构例是将本实施方式的图像处理装置90应用于显微镜系统的例子。显然如图5那样，第2结构例也适用于内窥镜系统等的其它电子设备。
图22的第2结构例是将图5的第1结构例中的经过时间设定部113、显示方式设定部114置换为经过时间设定部500、显示方式设定部501的结构。基本结构与第1结构例相同，对相同的结构要素标注同一名称以及符号。以下，以不同的部分为中心进行说明。
经由显微镜的镜头系统100以及CCD101拍摄的影像信号通过增益放大器104进行放大，并利用A/D转换部105转换为数字信号。将来自照明光源102的照明光透过在旋转滤镜103上安装的滤镜而导入至显微镜的载物台。第1图像取得部110与经过时间设定部500以及显示方式设定部501连接。显示方式设定部501与显示部115连接。关注区域检测部112与经过时间设定部500连接，经过时间设定部500与显示方式设定部501连接。控制部116与经过时间设定部500、显示方式设定部501双向连接。
接着，对第2结构例的动作进行说明。第2结构例基本上与第1结构例相同，主要说明不同的部分。
第1图像取得部110根据控制部116的控制从切换部109读入单板状态的普通光图像，进行公知的插补处理、灰度处理等，向经过时间设定部500以及显示方式设定部501传送处理后的普通光图像。关注区域检测部112根据控制部116的控制，从第2图像取得部111读入特殊光图像，进行关注区域（血管密集存在的病变部等）的检测处理。向经过时间设定部500传送检测处理结果。
经过时间设定部500根据控制部116的控制，从关注区域检测部112读入关注区域的检测处理结果，从第1图像取得部110读入2张普通光图像。在本实施方式中，如图8所说明的那样假定在1秒的周期期间内可获得29张普通光图像和1张特殊光图像。因此，29张普通光图像与1张特殊光图像对应。以下，为了求出1周期期间的普通光图像的运动量，而读入第1张和第2张这2帧量的普通光图像。
经过时间设定部500针对来自关注区域检测部112的检测处理结果，考虑由2张普通光图像计算的运动量来决定经过时间。具体地说，经过时间设定部500判断当前时刻是否属于所设定的经过时间内，并将该判断结果向显示方式设定部501传送。显示方式设定部501根据控制部116的控制，从经过时间设定部113读入是否属于经过时间内的判断结果，在属于经过时间内的情况下，选择附加提醒信息的处理。作为此时的提醒信息的附加处理（提醒区域的重叠处理）假定对普通光图像的边缘以及饱和度的强调处理。另一方面，在当前时刻不属于经过时间内的情况下不特别进行处理。将来自显示方式设定部501的显示图像向显示部115传送并依次进行显示。
图23是说明第2结构例的经过时间设定方法的图。在第2结构例中，检测普通光图像的运动量，并根据所检测的运动量来进行经过时间的设定处理。具体地说，经过时间设定部113进行运动量越大经过时间越短的设定处理。另外，以在特殊光图像中检测到关注区域为条件来执行普通光图像的运动量检测。
例如在图23中，在周期期间TN内取得的特殊光图像IS1内检测到关注区域。在此情况下，例如采用在下一周期期间TN+1取得的例如2张普通光图像IN1、IN2来检测这些图像间的运动量。然后设定与所检测的运动量相应的经过时间，并与第1结构例相同，在该经过时间内进行显示方式的变更处理。
如果这样根据普通光图像的运动量来设定经过时间，则在摄像部（照相机的注视点）相对于被摄体高速移动时，经过时间变短，由此变更显示方式的时间变短。因此，由于摄像部相对于被摄体高速移动从而关注区域存在于当前位置附近的可能性低，在此情况下因为变更显示方式的时间变短，所以能够提高使用者的利便性。
图24示出经过时间设定部500的结构例。此外，可实施省略这些构成要素的一部分或者追加其它构成要素等变形。
图24的经过时间设定部500构成为相对于图12的经过时间设定部113追加缓存器303、运动量检测部304、经过时间计算部305、经过时间用ROM306。基本结构与图12的经过时间设定部113相同，对同一构成要素附加同一名称以及符号。以下，主要说明不同的部分。
第1图像取得部110经由缓存器303与运动量检测部304连接。运动量检测部304以及经过时间用ROM306与经过时间计算部305连接。经过时间计算部305与检测信息记录部301连接。更新部300与检测信息记录部301以及运动量检测部304连接。控制信息输出部302与显示方式设定部501连接。控制部116与运动量检测部304、经过时间计算部305、经过时间用ROM306双向连接。
在通过电源接通等使图像处理装置初始化的情况下，控制部116使检测信息记录部301初始化，将检测信息的值设定为初始值0。更新部300根据控制部116的控制，从关注区域检测部112读入在特殊光图像中是否检测到关注区域的检测信息。
更新部300在检测到关注区域的情况下，向运动量检测部304传送控制信号，以进行运动量的计算。另一方面，在没有检测到关注区域的情况下，使在检测信息记录部301中记录的检测信息的值减1。当检测信息的值成为负数时置换为0。
运动量检测部304仅在从更新部300传送来控制信号时，计算缓存器303上的普通光图像的运动量。在缓存器303中如图23所示记录有各周期期间的第1张和第2张这二张普通光图像IN1、IN2。此外，采用公知的块匹配技术等来计算运动量。计算出的运动量向经过时间计算部305传送。经过时间计算部305根据控制部116的控制从经过时间用ROM306中读入运动量与经过时间相对应的关系表。
图25示出使运动量与经过时间（周期期间）相对应的关系表的一例，基本上处于随着运动量增加而经过时间减少的关系。其中，对经过时间设定有上限值（MAX）和下限值（MIN），经过时间在运动量为小于或等于一定值（m1）时被设定为上限值（MAX），在大于或等于一定值（m2）时被设定为下限值（MIN）。通过采用这样的关系表，随着运动量增加，变更显示方式的经过时间变短。这是为了防止由于在移动速度变快时与检测到的关注区域的距离变大从而关注区域存在于当前位置附近的可能性过低的情况。
经过时间计算部305根据来自经过时间用ROM306的关系表，来求出与运动量检测部304所计算的运动量相对的经过时间，并作为检测信息的值向检测信息记录部301输出。例如在图13（A）的D1中，将检测信息的第1值固定为VD1=5，但在第2结构例中，第1值VD1可变。具体地说，普通光图像的运动量越大，VD1越小，由此所设定的经过时间也变短。
控制信息输出部302根据控制部116的控制从检测信息记录部301读入检测信息的值。在检测信息的值是大于等于1时，对显示方式设定部501输出指示显示方式变更的控制信息。另一方面，在检测信息的值是0时，对显示方式设定部501输出指示显示方式不变更的控制信息。
图26示出显示方式设定部501的结构例。图26的加工部398与图14的加工部400结构不同，在图26中构成为对加工部398追加亮度/色差分离部403、边缘强调部404、饱和度强调部405、亮度/色差合成部406，并删除提醒信息附加部402。基本结构与图14相同，对同一构成要素标注同一名称以及符号。以下，主要说明不同的部分。
经过时间设定部500与选择部401连接。选择部401与亮度/色差分离部403以及显示部115连接。亮度/色差分离部403与边缘强调部404以及饱和度强调部405连接。边缘强调部404以及饱和度强调部405与亮度/色差合成部406连接。亮度/色差合成部406与显示部115连接。控制部116与亮度/色差分离部403、边缘强调部404、饱和度强调部405、亮度/色差合成部406双向连接。
选择部401根据控制部116的控制，从经过时间设定部500读入是否变更显示方式的控制信息，从缓存器410读入普通光图像。当控制信息指示显示方式变更时，向亮度/色差分离部403传送普通光图像，当不指示显示方式变更时，向显示部115传送普通光图像。
当从选择部401传送来普通光图像时，亮度/色差分离部403根据控制部116的控制，将普通光图像的R、G、B信号转换为上述式子（1）～（3）所示的亮度信号Y以及色差信号Cb、Cr。向边缘强调部404传送亮度信号Y，向饱和度强调部405传送色差信号Cb、Cr。
边缘强调部404根据控制部116的控制，对亮度信号Y进行公知的边缘强调处理。向亮度/色差合成部406传送边缘强调处理后的亮度信号Y’。另一方面，饱和度强调部405根据控制部116的控制，对色差信号Cb、Cr进行公知的饱和度强调处理。饱和度强调处理后的色差信号Cb’、Cr’送传到亮度/色差合成部406。
亮度/色差合成部406根据控制部116的控制来合成来自边缘强调部404的亮度信号Y’和来自饱和度强调部405的色差信号Cb’、Cr’，由此如下式（7）～（9）所示，转换为由已进行强调处理的R’、G’、B’信号构成的图像，然后作为显示图像输出。
R’=Y’+1.40200Cr’（7）
G’=Y’-0.34414Cb’-0.71414Cr’（8）
B’=Y’+1.77200Cb’（9）
这样在第2结构例中，进行对整个普通光图像设定提醒信息的处理。
如以上这样在本实施方式的第2结构例中，经过时间设定部500包含运动量检测部304。然后运动量检测部304检测由第1图像取得部110取得的第1图像的运动量。
然后如图23所说明的那样，经过时间设定部500根据运动量检测部304所检测到的运动量进行经过时间的设定处理。具体地说，进行运动量越大越缩短经过时间的设定处理。
根据这样的结构，根据第1图像的运动量来设定经过时间，所以第1图像的运动量大，当判断为摄像部高速移动时，将经过时间设定为较短的长度，显示方式的变更时间也变短。因此，能够抑制在摄像部高速移动时频繁显示提醒信息这样的情况，从而能够提供使用方便的图像处理装置。
另外，在本实施方式中，运动量检测部304可以在第2图像中检测到关注区域时，检测第1图像的运动量。
这样，在没有检测到关注区域的情况下，不进行第1图像的运动量的检测处理，这样能够抑制徒劳地进行负荷重的运动量检测处理的情况。因此，可利用更少的处理负荷来实现利用了第1图像的运动量的智能的经过时间设定处理。
另外如图24所示，经过时间设定部500除了运动量检测部304之外还包含检测信息记录部301、更新部300、控制信息输出部302。并且，更新部300根据运动量检测部304所检测到的运动量来设定检测信息的值。
具体地说，更新部300在从第2图像中检测到关注区域时，将检测信息的值VD设定为值根据检测到的运动量进行变化的第1值VD1。即如图13（A）所示，当如D1那样检测到关注区域时，将检测信息的值VD设定为VD1。但是在第2结构例中，该VD1的值根据运动量进行变化，例如运动量越大，VD1的值越小。另一方面，更新部300在从第2图像中没有检测到关注区域时，与图13（A）的D6、D7同样地进行使检测信息的值VD从第1值VD1向第2值VD2变化的更新处理。
然后，控制信息输出部302在VD达到VD2（=0）之前的期间，输出指示显示图像的显示方式变更的控制信息，在VD达到VD2的情况下，输出指示显示方式不变更的控制信息。
这样，可通过检测信息记录部301所记录的检测信息的值的更新处理，来有效地实现与运动量相应的经过时间设定处理。另外，仅通过在检测信息记录部301中设定值根据运动量进行变化的第1值VD1，来实现与运动量相应的经过时间设定处理，所以能够实现处理或结构的简化。
另外在本实施方式中，图26的显示方式设定部501进行强调第1图像的边缘以及饱和度的至少1方的处理。
这样，可提供如下这样的图像处理装置，其进行强调整个普通光图像的边缘或饱和度的处理来作为显示方式的变更处理，当生成显示图像时，对于使用者来说不协调感小且使用方便。
此外，第2结构例说明了在经过时间的设定中使用普通光图像的运动量的情况，但第2结构例不限于这样的结构。例如与第1结构例同样可采用设定固定经过时间的方法。相反，在第1结构例中也可以应用使用普通光图像的运动量的结构。
另外，在第2结构例中采用了强调整个普通光图像的边缘或饱和度的结构来作为显示方式的变更处理，但第2结构例不限于这样的结构。例如与第1结构例同样可采用对普通光图像的周缘部附加提醒信息的结构。相反，在第1结构例中也可以采用强调整个普通光图像的边缘或饱和度的结构。此外在上述中以硬件的处理为前提进行了说明，但第2结构例不仅限于此。例如与第1结构例同样也可以通过软件处理来实现。
4.第3结构例
图27示出本实施方式的第3结构例。图27是对面顺序制的内窥镜系统的应用例。该第3结构例构成为将图5的第1结构例中的CCD101、旋转滤镜103、切换部109分别置换为CCD550、旋转滤镜551、切换部552。基本结构与第1结构例相同，对同一构成要素标注同一名称以及符号。以下，主要说明不同的部分。
经由处于内窥镜前端部的镜头系统100以及CCD550拍摄的影像信号通过增益放大器104被放大，并被A/D转换部105转换为数字信号。在内窥镜前端部中，来自照明光源102的照明光透过在旋转滤镜551上安装的滤镜，并将透射光经由光纤照射到被摄体上。控制部116与旋转滤镜551、切换部552双向连接。
接着，说明第3结构例的动作。基本上与第1结构例相同，主要说明不同的部分。
将经由镜头系统100、CCD550拍摄的影像信号作为模拟信号输出。此外，在本实施方式中假定白黑用的单板CCD作为CCD550，假定氙气灯等普通的白色光用光源作为照明光源102。
另外，在旋转滤镜551上安装有29组滤镜，该滤镜由具有普通光图像的R、G、B用分光特性的三个滤镜构成一组。另外与第1结构例同样安装有1组滤镜，该滤镜由蓝色光的窄频带（390～445nm）滤镜、绿色光的窄频带（530～550nm）滤镜和遮光用滤镜这三个来构成一组。
图28示出这些R、G、B滤镜和蓝色光的窄频带（B2）、绿色光的窄频带（G2）滤镜的分光特性。假定CCD550以1/90秒间隔进行摄像，旋转滤镜551以1转/秒的速度进行旋转。
由R、G、B这3个信号构成的普通光图像以3×1/90=1/30秒进行拍摄，在旋转滤镜551进行1次旋转的期间，取得29张普通光图像。另一方面，关于特殊光图像，作为R信号利用遮光用的滤镜进行摄像，作为G信号利用绿色光的窄带滤镜（G2）进行摄像，作为B信号利用蓝色光的窄带滤镜（B2）进行摄像。结果，以3×1/90=1/30秒进行摄像，在旋转滤镜551进行1次旋转的期间，取得1张特殊光图像。
缓存器106可记录1张普通光图像或特殊光图像，并伴随着摄影进行覆盖。切换部552根据控制部116的控制，在缓存器106内将由R、G、B这3个信号构成的普通光图像向第1图像取得部110传送。另外，当记录有由蓝色光的窄频带和绿色光的窄频带这2个分量构成的特殊光图像时，向第2图像取得部111传送特殊光图像。
第1图像取得部110根据控制部116的控制，从切换部552读入普通光图像进行公知的灰度处理等，并向显示方式设定部114传送处理后的普通光图像。第2图像取得部111根据控制部116的控制，从切换部552读入特殊光图像，进行公知的灰度处理等。而且，还一并进行生成伪彩色图像的处理。以后的处理与图5所示的第1结构例相同。
即使在以上的第3结构例中，也能够取得普通光图像和特殊光图像，并根据特殊光图像的像素特征量来检测关注区域，根据检测结果设定经过时间。然后，根据所决定的经过时间来进行显示图像的显示方式设定处理。因此，在动态观察中即使仅在短时间内检测到关注区域时，使用者也能够识别出关注区域存在于当前位置附近，从而能够抑制关注区域的漏看，并且进行可靠性高的识别。另外，按照规定的周期期间来交替地取得普通光图像与特殊光图像，而且使普通光图像的取得比例高于特殊光图像。因此，能够抑制作为基本的普通光图像的时间分辨率降低，能够取得高品位的显示图像。因为还在普通光图像的周缘部设定提醒信息，所以能够提供不妨碍普通光图像的观察且具有良好操作性的图像处理装置。
以上对本实施方式的第1～第3结构例进行了说明，但本实施方式不仅限于此，可实施各种变形。
例如，本实施方式中的特定波长频带是比白色光的波长频带窄的频带（NBI：Narrow Band Imaging：窄带成像）。例如，普通光图像以及特殊光图像是拍摄生物体内而得到的生物体内图像，生物体内图像所包含的特定波长频带是血液中的血红蛋白所吸收的波长的波长频带。该血红蛋白所吸收的波长例如是390纳米～445纳米（第1窄频带光。窄频带光的B2分量）或530纳米～550纳米（第2窄频带光。窄频带光的G2分量）。
由此，能够观察位于生物体的表层部以及深部的血管的构造。另外，可通过向特定的通道（G2→R，B2→G，B）输入所获得的信号，来利用褐色等显示扁平上皮癌等在普通光下难以视觉识别的病变等，从而能够抑制病变部的漏看。此外，所谓390nm～445nm或530nm～550nm就是根据被血红蛋白吸收这样的特性以及分别到达生物体的表层部或深部这样的特性而获得的数字。但此时的波长频带不仅限于此，例如还可以考虑根据与血红蛋白的吸收和到达生物体的表层部或深部相关的实验结果等变动要因，波长频带的下限值减少0～10%左右、上限值上升0～10%左右的情况。
另外，在本实施方式中，生物体内图像所包含的特定波长频带可以是荧光物质发出的荧光的波长频带。例如，特定的波长频带可以是490纳米～625纳米的波长频带。
由此，可进行被称为AFI（Auto Fluorescence Imaging：自动荧光成像）的荧光观察。可通过照射激励光（390nm～470nm），来观察来自胶原蛋白等荧光物质的自身荧光（intrinsic fluorescence：内荧光。490nm～625nm）。在这样的观察中，能够利用与正常粘膜不同的色调来强调显示病变，并能够抑制病变部的漏看等。此外，490nm～625nm这样的数字在照射上述激励光时表示胶原蛋白等荧光物质发出的自身荧光的波长频带。但是，此时的波长频带不仅限于此，例如还可以考虑根据与荧光物质所发出荧光的波长频带相关的实验结果等变动要因，波长频带的下限值减少0～10%左右、上限值上升0～10%左右的情况。另外，可同时照射血红蛋白所吸收的波长频带（540nm～560nm），生成伪彩色图像。
另外，在本实施方式中，生物体内图像所包含的特定的波长频带可以是红外光的波长频带。例如，特定的波长频带可以是790纳米～820纳米、或905纳米～970纳米的波长频带。
由此，可进行被称为IRI（Infra Red Imaging：红外成像）的红外光观察。在静脉注射了容易吸收红外光的红外指标药剂即ICG（靛青绿）之后，照射上述波长频带的红外光，从而能够强调显示人眼难以视觉识别的粘膜深部的血管或血流信息，并能够进行胃癌的深度诊断或治疗方针的判定等。此外，可根据红外指标药剂的吸收最强这样的特性来求出790nm～820nm这样的数字，根据红外指标药剂的吸收最弱这样的特性来求出905nm～970nm这样的数字。但是，此时的波长频带不仅限于此，例如也可以考虑根据与红外指标药剂的吸收相关的实验结果等变动要因，波长频带的下限值减少0～10%左右、上限值上升0～10%左右的情况。
另外，在本实施方式中，图5等所示的第2图像取得部111可根据已取得的白色光图像（第1图像）来生成特殊光图像（第2图像）。
具体地说，该第2图像取得部111包含从所取得的白色光图像中提取白色光波长频带下的信号的信号提取部，第2图像取得部111根据所提取的白色光波长频带下的信号来生成包含特定波长频带下的信号的特殊光图像。例如，信号提取部根据白色光图像的RGB信号以每10nm来估计被摄体的分光反射率特性，第2图像取得部111按上述特定频带累计所估计的信号分量来生成特殊光图像。
更具体地说，第2图像取得部11包含设定矩阵数据的矩阵数据设定部，该矩阵数据用于根据白色光波长频带下的信号来计算特定波长频带下的信号。然后，第2图像取得部111采用所设定的矩阵数据，根据白色光波长频带下的信号来计算特定波长频带下的信号，生成特殊光图像。例如，矩阵数据设定部将按每10nm记述有特定波长频带的照射光分光特性的表数据设定为矩阵数据。然后，使该表数据所记述的分光特性（系数）与所估计的被摄体的分光反射率特性相乘后累计，生成特殊光图像。
由此，可根据普通光图像来生成特殊光图像，所以即使仅利用照射普通光的1个光源和摄像普通光的1个摄像元件也能够实现系统。因此，能够使视野型内窥镜的插入部或胶囊型内窥镜减小，另外因为部件减少所以还可以期待成本降低的效果。
另外，以上如图15所示举例说明了提醒信息是图像的情况，但利用本实施方式输出的提醒信息不仅限于图像，还可以是基于声音的提醒信息或基于发光元件发光的提醒信息。在此情况下，图5等的显示方式设定部114作为提醒信息输出部发挥功能。
然后第1图像取得部110取得第1图像，第2图像取得部111取得第2图像，当关注区域检测部112根据第2图像内的像素特征量来检测关注区域时，提醒信息输出部（显示方式设定部114）输出关于检测到的关注区域的提醒信息。具体地说，经过时间设定部113根据关注区域的检测结果进行经过时间的设定处理，提醒信息输出部在所设定的经过时间经过之前的期间输出提醒信息。当举提醒信息是声音的情况为例时，图5等的显示部115作为声音输出部发挥功能，该声音输出部在检测到关注区域之后经过时间经过之前的期间，将通知检测到关注区域的提醒音作为提醒信息输出。这样，例如在仅短时间内检测到关注区域时，使用者也能够识别出关注区域存在于当前位置附近，从而能够抑制关注区域的漏看，并进行可靠性高的识别。
以上对本实施方式进行了详细说明，但本领域技术人员能够容易理解根据本发明的新事项以及效果可进行实体上不脱离的多种变形。因此，这样的变形例全部包含在本发明的范围内。例如在说明书或附图中，至少一次与更广义或同义的不同术语（第1图像、第2图像等）共同记载的术语（普通光图像、特殊光图像等）无论在说明书或附图的任何位置都能够置换为该不同的术语。另外，图像处理装置、内窥镜系统的结构、动作也不限于本实施方式所说明的内容，可实施各种变形。
符号说明
90图像处理装置，100镜头系统101CCD，102照明光源，
103旋转滤镜，104增益放大器，105A/D转换部，
106缓存器，107WB部，108测光评价部，109切换部，
110第1图像取得部，111第2图像取得部，112关注区域检测部，
113经过时间设定部，114显示方式设定部，115显示部（输出部），
116控制部，117外部I/F部，200缓存器，
201色调/饱和度计算部，202关注区域判定部，203阈值用ROM，
204缓存器，205可靠度计算部，206面积判定部，
300更新部，301检测信息记录部，302控制信息输出部，
303缓存器，304运动量检测部，305经过时间计算部，
306经过时间用ROM，398加工部，400加工部，401选择部，
402提醒信息附加部，403亮度/色差分离部，404边缘强调部，
405饱和度强调部，406亮度/色差合成部，410缓存器，
500经过时间设定部，501显示方式设定部，550CCD，
551旋转滤镜，552切换部，600计算机系统，
610主体部，611CPU，612RAM，613ROM，
614HDD，615CD-ROM驱动器，616USB端口，
617I/O接口，618LAN接口，
620显示器，621显示画面，630键盘，640鼠标，
650调制解调器，660CD-ROM，670USB存储器，681PC，
682服务器，683打印机

Claims (40)

1.一种图像处理装置，其特征在于，包含：
第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；
第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；
关注区域检测部，其根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域；
显示方式设定部，其对根据所述第1图像生成的显示图像进行显示方式设定处理；以及
经过时间设定部，其根据所述关注区域的检测结果进行经过时间的设定处理，
所述显示方式设定部根据所设定的所述经过时间来进行所述显示方式设定处理。
2.根据权利要求1所述的图像处理装置，其特征在于，
所述显示方式设定部进行在所述经过时间经过之前的期间变更所述显示图像的显示方式的处理，来作为所述显示方式设定处理。
3.根据权利要求2所述的图像处理装置，其特征在于，
所述显示方式设定部进行如下处理，来作为所述显示方式设定处理，该处理在所述经过时间经过之前的期间显示设定有关于所述关注区域的提醒信息的所述显示图像。
4.根据权利要求2所述的图像处理装置，其特征在于，
所述显示方式设定部即使在所述经过时间内从所述第2图像中没有检测到所述关注区域时，也进行在所述经过时间经过之前的期间变更所述显示图像的显示方式的处理。
5.根据权利要求4所述的图像处理装置，其特征在于，
所述经过时间设定部在所述经过时间内从所述第2图像中检测到所述关注区域时，进行设定以所述关注区域的检测定时为起点的新经过时间的处理。
6.根据权利要求1所述的图像处理装置，其特征在于，
所述第1图像取得部按照规定的周期期间来取得至少1帧量的所述第1图像，
所述第2图像取得部按照所述周期期间来取得至少1帧量的所述第2图像，
所述显示方式设定部在第N周期期间（N是自然数）内从所述第2图像中检测到所述关注区域时，在所述第N周期期间之后的第N+1周期期间进行变更所述显示图像的显示方式的处理。
7.根据权利要求6所述的图像处理装置，其特征在于，
所述第1图像取得部按照所述周期期间来取得K帧量（K是自然数）的所述第1图像，
所述第2图像取得部按照所述周期期间来取得L帧量（L是自然数）的所述第2图像，
并且K>L。
8.根据权利要求7所述的图像处理装置，其特征在于，
所述第1图像取得部按照所述周期期间来取得K帧量的所述第1图像，
所述第2图像取得部按照所述周期期间来取得1帧量的所述第2图像。
9.根据权利要求6所述的图像处理装置，其特征在于，
在将所述周期期间的长度设为T、将所述经过时间的长度设为TE时，TE>T。
10.根据权利要求6所述的图像处理装置，其特征在于，
所述显示方式设定部在所述第N周期期间内从所述第2图像中检测到所述关注区域、且在所述第N+1周期期间内从所述第2图像中没有检测到所述关注区域时，
在所述第N+1周期期间～第M周期期间（M是M>N+1的整数）进行变更所述显示图像的显示方式的处理。
11.根据权利要求1所述的图像处理装置，其特征在于，
所述经过时间设定部包含：
检测信息记录部，其记录所述关注区域的检测信息；
更新部，其根据来自所述关注区域检测部的检测结果来进行所述检测信息的更新处理；以及
控制信息输出部，其输出控制信息，该控制信息根据所述检测信息记录部中记录的所述检测信息来控制所述显示方式设定部中的所述显示方式设定处理。
12.根据权利要求11所述的图像处理装置，其特征在于，
所述更新部进行如下的更新处理：在从所述第2图像中检测到所述关注区域时，将所述检测信息的值VD设定为与所述经过时间对应的第1值VD1，在从所述第2图像中没有检测到所述关注区域时，将所述检测信息的值VD从所述第1值VD1向第2值VD2变化，
所述控制信息输出部在所述检测信息的值VD达到所述第2值VD2之前的期间，输出对所述显示方式设定部指示所述显示图像的显示方式变更的所述控制信息，
在所述检测信息的值VD达到所述第2值VD2时，输出对所述显示方式设定部指示所述显示图像的显示方式不变更的所述控制信息。
13.根据权利要求11所述的图像处理装置，其特征在于，
所述第1图像取得部按照规定的周期期间来取得至少1帧量的所述第1图像，
所述第2图像取得部按照所述周期期间来取得至少1帧量的所述第2图像，
所述更新部按照所述周期期间进行所述检测信息的更新处理。
14.根据权利要求13所述的图像处理装置，其特征在于，
所述更新部进行如下的更新处理：当在第N周期期间（N是自然数）内从所述第2图像中检测到所述关注区域时，将所述检测信息的值VD设定为与所述经过时间对应的第1值VD1，
当在所述第N周期期间之后的周期期间内从所述第2图像中没有检测到所述关注区域时，使所述检测信息的值VD从所述第1值VD1向第2值VD2变化，
所述控制信息输出部在所述检测信息的值VD达到所述第2值VD2之前的期间，输出对所述显示方式设定部指示所述显示图像的显示方式变更的所述控制信息，
在所述检测信息的值VD达到所述第2值VD2时，输出对所述显示方式设定部指示所述显示图像的显示方式不变更的所述控制信息。
15.根据权利要求14所述的图像处理装置，其特征在于，
所述更新部在所述第N周期期间之后的周期期间内从所述第2图像中检测到所述关注区域时，将所述检测信息的值VD重新设定为所述第1值VD1。
16.根据权利要求11所述的图像处理装置，其特征在于，
所述显示方式设定部包含加工部，
在根据来自所述控制信息输出部的所述控制信息而指示了所述显示图像的显示方式变更时，所述加工部对所述第1图像实施加工处理，并将已实施加工处理的所述第1图像作为所述显示图像输出，
在根据来自所述控制信息输出部的所述控制信息而指示了所述显示图像的显示方式不变更时，所述加工部将没有实施加工处理的所述第1图像作为所述显示图像输出。
17.根据权利要求1所述的图像处理装置，其特征在于，
所述关注区域检测部包含可靠度计算部，其计算表示检测到的所述关注区域的概率的可靠度。
18.根据权利要求17所述的图像处理装置，其特征在于，
所述可靠度计算部根据检测到的所述关注区域的面积来计算所述可靠度。
19.根据权利要求1所述的图像处理装置，其特征在于，
所述经过时间设定部包含检测所述第1图像的运动量的运动量检测部，
所述经过时间设定部根据所述运动量检测部所检测到的所述运动量来进行所述经过时间的设定处理。
20.根据权利要求19所述的图像处理装置，其特征在于，
所述经过时间设定部进行所述运动量越大越缩短所述经过时间的设定处理。
21.根据权利要求19所述的图像处理装置，其特征在于，
所述运动量检测部在所述第2图像中检测到所述关注区域时，检测所述第1图像的运动量。
22.根据权利要求19所述的图像处理装置，其特征在于，
所述经过时间设定部包含：
检测信息记录部，其记录所述关注区域的检测信息；
更新部，其根据来自所述关注区域检测部的检测结果来进行所述检测信息的更新处理；以及
控制信息输出部，其输出控制信息，该控制信息根据所述检测信息记录部中记录的所述检测信息来控制所述显示方式设定部中的所述显示方式设定处理，
所述更新部根据所述运动量检测部所检测到的所述运动量来设定所述检测信息的值。
23.根据权利要求22所述的图像处理装置，其特征在于，
所述更新部进行如下的更新处理：在从所述第2图像中检测到所述关注区域时，将所述检测信息的值VD设定为值根据检测到的所述运动量进行变化的第1值VD1，
在从所述第2图像中没有检测到所述关注区域时，使所述检测信息的值VD从所述第1值VD1向第2值VD2变化，
所述控制信息输出部在所述检测信息的值VD达到所述第2值VD2之前的期间，输出对所述显示方式设定部指示所述显示图像的显示方式变更的所述控制信息，
在所述检测信息的值VD达到所述第2值VD2时，输出对所述显示方式设定部指示所述显示图像的显示方式不变更的所述控制信息。
24.根据权利要求1所述的图像处理装置，其特征在于，
所述显示方式设定部进行强调所述第1图像的边缘以及饱和度的至少1方的处理，来作为所述显示方式设定处理。
25.根据权利要求1所述的图像处理装置，其特征在于，
所述特定波长频带是比所述白色光的波长频带窄的频带。
26.根据权利要求1所述的图像处理装置，其特征在于，
所述第1图像以及所述第2图像是拍摄生物体内而得到的生物体内图像，
所述生物体内图像所包含的所述特定波长频带是血液中的血红蛋白所吸收的波长的波长频带。
27.根据权利要求26所述的图像处理装置，其特征在于，
所述特定波长频带是390纳米～445纳米或530纳米～550纳米。
28.根据权利要求1所述的图像处理装置，其特征在于，
所述第1图像以及所述第2图像是拍摄生物体内而得到的生物体内图像，
所述生物体内图像所包含的所述特定波长频带是荧光物质发出的荧光的波长频带。
29.根据权利要求28所述的图像处理装置，其特征在于，
所述特定波长频带是490纳米～625纳米的波长频带。
30.根据权利要求1所述的图像处理装置，其特征在于，
所述第1图像以及所述第2图像是拍摄生物体内而得到的生物体内图像，
所述生物体内图像所包含的所述特定波长频带是红外光的波长频带。
31.根据权利要求30所述的图像处理装置，其特征在于，
所述特定波长频带是790纳米～820纳米或905纳米～970纳米的波长频带。
32.根据权利要求1所述的图像处理装置，其特征在于，
所述第2图像取得部根据所取得的所述第1图像来生成所述第2图像。
33.根据权利要求32所述的图像处理装置，其特征在于，
所述第2图像取得部包含从所取得的所述第1图像中提取白色光波长频带下的信号的信号提取部，
所述第2图像取得部根据所提取的所述白色光波长频带下的信号来生成包含所述特定波长频带下的信号的所述第2图像。
34.根据权利要求33所述的图像处理装置，其特征在于，
所述第2图像取得部包含矩阵数据设定部，其根据所述白色光波长频带下的信号来设定用于计算所述特定波长频带下的信号的矩阵数据，
所述第2图像取得部采用所设定的所述矩阵数据，根据所述白色光波长频带下的信号来计算所述特定波长频带下的信号，生成所述第2图像。
35.一种图像处理装置，其特征在于，包含：
第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；
第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；
关注区域检测部，其根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域；
提醒信息输出部，其输出关于检测到的所述关注区域的提醒信息；以及
经过时间设定部，其根据所述关注区域的检测结果来进行经过时间的设定处理，
所述提醒信息输出部在所设定的所述经过时间经过之前的期间，输出所述提醒信息。
36.一种内窥镜系统，其特征在于，包含：
第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；
第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；
关注区域检测部，其根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域；
显示方式设定部，其对根据所述第1图像生成的显示图像进行显示方式设定处理；
经过时间设定部，其根据所述关注区域的检测结果进行经过时间的设定处理；以及
显示部，其显示所述显示图像，
所述显示方式设定部根据所设定的所述经过时间来进行所述显示方式设定处理。
37.一种程序，使计算机作为以下部件发挥功能：
第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；
第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；
关注区域检测部，其根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域；
显示方式设定部，其进行根据所述第1图像生成的显示图像的显示方式设定处理；以及
经过时间设定部，其根据所述关注区域的检测结果进行经过时间的设定处理，
所述显示方式设定部根据所设定的所述经过时间来进行所述显示方式设定处理。
38.一种程序，使计算机作为以下部件发挥功能：
第1图像取得部，其取得具有白色光波长频带下的信息的图像作为第1图像；
第2图像取得部，其取得具有特定波长频带下的信息的图像作为第2图像；
关注区域检测部，其根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域；
提醒信息输出部，其输出关于检测到的所述关注区域的提醒信息；以及
经过时间设定部，其根据所述关注区域的检测结果来进行经过时间的设定处理，
所述提醒信息输出部在所设定的所述经过时间经过之前的期间，输出所述提醒信息。
39.一种图像处理方法，其特征在于，
取得具有白色光波长频带下的信息的图像作为第1图像，
取得具有特定波长频带下的信息的图像作为第2图像，
根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域，
对根据所述第1图像生成的显示图像进行显示方式设定处理，
根据所述关注区域的检测结果进行经过时间的设定处理，并且
根据所设定的所述经过时间来进行所述显示方式设定处理。
40.一种图像处理方法，其特征在于，
取得具有白色光波长频带下的信息的图像作为第1图像，
取得具有特定波长频带下的信息的图像作为第2图像，
根据所述第2图像内的像素特征量来检测所述第2图像中的关注区域，
输出关于检测到的所述关注区域的提醒信息，
根据所述关注区域的检测结果来进行经过时间的设定处理，并且
在所设定的所述经过时间经过之前的期间，输出所述提醒信息。
CN201180008337.1A 2010-02-05 2011-01-20 图像处理装置、内窥镜系统以及图像处理方法 Active CN102740757B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-023750 2010-02-05
JP2010023750A JP5220780B2 (ja) 2010-02-05 2010-02-05 画像処理装置、内視鏡システム、プログラム及び画像処理装置の作動方法
PCT/JP2011/050951 WO2011096279A1 (ja) 2010-02-05 2011-01-20 画像処理装置、内視鏡システム、プログラム及び画像処理方法

Publications (2)

Publication Number Publication Date
CN102740757A true CN102740757A (zh) 2012-10-17
CN102740757B CN102740757B (zh) 2016-02-10

Family

ID=44355281

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180008337.1A Active CN102740757B (zh) 2010-02-05 2011-01-20 图像处理装置、内窥镜系统以及图像处理方法

Country Status (5)

Country Link
US (1) US20120274754A1 (zh)
EP (1) EP2517614B1 (zh)
JP (1) JP5220780B2 (zh)
CN (1) CN102740757B (zh)
WO (1) WO2011096279A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106659362A (zh) * 2014-07-11 2017-05-10 奥林巴斯株式会社 图像处理装置、图像处理方法、图像处理程序以及内窥镜系统
CN108135457A (zh) * 2015-10-26 2018-06-08 奥林巴斯株式会社 内窥镜图像处理装置
CN110831487A (zh) * 2017-07-14 2020-02-21 富士胶片株式会社 医疗图像处理装置、内窥镜系统、诊断支持装置及医疗服务支持装置
CN112312822A (zh) * 2018-07-06 2021-02-02 奥林巴斯株式会社 内窥镜用图像处理装置和内窥镜用图像处理方法以及内窥镜用图像处理程序
CN112512398A (zh) * 2018-07-27 2021-03-16 富士胶片株式会社 医疗图像处理装置
CN112584740A (zh) * 2018-08-20 2021-03-30 富士胶片株式会社 医疗图像处理装置
CN112584739A (zh) * 2018-08-20 2021-03-30 富士胶片株式会社 医疗图像处理系统
CN112654283A (zh) * 2018-09-11 2021-04-13 富士胶片株式会社 医疗图像处理装置、医疗图像处理方法及程序、内窥镜系统
CN112770662A (zh) * 2018-09-28 2021-05-07 富士胶片株式会社 医用图像处理装置、医用图像处理方法、及程序、诊断辅助装置以及内窥镜系统

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5331860B2 (ja) * 2011-09-15 2013-10-30 富士フイルム株式会社 内視鏡システム及び光源装置
JP6027803B2 (ja) * 2012-07-17 2016-11-16 Hoya株式会社 画像処理装置及び内視鏡装置
JP6067264B2 (ja) 2012-07-17 2017-01-25 Hoya株式会社 画像処理装置及び内視鏡装置
JP6077340B2 (ja) * 2013-03-06 2017-02-08 富士フイルム株式会社 画像処理装置及び内視鏡システムの作動方法
US9100540B1 (en) 2013-03-14 2015-08-04 Ca, Inc. Multi-person video conference with focus detection
US9041766B1 (en) * 2013-03-14 2015-05-26 Ca, Inc. Automated attention detection
JP6120762B2 (ja) * 2013-12-13 2017-04-26 オリンパス株式会社 画像処理装置
WO2017017735A1 (ja) * 2015-07-24 2017-02-02 オリンパス株式会社 画像処理装置、表示制御方法およびプログラム
CN106687023B (zh) 2015-08-13 2018-12-18 Hoya株式会社 评价值计算装置以及电子内窥镜系统
WO2017026539A1 (ja) 2015-08-13 2017-02-16 Hoya株式会社 評価値計算装置及び電子内視鏡システム
JPWO2017073337A1 (ja) * 2015-10-27 2017-11-09 オリンパス株式会社 内視鏡装置及びビデオプロセッサ
CN108348145B (zh) * 2015-11-10 2020-06-26 奥林巴斯株式会社 内窥镜装置
WO2018078724A1 (ja) * 2016-10-25 2018-05-03 オリンパス株式会社 内視鏡画像処理装置及び内視鏡画像処理方法
WO2018198327A1 (ja) * 2017-04-28 2018-11-01 オリンパス株式会社 内視鏡診断支援システム、内視鏡診断支援プログラム及び内視鏡診断支援方法
WO2018203383A1 (ja) * 2017-05-02 2018-11-08 オリンパス株式会社 画像処理装置、及び、画像処理プログラム
JP7121470B2 (ja) * 2017-05-12 2022-08-18 キヤノン株式会社 画像処理システム、制御方法、及び、プログラム
JP6840846B2 (ja) 2017-06-02 2021-03-10 富士フイルム株式会社 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置
WO2019054265A1 (ja) * 2017-09-15 2019-03-21 富士フイルム株式会社 医療画像処理装置
JPWO2019078237A1 (ja) * 2017-10-18 2020-10-22 富士フイルム株式会社 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置
WO2019146077A1 (ja) * 2018-01-26 2019-08-01 オリンパス株式会社 内視鏡画像処理装置、内視鏡画像処理方法及び内視鏡画像処理プログラム
JP2019180966A (ja) * 2018-04-13 2019-10-24 学校法人昭和大学 内視鏡観察支援装置、内視鏡観察支援方法、及びプログラム
WO2019220859A1 (ja) 2018-05-14 2019-11-21 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法
WO2020017212A1 (ja) * 2018-07-20 2020-01-23 富士フイルム株式会社 内視鏡システム
JP7337073B2 (ja) 2018-08-17 2023-09-01 富士フイルム株式会社 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法
JP6936401B2 (ja) 2018-08-20 2021-09-15 富士フイルム株式会社 医療画像処理システム
WO2020039929A1 (ja) * 2018-08-23 2020-02-27 富士フイルム株式会社 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法
CN112739250A (zh) * 2018-09-18 2021-04-30 富士胶片株式会社 医用图像处理装置、处理器装置、医用图像处理方法及程序
EP3875021A4 (en) * 2018-11-01 2021-10-20 FUJIFILM Corporation MEDICAL IMAGE PROCESSING APPARATUS, MEDICAL IMAGE PROCESSING PROCESS AND DIAGNOSIS ASSISTANCE APPARATUS
JP7038641B2 (ja) 2018-11-02 2022-03-18 富士フイルム株式会社 医療診断支援装置、内視鏡システム、及び作動方法
US20220133129A1 (en) * 2019-02-13 2022-05-05 Nec Corporation Surgery assistance apparatus, surgery assistance method, and computer-readable recording medium
WO2021039438A1 (ja) * 2019-08-27 2021-03-04 富士フイルム株式会社 医療画像処理システム及びその動作方法
US11607112B2 (en) * 2019-11-08 2023-03-21 Meditrina, Inc. Endoscope and method of use
WO2023187886A1 (ja) * 2022-03-28 2023-10-05 日本電気株式会社 画像処理装置、画像処理方法及び記憶媒体

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001204721A (ja) * 1995-01-23 2001-07-31 Fuji Photo Film Co Ltd 乳房画像表示方法および装置
EP1702556A1 (en) * 2005-03-18 2006-09-20 Fujinon Corporation Endoscope and spectral image processing device
CN1870929A (zh) * 2003-09-16 2006-11-29 博世创医疗公司 自动内窥镜检查装置、诊断方法及其使用
CN101389260A (zh) * 2006-03-14 2009-03-18 奥林巴斯医疗株式会社 医疗用图像处理装置和医疗用图像处理方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63122421A (ja) 1986-11-12 1988-05-26 株式会社東芝 内視鏡装置
JP3583731B2 (ja) * 2000-07-21 2004-11-04 オリンパス株式会社 内視鏡装置および光源装置
WO2002007588A1 (fr) * 2000-07-21 2002-01-31 Olympus Optical Co., Ltd. Endoscope
US7172553B2 (en) * 2001-05-16 2007-02-06 Olympus Corporation Endoscope system using normal light and fluorescence
JP4245976B2 (ja) * 2003-05-16 2009-04-02 オリンパス株式会社 超音波画像処理装置
JP2005007145A (ja) * 2003-05-27 2005-01-13 Olympus Corp 医療用画像記録装置、内視鏡画像の表示方法、内視鏡画像の取り込み方法及びプログラム
JP2006198106A (ja) * 2005-01-19 2006-08-03 Olympus Corp 電子内視鏡装置
JP2008084110A (ja) * 2006-09-28 2008-04-10 Toshiba Corp 情報表示装置、情報表示方法及び情報表示プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001204721A (ja) * 1995-01-23 2001-07-31 Fuji Photo Film Co Ltd 乳房画像表示方法および装置
CN1870929A (zh) * 2003-09-16 2006-11-29 博世创医疗公司 自动内窥镜检查装置、诊断方法及其使用
EP1702556A1 (en) * 2005-03-18 2006-09-20 Fujinon Corporation Endoscope and spectral image processing device
CN101389260A (zh) * 2006-03-14 2009-03-18 奥林巴斯医疗株式会社 医疗用图像处理装置和医疗用图像处理方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106659362A (zh) * 2014-07-11 2017-05-10 奥林巴斯株式会社 图像处理装置、图像处理方法、图像处理程序以及内窥镜系统
CN108135457A (zh) * 2015-10-26 2018-06-08 奥林巴斯株式会社 内窥镜图像处理装置
CN108135457B (zh) * 2015-10-26 2020-02-21 奥林巴斯株式会社 内窥镜图像处理装置
CN110831487A (zh) * 2017-07-14 2020-02-21 富士胶片株式会社 医疗图像处理装置、内窥镜系统、诊断支持装置及医疗服务支持装置
CN112312822A (zh) * 2018-07-06 2021-02-02 奥林巴斯株式会社 内窥镜用图像处理装置和内窥镜用图像处理方法以及内窥镜用图像处理程序
CN112512398A (zh) * 2018-07-27 2021-03-16 富士胶片株式会社 医疗图像处理装置
CN112512398B (zh) * 2018-07-27 2024-03-29 富士胶片株式会社 医疗图像处理装置
US11881190B2 (en) 2018-07-27 2024-01-23 Fujifilm Corporation Medical image processing apparatus
CN112584740A (zh) * 2018-08-20 2021-03-30 富士胶片株式会社 医疗图像处理装置
US11950757B2 (en) 2018-08-20 2024-04-09 Fujifilm Corporation Medical image processing apparatus
US11862327B2 (en) 2018-08-20 2024-01-02 Fujifilm Corporation Medical image processing system
CN112584739A (zh) * 2018-08-20 2021-03-30 富士胶片株式会社 医疗图像处理系统
CN112584739B (zh) * 2018-08-20 2024-04-05 富士胶片株式会社 医疗图像处理系统
CN112584740B (zh) * 2018-08-20 2024-04-05 富士胶片株式会社 医疗图像处理装置
CN112654283A (zh) * 2018-09-11 2021-04-13 富士胶片株式会社 医疗图像处理装置、医疗图像处理方法及程序、内窥镜系统
US11910994B2 (en) 2018-09-28 2024-02-27 Fujifilm Corporation Medical image processing apparatus, medical image processing method, program, diagnosis supporting apparatus, and endoscope system
CN112770662A (zh) * 2018-09-28 2021-05-07 富士胶片株式会社 医用图像处理装置、医用图像处理方法、及程序、诊断辅助装置以及内窥镜系统

Also Published As

Publication number Publication date
EP2517614B1 (en) 2017-08-30
CN102740757B (zh) 2016-02-10
JP5220780B2 (ja) 2013-06-26
EP2517614A1 (en) 2012-10-31
US20120274754A1 (en) 2012-11-01
WO2011096279A1 (ja) 2011-08-11
JP2011160848A (ja) 2011-08-25
EP2517614A4 (en) 2014-05-28

Similar Documents

Publication Publication Date Title
CN102740757A (zh) 图像处理装置、内窥镜系统、程序以及图像处理方法
CN102201114B (zh) 图像处理装置和图像处理方法
JP5658873B2 (ja) 画像処理装置、電子機器、内視鏡システム及びプログラム
JP5802364B2 (ja) 画像処理装置、電子機器、内視鏡システム及びプログラム
JP5541914B2 (ja) 画像処理装置、電子機器、プログラム及び内視鏡装置の作動方法
JP6367683B2 (ja) 内視鏡システム、プロセッサ装置、内視鏡システムの作動方法、及びプロセッサ装置の作動方法
CN107105987B (zh) 图像处理装置及其工作方法、记录介质和内窥镜装置
JP5997817B2 (ja) 内視鏡システム
JP2016174836A (ja) 画像処理装置、内視鏡システム、画像処理装置の作動方法、及び内視鏡システムの作動方法
CN105308651B (zh) 检测装置、学习装置、检测方法、学习方法
CN110893095A (zh) 一种用于可见光和激发荧光实时成像的系统和方法
JP2011234844A (ja) 制御装置、内視鏡装置及びプログラム
WO2018079205A1 (ja) プロセッサ装置及び内視鏡システム
JP5948203B2 (ja) 内視鏡システム及びその作動方法
JP2014064777A (ja) 内視鏡システム及びそのプロセッサ装置並びに内視鏡画像の表示制御方法
CN103654688A (zh) 内窥镜系统以及内窥镜图像的取得方法
JP7386347B2 (ja) 内視鏡システム及びその作動方法
WO2022014258A1 (ja) プロセッサ装置、プロセッサ装置の作動方法
JP6153912B2 (ja) 内視鏡システム、プロセッサ装置、内視鏡システムの作動方法、及びプロセッサ装置の作動方法
Zhang et al. A novel endoscopy image fusion system: combine white light imaging and compound band imaging
EP3991633A1 (en) Microscope system for use in eye surgery and corresponding system, methods and computer programs
JP5885652B2 (ja) 撮像装置、内視鏡装置、及び生体パターン強調処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant