CN116548894A - 医用电子内窥镜图像处理控制系统及方法 - Google Patents

医用电子内窥镜图像处理控制系统及方法 Download PDF

Info

Publication number
CN116548894A
CN116548894A CN202310534823.1A CN202310534823A CN116548894A CN 116548894 A CN116548894 A CN 116548894A CN 202310534823 A CN202310534823 A CN 202310534823A CN 116548894 A CN116548894 A CN 116548894A
Authority
CN
China
Prior art keywords
light
image
memory
combined
combined light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310534823.1A
Other languages
English (en)
Inventor
杜武华
刘华
佴广金
钱大宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Shandong Weigao Hongrui Medical Technology Co Ltd
Original Assignee
Shanghai Jiaotong University
Shandong Weigao Hongrui Medical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University, Shandong Weigao Hongrui Medical Technology Co Ltd filed Critical Shanghai Jiaotong University
Priority to CN202310534823.1A priority Critical patent/CN116548894A/zh
Publication of CN116548894A publication Critical patent/CN116548894A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/0002—Operational features of endoscopes provided with data storages
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00131—Accessories for endoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Endoscopes (AREA)

Abstract

本申请涉及内窥镜领域，公开了一种医用电子内窥镜图像处理控制系统及方法，将多种光学成像技术结合在同一内窥镜装置中，调整了观察病灶的组合光，可以更加清晰地观察到病灶的问题。该系统包括光源照明调节器、内窥镜系统控制器、图像传感器以及多个存储器。光源照明调节器受内窥镜系统控制器控制依次输出第一组合光、第二组合光和第三组合光。图像传感器将各组合光对应的亮度图像分别保存到对应的存储器。第一、第二和第三存储器提取亮度图像构成一个完整图像。第一亮度图像构成完整图像的红色通道，第二亮度图像构成完整图像的绿色通道，第三亮度图像构成完整图像的蓝色通道。

Description

医用电子内窥镜图像处理控制系统及方法
技术领域
本申请涉及内窥镜领域，具体涉及一种医用电子内窥镜图像处理控制系统及方法。
背景技术
本部分旨在为权利要求书中陈述的本申请的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是已被公开的现有技术。
近些年，医用电子内窥镜照明与图像处理技术发展飞速，从10年前使用氙灯光源经窄带滤光片的窄带内镜(NBI，narrow band imaging)技术到目前普遍使用多光谱LED照明结合联动处理的图像处理，NBI使用消除红光的光学滤光片选择蓝色和绿色波长，从而强调粘膜表面结构和血管显像。据报道，NBI显著改善了病变和正常粘膜的对比度。在NBI之后，蓝光成像(BLI，Blue Light Imaging)和联动彩色成像(LCI，Linked Color Imaging)已成为新的图像增强模式。BLI和LCI用短波长的窄带光照射粘膜，其使用了多个不同色彩辐射的LED多色谱照明，而无需光学滤光片。此外，获得的颜色信息被重新分配到与粘膜颜色相似的不同颜色，从而改善了描绘血管的性能。它增强红色分色的图像处理允许LCI中红色血管和白色凹坑的清晰可视。最近发布的纹理和色彩增强成像(TXI)是一种新的增强图像的新方法，TXI旨在增强白光照明图像中的三个图像因素，包括纹理，亮度和颜色。TXI的色彩增强算法旨在扩大图像中红色和白色色调之间的色差。除此之外还有AFI的自发荧光诊断技术，旨在增强肿瘤边缘和正常粘膜的对比性，帮助医生更容易的发现肿瘤。RDI的技术增强了出血的观察。旨在内镜治疗中更轻易的发现出血部位。
癌前病变诊断借助人体自发荧光成像是目前公认的最好手段之一，但目前广泛使用的AFI技术，虽然号称是人体自有荧光图像增强技术，但它存在3个问题：第一个是需要专用的有着两个CCD摄像模组的内窥镜，它只能在医生使用常规检查内窥镜检查后需要的时候再次使用这个设备对同一个病人使用，这无疑带来了不方便和增加病患者的痛苦。第二点是因为它使用氙灯经蓝和绿色滤光片照明，其产生照明强度激发人体的自有荧光发射远远不足而产生较多红色荧光，病灶区分不明显。第三点是在AFI技术中，绿光始终是没有被滤出的，也就是说在最后形成的图像中，很大程度的绿色是最初射入绿光的粘膜反射光，这虽然提高了图像的亮度和清晰度，但这些绿色光对微弱的绿色荧光而言影响是很大的，这对诊断的敏感度和特异性的影响是非常大的，因此AFI技术没有得到普及使用。
另外在内镜诊断和治疗中有一个问题长期没有得到解决，当内镜下的诊断和治疗中出现出血比较多的情况下，很难看到出血点加以止血治疗。白光照明下血液对照明亮度的吸收非常明显，表现为图像变暗，就更无法对出血点进行观察，没有经验的医生会产生止血失败的案列。因此，如何加强内镜下出血点(特别是出血比较多的情况下)的图像效果成为医用内镜需要解决的问题之一。
发明内容
本申请的目的在于提供一种医用电子内窥镜图像处理控制系统及方法，将多种光学成像技术结合在同一内窥镜装置中，调整了观察病灶的组合光，可以更加清晰地观察到病灶的问题。
本申请公开了一种医用电子内窥镜图像处理控制系统，包括：光源照明调节器、内窥镜系统控制器、图像传感器以及多个存储器；
所述光源照明调节器被配置为受所述内窥镜系统控制器控制依次输出第一组合光、第二组合光以及第三组合光；
所述图像传感器被配置为将对应第一组合光的第一亮度图像保存到第一存储器、将对应第二组合光的第二亮度图像保存到第二存储器以及将对应第三组合光的第三亮度图像保存到第三存储器；
所述第一存储器、第二存储器和第三存储器被配置为提取亮度图像构成一个完整图像；其中，所述第一亮度图像构成所述完整图像的红色通道，所述第二亮度图像构成所述完整图像的绿色通道，所述第三亮度图像构成所述完整图像的蓝色通道；
并且，以下条件至少满足一个：所述第一组合光中包括不属于红光的其他颜色的光；所述第二组合光中包括不属于绿光的其他颜色的光；所述第三组合光中包括不属于蓝光的其他颜色的光。
在一个优选例中，所述第一组合光包括630nm光与720nm光，所述第二组合光包括白光与525nm光，所述第三组合光包括415nm光与450nm光。
在一个优选例中，还包括图像处理器和图像生成器；
所述图像处理器被配置为对所述存储器同时输出的亮度图像进行数字增强处理；
所述图像生成器被配置为将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
在一个优选例中，还包括图像信号处理分配单元；
所述图像信号处理分配单元被配置为接收所述第一亮度图像、所述第二亮度图像以及所述第三亮度图像并分别分配至所述红色通道、绿色通道以及蓝色通道。
在一个优选例中，所述光源照明调节器包括光源复合模组、第一二向分色镜、第二二向分色镜、第一光源模组、第二光源模组以及导光棒；
所述内窥镜系统控制器控制所述光源复合模组、所述第一光源模组和/或所述第二光源模组组合形成所述第一组合光、所述第二组合光以及所述第三组合光；
所述光源复合模组的出射光透过所述第一二向分色镜和第二二向分色镜到达所述导光棒；
所述第一光源模组的出射光经所述第一二向分色镜反射后通过所述第二二向分色镜到达所述导光棒，所述第二光源模组的出射光经所述第二二向分色镜反射后到达所述导光棒。
在一个优选例中，所述光源复合模组出射400-760nm的白光、415nm紫蓝光、450nm蓝光、525nm绿光、630nm红光以及720nm红光，所述第一光源模组出射405nm，所述第二光源模组出射850nm光。
本申请还公开了一种医用电子内窥镜图像处理控制方法，包括：
控制光源照明调节器输出第一组合光，图像传感器将对应第一组合光的第一亮度图像保存到第一存储器；
控制光源照明调节器输出第二组合光，图像传感器将对应第二组合光的第二亮度图像保存到第二存储器；
控制光源照明调节器输出第三组合光，图像传感器将对应第三组合光的第三亮度图像保存到第三存储器；
从第一存储器、第二存储器和第三存储器提取亮度图像构成一个完整图像；其中，第一亮度图像构成所述完整图像的红色通道，第二亮度图像构成所述完整图像的绿色通道，第三亮度图像构成所述完整图像的蓝色通道；
并且，以下条件至少满足一个：
第一组合光中包括不属于红光的其他颜色的光，
第二组合光中包括不属于绿光的其他颜色的光，
第三组合光中包括不属于蓝光的其他颜色的光。
在一个优选例中，所述从第一存储器、第二存储器和第三存储器提取亮度图像构成一个完整图像之后还包括：
图像处理器对所述存储器同时输出的亮度图像进行数字增强处理并输出至图像生成器；
所述图像生成器将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
在一个优选例中，还包括：
图像信号处理分配单元接收所述第一亮度图像、所述第二亮度图像以及所述第三亮度图像并分别分配至所述第一存储器、所述第二存储器以及所述第三存储器。
本申请还公开了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如前文描述的方法中的步骤。
本申请的实施方式中，通过控制光源照明调节器按照次序输出组合光至对应的存储器，通过轮动照明后三个存储器取得的亮度图像信号完成了彩色成像，并且组合光中包括不属于该组合光纯色颜色的其他颜色的光，从而可以满足观察不同病灶时使用不同光源照射的需求，且观察效果更为清晰。
进一步地，本申请的第一光源模组中采用405nm激光照明，经内镜引入照射病灶，在405nm光的诱导下肿瘤组织产生较强的红色荧光和很弱的绿色荧光，正常组织则产生极弱的红色荧光和很强的绿色荧光，并且为突出肿瘤组织和正常粘膜的对比性，本发明方案通过结合光源复合模组使用了680-730nm的微亮度的红光照明，可以让肿瘤组织和正常粘膜组织的成像对比度得到了增强；
进一步地，本申请的第二光源模组中采用850nm近红外光照明，血管中的血红蛋白在近红外波谱中(760-1100nm)的850nm有一个强吸收峰，因此可以得到清晰的血流和血氧图像，从而帮助医生客观的分析病变组织的周围血管血供状况，辅助诊断肿瘤、炎症、水肿、息肉等；
进一步地，本申请的图像处理器可以根据控制器的指令对不同的色谱照明时的图像进行联动处理，从而根据需求对观察到的病灶图像进行处理。
上述发明内容中公开的各个技术特征、在下文各个实施方式和例子中公开的各技术特征、以及附图中公开的各个技术特征，都可以自由地互相组合，从而构成各种新的技术方案(这些技术方案均应该视为在本说明书中已经记载)，除非这种技术特征的组合在技术上是不可行的。例如，在一个例子中公开了特征A+B+C，在另一个例子中公开了特征A+B+D+E，而特征C和D是起到相同作用的等同技术手段，技术上只要择一使用即可，不可能同时采用，特征E技术上可以与特征C相组合，则，A+B+C+D的方案因技术不可行而应当不被视为已经记载，而A+B+C+E的方案应当视为已经被记载。
附图说明
图1是根据本申请的一个实施方式的系统结构示意图；
图2是根据本申请的一个实施方式的流程示意图；
图3是根据本申请的一个实施方式的时序图；
图4是根据本申请的一个实施方式的时序图；
图5是根据本申请的一个实施方式的时序图；
图6是根据本申请的一个实施方式的时序图；
图7是根据本申请的一个实施方式的时序图；
图8是根据本申请的一个实施方式的时序图；
图9是根据本申请的一个实施方式的时序图。
具体实施方式
在以下的叙述中，为了使读者更好地理解本申请而提出了许多技术细节。但是，本领域的普通技术人员可以理解，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请的实施方式作进一步地详细描述。
本申请的第一实施方式涉及一种医用电子内窥镜图像处理控制系统，其结构图如图1所示，该系统包括：光源照明调节器、内窥镜系统控制器、图像传感器以及多个存储器；
光源照明调节器被配置为受内窥镜系统控制器控制依次输出第一组合光、第二组合光以及第三组合光；
图像传感器被配置为将对应第一组合光的第一亮度图像保存到第一存储器、将对应第二组合光的第二亮度图像保存到第二存储器以及将对应第三组合光的第三亮度图像保存到第三存储器；
第一存储器、第二存储器和第三存储器被配置为提取亮度图像构成一个完整图像；其中，第一亮度图像构成完整图像的红色通道，第二亮度图像构成完整图像的绿色通道，第三亮度图像构成完整图像的蓝色通道；
并且，以下条件至少满足一个：第一组合光中包括不属于红光的其他颜色的光；第二组合光中包括不属于绿光的其他颜色的光；第三组合光中包括不属于蓝光的其他颜色的光。
可选地，第一组合光可以包括630nm光与720nm光，第二组合光可以包括白光与525nm光，第三组合光可以包括415nm光与450nm光。
可选地，该系统还可以包括图像处理器和图像生成器。图像处理器被配置为对存储器同时输出的亮度图像进行数字增强处理，提高图像的边缘构造、组织构造，对图像进行降噪声处理，宽动态处理，对比度增强处理，还可以根据内窥镜系统控制器的指令对不同的色谱照明时的图像进行联动处理。图像生成器被配置为将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
可选地，该系统还可以包括图像信号处理分配单元。图像信号处理分配单元被配置为接收第一亮度图像、第二亮度图像以及第三亮度图像并分别分配至红色通道、绿色通道以及蓝色通道。
可选地，光源照明调节器可以包括光源复合模组、第一二向分色镜、第二二向分色镜、第一光源模组、第二光源模组以及导光棒。内窥镜系统控制器可以控制光源复合模组、第一光源模组和/或第二光源模组组合形成第一组合光、第二组合光以及第三组合光。光源复合模组的出射光透过第一二向分色镜和第二二向分色镜到达导光棒。第一光源模组的出射光经第一二向分色镜反射后通过第二二向分色镜到达导光棒，第二光源模组的出射光经第二二向分色镜反射后到达导光棒。
可选地，光源照明调节器还可以包括一调光转轮，调光转轮位于导光棒和第二二向分色镜之间，调光转轮可以用于接收内窥镜系统控制器的指令进行照明亮度的调整，也可以通过手动操作调光转轮的方式调节照明亮度。
可选地，光源复合模组可以出射400-760nm的白光、415nm紫蓝光、450nm蓝光、525nm绿光、630nm红光以及720nm红光，第一光源模组可以出射405nm，第二光源模组可以出射850nm光。
本申请的第二实施方式涉及一种医用电子内窥镜图像处理控制方法，其流程图如图2所示：
在步骤S201中，控制光源照明调节器输出第一组合光，图像传感器将对应第一组合光的第一亮度图像保存到第一存储器。
在步骤S202中，控制光源照明调节器输出第二组合光，图像传感器将对应第二组合光的第二亮度图像保存到第二存储器。
在步骤S203中，控制光源照明调节器输出第三组合光，图像传感器将对应第三组合光的第三亮度图像保存到第三存储器。
在步骤S204中，从第一存储器、第二存储器和第三存储器提取亮度图像构成一个完整图像；其中，第一亮度图像构成完整图像的红色通道，第二亮度图像构成完整图像的绿色通道，第三亮度图像构成完整图像的蓝色通道。
并且，在上述步骤S201到S204中，以下条件至少满足一个：
第一组合光中包括不属于红光的其他颜色的光，
第二组合光中包括不属于绿光的其他颜色的光，
第三组合光中包括不属于蓝光的其他颜色的光。
可选地，在步骤S204之后还可以包括：
在步骤S205中，图像处理器对存储器同时输出的亮度图像进行数字增强处理并输出至图像生成器。
在步骤S206中，图像生成器将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
可选地，该方法还可以包括：图像信号处理分配单元接收第一亮度图像、第二亮度图像以及第三亮度图像并分别分配至第一存储器、第二存储器以及第三存储器。
本实施方式是与第一实施方式相对应的方法实施方式，第一实施方式中的技术细节可以应用于本实施方式，本实施方式中的技术细节也可以应用于第一实施方式。
为了能够更好地理解本申请的技术方案，下面结合几个具体的例子来进行说明，该例子中罗列的细节主要是为了便于理解，不作为对本申请的保护范围的限制。
实施例1：白光模式
时钟周期T：
第一组合光为100％亮度630nm红光+50％亮度720nm红光；第二组合光为60％白光+100％亮度525nm绿光；第三组合光为40％亮度415nm蓝紫光+100％亮度450nm蓝光。
如图3所示为白光模式下的时序图，在时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第二组合光并存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第三组合光并存入第三存储器。
第一组合光照明取得的第一亮度图像的信号送入第一存储器(红色)；第二组合光照明取得的第二亮度图像的信号送入第二存储器(绿色)；第三组合光照明取得的第三亮度图像的信号送入第三存储器(蓝色)。图像处理器分别取得来自第一存储器、第二存储器和第三存储器的第一亮度图像的信号、第二亮度图像的信号和第三亮度图像的信号，在图像处理器进行图像增强处理后送入图像生成器产生数字视频输出信号给显示器显示。
该模式采用了第一组合光、第二组合光和第三组合光轮流照明时融合其它单色或白光照明的方式，在每一个分色时序里增加单色或是白光照明是为了弥补单色LED频谱宽度的不足，主要利用LED的发光频谱分布，让图像中红色的炎症部分，蓝色的血管部分，病灶的凹凸表现得到增强。这种色谱组合方式改善了单独使用红绿蓝单色LED照明时色彩缺陷，增强了白光照明模式时图像色域表现。
实施例2：血管与病灶边缘的窄带照明模式
时钟周期T：
第一组合光为525nm绿光；第二组合光为415nm紫蓝光；第三组合光为405nm激光。
在该血管与病灶边缘的窄带照明模式可以加强内镜检查时对组织中血管和粘膜中微小病灶边缘与正常粘膜的对比性。
如图4所示为血管与病灶边缘的窄带照明模式下的时序图，在时刻，内窥镜系统控制器控制第一光源模组发出第三组合光存入第三存储器以及控制光源复合模组发出第二组合光存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器。
第一组合光照明取得的第一亮度图像(绿色窄带图像)的信号送入第一存储器(红色)；第二组合光照明取得的第二亮度图像的信号和第三组合光照明取得的第三亮度图像的信号同时送入送入第二存储器(绿色)、第三存储器(蓝色)。图像处理器分别取得来自第一存储器、第二存储器和第三存储器的第一亮度图像的信号、第二亮度图像的信号和第三亮度图像的信号，在图像处理器进行图像增强处理后送入图像生成器产生数字视频输出信号给显示器显示。从而可以让显示的图像明显分别出粘膜层下较浅层和较深层的血管以及微小的病灶边缘。
实施例3：自有荧光单独成像显示模式
时钟周期T：
第一组合光为720nm光；第二组合光为405nm激光；第三组合光为415nm光。
如图5所示为自有荧光单独成像显示模式下的时序图，在时刻，内窥镜系统控制器控制第一光源模组发出第二组合光存入第二存储器以及控制光源复合模组发出第三组合光存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器。
第一组合光照明取得的第一亮度图像的信号送入第一存储器(红色)；第二组合光照明取得的第二亮度图像的信号和第三组合光照明取得的第三亮度图像的信号同时送入第二存储器(绿色)。图像处理器分别取得来自第一存储器和第二存储器的第一亮度图像的信号以及第二亮度图像的信号，在图像处理器进行图像增强处理后送入图像生成器产生数字视频输出信号给显示器显示。
本模式下采用405nm和415nm来激发人体组织的自有荧光，与720nm光组合使用可以提高该模式下的图像亮度以及病灶边缘与正常组织的图像对比。
实施例4：自有荧光与白光模式图像对比双显示模式
时钟周期T：
本模式为实施例1和实施例3并排对比显示模式，在图像生成器的处理中输出显示器的图像界面中有两个图像显示区域，第一图像显示区域为白光模式，第二图像显示区域为自有荧光模式。在第一图像区域中的第一组合光为100％亮度630nm红光+50％亮度720nm红光；第二组合光为60％白光+100％亮度525nm绿光；第三组合光为40％亮度415nm蓝紫光+100％亮度450nm蓝光。在第二图像区域中的第一组合光为720nm光；第二组合光为405nm激光；第三组合光为415nm光。
如图6所示为自有荧光与白光图像对比双显示模式下的时序图，在0～时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第二组合光并存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第三组合光并存入第三存储器，在/>时刻的亮度图像通过图像生成器在显示器的第一图像显示区域显示。在/>时刻，内窥镜系统控制器控制第一光源模组发出第二组合光以及控制光源复合模组发出第三组合光同存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器，在/>时刻的亮度图像通过图像生成器在显示器的第二图像显示区域显示。白光模式图像和自有荧光模式图像在各自的显示区域内按/>帧的速度交替显示。
实施例5：荧光标记物照明与白光模式混合照明成像模式
时钟周期T：
本模式为在实施例1的基础上混入激发GNNT奈米探针材料(荧光标记物)在肿瘤细胞发光的405nm激光。第一组合光为100％亮度630nm红光+50％亮度720nm红光；第二组合光为60％白光+100％亮度525nm绿光+405nm激光；第三组合光为40％亮度415nm蓝紫光+100％亮度450nm蓝光。
如图7所示为荧光标记物照明和白光混合照明成像模式下的时序图，在时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出60％白光+100％亮度525nm绿光以及同时控制第一光源模组发出405nm激光存入第二存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第三组合光并存入第三存储器。图像处理器分别取得来自第一存储器、第二存储器和第三存储器的第一亮度图像的信号、第二亮度图像的信号和第三亮度图像的信号，在图像处理器进行图像增强处理后送入图像生成器产生数字视频输出信号给显示器显示。
实施例6：出血显示增强模式
时钟周期T：
第一组合光为525nm光+850nm光；第二组合光为630nm光；第三组合光为720nm光。
对于出血比较多的时候，利用了850nm近红外照明的热显影效果，出血点的温度较周围组织的温度高，在图像处理中强调了这个显示亮点就突出的深度出血是出血点的影像。
如图8所示为出血显示增强模式下的时序图，在时刻，内窥镜系统控制器控制光源复合模组发出525nm光以及同时控制第二光源模组发出850nm光存入第二存储器，在时刻，内窥镜系统控制器控制光源复合模组发出630nm光、720nm光以及525nm光共同存入第一存储器中。图像处理器分别取得来自第一存储器和第二存储器的第一亮度图像的信号和第二亮度图像的信号，在图像处理器进行图像增强处理后送入图像生成器产生数字视频输出信号给显示器显示。
实施例7：血流成像模式
时钟周期T：
本模式为实施例1和血管图像并排对比显示模式，在图像生成器的处理中输出显示器的图像界面中有两个图像显示区域，第一图像显示区域为白光模式，第二图像显示区域为自有荧光模式。在第一图像区域中的第一组合光为100％亮度630nm红光+50％亮度720nm红光；第二组合光为60％白光+100％亮度525nm绿光；第三组合光为40％亮度415nm蓝紫光+100％亮度450nm蓝光。在第二图像区域中的组合光为850nm的近红外光。
如图9所示为血流成像模式下的时序图，在时刻，内窥镜系统控制器控制光源复合模组发出第一组合光并存入第一存储器，在/>时刻，内窥镜系统控制器控制光源复合模组发出第二组合光并存入第二存储器，在/> 时刻，内窥镜系统控制器控制光源复合模组发出第三组合光并存入第三存储器，在/>时刻的亮度图像通过图像生成器在显示器的第一图像显示区域显示。在/>时刻，内窥镜系统控制器控制发出850nm光，并且内窥镜系统控制器控制在/>时刻，将850nm光存入第一存储器，在/>时刻，将850nm光存入第二存储器，在/>时刻，将850nm光存入第三存储器。在/>时刻的亮度图像通过图像生成器在显示器的第二图像显示区域显示。白光模式图像和血管图像在各自的显示区域内按/>帧的速度交替显示。
相应地，本申请的实施方式还提供一种计算机可读存储介质，其中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现本申请的各方法实施方式。计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于，相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读存储介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
需要说明的是，在本申请中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本申请中，如果提到根据某要素执行某行为，则是指至少根据该要素执行该行为的意思，其中包括了两种情况：仅根据该要素执行该行为、和根据该要素和其它要素执行该行为。多个、多次、多种等表达包括2个、2次、2种以及2个以上、2次以上、2种以上。
在描述方法的步骤时使用的序号本身并不对这些步骤的顺序构成任何的限定。例如，序号大的步骤并非一定要在序号小的步骤之后执行，也可以是先执行序号大的步骤再执行序号小的步骤，还可以是并行执行，只要这种执行顺序对于本领域技术人员来说是合理的即可。又如，拥有连续编号序号的多个步骤(例如步骤101，步骤102，步骤103等)并不限制其他步骤可以在其间执行，例如步骤101和步骤102之间可以有其他的步骤。
本说明书包括本文所描述的各种实施例的组合。对实施例的单独提及(例如“一个实施例”或“一些实施例”或“优选实施例”)；然而，除非指示为是互斥的或者本领域技术人员很清楚是互斥的，否则这些实施例并不互斥。应当注意的是，除非上下文另外明确指示或者要求，否则在本说明书中以非排他性的意义使用“或者”一词。
在本说明书提及的所有文献都被认为是整体性地包括在本申请的公开内容中，以便在必要时可以作为修改的依据。此外应理解，以上所述仅为本说明书的较佳实施例而已，并非用于限定本说明书的保护范围。凡在本说明书一个或多个实施例的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本说明书一个或多个实施例的保护范围之内。
在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。

Claims (10)

1.一种医用电子内窥镜图像处理控制系统，其特征在于，包括：光源照明调节器、内窥镜系统控制器、图像传感器以及多个存储器；
所述光源照明调节器被配置为受所述内窥镜系统控制器控制依次输出第一组合光、第二组合光以及第三组合光；
所述图像传感器被配置为将对应第一组合光的第一亮度图像保存到第一存储器、将对应第二组合光的第二亮度图像保存到第二存储器以及将对应第三组合光的第三亮度图像保存到第三存储器；
所述第一存储器、第二存储器和第三存储器被配置为提取亮度图像构成一个完整图像；其中，所述第一亮度图像构成所述完整图像的红色通道，所述第二亮度图像构成所述完整图像的绿色通道，所述第三亮度图像构成所述完整图像的蓝色通道；
并且，以下条件至少满足一个：所述第一组合光中包括不属于红光的其他颜色的光；所述第二组合光中包括不属于绿光的其他颜色的光；所述第三组合光中包括不属于蓝光的其他颜色的光。
2.如权利要求1所述的医用电子内窥镜图像处理控制系统，其特征在于，所述第一组合光包括630nm光与720nm光，所述第二组合光包括白光与525nm光，所述第三组合光包括415nm光与450nm光。
3.如权利要求1所述的医用电子内窥镜图像处理控制系统，其特征在于，还包括图像处理器和图像生成器；
所述图像处理器被配置为对所述存储器同时输出的亮度图像进行数字增强处理；
所述图像生成器被配置为将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
4.如权利要求1所述的医用电子内窥镜图像处理控制系统，其特征在于，还包括图像信号处理分配单元；
所述图像信号处理分配单元被配置为接收所述第一亮度图像、所述第二亮度图像以及所述第三亮度图像并分别分配至所述红色通道、绿色通道以及蓝色通道。
5.如权利要求1所述的医用电子内窥镜图像处理控制系统，其特征在于，所述光源照明调节器包括光源复合模组、第一二向分色镜、第二二向分色镜、第一光源模组、第二光源模组以及导光棒；
所述内窥镜系统控制器控制所述光源复合模组、所述第一光源模组和/或所述第二光源模组组合形成所述第一组合光、所述第二组合光以及所述第三组合光；
所述光源复合模组的出射光透过所述第一二向分色镜和第二二向分色镜到达所述导光棒；
所述第一光源模组的出射光经所述第一二向分色镜反射后通过所述第二二向分色镜到达所述导光棒，所述第二光源模组的出射光经所述第二二向分色镜反射后到达所述导光棒。
6.如权利要求5所述的医用电子内窥镜图像处理控制系统，其特征在于，所述光源复合模组出射400-760nm的白光、415nm紫蓝光、450nm蓝光、525nm绿光、630nm红光以及720nm红光，所述第一光源模组出射405nm，所述第二光源模组出射850nm光。
7.一种医用电子内窥镜图像处理控制方法，其特征在于，包括：
控制光源照明调节器输出第一组合光，图像传感器将对应第一组合光的第一亮度图像保存到第一存储器；
控制光源照明调节器输出第二组合光，图像传感器将对应第二组合光的第二亮度图像保存到第二存储器；
控制光源照明调节器输出第三组合光，图像传感器将对应第三组合光的第三亮度图像保存到第三存储器；
从第一存储器、第二存储器和第三存储器提取亮度图像构成一个完整图像；其中，第一亮度图像构成所述完整图像的红色通道，第二亮度图像构成所述完整图像的绿色通道，第三亮度图像构成所述完整图像的蓝色通道；
并且，以下条件至少满足一个：
第一组合光中包括不属于红光的其他颜色的光，
第二组合光中包括不属于绿光的其他颜色的光，
第三组合光中包括不属于蓝光的其他颜色的光。
8.如权利要求7所述的医用电子内窥镜图像处理控制方法，其特征在于，所述从第一存储器、第二存储器和第三存储器提取亮度图像构成一个完整图像之后还包括：
图像处理器对所述存储器同时输出的亮度图像进行数字增强处理并输出至图像生成器；
所述图像生成器将经数字增强处理的亮度图像与内镜影像合成并输出至显示器。
9.如权利要求7所述的医用电子内窥镜图像处理控制方法，其特征在于，还包括：
图像信号处理分配单元接收所述第一亮度图像、所述第二亮度图像以及所述第三亮度图像并分别分配至所述第一存储器、所述第二存储器以及所述第三存储器。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如权利要求7至9中任意一项所述的方法中的步骤。
CN202310534823.1A 2023-05-10 2023-05-10 医用电子内窥镜图像处理控制系统及方法 Pending CN116548894A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310534823.1A CN116548894A (zh) 2023-05-10 2023-05-10 医用电子内窥镜图像处理控制系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310534823.1A CN116548894A (zh) 2023-05-10 2023-05-10 医用电子内窥镜图像处理控制系统及方法

Publications (1)

Publication Number Publication Date
CN116548894A true CN116548894A (zh) 2023-08-08

Family

ID=87491184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310534823.1A Pending CN116548894A (zh) 2023-05-10 2023-05-10 医用电子内窥镜图像处理控制系统及方法

Country Status (1)

Country Link
CN (1) CN116548894A (zh)

Similar Documents

Publication Publication Date Title
JP6749473B2 (ja) 内視鏡システム及びその作動方法
JP6057921B2 (ja) 生体観察装置
JP3022377B2 (ja) 胃腸および呼吸器官における特有蛍光を使用した罹病組織を検出する映像システム
JP4147033B2 (ja) 内視鏡装置
CN109068945B (zh) 图像处理装置、图像处理装置的工作方法及记录介质
US8939901B2 (en) Endoscope apparatus for outputting signals corresponding to first and second narrowband wavelength bands
JP4855728B2 (ja) 照明装置及び観察装置
JP6140056B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP5496075B2 (ja) 内視鏡診断装置
US20120179050A1 (en) Endoscope diagnosis system
US20190379840A1 (en) Masking approach for imaging multi-peak fluorophores by an imaging system
WO2017216883A1 (ja) 内視鏡装置
US20130006109A1 (en) Endoscope apparatus
JP6234375B2 (ja) 観察装置
WO2017104046A1 (ja) 内視鏡装置
JP6876810B2 (ja) 内視鏡用光源装置及び内視鏡システム
Morimoto et al. Development of a new generation endoscope system with lasers “LASEREO”
CN116548894A (zh) 医用电子内窥镜图像处理控制系统及方法
US20220351350A1 (en) Endoscope processor, method for operating endoscope processor, and storage medium
WO2022071413A1 (ja) 画像処理装置、内視鏡システム、画像処理装置の作動方法、及び画像処理装置用プログラム
CN114431818A (zh) 成像装置及胶囊内窥镜
JP2017153978A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP7090706B2 (ja) 内視鏡装置、内視鏡装置の作動方法及びプログラム
Dremel General principles of endoscopic imaging
JP7090705B2 (ja) 内視鏡装置、内視鏡装置の作動方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination