CN113920037A - 一种内窥镜画面矫正方法、装置、矫正系统及存储介质 - Google Patents

一种内窥镜画面矫正方法、装置、矫正系统及存储介质 Download PDF

Info

Publication number
CN113920037A
CN113920037A CN202111523846.XA CN202111523846A CN113920037A CN 113920037 A CN113920037 A CN 113920037A CN 202111523846 A CN202111523846 A CN 202111523846A CN 113920037 A CN113920037 A CN 113920037A
Authority
CN
China
Prior art keywords
endoscope
correction
video image
original
rgb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111523846.XA
Other languages
English (en)
Other versions
CN113920037B (zh
Inventor
王迎智
周毅
董先公
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jixian Artificial Intelligence Co Ltd
Original Assignee
Jixian Artificial Intelligence Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jixian Artificial Intelligence Co Ltd filed Critical Jixian Artificial Intelligence Co Ltd
Priority to CN202111523846.XA priority Critical patent/CN113920037B/zh
Publication of CN113920037A publication Critical patent/CN113920037A/zh
Application granted granted Critical
Publication of CN113920037B publication Critical patent/CN113920037B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G06T5/90—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10068—Endoscopic image

Landscapes

  • Endoscopes (AREA)

Abstract

本发明提供一种内窥镜画面矫正方法、装置、矫正系统及存储介质，属于医疗器械领域。应用于矫正系统包括的影像系统主机，包括：获得内窥镜所拍摄的原始视频图像；确定原始视频图像中每个像素点中RGB三色各自对应的分量；基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；将修正参数存储到内窥镜中，以使内窥镜基于修正参数和原始颜色矫正参数，对原始视频图像进行颜色矫正。使用本发明提供的内窥镜画面矫正方法，通过修正参数和颜色矫正参数共同对图像进行颜色矫正，解决了由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真的问题。

Description

一种内窥镜画面矫正方法、装置、矫正系统及存储介质
技术领域
本发明实施例涉及医疗器械领域，具体而言，涉及一种内窥镜画面矫正方法、装置、矫正系统及存储介质。
背景技术
内窥镜在图像矫正过程中，一般是通过色彩校正矩阵（Color correctionmatrix，以下简称CCM）中的原始颜色矫正参数直接对图像进行调整，但是由于内窥镜镜头加工差异，导致红色、绿色、蓝色（Red Green Blue,以下简称RGB）三色的透光率不一致以及光源色温差异，从而导致色彩以及白平衡失真，因此，内窥镜在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真是亟待解决的问题。
发明内容
本发明实施例在于提供一种内窥镜画面矫正方法、装置、矫正系统及存储介质，旨在解决内窥镜在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真的问题。
本发明实施例第一方面提供一种内窥镜画面矫正方法，应用于矫正系统包括的影像系统主机，包括：
获得待矫正的内窥镜所拍摄的原始视频图像；
确定原始视频图像中每个像素点中RGB三色各自对应的分量；
基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；
将修正参数存储到内窥镜中，以使内窥镜基于修正参数和原始颜色矫正参数，对内窥镜所拍摄的原始视频图像进行颜色矫正。
可选地，基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数，包括：
基于每个像素点中RGB三色各自对应的分量，确定原始视频图像中RGB三色各自对应的分量平均值；
基于原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值；
基于原始视频图像中RGB三色各自对应的分量平均值和最大分量平均值，确定对原始颜色矫正参数进行矫正的修正参数。
可选地，修正参数包括与RGB三色各自对应的修正子参数。
可选地，矫正系统还包括滤镜、内窥镜及导光束，内窥镜和导光束分别与影像系统主机连接，滤镜设置在内窥镜和导光束之间；
获得待矫正的内窥镜所拍摄的原始视频图像，包括：
获取待矫正的内窥镜采集的原始视频；
获取原始视频中包括的任意一帧视频图像，并截取视频图像的光亮区域，其中，光亮区域的灰度值大于预设阈值；
将目标区域作为原始视频图像。
可选地，原始颜色矫正参数为三阶单位矩阵，三阶单位矩阵中每一行的数值和相等。
可选地，三阶单位矩阵中每一行的数值和为1。
可选地，基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数之后，方法还包括：
获得内窥镜拍摄的原始视频流；
对原始视频流中的每个视频帧，基于修正参数和原始颜色矫正参数，对该视频帧的画面的颜色进行矫正；
基于矫正后的视频帧，生成矫正后的视频流。
可选地，基于修正参数和原始颜色矫正参数，对内窥镜所拍摄的原始视频图像进行颜色矫正的步骤，包括：
基于修正参数和原始颜色矫正参数，得到新的颜色矫正参数；
在获得原始视频图像时，将原始视频图像中每个像素点中RGB三色各自对应的分量，与新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对内窥镜所拍摄的原始视频图像进行颜色矫正。
本发明第二方面提供一种矫正系统，包括影像系统主机：
影像系统主机用于执行如本发明第一方面提供的内窥镜画面矫正方法。
可选地，系统还包括内窥镜、滤镜和导光束；
内窥镜和导光束分别与影像系统主机连接，滤镜设置在内窥镜和导光束之间。
可选地，滤镜包括中灰镜，导光束与中灰镜垂直设置。
可选地，系统还包括显示设备，显示设备用于显示进行颜色矫正后的视频图像。
本发明第三方面提供一种内窥镜画面矫正装置，包括：
第一获取模块：用于获得待矫正的内窥镜所拍摄的原始视频图像；
第一确定模块：用于确定原始视频图像中每个像素点中RGB三色各自对应的分量；
第二确定模块：基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；
矫正模块：用于将修正参数存储到内窥镜中，以使内窥镜基于修正参数和原始颜色矫正参数，对内窥镜所拍摄的原始视频图像进行矫正。
可选地，第二确定模块包括：
第一确定单元：基于每个像素点中RGB三色各自对应的分量，确定原始视频图像中RGB三色各自对应的分量平均值；
第二确定单元：用于基于原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值；
第三确定单元：用于基于原始视频图像中RGB三色各自对应的分量平均值和最大分量平均值，确定对原始颜色矫正参数进行矫正的修正参数。
可选地，修正参数包括与RGB三色各自对应的修正子参数。
可选地，矫正系统还包括滤镜、内窥镜及导光束，内窥镜和导光束分别与影像系统主机连接，中灰镜设置在内窥镜和导光束之间；
第一获取模块包括：
第一获取单元：用于获取待矫正的内窥镜采集的原始视频；
第二获取单元：用于获取原始视频中包括的任意一帧视频图像，并截取视频图像的光亮区域，其中，光亮区域的灰度值大于预设阈值；
第四确定单元：用于将目标区域作为原始视频图像。
可选地，原始颜色矫正参数为三阶单位矩阵，三阶单位矩阵中每一行的数值和相等。
可选地，三阶单位矩阵中每一行的数值和为1。
可选地，装置还包括：
第二获取模块：用于获得内窥镜拍摄的原始视频流；
矫正模块：用于对原始视频流中的每个视频帧，基于所述修正参数和所述原始颜色矫正参数，对该视频帧的画面的颜色进行矫正；
生成模块：基于矫正后的视频帧，生成矫正后的视频流。
可选地，矫正模块包括：
第三获取单元：基于修正参数和原始颜色矫正参数，得到新的颜色矫正参数；
第一矫正单元：用于在获得原始视频图像时，将原始视频图像中每个像素点中RGB三色各自对应的分量，与新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对内窥镜所拍摄的原始视频图像进行颜色矫正。
本发明第四方面提供一种可读存储介质，可读存储介质上存储有内窥镜画面矫正控制程序，内窥镜画面矫正控制程序被处理器执行时实现如本发明第一方面提供的内窥镜画面矫正方法。
有益效果：
本发明提供的内窥镜画面矫正方法，通过获得待矫正的内窥镜所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，从而修正由于色温差异以及镜头对RGB三色的透光率不一致的问题，提高了图像显示质量，以此解决了“内窥镜在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明一实施例提出的内窥镜画面矫正方法的流程图；
图2是本发明一实施例提出的矫正系统的结构示意图；
图3是本发明一实施例提出的内窥镜画面矫正装置的结构框图。
附图标记说明：41、内窥镜；43、影像系统主机；4392、导光束；49、中灰镜。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
相关技术中，一般是通过CCM中的原始颜色矫正参数直接对图像进行调整，但是由于内窥镜镜头加工差异，导致RGB三色的透光率不一致以及光源色温差异，从而导致色彩以及白平衡失真，因此，内窥镜在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真是亟待解决的问题。
有鉴于此，本发明提供的内窥镜画面矫正方法，通过获得待矫正的内窥镜所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，以此解决了“内窥镜在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
实施例一
参照图1，示出了本发明一种内窥镜画面矫正方法的流程图，如图1所示，本发明的内窥镜画面矫正方法，包括以下步骤：
步骤S1：获得待矫正的内窥镜41所拍摄的原始视频图像；其中，原始视频图像是未经过内窥镜41的原始颜色矫正参数矫正的图像。
本实施例中，原始颜色矫正参数是预先设置的矫正参数，矫正参数用于根据需求针对图像中某种颜色进行颜色增强或削弱，矫正参数有多组，每组矫正参数具有不同的颜色矫正效果，矫正参数的数量根据实际需求确定，在此不做限定。
在一种实施方式中，内窥镜41所拍摄的视频图像未经过原始颜色矫正参数矫正，获得待矫正的内窥镜41所拍摄的原始视频图像。
Figure 80853DEST_PATH_IMAGE001
为RGB的输出值，
Figure 591468DEST_PATH_IMAGE002
为内窥镜41所拍摄图像中每个像素的RGB值，
Figure 636785DEST_PATH_IMAGE002
与原始颜色矫正参数的乘积就是
Figure 500836DEST_PATH_IMAGE001
。
步骤S2：确定原始视频图像中每个像素点中RGB三色各自对应的分量。
根据原始视频图像，确定原始视频图像中每个像素点中红色、绿色和蓝色各自对应的分量。
步骤S3：基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数。
根据原始视频图像中每个像素点中红色、绿色和蓝色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，修正参数是对光源和镜头色偏进行纠正的一个修正比例。
步骤S4：将修正参数存储到内窥镜41中，以使内窥镜41基于修正参数和原始颜色矫正参数，对所述内窥镜41所拍摄的原始视频图像进行颜色矫正。
将修正参数存储到内窥镜41中的存储器中，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对所拍摄的视频图像进行颜色矫正。
本发明提供的内窥镜画面矫正方法，通过获得待矫正的内窥镜41所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜41中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，以此解决了“内窥镜41在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
基于上述内窥镜画面矫正方法，本发明提供以下一些具体可实施方式的示例，在互不抵触的前提下，各个示例之间可任意组合，以形成又一种内窥镜画面矫正方法，应当理解的，对于由任意示例所组合形成的又一种内窥镜画面矫正方法，均应落入本发明的保护范围。
在一种可行的实施方式中，基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数，包括以下步骤：
步骤S31：基于每个像素点中RGB三色各自对应的分量，确定原始视频图像中RGB三色各自对应的分量平均值。
基于每个像素点中RGB三色各自对应的分量，分别对每个像素点中红色、绿色和蓝色对应的分量相加求和，以分别获取每个像素点红色对应的分量之和、绿色对应的分量之和以及蓝色对应的分量之和，将所述各分量之和除以像素点的个数，进而确定原始视频图像中分别红色对应的分量平均值、绿色对应的分量平均值以及蓝色对应的分量平均值。
例如，假定RGB三色各自对应的分量平均值分别是R为117，G为163，B为137。
步骤S32：基于原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值。
原始视频图像中分别红色对应的分量平均值、绿色对应的分量平均值以及蓝色对应的分量平均值中值最大的那一个即为最大分量平均值。
同样以上述具体数值为例，该最大分量平均值可以是163。
步骤S33：基于原始视频图像中RGB三色各自对应的分量平均值和最大分量平均值，确定对原始颜色矫正参数进行矫正的修正参数；修正参数包括与RGB三色各自对应的修正子参数。
将最大分量平均值作为基准，按照下式计算出RGB三色各自对应修正子参数：
Figure 643104DEST_PATH_IMAGE003
其中，
Figure 731146DEST_PATH_IMAGE004
是最大分量平均值，R是红色对应的分量平均值，G是绿色对应的分量平均值，B是蓝色对应的分量平均值，
Figure 467021DEST_PATH_IMAGE005
是对R分量进行调整的修正系数，
Figure 993817DEST_PATH_IMAGE006
是对G分量进行调整的修正系数，
Figure 928275DEST_PATH_IMAGE007
是对B分量进行调整的修正系数。
同样以上述具体数值为例，计算K值,并保留两位小数，保留的位数越多越不容易造成数据失真，推导过程为了计算方便，只保留两位小数，后边若有数据失真，主要是因为保留小数位数不够导致的。则根据上述系数K的计算公式可以得到：
Figure 390480DEST_PATH_IMAGE008
，
Figure 472706DEST_PATH_IMAGE009
，
Figure 475297DEST_PATH_IMAGE010
。
在一种可行的实施方式中，矫正系统还包括滤镜、内窥镜及导光束，内窥镜和导光束分别与影像系统主机连接，中灰镜设置在内窥镜和导光束之间。
获得待矫正的内窥镜41所拍摄的原始视频图像，包括以下步骤：
步骤S11：获取待矫正的内窥镜采集的原始视频。
第一、关闭gamma校准，gamma会导致图像亮度变化，增加噪声，影响调试数据。
第二、设置曝光模式为手动曝光，曝光时间为20ms，设置增益为0。曝光时间过长会导致过渡曝光，影响调试数据。
第三、设置原始颜色矫正参数，
Figure 467524DEST_PATH_IMAGE011
。
第四、关闭实验室内的其他光源，保证整个测试环境中只有内窥镜光源发光。
第五、内窥镜采集原始视频。
步骤S12：获取原始视频中包括的任意一帧视频图像，并截取视频图像的光亮区域，其中，光亮区域的灰度值大于预设阈值。
在获取的原始视频中截取任意一帧视频图像，并截取获取的任意一帧视频图像的光亮区域，光亮区域的灰度值大于预设阈值，预设阈值的范围可以在200-255之间。
步骤S13：将目标区域作为原始视频图像。
将截取后的光亮区域作为原始视频图像。
在一种可行的实施方式中，原始颜色矫正参数为三阶单位矩阵，三阶单位矩阵中每一行的数值和相等。
示例的，下式为原始颜色矫正参数对应的三阶单位矩阵。
其中，
Figure 225264DEST_PATH_IMAGE012
Figure 732469DEST_PATH_IMAGE013
Figure 210855DEST_PATH_IMAGE014
分别为R分量对应的参数值，
Figure 447801DEST_PATH_IMAGE015
Figure 48546DEST_PATH_IMAGE016
Figure 980730DEST_PATH_IMAGE017
分别为G分量对应的参数值，
Figure 655950DEST_PATH_IMAGE018
Figure 419506DEST_PATH_IMAGE019
Figure 394416DEST_PATH_IMAGE020
分别为B分量对应的参数值。
Figure 938530DEST_PATH_IMAGE021
为了保证RGB的色彩均衡，三阶单位矩阵中每一行的数值和相等，否则白平衡就会不正常。
例如，三阶单位矩阵可以是：
Figure 86614DEST_PATH_IMAGE022
在一种可行的实施方式中，三阶单位矩阵中每一行的数值和为1。
L为三阶单位矩阵中每一行的数值和，当L值大于1时，图像整体发亮，容易过曝且噪点变多；当L值小于1时，图像整体变暗，影响显示效果。
本另一种可行的实施方式中，基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数之后，方法包括以下步骤：
步骤S6：获得内窥镜41拍摄的原始视频流。
内窥镜41所拍摄的视频流中每个视频帧经过原始颜色矫正参数矫正后，获得内窥镜41所拍摄的原始视频流。
步骤S7：对原始视频流中的每个视频帧，基于修正参数和原始颜色矫正参数，对该视频帧的画面的颜色进行矫正。
通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对每个视频帧进行颜色矫正。
步骤S8：基于矫正后的视频帧，生成矫正后的视频流。
基于每个矫正后的视频帧，生成矫正后的视频流，以完成对视频流的颜色矫正。
在一种可行的实施方式中，基于修正参数和原始颜色矫正参数，对内窥镜41所拍摄的原始视频图像进行颜色矫正的步骤，包括以下步骤：
步骤S41：基于修正参数和原始颜色矫正参数，得到新的颜色矫正参数。
步骤S42：获得原始视频图像时，将原始视频图像中每个像素点中RGB三色各自对应的分量，与新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对内窥镜41所拍摄的原始视频图像进行颜色矫正。
当内窥镜41拍摄的原始视频图像经过下式的矩阵运算后，整幅图像就成为了经过原始颜色矫正参数矫正后的图像。
Figure 642360DEST_PATH_IMAGE023
Figure 178384DEST_PATH_IMAGE024
其中，
Figure 881898DEST_PATH_IMAGE025
Figure 505777DEST_PATH_IMAGE026
Figure 243926DEST_PATH_IMAGE027
分别为内窥镜41拍摄的视频图像中红色、绿色和蓝色对应的RGB值，
Figure 950851DEST_PATH_IMAGE028
Figure 79344DEST_PATH_IMAGE029
Figure 569231DEST_PATH_IMAGE030
分别为经过原始颜色矫正参数矫正后红色、绿色和蓝色的RGB的输出值。
加上了修正参数之后的矩阵如下式所示：
Figure 958624DEST_PATH_IMAGE031
Figure 711816DEST_PATH_IMAGE032
同样以上述具体数值为例，加上了修正参数之后的矩阵如下式所示：
Figure 389922DEST_PATH_IMAGE033
通过矩阵运算，得到下式中的矩阵：
Figure 745817DEST_PATH_IMAGE034
Figure 396242DEST_PATH_IMAGE035
由此可知，将原始颜色矫正参数对应的矩阵与修正参数的乘积，可以得到新的颜色矫正参数，将原始视频图像中每个像素点中RGB三色各自对应的分量，与新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对内窥镜41所拍摄的原始视频图像进行颜色矫正。
同样以上述具体数值为例，通过矩阵运算，得到下式中的矩阵：
Figure 851494DEST_PATH_IMAGE036
Figure 79213DEST_PATH_IMAGE037
实施例二
基于同一发明构思，本发明另一实施例提供一种矫正系统，参照图2，示出了矫正系统的结构示意图，如图2所示，一种矫正系统包括：
影像系统主机43；影像系统主机43用于执行如本发明第一方面提供的内窥镜画面矫正方法。
本发明提供的矫正系统，通过获得待矫正的内窥镜41所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜41中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，以此解决了“内窥镜41在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
在一种可行的实施方式中，矫正系统还包括内窥镜41、滤镜和导光束4392；内窥镜41和导光束4392分别与影像系统主机43连接，滤镜设置在内窥镜41和导光束4392之间。
影像系统主机43中的光源通过导光束4392引出，将将导光束4392接头对准内窥镜41镜头，将导光束接头直射镜头的目的是，排除其他可能导致光源颜色变化的因素；示例的，导光束4392接头与内窥镜41镜头之间的距离为30mm，将滤镜放置在内窥镜41与导光束4392接头之间的目的是，降低光源入射到内窥镜41时的亮度，更好地模拟光源照射物体时的光线亮度。
在其中一种可行的实施方式中，滤镜包括中灰镜49，导光束与中灰镜49垂直设置。
中灰镜49是一种无色至灰色的摄影滤镜，中灰镜49可以减弱所有波长的光的亮度，而不会发生偏色，其参数可选10%-25%，优选13%、14%、15%。
在一种可行的实施方式中，矫正系统还包括显示设备，显示设备用于显示进行颜色矫正后的视频图像，通过显示设备可以直接观察进行颜色矫正后的视频图像。
实施例三
基于同一发明构思，本发明另一实施例提供一种内窥镜画面矫正装置，所述内窥镜画面矫正装置用于执行如本发明实施例一提供的内窥镜画面矫正方法；参照图3，示出了内窥镜画面矫正装置的结构框图，如图3所示，内窥镜画面矫正装置包括：
第一获取模块11：用于获得待矫正的内窥镜41所拍摄的原始视频图像；
第一确定模块12：用于确定原始视频图像中每个像素点中RGB三色各自对应的分量；
第二确定模块13：基于每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；
矫正模块14：用于将修正参数存储到内窥镜41中，以使内窥镜41基于修正参数和原始颜色矫正参数，对内窥镜41所拍摄的原始视频图像进行矫正。
本发明提供的内窥镜画面矫正装置，通过获得待矫正的内窥镜41所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜41中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，以此解决了“内窥镜41在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
在一种可行的实施方式中，第二确定模块13包括：
第一确定单元131：基于每个像素点中RGB三色各自对应的分量，确定原始视频图像中RGB三色各自对应的分量平均值；
第二确定单元132：用于基于原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值；
第三确定单元133：用于基于原始视频图像中RGB三色各自对应的分量平均值和最大分量平均值，确定对原始颜色矫正参数进行矫正的修正参数。
在一种可行的实施方式中，修正参数包括与RGB三色各自对应的修正子参数。
在一种可行的实施方式中，矫正系统还包括滤镜、内窥镜及导光束，内窥镜和导光束分别与影像系统主机连接，中灰镜设置在内窥镜和导光束之间；
第一获取模块包括：
第一获取单元：用于获取待矫正的内窥镜采集的原始视频；
第二获取单元：用于获取原始视频中包括的任意一帧视频图像，并截取视频图像的光亮区域，其中，光亮区域的灰度值大于预设阈值；
第四确定单元：用于将目标区域作为原始视频图像。
在一种可行的实施方式中，原始颜色矫正参数为三阶单位矩阵，三阶单位矩阵中每一行的数值和相等。
在一种可行的实施方式中，三阶单位矩阵中每一行的数值和为1。
在一种可行的实施方式中，内窥镜画面矫正装置还包括；
第二获取模块16：用于获得内窥镜41拍摄的原始视频流；
矫正模块17：用于对原始视频流中的每个视频帧，基于所述修正参数和所述原始颜色矫正参数，对该视频帧的画面的颜色进行矫正；
生成模块18：基于矫正后的视频帧，生成矫正后的视频流。
在另一种可行的实施方式中，矫正模块17包括：
第一获取单元171：基于修正参数和原始颜色矫正参数，得到新的颜色矫正参数；
第一矫正单元172：用于在获得原始视频图像时，将原始视频图像中每个像素点中RGB三色各自对应的分量，与新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对内窥镜41所拍摄的原始视频图像进行颜色矫正。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
实施例四
本发明实施例还提供了一种可读存储介质，可读存储介质上存储有内窥镜画面矫正控制程序，内窥镜画面矫正控制程序被处理器执行时实现如本发明第一方面提供的内窥镜画面矫正方法。
本发明提供的一种可读存储介质，通过获得待矫正的内窥镜41所拍摄的原始视频图像，根据原始视频图像，确定原始视频图像中每个像素点中RGB三色各自对应的分量，根据原始视频图像中每个像素点中RGB三色各自对应的分量，确定对原始颜色矫正参数进行矫正的修正参数，将修正参数存储到内窥镜41中的存储器中，修正参数是对光源和镜头色偏进行纠正的一个修正比例，通过修正参数对原始颜色矫正参数进行修正，得到修正后的颜色矫正参数，内窥镜41通过修正后的颜色矫正参数对所拍摄的原始视频图像进行颜色矫正，以此解决了“内窥镜41在图像矫正过程中，由于光源色温差异以及内窥镜镜头对RGB三色的透光率不一致，而导致色彩以及白平衡失真”的问题。
应当理解地，本发明说明书尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
以上对本发明所提供的一种内窥镜画面矫正方法、装置、矫正系统及存储介质，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (21)

1.一种内窥镜画面矫正方法，其特征在于，应用于矫正系统包括的影像系统主机，所述方法包括：
获得待矫正的内窥镜所拍摄的原始视频图像；
确定所述原始视频图像中每个像素点中RGB三色各自对应的分量；
基于所述每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；
将所述修正参数存储到所述内窥镜中，以使所述内窥镜基于所述修正参数和所述原始颜色矫正参数，对所述内窥镜所拍摄的原始视频图像进行颜色矫正。
2.根据权利要求1所述的方法，其特征在于，基于所述每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数，包括：
基于所述每个像素点中RGB三色各自对应的分量，确定所述原始视频图像中RGB三色各自对应的分量平均值；
基于所述原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值；
基于所述原始视频图像中RGB三色各自对应的分量平均值和所述最大分量平均值，确定对所述原始颜色矫正参数进行矫正的所述修正参数。
3.根据权利要求1至2任一所述的方法，其特征在于，所述修正参数包括与RGB三色各自对应的修正子参数。
4.根据权利要求1所述的方法，其特征在于，所述矫正系统还包括滤镜、所述内窥镜及导光束，所述内窥镜和所述导光束分别与所述影像系统主机连接，所述滤镜设置在所述内窥镜和所述导光束之间；
获得待矫正的内窥镜所拍摄的原始视频图像，包括：
获取待矫正的所述内窥镜采集的原始视频；
获取所述原始视频中包括的任意一帧视频图像，并截取所述视频图像的光亮区域，其中，所述光亮区域的灰度值大于预设阈值；
将所述目标区域作为所述原始视频图像。
5.根据权利要求1所述的方法，其特征在于，所述原始颜色矫正参数为三阶单位矩阵，所述三阶单位矩阵中每一行的数值和相等。
6.根据权利要求5所述的方法，其特征在于，所述三阶单位矩阵中每一行的数值和为1。
7.根据权利要求1所述的方法，其特征在于，基于所述每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数之后，所述方法还包括：
获得所述内窥镜拍摄的原始视频流；
对所述原始视频流中的每个视频帧，基于所述修正参数和所述原始颜色矫正参数，对该视频帧的画面的颜色进行矫正；
基于矫正后的视频帧，生成矫正后的视频流。
8.根据权利要求1所述的方法，其特征在于，所述基于所述修正参数和所述原始颜色矫正参数，对所述内窥镜所拍摄的原始视频图像进行颜色矫正的步骤，包括：
基于所述修正参数和所述原始颜色矫正参数，得到新的颜色矫正参数；
在获得所述原始视频图像时，将所述原始视频图像中每个像素点中RGB三色各自对应的分量，与所述新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对所述内窥镜所拍摄的原始视频图像进行颜色矫正。
9.一种矫正系统，其特征在于，包括影像系统主机；所述影像系统主机用于执行如权利要求1-8任一所述的内窥镜画面矫正方法。
10.根据权利要求9所述的系统，其特征在于，所述系统还包括内窥镜、滤镜和导光束；
所述内窥镜和所述导光束分别与所述影像系统主机连接，所述滤镜设置在所述内窥镜和所述导光束之间。
11.根据权利要求10所述的系统，其特征在于，所述滤镜包括中灰镜，所述导光束与所述中灰镜垂直设置。
12.根据权利要求10所述的系统，其特征在于，所述系统还包括显示设备，所述显示设备用于显示进行颜色矫正后的视频图像。
13.一种内窥镜画面矫正装置，其特征在于，所述装置包括：
第一获取模块：用于获得待矫正的内窥镜所拍摄的原始视频图像；
第一确定模块：用于确定所述原始视频图像中每个像素点中RGB三色各自对应的分量；
第二确定模块：基于所述每个像素点中RGB三色各自对应的分量，确定对预先设置的原始颜色矫正参数进行矫正的修正参数；
矫正模块：用于将所述修正参数存储到所述内窥镜中，以使所述内窥镜基于所述修正参数和所述原始颜色矫正参数，对所述内窥镜所拍摄的原始视频图像进行矫正。
14.根据权利要求13所述的装置，其特征在于，所述第二确定模块包括：
第一确定单元：基于所述每个像素点中RGB三色各自对应的分量，确定所述原始视频图像中RGB三色各自对应的分量平均值；
第二确定单元：用于基于所述原始视频图像中RGB三色各自对应的分量平均值，确定最大分量平均值；
第三确定单元：用于基于所述原始视频图像中RGB三色各自对应的分量平均值和所述最大分量平均值，确定对所述原始颜色矫正参数进行矫正的所述修正参数。
15.根据权利要求13至14任一所述的装置，其特征在于，所述修正参数包括与RGB三色各自对应的修正子参数。
16.根据权利要求13所述的装置，其特征在于，所述矫正系统还包括滤镜、所述内窥镜及导光束，所述内窥镜和所述导光束分别与所述影像系统主机连接，所述中灰镜设置在所述内窥镜和所述导光束之间；
所述第一获取模块包括：
第一获取单元：用于获取待矫正的所述内窥镜采集的原始视频；
第二获取单元：用于获取所述原始视频中包括的任意一帧视频图像，并截取所述视频图像的光亮区域，其中，所述光亮区域的灰度值大于预设阈值；
第四确定单元：用于将所述目标区域作为所述原始视频图像。
17.根据权利要求13所述的装置，其特征在于，所述原始颜色矫正参数为三阶单位矩阵，所述三阶单位矩阵中每一行的数值和相等。
18.根据权利要求17所述的装置，其特征在于，所述三阶单位矩阵中每一行的数值和为1。
19.根据权利要求13所述的装置，其特征在于，所述装置还包括：
第二获取模块：用于获得所述内窥镜拍摄的原始视频流；
矫正模块：用于对所述原始视频流中的每个视频帧，基于所述修正参数和所述原始颜色矫正参数，对该视频帧的画面的颜色进行矫正；
生成模块：基于矫正后的视频帧，生成矫正后的视频流。
20.根据权利要求13所述的装置，其特征在于，所述矫正模块包括：
第三获取单元：基于所述修正参数和所述原始颜色矫正参数，得到新的颜色矫正参数；
第一矫正单元：用于在获得所述原始视频图像时，将所述原始视频图像中每个像素点中RGB三色各自对应的分量，与所述新的颜色矫正参数相乘，得到每个像素点中RGB三色各自对应的矫正后分量，以实现对所述内窥镜所拍摄的原始视频图像进行颜色矫正。
21.一种可读存储介质，其特征在于，所述可读存储介质上存储有内窥镜画面矫正程序，所述内窥镜画面矫正程序被处理器执行时实现如权利要求1-8任一项所述的内窥镜画面矫正方法。
CN202111523846.XA 2021-12-14 2021-12-14 一种内窥镜画面矫正方法、装置、矫正系统及存储介质 Active CN113920037B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111523846.XA CN113920037B (zh) 2021-12-14 2021-12-14 一种内窥镜画面矫正方法、装置、矫正系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111523846.XA CN113920037B (zh) 2021-12-14 2021-12-14 一种内窥镜画面矫正方法、装置、矫正系统及存储介质

Publications (2)

Publication Number Publication Date
CN113920037A true CN113920037A (zh) 2022-01-11
CN113920037B CN113920037B (zh) 2022-04-12

Family

ID=79249116

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111523846.XA Active CN113920037B (zh) 2021-12-14 2021-12-14 一种内窥镜画面矫正方法、装置、矫正系统及存储介质

Country Status (1)

Country Link
CN (1) CN113920037B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114549368A (zh) * 2022-04-25 2022-05-27 华伦医疗用品(深圳)有限公司 一种基于图像传感器的内窥镜成像系统及方法
CN115174876A (zh) * 2022-04-12 2022-10-11 北京印刷学院 一种医用内窥镜成像颜色分析与校正用色标设计与制作方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105448230A (zh) * 2014-08-12 2016-03-30 西安诺瓦电子科技有限公司 基于人眼视觉的led显示装置亮色度校正方法及系统
CN107730471A (zh) * 2017-10-26 2018-02-23 北京农业智能装备技术研究中心 一种针对秧苗长势监测的叶片图像色彩矫正方法和装置
CN111064963A (zh) * 2019-11-11 2020-04-24 北京迈格威科技有限公司 图像数据解码方法、装置、计算机设备和存储介质
CN111583127A (zh) * 2020-04-03 2020-08-25 浙江大华技术股份有限公司 人脸肤色校正方法、装置、计算机设备和可读存储介质
CN111866483A (zh) * 2020-07-06 2020-10-30 Oppo广东移动通信有限公司 颜色还原方法及装置、计算机可读介质和电子设备
CN112752023A (zh) * 2020-12-29 2021-05-04 深圳市天视通视觉有限公司 一种图像调整方法、装置、电子设备及存储介质
CN113099191A (zh) * 2021-03-22 2021-07-09 浙江大华技术股份有限公司 一种图像处理方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105448230A (zh) * 2014-08-12 2016-03-30 西安诺瓦电子科技有限公司 基于人眼视觉的led显示装置亮色度校正方法及系统
CN107730471A (zh) * 2017-10-26 2018-02-23 北京农业智能装备技术研究中心 一种针对秧苗长势监测的叶片图像色彩矫正方法和装置
CN111064963A (zh) * 2019-11-11 2020-04-24 北京迈格威科技有限公司 图像数据解码方法、装置、计算机设备和存储介质
CN111583127A (zh) * 2020-04-03 2020-08-25 浙江大华技术股份有限公司 人脸肤色校正方法、装置、计算机设备和可读存储介质
CN111866483A (zh) * 2020-07-06 2020-10-30 Oppo广东移动通信有限公司 颜色还原方法及装置、计算机可读介质和电子设备
CN112752023A (zh) * 2020-12-29 2021-05-04 深圳市天视通视觉有限公司 一种图像调整方法、装置、电子设备及存储介质
CN113099191A (zh) * 2021-03-22 2021-07-09 浙江大华技术股份有限公司 一种图像处理方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115174876A (zh) * 2022-04-12 2022-10-11 北京印刷学院 一种医用内窥镜成像颜色分析与校正用色标设计与制作方法
CN115174876B (zh) * 2022-04-12 2023-08-11 北京印刷学院 一种医用内窥镜成像颜色分析与校正用色标设计与制作方法
CN114549368A (zh) * 2022-04-25 2022-05-27 华伦医疗用品(深圳)有限公司 一种基于图像传感器的内窥镜成像系统及方法

Also Published As

Publication number Publication date
CN113920037B (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
CN110505459B (zh) 适用于内窥镜的图像颜色校正方法、装置和存储介质
CN113920037B (zh) 一种内窥镜画面矫正方法、装置、矫正系统及存储介质
US10630906B2 (en) Imaging control method, electronic device and computer readable storage medium
TWI520126B (zh) 影像修正資料產生系統、影像修正資料產生方法、影像修正資料產生程式及影像修正電路
JP2019121252A (ja) 画像処理方法、画像処理装置、画像処理プログラム、および、記憶媒体
US8442347B2 (en) Information processing apparatus, information processing method, program, and imaging apparatus including optical microscope
CN108270977A (zh) 控制方法及装置、成像设备、计算机设备及可读存储介质
US8310499B2 (en) Balancing luminance disparity in a display by multiple projectors
CN107396079B (zh) 白平衡调整方法和装置
CN108307098B (zh) 鱼眼相机阴影校正参数确定方法、校正方法及装置、鱼眼相机
JP2015186247A (ja) 画像処理装置及びその制御方法、並びに、プログラム
WO2020107995A1 (zh) 成像方法和装置、电子设备、计算机可读存储介质
CN114240782A (zh) 图像校正方法、系统及电子设备
JP2022525853A (ja) 結合前ノイズ除去による高ダイナミックレンジ画像生成
JP7075773B2 (ja) 画像処理装置、顕微鏡システム、画像処理方法および画像処理プログラム
CN114331907A (zh) 颜色阴影校正方法及装置
JPWO2016194234A1 (ja) 画像処理装置、撮像装置、顕微鏡システム、画像処理方法、及び画像処理プログラム
CN104010134B (zh) 用于形成具有宽动态范围的系统和方法
GB2460241A (en) Correction of optical lateral chromatic aberration
CN114359055B (zh) 一种多相机拍摄屏体的图像拼接方法及相关装置
JP5173664B2 (ja) 画像処理装置及び画像処理方法
JP2019145097A (ja) 設定装置及び方法、プログラム、記憶媒体
JP4432479B2 (ja) 画像処理装置
JP7311995B2 (ja) 画像処理装置及び画像処理方法、プログラム、記憶媒体
JP6115410B2 (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant