CN112884688B - 一种图像融合方法、装置、设备及介质 - Google Patents

一种图像融合方法、装置、设备及介质 Download PDF

Info

Publication number
CN112884688B
CN112884688B CN202110151369.2A CN202110151369A CN112884688B CN 112884688 B CN112884688 B CN 112884688B CN 202110151369 A CN202110151369 A CN 202110151369A CN 112884688 B CN112884688 B CN 112884688B
Authority
CN
China
Prior art keywords
value
determining
pixel point
image
infrared image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110151369.2A
Other languages
English (en)
Other versions
CN112884688A (zh
Inventor
曹绪民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202110151369.2A priority Critical patent/CN112884688B/zh
Publication of CN112884688A publication Critical patent/CN112884688A/zh
Application granted granted Critical
Publication of CN112884688B publication Critical patent/CN112884688B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种图像融合方法、装置、设备及介质，用以解决现有技术中进行图像融合时，容易出现颜色畸变、颜色偏色的问题。由于在本发明实施例中，根据采集的红外图像的RGB值以及彩色图像的RGB值，确定红外图像的调整R值；从而有效地考虑到颜色域对于图像融合的影响，有效地解决了图像融合时出现的颜色畸变、颜色偏色的现象。

Description

一种图像融合方法、装置、设备及介质
技术领域
本发明涉及图像处理技术领域，尤其涉及一种图像融合方法、装置、设备及介质。
背景技术
随着社会的发展，人们生活水平逐渐提高，当前对图像采集设备的要求也越来越高，然而图像采集设备采集的彩色图像质量常常很差，主要表现为画面亮度低，噪声大。夜间红外图像的亮度和细节信息都远好于彩色图像，然而红外图像具有像素分辨率低、图像边缘模糊等缺点。因此可以将红外图像和彩色图像进行融合，以获取高质量的图像。
现有技术在融合红外图像及彩色图像时，分别针对红外图像及彩色图像进行RGB域处理及YUV域处理，再进行融合。图1为本发明实施例提供的现有技术获取融合图像的过程示意图。首先获取红外图像，并通过滤光片获取彩色图像，在获取红外图像和彩色图像后，通过RGB域处理处理红外图像及彩色图像，在RGB域处理后通过YUV域处理，获取处理后的红外图像及彩色图像每个像素点的YUV值，根据红外图像每个像素点的YUV值及彩色图像每个像素点的YUV值，两路图像分别经过RGB和YUV域处理后，得到YUV格式的两路图像，经过两路Y通道融合后，与彩色图像的UV通道一起组成最终的融合图像，即可实现红外图像及彩色图像的融合。
因为红外图像会接收到红外光以及可见光，彩色图像只会接收到可见光，所以两路的亮度会有比较明显的差异。尤其是在红外光反射比较强的区域，经过RGB域处理和YUV域处理之后，红外图像和彩色图像的亮度差异会更加明显。若是亮度差异较大的区域颜色比较鲜艳，融合后的颜色偏色现象就更为明显，很容易出现颜色畸变的问题。
发明内容
本发明提供了一种图像融合方法、装置、设备及介质，用以解决现有技术中进行图像融合时，容易出现颜色畸变、颜色偏色的问题。
第一方面，本发明实施例提供了一种图像融合方法，所述方法包括：
接收同一时刻采集的同一场景的红外图像及彩色图像；
针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
第二方面，本发明实施例提供了一种图像融合装置，所述装置包括：
接收模块，用于接收同一时刻采集的同一场景的红外图像及彩色图像；
确定模块，用于针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
处理模块，用于对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
第三方面，本发明实施例提供了一种电子设备，所述电子设备至少包括处理器和存储器，所述处理器用于执行存储器中存储的计算机程序时执行上述任一所述图像融合方法的步骤。
第四方面，本发明实施例提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时执行上述任一所述图像融合方法的步骤。
由于在本发明实施例中，根据采集的红外图像的RGB值以及彩色图像的RGB值，确定红外图像的调整R值；从而有效地考虑到颜色域对于图像融合的影响，有效地解决了图像融合时出现的颜色畸变、颜色偏色的现象。
附图说明
为了更清楚地说明本发明的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的现有技术获取融合图像的过程示意图；
图2为本发明实施例提供了一种图像融合方法过程示意图；
图3为本发明实施例提供的获取融合图像的详细实施示意图；
图4为本发明实施例提供的一种图像融合装置结构示意图；
图5为本发明实施例提供的一种电子设备。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图本发明作进一步地详细描述，显然，所描述的实施例仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为了获取效果佳的融合后的图像，本发明实施例提供了一种图像融合方法、装置、设备及介质。
实施例1：
图2为本发明实施例提供了一种图像融合方法过程示意图，该过程包括以下步骤：
S201：接收同一时刻采集的同一场景的红外图像及彩色图像。
本发明实施例提供的图像融合方法应用于电子设备，该电子设备可以是图像采集设备、PC或服务器等智能设备。
在本发明实施例中，针对接收到的红外图像及彩色图像进行融合。为了准确地进行图像融合，红外图像及彩色图像为同一时刻采集的同一场景的图像。并且在本发明实施例中，为了有效地获取红外图像及彩色图像，通过双目相机进行图像的采集。双目相机中其中任一目相机安装有滤光片，通过滤光片滤除环境中的红外光，获取彩色图像。双目相机中另外一目相机获取当前场景的红外图像。并且将红外图像及彩色图像调整为尺寸相同的图像。
S202：针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的第二R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值。
由于滤光片在过滤红外光的同时，也过滤了部分红色波段的光，导致彩色图像和红外图像在红色分量较多的区域会有差异，因此在本发明实施例中对红外图像的红色分量进行调整，以便保持红外图像中红色分量的比值。具体的，在本发明实施例中，针对红外图像中每个像素点，调整该像素点的R值，获取该像素点的调整后的R值，为了便于区分，在本发明实施例中，将该像素点调整后的R值称为该像素点的调整R值。并且在确定红外图像中该像素点的调整R值时，首先获取红外图像中该像素点的第一G值及第一B值，及彩色图像中该像素点的R值，第二G值及第二B值。并根据上述第一G值、第一B值、R值、第二G值及第二B值，确定红外图像中该像素点的调整R值。进而准确地实现红外图像中每个像素点的红色分量的调整即R值的调整。其中，R值、G值B值分别指的是红色分量、绿色分量以及蓝色分量的值。
S203：对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
为了准确地实现红外图像及彩色图像的融合，在本发明实施例中对彩色图像及调整了R值的红外图像进行YUV域处理，确定彩色图像每个像素点的YUV值及调整了R值的红外图像中每个像素点的YUV值，根据红外图像的YUV值及彩色图像的YUV值，对红外图像进行调整。在红外图像调整后，融合彩色图像及调整后的红外图像。
由于在本发明实施例中，根据采集的红外图像的RGB值以及彩色图像的RGB值，确定红外图像的调整R值；从而有效地考虑到颜色域对于图像融合的影响，有效地解决了图像融合时出现的颜色畸变、颜色偏色的现象。
实施例2：
为了获取效果佳的融合后的图像，在上述实施例的基础上，在本发明实施例中，所述根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值包括：
确定所述R值、所述第二G值及所述第二B值的第一和值；
确定所述第一G值及所述第一B值的第二和值；
根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
为了准确地确定红外图像每个像素点的调整后的R值，在本发明实施例中，针对红外图像中的每个像素点，根据该像素点的第一G值、第一B值及彩色图像中该像素点的R值、第二G值及第二B值，确定红外图像中该像素点的调整R值。具体的，在确定红外图像该像素点的调整R值时，首先确定彩色图像该像素点的R值、第二G值及第二B值的第一和值，并且在确定第一和值时，确定第一G值与第一B值的第二和值。根据R值、第一和值及第二和值，确定红外图像该像素点的调整R值。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值包括：
确定所述R值与所述第一和值的第一比值；
确定所述第一比值与所述第二和值的第一乘积；确定第一设定数值与所述第一比值的第一差值；
将所述第一乘积与所述第一差值的第二比值确定为所述红外图像该像素点的调整R值。
为了准确地确定红外图像每个像素点的调整后的R值，在本发明实施例中，根据R值、第一和值及第二和值确定红外图像该像素点的调整R值时，首先确定R值与第一和值的第一比值。并且在确定第一比值后，确定第一比值与第一和值的第一乘积，并且确定第一设定数值与第一比值的第一差值。在本发明实施例中，该第一设定数值为1。并且在确定第一差值后，将第一乘积与第一差值确定的第二比值，确定为红外图像该像素点的调整R值。
具体的，确定红外图像该像素点的调整R值的公式为：
R_iradj(x)＝[R_ratio(x)(B_ir(x)+G_ir(x))]/[1-R_ratio(x)]；
R_ratio(x)＝R_color(x)/(R_color(x)+G_color(x)+B_color(x))；
其中，R_ratio(x)为本发明实施例中的第一比值，G_ir(x)为红外图像该像素点x的G通道的值即本发明实施例中的第一G值，B_ir(x)为红外图像该像素点的B通道的值即本发明实施例中的第一B值，R_color(x)为彩色图像该像素点的R通道的值即本发明实施例中的R值，G_color(x)为彩色图像该像素点的G通道的值即本发明实施例中的第二G值，B_color(x)为彩色图像该像素点的B通道的值即本发明实施例中的第二B值。
并且由于红外图像的调整R值以该第一比值为参考值进行调整，因此该第一比值既是彩色图像该像素点的红色分量表征值，也可以做为红外图像的红色分量调整参考值。红外图像的该像素点的调整R值以该红色分量调整参考值即该第一比值为参考，进行调整。
R_ratio(x)＝R_color(x)/(R_color(x)+G_color(x)+B_color(x))；
由于要将红外图像的红色分量比例与彩色图像保持一致，因此R_ratio(x)＝R_iradj(x)/(R_iradj(x)+G_ir(x)+B_ir(x))。因此在确定红外图像该像素点的调整R值时，根据公式R_color(x)/(R_color(x)+G_color(x)+B_color(x))＝R_iradj(x)/(R_iradj(x)+G_ir(x)+B_ir(x))，来确定红外图像每个像素点的调整R值R_iradj(x)。
实施例3：
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述对所述彩色图像及调整了R值的红外图像进行YUV域处理之后，所述融合所述彩色图像及调整后的红外图像之前，所述方法还包括：
针对每个像素点，获取所述调整了R值的红外图像中该像素点的第一Y值、第一U值，及彩色图像中该像素点的第二Y值、第二U值及V值；根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值。
在本发明实施例中，调整完红外图像的R值后，为了获取效果佳的融合后的图像，还需对红外图像的亮度值进行调整。因此在调整完红外图像的R值后，针对红外图像的每个像素点的亮度值进行调整。在确定红外图像中每个像素点调整亮度值时，针对调整了R值的红外图像中每个像素点，获取红外图像该像素点的第一Y值、第一U值及彩色图像该像素点的第二Y值、第二U值及V值，并根据红外图像该像素点的第一Y值、第一U值及彩色图像该像素点的第二Y值、第二U值及V值，确定红外图像该像素点的调整Y值。为了便于区分，在本发明实施例中，将该像素点调整后的亮度值称为该像素点的调整亮度值。其中，Y值指的是亮度值，U值及V值分别指UV通道的值。
具体的，在确定调整了R值的红外图像后，首先通过YUV域处理，获取调整了R值的红外图像的该像素点的第一Y值、第一U值及彩色图像中该像素点的第二Y值、第二U值及V值。并且根据第一Y值、第一U值、第二Y值、第二U值及V值，确定红外图像该像素点的调整Y值。为了便于区分，在本发明实施例中，将该像素点调整后的Y值称为该像素点的调整Y值。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值包括：
根据所述第二U值及所述V值，确定所述彩色图像中该像素点的颜色系数；
将所述第一Y值与所述第二Y值的第二差值确定为该像素点的亮度差；若所述亮度差大于零，则确定所述亮度差与所述颜色系数的第二乘积，将所述第一Y值与所述第二乘积的差确定为该像素点的调整Y值。
在本发明实施例中，在确定该像素点的调整Y值时，首先根据彩色图像该像素点的第二U值及V值，确定彩色图像中该像素点的颜色系数。
由于在同一场景下，红外图像的亮度通常大于彩色图像的亮度，因此在本发明实施例中，只考虑红外图像比彩色图像亮的区域。首先获取该像素点的第一Y值与第二Y值的第二差值，并将第二差值确定为该像素点的亮度差，当亮度差大于零时，说明红外图像中该像素点的亮度值大于彩色图像中该像素点的亮度值，则确定亮度差与上述确定的颜色系数的乘积，将该乘积作为第二乘积，并确定第一Y值与第二乘积的差为该像素点的调整Y值。
其中，当该像素点的亮度差大于零时，该像素点的调整Y值为：
Y_iradj(x)＝Y_ir(x)-Y_diff(x)*Uvalue(x)，Y_diff(x)＝Y_ir(x)-Y_color(x)。
其中，Y_iradj(x)为该像素点的调整Y值，Y_ir(x)为红外图像该像素点的Y值即本发明实施例中的第一Y值，Y_color(x)为彩色图像该像素点的Y通道的值即第二Y值，Y_diff(x)为该像素点的亮度差即第二差值，Uvalue(x)为该像素点的颜色系数。
由于对于饱和度较高的区域，红外图像的亮度应该尽量接近彩色图像的亮度。并且颜色系数与饱和度具有一定的关联关系，也就是说，当Uvalue越大时，Y_diff应该越小。因此通过上述方式可以准确的确定红外图像的调整Y值。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述根据所述第二U值及所述V值确定所述彩色图像的该像素点的颜色系数包括：
确定所述第二U值减去第二设定数值的第三差值；及所述V减去第二设定数值的第四差值；
确定所述第三差值的绝对值与所述第四差值的绝对值的和值，为所述彩色图像中该像素点的颜色系数。
在本发明实施例中，在确定彩色图像该像素点的颜色系数时，首先确定第二U值减去第二设定数值的第三差值，以及V值减去第二设定数值的第四差值。
并且在确定第三差值及第四差值后，获取第三差值的绝对值及第四差值的绝对值的和值，确定该和值为彩色图像该像素点的颜色系数。
Uvalue(x)＝|u(x)-0.5|+|v(x)-0.5|
其中，u(x)和v(x)分别为彩色图像中该像素点的u和v通道的值，即本发明实施例中的第二U值及V值。并且由于同一像素点的u和v通道的值的和值为1，因此在本发明实施例中，将第二设定数值设为0.5。因为Uvalue的值域范围为[0-1]，所以红外图像调整后的亮度值不会低于彩色图像的亮度值，可以保证图像的亮度值正常。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述方法还包括：
若所述亮度差小于零，则确定所述第一Y值为该像素点的调整Y值。
在本发明实施例中，若红外图像该像素点的亮度值小于彩色图像该像素点的亮度值，即该像素点的亮度差小于零，则确定红外图像该像素点的亮度值为该像素点的调整Y值，即不对该像素点的亮度值进行调整。
根据上述描述可知，当该像素点的亮度差大于零时，该像素点的调整Y值为：
Y_iradj(x)＝Y_ir(x)-Y_diff(x)*Uvalue(x)，Y_diff(x)＝Y_ir(x)-Y_color(x)
因此，在本发明实施例中也可通过该公式确定该像素点的亮度差小于零时，该像素点的调整Y值。在该像素点的亮度差小于零时，该像素点的调整Y值在确定时只需将Y_diff的值置为0。
也就是说，在确定该像素点的调整Y值时，首先获取该像素点的亮度差，若该像素点的亮度差小于零，则将亮度差置为零。若该像素点的亮度差大于零，则不对该像素点的亮度差进行调整。
实施例4：
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述融合调整后的红外图像及所述彩色图像包括：
根据预先保存的亮度值与数字增益值的对应关系，确定所述第二Y值对应的目标数字增益值；根据预先保存的亮度值与比例值的对应关系，确定所述调整Y值对应的目标比例值；
根据所述目标比例值及所述目标数字增益值，确定融合比例值；
根据所述融合比例值、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值。
由于红外图像中每个像素点的红色分量和亮度值均已经进行了调整。获得的彩色图像和调整后的红外图像可以进行最后的融合处理。并且在本发明实施例中，在确定融合图像时，首先确定红外图像与彩色图像的融合比例值。在确定融合比例值时，在本发明实施例中，预先保存有亮度值与数字增益值的对应关系，及亮度值与比例值的对应关系，因此可以确定第二Y值对应的目标数字增益值及调整Y值对应的目标比例值。
根据确定的目标比例值及目标数字增益值即可确定红外图像及彩色图像的融合比例值。
在确定融合比例值后，根据融合比例值、调整Y值、第二Y值、第二U值及V值，即可确定该像素点融合后的Y、U、V值。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述根据所述目标比例值及所述目标数字增益值，确定融合比例值包括：
确定所述目标数字增益值与第三设定数值的第三比值；
确定所述第一设定数值与所述第三比值的第五差值，根据所述第五差值与所述目标比例值的乘积，确定融合比例值。
在本发明实施例中，在确定融合比例值时，首先确定目标增益值与第三设定数值的第三比值。并且由于预设的目标数字增益值的值域为[0-100]，因此第三设定数值为100。
并且在确定第三比值后，确定第一设定数值与第三比值的第五差值，在确定第五差值后，确定第五差值与目标比例值的乘积为融合比例值。
具体的，融合比例值的确定方式为：
fusion_ratioadj＝fusion_ratio*(1-gain/100)
fusion_ratioadj为融合比例值，fusion_ratio为目标比例值，1为本发明实施例中的第一设定数值，gain为目标数字增益值，100为本发明实施例中的第三设定数值。
为了获取效果佳的融合后的图像，在上述各实施例的基础上，在本发明实施例中，所述根据所述融合比例、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值包括：
确定所述第二U值及所述V值为该像素点融合后的U值及V值；
确定所述调整Y值与所述融合比例值的乘积为第三乘积；确定所述第一设定数值减去所述融合比例值的第六差值；确定所述第六差值与所述第二Y值的乘积为第四乘积；确定所述第三乘积与所述第四乘积的和值为该像素点融合后的Y值。
在本发明实施例中，在确定该像素点融合后的Y、U、V值时，由于彩色图像该像素点的U、V值可以很好地体现图像的色彩，因此确定彩色图像中该像素点的U、V通道的值为融合后的图像中该像素点的U值及V值。也就是确定该像素点的第二U值及V值为该像素点融合后的U值及V值。
并且在确定该像素点融合后的Y值时，确定调整Y值与融合比例值的乘积为第三乘积，第一设定数值减去融合比例值得到的差值为第六差值，并且在确定第六差值后，确定第六差值与第二Y值的乘积为第四乘积，并且第三乘积与第四乘积的和值即为该像素点融合后的Y值。
也就是说该像素点融合后的Y值的确定方式为：
Y_fusion(x)＝Y_iradj(x)*fusion_ratioadj+Y_color(x)*(1-fusion_ratioadj)
其中，Y_fusion(x)为该像素点融合后的Y值，Y_iradj(x)为红外图像该像素点的调整后的Y值即为调整Y值，fusion_ratioadj为该像素点的融合比例值，Y_color(x)为彩色图像该像素点的Y值即为第二Y值，1为第一设定数值。也就是说，在确定该像素点融合后的Y值时，是根据彩色图像及红外图像的比例进行确定的，红外图像亮度值的比例为fusion_ratioadj，彩色图像该像素点的亮度值的比例为1-fusion_ratioadj，也就是第六差值。
在本发明实施例中，还可通过比例值确定该像素点融合后的Y值。其中，通过比例值确定该像素点融合后的Y值时，确定方式为：
Y_fusion(x)＝Y_iradj(x)*fusion_ratio+Y_color(x)*(1-fusion_ratio)
其中，Y_fusion(x)为该像素点融合后的Y值，Y_iradj(x)为红外图像该像素点的调整Y值，fusion_ratio为比例值，Y_color(x)为彩色图像该像素点的Y值，即本发明实施例中的第二Y值。
由于环境光照越低，彩色图像的信噪比就越差，红外图像的融合比例就应该越高，并且在本发明实施例中，通过比例值来表示信噪比的影响，由于信噪比与该比例值具有一定的关联关系，信噪比又与亮度值具有一定的关联关系，因此在本发明实施例中预先保存有亮度值与比例值的关联关系，因此可以根据该像素点的亮度值获取该像素点的比例值，从而实现该像素点亮度值的融合。
此外，还可能出现由于红外补光不足等原因产生的红外图像质量较差的情况，为了防止影响最终的成像效果，应对比例值做一定的修正，修正的结果即为最终确定的融合比例值，数字增益值可以较好地反映当前环境亮度和图像的信噪比，所以融合比例应随着当前的数字增益值联动，根据不同增益值，设置不同的融合比例，当红外图像该像素点的数字增益较高时，应该降低红外图像该像素点的融合权重,以获得更好的融合效果。因此在本发明实施例中，可以准确的实现亮度值的融合。
图3为本发明实施例提供的获取融合图像的详细实施示意图。
在RGB色彩空间，计算彩色图像每个像素点的红色分量调整参考值，其中，该调整参考值即为本发明实施例中的第一比值；根据计算出的彩色图像每个像素点的红色分量调整值及红外图像，确定红外图像每个像素点的红色分量的调整值。
在对红外图像每个像素点的红色分量调整完毕后，在YUV色彩空间，计算红外图像每个像素点的亮度调整值，根据计算出的红外图像每个像素点的亮度调整值、彩色图像的亮度值、确定的融合比例值以及彩色图像的UV值，确定融合后每个像素点的YUV值，实现红外图像与彩色图像的融合。
实施例5：
图4为本发明实施例提供的一种图像融合装置结构示意图，该装置包括：
接收模块401，用于接收同一时刻采集的同一场景的红外图像及彩色图像；
确定模块402，针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
处理模块403，用于对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
在一种可能的实施方式中，所述确定模块402，具体用于确定所述R值、所述第二G值及所述第二B值的第一和值；确定所述第一G值及所述第一B值的第二和值；根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述确定模块402，具体用于确定所述R值与所述第一和值的第一比值；确定所述第一比值与所述第二和值的第一乘积；确定第一设定数值与所述第一比值的第一差值；将所述第一乘积与所述第一差值的第二比值确定为所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述处理模块403，具体用于针对每个像素点，获取所述调整了R值的红外图像中该像素点的第一Y值、第一U值，及彩色图像中该像素点的第二Y值、第二U值及V值；根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值。
在一种可能的实施方式中，所述处理模块403，具体用于根据所述第二U值及所述V值，确定所述彩色图像该像素点的颜色系数；将所述第一Y值与所述第二Y值的第二差值确定为该像素点的亮度差；若所述亮度差大于零，则确定所述亮度差与所述颜色系数的第二乘积，将所述第一Y值与所述第二乘积的差确定为该像素点的调整Y值。
在一种可能的实施方式中，所述处理模块403，具体用于确定所述第二U值减去第二设定数值的第三差值；及所述V减去第二设定数值的第四差值；确定所述第三差值的绝对值与所述第四差值的绝对值的和值，为所述彩色图像中该像素点的颜色系数。
在一种可能的实施方式中，所述处理模块403，具体用于若所述亮度差小于零，则确定所述第一Y值为该像素点的调整Y值。
在一种可能的实施方式中，所述处理模块403，具体用于根据预先保存的亮度值与数字增益值的对应关系，确定所述第二Y值对应的目标数字增益值；根据预先保存的亮度值与比例值的对应关系，确定所述调整Y值对应的目标比例值；根据所述目标比例值及所述目标数字增益值，确定融合比例值；根据所述融合比例值、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值。
在一种可能的实施方式中，所述处理模块403，具体用于确定所述目标数字增益值与第三设定数值的第三比值；确定所述第一设定数值与所述第三比值的第五差值，根据所述第五差值与所述目标比例值的乘积，确定融合比例值。
在一种可能的实施方式中，所述处理模块403，具体用于确定所述第二U值及所述V值为该像素点融合后的U值及V值；确定所述调整Y值与所述融合比例值的乘积为第三乘积；确定所述第一设定数值减去所述融合比例值的第六差值；确定所述第六差值与所述第二Y值的乘积为第四乘积；确定所述第三乘积与所述第四乘积的和值为该像素点融合后的Y值。
实施例6：
在上述各实施例的基础上，本发明实施例还提供了一种电子设备，如图5所示，包括：处理器501、通信接口502、存储器503和通信总线504，其中，处理器501，通信接口502，存储器503通过通信总线504完成相互间的通信。
所述存储器503中存储有计算机程序，当所述程序被所述处理器501执行时，使得所述处理器501执行如下步骤：
接收同一时刻采集的同一场景的红外图像及彩色图像；
针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
在一种可能的实施方式中，所述根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值包括：
确定所述R值、所述第二G值及所述第二B值的第一和值；
确定所述第一G值及所述第一B值的第二和值；
根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值包括：
确定所述R值与所述第一和值的第一比值；
确定所述第一比值与所述第二和值的第一乘积；确定第一设定数值与所述第一比值的第一差值；
将所述第一乘积与所述第一差值的第二比值确定为所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述对所述彩色图像及调整了R值的红外图像进行YUV域处理之后，所述融合调整后的红外图像及所述彩色图像之前，所述方法还包括：
针对每个像素点，获取所述调整了R值的红外图像中该像素点的第一Y值、第一U值，及彩色图像中该像素点的第二Y值、第二U值及V值；根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值。
在一种可能的实施方式中，所述根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值包括：
根据所述第二U值及所述V值，确定所述彩色图像该像素点的颜色系数；
将所述第一Y值与所述第二Y值的第二差值确定为该像素点的亮度差；若所述亮度差大于零，则确定所述亮度差与所述颜色系数的第二乘积，将所述第一Y值与所述第二乘积的差确定为该像素点的调整Y值。
在一种可能的实施方式中，所述根据所述第二U值及所述V值确定所述彩色图像该像素点的颜色系数包括：
确定所述第二U值减去第二设定数值的第三差值；及所述V减去第二设定数值的第四差值；
确定所述第三差值的绝对值与所述第四差值的绝对值的和值，为所述彩色图像中该像素点的颜色系数。
在一种可能的实施方式中，所述方法还包括：
若所述亮度差小于零，则确定所述第一Y值为该像素点的调整Y值。
在一种可能的实施方式中，所述融合调整后的红外图像及所述彩色图像包括：
根据预先保存的亮度值与数字增益值的对应关系，确定所述第二Y值对应的目标数字增益值；根据预先保存的亮度值与比例值的对应关系，确定所述调整Y值对应的目标比例值；
根据所述目标比例值及所述目标数字增益值，确定融合比例值；
根据所述融合比例值、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值。
在一种可能的实施方式中，所述根据所述目标比例值及所述目标数字增益值，确定融合比例值包括：
确定所述目标数字增益值与第三设定数值的第三比值；
确定所述第一设定数值与所述第三比值的第五差值，根据所述第五差值与所述目标比例值的乘积，确定融合比例值。
在一种可能的实施方式中，所述根据所述融合比例、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值包括：
确定所述第二U值及所述V值为该像素点融合后的U值及V值；
确定所述调整Y值与所述融合比例值的乘积为第三乘积；确定所述第一设定数值减去所述融合比例值的第六差值；确定所述第六差值与所述第二Y值的乘积为第四乘积；确定所述第三乘积与所述第四乘积的和值为该像素点融合后的Y值。
上述服务器提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口502用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器，包括中央处理器、网络处理器(NetworkProcessor，NP)等；还可以是数字指令处理器(Digital Signal Processing，DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
实施例7：
在上述各实施例的基础上，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有可由电子设备执行的计算机程序，当所述程序在所述电子设备上运行时，使得所述电子设备执行时实现如下步骤：
所述存储器中存储有计算机程序，当所述程序被所述处理器执行时，使得所述处理器执行如下步骤：
接收同一时刻采集的同一场景的红外图像及彩色图像；
针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像。
在一种可能的实施方式中，所述根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值包括：
确定所述R值、所述第二G值及所述第二B值的第一和值；
确定所述第一G值及所述第一B值的第二和值；
根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值包括：
确定所述R值与所述第一和值的第一比值；
确定所述第一比值与所述第二和值的第一乘积；确定第一设定数值与所述第一比值的第一差值；
将所述第一乘积与所述第一差值的第二比值确定为所述红外图像该像素点的调整R值。
在一种可能的实施方式中，所述对所述彩色图像及调整了R值的红外图像进行YUV域处理之后，所述融合调整后的红外图像及所述彩色图像之前，所述方法还包括：
针对每个像素点，获取所述调整了R值的红外图像中该像素点的第一Y值、第一U值，及彩色图像中该像素点的第二Y值、第二U值及V值；根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值。
在一种可能的实施方式中，所述根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值包括：
根据所述第二U值及所述V值，确定所述彩色图像该像素点的颜色系数；
将所述第一Y值与所述第二Y值的第二差值确定为该像素点的亮度差；若所述亮度差大于零，则确定所述亮度差与所述颜色系数的第二乘积，将所述第一Y值与所述第二乘积的差确定为该像素点的调整Y值。
在一种可能的实施方式中，所述根据所述第二U值及所述V值确定所述彩色图像该像素点的颜色系数包括：
确定所述第二U值减去第二设定数值的第三差值；及所述V减去第二设定数值的第四差值；
确定所述第三差值的绝对值与所述第四差值的绝对值的和值，为所述彩色图像中该像素点的颜色系数。
在一种可能的实施方式中，所述方法还包括：
若所述亮度差小于零，则确定所述第一Y值为该像素点的调整Y值。
在一种可能的实施方式中，所述融合调整后的红外图像及所述彩色图像包括：
根据预先保存的亮度值与数字增益值的对应关系，确定所述第二Y值对应的目标数字增益值；根据预先保存的亮度值与比例值的对应关系，确定所述调整Y值对应的目标比例值；
根据所述目标比例值及所述目标数字增益值，确定融合比例值；
根据所述融合比例值、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值。
在一种可能的实施方式中，所述根据所述目标比例值及所述目标数字增益值，确定融合比例值包括：
确定所述目标数字增益值与第三设定数值的第三比值；
确定所述第一设定数值与所述第三比值的第五差值，根据所述第五差值与所述目标比例值的乘积，确定融合比例值。
在一种可能的实施方式中，所述根据所述融合比例、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值包括：
确定所述第二U值及所述V值为该像素点融合后的U值及V值；
确定所述调整Y值与所述融合比例值的乘积为第三乘积；确定所述第一设定数值减去所述融合比例值的第六差值；确定所述第六差值与所述第二Y值的乘积为第四乘积；确定所述第三乘积与所述第四乘积的和值为该像素点融合后的Y值。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
对于系统/装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (12)

1.一种图像融合方法，其特征在于，所述方法包括：
接收同一时刻采集的同一场景的红外图像及彩色图像；
针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像；
其中，所述根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值包括：
确定所述R值、所述第二G值及所述第二B值的第一和值；
确定所述第一G值及所述第一B值的第二和值；
根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
2.根据权利要求1所述的方法，其特征在于，所述根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值包括：
确定所述R值与所述第一和值的第一比值；
确定所述第一比值与所述第二和值的第一乘积；确定第一设定数值与所述第一比值的第一差值；
将所述第一乘积与所述第一差值的第二比值确定为所述红外图像该像素点的调整R值。
3.根据权利要求1所述的方法，其特征在于，所述对所述彩色图像及调整了R值的红外图像进行YUV域处理之后，所述融合调整后的红外图像及所述彩色图像之前，所述方法还包括：
针对每个像素点，获取所述调整了R值的红外图像中该像素点的第一Y值、第一U值，及彩色图像中该像素点的第二Y值、第二U值及V值；根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值。
4.根据权利要求3所述的方法，其特征在于，所述根据所述第一Y值、所述第一U值、所述第二Y值、所述第二U值及所述V值，确定所述红外图像该像素点的调整Y值包括：
根据所述第二U值及所述V值，确定所述彩色图像该像素点的颜色系数；
将所述第一Y值与所述第二Y值的第二差值确定为该像素点的亮度差；若所述亮度差大于零，则确定所述亮度差与所述颜色系数的第二乘积，将所述第一Y值与所述第二乘积的差确定为该像素点的调整Y值。
5.根据权利要求4所述的方法，其特征在于，所述根据所述第二U值及所述V值确定所述彩色图像该像素点的颜色系数包括：
确定所述第二U值减去第二设定数值的第三差值；及所述V值减去第二设定数值的第四差值；
确定所述第三差值的绝对值与所述第四差值的绝对值的和值，为所述彩色图像中该像素点的颜色系数。
6.根据权利要求4所述的方法，其特征在于，所述方法还包括：
若所述亮度差小于零，则确定所述第一Y值为该像素点的调整Y值。
7.根据权利要求3所述的方法，其特征在于，所述融合调整后的红外图像及所述彩色图像包括：
根据预先保存的亮度值与数字增益值的对应关系，确定所述第二Y值对应的目标数字增益值；根据预先保存的亮度值与比例值的对应关系，确定所述调整Y值对应的目标比例值；
根据所述目标比例值及所述目标数字增益值，确定融合比例值；
根据所述融合比例值、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值。
8.根据权利要求7所述的方法，其特征在于，所述根据所述目标比例值及所述目标数字增益值，确定融合比例值包括：
确定所述目标数字增益值与第三设定数值的第三比值；
确定第一设定数值与所述第三比值的第五差值，根据所述第五差值与所述目标比例值的乘积，确定融合比例值。
9.根据权利要求8所述的方法，其特征在于，所述根据所述融合比例、所述调整Y值、所述第二Y值、所述第二U值及所述V值，确定该像素点融合后的Y、U、V值包括：
确定所述第二U值及所述V值为该像素点融合后的U值及V值；
确定所述调整Y值与所述融合比例值的乘积为第三乘积；确定所述第一设定数值减去所述融合比例值的第六差值；确定所述第六差值与所述第二Y值的乘积为第四乘积；确定所述第三乘积与所述第四乘积的和值为该像素点融合后的Y值。
10.一种图像融合装置，其特征在于，所述装置包括：
接收模块，用于接收同一时刻采集的同一场景的红外图像及彩色图像；
确定模块，用于针对每个像素点，获取红外图像中该像素点的第一G值及第一B值以及获取彩色图像中该像素点的R值、第二G值及第二B值；根据所述第一G值、第一B值、R值、第二G值及第二B值，确定所述红外图像该像素点的调整R值；
处理模块，用于对所述彩色图像及调整了R值的红外图像进行YUV域处理，并融合所述彩色图像及调整后的红外图像；
其中，所述确定模块，具体用于确定所述R值、所述第二G值及所述第二B值的第一和值；确定所述第一G值及所述第一B值的第二和值；根据所述R值、所述第一和值及所述第二和值，确定所述红外图像该像素点的调整R值。
11.一种电子设备，其特征在于，所述电子设备至少包括处理器和存储器，所述处理器用于执行存储器中存储的计算机程序时执行权利要求1-9中任一所述图像融合方法的步骤。
12.一种计算机可读存储介质，其特征在于，其存储有计算机程序，所述计算机程序被处理器执行时执行权利要求1-9中任一所述图像融合方法的步骤。
CN202110151369.2A 2021-02-03 2021-02-03 一种图像融合方法、装置、设备及介质 Active CN112884688B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110151369.2A CN112884688B (zh) 2021-02-03 2021-02-03 一种图像融合方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110151369.2A CN112884688B (zh) 2021-02-03 2021-02-03 一种图像融合方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN112884688A CN112884688A (zh) 2021-06-01
CN112884688B true CN112884688B (zh) 2024-03-29

Family

ID=76057076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110151369.2A Active CN112884688B (zh) 2021-02-03 2021-02-03 一种图像融合方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN112884688B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115527293B (zh) * 2022-11-25 2023-04-07 广州万协通信息技术有限公司 安全芯片基于人体特征开门的方法及安全芯片装置
CN116757988B (zh) * 2023-08-17 2023-12-22 齐鲁工业大学(山东省科学院) 基于语义丰富和分割任务的红外与可见光图像融合方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108419062A (zh) * 2017-02-10 2018-08-17 杭州海康威视数字技术股份有限公司 图像融合设备和图像融合方法
CN108694709A (zh) * 2017-04-12 2018-10-23 深圳市朗驰欣创科技股份有限公司 一种图像融合方法及装置
CN109272459A (zh) * 2018-08-20 2019-01-25 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110136183A (zh) * 2018-02-09 2019-08-16 华为技术有限公司 一种图像处理的方法以及相关设备
CN110378861A (zh) * 2019-05-24 2019-10-25 浙江大华技术股份有限公司 一种图像融合方法及装置
WO2020133027A1 (en) * 2018-12-27 2020-07-02 Zhejiang Dahua Technology Co., Ltd. Systems and methods for image fusion
CN111970432A (zh) * 2019-05-20 2020-11-20 华为技术有限公司 一种图像处理方法及图像处理装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108419062A (zh) * 2017-02-10 2018-08-17 杭州海康威视数字技术股份有限公司 图像融合设备和图像融合方法
CN108694709A (zh) * 2017-04-12 2018-10-23 深圳市朗驰欣创科技股份有限公司 一种图像融合方法及装置
CN110136183A (zh) * 2018-02-09 2019-08-16 华为技术有限公司 一种图像处理的方法以及相关设备
CN109272459A (zh) * 2018-08-20 2019-01-25 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
WO2020133027A1 (en) * 2018-12-27 2020-07-02 Zhejiang Dahua Technology Co., Ltd. Systems and methods for image fusion
CN111970432A (zh) * 2019-05-20 2020-11-20 华为技术有限公司 一种图像处理方法及图像处理装置
CN110378861A (zh) * 2019-05-24 2019-10-25 浙江大华技术股份有限公司 一种图像融合方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于NSST变换域KFE与DUM-PCNN的伪彩色图像融合;王峰等;西北工业大学学报;第35卷(第4期);第698-703页 *
结合NSST和颜色对比度增强的彩色夜视方法;吴燕燕;王亚杰;石祥滨;王琳霖;;光电工程(第11期);第88-94页 *

Also Published As

Publication number Publication date
CN112884688A (zh) 2021-06-01

Similar Documents

Publication Publication Date Title
CN109712102B (zh) 一种图像融合方法、装置及图像采集设备
US9852499B2 (en) Automatic selection of optimum algorithms for high dynamic range image processing based on scene classification
CN112884688B (zh) 一种图像融合方法、装置、设备及介质
WO2013157201A1 (ja) 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体
US10652523B2 (en) Multi-sensor video camera, and a method and processing pipeline for the same
JP6472869B2 (ja) 周囲光に基づく画像調整
US20200082508A1 (en) Information processing method, information processing apparatus, and recording medium
CN108717691B (zh) 一种图像融合方法、装置、电子设备及介质
US9214034B2 (en) System, device and method for displaying a harmonized combined image
CN109040596B (zh) 一种调整摄像头的方法、移动终端及存储介质
CN106485670A (zh) 图像处理设备及图像处理方法
WO2020029679A1 (zh) 控制方法、装置、成像设备、电子设备及可读存储介质
CN106031156A (zh) 一种拍摄补光的控制方法、装置及终端
CN111209775A (zh) 信号灯图像处理方法、装置、设备及存储介质
CN116823628A (zh) 一种图像处理方法和图像处理装置
US9704222B2 (en) Image processing apparatus
CN112991163B (zh) 一种全景图像的获取方法、装置及设备
CN114584700A (zh) 对焦标记方法、标记装置以及电子设备
CN110807735A (zh) 图像处理方法、装置、终端设备及计算机可读存储介质
CN114445314A (zh) 一种图像融合方法、装置、电子设备及存储介质
JP2013162339A (ja) 撮像装置
TW202218403A (zh) 在低光條件下擷取的顏色著色圖元的校正
Yang et al. Correction of overexposure utilizing haze removal model and image fusion technique
CN110493579B (zh) 一种彩色透雾方法、装置、摄像机及图像处理系统
CN111405177B (zh) 图像处理方法、终端及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant