CN112767281B - 图像鬼影消除方法、装置、电子设备及存储介质 - Google Patents

图像鬼影消除方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112767281B
CN112767281B CN202110142644.4A CN202110142644A CN112767281B CN 112767281 B CN112767281 B CN 112767281B CN 202110142644 A CN202110142644 A CN 202110142644A CN 112767281 B CN112767281 B CN 112767281B
Authority
CN
China
Prior art keywords
image
pixel point
pixel
processed
motion area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110142644.4A
Other languages
English (en)
Other versions
CN112767281A (zh
Inventor
汪涵默
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Pinecone Electronic Co Ltd
Original Assignee
Beijing Xiaomi Pinecone Electronic Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Pinecone Electronic Co Ltd filed Critical Beijing Xiaomi Pinecone Electronic Co Ltd
Priority to CN202110142644.4A priority Critical patent/CN112767281B/zh
Publication of CN112767281A publication Critical patent/CN112767281A/zh
Application granted granted Critical
Publication of CN112767281B publication Critical patent/CN112767281B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T5/80—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/269—Analysis of motion using gradient-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Abstract

本申请公开了一种图像鬼影消除方法、装置、电子设备及存储介质，该方法包括获取待处理图像的运动区域和非运动区域；在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，并将所述第一像素点的像素值替换为所述第二像素点的像素值。由于非运动区域不存在鬼影干扰，使得位于其中的像素点具有准确的像素值，因此本申请借用处于非运动区域的第二像素点的像素值来替换处于运动区域的第一像素点的像素值，从而能够有效消除图像鬼影，同时该第二像素点和第一像素点都位于同一帧图像，像素点之间过渡自然，不会有突兀感，提升了成片质量。

Description

图像鬼影消除方法、装置、电子设备及存储介质
技术领域
本申请一般涉及图像处理技术领域，具体涉及一种图像鬼影消除方法、装置、电子设备及存储介质。
背景技术
曝光融合是获取高动态范围(High Dynamic Range，HDR)图像的方法之一，其通过获取不同曝光时间的低动态范围图像来合成高动态范围图像。但是，由于各帧低动态范围图像在成像时存在时间间隔，如果拍摄场景中有运动物体，则会出现鬼影现象。
目前，相关技术采用将低动态范围图像中运动区域的权重置为零的方式进行鬼影消除。然而构建权重对应的高斯金字塔时，需要不断下采样和高斯模糊底层金字塔，使得高层金字塔运动区域的权重始终不能为零，最终在成片上留有鬼影。
发明内容
鉴于相关技术中的上述缺陷或不足，期望提供一种图像鬼影消除方法、装置、电子设备及存储介质，能够有效地消除图像鬼影，从而提升成片质量。
第一方面，本申请提供一种图像鬼影消除方法，所述方法包括：
获取待处理图像的运动区域和非运动区域；
在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，并将所述第一像素点的像素值替换为所述第二像素点的像素值。
可选地，在本申请一些实施例中，所述在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，包括：
根据所述运动区域内第一像素点的第一坐标，在参考图像中定位所述第一坐标对应的第三像素点；
在所述参考图像中确定与所述第三像素点最相似的第四像素点；
根据所述第四像素点的第二坐标，在所述待处理图像中将所述第二坐标对应的像素点作为所述第二像素点。
可选地，在本申请一些实施例中，所述在所述参考图像中确定与所述第三像素点最相似的第四像素点，包括：
遍历所述参考图像的非运动区域，搜索与所述第三像素点相似度最大的第四像素点，所述参考图像的非运动区域与所述待处理图像的非运动区域相同。
可选地，在本申请一些实施例中，所述获取待处理图像的运动区域和非运动区域，包括：
计算所述待处理图像和参考图像中相同位置像素点的梯度方向差值；其中，所述待处理图像的运动区域中的像素点对应的所述差值大于或者等于第一预设阈值，所述待处理图像的非运动区域中的像素点对应的所述差值小于所述第一预设阈值。
可选地，在本申请一些实施例中，所述参考图像通过如下方式得到：
在不同曝光时间的拍摄图像所组成的图像序列中，分别获取各所述拍摄图像上每个像素点的灰度值，并统计所述灰度值处于预设范围的像素点数目，其中所述拍摄图像包括所述待处理图像；
若所述像素点数目大于或者等于第二预设阈值，选择所述像素点数目对应的拍摄图像作为所述参考图像。
第二方面，本申请提供一种图像鬼影消除装置，所述装置包括：
获取模块，配置用于获取待处理图像的运动区域和非运动区域；
消除模块，配置用于在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，并将所述第一像素点的像素值替换为所述第二像素点的像素值。
可选地，在本申请一些实施例中，所述消除模块包括：
定位单元，配置用于根据所述运动区域内第一像素点的第一坐标，在参考图像中定位所述第一坐标对应的第三像素点；
第一确定单元，配置用于在所述参考图像中确定与所述第三像素点最相似的第四像素点；
第二确定单元，配置用于根据所述第四像素点的第二坐标，在所述待处理图像中将所述第二坐标对应的像素点作为所述第二像素点。
可选地，在本申请一些实施例中，所述第一确定单元还配置用于：
遍历所述参考图像的非运动区域，搜索与所述第三像素点相似度最大的第四像素点，所述参考图像的非运动区域与所述待处理图像的非运动区域相同。
可选地，在本申请一些实施例中，所述获取模块还配置用于：
计算所述待处理图像和参考图像中相同位置像素点的梯度方向差值；其中，所述待处理图像的运动区域中的像素点对应的所述差值大于或者等于第一预设阈值，所述待处理图像的非运动区域中的像素点对应的所述差值小于所述第一预设阈值。
可选地，在本申请一些实施例中，所述装置还包括：
筛选模块，配置用于在不同曝光时间的拍摄图像所组成的图像序列中，分别获取各所述拍摄图像上每个像素点的灰度值，并统计所述灰度值处于预设范围的像素点数目，其中所述拍摄图像包括所述待处理图像；
若所述像素点数目大于或者等于第二预设阈值，选择所述像素点数目对应的拍摄图像作为所述参考图像。
第三方面，本申请提供一种电子设备，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述指令、所述程序、所述代码集或所述指令集由所述处理器加载并执行以实现如第一方面中任意一项所述的图像鬼影消除方法的步骤。
第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如第一方面中任意一项所述的图像鬼影消除方法的步骤。
从以上技术方案可以看出，本申请实施例具有以下优点：
本申请实施例提供了一种图像鬼影消除方法、装置、电子设备及存储介质，通过获取待处理图像的运动区域和非运动区域，并在待处理图像的非运动区域中，确定与运动区域内第一像素点最相似的第二像素点，进而将该第一像素点的像素值替换为第二像素点的像素值。由于非运动区域不存在鬼影干扰，使得位于其中的像素点具有准确的像素值，因此本申请实施例借用处于非运动区域的第二像素点的像素值来替换处于运动区域的第一像素点的像素值，从而能够有效消除图像鬼影，同时该第二像素点和第一像素点都位于同一帧图像，像素点之间过渡自然，不会有突兀感，提升了成片质量。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1为本申请实施例提供的一种图像鬼影消除方法的基本流程示意图；
图2为本申请实施例提供的一种梯度方向的示意图；
图3为本申请实施例提供的一种第二像素点的确定方式示意图；
图4为本申请实施例提供的另一种第二像素点的确定方式示意图；
图5为本申请实施例提供的一种图像鬼影消除方法的成片结果示意图；
图6为本申请实施例提供的一种图像鬼影消除装置的基本结构示意图；
图7为本申请实施例提供的另一种图像鬼影消除装置的结构示意图；
图8为本申请实施例提供的又一种图像鬼影消除装置的结构示意图；
图9为本申请实施例提供的一种电子设备的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
此外，术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块。
为了便于理解和说明，下面通过图1至图9详细的阐述本申请实施例提供的图像鬼影消除方法、装置、电子设备及存储介质。
请参考图1，其为本申请实施例提供的一种图像鬼影消除方法的基本流程示意图。该方法包括如下步骤：
S101，获取待处理图像的运动区域和非运动区域。
需要说明的是，现实场景中最大亮度与最小亮度的比值称为动态范围。由于数字成像设备的动态范围远小于自然场景，而如果场景明暗变化过大，则图像中将不可避免地会出现过度曝光或者曝光不足的失真区域。作为获取高动态范围图像的方法之一，曝光融合根据不同曝光时间的图像亮度和对比度等参数来确定融合权重，并基于图像对应的拉普拉斯金字塔和融合权重对应的高斯金字塔得到融合图像。
然而真实场景往往存在运动物体，加之各帧图像在成像时又有时间间隔，这就会造成拍摄图像中出现鬼影现象，即对应于运动区域。其中，该运动区域的确定方式可以包括但不限于如下两种：
第一种方式，本申请实施例可以通过人工来划定待处理图像中运动区域和非运动区域。第二种方式，本申请实施例可以通过筛选不同曝光时间的拍摄图像所组成的图像序列，确定出参考图像，其中拍摄图像包括该待处理图像，由此保证了待处理图像与参考图像之间具有关联性。然后，计算待处理图像和参考图像中相同位置像素点的梯度方向差值；其中，待处理图像的运动区域中的像素点对应的差值大于或者等于第一预设阈值，而待处理图像的非运动区域中的像素点对应的差值小于第一预设阈值。这样设置的好处在于，当曝光时间不同时，图像中曝光未失真的像素点虽然灰度值大小不同，但由于待处理图像与参考图像的成像内容相同，那么处在相同位置的像素点，其梯度方向几乎保持不变，而若图像中存在运动物体，则发生运动的区域梯度方向会产生较大差异。因此，本申请实施例通过比较待处理图像与参考图像中相同位置像素点的梯度方向，能够快速地检测出运动区域，更加细致准确，同时可靠性高，并且提升了处理效率。
需要说明的是，像素点对应的差值，可以是该像素点和参考图像中与该像素点位置相同的像素点的梯度方向差值。由于图像可以通过二维函数f(x,y)进行表示，因此像素点(x,y)的梯度方向指向该二维函数f(x,y)变化最快的地方。示例性地，比如图2所示黑色区域的亮度值大于白色区域的亮度值，则像素点(x,y)的梯度方向指向黑色区域。而梯度可以分解为x方向的梯度Gx和y方向的梯度Gy，具体可以如式(1)表示：
式(1)中，表示f对x方向的偏导数，/>表示f对y方向的偏导数，T表示转置运算。
进一步地，梯度方向如式(2)表示：
假设待处理图像上像素点(x,y)的梯度方向为φ1(x,y)，参考图像上像素点(x,y)的梯度方向为φ2(x,y)，那么待处理图像上像素点(x,y)对应的梯度方向差值则为φ1(x,y)-φ2(x,y)。
可选地，在筛选不同曝光时间的拍摄图像所组成的图像序列，确定出参考图像的过程中，本申请实施例可以分别获取图像序列中各拍摄图像上每个像素点的灰度值，并统计该灰度值处于预设范围的像素点数目。如果像素点数目大于或者等于第二预设阈值，则选择像素点数目对应的拍摄图像作为参考图像。这样设置的好处在于，像素点的灰度值在一定程度上可以反映该像素点的曝光质量，当像素点的灰度值接近0或1时，说明该像素点可能出现了曝光不足或者过度曝光的现象。因此，本申请实施例通过统计灰度值符合预设范围的像素点数目，能够快速地从图像序列中确定出参考图像。同理，对于拍摄图像为彩色图像而言，本申请实施例可以将每个像素点的亮度值作为判断依据。
S102，在待处理图像的非运动区域中，确定与运动区域内第一像素点最相似的第二像素点，并将第一像素点的像素值替换为第二像素点的像素值。
需要说明的是，该第二像素点的确定方式可以包括但不限于如下两种：第一种方式，如图3所示，本申请实施例以待处理图像A运动区域A1内第一像素点a为基准，遍历该待处理图像A非运动区域A2内的每一个像素点b，并通过比较该像素点b对应像素值与第一像素点a对应像素值的大小，来确定第二像素点c。比如，本申请实施例根据式(3)计算像素点b和第一像素点a的相似度，若相似度D(a，b)最大，则表明像素点b即为第二像素点c。另外，若存在两个以上像素点b和第一像素点a的相似度相等，则根据像素点b的坐标以及第一像素点a的坐标，选取与该第一像素点a距离最近的像素点b作为第二像素点c。这样设置的好处在于，非运动区域不存在鬼影干扰，使得位于其中的像素点具有准确的像素值，本申请实施例借用处于非运动区域A2的第二像素点c的像素值来替换处于运动区域A1的第一像素点a的像素值，从而能够有效消除图像鬼影，同时该第二像素点c和第一像素点a都位于同一帧图像A，像素点之间过渡自然，不会有突兀感，提升了成片质量。
D(a，b)＝-[(Ra-Rb)2+(Ga-Gb)2+(Ba-Bb)2] (3)
式(3)中，Ra、Ga、Ba分别表示第一像素点a的红、绿、蓝三通道值，Rb、Gb、Bb分别表示像素点b的红、绿、蓝三通道值。
第二种方式，如图4所示，本申请实施例可以首先根据待处理图像A运动区域A1内第一像素点a的第一坐标(x1，y1)，在参考图像B中定位该第一坐标(x1，y1)对应的第三像素点d。需要说明的是，本申请实施例中待处理图像A和参考图像B具有相同的坐标系，比如都以图像的左下角为坐标原点O，图像的长边为X轴，宽边为Y轴，而该待处理图像A和参考图像B都由同一个设备所拍摄，因此两帧图像的尺寸大小相同。
其次，在参考图像B中确定与第三像素点d最相似的第四像素点e。比如，本申请实施例通过遍历参考图像B的非运动区域B1，搜索与第三像素点d相似度最大的第四像素点e，其中参考图像B的非运动区域B1与待处理图像A的非运动区域A2相同。同理，本申请实施例可以根据式(4)计算第四像素点e和第三像素点d的相似度，若相似度D(e，d)最大，则表明第四像素点e与第三像素点d最相似。另外，若存在两个以上第四像素点e和第三像素点d的相似度相等，则根据第四像素点e的坐标以及第三像素点d的坐标，选取与该第三像素点d距离最近的像素点作为第四像素点e。
D(e，d)＝-[(Re-Rd)2+(Ge-Gd)2+(Be-Bd)2] (4)
式(4)中，Re、Ge、Be分别表示第四像素点e的红、绿、蓝三通道值，Rd、Gd、Bd分别表示第三像素点d的红、绿、蓝三通道值。
再次，根据第四像素点e的第二坐标(x2，y2)，在待处理图像A中将第二坐标(x2，y2)对应的像素点作为第二像素点f，并采用第二像素点f的像素值替换第一像素点a的像素值。这样设置的好处在于，参考图像B中第三像素点d的像素值未受到鬼影干扰的影响，据此确定的第四像素点e更为准确，进而本申请实施例能够快速地在待处理图像A中锁定第二像素点f，提升了处理效率。示例性地，如图5所示，其为本申请实施例提供的一种图像鬼影消除方法的成片结果示意图，左图对应相关技术的处理结果，右图对应本申请实施例的处理结果。从图5可以看出，右图中手部鬼影得到了明显消除。
本申请实施例提供了一种图像鬼影消除方法，通过获取待处理图像的运动区域和非运动区域，并在待处理图像的非运动区域中，确定与运动区域内第一像素点最相似的第二像素点，进而将该第一像素点的像素值替换为第二像素点的像素值。由于非运动区域不存在鬼影干扰，使得位于其中的像素点具有准确的像素值，因此本申请实施例借用处于非运动区域的第二像素点的像素值来替换处于运动区域的第一像素点的像素值，从而能够有效消除图像鬼影，同时该第二像素点和第一像素点都位于同一帧图像，像素点之间过渡自然，不会有突兀感，提升了成片质量。
基于前述实施例，请参考图6，其为本申请实施例提供的一种图像鬼影消除装置的基本结构示意图，该装置可以应用于图1～5对应实施例提供的图像鬼影消除方法中。如图6所示，该图像鬼影消除装置100包括：
获取模块101，配置用于获取待处理图像的运动区域和非运动区域；
消除模块102，配置用于在待处理图像的非运动区域中，确定与运动区域内第一像素点最相似的第二像素点，并将第一像素点的像素值替换为第二像素点的像素值。
可选地，在本申请一些实施例中，如图7所示，消除模块102包括：
定位单元1021，配置用于根据运动区域内第一像素点的第一坐标，在参考图像中定位第一坐标对应的第三像素点；
第一确定单元1022，配置用于在参考图像中确定与第三像素点最相似的第四像素点；
第二确定单元1023，配置用于根据第四像素点的第二坐标，在待处理图像中将第二坐标对应的像素点作为第二像素点。
可选地，在本申请一些实施例中，第一确定单元1022还配置用于：
遍历参考图像的非运动区域，搜索与第三像素点相似度最大的第四像素点，其中参考图像的非运动区域与待处理图像的非运动区域相同。
可选地，在本申请一些实施例中，获取模块101还配置用于：
计算待处理图像和参考图像中相同位置像素点的梯度方向差值，；其中，待处理图像的运动区域中的像素点对应的差值大于或者等于第一预设阈值，待处理图像的非运动区域中的像素点对应的差值小于第一预设阈值。
可选地，在本申请一些实施例中，如图8所示，该图像鬼影消除装置100还包括：
筛选模块103，配置用于在不同曝光时间的拍摄图像所组成的图像序列中，分别获取各拍摄图像上每个像素点的灰度值，并统计灰度值处于预设范围的像素点数目，其中拍摄图像包括待处理图像；
若像素点数目大于或者等于第二预设阈值，选择像素点数目对应的拍摄图像作为参考图像。
需要说明的是，本实施例中与其它实施例中相同步骤和相同内容的说明，可以参照其它实施例中的描述，此处不再赘述。
本申请实施例提供了一种图像鬼影消除装置，获取模块用于获取待处理图像的运动区域和非运动区域；消除模块用于在待处理图像的非运动区域中，确定与运动区域内第一像素点最相似的第二像素点，并将第一像素点的像素值替换为第二像素点的像素值。由于非运动区域不存在鬼影干扰，使得位于其中的像素点具有准确的像素值，因此本申请实施例借用处于非运动区域的第二像素点的像素值来替换处于运动区域的第一像素点的像素值，从而能够有效消除图像鬼影，同时该第二像素点和第一像素点都位于同一帧图像，像素点之间过渡自然，不会有突兀感，提升了成片质量。
基于前述实施例，请参考图9，其为本申请实施例提供的一种电子设备的结构框图。该电子设备200包括处理器2001和存储器2002，其中处理器2001可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器2001可以采用数字信号处理(DigitalSignal Processing，DSP)、现场可编程门阵列(Field Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。
处理器2001也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称为中央处理器(Central Processing Unit，CPU)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。
另外，处理器2001可以集成有图像处理器(Graphics Processing Unit，GPU)，GPU用于对显示屏所需要显示的内容进行渲染和绘制。在一些实施例中，处理器2001还可以包括人工智能(Artificial Intelligence，AI)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器2002可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器2002还可以包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器2002中的非暂态的计算机可读存储介质用于存储至少一个程序，该至少一个程序用于被处理器2001所执行，以实现本申请方法实施例中提供的图像鬼影消除方法。
在一些实施例中，电子设备200还可以包括外围设备接口2003和至少一个外围设备。处理器2001、存储器2002和外围设备接口2003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口2003相连。
具体地，外围设备包括但不限于射频电路2004、触摸显示屏2005和电源2006。外围设备接口2003可以被用于将输入/输出(Input/Output，I/O)相关的至少一个外围设备连接到处理器2001和存储器2002。在一些实施例中，处理器2001、存储器2002和外围设备接口2003被集成在同一芯片或电路板上；在一些其他实施例中，处理器2001、存储器2002和外围设备接口2003中的任意一个或两个可以在单独的芯片或电路板上实现，本申请实施例对此不进行限定。
射频电路2004用于接收和发射射频(Radio Frequency，RF)信号，也称电磁信号。射频电路2004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路2004将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路2004包括天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等。射频电路2004可以通过至少一种无线通信协议来与其它设备进行通信。该无线通信协议包括但不限于城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或无线保真(Wireless Fidelity，WiFi)网络。在一些实施例中，射频电路2004还可以包括近距离无线通信(Near Field Communication，NFC)有关的电路。
显示屏2005用于显示用户界面(User Interface，UI)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏2005是触摸显示屏时，显示屏2005还具有采集在显示屏2005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器2001进行处理。此时，显示屏2005还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏2005可以为一个，设置在电子设备200的前面板；在另一些实施例中，显示屏2005可以为至少两个，分别设置在电子设备200的不同表面或呈折叠设计；在又一些实施例中，显示屏2005可以是柔性显示屏，设置在电子设备200的弯曲表面上或折叠面上。甚至，显示屏2005还可以设置成非矩形的不规则图形，也即异形屏。显示屏2005可以采用液晶显示屏(Liquid Crystal Display，LCD)、有机发光二极管(OrganicLight-Emitting Diode，OLED)等材质制备。
本领域技术人员可以理解，图9中示出的结构并不构成对电子设备200的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
需要说明的是，本申请实施例中所涉及的电子设备200可以包括但不限于个人数字助理(Personal Digital Assistant，PDA)、平板电脑(Tablet Computer)、无线手持设备和手机等。
作为另一方面，本申请实施例提供一种计算机可读存储介质，用于存储程序代码，该程序代码用于执行前述各个实施例图像鬼影消除方法中的任意一种实施方式。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个模块单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。而集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。
基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例图像鬼影消除方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(RandomAccess Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种图像鬼影消除方法，其特征在于，所述方法包括：
获取待处理图像的运动区域和非运动区域；
在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，并将所述第一像素点的像素值替换为所述第二像素点的像素值；
其中，所述在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，包括：
根据所述运动区域内第一像素点的第一坐标，在参考图像中定位所述第一坐标对应的第三像素点；
在所述参考图像中确定与所述第三像素点最相似的第四像素点；
根据所述第四像素点的第二坐标，在所述待处理图像中将所述第二坐标对应的像素点作为所述第二像素点。
2.根据权利要求1所述的图像鬼影消除方法，其特征在于，所述在所述参考图像中确定与所述第三像素点最相似的第四像素点，包括：
遍历所述参考图像的非运动区域，搜索与所述第三像素点相似度最大的第四像素点，所述参考图像的非运动区域与所述待处理图像的非运动区域相同。
3.根据权利要求1所述的图像鬼影消除方法，其特征在于，所述获取待处理图像的运动区域和非运动区域，包括：
计算所述待处理图像和参考图像中相同位置像素点的梯度方向差值；其中，所述待处理图像的运动区域中的像素点对应的所述差值大于或者等于第一预设阈值，所述待处理图像的非运动区域中的像素点对应的所述差值小于所述第一预设阈值。
4.根据权利要求1至3中任意一项所述的图像鬼影消除方法，其特征在于，所述参考图像通过如下方式得到：
在不同曝光时间的拍摄图像所组成的图像序列中，分别获取各所述拍摄图像上每个像素点的灰度值，并统计所述灰度值处于预设范围的像素点数目，其中所述拍摄图像包括所述待处理图像；
若所述像素点数目大于或者等于第二预设阈值，选择所述像素点数目对应的拍摄图像作为所述参考图像。
5.一种图像鬼影消除装置，其特征在于，所述装置包括：
获取模块，配置用于获取待处理图像的运动区域和非运动区域；
消除模块，配置用于在所述待处理图像的非运动区域中，确定与所述运动区域内第一像素点最相似的第二像素点，并将所述第一像素点的像素值替换为所述第二像素点的像素值；
其中，所述消除模块包括：
定位单元，配置用于根据所述运动区域内第一像素点的第一坐标，在参考图像中定位所述第一坐标对应的第三像素点；
第一确定单元，配置用于在所述参考图像中确定与所述第三像素点最相似的第四像素点；
第二确定单元，配置用于根据所述第四像素点的第二坐标，在所述待处理图像中将所述第二坐标对应的像素点作为所述第二像素点。
6.根据权利要求5所述的图像鬼影消除装置，其特征在于，所述第一确定单元还配置用于：
遍历所述参考图像的非运动区域，搜索与所述第三像素点相似度最大的第四像素点，所述参考图像的非运动区域与所述待处理图像的非运动区域相同。
7.根据权利要求5所述的图像鬼影消除装置，其特征在于，所述获取模块还配置用于：
计算所述待处理图像和参考图像中相同位置像素点的梯度方向差值；其中，所述待处理图像的运动区域中的像素点对应的所述差值大于或者等于第一预设阈值，所述待处理图像的非运动区域中的像素点对应的所述差值小于所述第一预设阈值。
8.根据权利要求5至7中任意一项所述的图像鬼影消除装置，其特征在于，所述装置还包括：
筛选模块，配置用于在不同曝光时间的拍摄图像所组成的图像序列中，分别获取各所述拍摄图像上每个像素点的灰度值，并统计所述灰度值处于预设范围的像素点数目，其中所述拍摄图像包括所述待处理图像；
若所述像素点数目大于或者等于第二预设阈值，选择所述像素点数目对应的拍摄图像作为所述参考图像。
9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述指令、所述程序、所述代码集或所述指令集由所述处理器加载并执行以实现如权利要求1至4中任意一项所述的图像鬼影消除方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1至4中任意一项所述的图像鬼影消除方法的步骤。
CN202110142644.4A 2021-02-02 2021-02-02 图像鬼影消除方法、装置、电子设备及存储介质 Active CN112767281B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110142644.4A CN112767281B (zh) 2021-02-02 2021-02-02 图像鬼影消除方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110142644.4A CN112767281B (zh) 2021-02-02 2021-02-02 图像鬼影消除方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112767281A CN112767281A (zh) 2021-05-07
CN112767281B true CN112767281B (zh) 2024-04-30

Family

ID=75704646

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110142644.4A Active CN112767281B (zh) 2021-02-02 2021-02-02 图像鬼影消除方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112767281B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113344821B (zh) * 2021-06-29 2022-10-21 展讯通信（上海）有限公司 图像降噪方法、装置、终端、存储介质
CN113313658B (zh) * 2021-07-29 2021-11-30 南昌虚拟现实研究院股份有限公司 图像处理方法、装置、电子设备及存储介质
CN114640791A (zh) * 2022-01-27 2022-06-17 浙江大华技术股份有限公司 镜片角度调节方法、装置、计算机设备和摄像机
CN116740182B (zh) * 2023-08-11 2023-11-21 摩尔线程智能科技(北京)有限责任公司 一种鬼影区域确定方法、装置、存储介质及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6842196B1 (en) * 2000-04-04 2005-01-11 Smith & Nephew, Inc. Method and system for automatic correction of motion artifacts
CN103314572A (zh) * 2010-07-26 2013-09-18 新加坡科技研究局 用于图像处理的方法和设备
CN104349066A (zh) * 2013-07-31 2015-02-11 华为终端有限公司 一种生成高动态范围图像的方法、装置
WO2018176925A1 (zh) * 2017-03-31 2018-10-04 华为技术有限公司 Hdr图像的生成方法及装置
CN109919858A (zh) * 2019-01-23 2019-06-21 努比亚技术有限公司 一种图像区域验证方法、终端及计算机可读存储介质
CN111524082A (zh) * 2020-04-26 2020-08-11 上海航天电子通讯设备研究所 目标鬼影消除方法
CN112085673A (zh) * 2020-08-27 2020-12-15 宁波大学 一种强鬼影去除多曝光图像融合方法
CN112288642A (zh) * 2020-09-21 2021-01-29 北京迈格威科技有限公司 鬼影检测方法、图像融合方法及对应装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8773595B2 (en) * 2008-12-24 2014-07-08 Entropic Communications, Inc. Image processing
US10666874B2 (en) * 2017-06-02 2020-05-26 Apple Inc. Reducing or eliminating artifacts in high dynamic range (HDR) imaging

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6842196B1 (en) * 2000-04-04 2005-01-11 Smith & Nephew, Inc. Method and system for automatic correction of motion artifacts
CN103314572A (zh) * 2010-07-26 2013-09-18 新加坡科技研究局 用于图像处理的方法和设备
CN104349066A (zh) * 2013-07-31 2015-02-11 华为终端有限公司 一种生成高动态范围图像的方法、装置
WO2018176925A1 (zh) * 2017-03-31 2018-10-04 华为技术有限公司 Hdr图像的生成方法及装置
CN108668093A (zh) * 2017-03-31 2018-10-16 华为技术有限公司 Hdr图像的生成方法及装置
CN109919858A (zh) * 2019-01-23 2019-06-21 努比亚技术有限公司 一种图像区域验证方法、终端及计算机可读存储介质
CN111524082A (zh) * 2020-04-26 2020-08-11 上海航天电子通讯设备研究所 目标鬼影消除方法
CN112085673A (zh) * 2020-08-27 2020-12-15 宁波大学 一种强鬼影去除多曝光图像融合方法
CN112288642A (zh) * 2020-09-21 2021-01-29 北京迈格威科技有限公司 鬼影检测方法、图像融合方法及对应装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Guanqiu Qi,et al..A Precise Multi-Exposure Image Fusion Method Based on Low-level Features.《sensors》.2020,全文. *
基于ViBe的改进对运动目标边缘检测;张晗 等;《计算机工程与设计》;第40卷(第9期);第2471-2477页 *
张晗 等.基于ViBe的改进对运动目标边缘检测.《计算机工程与设计》.2019,第40卷(第9期),第2471-2477页. *

Also Published As

Publication number Publication date
CN112767281A (zh) 2021-05-07

Similar Documents

Publication Publication Date Title
CN112767281B (zh) 图像鬼影消除方法、装置、电子设备及存储介质
CN107278314B (zh) 用于非局部均值图像去噪的装置、移动计算平台和方法
CN109712097B (zh) 图像处理方法、装置、存储介质及电子设备
CN109286758B (zh) 一种高动态范围图像的生成方法、移动终端及存储介质
CN112308797B (zh) 角点检测方法、装置、电子设备及可读存储介质
CN113099122A (zh) 拍摄方法、装置、设备和存储介质
CN113628259A (zh) 图像的配准处理方法及装置
CN104933688B (zh) 一种数据处理方法及电子设备
CN112437237A (zh) 拍摄方法及装置
CN112367486A (zh) 视频处理方法及装置
CN114449152B (zh) 对焦方法、装置、电子设备及存储介质
CN113393391B (zh) 图像增强方法、图像增强装置、电子设备和存储介质
EP2792147A1 (en) Techniques for improving stereo block matching with the pyramid method
CN112887614B (zh) 图像处理方法、装置及电子设备
CN112351205B (zh) 拍摄控制方法及装置
CN111416937B (zh) 图像处理方法、装置、存储介质及移动设备
CN112446848A (zh) 图像处理方法、装置及电子设备
CN113160386A (zh) 图像获得方法、装置、设备以及计算机可读存储介质
CN112446846A (zh) 融合帧获得方法、装置、slam系统以及存储介质
CN112702528B (zh) 视频防抖方法、装置及电子设备
CN113709372B (zh) 图像生成方法和电子设备
CN111754411A (zh) 图像降噪方法、图像降噪装置及终端设备
CN114143448B (zh) 拍摄方法、装置、电子设备及可读存储介质
CN108810322B (zh) 图像处理方法以及相关装置
CN112333388B (zh) 图像显示方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant