CN107637068A - 图像坏点补偿方法、装置和电子设备 - Google Patents

图像坏点补偿方法、装置和电子设备 Download PDF

Info

Publication number
CN107637068A
CN107637068A CN201680006799.2A CN201680006799A CN107637068A CN 107637068 A CN107637068 A CN 107637068A CN 201680006799 A CN201680006799 A CN 201680006799A CN 107637068 A CN107637068 A CN 107637068A
Authority
CN
China
Prior art keywords
bad point
preset direction
brightness
sides
compensation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680006799.2A
Other languages
English (en)
Other versions
CN107637068B (zh
Inventor
曾元清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Publication of CN107637068A publication Critical patent/CN107637068A/zh
Application granted granted Critical
Publication of CN107637068B publication Critical patent/CN107637068B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T5/77—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Image Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一种图像坏点补偿方法、装置和电子设备，其中，该图像坏点补偿方法包括：对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势，并分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值；分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值；分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子；根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。由此得到的补偿结果与其他像素点之间更加统一，效果更好。

Description

图像坏点补偿方法、装置和电子设备
技术领域
本发明涉及图像处理技术领域，特别涉及一种图像坏点补偿方法、装置和电子设备。
背景技术
随着科学技术和制造工艺的发展，图像传感器的像素日益增加，大数量的像素在生产制造过程中不可避免的会产生坏点。图像传感器中的坏点是指相位像素点，该相位像素点由于镀膜原因或未镀膜，在同样的光照下，该像素点的亮度会高于其他像素点，或者低于其他像素点。图像传感器本身的坏点会对画质带来很大的影响，大大降低图像的质量。坏点的修正，包括检测和补偿，能够提高图像的质量。
目前，根据坏点个数对图像传感器的质量进行管控，如果坏点个数超过预设阈值，该产品不能出货；同时坏点的另外一个管控参数是任何单位区域内的坏点个数不能超过阈值。但是即使这样管控，出厂的图像传感器中的坏点始终存在。坏点的存在，会大大降低图像的质量。
发明内容
本发明旨在至少在一定程度上解决上述技术问题。
为此，本发明的第一个目的在于提出一种图像坏点补偿方法，能够使补偿结果与其他像素点之间更加统一，效果更好。
本发明的第二个目的在于提出一种图像坏点补偿装置。
本发明的第三个目的在于提出一种电子设备。
本发明的第四个目的在于提出一种存储介质。
为达上述目的，根据本发明第一方面实施例提出了一种图像坏点补偿方法，包括：对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势，并分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值；分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值；分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子；根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
本发明第二方面实施例提供了一种图像坏点补偿装置，包括：估计模块，用于对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势；第一确定模块，用于对于待补偿的图像数据中的各个预设方向，分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值；第二确定模块，用于分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值；第三确定模块，用于分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子；补偿模块，用于根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
本发明第三方面实施例提出了一种电子设备，包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行本发明第一方面实施例所述的图像坏点补偿方法。
本发明第四方面实施例提供了一种存储介质，所述存储介质存储有一个或者多个程序，当所述一个或者多个程序被一个设备执行时，使得所述设备执行本发明第一方面实施例所述的图像坏点补偿方法。
本发明实施例的图像坏点补偿方法、装置和电子设备，可在各个预设方向上分别估计坏点两侧的亮度变化趋势及其差异，并分别估计坏点两侧对应的坏点亮度补偿值及其差异，并结合这两个差异确定用于补偿坏点的加权因子，从而根据加权因子对各个方向的补偿值进行加权计算，得到的补偿结果与其他像素点之间更加统一，效果更好，尤其是在针对复杂画面中的静态坏点进行补偿和修正时，效果更加突出。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：
图1为根据本发明一个实施例的图像坏点补偿方法的流程图；
图2a为根据本发明一个实施例的感光数据的示意图；
图2b为根据本发明另一个实施例的感光数据的示意图
图3为根据本发明另一个实施例的图像坏点补偿方法的流程图；
图4为根据本发明另一个实施例的图像坏点补偿方法的流程图；
图5为根据本发明另一个实施例的图像坏点补偿方法的流程图；
图6a为根据本发明实施例的待补偿的图像数据的示意图；
图6b为使用传统方法对图6a所示图像数据进行补偿的结果示意图；
图6c为根据本发明实施例对图6a所示图像数据进行补偿的结果示意图。
图7为根据本发明一个实施例的图像坏点补偿装置的结构示意图；
图8为根据本发明一个实施例电子设备的框图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。
本发明的实施例提供的图像坏点补偿方案可被配置在具有图像传感器的终端设备中。需要注意的是，终端设备的类型很多，例如：手机、平板电脑、智能穿戴设备等。下面参考附图描述根据本发明实施例的图像坏点补偿方法、装置和电子设备。
在本发明的下述实施例中，以Bayer图像传感器生成的感光数据为例，对本发明进行说明，但实际应用并不限于Bayer图像传感器，也可以是其他任意图像传感器生成的感光数据。
相位图像传感器的特点是，用来提供相位信息的像素本身也在感光，且其得到的亮度值随着环境亮度的变化而变化。通常来说和普通像素相比，其感光量要高(为了提高相位信息的准确度而使用不同的微镜头)。
图1为根据本发明一个实施例的图像坏点补偿方法的流程图。
如图1所示，根据本发明实施例的图像坏点补偿方法，包括：
S101，对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势，并分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值。
在本发明的实施例中，待补偿的图像数据可以是图像传感器的感光数据。由于图像传感器本身存在坏点，因此，导致图像传感器的感光数据中存在感光度较低的像素点，可被看作是感光数据中的坏点。也就是说，可根据图像传感器的坏点确定图像数据中的坏点。或者，在本发明的另一个实施例中，还可通过对图像数据进行坏点检测，以确定所述图像数据中的坏点。
为了对图像数据中的坏点进行补偿，可根据坏点周围的其他像素点的亮度信息在预设方向的变化趋势，以及，以坏点为分割点，坏点两侧的亮度信息的变化趋势的差异、坏点两侧的亮度补偿值之间的差异等信息，确定坏点的实际补偿值。
在本发明的一个实施例中，预设方向可基于以下规则设置上述多个预设方向，对于以坏点为中心向外延伸的8个方向，其中，两两方向相反，因此，可将方向相反的两个方向合并为一个预设方向对应的相反两侧，即总共有4个预设方向。
举例来说，图2a为根据本发明一个实施例的感光数据的示意图。如图2a所示，为以坏点为中心的7×7的区域。该区域中除坏点之外的其他像素点的亮度信息可用于对坏点进行补偿。在图2b中，在上述7×7的区域中，从中心点(坏点)向外延伸的8个方向里，其中，不仅包含与坏点为相同通道(R通道)的像素点，也包含与坏点为不同通道(G通道和B通道)的像素点。因此，如果该7×7的区域没有坏点，不同通道的像素点完全可以作为坏点的亮度参考，并结合其相同通道的像素点的亮度，一起用于预估坏点的修正值。
需要说明的是，为便于对本发明的方案进行说明，在本发明的实施例中，仅以图2a所示的“以坏点为中心的7×7的区域”对坏点的补偿过程示例性说明。在实际应用中，并不对该区域的尺寸、大小进行限定，还可使用面积的像素区域对坏点进行补偿，例如“以坏点为中心的9×9的区域”、“以坏点为中心的10×10的区域”等，可根据实际的需求进行选取，本发明对此不进行具体限定。
其中，临近点是指与坏点具有直接相邻关系的像素点。如图中区域M中的除坏点之外的像素点。
具体而言，可构建与上述4个方向分别对应的4个向量组，在上述7×7的区域中，取得坏点及其周围各像素点的亮度信息，并根据各个像素点所在的方向，存至相应方向对应的向量组。
对于上述图2b中所示的4个方向，各自对应的向量组如下：
d1[n]＝{p[m0+0,n0-3],...,p[m0,n0],...,p[m0+0,n0+3]}
d2[n]＝{p[m0-3,n0+3],...,p[m0,n0],...,p[m0+3,n0-3]}
d3[n]＝{p[m0-3,n0+0],...,p[m0,n0],...,p[m0+3,n0+0]}
d4[n]＝{p[m0-3,n0-3],...,p[m0,n0],...,p[m0+3,n0+3]}
其中，di[n]表示第i个方向上所有像素点的亮度值组成的向量，包括7个值，这7个值分别与坏点以及在相应方向上坏点两侧各3个像素点对应；p[i,j]表示位于图2b所示的图像数据中的第i行，第j列的像素点的亮度信息，其中，p[m0,n0]表示图2b中坏点的亮度信息。
其中，对于每个方向来说，坏点其中一侧的亮度信息的变化趋势是指，从该方向的正方向上的远端像素点到近端像素点的亮度信息的变化趋势，另一侧的亮度信息的变化趋势是指，从该方向的负方向上的远端像素点到近端像素点的亮度信息的变化趋势。
例如，对于第1个方向来说，坏点两侧的亮度信息的变化趋势分别为：第一侧：从位于第m0行、第n0-3列的像素点到位于第m0行、第n0-1列的像素点的亮度信息的变化趋势；第二侧：位于第m0行、第n0+3列的像素点到位于第m0行、第n0+1列的像素点的亮度信息的变化趋势。
在本发明的一个实施例中，上述亮度信息的变化趋势可以是同一通道的像素点的亮度信息的变化趋势。例如，对于上述第一个方向来说，可以是坏点两侧位于G通道的像素点的亮度信息的变化趋势。
具体而言，像素点的亮度信息的变化趋势可通过对各个像素点的亮度信息进行求导计算得到。在本发明的一个实施例中，通过图3所示的实施例分别估计坏点两侧的亮度变化趋势，具体可包括步骤S301-S302，其中：
S301，在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为不同通道的像素点的第一亮度信息，并获取位于所述坏点第二侧、且与所述坏点为不同通道的像素点的第二亮度信息，其中，所述第一侧与所述第二侧分别为所述坏点在所述预设方向上的两侧。
举例来说，对于第i个方向来说，在di[n]中，坏点对应的亮度信息元素可表示为di[0]。第一侧可为坏点左侧(以第一方向为例)，其中，可用di[-j]表示坏点左侧第j个像素点的亮度信息，则位于所述坏点第一侧、且与坏点为不同通道的像素点的第一亮度信息包括：di[-3](例如，对于第一方向来说，为p[m0+0,n0-3])和di[-1](例如，对于第一方向来说，为p[m0+0,n0-1])。第二侧可为坏点右侧，其中，可用di[j]表示坏点右侧第j个像素点的亮度信息，则位于所述坏点第二侧、且与坏点为不同通道的像素点的第一亮度信息包括：di[3](例如，对于第一方向来说，为p[m0+0,n0+3])和di[1](例如，对于第一方向来说，为p[m0+0,n0+1])。
S302，根据所述第一亮度信息估计所述坏点的第一侧的第一亮度变化趋势，并根据所述第二亮度信息估计所述坏点的第二侧的第二亮度变化趋势。
在本发明的一个实施例中，可通过亮度信息的导数值表征亮度变化趋势。
具体而言，对于第i个方向，第一侧的第一亮度变化趋势可通过以下公式计算：
第二侧的第二亮度变化趋势可通过以下公式计算：
其中，为第一亮度变化趋势，为第二亮度变化趋势。
在本发明的一个实施例中，对于每个方向来说，坏点两侧对应的坏点亮度补偿值可以理解为：第一侧对应的亮度补偿值是指，在该方向上，根据坏点第一侧的亮度信息的变化趋势，和第一侧中与坏点为相同通道的像素点的亮度信息确定的、用于补偿坏点亮度信息的数值。相应地，第二侧对应的亮度补偿值是指，在该方向上，根据坏点第二侧的亮度信息的变化趋势，和第二侧中与坏点为相同通道的像素点的亮度信息确定的、用于补偿坏点亮度信息的数值。
具体而言，在本发明的一个实施例中，可通过图4所示的实施例分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值，具体可包括步骤S401-S402，其中：
S401，在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为相同通道的像素点的第三亮度信息，并获取位于所述坏点第二侧、且与所述坏点为相同通道的像素点的第四亮度信息。
举例来说，对于第i个方向来说，位于所述坏点第一侧、且与所述坏点为相同通道的像素点的第三亮度信息包括：di[-2](例如，对于第一方向来说，为p[m0+0,n0-2])；位于所述坏点第二侧、且与所述坏点为相同通道的像素点的第四亮度信息包括：di[+2](例如，对于第一方向来说，为p[m0+0,n0+2])。
S402，根据所述第三亮度信息和所述坏点的第一侧的亮度变化趋势，确定第一坏点亮度补偿值，并根据所述第四亮度信息和所述坏点的第二侧的亮度变化趋势，确定第二坏点亮度补偿值。
具体而言，对于第i个方向，第一坏点亮度补偿值(用di[-]表示)可通过以下公式计算：
第二坏点亮度补偿值(用di[+]表示)可通过以下公式计算：
S102，分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值。
在本发明的一个实施例中，坏点两侧的亮度变化趋势的差异可通过坏点两侧的亮度信息的导数值的差的绝对值进行表征。
具体而言，对于第i个方向，坏点两侧的亮度变化趋势的第一差异值可为：
对于第i个方向，坏点两侧对应的坏点亮度补偿值的第二差异值δi可为：
δi＝|di[-]-di[+]|。
S103，分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子。
在本发明的一个实施例中，由于对于每个方向来说，都可根据该方向上的坏点两侧对应的坏点亮度补偿值确定一个对坏点的补偿值，因此，根据多个预设方向上的数据，可得到相对应的多个补偿值。然而，各个方向上的坏点两侧的亮度变化趋势对坏点处亮度的预测作用可能存在不同，例如，坏点处的亮度可能仅与其中一个方向的亮度变化趋势一致，或者与其中几个方向的亮度变化趋势有关，或者与所有方向的亮度变化趋势都有关。那么，如果仅将各个方向上的补偿值简单的相加则对坏点的补偿结果存在不准确的问题。
为此，本发明的实施例中，可根据各个预设方向对应的第一差异值、第二差异值确定相应预设方向对应的补偿加权因子，其中，第一差异值越小、第二差异值越小，对应的补偿加权因子越小；第一差异值越大、第二差异值越大，对应的补偿加权因子越大。
具体而言，在本发明的一个实施例中，步骤S103可具体包括如图5所示的步骤S501-S503。
S501，对于各个预设方向，分别计算相应预设方向对应的所述第一坏点亮度补偿值和所述第二坏点亮度补偿值的亮度补偿平均值。
具体而言，对于第i个方向，其对应的亮度补偿平均值为：
S502，对于各个预设方向，分别计算所述坏点的亮度信息与相应预设方向对应的所述亮度补偿平均值的差值，并根据所述差值确定对应的第一权重值。
具体而言，对于第i个方向，可通过以下公式计算所述坏点的亮度信息与相应预设方向对应的所述亮度补偿平均值的差值
其中，p[m0,n0]为坏点的亮度信息。
然后，根据确定对应的第一权重。具体而言，可根据预先设置的规则确定与各个对应的第一权重weightsi。具体而言，第一权重的设置规则依据在实际应用中的需求。在本发明的一个实施例中，如果坏点亮度高于其他像素点，则越大时，可设置越小的第一权重，而如果坏点亮度低于其他像素点，则越小时，可设置越小的第一权重。由此，可构建各个方向上与第一权重的查找表weight_tablei，其中，
S503，分别根据各个预设方向对应的第一差异值、第二差异值对相应预设方向的第一权重值进行修正，得到相应预设方向对应的补偿加权因子。
其中，第一差异值、第二差异值及第一权重值分别从坏点两侧的补偿值差异、坏点两侧亮度变化趋势的差异、坏点亮度与补偿值之间的差异三个方面表征了对坏点进行补偿时影响。为了提高坏点补偿的准确性，本发明的实施例可根据第一差异值、第二差异值及第一权重值生成补偿加权因子，从而能够综合考虑上述三个方面的因素，对坏点进行补偿，提升补偿效果。
具体而言，可根据图像传感器中坏点的具体情况，选择不同的算法对第一差异值、第二差异值及第一权重值进行计算，得到补偿加权因子。
在本发明的一个实施例中，对于第i个方向，可将该方向对应的第一差异值、第二差异值与第一权重值相乘，得到对应的补偿加权因子。
需要说明的是，在发明的其他实施例中，也可根据其他算法进行修正，例如，根据第一差异值、第二差异值基于预设的算法计算，得到修正系数，并根据该修正系数与第一权重值相乘，得到对应的补偿加权因子。
S104，根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
在本发明的一个实施例中，可分别计算各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值；根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值进行加权计算，并根据计算结果对所述坏点进行补偿。
具体而言，可通过以下公式计算得到坏点的补偿结果
其中，为第i个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值，ζi为第i个预设方向对应的权重值。
根据本发明实施例的图像坏点补偿方法，可在各个预设方向上分别估计坏点两侧的亮度变化趋势及其差异，并分别估计坏点两侧对应的坏点亮度补偿值及其差异，并结合这两个差异确定用于补偿坏点的加权因子，从而根据加权因子对各个方向的补偿值进行加权计算，得到的补偿结果与其他像素点之间更加统一，效果更好，尤其是在针对复杂画面中的静态坏点进行补偿和修正时，效果更加突出。
举例来说，图6a为根据本发明实施例的待补偿的图像数据的示意图；图6b为使用传统方法对图6a所示图像数据进行补偿的结果示意图；图6c为根据本发明实施例对图6a所示图像数据进行补偿的结果示意图。可以看出，在图6b的补偿结果中，在数字“5”周围，以及五条竖线周围仍在存在大量坏点，而在图6c所示的本发明实施例的补偿结果中，在数字“5”周围，以及五条竖线周围的坏点数量大大减少。因此，通过上述对比可以看出，本发明实施例的图像坏点补偿方法能够显著提升坏点补偿的效果。
需要说明的是，本发明的实施例中，上述多个预设方向以图2b中所示的方向进行了举例说明，在实际应用中，本发明并不限于图2b中所示的方向，可扩展为其他方向，在此不一一进行说明。
本发明还提出一种图像坏点补偿装置。
图7为根据本发明一个实施例的图像坏点补偿装置的结构示意图。
如图7所示，根据本发明实施例的图像坏点补偿装置，包括：估计模块10、第一确定模块20、第二确定模块30、第三确定模块40和补偿模块50。
其中，估计模块10用于对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势。
估计模块10的实现过程可参见图1所示实施例。
具体而言，在本发明的一个实施例中，估计模块10可用于：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为不同通道的像素点的第一亮度信息，并获取位于所述坏点第二侧、且与所述坏点为不同通道的像素点的第二亮度信息，其中，所述第一侧与所述第二侧分别为所述坏点在所述预设方向上的两侧；
根据所述第一亮度信息估计所述坏点的第一侧的第一亮度变化趋势，并根据所述第二亮度信息估计所述坏点的第二侧的第二亮度变化趋势。
上述具体实现过程可参见图3所示实施例。
第一确定模块20用于对于待补偿的图像数据中的各个预设方向，分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值。
第一确定模块20的实现过程可参见图1所示实施例。
具体而言，在本发明的一个实施例中，第一确定模块20可用于：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为相同通道的像素点的第三亮度信息，并获取位于所述坏点第二侧、且与所述坏点为相同通道的像素点的第四亮度信息；
根据所述第三亮度信息和所述坏点的第一侧的亮度变化趋势，确定第一坏点亮度补偿值，并根据所述第四亮度信息和所述坏点的第二侧的亮度变化趋势，确定第二坏点亮度补偿值。
上述具体过程可参见图4所示实施例。
第二确定模块30用于分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值。
第二确定模块30的实现过程可参见图1所示实施例。
第三确定模块40用于分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子。
第三确定模块40的实现过程可参见图1所示实施例。
具体而言，在本发明的一个实施例中，第三确定模块40可用于：
对于各个预设方向，分别计算相应预设方向对应的所述第一坏点亮度补偿值和所述第二坏点亮度补偿值的亮度补偿平均值；
对于各个预设方向，分别计算所述坏点的亮度信息与相应预设方向对应的所述亮度补偿平均值的差值，并根据所述差值确定对应的第一权重值；
分别根据各个预设方向对应的第一差异值、第二差异值对相应预设方向的第一权重值进行修正，得到相应预设方向对应的补偿加权因子。
上述具体过程可参见图5所示实施例。
补偿模块50用于根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
补偿模块50的实现过程可参见图1所示实施例。
具体而言，在本发明的一个实施例中，补偿模块50可用于：分别计算各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值；根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值进行加权计算，并根据计算结果对所述坏点进行补偿。
本发明实施例的图像坏点补偿装置，可在各个预设方向上分别估计坏点两侧的亮度变化趋势及其差异，并分别估计坏点两侧对应的坏点亮度补偿值及其差异，并结合这两个差异确定用于补偿坏点的加权因子，从而根据加权因子对各个方向的补偿值进行加权计算，得到的补偿结果与其他像素点之间更加统一，效果更好，尤其是在针对复杂画面中的静态坏点进行补偿和修正时，效果更加突出。
图8是根据一示例性实施例示出的一种电子设备800的框图。例如，电子设备800可以是移动电话，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图8，电子设备800可以包括以下一个或多个组件：壳体802、处理器804、存储器806、电路板808和电源电路810，其中，电路板808安置在壳体802围成的空间内部，处理器804和存储器806设置在电路板808上；电源电路810，用于为上述电子设备的各个电路或器件供电；存储器806用于存储可执行程序代码；处理器804通过读取806中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述任一实施例所述的图像坏点补偿方法。
处理器804通常控制电子设备800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理器804可以包括一个或多个处理器804来执行指令，以完成上述的方法的全部或部分步骤。此外，处理器804可以包括一个或多个模块，便于处理器804和其他组件之间的交互。例如，处理器804可以包括多媒体模块，以方便多媒体组件和处理器804之间的交互。
存储器806被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器806可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源电路810为电子设备800的各种组件提供电力。电源电路810可以包括电源管理系统，一个或多个电源，及其他与为电子设备800生成、管理和分配电力相关联的组件。
在示例性实施例中，电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器806，上述指令可由电子设备800的处理器804执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (12)

1.一种图像坏点补偿方法，其特征在于，包括以下步骤：
对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势，并分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值；
分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值；
分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子；
根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
2.如权利要求1所述的方法，其特征在于，对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势，包括：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为不同通道的像素点的第一亮度信息，并获取位于所述坏点第二侧、且与所述坏点为不同通道的像素点的第二亮度信息，其中，所述第一侧与所述第二侧分别为所述坏点在所述预设方向上的两侧；
根据所述第一亮度信息估计所述坏点的第一侧的第一亮度变化趋势，并根据所述第二亮度信息估计所述坏点的第二侧的第二亮度变化趋势。
3.如权利要求1所述的方法，其特征在于，对于待补偿的图像数据中的各个预设方向，分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值，包括：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为相同通道的像素点的第三亮度信息，并获取位于所述坏点第二侧、且与所述坏点为相同通道的像素点的第四亮度信息；
根据所述第三亮度信息和所述坏点的第一侧的亮度变化趋势，确定第一坏点亮度补偿值，并根据所述第四亮度信息和所述坏点的第二侧的亮度变化趋势，确定第二坏点亮度补偿值。
4.如权利要求1所述的方法，其特征在于，根据各个预设方向对应的第一差异值和第二差异值，分别确定相应预设方向对应的补偿加权因子，包括：
对于各个预设方向，分别计算相应预设方向对应的所述第一坏点亮度补偿值和所述第二坏点亮度补偿值的亮度补偿平均值；
对于各个预设方向，分别计算所述坏点的亮度信息与相应预设方向对应的所述亮度补偿平均值的差值，并根据所述差值确定对应的第一权重值；
分别根据各个预设方向对应的第一差异值、第二差异值对相应预设方向的第一权重值进行修正，得到相应预设方向对应的补偿加权因子。
5.如权利要求1-4任一项所述的方法，其特征在于，根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，并根据计算结果对所述坏点进行补偿，包括：
分别计算各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值；
根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值进行加权计算，并根据计算结果对所述坏点进行补偿。
6.一种图像坏点补偿装置，其特征在于，包括：
估计模块，用于对于待补偿的图像数据中的各个预设方向，分别估计坏点两侧的亮度变化趋势；
第一确定模块，用于对于待补偿的图像数据中的各个预设方向，分别确定相应预设方向上所述坏点两侧对应的坏点亮度补偿值；
第二确定模块，用于分别确定各个预设方向上坏点两侧的亮度变化趋势的第一差异值，并分别确定各个预设方向上所述坏点两侧对应的坏点亮度补偿值的第二差异值；
第三确定模块，用于分别根据各个预设方向对应的第一差异值和第二差异值，确定相应预设方向对应的补偿加权因子；
补偿模块，用于根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值进行加权计算，得到对所述坏点的补偿结果。
7.如权利要求6所述的装置，其特征在于，所述估计模块用于：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为不同通道的像素点的第一亮度信息，并获取位于所述坏点第二侧、且与所述坏点为不同通道的像素点的第二亮度信息，其中，所述第一侧与所述第二侧分别为所述坏点在所述预设方向上的两侧；
根据所述第一亮度信息估计所述坏点的第一侧的第一亮度变化趋势，并根据所述第二亮度信息估计所述坏点的第二侧的第二亮度变化趋势。
8.如权利要求6所述的装置，其特征在于，所述第一确定模块用于：
在预设区域内，对于每个预设方向，获取位于所述坏点第一侧、且与所述坏点为相同通道的像素点的第三亮度信息，并获取位于所述坏点第二侧、且与所述坏点为相同通道的像素点的第四亮度信息；
根据所述第三亮度信息和所述坏点的第一侧的亮度变化趋势，确定第一坏点亮度补偿值，并根据所述第四亮度信息和所述坏点的第二侧的亮度变化趋势，确定第二坏点亮度补偿值。
9.如权利要求6所述的装置，其特征在于，所述第三确定模块用于：
对于各个预设方向，分别计算相应预设方向对应的所述第一坏点亮度补偿值和所述第二坏点亮度补偿值的亮度补偿平均值；
对于各个预设方向，分别计算所述坏点的亮度信息与相应预设方向对应的所述亮度补偿平均值的差值，并根据所述差值确定对应的第一权重值；
分别根据各个预设方向对应的第一差异值、第二差异值对相应预设方向的第一权重值进行修正，得到相应预设方向对应的补偿加权因子。
10.如权利要求6-9任一项所述的装置，其特征在于，所述补偿模块用于：
分别计算各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值；
根据所述补偿加权因子，对各个预设方向对应的所述坏点两侧对应的坏点亮度补偿值的平均值进行加权计算，并根据计算结果对所述坏点进行补偿。
11.一种电子设备，其特征在于，所述电子设备包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述任一权利要求1-5所述的图像坏点补偿方法。
12.一种存储介质，所述存储介质存储有一个或者多个程序，当所述一个或者多个程序被一个设备执行时，使得所述设备执行前述任一权利要求1-5所述的图像坏点补偿方法。
CN201680006799.2A 2016-11-30 2016-11-30 图像坏点补偿方法、装置和电子设备 Active CN107637068B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/108081 WO2018098707A1 (zh) 2016-11-30 2016-11-30 图像坏点补偿方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN107637068A true CN107637068A (zh) 2018-01-26
CN107637068B CN107637068B (zh) 2019-10-25

Family

ID=60387836

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680006799.2A Active CN107637068B (zh) 2016-11-30 2016-11-30 图像坏点补偿方法、装置和电子设备

Country Status (8)

Country Link
US (1) US10438330B2 (zh)
EP (1) EP3331237B1 (zh)
JP (1) JP6461430B1 (zh)
KR (1) KR102049681B1 (zh)
CN (1) CN107637068B (zh)
ES (1) ES2760980T3 (zh)
TW (1) TWI620444B (zh)
WO (1) WO2018098707A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109935206A (zh) * 2019-04-15 2019-06-25 京东方科技集团股份有限公司 基于神经网络的显示器件亮度补偿方法、装置及设备
CN113362781A (zh) * 2021-06-23 2021-09-07 合肥维信诺科技有限公司 显示面板的亮度补偿方法及亮度补偿系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102561172B1 (ko) * 2018-11-22 2023-07-31 삼성전자주식회사 디스플레이 내에 카메라 모듈이 포함된 전자 장치 및 상기 카메라 모듈 주변의 이미지를 보정하는 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050030394A1 (en) * 2001-06-29 2005-02-10 Vanguard International Semiconductor Corporation Pixel defect correction in a CMOS active pixel image sensor
CN1655588A (zh) * 2005-04-08 2005-08-17 北京中星微电子有限公司 一种对数字图像进行坏点补偿的方法
CN102625133A (zh) * 2011-01-31 2012-08-01 英属开曼群岛商恒景科技股份有限公司 影像感测坏像素点的检测方法
US20150170376A1 (en) * 2013-12-18 2015-06-18 Imagination Technologies Limited Defective Pixel Fixing
CN105430385A (zh) * 2015-12-14 2016-03-23 上海富瀚微电子股份有限公司 一种图像传感器坏点检测和校正的方法及装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6118846A (en) * 1999-02-23 2000-09-12 Direct Radiography Corp. Bad pixel column processing in a radiation detection panel
US6618115B1 (en) * 1999-11-19 2003-09-09 Semiconductor Energy Laboratory Co., Ltd. Defective pixel compensation system and display device using the system
US20030117507A1 (en) 2001-12-21 2003-06-26 Nasser Kehtarnavaz Color filter array interpolation
JP4350706B2 (ja) 2003-03-28 2009-10-21 オリンパス株式会社 画像処理装置及び画像処理プログラム
JP2004320128A (ja) * 2003-04-11 2004-11-11 Mega Chips Corp 欠陥画素補正装置
JP3952301B2 (ja) * 2003-08-29 2007-08-01 ノーリツ鋼機株式会社 画像処理装置、方法、及びプログラム
JP4239094B2 (ja) 2004-03-03 2009-03-18 ノーリツ鋼機株式会社 画像処理装置、方法、及びプログラム
JP4617870B2 (ja) * 2004-12-22 2011-01-26 ソニー株式会社 撮像装置および方法、並びにプログラム
TWI283833B (en) * 2005-07-07 2007-07-11 Sunplus Technology Co Ltd Color image dead pixel calibration method and its system
US7969488B2 (en) * 2005-08-03 2011-06-28 Micron Technologies, Inc. Correction of cluster defects in imagers
TWI437878B (zh) * 2007-11-20 2014-05-11 Quanta Comp Inc 用以校正影像訊號中壞點之方法及電路
CN101452573B (zh) 2007-12-04 2013-01-30 比亚迪股份有限公司 一种图像边缘增强方法
JP5655355B2 (ja) * 2009-11-02 2015-01-21 ソニー株式会社 画素欠陥補正装置、撮像装置、画素欠陥補正方法、およびプログラム
JP6046927B2 (ja) * 2011-08-09 2016-12-21 キヤノン株式会社 画像処理装置及びその制御方法
JP5898428B2 (ja) 2011-08-09 2016-04-06 キヤノン株式会社 画像処理装置及びその制御方法
US8891866B2 (en) * 2011-08-31 2014-11-18 Sony Corporation Image processing apparatus, image processing method, and program
JP2013066157A (ja) * 2011-08-31 2013-04-11 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
US9743057B2 (en) * 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
CN103676236B (zh) * 2013-12-18 2017-01-04 合肥京东方光电科技有限公司 一种修复缺陷像素的方法、系统及显示面板
JP6525522B2 (ja) 2014-07-10 2019-06-05 キヤノン株式会社 画像処理装置および画像処理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050030394A1 (en) * 2001-06-29 2005-02-10 Vanguard International Semiconductor Corporation Pixel defect correction in a CMOS active pixel image sensor
CN1655588A (zh) * 2005-04-08 2005-08-17 北京中星微电子有限公司 一种对数字图像进行坏点补偿的方法
CN102625133A (zh) * 2011-01-31 2012-08-01 英属开曼群岛商恒景科技股份有限公司 影像感测坏像素点的检测方法
US20150170376A1 (en) * 2013-12-18 2015-06-18 Imagination Technologies Limited Defective Pixel Fixing
CN105430385A (zh) * 2015-12-14 2016-03-23 上海富瀚微电子股份有限公司 一种图像传感器坏点检测和校正的方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109935206A (zh) * 2019-04-15 2019-06-25 京东方科技集团股份有限公司 基于神经网络的显示器件亮度补偿方法、装置及设备
CN109935206B (zh) * 2019-04-15 2021-08-20 京东方科技集团股份有限公司 基于神经网络的显示器件亮度补偿方法、装置及设备
CN113362781A (zh) * 2021-06-23 2021-09-07 合肥维信诺科技有限公司 显示面板的亮度补偿方法及亮度补偿系统

Also Published As

Publication number Publication date
TWI620444B (zh) 2018-04-01
KR20180080180A (ko) 2018-07-11
EP3331237A1 (en) 2018-06-06
EP3331237B1 (en) 2019-10-23
CN107637068B (zh) 2019-10-25
TW201822530A (zh) 2018-06-16
JP2019507361A (ja) 2019-03-14
US10438330B2 (en) 2019-10-08
KR102049681B1 (ko) 2019-11-27
WO2018098707A1 (zh) 2018-06-07
US20180150942A1 (en) 2018-05-31
ES2760980T3 (es) 2020-05-18
JP6461430B1 (ja) 2019-01-30

Similar Documents

Publication Publication Date Title
US20200045219A1 (en) Control method, control apparatus, imaging device, and electronic device
CN107637068A (zh) 图像坏点补偿方法、装置和电子设备
US10839729B2 (en) Apparatus for testing display panel and driving method thereof
CN113470581B (zh) 显示器背光亮度的控制方法、装置、电子设备及存储介质
CN104823437A (zh) 一种图片处理方法、装置
TW201106336A (en) Control method for improving the luminous uniformity and related luminosity calibrating controller and display device
CN115866394A (zh) 用于在第一镜头和第二镜头之间切换的方法和电子设备
CN114543797A (zh) 位姿预测方法和装置、设备、介质
WO2019100551A1 (zh) 显示面板Mura的检测方法、检测装置及计算机可读存储介质
CN114694618B (zh) 显示面板的亮度调节方法及其装置
US7619652B2 (en) Frame processing and frame processing method
CN112365833B (zh) 屏下光感亮度调节值的检测方法及矫正方法
CN113487577B (zh) 基于GRU-CNN组合模型的快速Gamma调校方法、系统及应用
CN114463221A (zh) 一种用于多设备域awb增强的自监督颜色校正方法
CN115691390B (zh) 一种显示面板补偿方法、装置及显示装置
CN101770136B (zh) 增益校准装置及校准增益值的方法
US20210225218A1 (en) Method, device and system for detecting display panel
CN113627609B (zh) 一种基于仿射变换的网络度量方法和存储设备
Bardow Estimating general motion and intensity from event cameras
CN113920950B (zh) 背光补偿方法、设备及存储介质
US20210056295A1 (en) Face identification method and terminal device using the same
CN117351886A (zh) 温度补偿方法及装置、显示设备、计算机可读介质
CN116168662A (zh) 一种显示器校正方法、装置及电子设备
CN114078168A (zh) 图像处理模型训练方法、图像处理方法及电子设备
US20090322957A1 (en) Image Processing Method and Related Apparatus for Calculating Target Motion Vector Used for Image Block to be Interpolated

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant