CN114302026A - 降噪方法、装置、电子设备和可读存储介质 - Google Patents
降噪方法、装置、电子设备和可读存储介质 Download PDFInfo
- Publication number
- CN114302026A CN114302026A CN202111635928.3A CN202111635928A CN114302026A CN 114302026 A CN114302026 A CN 114302026A CN 202111635928 A CN202111635928 A CN 202111635928A CN 114302026 A CN114302026 A CN 114302026A
- Authority
- CN
- China
- Prior art keywords
- noise reduction
- image data
- data
- primary
- preset threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000009467 reduction Effects 0.000 title claims abstract description 419
- 238000000034 method Methods 0.000 title claims abstract description 68
- 238000012545 processing Methods 0.000 claims abstract description 122
- 230000008569 process Effects 0.000 description 20
- 230000000694 effects Effects 0.000 description 19
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 230000002123 temporal effect Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000011946 reduction process Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
Abstract
本申请公开了一种降噪方法、装置、电子设备和可读存储介质，属于电子设备领域。该方法包括：根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。
Description
技术领域
本申请属于电子设备领域，具体涉及一种降噪方法、装置、电子设备和可读存储介质。
背景技术
现如今，用户对图像质量的需求与日俱增。
为了满足用户的需求，电子设备可以采用降噪系统对图像数据进行降噪处理，但这一实现方式的降噪效果仍不佳。
发明内容
本申请实施例的目的是提供一种降噪方法、装置、电子设备和可读存储介质，能够提升降噪效果。
第一方面，本申请实施例提供了一种降噪方法，该方法包括：根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。
第二方面，本申请实施例提供了一种降噪装置，该装置包括：获取模块，用于根据电子设备的图像传感器输出的数据，获得第一图像数据；一级降噪模块，用于对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；二级降噪模块，用于对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；以及，第一处理模块，用于对所述第一图像数据的二级降噪数据执行预设操作。
第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。
第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
在本申请实施例中，根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。本实施例通过在第一级降噪处理的基础之上，进一步进行第二级降噪处理，能够提升降噪效果。
附图说明
图1是本实施例提供的一种降噪方法的流程图；
图2是本实施例提供的第一级降噪处理流程的示意图；
图3是本实施例提供的第二级降噪处理流程的示意图；
图4是本实施例提供的一种降噪装置的方框原理图；
图5是本实施例提供的一种电子设备的硬件结构示意图；
图6是本实施例提供的另一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的降噪方法进行详细地说明。
请参考图1，本实施例提供的一种降噪方法可以包括以下步骤110～步骤140：
步骤110，根据电子设备的图像传感器输出的数据，获得第一图像数据。
详细地，该电子设备可以为智能手机、无人机等具有视频录制功能的智能设备。电子设备的图像传感器可以为摄像头。
在电子设备的相机处于预览模式或者录像模式下时，电子设备的图像传感器可以依次输出所采集到的每一帧图像数据。本实施例的降噪装置进而对于图像传感器输出的任一帧原始图像数据，均可实时的获得相应的第一图像数据。其中，本实施例的降噪装置可以为电子设备中的主控芯片。
在本申请一个实施例中，可以对图像传感器输出的原始图像数据经过图像信号处理(Image Signal Processing，ISP)多道工序处理，如经过包括线性化、去坏点、色彩校正、色域转换等算法处理，得到YUV格式的图像数据，即获得相应的第一图像数据。其中，YUV格式是视频、图片、相机等应用中使用的一类图像格式。
比如，对于图像传感器输出的第N帧数据，相应的第一图像数据可以记作FrameN，N为整数。请参考图2，图2示出了一种第一级降噪处理的处理逻辑。如图2所示，依次获得的各个第一图像数据可以分别记作Frame0、Frame1、……、Frame(N-1)、FrameN。
步骤120，对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据。
该步骤中，通过对第一图像数据进行一次降噪处理，可以获得相应的一级降噪数据。在本申请一个实施例中，该降噪处理可以包括时域降噪(TNR，Temporal NoiseReduction)和空域降噪(SNR，Spatial Noise Reduction)。
详细地，对于时域噪声来说，是由于图像的噪声主要为光子散射噪声(shotnoise)，具有随机性，所以在相机预览/录像时画面会出现随机跳动的噪声，噪声特性随时间发生变化。
对应地，时域降噪可以主要针对时域噪声做降噪处理，处理方法一般可以采取多帧叠加降噪的方式，时域降噪可以很好的保留清晰度。
详细地，对于空域噪声来说，是由于空间域像素级之间的差异，空域噪声一般都服从某一种分布，诸如泊松分布、高斯分布等。
对应地，空域降噪可以主要针对空域噪声做降噪处理，处理方法一般可以采取滤波算法进行单帧降噪，例如高斯滤波、双边滤波等滤波方法。
如上所述，该步骤中的降噪处理为第一级降噪处理，该步骤中先对第一图像数据进行第一级降噪处理，以得到相应的一级降噪结果，以便于后续对应进行第二级降噪处理时，可以基于该一级降噪结果进行相应的第二级降噪处理，以得到相应的二级降噪结果。
比如，对FrameN这一第一图像数据进行降噪处理后，获得的一级降噪数据可以记作FN。请参考图2，分别对获得的各个第一图像数据进行降噪处理后，可以获得相应的一级降噪数据，这些一级降噪数据如图2所示可以分别记作F1、……、F(N-1)、FN。
详细地，如图2所示，可以根据第一图像数据及其上一帧图像数据的一级降噪数据，来获得该第一图像数据的一级降噪数据。
其中需要说明的是，请参考图2，由于Frame0为第一个第一图像数据，故而可以不对Frame0作第一级降噪处理，并默认其相应的一级降噪数据F0即为Frame0。如此，在对Frame1作第一级降噪处理时，可以直接使用Frame0来计算Frame1的一级降噪数据F1。
基于上述内容，在本申请一个实施例中，所述步骤120，对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据，可以包括以下步骤1201～步骤1203：
步骤1201，获取第二图像数据的一级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据。
该步骤中，获取上一帧第一图像数据的一级降噪数据。比如步骤110中的第一图像数据为FrameN时，其上一帧图像数据为Frame(N-1)，Frame(N-1)的一级降噪数据为F(N-1)。
步骤1202，根据所述第一图像数据进行空域降噪处理，得到所述第一图像数据的一级空域降噪数据。
该步骤中，可以对第一图像数据FrameN进行空域降噪处理，获得第一图像数据FrameN的一级空域降噪数据FrameN'。
步骤1203，根据所述第二图像数据的一级降噪数据、所述第一图像数据的一级空域降噪数据和所述第一图像数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
该步骤中，可以根据第一图像数据FrameN的上一帧图像数据的一级降噪数据F(N-1)、第一图像数据FrameN的一级空域降噪数据FrameN'、以及第一图像数据FrameN进行时域降噪处理，获得第一图像数据FrameN的一级降噪数据FN。
在可行的实现方式中，时域降噪处理的处理公式可以如下所述：
FN＝α1×F(N-1)+(1-α1)×(β1×FrameN'+(1-β1)×FrameN)
其中，α1和β1的取值均可依据环境做测试而得到。
步骤130，对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据。
该步骤中，可以在第一级降噪处理的基础之上，进行再一次的降噪处理以实现级联降噪效果，从而完成两级降噪处理。其中，这两级降噪处理的基本处理逻辑可以相一致。比如，对应于图2所示的第一级降噪处理的处理逻辑，图3示出了第二级降噪处理的处理逻辑。
以FrameN这一第一图像数据为例，对第一图像数据FrameN的一级降噪数据FN进行降噪处理后，获得的二级降噪数据可以记作FN"。请参考图3，分别对获得的各个第一图像数据的一级降噪数据进行降噪处理后，可以获得相应的二级降噪数据，这些二级降噪数据如图3所示可以分别记作F2"、……、F(N-1)"、FN"。
详细地，如图3所示，可以根据第一图像数据的上一帧图像数据的二级降噪数据，以及根据第一图像数据的一级降噪数据，来获得该第一图像数据的二级降噪数据。
其中需要说明的是，请参考图2，由于Frame0为第一个第一图像数据，故而可以不对Frame0作第一级降噪处理(即实际上未获得F0)，故而可以不对F1作降噪处理，并默认Frame1的二级降噪数据F1"即为F1。如此，在对F2作降噪处理时，可以直接使用F1来计算Frame2的二级降噪数据F2"。
基于上述内容，在本申请一个实施例中，所述步骤130，对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据，可以包括以下步骤1301～步骤1303：
步骤1301，获取第二图像数据的二级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据。
该步骤中，获取上一帧第一图像数据的二级降噪数据。比如步骤110中的第一图像数据为FrameN时，其上一帧图像数据为Frame(N-1)，Frame(N-1)的二级降噪数据为F(N-1)"。
步骤1302，根据所述第一图像数据的一级降噪数据进行空域降噪处理，得到所述第一图像数据的二级空域降噪数据。
该步骤中，可以对第一图像数据FrameN的一级降噪数据FN进行空域降噪处理，获得第一图像数据FrameN的二级空域降噪数据FN'。
步骤1303，根据所述第二图像数据的二级降噪数据、所述第一图像数据的二级空域降噪数据和所述第一图像数据的一级降噪数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
该步骤中，可以根据第一图像数据FrameN的上一帧图像数据的二级降噪数据F(N-1)"、第一图像数据FrameN的二级空域降噪数据FN'、以及第一图像数据FrameN的一级降噪数据FN进行时域降噪处理，获得第一图像数据FrameN的二级降噪数据FN"。
在可行的实现方式中，时域降噪处理的处理公式可以如下所述：
FN"＝α2×F(N-1)"+(1-α2)×(β2×FN'+(1-β2)×FN)
其中，α2和β2的取值均可依据环境做测试而得到。
步骤140，对所述第一图像数据的二级降噪数据执行预设操作。
该步骤中，在对第一图像数据完成级联降噪处理后，可以对获得的二级降噪数据执行预设操作。其中，该预设操作可以包括展示和存储中的至少一个。比如在预览场景下，可以展示二级降噪数据，在录像场景下，可以展示并存储或者仅存储二级降噪数据。
基于此，由于向用户展示的图像数据为经过级联降噪处理后的图像数据，故而可以具有良好的图像画质，尤其是暗环境下的图像画质提升效果更显著，故而可满足用户的高质量图像需求，提升用户体验。
在本申请实施例中，根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。本实施例通过在第一级降噪处理的基础之上，进一步进行第二级降噪处理，能够提升降噪效果。
此外，一级降噪系统主要通过空域降噪和时域降噪来处理噪声，但一级降噪系统具有一定的局限性，这一局限性体现在：1)时域降噪过强会带来更显性的拖影；2)空域降噪过强会带来更差的清晰度效果。而本实施例将一级降噪系统拓展为两级降噪系统，通过两级降噪处理以避免存在一级降噪系统所具有的以上局限性，降噪效果更好。
再者，本实施例通过两级降噪处理可以显著改善暗环境场景下录制视频的画质，而无需通过提高传感器的gain(增益)值来满足用户的录制视频高质量需求，从而可以避免存在因gain值的提升所带来的视频的噪声会越来越大的弊端。
可见，本实施例为具有录制视频功能的智能设备提供一个高效降噪系统，可以在暗环境场景下提升录制视频的画质，比如至少可以改善清晰度和噪声。如此，通过将本实施例的降噪方法应用于诸如聊天软件、短视频应用等使用场景中，可以提高录制场景的亮度、清晰度等，从而可以满足用户对视频录制或视频通话等功能的高质量需求。
考虑到亮环境下的一级降噪效果和二级降噪效果的差距较小，而暗环境下的一级降噪效果和二级降噪效果的差距较大，故而为了节省功耗和性能，可以在亮环境下仅使用一级降噪，而在暗环境下使用二级降噪，以期显著提升暗环境下的信噪比。
基于此，在本申请一个实施例中，在对所述第一图像数据的一级降噪数据进行降噪处理之前，所述方法还可以包括以下步骤1001～步骤1003：
步骤1001，根据所述第一图像数据，获得用于指示所述电子设备所在环境亮度的参数值。
详细地，图像传感器输出的每一帧图像数据可以分别对应一个曝光策略，每一组曝光策略都对应一组luxIndex(即lux指数)。如此，在可行的实现方式中，可以第一图像数据的luxIndex作为上述参数值。
其中，光照度的单位是勒克斯，是英文lux的音译，也可写为lx。
需要说明的是，暗环境下的luxIndex的数值较大，亮环境下的luxIndex的数值较小。
步骤1002，根据所述参数值和预设阈值，确定所述电子设备的降噪模式，所述电子设备的降噪模式包括一级降噪模式和二级降噪模式中的一个。
详细地，可以根据参数值和阈值的大小对比结果，来确定所选用的降噪模式是一级降噪模式还是二级降噪模式。比如预设阈值可以为420，若获得的luxIndex大于420则使用二级降噪模式，反之使用一级降噪模式。
详细地，在确定好电子设备的降噪模式后，可以进行降噪模式的按需无缝切换。
步骤1003，在所述电子设备处于所述二级降噪模式的情况下，执行所述对所述第一图像数据的一级降噪数据进行降噪处理的步骤。
详细地，在二级降噪模式下，在执行完以上步骤120以完成一级降噪处理之后，还需执行以上步骤130以执行第一级降噪处理后的第二级降噪处理，从而完成级联降噪效果。完成二级降噪处理后得到的图像数据可进行存储及展示。
对应地，在本申请一个实施例中，在所述确定所述电子设备的降噪模式之后，所述方法还可以包括以下步骤1004：
步骤1004，在所述电子设备处于所述一级降噪模式的情况下，对所述第一图像数据的一级降噪数据执行所述预设操作。
详细地，在一级降噪模式下，在执行完以上步骤120以完成一级降噪处理之后，无需再执行以上步骤130以执行第一级降噪处理后的第二级降噪处理。完成一级降噪处理后得到的图像数据可直接进行存储及展示。
基于本实施例提供的降噪方法，对于手机、无人机等视频录制设备采取的降噪系统，可以在亮度较高的使用场景下采用一级降噪系统，以及可以在亮度较低的使用场景下采用二级降噪系统，满足用户对暗环境下视频录制的高质量需求。
由上可知，可以根据参数值和阈值的大小对比，来确定所使用的降噪模式。考虑到设置一个阈值时，若参数值在阈值附近反复变化，从而会导致降噪模式对应的反复切换，造成降噪系统稳定性不佳，故而为避免存在这一情况，可以设置两个阈值。基于参数值和两个阈值的大小对比，来确定所使用的降噪模式。
基于此，在本申请一个实施例中，所述预设阈值包括：第一预设阈值和第二预设阈值，所述第一预设阈值大于所述第二预设阈值。比如，可以设置第一预设阈值为420，第二预设阈值为400。
详细地，通过将参数值与两个阈值进行数值大小对比，可以获得相应的对比结果，进而可以根据对比结果来确定所使用的降噪模式。
如此，所述步骤1002，根据所述参数值和预设阈值，确定所述电子设备的降噪模式，可以包括以下步骤10021～步骤10023中的一个：
步骤10021，在所述参数值大于或者等于所述第一预设阈值时，确定所述电子设备的降噪模式为所述二级降噪模式。
若获得的luxIndex大于或者等于420，可以说明当前环境为暗环境，故而可以使用二级降噪模式，以期提升暗环境下的信噪比。
步骤10022，在所述参数值介于所述第一预设阈值和所述第二预设阈值之间时，确定所述电子设备的降噪模式为所述电子设备的上一个降噪模式。
若获得的luxIndex小于420但大于400，可以说明当前环境介于暗环境和亮环境的交界区域，故而可以维持当前的降噪模式不做改变，以期避免降噪模式的低效转换。
步骤10023，在所述参数值小于或者等于所述第二预设阈值时，确定所述电子设备的降噪模式为所述一级降噪模式。
若获得的luxIndex小于或者等于400，可以说明当前环境为亮环境，故而可以使用一级降噪模式，以期节省功耗和性能。
本申请实施例提供的降噪方法，执行主体可以为降噪装置。本申请实施例中以降噪装置执行降噪方法为例，说明本申请实施例提供的降噪装置。
如图4所示，本实施例提供了一种降噪装置200，可以包括获取模块210、一级降噪模块220、二级降噪模块230和第一处理模块240。
其中，所述获取模块210用于根据电子设备的图像传感器输出的数据，获得第一图像数据。所述一级降噪模块220用于对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据。所述二级降噪模块230用于对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据。所述第一处理模块240用于对所述第一图像数据的二级降噪数据执行预设操作。
在本申请实施例中，根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。本实施例通过在第一级降噪处理的基础之上，进一步进行第二级降噪处理，能够提升降噪效果。
在本申请一个实施例中，所述一级降噪模块220，用于获取第二图像数据的一级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据进行空域降噪处理，得到所述第一图像数据的一级空域降噪数据；根据所述第二图像数据的一级降噪数据、所述第一图像数据的一级空域降噪数据和所述第一图像数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
在本申请一个实施例中，所述二级降噪模块230，用于获取第二图像数据的二级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据的一级降噪数据进行空域降噪处理，得到所述第一图像数据的二级空域降噪数据；根据所述第二图像数据的二级降噪数据、所述第一图像数据的二级空域降噪数据和所述第一图像数据的一级降噪数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
在本申请一个实施例中，所述降噪装置200还包括：第二处理模块，用于在所述二级降噪模块230对所述第一图像数据的一级降噪数据进行降噪处理之前，根据所述第一图像数据，获得用于指示所述电子设备所在环境亮度的参数值；根据所述参数值和预设阈值，确定所述电子设备的降噪模式，所述电子设备的降噪模式包括一级降噪模式和二级降噪模式中的一个；在所述电子设备处于所述二级降噪模式的情况下，触发所述二级降噪模块230执行所述对所述第一图像数据的一级降噪数据进行降噪处理的步骤。
在本申请一个实施例中，所述第二处理模块，用于在确定所述电子设备的降噪模式之后，在所述电子设备处于所述一级降噪模式的情况下，触发所述第一处理模块240对所述第一图像数据的一级降噪数据执行所述预设操作。
在本申请一个实施例中，所述预设阈值包括：第一预设阈值和第二预设阈值，所述第一预设阈值大于所述第二预设阈值；所述第二处理模块，用于在所述参数值大于或者等于所述第一预设阈值时，确定所述电子设备的降噪模式为所述二级降噪模式；在所述参数值介于所述第一预设阈值和所述第二预设阈值之间时，确定所述电子设备的降噪模式为所述电子设备的上一个降噪模式；在所述参数值小于或者等于所述第二预设阈值时，确定所述电子设备的降噪模式为所述一级降噪模式。
本申请实施例中的降噪装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtualreality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
本申请实施例中的降噪装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。
本申请实施例提供的降噪装置能够实现图1的方法实施例实现的各个过程，为避免重复，这里不再赘述。
可选地，如图5所示，本申请实施例还提供一种电子设备300，包括处理器310和存储器320，存储器320上存储有可在所述处理器310上运行的程序或指令，该程序或指令被处理器310执行时实现上述降噪方法实施例的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。
图6为实现本申请实施例的一种电子设备1000的硬件结构示意图。
该电子设备1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解，电子设备1000还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。
其中，处理器1010，用于根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；触发显示单元1006对所述第一图像数据的二级降噪数据执行预设操作。
在本申请实施例中，根据电子设备的图像传感器输出的数据，获得第一图像数据；对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；对所述第一图像数据的二级降噪数据执行预设操作。本实施例通过在第一级降噪处理的基础之上，进一步进行第二级降噪处理，能够提升降噪效果。
可选地，处理器1010，用于获取第二图像数据的一级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据进行空域降噪处理，得到所述第一图像数据的一级空域降噪数据；根据所述第二图像数据的一级降噪数据、所述第一图像数据的一级空域降噪数据和所述第一图像数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
可选地，处理器1010，用于获取第二图像数据的二级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据的一级降噪数据进行空域降噪处理，得到所述第一图像数据的二级空域降噪数据；根据所述第二图像数据的二级降噪数据、所述第一图像数据的二级空域降噪数据和所述第一图像数据的一级降噪数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
可选地，处理器1010，用于在对所述第一图像数据的一级降噪数据进行降噪处理之前，根据所述第一图像数据，获得用于指示所述电子设备所在环境亮度的参数值；根据所述参数值和预设阈值，确定所述电子设备的降噪模式，所述电子设备的降噪模式包括一级降噪模式和二级降噪模式中的一个；在所述电子设备处于所述二级降噪模式的情况下，执行所述对所述第一图像数据的一级降噪数据进行降噪处理的步骤。
可选地，处理器1010，用于在所述确定所述电子设备的降噪模式之后，在所述电子设备处于所述一级降噪模式的情况下，触发显示单元1006对所述第一图像数据的一级降噪数据执行所述预设操作。
可选地，所述预设阈值包括：第一预设阈值和第二预设阈值，所述第一预设阈值大于所述第二预设阈值；处理器1010，用于在所述参数值大于或者等于所述第一预设阈值时，确定所述电子设备的降噪模式为所述二级降噪模式；在所述参数值介于所述第一预设阈值和所述第二预设阈值之间时，确定所述电子设备的降噪模式为所述电子设备的上一个降噪模式；在所述参数值小于或者等于所述第二预设阈值时，确定所述电子设备的降噪模式为所述一级降噪模式。
应理解的是，本申请实施例中，输入单元1004可以包括图形处理器(GraphicsProcessing Unit，GPU)10041和麦克风10042，图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072中的至少一种。触控面板10071，也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
存储器1009可用于存储软件程序以及各种数据。存储器1009可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器1009可以包括易失性存储器或非易失性存储器，或者，存储器x09可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器1009包括但不限于这些和任意其它适合类型的存储器。
处理器1010可包括一个或多个处理单元；可选的，处理器1010集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述降噪方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述降噪方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述降噪方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。
Claims (14)
1.一种降噪方法，其特征在于，包括：
根据电子设备的图像传感器输出的数据，获得第一图像数据；
对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；
对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；
对所述第一图像数据的二级降噪数据执行预设操作。
2.根据权利要求1所述的方法，其特征在于，所述对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据，包括：
获取第二图像数据的一级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；
根据所述第一图像数据进行空域降噪处理，得到所述第一图像数据的一级空域降噪数据；
根据所述第二图像数据的一级降噪数据、所述第一图像数据的一级空域降噪数据和所述第一图像数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
3.根据权利要求1所述的方法，其特征在于，所述对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据，包括：
获取第二图像数据的二级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；
根据所述第一图像数据的一级降噪数据进行空域降噪处理，得到所述第一图像数据的二级空域降噪数据；
根据所述第二图像数据的二级降噪数据、所述第一图像数据的二级空域降噪数据和所述第一图像数据的一级降噪数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
4.根据权利要求1所述的方法，其特征在于，在对所述第一图像数据的一级降噪数据进行降噪处理之前，所述方法还包括：
根据所述第一图像数据，获得用于指示所述电子设备所在环境亮度的参数值；
根据所述参数值和预设阈值，确定所述电子设备的降噪模式，所述电子设备的降噪模式包括一级降噪模式和二级降噪模式中的一个；
在所述电子设备处于所述二级降噪模式的情况下，执行所述对所述第一图像数据的一级降噪数据进行降噪处理的步骤。
5.根据权利要求4所述的方法，其特征在于，在所述确定所述电子设备的降噪模式之后，所述方法还包括：
在所述电子设备处于所述一级降噪模式的情况下，对所述第一图像数据的一级降噪数据执行所述预设操作。
6.根据权利要求4所述的方法，其特征在于，所述预设阈值包括：第一预设阈值和第二预设阈值，所述第一预设阈值大于所述第二预设阈值；
所述根据所述参数值和预设阈值，确定所述电子设备的降噪模式，包括：
在所述参数值大于或者等于所述第一预设阈值时，确定所述电子设备的降噪模式为所述二级降噪模式；
在所述参数值介于所述第一预设阈值和所述第二预设阈值之间时，确定所述电子设备的降噪模式为所述电子设备的上一个降噪模式；
在所述参数值小于或者等于所述第二预设阈值时，确定所述电子设备的降噪模式为所述一级降噪模式。
7.一种降噪装置，其特征在于，包括：
获取模块，用于根据电子设备的图像传感器输出的数据，获得第一图像数据；
一级降噪模块，用于对所述第一图像数据进行降噪处理，获得所述第一图像数据的一级降噪数据；
二级降噪模块，用于对所述第一图像数据的一级降噪数据进行降噪处理，获得所述第一图像数据的二级降噪数据；以及，
第一处理模块，用于对所述第一图像数据的二级降噪数据执行预设操作。
8.根据权利要求7所述的装置，其特征在于，所述一级降噪模块，用于获取第二图像数据的一级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据进行空域降噪处理，得到所述第一图像数据的一级空域降噪数据；根据所述第二图像数据的一级降噪数据、所述第一图像数据的一级空域降噪数据和所述第一图像数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
9.根据权利要求7所述的装置，其特征在于，所述二级降噪模块，用于获取第二图像数据的二级降噪数据，所述第二图像数据为所述第一图像数据的上一帧图像数据；根据所述第一图像数据的一级降噪数据进行空域降噪处理，得到所述第一图像数据的二级空域降噪数据；根据所述第二图像数据的二级降噪数据、所述第一图像数据的二级空域降噪数据和所述第一图像数据的一级降噪数据进行时域降噪处理，获得所述第一图像数据的一级降噪数据。
10.根据权利要求7所述的装置，其特征在于，所述装置还包括：
第二处理模块，用于在所述二级降噪模块对所述第一图像数据的一级降噪数据进行降噪处理之前，根据所述第一图像数据，获得用于指示所述电子设备所在环境亮度的参数值；根据所述参数值和预设阈值，确定所述电子设备的降噪模式，所述电子设备的降噪模式包括一级降噪模式和二级降噪模式中的一个；在所述电子设备处于所述二级降噪模式的情况下，触发所述二级降噪模块执行所述对所述第一图像数据的一级降噪数据进行降噪处理的步骤。
11.根据权利要求10所述的装置，其特征在于，所述第二处理模块，用于在确定所述电子设备的降噪模式之后，在所述电子设备处于所述一级降噪模式的情况下，触发所述第一处理模块对所述第一图像数据的一级降噪数据执行所述预设操作。
12.根据权利要求10所述的装置，其特征在于，所述预设阈值包括：第一预设阈值和第二预设阈值，所述第一预设阈值大于所述第二预设阈值；
所述第二处理模块，用于在所述参数值大于或者等于所述第一预设阈值时，确定所述电子设备的降噪模式为所述二级降噪模式；在所述参数值介于所述第一预设阈值和所述第二预设阈值之间时，确定所述电子设备的降噪模式为所述电子设备的上一个降噪模式；在所述参数值小于或者等于所述第二预设阈值时，确定所述电子设备的降噪模式为所述一级降噪模式。
13.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-6任一项所述的降噪方法的步骤。
14.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-6任一项所述的降噪方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111635928.3A CN114302026A (zh) | 2021-12-28 | 2021-12-28 | 降噪方法、装置、电子设备和可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111635928.3A CN114302026A (zh) | 2021-12-28 | 2021-12-28 | 降噪方法、装置、电子设备和可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114302026A true CN114302026A (zh) | 2022-04-08 |
Family
ID=80971105
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111635928.3A Pending CN114302026A (zh) | 2021-12-28 | 2021-12-28 | 降噪方法、装置、电子设备和可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114302026A (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120200733A1 (en) * | 2011-02-09 | 2012-08-09 | Nikon Corporation | Image processing apparatus, imaging apparatus, computer readable storage medium storing image processing program, and image processing method |
| CN104023166A (zh) * | 2014-06-20 | 2014-09-03 | 武汉烽火众智数字技术有限责任公司 | 一种环境自适应视频图像降噪方法及装置 |
| CN109348088A (zh) * | 2018-11-22 | 2019-02-15 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、电子设备及计算机可读存储介质 |
| CN109640084A (zh) * | 2018-12-14 | 2019-04-16 | 网易（杭州）网络有限公司 | 视频流降噪方法、装置及存储介质 |
| CN110519485A (zh) * | 2019-09-09 | 2019-11-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN112085682A (zh) * | 2020-09-11 | 2020-12-15 | 成都国科微电子有限公司 | 图像降噪方法、装置、电子设备及存储介质 |
| CN112929558A (zh) * | 2019-12-06 | 2021-06-08 | 荣耀终端有限公司 | 图像处理方法和电子设备 |
| CN113810674A (zh) * | 2021-09-06 | 2021-12-17 | Oppo广东移动通信有限公司 | 图像处理方法与装置、终端及可读存储介质 |
-
2021
- 2021-12-28 CN CN202111635928.3A patent/CN114302026A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120200733A1 (en) * | 2011-02-09 | 2012-08-09 | Nikon Corporation | Image processing apparatus, imaging apparatus, computer readable storage medium storing image processing program, and image processing method |
| CN104023166A (zh) * | 2014-06-20 | 2014-09-03 | 武汉烽火众智数字技术有限责任公司 | 一种环境自适应视频图像降噪方法及装置 |
| CN109348088A (zh) * | 2018-11-22 | 2019-02-15 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、电子设备及计算机可读存储介质 |
| CN109640084A (zh) * | 2018-12-14 | 2019-04-16 | 网易（杭州）网络有限公司 | 视频流降噪方法、装置及存储介质 |
| CN110519485A (zh) * | 2019-09-09 | 2019-11-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN112929558A (zh) * | 2019-12-06 | 2021-06-08 | 荣耀终端有限公司 | 图像处理方法和电子设备 |
| CN112085682A (zh) * | 2020-09-11 | 2020-12-15 | 成都国科微电子有限公司 | 图像降噪方法、装置、电子设备及存储介质 |
| CN113810674A (zh) * | 2021-09-06 | 2021-12-17 | Oppo广东移动通信有限公司 | 图像处理方法与装置、终端及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108924420B (zh) | 图像拍摄方法、装置、介质、电子设备及模型训练方法 | |
| EP2109313B1 (en) | Television receiver and method | |
| US20220417417A1 (en) | Content Operation Method and Device, Terminal, and Storage Medium | |
| CN111835982B (zh) | 图像获取方法、图像获取装置、电子设备及存储介质 | |
| WO2023160617A9 (zh) | 视频插帧处理方法、视频插帧处理装置和可读存储介质 | |
| CN113852756B (zh) | 图像获取方法、装置、设备和存储介质 | |
| CN114268707A (zh) | 图像处理方法、装置和电子设备 | |
| CN112437237B (zh) | 拍摄方法及装置 | |
| CN112367486B (zh) | 视频处理方法及装置 | |
| CN112508820A (zh) | 图像处理方法、装置及电子设备 | |
| CN112199149A (zh) | 界面渲染方法、装置及电子设备 | |
| CN113852757B (zh) | 视频处理方法、装置、设备和存储介质 | |
| CN114302026A (zh) | 降噪方法、装置、电子设备和可读存储介质 | |
| CN115278047A (zh) | 拍摄方法、装置、电子设备和存储介质 | |
| CN114638742A (zh) | 场景画面处理方法和电子设备 | |
| CN114302209A (zh) | 视频处理方法、装置、电子设备及介质 | |
| CN114286007A (zh) | 图像处理电路、图像处理方法、电子设备和可读存储介质 | |
| CN114339072A (zh) | 图像处理电路、方法和电子设备 | |
| CN112511890A (zh) | 视频图像处理方法、装置及电子设备 | |
| CN112399238A (zh) | 视频播放方法、装置及电子设备 | |
| CN114337872B (zh) | 网络信号测量方法及装置 | |
| CN112887629B (zh) | 频率检测方法、装置、电子设备及存储介质 | |
| CN115514860A (zh) | 动态帧率补偿方法、图像处理电路和电子设备 | |
| CN115514859A (zh) | 图像处理电路、图像处理方法及电子设备 | |
| CN117714844A (zh) | 视频处理方法、装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |