CN115052104A - 图像处理方法、电子装置及非易失性计算机可读存储介质 - Google Patents
图像处理方法、电子装置及非易失性计算机可读存储介质 Download PDFInfo
- Publication number
- CN115052104A CN115052104A CN202210259772.1A CN202210259772A CN115052104A CN 115052104 A CN115052104 A CN 115052104A CN 202210259772 A CN202210259772 A CN 202210259772A CN 115052104 A CN115052104 A CN 115052104A
- Authority
- CN
- China
- Prior art keywords
- image
- resolution
- definition
- processing
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 50
- 238000012216 screening Methods 0.000 claims abstract description 15
- 238000007499 fusion processing Methods 0.000 claims description 28
- 238000004590 computer program Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 abstract description 25
- 230000008569 process Effects 0.000 abstract description 12
- 230000006870 function Effects 0.000 description 32
- 238000004422 calculation algorithm Methods 0.000 description 12
- 230000004927 fusion Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000009467 reduction Effects 0.000 description 4
- 241001156002 Anthonomus pomorum Species 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 206010034960 Photophobia Diseases 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 208000013469 light sensitivity Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像处理方法，电子装置和非易失性计算机可读存储介质，该方法包括：在预览模式时，缓存多帧具有第一分辨率第一图像；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有小于第一分辨率的第二分辨率；及处理第二图像及中间图像以获取目标图像。本申请的图像处理方法、电子装置及计算机可读存储介质通过从预览模式时缓存的多帧第一图像中筛选清晰度大于预设清晰阈值的至少一帧作为中间图像，处理在拍照时获取的第二图像和中间图以获得目标图像，相较于直接输出第二图像而言，由于融合了清晰度较高的中间图像，最终输出的目标图像噪点较少，细节也更丰富。
Description
技术领域
本申请涉及电子技术领域，更具体而言，涉及一种图像处理方法、电子装置及非易失性计算机可读存储介质。
背景技术
目前电子厂商为了打造相机的特色，相机的变焦清晰度是一个很重要的卖点。市面上最多的实现方式是直接利用拍照时获取的图像进行处理以得到目标图像，这样获取的目标图像往往噪点会比较多，清晰度不高。
发明内容
本申请实施方式提供一种图像处理方法、电子装置及计算机可读存储介质。
本申请实施方式的图像处理方法包括：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及处理第二图像及中间图像以获取目标图像。
本申请实施方式的电子装置包括一个或多个处理器，一个或多个处理器用于：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及处理第二图像及中间图像以获取目标图像。
本申请实施方式的非易失性计算机可读存储介质包括计算机程序，计算机程序被一个或多个处理器执行时，使得一个或多个处理器执行如下图像处理方法：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及处理第二图像及中间图像以获取目标图像。
本申请实施方式的图像处理方法、电子装置和非易失性计算机可读存储介质可实现以下方法：在预览模式时，缓存多帧第一图像，缓存多帧第一图像，第一图像均具有第一分辨率；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及处理第二图像及中间图像以获取目标图像。
本申请实施方式提供的图像处理方法、电子装置及计算机可读存储介质通过从预览模式时缓存的多帧第一图像中筛选清晰度大于预设清晰阈值的至少一帧作为中间图像，处理在拍照时获取的第二图像和中间图以获得目标图像，相较于直接输出第二图像而言，由于融合了清晰度较高的中间图像，使得最终输出的目标图像噪点较少，细节也更丰富，图像变焦效果更佳。
本申请的实施方式的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实施方式的实践了解到。
附图说明
本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：
图1是本申请某些实施方式的图像处理方法的流程示意图；
图2是本申请某些实施方式的电子装置的结构示意图；
图3是本申请某些实施方式的图像处理方法的第一图像缓存队列示意图；
图4是本申请某些实施方式的图像处理方法的流程示意图；
图5和图6是本申请某些实施方式的图像处理方法的流程示意图；
图7是本申请某些实施方式的非易失性计算机可读存储介质和处理器的连接状态示意图。
具体实施方式
下面详细描述本申请的实施方式，所述实施方式的示例在附图中示出，其中，相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本申请的实施方式，而不能理解为对本申请的实施方式的限制。
请参阅图1，本申请实施方式提供一种图像处理方法，该图像处理方法包括：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
03：从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
07：处理第二图像及中间图像以获取目标图像。
请参阅图2，本申请实施方式的电子装置100，该电子装置100包括电池10、显示屏20、一个或多个处理器30、系统总线40和存储器50。本申请实施方式的图像处理方法可应用于本申请实施方式的电子装置100。其中，电池10用于为电子装置100供电。显示屏20用于显示图像和应用软件。一个或多个处理器30用于执行01、03、05和07中的方法。即，一个或多个处理器30用于：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及处理第二图像及中间图像以获取目标图像。系统总线40用于传输电子装置100中需要用到的信息，系统总线40可与电池10、显示屏20、一个或多个处理器30、和存储器50中的至少一个电连接，本申请实施方式中，系统总线40与电池10、显示屏20、一个或多个处理器30、和存储器50均电连接。存储器50可用于存储包含电子装置100上需要存储(包括需缓存)的信息。
电子装置100包括手机、平板电脑、智能手表等具有拍照功能的设备。当用户进行变焦拍照时，采用潜望式镜头的装置需要用到反射棱镜，光线会有一定程度的衰减，在暗处的表现力较差；而采用裁剪和缩放功能的装置对输出的原图进行操作，缩放过程中对应的噪点会被放大，同时放大大多采用插值方式来实现，细节反而损失很多，变焦效果较差。
本申请实施方式提供的图像处理方法及电子装置100通过从预览模式时缓存的多帧第一图像中筛选清晰度大于预设清晰阈值的至少一帧作为中间图像，处理在拍照时获取的第二图像和中间图以获得目标图像，相较于直接输出第二图像而言，由于融合了清晰度较高的中间图像，使得最终输出的目标图像噪点较少，细节也更丰富，图像变焦效果更佳。
请参阅图2和图3，本申请实施方式的电子装置100的一个或多个处理器30，在用户切换到具体某个倍数进行变焦拍照并处于预览模式时，可按照去马赛克(高分辨率)模式输出第一图像的图像数据，输出的多帧第一图像一方面存储到存储器50中，一方面可以通过显示屏20显示出来以呈现给用户预览。
请参阅图4，多帧第一图像具有第一分辨率并且缓存在存储器50中的RAW数据队列中，数据队列实时更新最新图像数据，队列大小定义为M，单位为帧，M的大小控制在合理范围内，具体地，2≤M≤10的大小。当M＜2，则第一图像的帧数较少，很难保证能够找出清晰度较高的中间图像，导致后续融合效果不佳，输出的目标图像噪点仍较多，细节也不丰富，图像变焦效果不佳。当M大于10，则第一图像的帧数较多，一方面会占据存储器50中较多的存储空间，另一方面会减缓筛选出清晰度较高的中间图像的进程，处理速度减慢。而本申请中2≤M≤10，可避免用户在变焦拍照时因身体或手部震动带来的图像质量的损失，因此可在保证输出的目标图像噪点仍较少，细节丰富，图像变焦效果较佳的同时，还不过多占据存储器50的存储空间，及加快处理速度。
请参阅图1和图4，在某些实施方式中，03：从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像，可包括：
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
请参阅图2和图4，在某些实施方式中，一个或多个处理器30还用于执行031和033中的方法。即，一个或多个处理器30还用于采用灰度方差函数获取每帧第一图像的清晰度值和选择清晰度大于清晰阈值的第一图像作为中间图像。
在某些实施方式中，每帧第一图像的清晰度值通过采用灰度方差函数获取。灰度方差函数的原理为当完全聚焦时，图像最清晰，图像中的高频分量也很多，故可将灰度变化作为聚焦评价的依据。灰度方差函数的公式如下：
D(f)＝∑y ∑x(|f(x，y)-f(x，y-1)|+|f(x，y)-f(x+1，y)|)公式1
其中：f(x，y)表示图像f在对应像素点(x，y)的灰度值，D(f)为图像清晰度计算结果。灰度方差函数对缓存队列中每帧第一图像进行计算，得到缓存队列中所有第一图像的清晰度值，从中筛选出清晰度大于预设清晰阈值的至少一帧作为中间图像。
例如，假设M＝10，通过灰度方差函数计算得到的10帧第一图像的清晰度分别为95、92、91、89、85、84、82、80、79、78，若预设清晰度阈值为90，则一个或多个处理器30筛选出清晰度分别为95、92和91的第一图像作为中间图像。即中间图像的帧数大于等于一帧且小于第一图像的帧数。当一个或多个处理器30筛选得到清晰度大于预设清晰阈值的至少一帧中间图像之后，一个或多个处理器30可清除存储器50的缓存队列中不符合条件的其他第一图像，仅保留筛选得到的至少一帧中间图像以释放存储器50的内存空间，如此，一方面能够节省存储器50的存储空间，另一方面，可以方便一个或多个处理器30快速访问存储器50以提高一个或多个处理器30的执行性能，从而进一步加快处理速度。
第一图像的清晰度值还可以通过以下几种常见的清晰度计算函数获取：Brenner梯度函数、Tenengrad梯度函数和Laplacian梯度函数。Brenner梯度函数通过计算相邻两个像素灰度差的平方，Brenner梯度函数的公式如下：
D(f)＝∑y ∑x|f(x+2，y)-f(x，y)|2公式2
Tenengrad梯度函数采用Sobel算子分别提取水平和垂直方向的梯度值，Tenengrad梯度函数的公式如下：
D(f)＝∑y ∑x|G(x，y)|(G(x，y)＞T)公式3
G(x，y)的形式如下：
其中，T是给定的边缘检测阈值，G(x，y)是像素点(x，y)处Sobel水平和垂直方向边缘检测算子的卷积。Laplacian梯度函数和Tenengrad梯度函数基本一致，用Laplacian算子替代Sobel算子即可，该算子定义如下：
Laplacian梯度函数的公式如下：
D(f)＝∑y ∑x|G(x，y)|(G(x，y)＞T)公式6
其中，G(x，y)是像素点(x，y)处Laplacian算子的卷积。
请参阅图4，在某些实施方式中，本申请方式提供的图像处理方法还包括：
04：在显示屏上显示经过缩放后的第一图像。
请参阅图2，对应地，显示屏20可以用于显示经过缩放后的第一图像。
请结合图4及图5，由于预览场景是实时输出的，对实时性要求较高，可采用去马赛克模式输出第一图像，输出后的第一图像在电子装置100不必再裁剪，只需要在显示屏20显示经过缩放(包括缩小和放大)后的第一图像，本实施方式中，显示预览第一图像更多是采用图像缩小技术，缩小第一图像是为了适应显示屏20的区域大小，使得显示更为正常。
请参阅图1和图2，在某些实施方式中，一个或多个处理器30还用于执行05中的方法。即，在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率。
具体地，请参阅图6，在拍照瞬间，电子装置100切换到低分辨率输出模式，例如像素合并(4合1、8合1、或16合1等)输出模式，由于像素合并输出，则电子装置100的镜头的感光量变大，暗处的表现力好，同时噪点更少，此时获取至少一帧第二图像。在用户确定好变焦倍数并执行拍照时，电子装置100会切换到相应的输出设置，不同变焦倍数下对应不同的第二图像的第二分辨率。请参见下表1，为执行拍照时，变焦倍数与图像输出设置的对应关系表，其中，变焦范围越大，第二分辨率越小。例如，当用户切换到1.5倍变焦倍数时，执行拍照后获取的第二图像的第二分辨率为16M(1.5倍变焦时的预览图像的第一分辨率大于16M)。当用户切换到3倍变焦倍数时，执行拍照后获取的第二图像的第二分辨率为4M(3倍变焦时的预览图像的第一分辨率大于4M，例如为16M)。当用户切换到6倍变焦倍数时，执行拍照后获取的第二图像的第二分辨率为1M。(6倍变焦时的预览图像的第一分辨率大于1M，例如为16M)。
表1
| 变焦倍数 | 输出设置 |
| 1x<＝zoom<＝2x | 16M |
| 2x<＝zoom<5x | 4M |
| zoom>＝5x | 1M |
请参阅图1和图4，在某些实施方式中，07：处理第二图像及中间图像以获取目标图像，可包括：
071：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及
072：对融合图像进行插值处理以得到目标图像。
请参阅图2和图4，在某些实施方式中，一个或多个处理器30还用于执行071及072中的方法。即，一个或多个处理器30还用于：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及对融合图像进行插值处理以得到目标图像。
请参阅图6，在对第二图像和中间图像进行匹配时，考虑到可能会有旋转，可以选择尺度不变特征转换(Scale-invariant feature transform，SIFT)方式实现匹配。SIFT实现思路是通过高斯微分函数识别所有兴趣点；构建尺度空间；特征点精确定位；特征点主方向分配；生成特征点描述子及特征点匹配。SIFT可实现同一目标在不同时间、不同分辨率、不同光照、不同位姿情况下所成的图像相对应，对光线、噪声、微视角改变的容忍度也相当高。匹配过程中，一个或多个处理器30对第二图像与中间图像的匹配度进行判断，当第二图像与中间图像的匹配度大于预设匹配阈值时，表明中间图像与第二图像极为相似，若利用清晰度较高的中间图像与第二图像进行融合处理，可以提取中间图像与第二图像中各自的优点，使得最终输出的目标图像的噪声大大降低，清晰度高。因此，对第二图像和中间图像进行融合处理，其中，融合处理包括多帧降噪算法处理，多帧降噪处理去除融合图像中的噪点，使得融合图像的暗处表现更好。最后再对融合图像进行插值处理得到需要尺寸大小的目标图像。目标图像的尺寸可以等于第一图像的尺寸，也可以等于第二图像的尺寸。插值处理包括：邻域插值处理、双线性插值处理和三线性插值处理。例如，邻域插值算法是指：在待求像素的四邻像素中，将距离待求像素最近的邻像素灰度赋给待求像素，一般的，将待求像素在最终图像中的坐标位置需进行取整处理，对应坐标的像素值即为待求像素的值。邻域插值算法容易实现，但该方法会在最终图像上出现明显的锯齿边缘和马赛克现象。双线性插值算法是指：在两个方向分别进行一次线性插值，通过四个相邻像素插值得到待求像素。双线性插值算法考虑了待求像素点周围四个直接相邻像素点对该待求像素点的相关性影响，因而具有平滑功能，能有效地克服邻域插值算法的不足，三线性插值算法是指：利用待求像素点周围16个像素点的灰度值作三次插值，不仅考虑到四个直接相邻点的灰度影响，而且考虑到各邻点间灰度值得变化率的影响，插值效果最佳。
另外，在对第二图像和中间图像进行匹配时，除了采用SIFT方式实现图像匹配外，还可采用平均绝对差(MeanAbsolute Differences，MAD)算法和加速稳健特征(Speeded UpRobust Feastures，SURF)算法。MAD算法是在搜索图中，取与模板图一样大小的子图，计算子图与模板的相似度；遍历整个搜索图，在所有能够取到的子图中，找到与模板图最相似的子图对应的相似度作为最终匹配结果。SURF算法包括：构建Hessian，生成所有的兴趣点，用于特征的提取；构建尺度空间；特征点定位；特征点主方向分配；生成特征点描述及特征点匹配。
请再次参阅图1和图4，在某些实施方式中，07：处理第二图像及中间图像以获取目标图像，可包括：
073：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及
074：对融合图像进行插值处理以得到目标图像。
请再次参阅图2和图4，在某些实施方式中，一个或多个处理器30还用于执行073及074中的方法。即，一个或多个处理器30还用于：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及对融合图像进行插值处理以得到目标图像。
其中，预设范围的上限可等于预设匹配阈值。例如，假设预设匹配阈值为90，则预设范围可以是大于85小于等于90；当第二图像与中间图像之间的匹配度为88时，第二图像与中间图像之间的匹配度在预设范围内。当第二图像与中间图像的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，由于多帧第二图像为低分辨率模式下输出的，暗处表现力更好，同时噪点更少，此时对多帧第二图像进行融合处理，最后对融合图像进行插值处理以得到原尺寸大小的目标图像。尤其地，当第二图像为一帧时，对第二图像进行融合处理可以是只针对该一帧降噪处理以进一步去除第二图像中的噪点，最后再对第二图像进行插值处理以得到原尺寸大小的目标图像。需要说明的是，本实施方式中的原尺寸大小的目标图像中的原尺寸同前解释，插值处理也同前解释，在此不再展开详细描述。
请参阅图1和图4，在某些实施方式中，07：处理第二图像及中间图像以获取目标图像，可包括：
075：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及
076：对融合图像进行插值处理以得到目标图像。
请参阅图1、图2和图4，在某些实施方式中，一个或多个处理器30还用于执行075及076中的方法。即，一个或多个处理器30还用于：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及对融合图像进行插值处理以得到目标图像。
其中，预设范围的上限可等于预设匹配阈值。例如，假设预设匹配阈值为90，则预设范围可以是大于85小于等于90；当第二图像与中间图像之间的匹配度为88时，第二图像与中间图像之间的匹配度在预设范围内。当第二图像与中间图像的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，由于多帧中间图像为去马赛克模式输出的，清晰度更好，此时对多帧中间图像进行融合处理得到融合图像，最后对融合图像进行插值处理以得到原尺寸大小的目标图像。尤其地，当中间图像为一帧时，对中间图像进行融合处理可以是降噪处理以去除中间图像中的噪点，最后再对中间图像进行插值处理以得到原尺寸大小的目标图像。需要说明的是，本实施方式中的原尺寸大小的目标图像中的原尺寸同前解释，插值处理也同前解释，在此不再展开详细描述。
请参阅图2和图7，在某些实施方式还提供一种包含计算机程序401的非易失性计算机可读存储介质400。当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行上述任一实施方式的图像处理方法。非易失性计算机可读存储介质400可设置在电子装置100内，也可设置在云端服务器或其他装置中，此时，电子装置100能够与云端服务器或其他装置进行通讯来获取到相应的计算机程序410。
请结合图1、图2、图4及图7，例如，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行01、03、04、05、031、033、07、071、072、073、074、075及076中的方法。例如执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
03：从多帧第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
07：处理第二图像及中间图像以获取目标图像。
又例如，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
071：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及
072：对融合图像进行插值处理以得到目标图像。
073：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及
074：对融合图像进行插值处理以得到目标图像。
075：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及
076：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
071：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及
072：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
073：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及
074：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
075：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及
076：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
071：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及
072：对融合图像进行插值处理以得到目标图像。
073：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及
074：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
071：在第二图像与中间图像之间的匹配度大于预设匹配阈值时，对第二图像与中间图像进行融合处理，以得到融合图像；及
072：对融合图像进行插值处理以得到目标图像。
075：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及
076：对融合图像进行插值处理以得到目标图像。
在某些场景中，当计算机程序401被一个或多个处理器30执行时，使得一个或多个处理器30执行以下图像处理方法：
01：在预览模式时，缓存多帧第一图像，第一图像均具有第一分辨率；
031：采用灰度方差函数获取每帧第一图像的清晰度值；及
033：将清晰度值大于清晰阈值的第一图像作为中间图像。
04：在显示屏上显示经过缩放后的第一图像。
05：在执行拍照时，获取至少一帧第二图像，第二图像具有第二分辨率，第二分辨率小于第一分辨率；及
073：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，对多帧第二图像进行融合处理，以得到融合图像；及
074：对融合图像进行插值处理以得到目标图像。
075：在第二图像与中间图像之间的匹配度在预设范围内，且当前环境亮度大于预设亮度阈值时，对多帧中间图像进行融合处理，以得到融合图像；及
076：对融合图像进行插值处理以得到目标图像。
在本说明书的描述中，参考术语“某些实施方式”、“一个例子中”、“示例地”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。
尽管上面已经示出和描述了本申请的实施方式，可以理解的是，上述实施方式是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施方式进行变化、修改、替换和变型。
Claims (9)
1.一种图像处理方法，其特征在于，包括：
在切换至具体的变焦倍数并处于预览模式时，以高分辨率模式缓存多帧第一图像，所述第一图像均具有第一分辨率；
从多帧所述第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；
在执行拍照时，切换至相应的低分辨率模式获取至少一帧第二图像，所述第二图像具有第二分辨率，所述第二分辨率小于所述第一分辨率；及
处理所述第二图像及所述中间图像以获取目标图像，在所述第二图像与所述中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，所述处理所述第二图像及所述中间图像以获取目标图像，包括：
对多帧所述第二图像进行融合处理，以得到融合图像；及
对所述融合图像进行插值处理以得到所述目标图像。
2.根据权利要求1所述的图像处理方法，其特征在于，所述从多帧所述第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像，包括：
采用灰度方差函数获取每帧所述第一图像的清晰度值；及
将清晰度值大于预设清晰阈值的所述第一图像作为中间图像。
3.根据权利要求1所述的图像处理方法，其特征在于，在所述第二图像与所述中间图像之间的匹配度大于预设匹配阈值时，所述处理所述第二图像及所述中间图像以获取目标图像，包括：
对所述第二图像与所述中间图像进行融合处理，以得到融合图像；及
对所述融合图像进行插值处理以得到所述目标图像。
4.根据权利要求1所述的图像处理方法，其特征在于，还包括：
在显示屏上显示经过缩放后的所述第一图像。
5.一种电子装置，其特征在于，包括一个或多个处理器，一个或多个所述处理器用于：
在切换至具体的变焦倍数并处于预览模式时，以高分辨率模式缓存多帧第一图像，所述第一图像均具有第一分辨率；
从多帧所述第一图像中筛选出清晰度大于预设清晰阈值的至少一帧以作为中间图像；
在执行拍照时，切换至相应的低分辨率模式获取至少一帧第二图像，所述第二图像具有第二分辨率，所述第二分辨率小于所述第一分辨率；及
处理所述第二图像及所述中间图像以获取目标图像，在所述第二图像与所述中间图像之间的匹配度在预设范围内，且当前环境亮度小于预设亮度阈值时，所述处理所述第二图像及所述中间图像以获取目标图像，包括：
对多帧所述第二图像进行融合处理，以得到融合图像；及
对所述融合图像进行插值处理以得到所述目标图像。
6.根据权利要求5所述的电子装置，其特征在于，一个或多个所述处理器还用于：
采用灰度方差函数获取每帧所述第一图像的清晰度值；及
将清晰度值大于预设清晰阈值的所述第一图像作为中间图像。
7.根据权利要求5所述的电子装置，其特征在于，一个或多个所述处理器还用于：
在所述第二图像与所述中间图像之间的匹配度大于预设匹配阈值时，对所述第二图像与所述中间图像进行融合处理，以得到融合图像；及
对所述融合图像进行插值处理以得到所述目标图像。
8.根据权利要求5所述的电子装置，其特征在于，所述电子装置还包括显示屏，一个或多个所述处理器还用于：控制在所述显示屏上显示经过缩放后的所述第一图像。
9.一种包含计算机程序的非易失性计算机可读存储介质，其特征在于，所述计算机程序被一个或多个所述处理器执行时，使得一个或多个所述处理器执行权利要求1至4任意一项所述的图像处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210259772.1A CN115052104B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011146332.2A CN112367459B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
| CN202210259772.1A CN115052104B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011146332.2A Division CN112367459B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115052104A true CN115052104A (zh) | 2022-09-13 |
| CN115052104B CN115052104B (zh) | 2023-07-07 |
Family
ID=74511881
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210259772.1A Active CN115052104B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
| CN202011146332.2A Active CN112367459B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011146332.2A Active CN112367459B (zh) | 2020-10-23 | 2020-10-23 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (2) | CN115052104B (zh) |
| WO (1) | WO2022083229A1 (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115052104B (zh) * | 2020-10-23 | 2023-07-07 | 深圳市锐尔觅移动通信有限公司 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
| CN113014882B (zh) * | 2021-03-08 | 2021-09-24 | 中国铁塔股份有限公司黑龙江省分公司 | 多源多协议视频融合监控系统 |
| CN113378622A (zh) * | 2021-04-06 | 2021-09-10 | 青岛以萨数据技术有限公司 | 一种特定人员识别方法、设备、系统及介质 |
| CN113379633A (zh) * | 2021-06-15 | 2021-09-10 | 支付宝(杭州)信息技术有限公司 | 多帧图像处理方法和装置 |
| CN113676659B (zh) * | 2021-08-11 | 2023-05-26 | Oppo广东移动通信有限公司 | 图像处理方法及装置、终端及计算机可读存储介质 |
| CN116709042B (zh) * | 2022-02-24 | 2024-07-09 | 荣耀终端有限公司 | 一种图像处理方法和电子设备 |
| CN115426449B (zh) * | 2022-07-30 | 2023-07-11 | 荣耀终端有限公司 | 一种拍照方法和终端 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110049247A (zh) * | 2019-04-28 | 2019-07-23 | Oppo广东移动通信有限公司 | 图像优选方法、装置、电子设备及可读存储介质 |
| US20200098144A1 (en) * | 2017-05-19 | 2020-03-26 | Google Llc | Transforming grayscale images into color images using deep neural networks |
| CN111083359A (zh) * | 2019-12-06 | 2020-04-28 | Oppo广东移动通信有限公司 | 图像处理方法及其装置、电子设备和计算机可读存储介质 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150109177A (ko) * | 2014-03-19 | 2015-10-01 | 삼성전자주식회사 | 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 |
| JP6333318B2 (ja) * | 2016-07-29 | 2018-05-30 | 株式会社Ｓｃｒｅｅｎホールディングス | 画像処理方法、画像処理装置、および撮像装置 |
| KR102553598B1 (ko) * | 2016-11-18 | 2023-07-10 | 삼성전자주식회사 | 영상 처리 장치 및 그 제어 방법 |
| CN109863742B (zh) * | 2017-01-25 | 2021-01-29 | 华为技术有限公司 | 图像处理方法和终端设备 |
| CN107155059A (zh) * | 2017-04-11 | 2017-09-12 | 深圳市金立通信设备有限公司 | 一种图像预览方法及终端 |
| CN107172296A (zh) * | 2017-06-22 | 2017-09-15 | 维沃移动通信有限公司 | 一种图像拍摄方法及移动终端 |
| CN110876014B (zh) * | 2018-08-31 | 2022-04-08 | 北京小米移动软件有限公司 | 图像处理方法及装置、电子设备及存储介质 |
| CN110198417A (zh) * | 2019-06-28 | 2019-09-03 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN111131698B (zh) * | 2019-12-23 | 2021-08-27 | RealMe重庆移动通信有限公司 | 图像处理方法及装置、计算机可读介质、电子设备 |
| CN115052104B (zh) * | 2020-10-23 | 2023-07-07 | 深圳市锐尔觅移动通信有限公司 | 图像处理方法、电子装置及非易失性计算机可读存储介质 |
-
2020
- 2020-10-23 CN CN202210259772.1A patent/CN115052104B/zh active Active
- 2020-10-23 CN CN202011146332.2A patent/CN112367459B/zh active Active
-
2021
- 2021-08-04 WO PCT/CN2021/110631 patent/WO2022083229A1/zh active Application Filing
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200098144A1 (en) * | 2017-05-19 | 2020-03-26 | Google Llc | Transforming grayscale images into color images using deep neural networks |
| CN110049247A (zh) * | 2019-04-28 | 2019-07-23 | Oppo广东移动通信有限公司 | 图像优选方法、装置、电子设备及可读存储介质 |
| CN111083359A (zh) * | 2019-12-06 | 2020-04-28 | Oppo广东移动通信有限公司 | 图像处理方法及其装置、电子设备和计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022083229A1 (zh) | 2022-04-28 |
| CN112367459A (zh) | 2021-02-12 |
| CN112367459B (zh) | 2022-05-13 |
| CN115052104B (zh) | 2023-07-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112367459B (zh) | 图像处理方法、电子装置及非易失性计算机可读存储介质 | |
| CN108898567B (zh) | 图像降噪方法、装置及系统 | |
| EP3328055B1 (en) | Control method, control device and electronic device | |
| CN110572581B (zh) | 基于终端设备的变焦虚化图像获取方法和装置 | |
| JP6730690B2 (ja) | シーン内に存在する不要なオブジェクトの除去に基づくシーンの画像の動的生成 | |
| US9591237B2 (en) | Automated generation of panning shots | |
| KR101134668B1 (ko) | 화상 생성 방법, 장치 및 그 프로그램과 프로그램을 기록한 기록매체 | |
| CN107749944A (zh) | 一种拍摄方法及装置 | |
| JP4749051B2 (ja) | 画像処理 | |
| JP2013501993A (ja) | 表示用の画像を供給する方法及び装置 | |
| WO2018076460A1 (zh) | 一种终端的拍照方法和终端 | |
| US20220222830A1 (en) | Subject detecting method and device, electronic device, and non-transitory computer-readable storage medium | |
| CN109923850B (zh) | 一种图像捕捉装置及方法 | |
| US20190213714A1 (en) | Low-resolution tile processing for real-time bokeh | |
| JP6116436B2 (ja) | 画像処理装置および画像処理方法 | |
| CN108810326B (zh) | 一种拍照方法、装置及移动终端 | |
| JP2017143354A (ja) | 画像処理装置及び画像処理方法 | |
| JP2011199407A (ja) | 撮像装置、画像処理装置、及び画像処理方法 | |
| CN115567783B (zh) | 一种图像处理方法 | |
| CN110602410A (zh) | 一种图像处理方法、装置、航拍相机及存储介质 | |
| CN116456191A (zh) | 图像生成方法、装置、设备及计算机可读存储介质 | |
| JP2019047145A (ja) | 画像処理装置、撮像装置、画像処理装置の制御方法およびプログラム | |
| CN114092323A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| RU2792413C1 (ru) | Способ обработки изображений и мобильный терминал | |
| CN115086558B (zh) | 对焦方法、摄像设备、终端设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |