CN111340736B - 图像处理方法、装置、存储介质及电子设备 - Google Patents

图像处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN111340736B
CN111340736B CN202010152843.9A CN202010152843A CN111340736B CN 111340736 B CN111340736 B CN 111340736B CN 202010152843 A CN202010152843 A CN 202010152843A CN 111340736 B CN111340736 B CN 111340736B
Authority
CN
China
Prior art keywords
reference image
area
image
touch
core
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010152843.9A
Other languages
English (en)
Other versions
CN111340736A (zh
Inventor
贾玉虎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010152843.9A priority Critical patent/CN111340736B/zh
Publication of CN111340736A publication Critical patent/CN111340736A/zh
Application granted granted Critical
Publication of CN111340736B publication Critical patent/CN111340736B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T5/90—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Abstract

本申请实施方式的图像处理方法、图像处理装置、计算机可读存储介质和电子设备通过获取参考图像和非参考图像，以及获取第一操作输入的操作信息，然后响应于获取到的操作信息，确定参考图像中的核心区域以及围绕核心区域设置的外围区域，并通过对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，最终得到目标图像。本申请实施方式能够实现用户自主选取区域进行HDR处理和HDR渐变处理，灵活性好；外围区域的HDR渐变处理，避免了在外围区域与周边区域之间出现边界线等影响图像连续性的问题，处理后的最终目标图像的效果也更加自然，有利于提高图像的质量。

Description

图像处理方法、装置、存储介质及电子设备
技术领域
本申请属于图像处理技术领域，尤其涉及一种图像处理方法、装置、存储介质及电子设备。
背景技术
随着电子设备的拍摄能力越来越强大，用户经常使用电子设备进行图像拍摄，如拍摄照片或录制视频等。因此，电子设备经常需要进行各种图像处理操作。为了拍摄出更好效果的图像，会采用一些图像合成处理算法来提升输出图像的质量，例如HDR(High-Dynamic Range，高动态范围)合成算法。在相关技术中，一般都是对整张照片进行HDR处理。但是实际上，对于照片上的某些曝光度良好的区域可能并不需要进行HDR处理，经整体处理之后反而影响图像效果。
发明内容
本申请实施方式提供一种图像处理方法、图像处理装置、计算机可读存储介质和电子设备。
本申请实施方式的图像处理方法，包括：获取一个参考图像和至少一个非参考图像；获取通过第一操作输入的操作信息；响应于获取到的操作信息，确定参考图像中的核心区域和外围区域，外围区域围绕核心区域设置；对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
本申请实施方式的图像处理装置，包括：获取模块，用于获取一个参考图像和至少一个非参考图像，以及获取通过第一操作输入的操作信息；确定模块，用于响应于获取到的操作信息，确定参考图像中的核心区域和外围区域；处理模块，用于对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对围区域和非参考图像对应位置图像对中心区域进行高动态范围HDR处理，对外围区域进行高动态范围HDR渐变处理，得到目标图像。
本申请实施方式的图像处理装置，包括：触摸屏显示单元，在显示参考图像的同时能够进行触控操作和/或滑动操作；处理器，识别触摸屏显示单元接收到的触控操作和/或滑动操作，该触控操作和/或滑动操作将所显示的参考图像中的一个区域指定为核心区域和外围区域，并对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
本申请实施方式的计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现图像处理方法。
本申请实施方式的电子设备，包括一个或多个处理器；存储器；一个或多个程序，其中一个或多个程序被存储在存储器中，并且被配置成由一个或多个处理器执行，程序包括用于执行的图像处理方法。
本申请实施方式的图像处理方法、图像处理装置、计算机可读存储介质和电子设备通过获取参考图像和非参考图像，以及获取第一操作输入的操作信息，然后响应于获取到的操作信息，确定参考图像中的核心区域以及围绕核心区域设置的外围区域，并通过对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，最终得到目标图像。本申请实施方式能够实现用户自主选取区域进行HDR处理和HDR渐变处理，灵活性好；外围区域的HDR渐变处理，避免了在外围区域与周边区域之间出现边界线等影响图像连续性的问题，处理后的最终目标图像的效果也更加自然，有利于提高图像的质量。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
下面结合附图，通过对本申请的具体实施方式详细描述，将使本申请的技术方案及其有益效果显而易见。
图1是本申请某些实施方式的图像处理方法的流程示意图。
图2A是本申请某些实施方式的核心区域和外围区域示意图之一。
图2B是本申请某些实施方式的核心区域和外围区域示意图之二。
图2C是本申请某些实施方式的核心区域和外围区域示意图之三。
图3是本申请某些实施方式的图像处理方法的流程示意图。
图4是本申请某些实施方式的图像处理方法的流程示意图。
图5是本申请某些实施方式的图像处理方法的流程示意图。
图6是本申请某些实施方式的图像处理方法的流程示意图。
图7是本申请实施例提供的图像处理方法的场景示意图。
图8是本申请某些实施方式的图像处理方法的流程示意图。
图9是本申请某些实施方式的图像处理装置的模块示意图。
图10是本申请某些实施方式的图像处理装置的模块示意图。
图11是本申请某些实施方式的电子设备的模块示意图。
图12是本申请某些实施方式的图像处理电路的模块示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。另外，下面结合附图描述的本申请的实施方式是示例性的，仅用于解释本申请的实施方式，而不能理解为对本申请的限制。
在相关技术中，当使用包围曝光方式来进行高动态范围图像合成时，电子设备可以先拍摄数张具有不同曝光值的图像，再根据该数张具有不同曝光值的图像中的亮度、对比度和饱和度来确定各帧图像在合成时所占的权重，并根据该权重合成得到一张具有高动态范围的图像。
可以理解，本申请所使用的术语“第一”、“第二”、“第三”、“第四”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。
请参阅图1，图1是本申请实施例提供的图像处理方法的流程示意图，流程可以包括：
S102：获取一帧参考图像和至少一帧非参考图像；
在某些实施方式中，电子设备可以通过摄像头对同一拍摄场景进行连续拍摄，以获取同一拍摄场景的至少两帧图像，将清晰度最高的那帧图像确定为参考图像，清晰度较低的至少一帧图像确定为非参考图像。在实际应用中，参考图像和非参考图像是在间隔很短的时间(例如5毫秒或者10毫秒等等)快速拍摄得到的图像，由于拍摄间隔时间很短，因此可以认为参考图像和非参考图像是在相同场景下拍摄得到的图像。
在某些实施方式中，参考图像和非参考图像具有不同的曝光度。
在一个例子中，电子设备可以先获取同一拍摄场景下的3帧图像，分别记为第一图像、第二图像和第三图像，并从这3帧图像中确定出参考图像和非参考图像。例如，电子设备可以将清晰度较高的第一图像确定为参考图像，而将清晰度较低的第二图形和第三图像确定为非参考图像。第一图像、第二图像和第三图像的曝光度不同。例如，第一图像的曝光值0EV，第二图像的曝光值+1EV，第三图像的曝光值-1EV；第一图像的曝光值+1EV，第二图像的曝光值-1EV，第三图像的曝光值为0EV；第一图像的曝光值-1EV，第二图像的曝光值为+1EV，第三图像的曝光值为0EV等等，本实施例对此不做具体限定。
在某些实施方式中，可以通过具有显示能力的电子设备(如手机、笔记本电脑等)显示参考图像。
S104：获取通过第一操作输入的操作信息；
在某些实施方式中，用户可以在电子设备显示参考图像的情况下，通过触摸屏、鼠标、键盘等装置进行第一操作。第一操作可以为触控操作、滑动操作、点击操作中的至少一种。具体应用时，可以是：用户在触摸屏表面进行触控操作，或在触摸屏表面进行滑动操作，或在触摸屏表面进行触控操作和滑动操作，或利用鼠标进行点击操作等。第一操作输入的操作信息包括触控位置、触控时间、滑动轨迹等。
S106：响应于获取到的操作信息，确定参考图像中的核心区域和外围区域，外围区域围绕核心区域设置；
比如，在电子设备获取通过第一操作输入的操作信息后，通过响应获取到的操作信息，确定参考图像中的核心区域以及围绕核心区域设置的外围区域。外围区域围绕核心区域设置，可以理解为，核心区域的边界轮廓为外围区域的内边界轮廓。
在一个例子中，用户在显示参考图像的触控屏表面进行滑动操作，具体地，用户在显示参考图像的触控屏表面进行滑动操作的滑动轨迹为封闭曲线，处理器通过识别该封闭曲线，确定封闭曲线范围内的区域为核心区域，以及围绕核心区域设置的外围区域。
在某些实施方式中，核心区域和外围区域的边界可以具有预设轮廓。
例如，预设轮廓可以为圆形轮廓和多边形轮廓。
在一个例子中，请参阅图2A，核心区域20的外边界轮廓为圆形，外围区域21围绕核心区域20设置，且外围区域21的外边界轮廓也为圆形。具体地，核心区域20是半径为R1的圆形区域，外围区域21是围绕核心区域20设置的内径为R1、外径为R2的圆环区域。
在另一个例子中，请参阅图2B，核心区域20的外边界轮廓为正方形，外围区域21围绕核心区域20设置，且外围区域21的外边界轮廓也为正方形。具体地，核心区域20是边长为L1的正方形区域，外围区域21是内边长为L1、外边长为L2的方形环状区域。
在另一个例子中，预设轮廓还可以是其他的多边形等规则形状，也可以是具有不规则形状，在此不做限定。核心区域20的外边界轮廓和外围区域21的外边界轮廓可以不相同。可以理解为，参考图像中的核心区域20的外边界轮廓可以是不规则形状，围绕不规则形状的核心区域20设置的外围区域21的外边界轮廓可以是正方形(请参阅图2C)；参考图像中的核心区域20的外边界轮廓可以是五边形，围绕五边形核心区域20设置的外围区域21的外边界轮廓可以是七边形；核心区域20的外边界轮廓可以是圆形，围绕圆形核心区域20设置外围区域21的外边界轮廓可以是正方形；在此不做一一列举。
以上方式只是为了介绍本发明而给出的几种具体的实施例，并不能说明本发明中确定参考图像中的核心区域和外围区域只能采取以上方式来实现。事实上，凡是能够获得上述核心区域和外围区域均在本发明的保护范围之内。
S108：对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
比如，在确认参考图像中的核心区域和外围区域后，电子设备对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，从而最终得到目标图像。
随着电子设备的拍摄能力越来越强大，用户经常使用电子设备进行图像拍摄，如拍摄照片或录制视频等。因此，电子设备经常需要进行各种图像处理操作。在相关技术中，通常会通过使用渐变滤镜或平滑处理等操作对不同区域间的交界处图像进行处理，以使区域与区域之间的交界处过度自然，但这种操作方式往往会降低图像像素的清晰度。
在某些实施方式中，对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，具体包括：采用预设的HDR算法，对确定的参考图像中的核心区域所对应的0EV、-1EV和+1EV的图像数据进行合成处理。假设参考图像对应的0EV图像的权重为WA，像素值为DA；非参考图像对应的-1EV图像的权重为WB，像素值为DB；非参考图像对应的+1EV图像的权重为WC，像素值为DC。则对于核心区域的每一个像素点，经预设的HDR算法处理后的像素值为WA*DA+WB*DB+WC*DC，其中，WA、WB和WC由对应的不同曝光值图像中的亮度、对比度和饱和度来确定，为预设的固定权重。
在某种实施方式中，对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，包括：
使用多个渐变权重来融合参考图像的外围区域和非参考图像对应位置图像，其中，渐变权重随着距离核心区域的边界的距离增大而衰减。
在某种实施方式中，渐变权重在核心区域的边界处的数值最大，在外围区域的外边界处的数值最小。
在某些实施方式中，对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，具体包括：采用预设的HDR渐变算法，对确定的参考图像中的外围区域所对应的0EV、-1EV和1EV的图像数据进行合成处理。假设参考图像对应的0EV图像的权重为WA，像素值为DA，非参考图像对应的-1EV图像的权重为WB，像素值为DB，非参考图像对应的+1EV图像的权重为WC，像素值为DC。对于外围区域的每一个像素点，经预设的HDR算法处理后的像素值Dx满足以下公式：
Dx＝Wx*(WA*DA+WB*DB+Wc*Dc)+(1-Wx)*DA公式(1)
其中，WA、WB和WC由对应的不同曝光值图像中的亮度、对比度和饱和度来确定，为预设的固定权重；
其中，Wx为外围区域内的像素点对应的渐变权重，Wx∈[0,1]，随着距离核心区域的边界的距离增大而衰减。
渐变权重Wx满足以下公式：
Wx＝(1-d/R)，公式(2)
其中，d是外围区域中的像素点距离核心区域的边缘的距离，R为外围区域宽度。
具体地，可以通过对外围区域内的像素点到核心区域的边界的距离进行归一化处理，将外围区域内的像素点到核心区域的边界的距离值归一化到0和1之间的值，并由此确定外围区域内的像素点相对应的渐变权重。外围区域内的像素点的渐变权重与归一化后的距离核心区域的边界的距离有关。外围区域内的像素点对应的归一化距离值越大，其对应渐变权重越小。例如，在外围区域中最靠近核心区域的边界的像素点的渐变权重可以为1或0.95或0.9等，在外围区域的外边界处的渐变权重的数值可以是0或0.05或0.1等。具体地，外围区域中的像素点的渐变权重在沿着远离核心区域的边界的径向方向衰减。当渐变权重为0时，外围区域的边界上的像素点的像素值为原始的参考图像像素值。
随着距离所述核心区域的边界的距离增大，外围区域内的像素点的渐变权重可以是线性均匀衰减，也可以是递进式衰减，从而在外围区域实现HDR处理效果的渐进过渡，在不影响图像清晰度的情况下，避免出现边界线等影响图片的连续性的情况，处理后的目标图像的效果也更加自然。
需要说明的是，以上实施例中提到的距离核心区域的边缘的距离，以及外围区域宽度，可认为是以核心区域的几何中心为中心，在径向方向上的距离核心区域的边缘的距离，以及在径向方向上的外围区域宽度。
本申请实施方式的图像处理方法、图像处理装置、计算机可读存储介质和电子设备通过获取参考图像和非参考图像，以及获取第一操作输入的操作信息，然后响应于获取到的操作信息，确定参考图像中的核心区域以及围绕核心区域设置的外围区域，并通过对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，最终得到目标图像。本申请实施方式能够实现用户自主选取区域进行HDR处理和HDR渐变处理，灵活性好；外围区域的HDR渐变处理，避免了在外围区域与周边区域之间出现边界线等影响图像连续性的问题，处理后的最终目标图像的效果也更加自然，有利于提高图像的质量。
请参阅图3，在某些实施方式中，步骤S104中的第一操作为触控操作，操作信息为触控操作的触控位置和触控信息，包括以下步骤：
S202：获取触控操作的触控位置和触控时间；
S204：根据触控位置和触控时间，确定参考图像中的核心区域和外围区域。
比如，电子设备获取参考图像，以及获取用户通过触控操作输入的触控位置和触控时间信息，进而确认参考图像中的核心区域以及围绕核心区域设置的外围区域。
在某些实施方式中，核心区域和外围区域具有预设轮廓，通过触控操作输入的触控位置确定核心区域的几何中心，通过触控操作输入的触控时间确认核心区域尺寸和外围区域尺寸。
请参阅图2A、图2B和图3，以电子设备100触摸屏显示参考图像为例。在触摸屏显示参考图形的情况下，用户对触摸屏表面的A点进行触控操作。电子设备100接收到用户的触控操作后，获取触控点A的触控位置以及用户在A点上的触控时间，进而确定参考图像中的核心区域20。具体地，触控点A的触控位置对应于核心区域20的几何中心，在A点上的触控时间与核心区域20的尺寸大小相关联。可以理解为，核心区域20的尺寸大小与用户在触摸屏上的触控时间成正相关，即用户在触摸屏上的触控A点的触控时间越长，在参考图像中生成的核心区域20的尺寸也会越大。外围区域21围绕核心区域20设置，可以理解为，核心区域的几何中心也为外围区域的几何中心，用户在触摸屏上的触控时间越长，在参考图像中生成的外围区域21的尺寸也会越大。
如此，通过获取用户对触摸屏表面进行触控操作而输入的触控位置和触控时间信息，电子设备能够实现有选择地调整预览界面中核心区域和外围区域的位置和尺寸。可以理解为，能够实现有选择地确定参考图像中进行HDR处理和HDR渐变处理的区域位置。
请参阅图4，在某些实施方式中，步骤S104中的第一操作为触控操作，操作信息为触控操作的触控位置，包括以下步骤：
S302：获取触控操作的触控位置；
S304：获取核心区域的预设尺寸和外围区域的预设尺寸；
S306：根据触控位置、核心区域的预设尺寸和外围区域的预设尺寸，确定参考图像中的核心区域和外围区域。
比如，电子设备获取参考图像，以及获取用户通过触控操作输入的触控位置后，并获取参考图像的核心区域的预设尺寸和外围区域的预设尺寸，最终确认参考图像中的核心区域以及围绕核心区域设置的外围区域。
在某些实施方式中，核心区域和外围区域均具有预设轮廓和预设尺寸，通过触控操作输入的触控位置确定于中心区域的几何中心。
请参阅图2A、图2B和图4，以电子设备100触摸屏显示参考图像为例。在触摸屏显示参考图像的情况下，用户对触摸屏表面的A点进行触控操作。电子设备100接收到用户的触控操作后，获取触控点A的触控位置，进而确定参考图像中的核心区域20。具体地，请参阅图2A，核心区域20的外边界轮廓是预设半径尺寸为R1的圆形轮廓，外围区域21的外边界轮廓是预设半径尺寸为R2的圆形轮廓。电子设备100获取触控点A的触控位置后，进而确认以触控点A的触控位置为圆心、半径为R1的圆形核心区域20，以及确认以触控点A的触控位置为中心、环宽为(R2-R1)的圆环形外围区域21。
如此，根据用户对触摸屏表面上进行触控操作而输入的触控位置，电子设备能准确快速地确定参考图像中核心区域和外围区域位置。可以理解为，能够实现有选择地确定进行HDR处理和HDR渐变处理的区域位置。
请参阅图5，在某些实施方式中，步骤S104还包括为滑动操作的第二操作，其中的第一操作为触控操作，操作信息为触控操作的触控位置和滑动操作的滑动手势，包括以下步骤：
S402：获取触控操作的触控位置和滑动操作的滑动手势；
S404：根据触控位置和滑动手势，确定参考图像中的核心区域和外围区域。
比如，电子设备获取参考图像，以及获取用户通过触控操作输入的触控位置和通过滑动操作输入的滑动手势，进而确定参考图像中的核心区域和外围区域。
在某些实施方式中，核心区域和外围区域具有预设轮廓，通过触控操作输入的触控位置确定核心区域的几何中心，通过滑动操作输入的滑动手势确定核心区域尺寸和外围区域尺寸。
请参阅图2A、图2B和图5，以电子设备100触摸屏显示的参考图像为例。在触摸屏显示参考图像的情况下，用户对触摸屏表面的A点进行触控操作。电子设备100接收到用户的触控操作后，获取触控点A的触控位置，由此根据触控点A的触控位置确定核心区域20的几何中心。当接收到用户继续在触摸屏表面进行滑动操作时，电子设备100获取通过滑动操作输入的滑动手势，由此根据滑动手势确定核心区域20的尺寸。
在某些实施方式中，用户输入的滑动操作可以为双指滑动。电子设备100可以根据双指滑动的滑动手势实现核心区域20尺寸和外围区域21尺寸的缩放。例如，通过双指张开的滑动手势实现核心区域20尺寸和外围区域21尺寸的增加；通过双指聚拢的滑动手势实现核心区域20尺寸和外围区域21尺寸的减小。
在某些实施方式中，用户输入的滑动操作可以为单指滑动。电子设备100可以根据单指滑动的滑动方向实现核心区域20尺寸和外围区域21尺寸的缩放。例如，通过单指向右滑动的手势实现核心区域20尺寸和外围区域21尺寸的增加；通过单指向左滑动手势实现核心区域20尺寸和外围区域21尺寸的减小。或者通过单指向上滑动的手势实现核心区域20尺寸和外围区域21尺寸的增加；通过单指向下滑动手势实现核心区域20尺寸和外围区域21尺寸的减小。
如此，根据用户对触摸屏表面进行触控操作而输入的触控位置和滑动操作而输入的滑动手势，电子能准确快速地调整预览界面中核心区域和外围区域的位置和尺寸。可以理解为，能够实现有选择地调节预览界面中进行HDR处理和HDR渐变处理的位置和尺寸。
请参阅图6，在某些实施方式中，步骤S104中的输入操作为触控操作，操作信息为触控操作的触控位置，包括以下步骤：
S502：获取触控操作的触控位置；
S504：获取触控位置所在的区域；
S506：确定参考图像中的核心区域和外围区域。
比如，电子设备在获取参考图像后，获取用户通过触控操作输入的触控位置，以及获取该触控位置所在的区域，并最终确认参考图像中的核心区域以及围绕核心区域设置的外围区域。
在某些实施方式中，电子设备对参考图像进行图像分割，从而将图像分割为多个不同的区域。触控操作输入的触控位置所在的区域设置为核心区域。
需要说明的是，图像分割就是把图像分成若干个特定的、具有独特性质的区域。在一些实施方式中，本实施例可以采用如下方式来对图像进行分割：基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。从数学角度来看，图像分割是将数字图像划分成互不相交的区域的过程。图像分割的过程也是一个标记过程，即把属于同一区域的像素赋予相同的编号。
以电子设备触摸屏显示考图像为例。请参阅图7，参考图像可以分割为人体、天空、建筑物等多个不同的局部区域。在触摸屏显示参考图像的情况下，用户在触摸屏表面进行触控操作输入的触控位置指向参考图像中人体区域，则电子设备确定人体区域为核心区域，外围区域围绕核心区域设置。外围区域的外边界轮廓形状，在此不做限定。
在其他实施方式中，用户通过触控操作输入的触控位置指向的参考图像中的目标对象，电子设备可以通过边缘检测算法获取目标物体边缘轮廓，并将该轮廓范围内的区域确定为参考图像中的核心区域，进而确定围绕核心区域设置的外围区域。
如此，通过获取用户对触摸屏表面进行触控操作而输入的触控位置，电子设备能够快速确认参考图像中的核心区域以及围绕核心区域设置的外围区域，可以理解为，能准确快速地确定参考图像中进行HDR处理和HDR渐变处理的区域位置。
请参阅图8，在某些实施方式中，步骤S104中的输入操作为滑动操作，操作信息为滑动操作的滑动轨迹，包括以下步骤：
S602：获取滑动操作的滑动轨迹；
S604：确定参考图像中的核心区域和外围区域。
比如，电子设备获取参考图像，以及获取用户通过滑动操作输入的滑动轨迹，进而确定参考图像中的核心区域和外围区域。
在某些实施方式中，在触摸屏显示参考图形的情况下，用户在触摸屏表面输入的滑动轨迹是一条封闭曲线，该封闭曲线范围内的区域确定为核心区域，外围区域围绕核心区域设置。外围区域的外边界轮廓形状，在此不做限定。
如此，通过获取客户在触摸屏表面输入的滑动轨迹，电子设备能准确快速地确定预览界面中核心区域和外围区域位置。可以理解为，能够实现有选择地确定预览界面中进行HDR处理和HDR渐变处理的区域位置。
请参阅图9，图9为本申请实施例提供的图像处理装置的结构示意图。图像处理装置900可以包括：获取模块912、确定模块914和处理模块916。
获取模块912，用于获取一个参考图像和至少一个非参考图像以及获取通过第一操作输入的操作信息。
确定模块914，用于响应于获取到的操作信息，确定参考图像中的核心区域和外围区域。
处理模块916，对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
在一种实施方式中，对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，包括：使用多个渐变权重来融合参考图像的外围区域和非参考图像对应位置图像，其中，权重随着距离核心区域的边界的距离增大而衰减。
在一种实施方式中，渐变权重在核心区域的边界处的数值最大，在外围区域远离核心区域的边界处的数值最小。
在一种实施方式中，第一操作为触控操作，操作信息为触控操作的触控位置和触控时间，获取模块912可以用于获取触控操作的触控位置和触控时间。
在一种实施方式中，第一操作为触控操作，操作信息为触控操作的触控位置，获取模块912可以用于获取触控操作的触控位置以及获取核心区域的预设尺寸和外围区域的预设尺寸；
在一种实施方式中，第一操作为触控操作，还包括第二操作，第二操作为滑动操作，操作信息为触控操作的触控位置和滑动操作的滑动手势，获取模块912可以用于获取触控操作的触控位置和滑动操作的滑动手势。
在一种实施方式中，第一操作为触控操作，操作信息为触控操作的触控位置，获取模块912可以用于获取触控操作的触控位置以及获取触控位置所在的区域。
在一种实施方式中，第一操作为滑动操作，操作信息为滑动操作的滑动轨迹，获取模块912可以用于获取滑动操作的滑动轨迹。
请参阅图10，图10为本申请实施例提供的图像处理装置的另一结构示意图。图像处理装置900可以包括：触摸屏显示界面和界面处理器。
触摸屏显示单元911，在显示参考图像的同时能够进行触控操作和/或滑动操作；
处理器913，识别触摸屏表面施加的触控操作和/或滑动操作，触控操作和/或滑动操作将所显示的参考图像中的一个区域指定为核心区域和外围区域；并对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行以下步骤：
S102：获取一个参考图像和至少一个非参考图像；
S104：获取通过第一操作输入的操作信息；
S106：响应于获取到的操作信息，确定参考图像中的核心区域和外围区域，其中，外围区域围绕中心区域核心区域设置；
S108：对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
图11为一个实施例中电子设备的内部结构示意图。如图11所示，该电子设备100包括通过系统总线51连接的处理器52、存储器53(例如为非易失性存储介质)、内存储器54、显示屏55和输入装置56。其中，电子设备100的存储器53存储有操作系统和计算机可读指令。该计算机可读指令可被处理器52执行，以实现本申请实施方式的图像处理方法。该处理器52用于提供计算和控制能力，支撑整个电子设备100的运行。电子设备100的内存储器53为存储器52中的计算机可读指令的运行提供环境。电子设备100的显示屏55可以是液晶显示屏或者电子墨水显示屏等，输入装置56可以是显示屏55上覆盖的触摸层，也可以是电子设备100外壳上设置的按键、轨迹球或触控板，也可以是外接的键盘、触控板或鼠标等。该电子设备100可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解，图11中示出的结构，仅仅是与本申请方案相关的部分结构的示意图，并不构成对本申请方案所应用于其上的电子设备100的限定，具体的电子设备100可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
请参阅图12，本申请实施例的电子设备100中包括图像处理电路80，图像处理电路80可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图12为一个实施例中图像处理电路80的示意图。如图12所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。
如图12所示，图像处理电路80包括ISP处理器81(ISP处理器81可为处理器52或处理器52的一部分)和控制逻辑器82。摄像头10捕捉的图像数据首先由ISP处理器810处理，ISP处理器81对图像数据进行分析以捕捉可用于确定摄像头100的一个或多个控制参数的图像统计信息。摄像头10可包括一个或多个透镜30和图像传感器40。图像传感器40可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器40可获取每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器81处理的一组原始图像数据。传感器84(如陀螺仪)可基于传感器84接口类型把采集的图像处理的参数提供给ISP处理器81。传感器84接口可以为SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外，图像传感器40也可将原始图像数据发送给传感器84，传感器84可基于传感器84接口类型把原始图像数据提供给ISP处理器81，或者传感器84将原始图像数据存储到图像存储器85中。
ISP处理器81按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器81可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。
ISP处理器81还可从图像存储器85接收图像数据。例如，传感器84接口将原始图像数据发送给图像存储器85，图像存储器85中的原始图像数据再提供给ISP处理器81以供处理。图像存储器85可为存储器53、存储器53的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。
当接收到来自图像传感器40接口或来自传感器84接口或来自图像存储器85的原始图像数据时，ISP处理器81可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器85，以便在被显示之前进行另外的处理。ISP处理器81从图像存储器85接收处理数据，并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器81处理后的图像数据可输出给显示器87(显示器87可包括显示屏55)，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器81的输出还可发送给图像存储器85，且显示器87可从图像存储器85读取图像数据。在一个实施例中，图像存储器85可被配置为实现一个或多个帧缓冲器。此外，ISP处理器81的输出可发送给编码器/解码器86，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器87设备上之前解压缩。编码器/解码器86可由CPU或GPU或协处理器实现。
ISP处理器81确定的统计数据可发送给控制逻辑器82单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜30阴影校正等图像传感器40统计信息。控制逻辑器82可包括执行一个或多个例程(如固件)的处理元件和/或微控制器，一个或多个例程可根据接收的统计数据，确定摄像头10的控制参数及ISP处理器81的控制参数。例如，摄像头10的控制参数可包括传感器84控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜30控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP处理器81的控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜30阴影校正参数。
以下为运用图12中图像处理技术实现图像处理方法的步骤：
S102：获取一个参考图像和至少一个非参考图像；
S104：获取通过第一操作输入的操作信息；
S106：响应于获取到的操作信息，确定参考图像中的核心区域和外围区域，外围区域围绕中心区域核心区域设置；
S108：对核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及对外围区域和非参考图像对应位置图像进行高动态范围HDR渐变处理，得到目标图像。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，的程序可存储于一非易失性计算机可读存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。
以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (13)

1.一种图像处理方法，其特征在于，包括：
获取一个参考图像和至少一个非参考图像；
获取通过第一操作输入的操作信息；
响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，其中，所述核心区域为所述参考图像中的任意区域，所述外围区域围绕所述核心区域设置；
对所述核心区域和所述非参考图像对应位置图像进行高动态范围HDR处理，以及使用多个渐变权重来融合所述外围区域和所述非参考图像对应位置图像，得到目标图像，其中，所述渐变权重随着距离所述核心区域的边界的距离增大而衰减。
2.根据权利要求1所述的图像处理方法，其特征在于，所述渐变权重在所述核心区域的边界处的数值最大，在所述外围区域远离所述核心区域的边界处的数值最小。
3.根据权利要求1所述的图像处理方法，其特征在于，所述第一操作为触控操作，所述操作信息为所述触控操作的触控位置和触控时间，
所述响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，包括：
获取所述触控操作的触控位置和触控时间；
确定所述参考图像中的所述核心区域和所述外围区域，
其中，所述触控位置对应于所述核心区域的几何中心，并且所述触控时间与核心区域的尺寸大小相关联。
4.根据权利要求1所述的图像处理方法，其特征在于，所述第一操作为触控操作，所述操作信息为触控操作的触控位置，
所述响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，包括：
获取所述触控操作的触控位置；
获取所述核心区域的预设尺寸和所述外围区域的预设尺寸；
确定所述参考图像中的所述核心区域和所述外围区域，其中，所述触控位置对应于所述核心区域的几何中心。
5.根据权利要求1所述的图像处理方法，其特征在于，还包括第二操作，所述第二操作为滑动操作，所述第一操作为触控操作，所述操作信息为触控操作的触控位置和滑动操作的滑动手势；
所述响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，包括：
获取所述触控操作的触控位置和所述滑动操作的滑动手势；
确定所述参考图像中的所述核心区域和所述外围区域，其中，所述触控位置对应于所述核心区域的几何中心，所述滑动手势对应于所述核心区域和所述外围区域的尺寸缩放。
6.根据权利要求3-5任一项所述的图像处理方法，其特征在于，所述核心区域和所述外围区域具有预设轮廓。
7.根据权利要求6所述的图像处理方法，其特征在于，所述预设轮廓包括多边形轮廓和圆形轮廓。
8.根据权利要求1所述的图像处理方法，其特征在于，所述第一操作为触控操作，所述操作信息为所述触控操作的触控位置，
所述响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，包括：
获取所述触控操作的触控位置；
获取所述触控位置所在的区域；
确定所述参考图像中的所述核心区域和所述外围区域，其中，所述触控位置所在的区域对应为所述核心区域。
9.根据权利要求1所述的图像处理方法，其特征在于，所述第一操作为滑动操作，所述操作信息为所述滑动操作的滑动轨迹，
所述响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，包括：
获取所述滑动操作的滑动轨迹，
确定所述参考图像中的所述核心区域和所述外围区域，其中，所述滑动轨迹为封闭曲线，所述封闭曲线范围内的区域为所述核心区域。
10.一种图像处理装置，其特征在于，包括：
获取模块，用于获取一个参考图像和至少一个非参考图像，以及获取通过第一操作输入的操作信息；
确定模块，用于响应于获取到的所述操作信息，确定所述参考图像中的核心区域和外围区域，所述核心区域为所述参考图像中的任意区域；
处理模块，用于对所述核心区域和所述非参考图像对应位置图像进行高动态范围HDR处理，以及使用多个渐变权重来融合所述外围区域和所述非参考图像对应位置图像，得到目标图像，其中，所述渐变权重随着距离所述核心区域的边界的距离增大而衰减。
11.一种图像处理装置，其特征在于，包括：
触摸屏显示单元，在显示参考图像的同时能够进行触控操作和/或滑动操作；
处理器，识别所述触摸屏显示单元接收到的触控操作和/或滑动操作，所述触控操作和/或滑动操作将所显示的参考图像中的一个区域指定为核心区域和外围区域，并对所述核心区域和非参考图像对应位置图像进行高动态范围HDR处理，以及使用多个渐变权重来融合所述外围区域和所述非参考图像对应位置图像，得到目标图像，其中，所述核心区域为所述参考图像中的任意区域，所述渐变权重随着距离所述核心区域的边界的距离增大而衰减。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至9中任一项所述的图像处理方法。
13.一种电子设备，包括一个或多个处理器；存储器；一个或多个程序，其中所述一个或多个程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述程序包括用于执行权利要求1至9任意一项所述图像处理方法。
CN202010152843.9A 2020-03-06 2020-03-06 图像处理方法、装置、存储介质及电子设备 Active CN111340736B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010152843.9A CN111340736B (zh) 2020-03-06 2020-03-06 图像处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010152843.9A CN111340736B (zh) 2020-03-06 2020-03-06 图像处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN111340736A CN111340736A (zh) 2020-06-26
CN111340736B true CN111340736B (zh) 2024-03-15

Family

ID=71187227

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010152843.9A Active CN111340736B (zh) 2020-03-06 2020-03-06 图像处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN111340736B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103002225A (zh) * 2011-04-20 2013-03-27 Csr技术公司 多曝光高动态范围图像捕捉
WO2014046991A1 (en) * 2012-09-19 2014-03-27 Qualcomm Incorporated System for photograph enhancement by user controlled local image enhancement
CN108335279A (zh) * 2017-01-20 2018-07-27 微软技术许可有限责任公司 图像融合和hdr成像
US20180302544A1 (en) * 2017-04-12 2018-10-18 Samsung Electronics Co., Ltd. Method and apparatus for generating hdr images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103002225A (zh) * 2011-04-20 2013-03-27 Csr技术公司 多曝光高动态范围图像捕捉
WO2014046991A1 (en) * 2012-09-19 2014-03-27 Qualcomm Incorporated System for photograph enhancement by user controlled local image enhancement
CN104620570A (zh) * 2012-09-19 2015-05-13 高通股份有限公司 用于通过用户控制的局部图像增强进行相片增强的系统
CN108335279A (zh) * 2017-01-20 2018-07-27 微软技术许可有限责任公司 图像融合和hdr成像
US20180302544A1 (en) * 2017-04-12 2018-10-18 Samsung Electronics Co., Ltd. Method and apparatus for generating hdr images

Also Published As

Publication number Publication date
CN111340736A (zh) 2020-06-26

Similar Documents

Publication Publication Date Title
CN111028189B (zh) 图像处理方法、装置、存储介质及电子设备
US10757312B2 (en) Method for image-processing and mobile terminal using dual cameras
CN108335279B (zh) 图像融合和hdr成像
CN109068058B (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
JP6935587B2 (ja) 画像処理のための方法および装置
CN108683862B (zh) 成像控制方法、装置、电子设备及计算机可读存储介质
CN108537155B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
WO2020034924A1 (en) Imaging control method and apparatus, electronic device, and computer readable storage medium
CN110602467B (zh) 图像降噪方法、装置、存储介质及电子设备
US20200045219A1 (en) Control method, control apparatus, imaging device, and electronic device
CN107395991B (zh) 图像合成方法、装置、计算机可读存储介质和计算机设备
KR102266649B1 (ko) 이미지 처리 방법 및 장치
CN109089046B (zh) 图像降噪方法、装置、计算机可读存储介质及电子设备
CN111028190A (zh) 图像处理方法、装置、存储介质及电子设备
WO2015184208A1 (en) Constant bracketing for high dynamic range operations (chdr)
US11233948B2 (en) Exposure control method and device, and electronic device
CN107704798B (zh) 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN109348088A (zh) 图像降噪方法、装置、电子设备及计算机可读存储介质
CN109242794B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN107563979B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
JP2022179514A (ja) 制御装置、撮像装置、制御方法およびプログラム
CN110213462B (zh) 图像处理方法、装置、电子设备、图像处理电路及存储介质
CN107295261B (zh) 图像去雾处理方法、装置、存储介质和移动终端
CN107464225B (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
CN110276730B (zh) 图像处理方法、装置、电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant