CN111212228A - 图像处理方法和电子设备 - Google Patents

图像处理方法和电子设备 Download PDF

Info

Publication number
CN111212228A
CN111212228A CN202010031663.5A CN202010031663A CN111212228A CN 111212228 A CN111212228 A CN 111212228A CN 202010031663 A CN202010031663 A CN 202010031663A CN 111212228 A CN111212228 A CN 111212228A
Authority
CN
China
Prior art keywords
image
images
shooting
illumination
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010031663.5A
Other languages
English (en)
Other versions
CN111212228B (zh
Inventor
徐鑫超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202010031663.5A priority Critical patent/CN111212228B/zh
Publication of CN111212228A publication Critical patent/CN111212228A/zh
Priority to PCT/CN2021/070947 priority patent/WO2021143628A1/zh
Application granted granted Critical
Publication of CN111212228B publication Critical patent/CN111212228B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例公开一种图像处理方法和电子设备,该方法包括:获取目标对象的多张图像,目标对象包括拍摄主体和拍摄背景,多张图像为基于电子设备的闪光灯提供的不同照度分别拍摄得到的;根据多张图像中每张图像上标注的照度进行抠图处理。采用本发明实施例的图像处理方案实现抠图,可以提高将拍摄主体和拍摄背景分离开来的成功率和准确率,且操作简单易实现。

Description

图像处理方法和电子设备
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理方法和电子设备。
背景技术
目前,在图像处理技术领域,抠图是一个重要的技术方向,可选地,基于图像的抠图是指将一幅图像中的拍摄主体、背景等,通过抠图技术提取出来。
那么,为了保证抠图的成功率和准确率,一方面对待抠图的原始图像的清晰度的要求会比较高。另一方面对抠图算法的要求也会比较高,以基于人工智能(ArtificialIntelligence,AI)的抠图算法为例,AI抠图是基于生物识别、物体识别等实现的,可以针对待识别的生物、物体等进行特征识别训练;但是,当待抠图的原始图像中包含的主体较复杂、或者主体和背景区分度较低时,基于AI的抠图技术的成功率和准确率会打折扣,很难将所有主体或者将主体和背景区别开来。
发明内容
本发明实施例提供一种图像处理方法和电子设备,以解决现有的抠图方案中成功率和准确率较低的问题。
为了解决上述技术问题,本发明实施例是这样实现的:
第一方面,提供了一种图像处理方法,应用于电子设备,该方法包括:
获取目标对象的多张图像,所述目标对象包括拍摄主体和拍摄背景,所述多张图像为基于所述电子设备的闪光灯提供的不同照度分别拍摄得到的;
根据所述多张图像中每张图像上标注的照度进行抠图处理。
第二方面,提供了一种电子设备,该电子设备包括:
获取模块,用于获取目标对象的多张图像,所述目标对象包括拍摄主体和拍摄背景,所述多张图像为基于所述电子设备的闪光灯提供的不同照度分别拍摄得到的;
处理模块,用于根据所述多张图像中每张图像上标注的照度进行抠图处理。
第三方面,提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的方法的步骤。
在本发明实施例中,当需要对基于某一拍摄场景拍摄的图像进行抠图处理时,首先需要在不同的照度(即光照强度)条件下,针对待拍摄的目标对象分别拍摄一张图像,可以通过电子设备自身携带的闪光灯提供不同的照度,由于闪光灯与目标对象中的拍摄主体和拍摄背景之间的距离有所不同,则在拍摄过程中基于拍摄主体和拍摄背景分别检测到的照度也会有所区别,且当采用的闪光灯的照度有所区别时,反映到不同的图像上的照度也会有所不同。如此,通过对目标对象的基于不同照度拍摄得到的多张图像中的每张图像均进行照度检测及标注,以进一步根据不同图像间照度的区别以及同一图像中不同对象间的照度的区别进行抠图处理,将拍摄主体和拍摄背景分离开来,提高了抠图处理的成功率和准确率,且操作简单易实现。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例中安装有微型照度计探头的手机的示意图;
图2是本发明实施例中通过微型照度计检测照度的原理示意图;
图3是本发明实施例中在未开启闪光灯的情况下的拍摄场景及效果示意图;
图4是本发明实施例中在开启闪光灯的情况下的拍摄场景及效果示意图;
图5是本发明实施例中图像处理方法的流程示意图;
图6是本发明实施例中拍摄主体和拍摄背景分离前后的对比示意图;
图7是本发明实施例中图像处理方法的另一流程示意图;
图8是本发明实施例中拍摄界面的示意图;
图9是本发明实施例中在未开启闪光灯的情况下进行拍摄得到的图像中的照度标注情况示意图;
图10是本发明实施例中在开启闪光灯的情况下且采用低照度进行拍摄得到的图像中的照度标注情况示意图;
图11是本发明实施例中在开启闪光灯的情况下且采用高照度进行拍摄得到的图像中的照度标注情况示意图;
图12是本发明实施例中等照度曲线的示意图;
图13是本发明实施例中电子设备的结构示意图;
图14是本发明实施例中电子设备的又一种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
众所周知,随着基于智能电子设备(比如手机)中的拍摄技术的不断发展,拍摄的图像越发清晰,闪光灯技术的发展也使得基于智能电子设备的拍摄能够适应更多的场景。为了提高抠图的成功率和准确率,在本发明实施例中提出一种利用闪光灯和微型照度计进行辅助拍摄,并基于拍摄的图像中的物体与背景间的光照强度(简称照度,指单位面积上所能接受的可见光的光通量)的区别进行简单的物理切割实现抠图的方案。
首先,结合图1和图2对拍摄的图像上的光照强度的获取原理进行说明。可选的以电子设备为手机进行说明,如图1所示,可以在手机背面安装微型照度计探头,该微型照度计探头的工作原理如图2所示,当有光线照射到微型照度计探头表面时,入射光透过金属薄膜,到达半导体硒层和金属薄膜的分界面上时,会在界面上产生光电效应,产生的光生电流的大小可以通过电流表检测,而光生电流的大小与光电池受光表面上的照度有一定的比例关系,如此,则可以实现对照度的检测。
另外,在实际拍摄场景中,背景与主体物A、B之间存在一定的距离,若在拍摄时仅采用自然光不打开相机的闪光灯,由于背景和主体物均受到自然光的照射,背景和主体对应的光照强度区别不大,相机的感光元件难以辨别,拍摄后,难以根据光照强度区分主体物与背景,如图3所示。因此,需要在拍摄图像时,使用闪光灯进行加持,由于背景和不同的主体物与闪光灯光源的距离有所区别,则背景以及主体物对应的照度有明显的区别,相机感光元件能够较容易辨别各主体物以及背景,如图4所示。如此,即使为电子设备配置的相机的精度不高使得拍摄出的图像的清晰度一般,依然可以实现准确度较高的抠图。
以下结合附图5至图12,详细说明本发明各实施例提供的技术方案。参见图5所示,本发明实施例提供一种图像处理方法,由电子设备执行,包括:
步骤101:获取目标对象的多张图像,目标对象包括拍摄主体和拍摄背景,多张图像为基于电子设备的闪光灯提供的不同照度分别拍摄得到的。
可选的,上述目标对象包括的拍摄主体的数量可以有一个或多个,不同的拍摄主体与闪光灯之间的距离可以相同也可以不同,以及不同的拍摄主体与拍摄背景之间的距离可以相同也可以不同。上述电子设备的闪光灯还可以为相机,由相机提供不同照度分别拍摄得到多张图像。
步骤103:根据多张图像中每张图像上标注的照度进行抠图处理,以将拍摄主体和拍摄背景分离。
在本发明实施例中,当需要对基于某一拍摄场景拍摄的图像进行抠图处理时,首先需要在不同的照度(即光照强度)条件下,针对待拍摄的目标对象分别拍摄一张图像,可以通过电子设备自身携带的闪光灯提供不同的照度,由于闪光灯与目标对象中的拍摄主体和拍摄背景之间的距离有所不同,则在拍摄过程中基于拍摄主体和拍摄背景分别检测到的照度也会有所区别,且当采用的闪光灯的照度有所区别时,反映到不同的图像上的照度也会有所不同。如此,通过对目标对象的基于不同照度拍摄得到的多张图像中的每张图像均进行照度检测及标注,以进一步根据不同图像间照度的区别以及同一图像中不同对象间的照度的区别进行抠图处理,将拍摄主体和拍摄背景分离开来,提高了抠图处理的成功率和准确率,且操作简单易实现。
进一步可选的,在本发明实施例的图像处理方法中,还可以包括以下内容:将经过抠图处理后分离开的拍摄主体和拍摄背景展示在电子设备的相册中。
可选的,在本发明实施例的图像处理方法中,上述步骤101可以执行为如下内容:
在未开启闪光灯的情况下,获取目标对象的第一图像;在开启闪光灯的情况下,获取目标对象的至少一张图像,至少一张图像与闪光灯提供的至少一个照度一一对应。
可以理解,在获取目标对象的多张对应于不同照度的图像时,可以首先获取一张在未开启闪光灯时拍摄的图像,此时闪光灯提供的照度为0,比如可以基于自然光进行拍摄;进一步在闪光灯开启后,可以在闪光灯的加持下对目标对象进行拍摄,并且当需要获取目标对象的多张图像时,可以进一步自动在不同大小的照度之间切换,并基于不同大小的照度进行拍摄加持以获取到对应的图像。如此,当基于上述获取到的目标对象的多张图像进行抠图处理时,便于更好地区分拍摄主体和拍摄背景,有助于提高抠图的成功率和准确率。
需要说明的是,上述步骤101还可以包括以下内容:在开启闪光灯的情况下,获取目标对象的多张图像,多张图像与闪光灯提供的多个不同的照度一一对应。其中,将最低照度对应的图像确定为第一图像。
可选的,闪光灯对应的各个照度为预先设置好的,基于不同的照度进行自动拍摄的顺序也可以为预先设置好,比如按照照度从小到大的顺序或者从大到小的顺序。
可选的,在本发明实施例的图像处理方法中,上述步骤103可以执行为如下内容:
根据多张图像中每张图像上的不同区域中分别标注的多个照度进行抠图处理,其中,多张图像中每张图像上的不同区域包括拍摄主体对应的第一区域和拍摄背景对应的第二区域。
可以理解,在对目标对象的每张图像进行照度检测及标注时,可以首先对拍摄到的图像划分区域,通过一定的识别技术确定拍摄主体在图像中的位置,进而将拍摄主体所在的区域划定为第一区域,将除拍摄主体对应的第一区域外的其他区域划定为第二区域;然后分区域进行照度检测及标注,相应的区域中可以包括多个标注点(或检测点)以在每张图像的不同区域中分别对应标注多个照度。如此,以便于根据不同区域间的照度变化区分拍摄主体和拍摄背景。
可选的,当拍摄主体有多个时,第一区域也有多个,多个拍摄主体与多个第一区域一一对应。
举例来说,参见图6,拍摄的目标对象包括拍摄主体A、拍摄主体B和拍摄背景,其中,拍摄主体A和拍摄主体B可以对应同一个第一区域也可以分别对应两个第二区域,拍摄背景对应第二区域,进而对不同的区域分别进行照度的检测及标注。如图可知,由于闪光灯的拍摄加持,拍摄主体区域对应的照度高于拍摄背景对应的照度,且相差较大,不同的拍摄主体之间对应的照度也有所区别。进一步完成抠图后,可以将拍摄主体A、拍摄主体B与拍摄背景分离开来。
可选的,在本发明实施例的图像处理方法中,为了提高分离拍摄主体和拍摄背景的准确性,可以基于在目标对象的图像中标注的照度划定拍摄主体和拍摄背景之间的分界曲线,以基于该分界曲线进行抠图处理,从而准确地将拍摄主体从拍摄背景中分离出来。可选的,上述根据多张图像中每张图像上的不同区域中分别标注的多个照度进行抠图处理的步骤,可以执行为如下内容:
在多张图像中的每张图像上,根据第一区域中标注的多个照度和第二区域中标注的多个照度形成多条等照度曲线;根据多张图像中每张图像上形成的多条等照度曲线,确定拍摄主体和拍摄背景之间的分界曲线;根据分界曲线进行抠图处理。
可以理解,在确定拍摄主体和拍摄背景之间的分界曲线时,对基于闪光灯提供的不同照度对目标对象分别进行拍摄得到的多张图像中的每一张图像,根据各图像的不同区域中分别标注的各照度形成对应的等照度曲线,从而根据每张图像分别对应的多条等照度曲线形成该多张图像对应的多条等照度曲线,进而可以根据该多张图像对应的多条等照度曲线确定拍摄主体和拍摄背景之间的分界曲线,以基于该分界曲线进行抠图处理。
可选的,每张图像中的多条等照度曲线分别分布在与拍摄主体和拍摄背景分别对应的不同区域中。
可选的,上述多条等照度曲线中的每条等照度曲线对应有各自的照度值,该照度值可以为分布在对应的等照度曲线附近的各标注点对应的照度值确定,比如为各照度值的平均值。
需要说明的是,在本发明实施例的图像处理方法中,若目标对象中包括多个拍摄主体,则可以根据多张图像中每张图像上形成的多条等照度曲线,分别确定拍摄背景和不同的拍摄主体之间对应的分界曲线,即拍摄主体与分界曲线一一对应,以将各拍摄主体分别从拍摄背景中分离出来。
可选的,在本发明实施例的图像处理方法中,上述根据多张图像中每张图像上形成的多条等照度曲线,确定拍摄主体和拍摄背景之间的分界曲线的步骤,可以执行为如下内容:
将多张图像中每张图像上形成的多条等照度曲线对应的照度之间的差值进行比较,确定每张图像上与拍摄主体对应的最大照度差值;分别将每张图像上与拍摄主体对应的最大照度差值对应的两条等照度曲线确定为候选曲线,以得到多张图像对应的多条候选曲线;根据多条候选曲线确定分界曲线。
在该实施例中,可以首先针对每张图像确定用于确定拍摄主体对应的分界曲线的候选曲线,可选的通过计算每张图像上形成的多条等照度曲线中两两之间分别对应的照度之间的差值,并将得到的各差值进行比较,由于拍摄主体和拍摄背景之间照度、聚焦等条件的不同,拍摄主体和拍摄背景分别对应的等照度曲线之间的差值显然会比较大,且拍摄主体的边缘区域对应的照度与拍摄背景对应的照度的差值会更大,因此,可以将各拍摄主体对应的最大照度差值对应的两条等照度曲线确定为候选曲线,依次类推即可以得到与多张图像对应的多条候选曲线,实现对等照度曲线的数量的缩减,并可以针对每张图像均可以得到能够将其所包含的各拍摄主体和拍摄背景区别开的两条候选曲线,进而综合多张图像对应的所有候选曲线即可以得到能够将各拍摄主体与拍摄背景区别开来的分界曲线。
可选的,考虑到基于不同图像得到的各候选曲线之间可能发生重叠的情况,上述多张图像对应的多条候选曲线的数量大于或等于两条。可选的,上述图像中的每个拍摄主体可以分别对应两条候选曲线。
可选的,在本发明实施例的图像处理方法中,上述根据多条候选曲线确定分界曲线的步骤,可以执行为以下内容:
将多条候选曲线对应的照度之间的差值进行比较,确定多条候选曲线对应的最大照度差值;将多条候选曲线对应的最大照度差值对应的两条候选曲线对应的区间确定为分界区间;基于分界区间确定分界曲线。
可以理解,基于对多张图像对应的所有等照度曲线进行缩减后得到的多条候选曲线进一步进行范围缩小,即计算该多条候选曲线中两两之间分别对应的照度之间的差值,并将得到的各差值进行大小比较,以筛选出最大照度差值对应的两条候选曲线,进而基于该两条候选曲线锁定用于划定分界曲线的一个可选的分界区间。如此,则可以根据该分界区间确定拍摄主体与拍摄背景之间的分界曲线。可选的,该分界曲线可以为分界区间对应的两个等照度曲线即两条候选曲线之间的一个,或者也可以为从分界区间中间选取的任一条曲线,比如位于分界区间的中间位置的曲线。
可选的,在本发明实施例的图像处理方法中,上述步骤103可以执行为如下内容:
根据分界曲线对第一图像进行抠图处理。
在该实施例中,可以基于确定的分界曲线对第一图像即在未开启闪光灯的情况下拍摄的图像进行抠图处理,以分离得到比较自然真实的拍摄主体和拍摄背景。
可选的,在本发明实施例的图像处理方法中,上述根据分界曲线对第一图像进行抠图处理的步骤,可以执行为如下内容:
根据分界曲线和第一图像对应的目标参数对第一图像进行抠图处理,目标参数包括色温参数和色彩参数中的至少一个。
可以理解,为了进一步提高抠图的成功率和准确率,还可以进一步参考图像对应的色温参数和/或色彩参数。其中,上述目标参数包括但不限于色温参数和/或色彩参数。
可选的,可以根据图像对应的色温参数形成对应的色温曲线并进而确定色温分界线、和/或根据图像对应的色彩参数形成对应的色彩曲线并进而确定色彩分界曲线,从而综合分别基于照度、色温、色彩分别确定的相应分界曲线中的一个或多个进行抠图处理,以将拍摄主体和拍摄背景分离开。
可选的,确定上述色温分界曲线和色彩分界曲线的方式可以参照本发明实施例中确定基于图像对应的照度参数确定相应的分界曲线的过程,在此不再赘述。当然,也可以采用其他能够确定上述色温分界曲线和色彩分界曲线的方式,在本发明实施例中不作具体限定,任何能够确定上述色温分界曲线和色彩分界曲线的方案均可落入本发明实施例的保护范围中。
下面以电子设备为手机,拍摄的主体包括人物和仙人掌对本发明实施例的图像处理方法进行说明,参见图7,该方法包括以下内容:
步骤201:打开相机后选择抠图模式,进入拍摄界面,如图8所示。
步骤203:在未开启闪光灯的情况下进行拍摄,得到图像A(相当于第一图像)。微型照度计在拍摄过程中对图像A的不同区域进行照度计算,并存储计算结果,示例如图9所示。
步骤205:在开启闪光灯的情况下,采用低闪光灯强度进行拍摄,可以在点击拍摄按钮,闪光灯自动开启低强度,拍摄得到图像B。微型照度计在拍摄过程中对图像B的不同区域进行照度计算,并存储计算结果,示例如图10所示。
步骤207:在开启闪光灯的情况下,采用高闪光灯强度进行拍摄,可以在点击拍摄按钮,闪光灯自动开启高强度,拍摄得到图像C。微型照度计在拍摄过程中对图像C的不同区域进行照度计算,并存储计算结果,示例如图11所示。
步骤209:对拍摄到的图像A、B和C运行算法进行抠图。
可选的,运行感光算法对3次拍摄到的图像分别基于图像中不同点的照度形成对应的等照度曲线,对比3张图像对应的照度曲线分布,基于不同照度曲线之间的差值变化计算形成用于区分主体物与背景的分界曲线。
举例来说,参见图12,等照度曲线1与等照度曲线3之间相差18lux,等照度曲线2和等照度曲线3之间相差2lux,则可以确定拍摄主体人与背景之间的分界曲线位于等照度曲线1和等照度曲线3之间。如此,通过将不同图像对应的等照度曲线对应的照度值进行比对不断缩小范围后确定最终的分界曲线。
进一步基于抠图算法基于分界曲线,并结合色彩、色温等参数对正常拍摄的图像A进行抠图,并可以对图像进行边角的美化和修饰,将图像A中的主体与背景分离,并将形成的无底色的不同的图像存储在相册中。
步骤211:输出抠图内容。
综上可知,通过不同强度的闪光灯照射拍摄同一景物,照度计对不同区域照度进行计算和标注,感光算法以及抠图算法综合多次拍摄的结果,根据照度变化区分不同的主体物以及背景,输出抠图结果。
进一步地,在本发明实施例的图像处理方法中,考虑到照度和物体距离光源的距离有关,进一步还可以实现对物体距离光源的距离的测算。
参见图13所示,本发明实施例还提供一种电子设备300,该电子设备300可以包括:获取模块301和处理模块303。
其中,获取模块301用于获取目标对象的多张图像,目标对象包括拍摄主体和拍摄背景,多张图像为基于电子设备的闪光灯提供的不同照度分别拍摄得到的;处理模块303用于根据多张图像中每张图像上标注的照度进行抠图处理。
可选的,在本发明实施例提供的电子设备300中,上述获取模块301,可以用于:
在未开启闪光灯的情况下,获取目标对象的第一图像;在开启闪光灯的情况下,获取目标对象的至少一张图像,至少一张图像与闪光灯提供的至少一个照度一一对应。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,可以用于:
根据多张图像中每张图像上的不同区域中分别标注的多个照度进行抠图处理,其中,多张图像中每张图像上的不同区域包括拍摄主体对应的第一区域和拍摄背景对应的第二区域。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,还可以用于:
在多张图像中的每张图像上,根据第一区域中标注的多个照度和第二区域中标注的多个照度形成多条等照度曲线;根据多张图像中每张图像上形成的多条等照度曲线,确定拍摄主体和拍摄背景之间的分界曲线;根据分界曲线进行抠图处理。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,还可以用于:
将多张图像中每张图像上形成的多条等照度曲线对应的照度之间的差值进行比较,确定每张图像上与拍摄主体对应的最大照度差值;分别将每张图像上拍摄主体对应的最大照度差值对应的两条等照度曲线确定为候选曲线,以得到多张图像对应的多条候选曲线;根据多条候选曲线确定分界曲线。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,还可以用于:
将多条候选曲线对应的照度之间的差值进行比较,确定多条候选曲线对应的最大照度差值;将多条候选曲线对应的最大照度差值对应的两条候选曲线对应的区间确定为分界区间;基于分界区间确定分界曲线。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,还可以用于:
根据分界曲线对第一图像进行抠图处理。
可选的,在本发明实施例提供的电子设备300中,上述处理模块303,还可以用于:
根据分界曲线和第一图像对应的目标参数,对第一图像进行抠图处理,目标参数包括色温参数和色彩参数中的至少一个。
能够理解,本发明实施例提供的电子设备300,能够实现前述由电子设备300执行的图像处理方法的各个过程,关于图像处理方法的相关阐述均适用于电子设备300,此处不再赘述。
在本发明实施例中,当需要对基于某一拍摄场景拍摄的图像进行抠图处理时,首先需要在不同的照度(即光照强度)条件下,针对待拍摄的目标对象分别拍摄一张图像,可以通过电子设备自身携带的闪光灯提供不同的照度,由于闪光灯与目标对象中的拍摄主体和拍摄背景之间的距离有所不同,则在拍摄过程中基于拍摄主体和拍摄背景分别检测到的照度也会有所区别,且当采用的闪光灯的照度有所区别时,反映到不同的图像上的照度也会有所不同。如此,通过对目标对象的基于不同照度拍摄得到的多张图像中的每张图像均进行照度检测及标注,以进一步根据不同图像间照度的区别以及同一图像中不同对象间的照度的区别进行抠图处理,将拍摄主体和拍摄背景分离开来,提高了抠图处理的成功率和准确率,且操作简单易实现。
图14为实现本发明各个实施例的一种电子设备的硬件结构示意图,该电子设备400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、处理器410、以及电源411等部件。本领域技术人员可以理解,图14中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器410,用于执行以下过程:
获取目标对象的多张图像,目标对象包括拍摄主体和拍摄背景,多张图像为基于电子设备的闪光灯提供的不同照度分别拍摄得到的;根据多张图像中每张图像上标注的照度进行抠图处理。
在本发明实施例中,当需要对基于某一拍摄场景拍摄的图像进行抠图处理时,首先需要在不同的照度(即光照强度)条件下,针对待拍摄的目标对象分别拍摄一张图像,可以通过电子设备自身携带的闪光灯提供不同的照度,由于闪光灯与目标对象中的拍摄主体和拍摄背景之间的距离有所不同,则在拍摄过程中基于拍摄主体和拍摄背景分别检测到的照度也会有所区别,且当采用的闪光灯的照度有所区别时,反映到不同的图像上的照度也会有所不同。如此,通过对目标对象的基于不同照度拍摄得到的多张图像中的每张图像均进行照度检测及标注,以进一步根据不同图像间照度的区别以及同一图像中不同对象间的照度的区别进行抠图处理,将拍摄主体和拍摄背景分离开来,提高了抠图处理的成功率和准确率,且操作简单易实现。
应理解的是,本发明实施例中,射频单元401可用于收发信息或通话过程中,信号的接收和发送,可选的,将来自基站的下行数据接收后,给处理器410处理;另外,将上行的数据发送给基站。通常,射频单元401包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元401还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块402为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元403可以将射频单元401或网络模块402接收的或者在存储器409中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元403还可以提供与电子设备400执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元403包括扬声器、蜂鸣器以及受话器等。
输入单元404用于接收音频或视频信号。输入单元404可以包括图形处理器(Graphics Processing Unit,GPU)4041和麦克风4042,图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元406上。经图形处理器4041处理后的图像帧可以存储在存储器409(或其它存储介质)中或者经由射频单元401或网络模块402进行发送。麦克风4042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元401发送到移动通信基站的格式输出。
电子设备400还包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。可选地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板4061的亮度,接近传感器可在电子设备400移动到耳边时,关闭显示面板4061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器405还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元406用于显示由用户输入的信息或提供给用户的信息。显示单元406可包括显示面板4061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板4061。
用户输入单元407可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。可选地,用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板4071上或在触控面板4071附近的操作)。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器410,接收处理器410发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板4071。除了触控面板4071,用户输入单元407还可以包括其他输入设备4072。可选地,其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板4071可覆盖在显示面板4041上,当触控面板4071检测到在其上或附近的触摸操作后,传送给处理器410以确定触摸事件的类型,随后处理器410根据触摸事件的类型在显示面板4061上提供相应的视觉输出。虽然在图14中,触控面板4071与显示面板4061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板4071与显示面板4061集成而实现电子设备的输入和输出功能,可选此处不做限定。
接口单元408为外部装置与电子设备400连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元408可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备400内的一个或多个元件或者可以用于在电子设备400和外部装置之间传输数据。
存储器409可用于存储软件程序以及各种数据。存储器409可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器409可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器410是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器409内的软件程序和/或模块,以及调用存储在存储器409内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器410可包括一个或多个处理单元;可选的,处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器410中。
电子设备400还可以包括给各个部件供电的电源411(比如电池),可选的,电源411可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备400包括一些未示出的功能模块,在此不再赘述。
可选的,本发明实施例还提供一种电子设备,包括处理器410,存储器409,存储在存储器409上并可在所述处理器410上运行的计算机程序,该计算机程序被处理器410执行时实现上述实施例中图像处理方法的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例中图像处理方法的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (10)

1.一种图像处理方法,应用于电子设备,其特征在于,所述方法包括:
获取目标对象的多张图像,所述目标对象包括拍摄主体和拍摄背景,所述多张图像为基于所述电子设备的闪光灯提供的不同照度分别拍摄得到的;
根据所述多张图像中每张图像上标注的照度进行抠图处理。
2.根据权利要求1所述的方法,其特征在于,所述获取目标对象的多张图像,包括:
在未开启所述闪光灯的情况下,获取所述目标对象的第一图像;
在开启所述闪光灯的情况下,获取所述目标对象的至少一张图像,所述至少一张图像与所述闪光灯提供的至少一个照度一一对应。
3.根据权利要求2所述的方法,其特征在于,所述根据所述多张图像中每张图像上标注的照度进行抠图处理,包括:
根据所述多张图像中每张图像上的不同区域中分别标注的多个照度进行抠图处理,其中,所述多张图像中每张图像上的不同区域包括所述拍摄主体对应的第一区域和所述拍摄背景对应的第二区域。
4.根据权利要求3所述的方法,其特征在于,所述根据所述多张图像中每张图像上的不同区域中分别标注的多个照度进行抠图处理,包括:
在所述多张图像中的每张图像上,根据所述第一区域中标注的多个照度和所述第二区域中标注的多个照度形成多条等照度曲线;
根据所述多张图像中每张图像上形成的多条等照度曲线,确定所述拍摄主体和所述拍摄背景之间的分界曲线;
根据所述分界曲线进行抠图处理。
5.根据权利要求4所述的方法,其特征在于,所述根据所述多张图像中每张图像上形成的多条等照度曲线,确定所述拍摄主体和所述拍摄背景之间的分界曲线,包括:
将所述多张图像中每张图像上形成的多条等照度曲线对应的照度之间的差值进行比较,确定每张图像上与所述拍摄主体对应的最大照度差值;
分别将每张图像上所述拍摄主体对应的最大照度差值对应的两条等照度曲线确定为候选曲线,以得到所述多张图像对应的多条候选曲线;
根据所述多条候选曲线确定所述分界曲线。
6.根据权利要求5所述的方法,其特征在于,所述根据所述多条候选曲线确定所述分界曲线,包括:
将所述多条候选曲线对应的照度之间的差值进行比较,确定所述多条候选曲线对应的最大照度差值;
将所述多条候选曲线对应的最大照度差值对应的两条候选曲线对应的区间确定为分界区间;
基于所述分界区间确定所述分界曲线。
7.根据权利要求4~6中任一项所述的方法,其特征在于,所述根据所述分界曲线进行抠图处理,包括:
根据所述分界曲线对所述第一图像进行抠图处理。
8.根据权利要求7所述的方法,其特征在于,所述根据所述分界曲线对所述第一图像进行抠图处理,包括:
根据所述分界曲线和所述第一图像对应的目标参数,对所述第一图像进行抠图处理,所述目标参数包括色温参数和色彩参数中的至少一个。
9.一种电子设备,其特征在于,所述电子设备包括:
获取模块,用于获取目标对象的多张图像,所述目标对象包括拍摄主体和拍摄背景,所述多张图像为基于所述电子设备的闪光灯提供的不同照度分别拍摄得到的;
处理模块,用于根据所述多张图像中每张图像上标注的照度进行抠图处理。
10.根据权利要求9所述的电子设备,其特征在于,所述获取模块,具体用于:
在未开启所述闪光灯的情况下,获取所述目标对象的第一图像;
在开启所述闪光灯的情况下,获取所述目标对象的至少一张图像,所述至少一张图像与所述闪光灯提供的至少一个照度一一对应。
CN202010031663.5A 2020-01-13 2020-01-13 图像处理方法和电子设备 Active CN111212228B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010031663.5A CN111212228B (zh) 2020-01-13 2020-01-13 图像处理方法和电子设备
PCT/CN2021/070947 WO2021143628A1 (zh) 2020-01-13 2021-01-08 图像处理方法和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010031663.5A CN111212228B (zh) 2020-01-13 2020-01-13 图像处理方法和电子设备

Publications (2)

Publication Number Publication Date
CN111212228A true CN111212228A (zh) 2020-05-29
CN111212228B CN111212228B (zh) 2021-06-22

Family

ID=70788818

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010031663.5A Active CN111212228B (zh) 2020-01-13 2020-01-13 图像处理方法和电子设备

Country Status (2)

Country Link
CN (1) CN111212228B (zh)
WO (1) WO2021143628A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021143628A1 (zh) * 2020-01-13 2021-07-22 维沃移动通信有限公司 图像处理方法和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942794A (zh) * 2014-04-16 2014-07-23 南京大学 一种基于置信度的图像协同抠图方法
CN104484667A (zh) * 2014-12-30 2015-04-01 华中科技大学 一种基于亮度特征和轮廓完整性的轮廓提取方法
CN105006002A (zh) * 2015-08-31 2015-10-28 北京华拓金融服务外包有限公司 自动图像抠图方法和装置
US20170289417A1 (en) * 2015-04-24 2017-10-05 Lifetouch Inc. Background replacement system and methods
US20180352241A1 (en) * 2017-06-02 2018-12-06 Apple Inc. Method and Device for Balancing Foreground-Background Luminosity

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8174611B2 (en) * 2009-03-26 2012-05-08 Texas Instruments Incorporated Digital image segmentation using flash
CN103366352B (zh) * 2012-03-30 2017-09-22 北京三星通信技术研究有限公司 用于产生背景被虚化的图像的设备和方法
CN104463775A (zh) * 2014-10-31 2015-03-25 小米科技有限责任公司 一种实现图片景深效果的方法及装置
CN104618646A (zh) * 2015-01-22 2015-05-13 深圳市金立通信设备有限公司 一种拍摄方法
CN104853109B (zh) * 2015-04-30 2018-05-29 广东欧珀移动通信有限公司 一种自动调节闪光的方法及拍摄终端
CN111212228B (zh) * 2020-01-13 2021-06-22 维沃移动通信有限公司 图像处理方法和电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942794A (zh) * 2014-04-16 2014-07-23 南京大学 一种基于置信度的图像协同抠图方法
CN104484667A (zh) * 2014-12-30 2015-04-01 华中科技大学 一种基于亮度特征和轮廓完整性的轮廓提取方法
US20170289417A1 (en) * 2015-04-24 2017-10-05 Lifetouch Inc. Background replacement system and methods
CN105006002A (zh) * 2015-08-31 2015-10-28 北京华拓金融服务外包有限公司 自动图像抠图方法和装置
US20180352241A1 (en) * 2017-06-02 2018-12-06 Apple Inc. Method and Device for Balancing Foreground-Background Luminosity

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021143628A1 (zh) * 2020-01-13 2021-07-22 维沃移动通信有限公司 图像处理方法和电子设备

Also Published As

Publication number Publication date
WO2021143628A1 (zh) 2021-07-22
CN111212228B (zh) 2021-06-22

Similar Documents

Publication Publication Date Title
CN109639970B (zh) 一种拍摄方法及终端设备
CN108848308B (zh) 一种拍摄方法及移动终端
CN108594997B (zh) 手势骨架构建方法、装置、设备及存储介质
CN109361865B (zh) 一种拍摄方法及终端
CN109246360B (zh) 一种提示方法及移动终端
CN109684980B (zh) 自动阅卷方法及装置
CN109688322B (zh) 一种生成高动态范围图像的方法、装置及移动终端
CN111405199B (zh) 一种图像拍摄方法和电子设备
CN109788174B (zh) 一种补光方法及终端
CN110930329B (zh) 星空图像处理方法及装置
CN111382624A (zh) 动作识别方法、装置、设备及可读存储介质
CN111127509B (zh) 目标跟踪方法、装置和计算机可读存储介质
CN107730460B (zh) 一种图像处理方法及移动终端
CN107749046B (zh) 一种图像处理方法及移动终端
CN108848313B (zh) 一种多人拍照方法、终端和存储介质
JP7467667B2 (ja) 検出結果出力方法、電子機器及び媒体
CN109495616B (zh) 一种拍照方法及终端设备
CN109819168B (zh) 一种摄像头的启动方法以及移动终端
CN108881544B (zh) 一种拍照的方法及移动终端
CN110827195B (zh) 虚拟物品添加方法、装置、电子设备及存储介质
CN109246351B (zh) 一种构图方法及终端设备
CN111246102A (zh) 拍摄方法、装置、电子设备及存储介质
CN110807405A (zh) 一种偷拍装置检测方法及电子设备
CN110881105B (zh) 一种拍摄方法及电子设备
CN109639981B (zh) 一种图像拍摄方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant