CN107018323A - 控制方法、控制装置和电子装置 - Google Patents

控制方法、控制装置和电子装置 Download PDF

Info

Publication number
CN107018323A
CN107018323A CN201710138831.9A CN201710138831A CN107018323A CN 107018323 A CN107018323 A CN 107018323A CN 201710138831 A CN201710138831 A CN 201710138831A CN 107018323 A CN107018323 A CN 107018323A
Authority
CN
China
Prior art keywords
portrait area
portrait
scene
depth
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710138831.9A
Other languages
English (en)
Other versions
CN107018323B (zh
Inventor
曾元清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710138831.9A priority Critical patent/CN107018323B/zh
Publication of CN107018323A publication Critical patent/CN107018323A/zh
Application granted granted Critical
Publication of CN107018323B publication Critical patent/CN107018323B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种控制方法,用于控制成像装置采集场景数据,控制方法包括以下步骤:处理场景数据以识别场景是否存在人像;在存在人像时处理场景数据以识别人像区域;判断人像区域是否曝光不足;在人像区域曝光不足时对人像区域进行单独测光以得到修正测光数据;和控制成像装置根据修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。本发明还公开一种控制装置和电子装置。本发明实施方式的控制方法、控制装置和电子装置基于深度信息获取人像区域,并单独对人像区域进行测光和修正,可以避免背光或逆光等环境下拍摄得的图像中人像偏暗的问题,提升拍摄图像的质量。

Description

控制方法、控制装置和电子装置
技术领域
本发明涉及图像处理技术,特别涉及一种控制方法、控制装置和电子装置。
背景技术
人物处于背光(或者逆光场景)状态进行拍摄时画面明显偏暗,视觉效果差。
发明内容
本发明的实施例提供了一种控制方法、控制装置和电子装置。
本发明实施方式的控制方法,用于控制成像装置采集场景数据,所述控制方法包括以下步骤:
处理所述场景数据以识别场景是否存在人像;
在存在所述人像时处理所述场景数据以识别人像区域;
判断所述人像区域是否曝光不足;
在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;和
控制所述成像装置根据所述修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。
本发明实施方式的控制装置,用于控制成像装置采集场景数据,所述控制装置包括第一识别模块、第二识别模块、判断模块、测光模块和采集模块。所述第一识别模块用于处理所述场景数据以识别场景是否存在人像;所述第二识别模块用于在存在所述人像时处理所述场景数据以识别人像区域;所述判断模块用于判断所述人像区域是否曝光不足;所述测光模块用于在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;所述采集模块用于控制所述成像装置根据所述修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。
本发明实施方式的电子装置包括成像装置和上述的控制装置,所述控制装置和所述成像装置电连接。
本发明实施方式的控制方法、控制装置和电子装置基于深度信息获取人像区域,并对人像区域进行单独测光和修正,在不影响背景曝光的同时可以提高背光或逆光等环境下拍摄得的图像中人像的亮度,提升拍摄图像的质量。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明实施方式的控制方法的流程示意图;
图2是本发明实施方式的电子装置的功能模块示意图;
图3是把本发明某些实施方式的控制方法的流程示意图;
图4是本发明某些实施方式的第一识别模块的功能模块示意图;
图5是本发明某些实施方式的控制方法的流程示意图;
图6是本发明某些实施方式的第一识别模块的功能模块示意图;
图7是本发明某些实施方式的控制方法的流程示意图;
图8是本发明某些实施方式的第二识别模块的功能模块示意图;
图9是本发明某些实施方式的控制方法的状态示意图;
图10是本发明某些实施方式的控制方法的流程示意图;
图11是本发明某些实施方式的第二识别模块的功能模块示意图;
图12是本发明某些实施方式的控制方法的流程示意图;
图13是本发明某些实施方式的第二识别模块的功能模块示意图;
图14是本发明某些实施方式的控制方法的流程示意图;
图15是本发明某些实施方式的第二识别模块的功能模块示意图;
图16是本发明某些实施方式的控制方法的流程示意图;
图17是本发明某些实施方式的第二识别模块的功能模块示意图;
图18是本发明某些实施方式的控制方法的流程示意图;
图19是本发明某些实施方式的电子装置的功能模块示意图;
图20是本发明某些实施方式的控制方法的流程示意图;和
图21是本发明某些实施方式的电子装置的功能模块示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
请一并参阅图1至2,本发明实施方式的控制方法,用于控制成像装置20采集场景数据,控制方法包括以下步骤:
S11:处理所述场景数据以识别场景是否存在人像;
S13:在存在所述人像时处理所述场景数据以识别人像区域;
S15:判断所述人像区域是否曝光不足;
S17:在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;和
S19:控制成像装置20根据所述修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。
本发明实施方式的控制方法可以由本发明实施方式的控制装置10实现。本发明实施方式的控制装置10包括第一识别模块11、第二识别模块13、判断模块15、测光模块17和采集模块19。步骤S11可以由第一识别模块11实现,步骤S13可以由第二识别模块13实现,步骤S15可以由判断模块15实现,步骤S17可以由测光模块17实现,步骤S19可以由采集模块19实现。
也即是说,第一识别模块11用于处理所述场景数据以识别场景是否存在人像;第二识别模块13用于在存在所述人像时处理所述场景数据以识别人像区域;判断模块15用于判断所述人像区域是否曝光不足;测光模块17用于在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;采集模块19用于控制成像装置20根据所述修正测光数据采集第一场景主图像。
本发明实施方式的控制装置10可以应用于本发明实施方式的电子装置100。也即是说,本发明实施方式的电子装置100可以包括本发明实施方式的控制装置10。当然,本发明实施方式的电子装置100还包括成像装置20。其中,控制装置10和成像装置20电连接。
可以理解,在背光或逆光环境下拍摄图像时,由于采用全局自动测光的方法控制成像装置20曝光,可能导致人像部分曝光不足,导致人像部分明显偏暗的问题,然而往往人脸部分才是感兴趣主题。因此,本发明实施方式的控制方法基于深度信息获取人像区域,并对人像区域进行单独测光,并根据单独测光的结果对测光数据进行修正(例如加重人像区域的权值),最终根据修正测光数据获得第一场景主图像。第一场景主图像中的人像区域由于经过了单独测光和曝光补偿,因此,人像区域的亮度提升,第一场景主图像的视觉效果更佳。
在某些实施方式中,本发明实施方式的电子装置100包括手机、平板电脑、笔记本电脑、智能头盔、智能手环、智能手表、智能眼镜等,在此不作任何限制。在本发明的具体实施例中,电子装置100为手机。
可以理解,手机常用于拍摄人像,采用本发明实施方式的控制方法进行人像拍摄可以使拍摄得的图片具有较好的视觉效果,提升用户体验。
请参阅图3,在某些实施方式中,步骤S11处理所述场景数据以识别场景是否存在人像包括以下子步骤:
S111:控制成像装置20进行全局测光以得到全局测光数据;
S112:控制成像装置20根据所述全局测光数据采集第二场景主图像,所述场景数据包括所述第二场景主图像;
S113:处理所述第二场景主图像以判断是否存在人脸;和
S114:在存在所述人脸时确定所述场景存在所述人像。
请参阅图4,在某些实施方式中,第一识别模块11包括测光单元111、采集单元112、第一判断单元113和第一处理单元114。步骤S111可以由测光单元111实现,步骤S112可以由采集单元112实现,步骤S113可以由第一判断单元113实现,步骤S114可以由第一处理单元114实现。
也即是说,测光单元111用于控制成像装置20进行全局测光以得到全局测光数据;采集单元112用于控制成像装置20根据所述全局测光数据采集第二场景主图像;第一判断单元113用于处理所述第二场景主图像以判断是否存在人脸;第一处理单元114用于在存在所述人脸时确定所述场景存在所述人像。
具体地,首先对拍摄的场景进行全局测光,根据全局测光数据进行曝光补偿后再进行图像拍摄以得到第二场景主图像,也即是说,第二场景主图像是经过全局测光及根据全局测光的数据进行曝光补偿后拍摄得的图像。随后,识别第二场景主图像中的人脸以便于后续步骤中对人脸区域进行提取。如此,经全局测光后采集的第二场景主图像具有较为合适的亮度,便于后续对人脸的检测。
进一步地,在本发明的具体实施例中,步骤S113处理所述第二场景主图像以判断是否存在人脸可以采用Adaboost算法检测第二场景主图像中是否存在人脸。
请参阅图5,在某些实施方式中,步骤S111控制成像装置20进行全局测光以得到全局测光数据包括以下子步骤:
S1111:划分所成像装置20输出的第三场景主图像为多个第一分析区域,所述场景数据包括所述第三场景主图像;和
S1112:计算每个所述第一分析区域的亮度信息以得到所述全局测光数据。
请参阅图6,在某些实施方式中,测光单元111包括划分子单元1111和计算子单元1112。步骤S1111可以由划分子单元1111实现,步骤S1112可以由计算子单元1112实现。
也即是说,划分子单元1111用于划分所成像装置20输出的第三场景主图像为多个第一分析区域,所述场景数据包括所述第三场景主图像;计算子单元1112用于计算每个所述第一分析区域的亮度信息以得到所述全局测光数据。
具体地,全局测光可以采用中央重点平均测光、中央部分测光、分割测光等方法。在本发明的具体实施例中,全局测光采用的是分割测光的方法。成像装置20首先输出第三场景主图像,第三场景主图像为未经过全局测光及曝光补偿处理的图像。划分子单元1111将第三场景主图像划分为多个第一分析区域。计算子单元1112统计各个第一分析区域的亮度信息后,采用不同的加权值对各个第一分析区域进行加权计算,并对加权计算后的结果求取平均值以得到最终的测光数据。分割测光是一种智能化测光方法,该方法模拟人脑对拍摄场景的光照均匀或不均匀的情况判断,会对整个场景中的亮度进行测量评估,从而获得整体平衡的曝光效果,使得拍摄得的图像效果更佳。
请参阅图7,在某些实施方式中,步骤S13在存在所述人像时处理所述场景数据以识别人像区域包括以下子步骤:
S131:处理所述第二场景主图像以得到人脸区域;
S132:处理所述场景数据以获取人脸区域的深度信息;和
S133:根据所述人脸区域和所述深度信息确定人像区域。
请参阅图8,在某些实施方式中,第二识别模块13包括第二处理单元131、第三处理单元132和第四处理单元133。步骤S131可以由第二处理单元131实现,步骤S132可以哟第三处理单元132实现,步骤S133可以由第四处理单元133实现。
也即是说,第二处理单元131用于处理所述第二场景主图像以得到人脸区域;第三处理单元132用于处理所述场景数据以获取人脸区域的深度信息;第四处理单元133用于根据所述人脸区域和所述深度信息确定人像区域。
可以理解,通过成像装置20采集场景数据,其中场景数据包括被摄场景的深度信息。在检测到人脸后,对第二场景主图像中的人脸区域进行获取。由于人像区域包含人脸区域,也即是说,人像区域的深度信息与人脸区域对应的深度信息同处于一个深度范围内,如此,可以根据人脸区域及人脸区域的深度信息即可确定人像区域(如图9所示)。由于深度信息的获取不易受光照、场景中色彩分布等因素的影响,因此,基于深度信息获取到的人像区域较为准确。
请参阅图10,在某些实施方式中,所述场景数据包括与所述第二场景主图像对应的深度图像,步骤S132处理所述场景数据以获取人脸区域的深度信息包括以下步骤:
S1321:处理所述深度图像以获取对应所述人脸区域的深度数据;和
S1322:处理所述深度数据以得到所述深度信息。
请参阅图11,在某些实施方式中,第三处理单元132包括第一处理子单元1321和第二处理子单元1322。步骤S1321可以由第一处理子单元1321实现,步骤S1322可以由第二处理子单元1322实现。
也即是说,第一处理子单元1321用于处理所述深度图像以获取对应所述人脸区域的深度数据;第二处理子单元1322用于处理所述深度数据以得到所述深度信息。
可以理解,场景数据包括第二场景主图像及与第二场景主图像对应的深度图像,其中,第二场景主图像为RGB彩色图像,深度图像包含场景中各个人或物体的信息。由于第二场景主图像的色彩信息与深度图像的深度信息是一一对应的关系,因此,在第二场景主图像中检测到人脸区域时,即可在对应的深度图像中获取到人脸的深度信息。
需要说明的是,在第二场景主图像中,人脸区域表现为二维图像,但由于人脸包括鼻子、眼睛、耳朵等特征,因此,在深度图像中,人脸区域中鼻子、眼睛、耳朵等特征在深度图像中所对应的深度数据是不同的,如当人脸正对成像装置20时,拍摄得的深度图像中,鼻子对应的深度数据可能较小,而耳朵对应的深度数据可能较大。因此,在本发明的具体实施例中,处理人脸区域的深度数据得到的人脸区域的深度信息可能为一个数值或一个数值范围。其中,当人脸区域为一个数值时,该数值可通过对人脸区域的深度数据取平均得到,或者对人脸区域的深度数据取中值得到。
在某些实施方式中,与第二场景主图像对应的深度图像的获取方式包括采用结构光深度测距获取深度图像及采用TOF深度摄像头获取深度图像两种方法。
采用结构光深度测距获取深度图像时,成像装置20包括摄像头和投射器。
可以理解,结构光深度测距是利用投射器将一定模式的光结构投射于物体表面,在表面形成由被测物体形状所调制的光条三维图像。光条三维图像由摄像头探测从而获得光条二维畸变图像。光条的畸变程度取决于投射器与摄像头之间的相对位置和物体表面形廓或高度。沿光条显示出的位移与物体表面的高度成比例,扭结表示了平面的变化,不连续显示表面的物理间隙。当投射器与摄像头之间的相对位置一定时,由畸变的二维光条图像坐标便可重现物体表面的三维轮廓,从而可以获取深度信息。结构光深度测距具有较高的分辨率和测量精度。
采用TOF深度摄像头获取深度图像时,成像装置20包括TOF深度摄像头。
可以理解,TOF(time of flight)深度摄像头通过传感器记录从发光单元发出的调制红外光发射到物体,再从物体反射回来的相位变化,在一个波长的范围内根据光速,可以实时的获取整个场景深度距离。TOF深度摄像头计算深度信息时不受被摄物表面的灰度和特征的影响,且可以快速地计算深度信息,具有很高的实时性。
请参阅图12,在某些实施方式中,所述场景数据包括与所述第二场景主图像对应的场景副图像,步骤S132处理所述场景数据以获取人脸区域的深度信息包括以下步骤:
S1323:处理所述第二场景主图像和所述场景副图像以得到所述人脸区域的深度数据;和
S1324:处理所述深度数据以得到所述深度信息。
请参阅图13,在某些实施方式中,第三处理单元132包括第三处理子单元1323和第四处理子单元1324。步骤S1323可以由第三处理子单元1323实现,步骤S1324可以由第四处理子单元1324实现。
也即是说,第三处理子单元1323用于处理所述第二场景主图像和所述场景副图像以得到所述人脸区域的深度数据;第四处理子单元用于处理所述深度数据以得到所述深度信息。
在某些实施方式中,成像装置20包括主摄像头和副摄像头。
可以理解,深度信息可以通过双目立体视觉测距方法进行获取,此时场景数据包括第二场景主图像和场景副图像。其中,第二场景主图像由主摄像头拍摄得到,场景副图像由副摄像头拍摄得到。双目立体视觉测距是运用两个相同的摄像头对同一被摄物从不同的位置成像以获得被摄物的立体图像对,再通过算法匹配出立体图像对的相应像点,从而计算出视差,最后采用基于三角测量的方法恢复深度信息。如此,通过第二场景主图像和场景副图像这一立体图像对进行匹配便可获得人脸区域的深度数据,随后,对人脸区域的深度数据进行处理获得人脸区域的深度信息。由于人脸区域中包含有多个特征,各个特征对应的深度数据可能不一样,因此,可对深度数据进行求平均值处理以得到人脸区域的深度信息,或取深度数据的中值以获得人脸区域的深度信息。此外,人脸区域的深度信息也可以是一个数值范围。
请参阅图14,在某些实施方式中,步骤S133根据所述人脸区域和所述深度信息确定人像区域包括以下子步骤:
S1331:根据所述人脸区域确定预估人像区域;
S1332:根据所述人脸区域的深度信息确定所述人像区域的深度范围;
S1333:根据所述人像区域的深度范围确定与所述人脸区域连接且落入所述深度范围的计算人像区域;
S1334:判断所述计算人像区域与所述预估人像区域是否匹配;和
S1335:在所述计算人像区域与所述预估人像区域匹配时确定所述计算人像区域为所述人像区域。
请参阅图15,在某些实施方式中,第四处理单元133包括第五处理子单元1331、第六处理子单元1332、第七处理子单元1333、判断子单元1334和第八处理子单元1335。步骤S1331可以由第五处理子单元1331实现,步骤S1332可以由第六处理子单元1332实现,捕捉S1333可以由第七处理子单元1333实现,步骤S1334可以由判断子单元1334实现,步骤S1335可以由第八处理子单元1335实现。
也即是说,第五处理子单元1331用于根据所述人脸区域确定预估人像区域;第六处理子单元1332用于根据所述人脸区域的深度信息确定所述人像区域的深度范围;第七处理单元1333用于根据所述人像区域的深度范围确定与所述人脸区域连接且落入所述深度范围的计算人像区域;判断子单元1334用于判断所述计算人像区域与所述预估人像区域是否匹配;第八处理子单元1335用于在所述计算人像区域与所述预估人像区域匹配时确定所述计算人像区域为所述人像区域。
具体地,由于拍摄的人像存在有多种行为姿势,如站立、蹲坐、直面镜头或测对镜头等,因此,确定人脸区域后,首先根据人脸区域的当前状态确定预估人像区域。其中,预估人像区域为人像区域的匹配样本库,样本库中包含多种人像的行为姿势的信息。由于人像区域包含人脸区域,也即是说,人像区域与人脸区域同处于某一个深度范围内,因此,确定人脸区域的深度信息后,可以根据人脸区域的深度信息设定人像区域的深度范围,并根据人像区域的深度范围提取深度范围内的与人脸区域相连接的计算人像区域。由于拍摄人像时人像所处的场景可能较为复杂,也即是说,与人像所处位置相邻的位置上可能存在有其他物体,这些物体处于人像区域的深度范围内,因此,在确定计算人像区域后,需将计算人像区域与预估人像区域进行匹配,匹配成功则可将计算人像区域确定为人像区域。若匹配不成功,则表明计算人像区域中可能包含有除人像外的其他物体,人像区域的识别失败。
请参阅图16,在某些实施方式中,步骤S13在存在所述人像时处理所述场景数据以识别人像区域的步骤还包括以下子步骤:
S134:处理所述第二场景主图像以得到彩色边缘图;和
S135:利用所述彩色边缘图修正所述人像区域的边缘。
请参阅图17,在某些实施方式中,第二识别模块13还包括第五处理单元134和修正单元135。步骤S134可以由第五处理单元134实现,步骤S135可以由修正单元135实现。
也即是说,第五处理单元134用于处理所述第二场景主图像以得到彩色边缘图;修正单元135用于利用所述彩色边缘图修正所述人像区域的边缘。
具体地,采用边缘检测算法对第二场景主图像进行处理。通过对第二场景主图像对应的图像数据求微分以获得具有阶跃变化或屋顶变化的像素点的集合。常用的边缘检测算法包括Roberts算子、Sobel算子、Prewitt算子、Canny算子、Laplacian算子、LOG算子等。在本发明的具体实施例中,可以采用上述的任一种边缘检测算法进行计算以获得彩色边缘图,在此不做任何限制。
请参阅图18,在某些实施方式中,步骤S15判断所述人像区域是否曝光不足包括以下子步骤:
S151:判断所述人像区域的亮度与所述第二场景主图像的亮度比是否小于预定值;和
S152:在所述亮度比小于所述预定值时确定所述人像区域曝光不足。
请参阅图19,在某些实施方式中,判断模块15包括第二判断单元151和第六处理单元152。步骤S151可以由第二判断单元151实现,步骤S152可以由第六处理单元152实现。
也即是说,第二判断单元151用于判断所述人像区域的亮度与所述第二场景主图像的亮度比是否小于预定值;第六处理单元152用于在所述亮度比小于所述预定值时确定所述人像区域曝光不足。
可以理解,第二场景主图像为经过全局测光及根据全局测光的数据进行曝光补偿后拍摄得的图像。若人像区域的亮度与第二场景主图像的亮度比小于预定值,说明人像区域的亮度较暗,曝光不足,需要对人像区域进行额外的修正和曝光补偿。若人像区域的亮度与第二场景主图像的亮度比大于预定值,说明人像区域的曝光充足,无需再对人像区域进行额外的修正和曝光补偿。
请参阅图20,在某些实施方式中,步骤S17在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据包括以下步骤:
S171:划分所述人像区域为多个第二分析区域;和
S172:计算每个所述第二分析区域的亮度信息以得到所述修正测光数据。
请参阅图21,在某些实施方式中,测光模块17包括划分单元171和计算单元172。步骤S171可以由划分单元171实现,步骤S172可以由计算单元172实现。
也即是说,划分单元171用于划分所述人像区域为多个第二分析区域;计算单元172用于计算每个所述第二分析区域的亮度信息以得到所述修正测光数据。
如此,对人像区域单独测光,并根据修正测光数据对人像区域进行修正和曝光补偿,提升人像区域的亮度。
进一步地,人像区域的测光可以采用中央重点平均测光、中央部分测光及分割测光等方法。在本发明的具体实施例中,人像区域采用分割测光的方法。划分单元171将第二场景主图像中的人像区域划分为多个第二分析区域。计算单元172统计各个第二分析区域的亮度信息后,采用不同的加权值对各个第二分析区域进行加权计算,并对加权计算后的结果求取平均值以得到最终人像区域的测光数据。
本发明实施方式中的电子装置100还包括壳体、存储器、电路板和电源电路。其中,电路板安置在壳体围成的空间内部,处理器和存储器设置在电路板上;电源电路用于为电子装置100的各个电路或器件供电;存储器用于存储可执行程序代码;控制装置10通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序以实现上述的本发明任一实施方式的图像处理方法。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施方式,可以理解的是,上述实施方式是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施方式进行变化、修改、替换和变型。

Claims (21)

1.一种控制方法,用于控制成像装置采集场景数据,其特征在于,所述控制方法包括以下步骤:
处理所述场景数据以识别场景是否存在人像;
在存在所述人像时处理所述场景数据以识别人像区域;
判断所述人像区域是否曝光不足;
在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;和
控制所述成像装置根据所述修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。
2.如权利要求1所述的控制方法,其特征在于,所述处理所述场景数据以识别场景是否存在人像的步骤包括以下子步骤:
控制所述成像装置进行全局测光以得到全局测光数据;
控制所述成像装置根据所述全局测光数据采集第二场景主图像,所述场景数据包括所述第二场景主图像;
处理所述第二场景主图像以判断是否存在人脸;和
在存在所述人脸时确定所述场景存在所述人像。
3.如权利要求2所述的控制方法,其特征在于,所述控制所述成像装置进行全局测光以得到全局测光数据的步骤包括以下子步骤:
划分所述成像装置输出的第三场景主图像为多个第一分析区域,所述场景数据包括所述第三场景主图像;和
计算每个所述第一分析区域的亮度信息以得到所述全局测光数据。
4.如权利要求1或2所述的控制方法,其特征在于,所述在存在所述人像时处理所述场景数据以识别人像区域的步骤包括以下子步骤:
处理所述第二场景主图像以得到人脸区域;
处理所述场景数据以获取人脸区域的深度信息;和
根据所述人脸区域和所述深度信息确定人像区域。
5.如权利要求4所述的控制方法,其特征在于,所述场景数据包括与所述第二场景主图像对应的深度图像,所述处理所述场景数据以获取所述人脸区域的深度信息的步骤包括以下子步骤:
处理所述深度图像以获取对应所述人脸区域的深度数据;和
处理所述深度数据以得到所述深度信息。
6.如权利要求4所述的控制方法,其特征在于,所述场景数据包括与所述第二场景主图像对应的场景副图像,所述处理所述场景数据以获取所述人脸区域的深度信息的步骤包括以下子步骤:
处理所述第二场景主图像和所处场景副图像以得到所述人脸区域的深度数据;和
处理所述深度数据以得到所述深度信息。
7.如权利要求4所述的控制方法,其特征在于,所述根据所述人脸区域和所述深度信息确定人像区域的步骤包括以下子步骤:
根据所述人脸区域确定预估人像区域;
根据所述人脸区域的深度信息确定所述人像区域的深度范围;
根据所述人像区域的深度范围确定与所述人脸区域连接且落入所述深度范围的计算人像区域;
判断所述计算人像区域与所述预估人像区域是否匹配;和
在所述计算人像区域与所述预估人像区域匹配时确定所述计算人像区域为所述人像区域。
8.如权利要求1所述的控制方法,其特征在于,所述在存在所述人像时处理所述场景数据以识别人像区域的步骤还包括以下子步骤:
处理所述第二场景主图像以得到彩色边缘图;和
利用所述彩色边缘图修正所述人像区域的边缘。
9.如权利要求1所述的控制方法,其特征在于,所述判断所述人像区域是否曝光不足的步骤包括以下子步骤:
判断所述人像区域的亮度与所述第二场景主图像的亮度比是否小于预定值;和
在所述亮度比小于所述预定值时确定所述人像区域曝光不足。
10.如权利要求1所述的控制方法,其特征在于,所述在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据的步骤包括以下子步骤:
划分所述人像区域为多个第二分析区域;和
计算每个所述第二分析区域的亮度信息以得到所述修正测光数据。
11.一种控制装置,用于控制成像装置采集场景数据,其特征在于,所述控制装置包括:
第一识别模块,所述第一识别模块用于处理所述场景数据以识别场景是否存在人像;
第二识别模块,所述第二识别模块用于在存在所述人像时处理所述场景数据以识别人像区域;
判断模块,所述判断模块用于判断所述人像区域是否曝光不足;
测光模块,所述测光模块用于在所述人像区域曝光不足时对所述人像区域进行单独测光以得到修正测光数据;和
采集模块,所述采集模块用于控制所述成像装置根据所述修正测光数据采集第一场景主图像,所述场景数据包括所述第一场景主图像。
12.如权利要求11所述的控制装置,其特征在于,所述第一识别模块包括:
测光单元,所述测光单元用于控制所述成像装置进行全局测光以得到全局测光数据;
采集单元,所述采集单元用于控制所述成像装置根据所述全局测光数据采集第二场景主图像,所述场景数据包括所述第二场景主图像;
第一判断单元,所述第一判断单元用于处理所述第二场景主图像以判断是否存在人脸;和
第一处理单元,所述第一处理单元用于在存在所述人脸时确定所述场景存在所述人像。
13.如权利要求12所述的控制装置,其特征在于,所述测光单元包括:
划分子单元,所述划分子单元用于划分所述成像装置输出的第三场景主图像为多个第一分析区域,所述场景数据包括所述第三场景主图像;和
计算子单元,所述计算子单元用于计算每个所述第一分析区域的亮度信息以得到所述全局测光数据。
14.如权利要求11或12所述控制装置,其特征在于,所述第二识别模块包括:
第二处理单元,所述第二处理单元用于处理所述第二场景主图像以得到人脸区域;
第三处理单元,所述第三处理单元用于处理所述场景数据以获取人脸区域的深度信息;和
第四处理单元,所述第四处理单元用于根据所述人脸区域和所述深度信息确定人像区域。
15.如权利要求14所述的控制装置,其特征在于,所述场景数据包括与所述第二场景主图像对应的深度图像,所述第三处理单元包括:
第一处理子单元,所述第一处理子单元用于处理所述深度图像以获取对应所述人脸区域的深度数据;和
第二处理子单元,所述第二处理子单元用于处理所述深度数据以得到所述深度信息。
16.如权利要求14所述的控制装置,其特征在于,所述场景数据包括与所述第二场景主图像对应的深度图像,所述第三处理单元包括:
第三处理子单元,所述第三处理子单元用于处理所述第二场景主图像和所处场景副图像以得到所述人脸区域的深度数据;和
第四处理子单元,所述第四处理子单元用于处理所述深度数据以得到所述深度信息。
17.如权利要求14所述的控制装置,其特征在于,所述第四处理单元包括:
第五处理子单元,所述第五处理子单元用于根据所述人脸区域确定预估人像区域;
第六处理子单元,所述第六处理子单元用于根据所述人脸区域的深度信息确定所述人像区域的深度范围;
第七处理子单元,所述第七处理子单元用于根据所述人像区域的深度范围确定与所述人脸区域连接且落入所述深度范围的计算人像区域;
判断子单元,所述判断子单元用于判断所述计算人像区域与所述预估人像区域是否匹配;和
第八处理子单元,所述第八处理子单元用于在所述计算人像区域与所述预估人像区域匹配时确定所述计算人像区域为所述人像区域。
18.如权利要求11所述的控制装置,其特征在于,所述第二识别模块还包括:
第五处理单元,所述第五处理单元用于处理所述第二场景主图像以得到彩色边缘图;和
修正单元,所述修正单元用于利用所述彩色边缘图修正所述人像区域的边缘。
19.如权利要求11所述的控制装置,其特征在于,所述判断模块包括:
第二判断单元,所述第二判断单元用于判断所述人像区域的亮度与所述第二场景主图像的亮度比是否小于预定值;和
第六处理单元,所述第六处理单元用于在所述亮度比小于所述预定值时确定所述人像区域曝光不足。
20.如权利要求11所述的控制装置,其特征在于,所述测光模块包括:
划分单元,所述划分单元用于划分所述人像区域为多个第二分析区域;和
计算单元,所述计算单元用于计算每个所述第二分析区域的亮度信息以得到所述修正测光数据。
21.一种电子装置,其特征在于,所述电子装置包括:
成像装置;和
如权利要求11至20任意一项所述的控制装置,所述控制装置与所述成像装置电连接。
CN201710138831.9A 2017-03-09 2017-03-09 控制方法、控制装置和电子装置 Active CN107018323B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710138831.9A CN107018323B (zh) 2017-03-09 2017-03-09 控制方法、控制装置和电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710138831.9A CN107018323B (zh) 2017-03-09 2017-03-09 控制方法、控制装置和电子装置

Publications (2)

Publication Number Publication Date
CN107018323A true CN107018323A (zh) 2017-08-04
CN107018323B CN107018323B (zh) 2019-07-12

Family

ID=59439694

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710138831.9A Active CN107018323B (zh) 2017-03-09 2017-03-09 控制方法、控制装置和电子装置

Country Status (1)

Country Link
CN (1) CN107018323B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592473A (zh) * 2017-10-31 2018-01-16 广东欧珀移动通信有限公司 曝光参数调整方法、装置、电子设备和可读存储介质
CN107623818A (zh) * 2017-10-30 2018-01-23 维沃移动通信有限公司 一种图像曝光方法和移动终端
CN107995425A (zh) * 2017-12-11 2018-05-04 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108307123A (zh) * 2018-01-22 2018-07-20 维沃移动通信有限公司 一种曝光调整方法及移动终端
TWI635323B (zh) * 2017-10-13 2018-09-11 中強光電股份有限公司 光場顯示裝置及其光場影像的顯示方法
CN109242794A (zh) * 2018-08-29 2019-01-18 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN109741288A (zh) * 2019-01-04 2019-05-10 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN111182199A (zh) * 2018-11-13 2020-05-19 深圳富泰宏精密工业有限公司 电子装置及拍照方法
CN112532854A (zh) * 2019-09-17 2021-03-19 华为技术有限公司 一种图像处理方法与电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202841A (zh) * 2006-12-11 2008-06-18 株式会社理光 摄像装置以及用于摄像装置的曝光控制方法
CN102789568A (zh) * 2012-07-13 2012-11-21 浙江捷尚视觉科技有限公司 一种基于深度信息的手势识别方法
US20140063288A1 (en) * 2012-08-30 2014-03-06 Pantech Co., Ltd. Imaging apparatus, electronic device and method providing exposure compensation
CN105898147A (zh) * 2016-05-24 2016-08-24 广东欧珀移动通信有限公司 应用于移动终端的测光处理方法和装置
CN105979161A (zh) * 2016-06-07 2016-09-28 广东欧珀移动通信有限公司 拍照时的测光方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202841A (zh) * 2006-12-11 2008-06-18 株式会社理光 摄像装置以及用于摄像装置的曝光控制方法
CN102789568A (zh) * 2012-07-13 2012-11-21 浙江捷尚视觉科技有限公司 一种基于深度信息的手势识别方法
US20140063288A1 (en) * 2012-08-30 2014-03-06 Pantech Co., Ltd. Imaging apparatus, electronic device and method providing exposure compensation
CN105898147A (zh) * 2016-05-24 2016-08-24 广东欧珀移动通信有限公司 应用于移动终端的测光处理方法和装置
CN105979161A (zh) * 2016-06-07 2016-09-28 广东欧珀移动通信有限公司 拍照时的测光方法、装置及系统

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI635323B (zh) * 2017-10-13 2018-09-11 中強光電股份有限公司 光場顯示裝置及其光場影像的顯示方法
US10571706B2 (en) 2017-10-13 2020-02-25 Coretronic Corporation Light field display apparatus and display method of light field image
CN107623818A (zh) * 2017-10-30 2018-01-23 维沃移动通信有限公司 一种图像曝光方法和移动终端
CN107592473A (zh) * 2017-10-31 2018-01-16 广东欧珀移动通信有限公司 曝光参数调整方法、装置、电子设备和可读存储介质
CN107995425A (zh) * 2017-12-11 2018-05-04 维沃移动通信有限公司 一种图像处理方法及移动终端
CN107995425B (zh) * 2017-12-11 2019-08-20 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108307123A (zh) * 2018-01-22 2018-07-20 维沃移动通信有限公司 一种曝光调整方法及移动终端
CN109242794A (zh) * 2018-08-29 2019-01-18 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN109242794B (zh) * 2018-08-29 2021-05-11 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN111182199A (zh) * 2018-11-13 2020-05-19 深圳富泰宏精密工业有限公司 电子装置及拍照方法
US10944903B2 (en) 2018-11-13 2021-03-09 Chiun Mai Communication Systems, Inc. Method for acquiring image using different focus at different depth and electronic device using the same
CN111182199B (zh) * 2018-11-13 2022-02-11 深圳富泰宏精密工业有限公司 电子装置及拍照方法
CN109741288A (zh) * 2019-01-04 2019-05-10 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN112532854A (zh) * 2019-09-17 2021-03-19 华为技术有限公司 一种图像处理方法与电子设备
CN112532854B (zh) * 2019-09-17 2022-05-31 华为技术有限公司 一种图像处理方法与电子设备

Also Published As

Publication number Publication date
CN107018323B (zh) 2019-07-12

Similar Documents

Publication Publication Date Title
CN107018323A (zh) 控制方法、控制装置和电子装置
CN106851238B (zh) 白平衡控制方法、白平衡控制装置及电子装置
CN106909911A (zh) 图像处理方法、图像处理装置和电子装置
CN107025635B (zh) 基于景深的图像饱和度的处理方法、处理装置和电子装置
CN106991688A (zh) 人体跟踪方法、人体跟踪装置和电子装置
CN106991654A (zh) 基于深度的人体美化方法和装置及电子装置
CN106993112A (zh) 基于景深的背景虚化方法及装置和电子装置
CN110168562B (zh) 基于深度的控制方法、基于深度的控制装置和电子装置
US10564446B2 (en) Method, apparatus, and computer program for establishing a representation of a spectacle lens edge
CN105627932B (zh) 一种基于双目视觉的测距方法及装置
CN107169405A (zh) 基于双目摄像机活体识别的方法及装置
US9070023B2 (en) System and method of alerting a driver that visual perception of pedestrian may be difficult
CN107016348A (zh) 结合深度信息的人脸检测方法、检测装置和电子装置
CN106937049A (zh) 基于景深的人像色彩的处理方法、处理装置和电子装置
US20010033685A1 (en) Device, method and record medium for image comparison
CN107341467A (zh) 虹膜采集方法及设备、电子装置和计算机可读存储介质
CN107277356A (zh) 逆光场景的人脸区域处理方法和装置
CN106997457A (zh) 人物肢体识别方法、人物肢体识别装置及电子装置
CN107633237A (zh) 图像背景分割方法、装置、设备及介质
CN106991378A (zh) 基于深度的人脸朝向检测方法、检测装置和电子装置
CN111462128A (zh) 一种基于多模态光谱图像的像素级图像分割系统及方法
CN110456904A (zh) 一种无需标定的增强现实眼镜眼动交互方法及系统
CN106991376A (zh) 结合深度信息的侧脸验证方法及装置与电子装置
CN114511608A (zh) 一种深度图像的获取方法、装置、终端、成像系统和介质
CN106991379A (zh) 结合深度信息的人体皮肤识别方法及装置和电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

GR01 Patent grant
GR01 Patent grant