CN106506969B - 摄像模组、通过其进行人像追踪的方法以及电子设备 - Google Patents

摄像模组、通过其进行人像追踪的方法以及电子设备 Download PDF

Info

Publication number
CN106506969B
CN106506969B CN201611092361.9A CN201611092361A CN106506969B CN 106506969 B CN106506969 B CN 106506969B CN 201611092361 A CN201611092361 A CN 201611092361A CN 106506969 B CN106506969 B CN 106506969B
Authority
CN
China
Prior art keywords
pixel
camera
pixels
block
motor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201611092361.9A
Other languages
English (en)
Other versions
CN106506969A (zh
Inventor
李小朋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201611092361.9A priority Critical patent/CN106506969B/zh
Publication of CN106506969A publication Critical patent/CN106506969A/zh
Priority to US15/623,182 priority patent/US10937184B2/en
Priority to EP17176605.8A priority patent/EP3328057B1/en
Priority to PCT/CN2017/090594 priority patent/WO2018099059A1/en
Application granted granted Critical
Publication of CN106506969B publication Critical patent/CN106506969B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • G03B17/561—Support related camera accessories
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B29/00—Combinations of cameras, projectors or photographic printing apparatus with non-photographic non-optical apparatus, e.g. clocks or weapons; Cameras having the shape of other objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Abstract

本发明提出一种摄像模组、通过该摄像模组进行人像追踪的方法、以及电子设备。其中，该摄像模组包括：主摄像头；第一马达，用于驱动主摄像头进行移动；副摄像头，副摄像头包括多个像素块，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素；控制模块，用于获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。该摄像模组可以提高人像追踪的精准度，并实现快速对焦的功能，提升用户的拍照体验。

Description

摄像模组、通过其进行人像追踪的方法以及电子设备
技术领域
本发明涉及图像拍摄领域，尤其涉及一种摄像模组、通过该摄像模组进行人像追踪的方法以及一种电子设备。
背景技术
随着智能终端(如智能手机)的快速发展，对智能终端的拍照功能要求越来越高，特别是人像追踪功能，这是由于人像可以随时在动，智能终端只有具有人像追踪功能才可以随时跟踪人像的位置，以抓拍到人物的图像。相关技术中，通常通过设置在智能终端(如手机等)上的双摄像头，来实现人脸的追踪。
但是，由于目前的双摄像头中的PD(Photo-Diode，光电二极管)像素的面积小，只能以人脸区域作为对焦区域来进行相位差计算，这样可能导致该相位差不是很精准，导致人物图像中人脸位置清晰而其他位置模糊的情况，不能达到人像追踪的目的，导致用户的拍照体验变差。
发明内容
本发明的目的旨在至少在一定程度上解决上述的技术问题之一。
为此，本发明的第一个目的在于提出一种摄像模组。该摄像模组可以增大PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
本发明的第二个目的在于提出一种通过摄像模组进行人像追踪的方法。
本发明的第三个目的在于提出一种电子设备。
为达到上述目的，本发明第一方面实施例提出的摄像模组，包括：主摄像头；与所述主摄像头相连的第一马达，所述第一马达用于驱动所述主摄像头进行移动；副摄像头，所述副摄像头包括多个像素块，每个像素块由多个感光像素构成，所述每个像素块用于在所述副摄像头检测到人脸时，通过所述多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，通过所述多个感光像素中的第二部分感光像素对所述人像区域进行采集以得到第二PD像素；分别与所述主摄像头、第一马达和副摄像头相连的控制模块，所述控制模块用于获取所述副摄像头采集的全局PD像素，并根据所述全局PD像素计算相位差，以及根据所述相位差控制所述第一马达驱动所述主摄像头移动至合焦位置。
根据本发明实施例的摄像模组，可通过设置主摄像头和副摄像头，并通过将该副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，控制模块获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
根据本发明的一个实施例，所述多个感光像素为2*2个。
根据本发明的一个实施例，所述每个像素块为单色像素块。
根据本发明的一个实施例，所述摄像模组还包括：分别与所述副摄像头和所述控制模块相连的第二马达，所述第二马达用于驱动所述副摄像头进行移动。
在本发明的实施例中，所述控制模块还用于根据所述相位差控制所述第二马达驱动所述副摄像头移动至所述合焦位置。
根据本发明的一个实施例，所述第一马达与所述第二马达具有相同的性能。
为达到上述目的，本发明第二方面实施例提出的通过本发明第一方面实施例所述的摄像模组进行人像追踪的方法，包括：当检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，其中，所述多个感光像素构成一个像素块，多个所述像素块构成所述副摄像头；通过所述多个感光像素中的第二部分感光像素对所述人像区域进行采集以得到第二PD像素；获取所述副摄像头采集的全局PD像素；根据所述全局PD像素计算相位差；根据所述相位差控制所述第一马达驱动所述主摄像头移动至合焦位置。
根据本发明实施例的人像追踪的方法，通过将摄像模组的副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，然后，获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
根据本发明的一个实施例，所述方法还包括：根据所述相位差控制所述第二马达驱动所述副摄像头移动至所述合焦位置。
根据本发明的一个实施例，所述获取所述副摄像头采集的全局PD像素，包括：获取所述每个像素块采集到的所述第一PD像素和所述第二PD像素；根据所述每个像素块采集到的所述第一PD像素和所述第二PD像素获取所述副摄像头采集的所述全局PD像素。
为达到上述目的，本发明第三方面实施例提出的电子设备，包括：本发明第一方面实施例所述的摄像模组。
根据本发明实施例的电子设备，通过将摄像模组的副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，控制模块获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：
图1是根据本发明一个实施例的摄像模组的结构示意图；
图2是根据本发明一个实施例的副摄像头的结构示意图；
图3是根据本发明另一个实施例的摄像模组的结构示意图；
图4是根据本发明一个实施例的人像追踪的方法的流程图；
图5是根据本发明一个实施例的电子设备的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
下面参考附图描述根据本发明实施例的摄像模组、通过该摄像模组进行人像追踪的方法以及电子设备。
图1是根据本发明一个实施例的摄像模组的结构示意图。需要说明的是，本发明实施例的摄像模组可被配置于具有拍照功能的电子设备上，其中，该电子设备可以是移动终端，例如，该移动终端可以是手机、平板电脑、掌上电脑、个人数字助理等具有各种操作系统的硬件设备。
如图1所示，该摄像模组10可以包括：主摄像头100、第一马达200、副摄像头300和控制模块400。其中，主摄像头100与第一马达200相连，控制模块400分别与主摄像头100、第一马达200和副摄像头300相连。第一马达200可用于驱动主摄像头100进行移动。
此外，如图1所示，副摄像头300可包括多个像素块310，每个像素块310可由多个感光像素311构成。每个像素块310可用于在副摄像头300检测到人脸时，通过多个感光像素311中的第一部分感光像素对人像区域进行采集以得到第一PD像素，通过多个感光像素311中的第二部分感光像素对人像区域进行采集以得到第二PD像素。
作为一种示例，副摄像头300可通过人脸模型来判断当前采集到的图像中是否存在人脸，若存在，则检测到人脸。可以理解，上述给出的利用人脸模型来实现人脸检测仅是一种示例，并不能作为对本发明的具体限定，即人脸检测还可以通过其他方式实现，例如，人脸检测算法等方式。
在副摄像头300检测到人脸时，副摄像头300中的每个像素块310可通过多个感光像素311中的第一部分感光像素对该人脸所对应的人像区域进行采集以得到第一PD像素，并通过多个感光像素311中的第二部分感光像素对该人像区域进行采集以得到第二PD像素。
需要说明的是，本发明将副摄像头300设置成由多个像素块310构成，每个像素块310又由多个感光像素311构成，并且，该多个感光像素311分成两个部分，即第一部分感光像素和第二部分感光像素。也就是说，将副摄像头300用作于全PD Pixel(像素)，即将第一部分感光像素用于对人像区域进行采集以得到第一PD像素，将第二部分感光像素用于对该人像区域进行采集以得到第二PD像素，这样，可以组成一个全局PD Pixel。
控制模块400可用于获取副摄像头300采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达200驱动主摄像头100移动至合焦位置。
具体地，控制模块400可获取副摄像头300中的每个像素块310采集到的第一PD像素和第二PD像素，并根据每个像素块310采集到的第一PD像素和第二PD像素获取副摄像头300采集的全局PD像素。例如，控制模块400可将所有像素块310采集到的第一PD像素进行数据相加，并将所有像素块310采集到的第二PD像素进行数据相加，以得到人像区域的PD像素数据，该人像区域的PD像素数据即为副摄像头300采集的全局PD像素。
控制模块400在得到副摄像头300采集的全局PD像素之后，可根据该全局PD像素计算出相位差，并将该相位差传入到主摄像头100，以控制第一马达200驱动主摄像头100移动至合焦位置，实现了以副摄像头300计算出的相位差来使主摄像头100移动到合焦的位置。由于本发明由多个感光像素来组成PD像素，使得副摄像头中的PD像素密度非常高，并且灵敏度也非常高，所以可以计算出的相位差将变得很精准，基本可以达到一步到位的使人像清晰的目的。
为了使得本领域的技术人员能够更加清楚地了解本发明，下面可给出相应示例以举例说明本发明中的副摄像头300。
作为一种示例，该多个感光像素311可为2*2个。也就是说，副摄像头300的每个像素块310中的多个感光像素311可为2*2个，即可由2*2个感光像素311组成一个像素块310，由这样的多个像素块310组成该副摄像头300。
作为一种示例，该每个像素块310可为单色像素块。例如，假设副摄像头300可为800W像素，如图2所示，该800W像素的副摄像头可由4个200W像素的像素块310组成，每个像素块310可由2*2个感光像素311组成，该2*2个感光像素311可为单色像素，即每4个感光像素311合并成一个单色像素块。其中，如图2所示，该2*2个感光像素311中的左边两个感光像素311A可为第一部分感光像素，右边两个感光像素311B可为第二部分感光像素。此外，如图2所示，该4个像素块310的颜色从上到下、从左到右依次为绿色、红色、蓝色和绿色。
由此，通过将副摄像头中的每个像素块设置为由多个感光像素组成的单色像素，使得副摄像头用作于全部相位检测，使得PD像素的面积(即感光面积)大，灵敏度比较高，使得PD在低光下也能够得到比较清晰的人像。
为了能够时刻保持人像的清晰，实现人像追踪的目的，进一步地，在本发明的一个实施例中，如图3所示，该摄像模组10还可包括：第二马达500。其中，第二马达500与副摄像头300和控制模块400相连，第二马达500可用于驱动副摄像头300进行移动。在本发明的实施例中，控制模块400还可用于根据相位差控制第二马达500驱动副摄像头300移动至合焦位置。
也就是说，控制模块400在根据相位差控制第一马达200驱动主摄像头100移动至合焦位置的过程中，还可根据该相位差控制第二马达500驱动副摄像头300移动至该合焦位置。
为了能够更好地使主摄像头和副摄像头保持同步，使得两个摄像头同步合焦，作为一种示例，第一马达200与第二马达500可具有相同的性能。也就是说，副摄像头300与主摄像头100保持同样的马达性能，这样，控制模块400在根据副摄像头计算出的相位差，对副摄像头和主摄像头进行移动控制时，可以使得副摄像头和主摄像头保持同步移动，从而使得两个摄像头同步合焦。
根据本发明实施例的摄像模组，可通过设置主摄像头和副摄像头，并通过将该副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，控制模块获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
需要说明的是，本发明实施例的摄像模组可应用于具有拍照功能的电子设备上，电子设备可利用该摄像模组来实现拍照功能。其中，通过该摄像模组在进行拍照时，可先对人像进行追踪，以能够拍摄到清晰的人像图像。为此，本发明还提出了一种人像追踪的方法。图4是根据本发明一个实施例的人像追踪的方法的流程图。需要说明的是，本发明实施例的人像追踪的方法是通过本发明上述任一个实施例所述的摄像模组实现的。如图4所示，本发明实施例的通过摄像模组进行人像追踪的方法可以包括：
S401，当检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，其中，多个感光像素构成一个像素块，多个像素块构成副摄像头。
需要说明的是，在本发明的实施例中，由该多个感光像素构成的像素块可为单色像素，该多个感光像素可分成第一部分感光像素和第二部分感光像素。这样，在副摄像头采集图像时，可通过第一部分感光像素采集第一PD像素，并通过第二部分感光像素采集第二PD像素，这样将副摄像头用作于全部相位检测。
作为一种示例，副摄像头可通过人脸模型来判断当前采集到的图像中是否存在人脸，若存在，则检测到人脸。可以理解，上述给出的利用人脸模型来实现人脸检测仅是一种示例，并不能作为对本发明的具体限定，即人脸检测还可以通过其他方式实现，例如，人脸检测算法等方式。
在检测到人脸时，可副摄像头中的每个像素块可通过多个感光像素中的第一部分感光像素对该人脸所对应的人像区域进行采集以得到第一PD像素。
S402，通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素。
可以理解，上述步骤S401和步骤S402是同时被执行的，也就是说，在通过多个感光像素中的第一部分感光像素对该人脸所对应的人像区域进行采集以得到第一PD像素的同时，也可通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素。
S403，获取副摄像头采集的全局PD像素。
具体而言，在本发明的一个实施例中，可获取每个像素块采集到的第一PD像素和第二PD像素，并根据每个像素块采集到的第一PD像素和第二PD像素获取副摄像头采集的全局PD像素。
例如，可将副摄像头中的所有像素块采集到的第一PD像素进行数据相加，并将所有像素块采集到的第二PD像素进行数据相加，以得到人像区域的PD像素数据，该人像区域的PD像素数据即为副摄像头采集的全局PD像素。
S404，根据全局PD像素计算相位差。
S405，根据相位差控制第一马达驱动主摄像头移动至合焦位置。
为了能够时刻保持人像的清晰，实现人像追踪的目的，进一步地，在本发明的一个实施例中，该人像追踪的方法还可包括：根据相位差控制第二马达驱动副摄像头移动至合焦位置。
也就是说，在根据相位差控制第一马达驱动主摄像头移动至合焦位置的过程中，还可根据该相位差控制第二马达驱动副摄像头移动至该合焦位置。
为了能够更好地使主摄像头和副摄像头保持同步，使得两个摄像头同步合焦，作为一种示例，第一马达与第二马达可具有相同的性能。也就是说，副摄像头与主摄像头保持同样的马达性能，这样，控制模块在根据副摄像头计算出的相位差，对副摄像头和主摄像头进行移动控制时，可以使得副摄像头和主摄像头保持同步移动，从而使得两个摄像头同步合焦。
根据本发明实施例的人像追踪的方法，通过将摄像模组的副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，然后，获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
为了实现上述实施例，本发明还提出了一种电子设备。
图5是根据本发明一个实施例的电子设备的结构示意图。如图5所示，该电子设备20可以包括：本发明上述任一个实施例所述的摄像模组10。
根据本发明实施例的电子设备，通过将摄像模组的副摄像头设置成由多个像素块组成，每个像素块由多个感光像素构成，每个像素块用于在副摄像头检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，并通过多个感光像素中的第二部分感光像素对人像区域进行采集以得到第二PD像素，控制模块获取副摄像头采集的全局PD像素，并根据全局PD像素计算相位差，以及根据相位差控制第一马达驱动主摄像头移动至合焦位置。即通过将多个感光像素中分成两个部分来分别采集PD像素，这样可以将副摄像头用作于全部相位检测，大大提高了对焦精度，并且将多个感光像素组成一个像素块，大大增大了PD像素的面积，使得灵敏度也随之增高，从而提高了人像追踪的精准度，并实现了快速对焦的功能，提升了用户的拍照体验。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系，除非另有明确的限定。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (6)

1.一种摄像模组，其特征在于，包括：
主摄像头；
与所述主摄像头相连的第一马达，所述第一马达用于驱动所述主摄像头进行移动；
副摄像头，所述副摄像头包括多个像素块，每个像素块由多个感光像素构成，所述每个像素块用于在所述副摄像头检测到人脸时，通过所述多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，通过所述多个感光像素中的第二部分感光像素对所述人像区域进行采集以得到第二PD像素；
分别与所述主摄像头、第一马达和副摄像头相连的控制模块，所述控制模块用于获取所述副摄像头中的每个像素块采集到的第一PD像素和第二PD像素，并根据所述每个像素块采集到的第一PD像素和第二PD像素获取所述副摄像头采集的全局PD像素，并根据所述全局PD像素计算相位差，以及根据所述相位差控制所述第一马达驱动所述主摄像头移动至合焦位置；
其中，所述摄像模组还包括：
分别与所述副摄像头和所述控制模块相连的第二马达，所述第二马达用于驱动所述副摄像头进行移动；其中，所述第一马达与所述第二马达具有相同的性能；
其中，所述控制模块还用于根据所述相位差控制所述第二马达驱动所述副摄像头移动至所述合焦位置。
2.如权利要求1所述的摄像模组，其特征在于，所述多个感光像素为2*2个。
3.如权利要求1或2所述的摄像模组，其特征在于，所述每个像素块为单色像素块。
4.一种通过如权利要求1至3中任一项所述的摄像模组进行人像追踪的方法，其特征在于，包括：
当检测到人脸时，通过多个感光像素中的第一部分感光像素对人像区域进行采集以得到第一PD像素，其中，所述多个感光像素构成一个像素块，多个所述像素块构成所述副摄像头；
通过所述多个感光像素中的第二部分感光像素对所述人像区域进行采集以得到第二PD像素；
获取所述副摄像头中的每个像素块采集到的第一PD像素和第二PD像素，并根据所述每个像素块采集到的第一PD像素和第二PD像素获取所述副摄像头采集的全局PD像素；
根据所述全局PD像素计算相位差；
根据所述相位差控制所述第一马达驱动所述主摄像头移动至合焦位置；
根据所述相位差控制所述第二马达驱动所述副摄像头移动至所述合焦位置；其中，所述第一马达与所述第二马达具有相同的性能。
5.如权利要求4所述的方法，其特征在于，所述获取所述副摄像头采集的全局PD像素，包括：
获取所述每个像素块采集到的所述第一PD像素和所述第二PD像素；
根据所述每个像素块采集到的所述第一PD像素和所述第二PD像素获取所述副摄像头采集的所述全局PD像素。
6.一种电子设备，其特征在于，包括：如权利要求1至3中任一项所述的摄像模组。
CN201611092361.9A 2016-11-29 2016-11-29 摄像模组、通过其进行人像追踪的方法以及电子设备 Expired - Fee Related CN106506969B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201611092361.9A CN106506969B (zh) 2016-11-29 2016-11-29 摄像模组、通过其进行人像追踪的方法以及电子设备
US15/623,182 US10937184B2 (en) 2016-11-29 2017-06-14 Camera assembly, method for tracking target portion based on the same, and electronic device
EP17176605.8A EP3328057B1 (en) 2016-11-29 2017-06-19 Camera assembly, method for portrait tracking based on the same, and electronic device
PCT/CN2017/090594 WO2018099059A1 (en) 2016-11-29 2017-06-28 Camera assembly, method for portrait tracking based on the same, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611092361.9A CN106506969B (zh) 2016-11-29 2016-11-29 摄像模组、通过其进行人像追踪的方法以及电子设备

Publications (2)

Publication Number Publication Date
CN106506969A CN106506969A (zh) 2017-03-15
CN106506969B true CN106506969B (zh) 2019-07-19

Family

ID=58329525

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611092361.9A Expired - Fee Related CN106506969B (zh) 2016-11-29 2016-11-29 摄像模组、通过其进行人像追踪的方法以及电子设备

Country Status (4)

Country Link
US (1) US10937184B2 (zh)
EP (1) EP3328057B1 (zh)
CN (1) CN106506969B (zh)
WO (1) WO2018099059A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106506969B (zh) * 2016-11-29 2019-07-19 Oppo广东移动通信有限公司 摄像模组、通过其进行人像追踪的方法以及电子设备
CN107613212A (zh) * 2017-10-23 2018-01-19 青岛海信移动通信技术股份有限公司 移动终端及其拍摄方法
CN110769162B (zh) * 2019-11-28 2021-07-13 维沃移动通信有限公司 电子设备及对焦方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012222471A (ja) * 2011-04-05 2012-11-12 Sharp Corp 多眼撮像装置および多眼撮像方法、携帯情報端末装置
JP2013003501A (ja) * 2011-06-21 2013-01-07 Nikon Corp カメラ
CN103155537A (zh) * 2010-09-28 2013-06-12 数字光学欧洲有限公司 基于脸部检测和追踪的连续自动聚焦
CN103238097A (zh) * 2010-11-30 2013-08-07 富士胶片株式会社 成像设备和对焦位置检测方法
CN103238098A (zh) * 2010-11-30 2013-08-07 富士胶片株式会社 成像设备和对焦位置检测方法
CN104410783A (zh) * 2014-11-07 2015-03-11 广东欧珀移动通信有限公司 一种对焦方法及终端
CN104730802A (zh) * 2015-03-27 2015-06-24 酷派软件技术（深圳）有限公司 光轴夹角的校准、对焦方法和系统和双摄像头设备
CN105141858A (zh) * 2015-08-13 2015-12-09 上海斐讯数据通信技术有限公司 照片背景虚化系统及其方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020050518A1 (en) * 1997-12-08 2002-05-02 Roustaei Alexander R. Sensor array
US6794627B2 (en) * 2001-10-24 2004-09-21 Foveon, Inc. Aggregation of active pixel sensor signals
JP2006098771A (ja) 2004-09-29 2006-04-13 Canon Inc 焦点検出装置、撮像装置、撮像システム及びレンズユニット
EP1856652B1 (en) * 2005-03-11 2016-08-10 Hand Held Products, Inc. Digital picture taking optical reader having hybrid monochrome and color image sensor array
JP4910462B2 (ja) 2006-04-14 2012-04-04 株式会社ニコン カメラ
JP2009115893A (ja) 2007-11-02 2009-05-28 Canon Inc 撮像装置
JP5322561B2 (ja) 2008-09-25 2013-10-23 キヤノン株式会社 撮像装置及びその制御方法
JP5489641B2 (ja) 2008-11-11 2014-05-14 キヤノン株式会社 焦点検出装置及びその制御方法
JP2012008424A (ja) 2010-06-28 2012-01-12 Olympus Corp 撮像システム
CN102957917B (zh) 2011-08-30 2016-03-30 比亚迪股份有限公司 一种像素阵列、摄像头及基于该阵列的色彩处理方法
US8497536B2 (en) * 2011-09-16 2013-07-30 Omnivision Technologies, Inc. Dual-facing camera assembly
WO2013042518A1 (ja) 2011-09-22 2013-03-28 富士フイルム株式会社 デジタルカメラ
GB2499427A (en) 2012-02-16 2013-08-21 Overview Ltd Video tracking apparatus having two cameras mounted on a moveable unit
KR20150042574A (ko) 2013-10-11 2015-04-21 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN105530421B (zh) 2014-09-30 2017-11-17 宇龙计算机通信科技(深圳)有限公司 一种基于双摄像头的对焦方法、装置和终端
KR102328098B1 (ko) * 2015-02-13 2021-11-17 삼성전자주식회사 전자장치의 초점 검출 장치 및 방법
CN104806541A (zh) 2015-04-09 2015-07-29 沈阳航空航天大学 太阳能人脸识别自动追踪风扇
CN104835164B (zh) 2015-05-11 2017-07-28 京东方科技集团股份有限公司 一种双目摄像头深度图像的处理方法及装置
CN105590097B (zh) 2015-12-17 2019-01-25 重庆邮电大学 暗视觉条件下双摄像头协同实时人脸识别安防系统及方法
CN105611124B (zh) * 2015-12-18 2017-10-17 广东欧珀移动通信有限公司 图像传感器、成像方法、成像装置及终端
EP3507765A4 (en) * 2016-09-01 2020-01-01 Duelight LLC SYSTEMS AND METHODS FOR FOCUS ADJUSTMENT BASED ON TARGET DEVELOPMENT INFORMATION
CN106506969B (zh) 2016-11-29 2019-07-19 Oppo广东移动通信有限公司 摄像模组、通过其进行人像追踪的方法以及电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103155537A (zh) * 2010-09-28 2013-06-12 数字光学欧洲有限公司 基于脸部检测和追踪的连续自动聚焦
CN103238097A (zh) * 2010-11-30 2013-08-07 富士胶片株式会社 成像设备和对焦位置检测方法
CN103238098A (zh) * 2010-11-30 2013-08-07 富士胶片株式会社 成像设备和对焦位置检测方法
JP2012222471A (ja) * 2011-04-05 2012-11-12 Sharp Corp 多眼撮像装置および多眼撮像方法、携帯情報端末装置
JP2013003501A (ja) * 2011-06-21 2013-01-07 Nikon Corp カメラ
CN104410783A (zh) * 2014-11-07 2015-03-11 广东欧珀移动通信有限公司 一种对焦方法及终端
CN104730802A (zh) * 2015-03-27 2015-06-24 酷派软件技术（深圳）有限公司 光轴夹角的校准、对焦方法和系统和双摄像头设备
CN105141858A (zh) * 2015-08-13 2015-12-09 上海斐讯数据通信技术有限公司 照片背景虚化系统及其方法

Also Published As

Publication number Publication date
US20180150968A1 (en) 2018-05-31
US10937184B2 (en) 2021-03-02
EP3328057B1 (en) 2020-06-17
CN106506969A (zh) 2017-03-15
EP3328057A1 (en) 2018-05-30
WO2018099059A1 (en) 2018-06-07

Similar Documents

Publication Publication Date Title
CN107087107B (zh) 基于双摄像头的图像处理装置及方法
JP5115139B2 (ja) 構図判定装置、構図判定方法、プログラム
US8687072B2 (en) System and method for creating composite images by utilizing an imaging device
US9185317B2 (en) Image capturing apparatus capable of storing focus detection data
CN105430359B (zh) 成像方法、图像传感器、成像装置及电子装置
CN105872389B (zh) 图像处理装置、摄像装置及控制方法
US20090059057A1 (en) Method and Apparatus for Providing a Video Image Having Multiple Focal Lengths
US7725019B2 (en) Apparatus and method for deciding in-focus position of imaging lens
US20130050564A1 (en) Producing focused videos from single captured video
BRPI0900750A2 (pt) dispositivo de determinação de composição, método de determinação de composição, e, programa que faz um dispositivo de determinação de composição executar
US20100177208A1 (en) Imaging apparatus, image processing method, and image processing program
CN106506969B (zh) 摄像模组、通过其进行人像追踪的方法以及电子设备
JP2010010936A (ja) 画像記録装置、画像記録方法、画像処理装置、画像処理方法、プログラム
CN106161926A (zh) 摄像装置和摄像装置的控制方法
JP2000102040A (ja) 電子ステレオカメラ
CN109688321B (zh) 电子设备及其图像显示方法、具有存储功能的装置
CN107241549A (zh) 双摄像头的成像方法和成像装置
CN109510967A (zh) 摄像装置、摄像装置的控制方法和存储介质
CN103391398A (zh) 图像读出控制装置及其图像读出控制方法
KR101321780B1 (ko) 화상처리장치 및 화상처리방법
WO2017130522A1 (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
CN108156383B (zh) 基于相机阵列的高动态十亿像素视频采集方法及装置
JP2001167276A (ja) 撮影装置
CN103238340B (zh) 摄影装置及方法
CN109964479A (zh) 摄像设备及其控制方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190719

CF01 Termination of patent right due to non-payment of annual fee