CN111050060B - 一种应用于终端设备的对焦方法、装置和终端设备 - Google Patents

一种应用于终端设备的对焦方法、装置和终端设备 Download PDF

Info

Publication number
CN111050060B
CN111050060B CN201811192309.XA CN201811192309A CN111050060B CN 111050060 B CN111050060 B CN 111050060B CN 201811192309 A CN201811192309 A CN 201811192309A CN 111050060 B CN111050060 B CN 111050060B
Authority
CN
China
Prior art keywords
target object
information
target
focusing
current frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811192309.XA
Other languages
English (en)
Other versions
CN111050060A (zh
Inventor
陈聪
周承涛
王永益
石桥贤司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201811192309.XA priority Critical patent/CN111050060B/zh
Priority to KR1020217013704A priority patent/KR102689351B1/ko
Priority to EP19870611.1A priority patent/EP3855721A4/en
Priority to PCT/CN2019/088971 priority patent/WO2020073663A1/zh
Priority to JP2021519600A priority patent/JP7347903B2/ja
Publication of CN111050060A publication Critical patent/CN111050060A/zh
Priority to US17/227,007 priority patent/US11363187B2/en
Application granted granted Critical
Publication of CN111050060B publication Critical patent/CN111050060B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B3/00Focusing arrangements of general interest for cameras, projectors or printers
    • G03B3/10Power-operated focusing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/36Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • G02B7/38Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals measured at different points on the optical axis, e.g. focussing on two or more planes and comparing image data
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B30/00Camera modules comprising integrated lens units and imaging units, specially adapted for being embedded in other devices, e.g. mobile phones or vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/673Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

本申请实施例公开了一种应用于终端设备的对焦方法、装置和终端设备,所述方法包括:检测当前帧是否包括目标对象,目标对象是预先设置的需要对其执行对焦的对象中的一个;当所述当前帧包括目标对象时,判断目标对象是否为运动状态;当目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;当目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。采用本申请实施例提供的技术方案,一方面,由于用户不用手动选取目标对象,所以简化了用户操作;另一方面,在检测出目标对象时,根据目标对象的不同的运动状态采用跟踪对焦或者稳定对焦,可以实现对目标对象的准确对焦,从而有利于提升拍摄图片的清晰度。

Description

一种应用于终端设备的对焦方法、装置和终端设备
技术领域
本申请涉及终端设备技术领域,尤其涉及一种应用于终端设备的对焦方法、装置和终端设备。
背景技术
目前智能手机、平板电脑、无人机等具有拍照功能的终端设备在拍摄静止场景中的对象时,通常可以拍出比较清晰的图片。但是,对于运动场景,比如对跑动中的人物进行拍摄时,拍出的图片中人物图像经常不清晰。
为了提高拍照中目标对象(比如跑动中的人物)的清晰度,现有技术通常采用中心区域对焦的方式,当目标对象位于取景框中心区域时可以拍出比较清晰的图片,但是当目标对象处于移动状态时,目标对象通常无法一直处于中心区域,因此,采用中心区域对焦的方法拍摄运动场景中的目标对象时,拍出的图片通常比较模糊,不能满足用户的要求。
现有技术还提供了一种方法,通过手动选择调出终端设备中针对运动场景提供的优化后拍照模式,比如人像模式等,但采用这种方法拍照时,用户需要在取景框中手动选择需要对焦的目标对象,操作繁琐,而且即使采用了优化后的特殊模式,在实际拍摄时,拍出的图片清晰度仍然不能满足用户的需求,所以,如何在运动场景下对目标对象拍出清晰的图片是目前亟待解决的问题。
发明内容
本申请实施例提供了一种应用于终端设备的对焦方法、装置和终端设备,能够方便地对目标对象进行拍照,并且拍出清晰的图片。
第一方面,本申请实施例提供了一种应用于终端设备的对焦方法,所述方法包括:
检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
当所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
当所述目标对象为运动状态时,使用滤波长度可变的相位检测(phasedetection,PD)信息进行跟踪对焦;
当所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
采用本申请实施例提供的技术方案,终端设备自动检测目标对象,并且在检测出目标对象后判断目标对象的运动状态,在目标对象处于运动状态时,使用滤波长度可变的PD信息进行跟踪对焦,在目标对象处于静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。一方面,由于用户不用手动选取目标对象,所以简化了用户操作;另一方面,在检测出目标对象时,根据目标对象的不同的运动状态采用跟踪对焦或者稳定对焦,可以实现对目标对象的准确对焦,从而有利于提升拍摄图片的清晰度。
在一些可能的实施方式中,可以预先设置需要对其执行对焦的对象,当启动终端设备的拍照功能,获取当前帧时,对当前帧进行图像识别判断是否包括预先设置的需要对其执行对焦的对象。
在一些可能的实施方式中,预先设置的需要对其执行对焦的对象可以包括多个,可以为每个对象设置优先级,也可以结合不同的运动状态或拍摄场景为每个对象设置优先级,通过图像识别,若检测到当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象,可以按照预设的筛选规则确定其中一个对象作为所述目标对象。筛选规则可以是根据对象的优先级进行选择,选择当前帧中优先级最高的对象做为目标对象。
在所述检测当前帧是否包括目标对象之前,所述方法还包括:在所述检测当前帧是否包括目标对象之前,所述方法还包括:
将PD配置方式默认设置为固定PD配置方式。
结合第一方面,在一些可能的实施方式中,所述方法还包括:
当所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据所述转换后的PD信息对所述当前帧进行对焦。
采用本申请实施例提供的技术方案,进行对焦采用的PD信息是固定PD配置方式下得到的PD信息转换得到的,现有技术通常是在当前帧中没有包括目标对象时,才将PD设置为可变PD,从设置到获取PD信息存在一定的延时,而本实施例采用转换方式得到的PD信息不存在延时,更加及时,所以采用该实施例提供的对焦方法时对焦更准确。
结合第一方面,在一些可能的实施方式中,所述使用滤波长度可变的相位检测PD信息进行跟踪对焦,包括:
使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
在一些可能的实施方式中,所述使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,包括:
获取所述当前帧的PD信息;
将所述当前帧的PD信息存入所述PD数据缓冲器;
根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和
根据所述目标PD信息得到准焦位置。
在一些可能的实施方式中,根据所述PD数据缓冲器的每一帧的PD信息得到所述目标PD信息,包括:
获取所述PD数据缓冲器中的每一帧的PD信息;
根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧;
利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息。
在一些可能的实施方式中,还包括:
获取所述当前帧中所述目标对象的窗口大小,
获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,
将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
在一些可能的实施方式中,将所述目标对象的窗口大小与所述目标PD块的大小进行比较,包括:
如果所述目标对象的窗口大小小于所述目标PD块的大小,则根据所述目标对象的窗口大小对固定PD配置方式进行重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小;
所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:
使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,还包括:获取所述当前帧中所述目标对象的窗口位置,
将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
在一些可能的实施方式中,将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,包括:
如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;
所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:
使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在另外的实施方式中,也可能将目标对象的窗口大小与所述目标PD块的大小进行比较,同时将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较。
在一些可能的实施方式中,若使用PD信息进行稳定对焦不可信,比如当马达推到根据目标PD信息确定的位置后,还继续收到将马达移动到不同位置的指令,则使用PD信息进行稳定对焦出现故障,这时可以采用现用技术中的对比度对焦技术确定准焦位置,比如,将马达在一定范围内移动,记录每个位置根据对比度得到的清晰度,将清晰度最高时对应的焦点确定为准焦位置。可以理解的是,当目标对象为静止状态,优先使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。当使用自适应固定PD配置方式下获得的PD信息进行稳定对焦得到的结果不可信时,才结合现有技术中的其他技术方案,比如采用对比度对焦技术确定准焦位置。采用该实施例提供的技术方案可以确保准焦位置的准确性。
第二方面,本申请实施例提供了一种应用于终端设备的对焦方法,所述方法包括:
检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
当所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据转换后的所述PD信息对所述当前帧进行对焦。
结合第二方面,在一些可能的实施方式中,所述方法还包括:
当所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
当所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;
当所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,所述使用滤波长度可变的相位检测PD信息进行跟踪对焦,包括:
使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
在一些可能的实施方式中,所述使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,包括:
获取所述当前帧的PD信息;
将所述当前帧的PD信息存入所述PD数据缓冲器;
根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和
根据所述目标PD信息得到准焦位置。
在一些可能的实施方式中,还包括:
获取所述当前帧中所述目标对象的窗口大小,
获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,
将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
在一些可能的实施方式中,所述方法还包括:在所述检测当前帧是否包括目标对象之前,所述方法还包括:
将PD配置方式默认设置为固定PD配置方式。
在一些可能的实施方式中,当所述当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
第三方面,本申请实施例提供了一种应用于终端设备的对焦装置,所述装置包括:
检测单元,用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
判断单元,用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第一处理单元,用于当所述判断单元的判断结果为所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;
第二处理单元,用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
结合第三面,在一些可能的实施方式中,所述装置还包括:
第三处理单元,用于当所述检测单元检测到所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据转换后的所述PD信息对所述当前帧进行对焦。
结合第三方面,在一些可能的实施方式中,所述第一处理单元用于使用滤波长度可变的相位检测PD信息进行跟踪对焦时,具体用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
在一些可能的实施方式中,所述第一处理单元用于获取所述当前帧的PD信息,将所述当前帧的PD信息存入所述PD数据缓冲器,根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息,以及根据所述目标PD信息得到准焦位置。
在一些可能的实施方式中,所述第一处理单元用于根据所述PD数据缓冲器的每一帧的PD信息,得到所述目标PD信息,具体用于获取所述PD数据缓冲器中的每一帧的PD信息;根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧;利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息;根据所述目标PD信息得到准焦位置。
结合第三方面,在一些可能的实施方式中,所述第二处理单元用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦时,具体用于
获取所述当前帧中所述目标对象的窗口大小,
获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,
将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
在一些可能的实施方式中,将所述目标对象的窗口大小与所述目标PD块的大小进行比较,包括:
如果所述目标对象的窗口大小小于所述目标PD块的大小,则根据所述目标对象的窗口大小对固定PD配置方式进行重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小;
所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:
使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,第二处理单元用于,获取所述当前帧中所述目标对象的窗口位置,将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,包括:
如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;
第二处理单元用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦时,具体用于使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,所述装置还包括:
配置单元,用于所述检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
在一些可能的实施方式中,当所述当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
第四方面,本申请实施例提供了一种应用于终端设备的对焦装置,一种应用于终端设备的对焦装置,所述装置包括:
检测单元,用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
第一处理单元,用于当所述检测单元的检测结果为所述当前帧中没有包括所述目标对象时,将固定相位检测PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;以及用于根据转换后的所述PD信息对所述当前帧进行对焦。
结合第四方面,在一些可能的实施方式中,所述装置还包括:
判断单元,用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第二处理单元,用于当所述判断单元的判断结果为所述目标对象为运动状态时,使用滤波长度可变的PD信息进行跟踪对焦;
第三处理单元,用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,所述第二处理单元用于使用滤波长度可变的PD信息进行跟踪对焦时,具体用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
在一些可能的实施方式中,所述第二处理单元用于获取所述当前帧的PD信息,将所述当前帧的PD信息存入所述PD数据缓冲器,根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和根据所述目标PD信息得到准焦位置。
在一些可能的实施方式中,所述第三处理单元具体用于获取所述当前帧中所述目标对象的窗口大小,获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
所述第二处理单元用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置时,具体用于获取所述PD数据缓冲器中的每一帧的PD信息;根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧;利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息;根据所述目标PD信息得到准焦位置。
在一些可能的实施方式中,所述第三处理单元具体用于获取所述当前帧中所述目标对象的窗口大小,获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
在一些可能的实施方式中,所述第三处理单元用于将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较时,具体用于如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;在这种情况下,第三处理单元用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦时,具体用于使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在另外的实施方式中,也可能将目标对象的窗口大小与所述目标PD块的大小进行比较,同时将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较。
在一些可能的实施方式中,所述装置还包括:
配置单元,用于所述检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
在一些可能的实施方式中,所述方法还包括:
当所述当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
第五方面,本申请实施例提供了一种终端设备,所述终端设备包含存储器、处理器、总线;所述存储器、以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令,用于执行如第一方面或者第一方面任一种可能的实施方式所述的方法。
结合第五方面,在一些可能的实施方式中,所述终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:全球移动通讯系统(global system of mobilecommunication,GSM)网络、码分多址(code division multiple access,CDMA)网络、第三代数字通信(third Generation,3G)网络、第4代数字通信(fourth Generation,4G)网络、第5代数字通信(fifth Generation,4G)网络、频分多址(frequency division multipleaccess,FDMA)、时分多址(time division multiple access,TDMA)、停车距离控制系统(Parking Distance Control,PDC)、全入网通信系统技术(total access communicationssystem,TACS)、高级移动电话系统(Advanced Mobile Phone System、AMPS)、宽带码分多址(wideband code division multiple access,WCDMA)、时分同步码分多址(timedivision-synchronous code division multiple access,TDSCDMA)、无线保真(wirelessfidelity,WiFi)以及长期演进(long term evolution,LTE)网络。
第六方面,本申请实施例提供了一种终端设备,所述终端设备包含存储器、处理器、总线;所述存储器、以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令,用于执行第二方面或者第二方面任一种可能的实施方式中所述的方法。
结合第六方面,在一些可能的实施方式中,所述终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WIFI以及LTE网络。
第七方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储了程序代码,其中,所述程序代码包括用于执行第一方面的任意一种方法的部分或全部步骤的指令。
第八方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储了程序代码,其中,所述程序代码包括用于执行第二方面的任意一种方法的部分或全部步骤的指令。
第九方面,本申请实施例提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
第十方面,本申请实施例提供了一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第二方面的任意一种方法的部分或全部步骤。
对于上述任何一种可能的设计中的技术方案,在不违背自然规律的前提下,可以进行方案之间的组合。
现有技术中,对运动场景中的对象进行对焦时,采用中心区域对焦方式,当目标对象位于取景框中心区域时可以拍出比较清晰的图片,但是当目标对象处于移动状态时,目标对象通常无法一直处于中心区域,因此,采用中心区域对焦的方法拍摄运动场景中的目标对象时,拍出的图片通常比较模糊,不能满足用户的要求。另一种现有技术,采用的是通过手动选择调出终端设备中针对运动场景提供的优化后拍照模式,比如流光溢彩模式等,但采用这种方法拍照时,用户需要在取景框中手动选择需要对焦的目标对象,操作繁琐,而且即使采用了优化后的特殊模式,在实际拍摄时,拍出的图片清晰度仍然不能满足用户的需求,所以,如何在运动场景下对目标对象拍出清晰的图片是目前亟待解决的问题。
采用本申请实施例提供的技术方案,终端设备自动检测目标对象,并且在检测出目标对象后判断目标对象的运动状态,在目标对象处于运动状态时,使用滤波长度可变的PD信息进行跟踪对焦,在目标对象处于静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。一方面,由于用户不用手动选取目标对象,所以简化了用户操作;另一方面,在检测出目标对象时,根据目标对象的不同的运动状态采用跟踪对焦或者稳定对焦,可以实现对目标对象的准确对焦,从而有利于提升拍摄图片的清晰度。
附图说明
图1为本申请的一个实施例提供的一种终端设备的结构示意图。
图2A为本申请的另一个实施例提供的一种对焦装置的结构示意图。
图2B为本申请的另一个实施例提供的一种应用于终端设备的对焦方法的流程示意图。
图2C为本申请的另一个实施例提供的一种对焦装置的结构示意图。
图2D为本申请的另一个实施例提供的一种应用于终端设备的对焦方法的流程示意图。
图3为本申请的另一个实施例提供的一种应用于终端设备的对焦方法的流程示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请的一部分实施例,并不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例中,终端设备,可以是提供了拍照功能的设备,比如:具有拍照功能的移动电话(或称为“蜂窝”电话)、智能手机,可以是便携式、袖珍式、手持式、可穿戴设备(如智能手表等)、平板电脑、个人电脑(PC,Personal Computer)、PDA(Personal DigitalAssistant,个人数字助理)、车载电脑、无人机、航拍器等。
图1示出了终端设备100的一种可选的硬件结构示意图。
参考图1所示,终端设备100可以包括射频单元110、存储器120、输入单元130、显示单元140、摄像头150、音频电路160(包含扬声器161、麦克风162)、处理器170、外部接口180、电源190等部件。本领域技术人员可以理解,图1仅仅是智能终端或多功能设备的举例,并不构成对智能终端或多功能设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件。如,至少存在存储器120、处理器170、摄像头150。
摄像头150用于采集图像或视频,可以通过应用程序指令触发开启,实现拍照或者摄像功能。摄像头可以包括成像镜头、滤光片、图像传感器等部件。物体发出或反射的光线进入成像镜头,通过滤光片,最终汇聚在图像传感器上。成像镜头主要是用于对拍照视角中的所有物体(也可称为待拍摄场景、待拍摄对象、目标场景或目标对象,也可以理解为用户期待拍摄的场景图像)发出或反射的光汇聚成像;滤光片主要是用于将光线中的多余光波(例如除可见光外的光波,如红外)滤去;图像传感器主要是用于对接收到的光信号进行光电转换,转换成电信号,并输入到处理器170进行后续处理。其中,摄像头可以位于终端设备的前面,也可以位于终端设备的背面,摄像头具体个数以及排布方式可以根据设计者或厂商策略的需求灵活确定,本申请不做限定。马达151与摄像头150相连,根据处理器得到的准焦位置带中摄像头移动,拍出对目标对其对焦清楚的图像。
输入单元130可用于接收输入的数字或字符信息,以及产生与所述便携式多功能装置的用户设置以及功能控制有关的键信号输入,比如接收用户设置需要执行对焦的对象,或者接收将PD默认配置方式设置为固定PD配置方式等。具体地,输入单元130可包括触摸屏131和/或其他输入设备132。触摸屏131可收集用户在其上或附近的触摸操作(比如用户使用手指、关节、触笔等任何适合的物体在触摸屏上或在触摸屏附近的操作),并根据预先设定的程序驱动相应的连接装置。触摸屏可以检测用户对触摸屏的触摸动作,将所述触摸动作转换为触摸信号发送给所述处理器170,并能接收所述处理器170发来的命令并加以执行;所述触摸信号至少包括触点坐标信息。所述触摸屏131可以提供所述终端设备100和用户之间的输入界面和输出界面。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触摸屏。除了触摸屏131,输入单元130还可以包括其他输入设备。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键132、开关按键133等)、轨迹球、鼠标、操作杆等中的一种或多种。
所述显示单元140可用于显示由用户输入的信息或提供给用户的信息、终端设备100的各种菜单、交互界面、文件显示和/或任意一种多媒体文件的播放。在本发明实施例中,显示单元还用于显示设备利用摄像头150获得拍摄模式下的预览图像/视频、拍摄的初始图像/视频以及拍摄后经过一定算法处理后的目标图像/视频。
进一步的,触摸屏131可覆盖显示面板141,当触摸屏131检测到在其上或附近的触摸操作后,传送给处理器170以确定触摸事件的类型,随后处理器170根据触摸事件的类型在显示面板141上提供相应的视觉输出。在本实施例中,触摸屏与显示单元可以集成为一个部件而实现终端设备100的输入、输出、显示功能;为便于描述,本发明实施例以触摸显示屏代表触摸屏和显示单元的功能集合;在某些实施例中,触摸屏与显示单元也可以作为两个独立的部件。
所述存储器120可用于存储指令和数据,存储器120可主要包括存储指令区和存储数据区,存储数据区可存储各种数据,如多媒体文件、文本等;存储指令区可存储操作系统、应用、至少一个功能所需的指令等软件单元,或者他们的子集、扩展集。还可以包括非易失性随机存储器;向处理器170提供包括管理计算处理设备中的硬件、软件以及数据资源,支持控制软件和应用。还用于多媒体文件的存储,以及运行程序和应用的存储。
处理器170是终端设备100的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的指令以及调用存储在存储器120内的数据,执行终端设备100的各种功能和处理数据,从而对手机进行整体控制。可选的,处理器170可包括一个或多个处理单元;优选的,处理器170可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器170中。在一些实施例中,处理器、存储器、可以在单一芯片上实现,在一些实施例中,他们也可以在独立的芯片上分别实现。处理器170还可以用于产生相应的操作控制信号,发给计算处理设备相应的部件,读取以及处理软件中的数据,尤其是读取和处理存储器120中的数据和程序,以使其中的各个功能模块执行相应的功能,从而控制相应的部件按指令的要求进行动作。
所述射频单元110可用于收发信息或通话过程中信号的接收和发送,例如,将基站的下行信息接收后,给处理器170处理;另外,将设计上行的数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low NoiseAmplifier,LNA)、双工器等。此外,射频单元110还可以通过无线通信与网络设备和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM、GPRS、CDMA、WCDMA、LTE、电子邮件、短消息服务(Short Messaging Service,SMS)等。
音频电路160、扬声器161、麦克风162可提供用户与终端设备100之间的音频接口。音频电路160可将接收到的音频数据转换为电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,麦克风162用于收集声音信号,还可以将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器170处理后,经射频单元110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理,音频电路也可以包括耳机插孔163,用于提供音频电路和耳机之间的连接接口。
终端设备100还包括给各个部件供电的电源190(比如电池),优选的,电源可以通过电源管理系统与处理器170逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
终端设备100还包括外部接口180,所述外部接口可以是标准的Micro USB接口,也可以使多针连接器,可以用于连接终端设备100与其他装置进行通信,也可以用于连接充电器为终端设备100充电。
尽管未示出,终端设备100还可以包括闪光灯、WiFi模块、蓝牙模块、不同功能的传感器等,在此不再赘述。下文中描述的部分或全部方法均可以应用在如图1所示的终端设备中。
本申请实施例可应用于具有拍照功能的终端设备,落地产品形态可以是智能终端,如手机、平板、DV、摄像机、照相机、便携电脑、笔记本电脑、智能音箱、电视等安装有摄像头的产品;具体地,本发明的功能模块部署在相关设备的DSP芯片上,具体的可以是其中的应用程序或软件;本发明部署在终端设备上,通过软件安装或升级,通过硬件的调用配合,提供对焦功能,提升对目标对象对焦的准确性,在不同场景中都能拍出清晰的图片。
本申请实施例主要应用在终端设备启动拍照功能后对目标对象进行对焦的场景。包括但不限于:
应用场景1,通过点击终端设备显示界面中的拍照快捷图标。
应用场景2,触发预设的启动拍照功能的按键。
应用场景3,执行预设的启动拍照功能的语音。
这些场景中,终端设备接收到启动拍照功能的指令,启动拍照功能,然后终端设备自动检测取景框中显示的当前帧是否包括目标对象,目标对象是预先设置的需要对其执行对焦的对象中的一个;当所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;当所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;当所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
由于对目标对象的检测不用用户手动选取,而且根据目标对象的不同运动状态,使用不同的方法进行对焦,使得对焦更准确,得到的图像更清晰。
以上应用场景均可以采用本申请实施例提供的技术方案。下面以示例的方式对本申请的实施方式进行说明。
示例1
本发明的一种应用于终端设备的对焦装置的结构如图2A所示,终端设备的对焦装置200包括:检测单元201、判断单元202、第一处理单元203、第二处理单元204、和配置单元206。在一些可能的实施方式中还可以包括第三处理单元205。
各个模块的功能描述如下:
检测单元201,用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;当所述当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。比如若预先设置的需要对其执行对焦的对象只有一个,比如只有人时,则通过图像识别检测当前帧是否包括人,若包括人,则将当前帧中的人作为目标对象,若检测到当前帧中包括多个人,则可以根据预设规则从多个人中选取一个人作为目标对象,比如可以将于当前帧离中心点最近的人作为目标对象。若预先设置的需要对其执行对焦的对象有多个,比如当有两个时,分别是人和小鸟,则可以为人和小鸟设置不同的优先级,比如可以设置人的优先级高于小鸟的优先级,则当检测到当前帧既包括人由包括小鸟时,选优先级最高的人作为目标对象。可以理解的由于目标对象由检测单元201自动识别,不用用户手动选取,所以操作更加便捷。
判断单元201,用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第一处理单元203,用于当所述判断单元201的判断结果为所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦。使用滤波长度可变的相位检测PD信息进行跟踪对焦包括:使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。需要说明的是,配置单元206,用于检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
以第i帧举例说明目标对象的窗口大小的变化率。用第i帧的窗口大小减去第i-1帧的窗口大小,得到的第i帧的窗口变化,记为Δ1。用第i-1帧的窗口大小减去第i-2帧的窗口大小,得到的第i-1帧的窗口变化,记为Δ2。那么目标对象的窗口大小的变化率为Δ1/Δ2。如果目标对象的窗口大小的变化率比较大,则PD数据缓冲器的比较小。如果目标对象的窗口大小的变化率比较小,则PD数据缓冲器的比较大。
其中,第i帧的窗口大小可以以第i帧的宽和/或高表示。
第一处理单元203用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置时,具体用于获取所述当前帧的PD信息;将所述当前帧的PD信息存入所述PD数据缓冲器;据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和根据所述目标PD信息得到准焦位置。
获取所述PD数据缓冲器中的每一帧的PD信息;根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧;利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息;根据所述目标PD信息得到准焦位置。
第二处理单元204,用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
第二处理单元204用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦时,具体用于获取当前帧中目标对象的窗口位置和窗口大小,获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
将所述目标对象的窗口大小与所述目标PD块的大小进行比较,包括:如果所述目标对象的窗口大小小于所述目标PD块的大小,则根据所述目标对象的窗口大小对固定PD配置方式进行重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小;所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
将当前帧中目标对象的窗口位置和目标PD块的位置进行比较,将所述目标对象的窗口大小与所述目标PD块的大小进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,包括:如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在另外的实施方式中,也可能将目标对象的窗口大小与所述目标PD块的大小进行比较,同时将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较。
第三处理单元205,用于当所述检测单元检测到所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;根据转换后的所述PD信息对所述当前帧进行对焦。
示例2
请参阅图2B,图2B为本申请的一个实施例提供的一种应用于终端设备的对焦方法的流程示意图,在该实施例中,对焦方法可以包括以下步骤:
步骤211、检测当前帧是否包括目标对象。
其中,目标对象是预先设置的需要对其执行对焦的对象中的一个;当当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。比如若预先设置的需要对其执行对焦的对象只有一个,比如只有人时,则通过图像识别检测当前帧是否包括人,若包括人,则将当前帧中的人作为目标对象,若检测到当前帧中包括多个人,则可以根据预设规则从多个人中选取一个人作为目标对象,比如可以将于当前帧离中心点最近的人作为目标对象。若预先设置的需要对其执行对焦的对象有多个,比如当有两个时,分别是人和小鸟,则可以为人和小鸟设置不同的优先级,比如可以设置人的优先级高于小鸟的优先级,则当检测到当前帧既包括人由包括小鸟时,选优先级最高的人作为目标对象。可以理解的由于目标对象自动被检测,不用用户手动选取,所以操作更加便捷。
当步骤211的判断结果为是,即检测到当前帧包括目标对象时,则执行步骤214。
步骤214、判断目标对象是否为运动状态。
可以根据每一帧中目标对象的变化来确定目标对象是否为运动状态。比如可以获取每帧图像中目标对象的中心位置,如果相邻3帧中目标对象的中心位置移动超过阈值,则确定目标对象为运动状态。
当步骤214的判断结果为是,即目标对象为运动状态时,则执行步骤215。
当步骤214的判断结果为否,即目标对象为静止状态时,则执行步骤216。
步骤215、当目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦。
步骤216、当目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
采用本申请实施例提供的技术方案,终端设备自动检测目标对象,并且在检测出目标对象后判断目标对象的运动状态,在目标对象处于运动状态时,使用滤波长度可变的PD信息进行跟踪对焦,在目标对象处于静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。一方面,由于用户不用手动选取目标对象,所以简化了用户操作;另一方面,在检测出目标对象时,根据目标对象的不同的运动状态采用跟踪对焦或者稳定对焦,可以实现对目标对象的准确对焦,从而有利于提升拍摄图片的清晰度。
在本申请一些可能的实施方式中,如图2B中步骤210指示的虚线框所示,在步骤211之前,还包括步骤210。
步骤210、将PD配置方式默认设置为固定配置方法。
需要说明的是,对PD进行配置包括对PD块进行设置,比如,可以将取景框对应的区域设置为四行三列,包括12个小区域,每个小区域为一个PD块,则每一帧图像对应12个PD值,根据目标对象覆盖的PD块对应的PD数据得到目标对象的PD信息,根据数据缓冲区中包括的每一帧中目标对象的PD信息可以得到目标PD信息,根据目标对象的目标PD信息可以得到准焦位置,根据准焦位置推动马达移动,使目标对象处于准焦位置。
在本申请一些可能的实施方式中,如图2B中步骤212指示的虚线框和步骤213指示的虚线框所示,当步骤211的判断结果为否,即没有检测到当前帧包括目标对象时,则执行步骤212和步骤213。
步骤212、将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息。
本实施例进行对焦采用的PD信息是固定PD配置方式下得到的PD信息转换得到的,现有技术通常是在当前帧中没有包括目标对象时,才将PD设置为可变PD,现有技术从设置到获取PD信息存在一定的延时,而本实施例采用转换方式得到的PD信息不存在延时,采用该技术特征可以更及时地进行对焦,有利于提高对焦的准确性。
步骤213、根据所述转换后的PD信息对所述当前帧进行对焦。
示例3
本发明的一种应用于终端设备的对焦装置的结构如图2C所示,终端设备的对焦装置200'包括:检测单元201'和第一处理单元202'。
各个模块的功能描述如下:
检测单元201',用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个。
当所述当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。比如若预先设置的需要对其执行对焦的对象只有一个,比如只有人时,则通过图像识别检测当前帧是否包括人,若包括人,则将当前帧中的人作为目标对象,若检测到当前帧中包括多个人,则可以根据预设规则从多个人中选取一个人作为目标对象,比如可以将于当前帧离中心点最近的人作为目标对象。若预先设置的需要对其执行对焦的对象有多个,比如当有两个时,分别是人和小鸟,则可以为人和小鸟设置不同的优先级,比如可以设置人的优先级高于小鸟的优先级,则当检测到当前帧既包括人由包括小鸟时,选优先级最高的人作为目标对象。可以理解的由于目标对象由检测单元201'自动识别,不用用户手动选取,所以操作更加便捷。
第一处理单元202',用于当所述检测单元的检测结果为所述当前帧中没有包括所述目标对象时,将固定相位检测PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;以及用于根据转换后的所述PD信息对所述当前帧进行对焦。
在一些可能的实施方式中,终端设备的对焦装置200'还包括:判断单元203'、第二处理单元204'、和第三处理单元205'、
判断单元203',用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第二处理单元204',用于当所述判断单元的判断结果为所述目标对象为运动状态时,使用滤波长度可变的PD信息进行跟踪对焦;
第三处理单元205',用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
第二处理单元204'用于使用滤波长度可变的PD信息进行跟踪对焦时,具体用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。第二处理单元204'用于获取所述当前帧的PD信息,将所述当前帧的PD信息存入所述PD数据缓冲器,根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和根据所述目标PD信息得到准焦位置。
第三处理单元205'具体用于获取所述当前帧中所述目标对象的窗口大小,获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
将目标对象的窗口大小与所述目标PD块的大小进行比较,包括:如果所述目标对象的窗口大小小于所述目标PD块的大小,则根据所述目标对象的窗口大小对固定PD配置方式进行重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小;在这种情况下,第三处理单元205'用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦时,具体用于使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在一些可能的实施方式中,第三处理单元205'获取所述当前帧中所述目标对象的窗口位置,将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
在一些可能的实施方式中,第三处理单元205'用于将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较时,具体用于,如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;在这种情况下,第三处理单元205'用于使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,具体用于使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
在另外的实施方式中,也可能将目标对象的窗口大小与所述目标PD块的大小进行比较,同时将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较。
在一些可能的实施方式中,终端设备的对焦装置200'还包括:配置单元206'。配置单元206'用于所述检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
示例4
请参阅图2D,图2D为本申请的一个实施例提供的一种应用于终端设备的对焦方法的流程示意图,在该实施例中,对焦方法可以包括以下步骤:
步骤211'、检测当前帧是否包括目标对象。
其中,目标对象是预先设置的需要对其执行对焦的对象中的一个;当当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。比如若预先设置的需要对其执行对焦的对象只有一个,比如只有人时,则通过图像识别检测当前帧是否包括人,若包括人,则将当前帧中的人作为目标对象,若检测到当前帧中包括多个人,则可以根据预设规则从多个人中选取一个人作为目标对象,比如可以将于当前帧离中心点最近的人作为目标对象。若预先设置的需要对其执行对焦的对象有多个,比如当有两个时,分别是人和小鸟,则可以为人和小鸟设置不同的优先级,比如可以设置人的优先级高于小鸟的优先级,则当检测到当前帧既包括人由包括小鸟时,选优先级最高的人作为目标对象。可以理解的由于目标对象自动被检测,不用用户手动选取,所以操作更加便捷。
当步骤211'的判断结果为否,即检测到当前帧不包括目标对象时,则执行步骤212'。
步骤212'、将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息。
步骤213'、根据转换后的所述PD信息对所述当前帧进行对焦。
本实施例进行对焦采用的PD信息是固定PD配置方式下得到的PD信息转换得到的,现有技术通常是在当前帧中没有包括目标对象时,才将PD设置为可变PD,现有技术从设置到获取PD信息存在一定的延时,而本实施例采用转换方式得到的PD信息不存在延时,采用该技术特征可以更及时地进行对焦,有利于提高对焦的准确性。
在本申请一些可能的实施方式中,如图2D中步骤214'、步骤215'和步骤216'指示的虚线框所示,当步骤211'的判断结果为是,即检测到当前帧包括目标对象时,则执行步骤214'。
步骤214'、判断目标对象是否为运动状态。
可以根据每一帧中目标对象的变化来确定目标对象是否为运动状态。比如可以获取每帧图像中目标对象的中心位置,如果相邻3帧中目标对象的中心位置移动超过阈值,则确定目标对象为运动状态。
当步骤214'的判断结果为是,即目标对象为运动状态时,则执行步骤215'。
当步骤214'的判断结果为否,即目标对象为静止状态时,则执行步骤216'。
步骤215'、当目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦。
步骤216'、当目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
采用本申请实施例提供的技术方案,终端设备自动检测目标对象,并且在检测出目标对象后判断目标对象的运动状态,在目标对象处于运动状态时,使用滤波长度可变的PD信息进行跟踪对焦,在目标对象处于静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。一方面,由于用户不用手动选取目标对象,所以简化了用户操作;另一方面,在检测出目标对象时,根据目标对象的不同的运动状态采用跟踪对焦或者稳定对焦,可以实现对目标对象的准确对焦,从而有利于提升拍摄图片的清晰度。
在本申请一些可能的实施方式中,如图2D中步骤210'指示的虚线框所示,在步骤211'之前,还包括步骤210'。
步骤210'、将PD配置方式默认设置为固定配置方法。
需要说明的是,对PD进行配置包括对PD块进行设置,比如,可以将取景框对应的区域设置为四行三列,包括12个小区域,每个小区域为一个PD块,则每一帧图像对应12个PD值,根据目标对象覆盖的PD块对应的PD数据得到目标对象的PD信息,根据数据缓冲区中包括的每一帧中目标对象的PD信息可以得到目标PD信息,根据目标对象的目标PD信息可以得到准焦位置,根据准焦位置推动马达移动,使目标对象处于准焦位置。
示例5
请参阅图3,图3为本申请的一个实施例提供的一种应用于终端设备的对焦方法的流程示意图,在该实施例中,对焦方法可以包括以下步骤:
步骤300、将PD配置方式默认设置为固定配置方法。
需要说明的是,对PD进行配置包括对PD块进行设置,比如,可以将取景框对应的区域设置为四行三列,包括12个小区域,每个小区域为一个PD块,则每一帧图像对应12个PD值,根据目标对象覆盖的PD块对应的PD数据得到目标对象的PD信息,根据数据缓冲区中包括的每一帧中目标对象的PD信息可以得到目标PD信息,根据目标对象的目标PD信息可以得到准焦位置,根据准焦位置推动马达移动,使目标对象处于准焦位置。
步骤310、检测当前帧是否包括目标对象。
其中,目标对象是预先设置的需要对其执行对焦的对象中的一个;当当前帧中包括两个或者个两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。比如若预先设置的需要对其执行对焦的对象只有一个,比如只有人时,则通过图像识别检测当前帧是否包括人,若包括人,则将当前帧中的人作为目标对象,若检测到当前帧中包括多个人,则可以根据预设规则从多个人中选取一个人作为目标对象,比如可以将于当前帧离中心点最近的人作为目标对象。若预先设置的需要对其执行对焦的对象有多个,比如当有两个时,分别是人和小鸟,则可以为人和小鸟设置不同的优先级,比如可以设置人的优先级高于小鸟的优先级,则当检测到当前帧既包括人由包括小鸟时,选优先级最高的人作为目标对象。可以理解的由于目标对象自动被检测,不用用户手动选取,所以操作更加便捷。
当步骤310的判断结果为否,即没有检测到当前帧包括目标对象时,则执行步骤311和步骤312。
当步骤310的判断结果为是,即检测到当前帧包括目标对象时,则执行步骤321。
步骤311、将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息。
本实施例进行对焦采用的PD信息是固定PD配置方式下得到的PD信息转换得到的,现有技术通常是在当前帧中没有包括目标对象时,才将PD设置为可变PD,现有技术从设置到获取PD信息存在一定的延时,而本实施例采用转换方式得到的PD信息不存在延时,采用该技术特征可以更及时地进行对焦,有利于提高对焦的准确性。
步骤312、根据所述转换后的PD信息对所述当前帧进行对焦。
步骤321、判断目标对象是否为运动状态。
可以根据每一帧中目标对象的变化来确定目标对象是否为运动状态。比如可以获取每帧图像中目标对象的中心位置,如果相邻3帧中目标对象的中心位置移动超过阈值,则确定目标对象为运动状态。
步骤322、当目标对象为运动状态时,获取所述PD数据缓冲器中的每一帧的PD信息。
步骤323、根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧。
步骤324、利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息。
本申请实施例中数据缓冲器的大小是可以改变的,当所述目标对象的窗口大小的变化率大于第一阈值时,则减小PD数据缓冲器的大小;当所述目标对象的窗口大小的变化率小于第二阈值时,则增加PD数据缓冲器的大小。比如目标对象运动较快时,目标对象的窗口的大小的变化率通常也较快,通过减小PD数据缓冲器的大小有利于更准确地追踪目标对象的变化趋势,当目标对象运动较慢时,目标对象的窗口的大小的变化率通常较慢,通过增大PD数据缓冲区的大小有利于提高准焦位置的准确性。
步骤325、根据所述目标PD信息得到准焦位置。
步骤326、根据准焦位置将马达移动到与准焦位置对应的第一目标位置,实现对目标对象的对焦。
步骤331、获取所述当前帧中所述目标对象的窗口位置和窗口大小,将所述当前帧中所述目标对象的窗口位置和目标PD块的位置进行比较,将所述目标对象的窗口大小与所述目标PD块的大小进行比较,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
步骤332、如果所述目标对象的窗口大小小于所述目标PD块的大小,或者所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置和所述目标对象的窗口大小对固定PD配置方式进行调整重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小,以及使所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值。
步骤333、利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息。
步骤334、根据所述目标PD信息得到准焦位置。
步骤335、根据准焦位置将马达移动到与准焦位置对应的第二目标位置,实现对目标对象的对焦。
步骤336、对焦是否可信。
若步骤336的判断结果为是,则执行步骤340当前帧处理结束,若步骤336的判断结果为否,则执行步骤337。
步骤337、使用对比度对焦技术确定焦点的方法确定准焦位置。
步骤338、驱动马达移动,使目标对象处于准焦位置。
可以理解的,本是实施例中优先采用根据PD信息进行对焦的方式,在使用PD信息确定的准焦位置不可信时,可以采用其他方法确定准焦位置,比如使用对比度对焦技术确定焦点的方法来确定准焦位置。举例来说,当目标对象处于静止状态时,若根据PD信息进行对焦,得到一个马达的目标位置,把马达推到目标位置,在目标对象静止时,按说准焦位置应该保持不变,比如若马达对应的目标位置为S1,若已经把马达推到S1。若根据PD信息得到的结果提示还需要推动马达移动,连续几帧都需要继续推动马达移动,比如指示推动到与S1不同位置的位置S2及位置S3,则当前使用PD信息进行稳定对焦不可信,则执行步骤337,使用对比度对焦技术确定焦点的方法是指在一定范围内推马达,比如由P1、P2、P3、…依次推到P20,在这个过程中有一幅图像时最清楚的,则将最清楚的图像记录下来,同时记录下此时马达的位置记录下来,举例来说,马达移动到P12时取景框中目标对象最清晰,则将在马达移动到P20后,驱动马达移动到P12。
当目标对象为静止时,若根据PD信息进行对焦后,后续收到的指令指示的位置一直是马达当前所处位置,则对焦可信,当前帧处理结束。
在本申请实施例还提供了一种终端设备,所述终端设备包含存储器、处理器、总线;所述存储器、以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令,用于执行前面所述应用于终端设备的对焦方法的部分或者全部步骤。
在一些可能的实施方式中,终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WIFI以及LTE网络。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储了程序代码,其中,所述程序代码包括用于执行应用于终端设备的对焦方法的部分或全部步骤的指令。
本申请实施例还提供了一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行终端设备执行的对焦方法的部分或全部步骤的指令。
上述具体的方法示例以及实施例中技术特征的解释、表述、以及多种实现形式的扩展也适用于装置中的方法执行,装置实施例中不予以赘述。
应理解以上装置中的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。例如,以上各个模块可以为单独设立的处理元件,也可以集成在终端的某一个芯片中实现,此外,也可以以程序代码的形式存储于控制器的存储元件中,由处理器的某一个处理元件调用并执行以上各个模块的功能。此外各个模块可以集成在一起,也可以独立实现。这里所述的处理元件可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。该处理元件可以是通用处理器,例如中央处理器(central processing unit,CPU),还可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(application-specificintegrated circuit,ASIC),或,一个或多个微处理器(digital signal processor,DSP),或,一个或者多个现场可编程门阵列(field-programmable gate array,FPGA)等。
应理解本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的部分实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括已列举实施例以及落入本发明范围的所有变更和修改。显然,本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也包含这些改动和变型在内。

Claims (36)

1.一种应用于终端设备的对焦方法,其特征在于,所述方法包括:
检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
当所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
当所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;
当所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据所述转换后的PD信息对所述当前帧进行对焦。
3.根据权利要求1所述的方法,其特征在于,所述使用滤波长度可变的相位检测PD信息进行跟踪对焦,包括:
使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
4.根据权利要求3所述的方法,其特征在于,所述使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,包括:
获取所述当前帧的PD信息;
将所述当前帧的PD信息存入所述PD数据缓冲器;
根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和
根据所述目标PD信息得到准焦位置。
5.根据权利要求4所述的方法,其特征在于,根据所述PD数据缓冲器的每一帧的PD信息得到所述目标PD信息,包括:
获取所述PD数据缓冲器中的每一帧的PD信息;
根据第i帧中的PD信息和所述目标对象在所述第i帧中的位置,得到与所述第i帧对应的所述目标对象的PD信息,所述第i帧是所述PD数据缓冲器中的任一帧;
利用所述PD数据缓冲器中的每一帧分别对应所述目标对象的PD信息得到所述目标PD信息。
6.根据权利要求1所述的方法,其特征在于,还包括:
获取所述当前帧中所述目标对象的窗口大小,
获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,
将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
7.根据权利要求6所述的方法,其特征在于,将所述目标对象的窗口大小与所述目标PD块的大小进行比较,包括:
如果所述目标对象的窗口大小小于所述目标PD块的大小,则根据所述目标对象的窗口大小对固定PD配置方式进行重新配置,使得重新配置后的目标PD块的大小不大于所述目标对象的窗口大小;
所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:
使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
8.根据权利要求1-7任一所述的方法,其特征在于,还包括:
获取所述当前帧中所述目标对象的窗口位置,
将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
9.根据权利要求8所述的方法,其特征在于,将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,包括:
如果所述目标对象的窗口的中心点与所述目标PD块的中心点间距大于阈值,则根据所述目标对象的窗口位置对固定PD配置方式进行调整重新配置,使得所述重新配置后的目标PD块的中心点与所述目标对象的中心点重合或者间距小于阈值;
所述使用自适应固定PD配置方式下获得的PD信息进行稳定对焦,包括:
使用重新配置后的自适应固定PD配置方式下获得的PD信息进行稳定对焦。
10.根据权利要求1至7任一项所述的方法,其特征在于,所述方法还包括:在所述检测当前帧是否包括目标对象之前,所述方法还包括:
将PD配置方式默认设置为固定PD配置方式。
11.根据权利要求1至7任一项所述的方法,其特征在于,所述方法还包括:
当所述当前帧中包括两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
12.一种应用于终端设备的对焦方法,其特征在于,所述方法包括:
检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
当所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据转换后的所述PD信息对所述当前帧进行对焦。
13.根据权利要求12所述的方法,其特征在于,所述方法还包括:
当所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
当所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;
当所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
14.根据权利要求13所述的方法,其特征在于,所述使用滤波长度可变的相位检测PD信息进行跟踪对焦,包括:
使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
15.根据权利要求14所述的方法,其特征在于,所述使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,包括:
获取所述当前帧的PD信息;
将所述当前帧的PD信息存入所述PD数据缓冲器;
根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和
根据所述目标PD信息得到准焦位置。
16.根据权利要求12所述的方法,其特征在于,还包括:
获取所述当前帧中所述目标对象的窗口大小,
获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,
将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整自适应固定PD配置方式。
17.根据权利要求12、14至16任一项所述的方法,其特征在于,所述方法还包括:在所述检测当前帧是否包括目标对象之前,所述方法还包括:
将PD配置方式默认设置为固定PD配置方式。
18.根据权利要求12、14至16任一项所述的方法,其特征在于,
当所述当前帧中包括两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
19.一种应用于终端设备的对焦装置,其特征在于,所述装置包括:
检测单元,用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
判断单元,用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第一处理单元,用于当所述判断单元的判断结果为所述目标对象为运动状态时,使用滤波长度可变的相位检测PD信息进行跟踪对焦;和
第二处理单元,用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
20.根据权利要求19所述的装置,其特征在于,所述装置还包括:
第三处理单元,用于当所述检测单元检测到所述当前帧中没有包括所述目标对象时,将固定PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;和
根据转换后的所述PD信息对所述当前帧进行对焦。
21.根据权利要求19所述的装置,其特征在于,
所述第一处理单元用于使用滤波长度可变的相位检测PD信息进行跟踪对焦时,具体用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
22.根据权利要求21所述的装置,其特征在于,
所述第一处理单元用于获取所述当前帧的PD信息,将所述当前帧的PD信息存入所述PD数据缓冲器,根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息,以及根据所述目标PD信息得到准焦位置。
23.根据权利要求19所述的装置,其特征在于,
所述第二处理单元用于获取所述当前帧中所述目标对象的窗口位置,将所述当前帧中所述目标对象的窗口位置与目标PD块的位置进行比较,判断是否需要调整所述自适应固定PD配置方式,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块。
24.根据权利要求19至23任一项所述的装置,其特征在于,所述装置还包括:
配置单元,用于所述检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
25.根据权利要求19至23任一项所述的装置,其特征在于,
当所述当前帧中包括两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
26.一种应用于终端设备的对焦装置,其特征在于,所述装置包括:
检测单元,用于检测当前帧是否包括目标对象,所述目标对象是预先设置的需要对其执行对焦的对象中的一个;
第一处理单元,用于当所述检测单元的检测结果为所述当前帧中没有包括所述目标对象时,将固定相位检测PD配置方式下得到的PD信息转换为可变PD配置方式下的PD信息;以及用于根据转换后的所述PD信息对所述当前帧进行对焦。
27.根据权利要求26所述的装置,其特征在于,所述装置还包括:
判断单元,用于当所述检测单元的检测结果为所述当前帧包括所述目标对象时,判断所述目标对象是否为运动状态;
第二处理单元,用于当所述判断单元的判断结果为所述目标对象为运动状态时,使用滤波长度可变的PD信息进行跟踪对焦;
第三处理单元,用于当所述判断单元的判断结果为所述目标对象为静止状态时,使用自适应固定PD配置方式下获得的PD信息进行稳定对焦。
28.根据权利要求27所述的装置,其特征在于,
所述第二处理单元用于使用滤波长度可变的PD信息进行跟踪对焦时,具体用于使用PD数据缓冲器对所述目标对象的焦点位置进行预测得到准焦位置,所述准焦位置用于所述终端设备驱动所述终端设备的马达移动,所述PD数据缓冲器的大小与所述目标对象的窗口大小的变化率呈反比。
29.根据权利要求28所述的装置,其特征在于,
所述第二处理单元用于获取所述当前帧的PD信息,将所述当前帧的PD信息存入所述PD数据缓冲器,根据所述PD数据缓冲器的每一帧的PD信息,得到目标PD信息;和根据所述目标PD信息得到准焦位置。
30.根据权利要求27所述的装置,其特征在于,
所述第三处理单元具体用于获取所述当前帧中所述目标对象的窗口大小,获取所述固定PD配置方式配置得到的目标PD块的大小,所述目标PD块是所述固定PD配置方式配置得到的所有PD块中中心点与所述目标对象的窗口的中心点间距最小的PD块,将所述目标对象的窗口大小与所述目标PD块的大小进行,判断是否需要调整所述自适应固定PD配置方式。
31.根据权利要求26、28至30任一项所述的装置,其特征在于,所述装置还包括:
配置单元,用于所述检测单元检测当前帧是否包括目标对象之前,将PD配置方式默认设置为固定PD配置方式。
32.根据权利要求26、28至30任一项所述的装置,其特征在于,所述装置还包括:
当所述当前帧中包括两个以上预先设置的需要对其执行对焦的对象时,按照预设的筛选规则确定其中一个对象作为所述目标对象。
33.一种终端设备,其特征在于,所述终端设备包含存储器、处理器、总线;所述存储器、以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令,用于执行如权利要求1~11中任一项所述方法。
34.如权利要求33所述的终端设备,所述终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WIFI以及LTE网络。
35.一种终端设备,其特征在于,所述终端设备包含存储器、处理器、总线;所述存储器、以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令,用于执行如权利要求12~18中任一项所述方法。
36.如权利要求35所述的终端设备,所述终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WIFI以及LTE网络。
CN201811192309.XA 2018-10-12 2018-10-12 一种应用于终端设备的对焦方法、装置和终端设备 Active CN111050060B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201811192309.XA CN111050060B (zh) 2018-10-12 2018-10-12 一种应用于终端设备的对焦方法、装置和终端设备
KR1020217013704A KR102689351B1 (ko) 2018-10-12 2019-05-29 단말 디바이스에 적용되는 포커싱 방법 및 장치 및 단말 디바이스
EP19870611.1A EP3855721A4 (en) 2018-10-12 2019-05-29 FOCUSING METHOD AND DEVICE APPLIED TO A TERMINAL DEVICE
PCT/CN2019/088971 WO2020073663A1 (zh) 2018-10-12 2019-05-29 一种应用于终端设备的对焦方法、装置和终端设备
JP2021519600A JP7347903B2 (ja) 2018-10-12 2019-05-29 端末デバイスに適用される合焦方法および装置、ならびに端末デバイス
US17/227,007 US11363187B2 (en) 2018-10-12 2021-04-09 Focusing method and apparatus applied to terminal device, and terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811192309.XA CN111050060B (zh) 2018-10-12 2018-10-12 一种应用于终端设备的对焦方法、装置和终端设备

Publications (2)

Publication Number Publication Date
CN111050060A CN111050060A (zh) 2020-04-21
CN111050060B true CN111050060B (zh) 2021-08-31

Family

ID=70163767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811192309.XA Active CN111050060B (zh) 2018-10-12 2018-10-12 一种应用于终端设备的对焦方法、装置和终端设备

Country Status (6)

Country Link
US (1) US11363187B2 (zh)
EP (1) EP3855721A4 (zh)
JP (1) JP7347903B2 (zh)
KR (1) KR102689351B1 (zh)
CN (1) CN111050060B (zh)
WO (1) WO2020073663A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101351724A (zh) * 2005-11-02 2009-01-21 视声公司 高频阵列超声系统
CN104956333A (zh) * 2013-01-31 2015-09-30 弗兰霍菲尔运输应用研究公司 处理无序事件的设备、方法和计算机程序
CN106415348A (zh) * 2014-02-07 2017-02-15 富士胶片株式会社 摄像装置及对焦控制方法
CN108206914A (zh) * 2017-09-06 2018-06-26 中兴通讯股份有限公司 一种对焦方法及装置、终端

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4527077B2 (ja) * 2006-03-28 2010-08-18 ルネサスエレクトロニクス株式会社 光ディスク装置、レーザパワー制御回路及びレーザパワー制御方法
JP2010096962A (ja) 2008-10-16 2010-04-30 Fujinon Corp Af枠自動追尾機能を備えたオートフォーカスシステム
JP2011027847A (ja) * 2009-07-22 2011-02-10 Fujifilm Corp Af枠自動追尾システム
JP2011107501A (ja) * 2009-11-19 2011-06-02 Nikon Corp 焦点調節装置、および、撮像装置
US9077890B2 (en) 2011-02-24 2015-07-07 Qualcomm Incorporated Auto-focus tracking
JP5491677B2 (ja) * 2011-03-31 2014-05-14 富士フイルム株式会社 撮像装置及びその合焦制御方法
JP5979967B2 (ja) * 2011-06-30 2016-08-31 キヤノン株式会社 被写体検出機能を備えた撮像装置、撮像装置の制御方法、及び、プログラム
KR101853817B1 (ko) * 2011-07-20 2018-05-02 삼성전자주식회사 촬상 소자
JP2013218297A (ja) * 2012-03-16 2013-10-24 Canon Inc 焦点調節装置および焦点調節方法
JP6234144B2 (ja) * 2013-10-02 2017-11-22 オリンパス株式会社 焦点検出装置および焦点検出方法
KR102126505B1 (ko) * 2013-11-07 2020-06-24 삼성전자주식회사 디지털 촬영 장치 및 그 제어방법
JP6249825B2 (ja) * 2014-03-05 2017-12-20 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム
US9338345B2 (en) * 2014-06-13 2016-05-10 Intel Corporation Reliability measurements for phase based autofocus
CN107465877B (zh) 2014-11-20 2019-07-09 Oppo广东移动通信有限公司 跟踪对焦方法及装置和相关介质产品
JP2018004904A (ja) * 2016-06-30 2018-01-11 株式会社ニコン 被写体追尾装置および撮像装置
CN106161945A (zh) 2016-08-01 2016-11-23 乐视控股(北京)有限公司 拍照处理方法和装置
US10044926B2 (en) * 2016-11-04 2018-08-07 Qualcomm Incorporated Optimized phase detection autofocus (PDAF) processing
JP7034585B2 (ja) * 2016-12-02 2022-03-14 キヤノン株式会社 フォーカス制御装置、撮像装置、フォーカス制御方法およびフォーカス制御プログラム
US10070042B2 (en) * 2016-12-19 2018-09-04 Intel Corporation Method and system of self-calibration for phase detection autofocus
CN106961552B (zh) * 2017-03-27 2019-10-29 联想(北京)有限公司 一种对焦控制方法及电子设备
CN107509030B (zh) * 2017-08-14 2019-12-17 维沃移动通信有限公司 一种对焦方法及移动终端
CN108496350B (zh) * 2017-09-27 2021-02-02 深圳市大疆创新科技有限公司 一种对焦处理方法及设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101351724A (zh) * 2005-11-02 2009-01-21 视声公司 高频阵列超声系统
CN104956333A (zh) * 2013-01-31 2015-09-30 弗兰霍菲尔运输应用研究公司 处理无序事件的设备、方法和计算机程序
CN106415348A (zh) * 2014-02-07 2017-02-15 富士胶片株式会社 摄像装置及对焦控制方法
CN108206914A (zh) * 2017-09-06 2018-06-26 中兴通讯股份有限公司 一种对焦方法及装置、终端

Also Published As

Publication number Publication date
KR102689351B1 (ko) 2024-07-30
KR20210069709A (ko) 2021-06-11
JP7347903B2 (ja) 2023-09-20
JP2022502970A (ja) 2022-01-11
CN111050060A (zh) 2020-04-21
US11363187B2 (en) 2022-06-14
WO2020073663A1 (zh) 2020-04-16
EP3855721A1 (en) 2021-07-28
EP3855721A4 (en) 2021-11-17
US20210227147A1 (en) 2021-07-22

Similar Documents

Publication Publication Date Title
EP3135028B1 (en) Realtime capture exposure adjust gestures
CN112449099B (zh) 一种图像处理方法、电子设备及云服务器
US20200311476A1 (en) Target object processing method and apparatus, electronic device, and storage medium
CN109002787B (zh) 图像处理方法和装置、存储介质、电子设备
CN109981965B (zh) 对焦的方法和电子设备
CN104333701A (zh) 一种相机预览画面的显示方法、装置及终端
CN103400108A (zh) 人脸识别方法、装置和移动终端
CN106331502A (zh) 终端及其滤镜拍摄方法和装置
CN110072057B (zh) 图像处理方法及相关产品
CN111539960A (zh) 图像处理方法以及相关设备
CN106101529A (zh) 一种拍照控制方法及移动终端
CN105306802A (zh) 拍照模式的切换方法及装置
JP2020526941A (ja) 状態検出方法、状態検出装置及び記憶媒体
CN109561255B (zh) 终端拍照方法、装置及存储介质
CN105120158A (zh) 移动终端的拍摄方法及装置
CN111050060B (zh) 一种应用于终端设备的对焦方法、装置和终端设备
CN114143471B (zh) 图像处理方法、系统、移动终端及计算机可读存储介质
CN112468722B (zh) 一种拍摄方法、装置、设备及存储介质
EP4123574A1 (en) Image fusion method and apparatus, storage medium and mobile terminal
CN111355892B (zh) 图片拍摄方法、装置、存储介质及电子终端
CN112329909B (zh) 生成神经网络模型的方法、装置及存储介质
WO2018232645A1 (zh) 具有拍照功能的移动终端和相关产品
CN112543278B (zh) 一种调整对比度的方法和终端
CN110677581A (zh) 一种镜头切换方法、装置、存储介质及电子设备
CN118363706A (zh) 投屏方法、智能终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant