CN104853105B - 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法 - Google Patents

基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法 Download PDF

Info

Publication number
CN104853105B
CN104853105B CN201510328988.9A CN201510328988A CN104853105B CN 104853105 B CN104853105 B CN 104853105B CN 201510328988 A CN201510328988 A CN 201510328988A CN 104853105 B CN104853105 B CN 104853105B
Authority
CN
China
Prior art keywords
camera lens
image sensor
point
target
backward
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510328988.9A
Other languages
English (en)
Other versions
CN104853105A (zh
Inventor
肖顺利
麦练智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AP PHOTONICS Ltd
Original Assignee
AP PHOTONICS Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AP PHOTONICS Ltd filed Critical AP PHOTONICS Ltd
Priority to CN201510328988.9A priority Critical patent/CN104853105B/zh
Publication of CN104853105A publication Critical patent/CN104853105A/zh
Application granted granted Critical
Publication of CN104853105B publication Critical patent/CN104853105B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

一种基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法,包括下述步骤:(1)、选择两个以上的对焦点,对焦点数量设为N,N≥2;(2)、镜头沿z轴方向前后移动一遍后获得相应的数据:A’(xA,yA),B’(xB,yB)……N’(xN,yN)以及fA,fB……fN;(3)、将步骤(2)中获取到的数据代入公式kfN=‑xNθy+yNθx+kf,建立方程组;(4)、求解步骤(3)中方程组,获得使各个设定的对焦点同时清晰成像在影像传感器上时镜头所需要的偏转角度θx,θy及前后移动的行程f;(5)、用步骤(4)中求得的该组参数值输出驱动镜头,实现各个设定的目标对焦点同时在图像传感器上获得清晰的对焦。

Description

基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法
技术领域
本发明公开一种微型镜头对焦方法,特别是一种基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法。
背景技术
在传统普通拍照装置中,由于镜头焦平面与图象传感平面不平行的情况下图象只能清晰显示某一特定的对焦区域,而具配备有移轴镜头的大型拍照装置,对其的操作通常是通过旋钮来实现,需要较强的专业知识来进行操作而且操作过程复杂,甚至是需要专业的培训才可以完成。根据沙姆定律,在拍照装置中,由于光轴倾斜可以改变镜头对景物调焦平面的三维空间角度,使得调焦平面上的三维景物在二维影像平面上都有相同的清晰程度,从可以而达到全区域对焦的目的。在大型拍照装置中,手动调节的移轴镜头早已推出多年。随着具有高度集成的微型镜头倾斜或平移式光学防抖(OIS)技术的出现,五百万及更高像素分辨率的微型摄像头在触屏手机,平板电脑等便携设备上的实现使得手机的拍照效果越来越接近普通数码相机。从功能上也越来越接近大型拍照装置的功能,比如通过平移或者旋转镜头来实现OIS等等(参看专利:PCT/CN2008/072680)。不少国际知名的微型集成摄像头厂家都陆续推出了基于镜头旋转的光学防抖对焦马达的摄像头也逐步被一些知名的手机厂商采用。而在这一类的摄像头中,既然镜头光轴可以偏转就可以实现类似大型拍照装置的沙姆操作和反沙姆操作移轴摄影的功能(参看申请公布号为CN103813104A的专利)。
虽然针对大型拍照装置的移轴镜头已推出多年,但碍于镜头的重量和体积问题及操作方式等问题,限制了移轴对焦拍照设备的可操纵性及便携性。此外,参看申请公布号为CN103246131A的专利可见,已发明并公布的3维对焦技术算法复杂,自动对焦过程步骤冗长且耗时过多也限制了3维自动对焦方法的实际应用。
发明内容
针对上述提到的现有技术中的三维对焦算法复杂的缺点,本发明提供了一套快速三维快速对焦的算法可以快速实现三维移轴及对焦操作,通过辨识操作者感兴趣的不同景深位置上的对焦目标,经过算法计算获得并控制镜头的二维偏转倾角,已使得所拍摄的图像在操作者感兴趣的目标点上的对焦效果自动快速达到最优,使得在一个画面内拍摄行程不同的几个感兴趣的目标物体时同时获得清晰聚焦或者获得其他特别的倾斜摄影效果的问题。
本发明解决其技术问题采用的技术方案是:一种基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法,该自动对焦方法包括下述步骤:
(1)、选择两个以上的对焦点,对焦点数量设为N,N≥2;
(2)、镜头沿z轴方向前后移动一遍后获得相应的数据:A’(xA,yA),B’(xB,yB)……N’(xN,yN)以及fA,fB……fN,其中,N’(xN,yN)为对焦点N在影像传感器上成像的位置坐标,为对焦点N处清晰时镜头的行程;
(3)、将步骤(2)中获取到的数据代入公式kfN=-xNθy+yNθx+kf,建立方程组,其中,k为设定系数,θy为沿y轴倾斜角度,θx为沿x轴倾斜角度,f为对焦时沿z轴前后移动的行程;
(4)、求解步骤(3)中方程组,获得使各个设定的对焦点同时清晰成像在影像传感器上时镜头所需要的偏转角度θx,θy及前后移动的行程f;
(5)、用步骤(4)中求得的该组参数值输出驱动镜头,实现各个设定的目标对焦点同时在图像传感器上获得清晰的对焦。
本发明解决其技术问题采用的技术方案进一步还包括:
所述的fN为镜头相对影像传感器不作倾斜运动而仅作前后移动时的对焦动作时,设定的目标对焦点会在行程为fN上获得最清晰的成像。
所述的在步骤(2)中,获取数据时,假设由镜头的移动及转动引起的目标影像点位置在的影像传感器上的变化为(ΔxA,ΔyA),(ΔxB,ΔyB)及(ΔxC,ΔyC),当xA>>ΔxA,xB>>ΔxB,yC>>ΔyC,yA>>ΔyA,yB>>ΔyB,yC>>ΔyC,则忽略由镜头的移动及转动引起的目标影像点位置在的影像传感器上的变化。
所述的k代表特定镜头及摄像装置下行程与目标点的位移与目标点在影像传感器上成像的位移之间的比例关系,k根据标定实验的方法获得。
本发明的有益效果是:本发明与传统的便携装置摄像头应用相比,提供了一种更快速更实用的手机或便携平板电脑的微型摄像头镜头倾斜三维摄影的操作功能,通过在触摸平板上的操作或者自动根据选定的感兴趣的目标区域来控制镜头实现自动对焦运动时,除了普通便携装置摄像头的镜头的位置(第1维度)还可以操作两个正交方向的倾角(第2、3维度),实现针对摄影目标平面不同景深的区域进行快速三维自动对焦操作的功能。与以前的专利(参看CN103246131A)相比较可以看出,已公布的专利CN103246131A中的方法会使镜头有一遍前后移动和两遍偏转镜头搜索的过程所需要的时间大约是普通自动对焦马达自动对焦过程中使镜头有一遍前后移动过程所需时间的3倍。而本发明的方法在镜头的移动步骤上仅需要前后移动镜头一遍,所需要的时间及镜头移动过程与普通自动对焦马达相同,所以本发明的三维快速自动对焦相比先前的发明进步显著而且极具实用价值。
另外,具有移轴拍照功能的高端大型拍照装置通常是通过手动旋钮等的操作来实现对不同对焦区域的选择,操作极其复杂,甚至需要专业训练才可以完成。本发明针对该缺陷,通过触屏选择或自动选择目标来实现快速自动对目标区域的三维自动对焦,优点包括:无需训练,更快捷准确,及更具操作趣味性与实用性等。
下面将结合附图和具体实施方式对本发明做进一步说明。
附图说明
图1为本发明中采用的对焦马达的立体结构示意图。
图2为本发明中采用的对焦马达的剖面结构示意图。
图3为本发明通过倾斜镜头修正倾斜角影像前景物与影像关系示意图。
图4为本发明通过倾斜镜头修正倾斜角影像后景物与影像关系示意图。
图5为本发明镜头沿z轴移动成像过程中合适近焦B点焦距示意图。
图6为本发明镜头沿z轴移动成像过程中合适中端A点焦距示意图。
图7为本发明镜头沿z轴移动成像过程中合适远焦C点焦距示意图。
图8为本发明通过倾斜镜操作头修正不同目标点的影像清晰度时镜头倾斜前示意图。
图9为本发明通过倾斜镜操作头修正不同目标点的影像清晰度时镜头沿y轴倾斜后示意图。
图10为本发明目标点在影像传感器上的坐标位置示意图。
图11为本发明三维自动对焦操作流程图。
具体实施方式
本实施例为本发明优选实施方式,其他凡其原理和基本结构与本实施例相同或近似的,均在本发明保护范围之内。
请参看附图1和附图2,本发明采用的可控制镜头的对焦马达组件主要包括:镜头101、可控制镜头倾斜的对焦马达102和影像传感器103,镜头101与对焦马达102对应安装在一起,镜头101在对焦马达102的控制下,可自由移动,镜头移动的自由度至少是三维度的,其主要包括z轴平移方向、Rx轴方向转动和Ry轴方向转动,本实施例中采用的镜头101可以由一个或多个镜片组成。
请参看附图3,在对焦过程中,当目标201与影像传感器103相对倾斜时,在单凸透镜头202没有进行倾斜操作的时候,成像204可能会因为影像超出景深而无法全区域聚焦。其中,目标201可以是由一个或多个物件组成,单凸透镜头202相等于在单镜头系统中的镜头101。请参看附图4,在对焦过程中,通过马达102,调整镜头101的倾斜角,根据沙姆定律(Scheimpflug principle,参见GB Patent No.1139),到达新的单凸透镜头方向212,以及新的成像214与影像传感器103相重合,达致全区域聚焦。
请参看附图5、附图6和附图7,当目标景物相对于影像传感器103与镜头101倾斜,而镜头101相对影像传感器103不作倾斜而仅作前后移动时的对焦动作时,各目标点会在不同的行程上获得最清晰的成像。例如:图5中离摄像设备最近的B点将会在焦距为301所示的行程fB上获得最清晰成像,图6中A点将会在焦距为302所示的行程fA上获得最清晰成像,而图7中C点将会在焦距为303所示的行程fC上获得最清晰成像。此种情况下,如果镜头101不作倾斜,则所有的三个点不可能同时获得清晰成像。
本实施例中,上述各个目标点所需要的清晰成像的行程可以有多种方法获得,比如最基本的扫描方法获得,或者通过拟合计算的方法获得,甚至是通过特定的图像传感器的相位差检测自动对焦功能获取的各个目标点的自动清晰成像所需要的行程值等。以及各种其他常规的获取行程的方法都可以应用于本发明,并包含在本发明方法所描述的对焦行程搜寻计算方法之内。
请参看8和附图9,本发明中,镜头倾斜时操作如下,图9表示镜头201(101)将沿y轴倾斜402所示角度θy,同时适当沿z方向移动镜头则可以使得目标点A及B同时清晰成像在影像传感器103上。同理,如果将镜头沿y轴倾斜角度,再沿x轴倾斜θx角度,而沿z轴平移f行程,则可以使得A点,B点及C点同时清晰成像在图像传感器上。如图10所示,以影像传感器中心位置为参考点,目标点在影像传感器103上的位置坐标分别记为A’(xA,yA),B’(xB,yB)及C’(xC,yC)。同时,假设由镜头101的移动及转动引起的目标影像点位置在的影像传感器103上的变化为(ΔxA,ΔyA),(ΔxB,ΔyB)及(ΔxC,ΔyC),当xA>>ΔxA,xB>>ΔxB,yC>>ΔyC,yA>>ΔyA,yB>>ΔyB,yC>>ΔyC,则可以忽略由镜头101的移动及转动引起的目标影像点位置在的影像传感器103上的变化。另外,即使前述假设条件不满足,近似的,目标点在影像传感器103上的位置坐标也可以使用目标点在影像传感器103上的平均位置替代,本实施例中,该平均位置是根据镜头101的移动及转动操作时目标影像点在的影像传感器103上的位置计算出的平均值。根据以上标记及假定,可以列写几何关系如下:
其中k为一特定系数,代表特定镜头及摄像装置下行程与目标点的位移与目标点在影像传感器上成像的位移之间的比例关系,该值可以根据标定实验的方法获得。
本发明主要为一个利用可控制镜头倾斜的对焦马达实现3维快速自动对焦的方法,其包括下述步骤:
(1)、选择两个以上的对焦点,对焦点数量设为N,N≥2;
(2)、镜头沿z轴方向前后移动一遍后便可以获得相应的数据:A’(xA,yA),B’(xB,yB)……N’(xN,yN)以及fA,fB……fN
(3)、将步骤(2)中获取到的数据代入公式kfN=-xNθy+yNθx+kf,建立方程组;
(4)、求解上述方程组,即可获得使各个设定的对焦点同时清晰成像在影像传感器上时镜头所需要的偏转角度θx,θy及前后移动的行程f等参数;
(5)、用上述求得的该组参数值输出驱动镜头,便可以使实现各个设定的目标对焦点同时在图像传感器上获得清晰的对焦。
本发明与传统的便携装置摄像头应用相比,提供了一种更快速更实用的手机或便携平板电脑的微型摄像头镜头倾斜三维摄影的操作功能,通过在触摸平板上的操作或者自动根据选定的感兴趣的目标区域来控制镜头实现自动对焦运动时,除了普通便携装置摄像头的镜头的位置(第1维度)还可以操作两个正交方向的倾角(第2、3维度),实现针对摄影目标平面不同景深的区域进行快速三维自动对焦操作的功能。与以前的专利(参看CN103246131A)相比较可以看出,已公布的专利CN103246131A中的方法会使镜头有一遍前后移动和两遍偏转镜头搜索的过程所需要的时间大约是普通自动对焦马达自动对焦过程中使镜头有一遍前后移动过程所需时间的3倍。而本发明的方法在镜头的移动步骤上仅需要前后移动镜头一遍,所需要的时间及镜头移动过程与普通自动对焦马达相同,所以本发明的三维快速自动对焦相比先前的发明进步显著而且极具实用价值。

Claims (3)

1.一种基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法,其特征是:所述的自动对焦方法包括下述步骤:
(1)、选择两个以上的对焦点,对焦点数量设为N,N≥2;
(2)、镜头沿z轴方向前后移动一遍后获得相应的数据:A’(xA,yA),B’(xB,yB)……N’(xN,yN)以及fA,fB……fN,其中,所述的N’(xN,yN)为对焦点N在影像传感器上成像的位置坐标,所述的fN为对焦点N处清晰时镜头前后移动的行程;
(3)、将步骤(2)中获取到的数据代入公式kfN=-xNθy+yNθx+kf,建立方程组,其中,k为设定系数,θy为沿y轴倾斜角度,θx为沿x轴倾斜角度,f为对焦时沿z轴前后移动的行程;所述的k代表特定镜头及摄像装置下行程与目标点的位移与目标点在影像传感器上成像的位移之间的比例关系,k根据标定实验的方法获得;
(4)、求解步骤(3)中方程组,获得使各个设定的对焦点同时清晰成像在影像传感器上时镜头所需要的偏转角度θx,θy及前后移动的行程f;
(5)、用步骤(4)中求得的该组参数值输出驱动镜头,实现各个设定的目标对焦点同时在图像传感器上获得清晰的对焦。
2.根据权利要求1所述的基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法,其特征是:所述的fN为镜头相对影像传感器不作倾斜运动而仅作前后移动时的对焦动作时,设定的目标对焦点会在行程为fN上获得最清晰的成像。
3.根据权利要求1所述的基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法,其特征是:所述的在步骤(2)中,获取数据时,假设由镜头的移动及转动引起的目标影像点位置在的影像传感器上的变化为(xA,yA),(xB,yB)及(xC,yC),当xA>>xA,xB>>xB,yC>>yC,yA>>yA,yB>>yB,yC>>yC,则忽略由镜头的移动及转动引起的目标影像点位置在的影像传感器上的变化。
CN201510328988.9A 2015-06-15 2015-06-15 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法 Expired - Fee Related CN104853105B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510328988.9A CN104853105B (zh) 2015-06-15 2015-06-15 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510328988.9A CN104853105B (zh) 2015-06-15 2015-06-15 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法

Publications (2)

Publication Number Publication Date
CN104853105A CN104853105A (zh) 2015-08-19
CN104853105B true CN104853105B (zh) 2019-04-23

Family

ID=53852437

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510328988.9A Expired - Fee Related CN104853105B (zh) 2015-06-15 2015-06-15 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法

Country Status (1)

Country Link
CN (1) CN104853105B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016201592A1 (zh) * 2015-06-15 2016-12-22 爱佩仪光电技术有限公司 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法
CN105357441B (zh) * 2015-11-27 2018-09-14 努比亚技术有限公司 一种图像采集方法及移动终端
CN105629427A (zh) * 2016-04-08 2016-06-01 东莞佩斯讯光电技术有限公司 基于双可控制镜头倾斜式音圈马达的立体数码摄像装置
CN109510938A (zh) * 2017-09-15 2019-03-22 致伸科技股份有限公司 影像对焦方法以及应用该方法的影像获取装置与电子装置
WO2019071492A1 (zh) * 2017-10-11 2019-04-18 深圳传音通讯有限公司 一种用于对焦的计算机可读存储介质及智能终端
CN108648238B (zh) * 2018-04-25 2021-09-14 深圳市商汤科技有限公司 虚拟角色驱动方法及装置、电子设备和存储介质
KR102510704B1 (ko) 2018-10-30 2023-03-16 캐논 가부시끼가이샤 촬상 장치
CN114095628B (zh) * 2021-10-13 2023-07-07 上海孟非自动化科技有限公司 一种自动对焦方法、自动对焦视觉装置及其控制方法
CN114509021B (zh) * 2022-02-18 2024-04-16 深圳市中钞科信金融科技有限公司 异形平板玻璃边部成像方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1881071A (zh) * 2005-06-16 2006-12-20 精工爱普生株式会社 投影机及投影方法
CN101078860A (zh) * 2006-05-26 2007-11-28 佳能株式会社 摄像光学系统
US7567345B1 (en) * 2007-01-05 2009-07-28 J.A. Woollam Co., Inc. Ellipsometer meeting scheimpflug condition with provision of an essentially circular electromagnetic radiation spot on a sample
CN101933040A (zh) * 2007-06-06 2010-12-29 索尼株式会社 图像处理装置、图像处理方法以及图像处理程序
CN104065859A (zh) * 2014-06-12 2014-09-24 青岛海信电器股份有限公司 一种全景深图像的获取方法及摄像装置
CN104181750A (zh) * 2013-05-27 2014-12-03 思考电机(上海)有限公司 自动变焦摄像头及带摄像头的电子装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060082657A1 (en) * 2004-10-19 2006-04-20 Raymond Meier Digital camera improvements
US7577309B2 (en) * 2005-06-18 2009-08-18 Muralidhara Subbarao Direct vision sensor for 3D computer vision, digital imaging, and digital video
US8711275B2 (en) * 2011-05-31 2014-04-29 Apple Inc. Estimating optical characteristics of a camera component using sharpness sweep data
CN103246131B (zh) * 2013-05-20 2016-06-01 爱佩仪光电技术(深圳)有限公司 利用可控制镜头倾斜的对焦马达实现3维多区自动对焦的方法
CN103813104A (zh) * 2014-03-12 2014-05-21 爱佩仪光电技术(深圳)有限公司 通过触屏操作实现移轴摄影及3维多区自动对焦的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1881071A (zh) * 2005-06-16 2006-12-20 精工爱普生株式会社 投影机及投影方法
CN101078860A (zh) * 2006-05-26 2007-11-28 佳能株式会社 摄像光学系统
US7567345B1 (en) * 2007-01-05 2009-07-28 J.A. Woollam Co., Inc. Ellipsometer meeting scheimpflug condition with provision of an essentially circular electromagnetic radiation spot on a sample
CN101933040A (zh) * 2007-06-06 2010-12-29 索尼株式会社 图像处理装置、图像处理方法以及图像处理程序
CN104181750A (zh) * 2013-05-27 2014-12-03 思考电机(上海)有限公司 自动变焦摄像头及带摄像头的电子装置
CN104065859A (zh) * 2014-06-12 2014-09-24 青岛海信电器股份有限公司 一种全景深图像的获取方法及摄像装置

Also Published As

Publication number Publication date
CN104853105A (zh) 2015-08-19

Similar Documents

Publication Publication Date Title
CN104853105B (zh) 基于可控制镜头倾斜的摄像装置的三维快速自动对焦方法
CN108076278B (zh) 一种自动对焦方法、装置及电子设备
CN108432230B (zh) 一种成像设备和一种用于显示场景的图像的方法
CN104980644B (zh) 一种拍摄方法及装置
US9063345B2 (en) Super light-field lens with doublet lenslet array element
US6519359B1 (en) Range camera controller for acquiring 3D models
JP4297630B2 (ja) 電子撮像装置
US9106837B2 (en) Image capturing device and image capturing method
US9300858B2 (en) Control device and storage medium for controlling capture of images
CN106292162A (zh) 立体照相装置和相关控制方法
JP5938281B2 (ja) 撮像装置およびその制御方法ならびにプログラム
US9063323B2 (en) Super light-field lens and image processing methods
CN103813104A (zh) 通过触屏操作实现移轴摄影及3维多区自动对焦的方法
US20140307054A1 (en) Auto focus method and auto focus apparatus
JP4241460B2 (ja) 電子撮像装置
CN107517345B (zh) 拍摄预览方法及拍摄设备
CN113267141B (zh) 一种显微三维信息采集设备
JP6301416B2 (ja) 画像処理方法、画像処理装置、および撮像装置
JP2012500506A (ja) カメラおよびカメラの制御方法
JP7254562B2 (ja) 撮像装置及びその制御装置
JP2021005860A (ja) 撮像装置、および、撮像装置の制御方法
JP6136019B2 (ja) 動画像撮影装置、および、動画像撮影装置の合焦方法
TW201236448A (en) Auto-focusing camera and method for automatically focusing of the camera
TWI576648B (zh) 影像擷取裝置及方法
CN113840084A (zh) 一种基于球机ptz回传技术实现全景云台操控的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190423

Termination date: 20200615