CN112672054A - 对焦方法、装置及电子设备 - Google Patents
对焦方法、装置及电子设备 Download PDFInfo
- Publication number
- CN112672054A CN112672054A CN202011563775.1A CN202011563775A CN112672054A CN 112672054 A CN112672054 A CN 112672054A CN 202011563775 A CN202011563775 A CN 202011563775A CN 112672054 A CN112672054 A CN 112672054A
- Authority
- CN
- China
- Prior art keywords
- target
- image
- phase difference
- difference information
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请公开了一种对焦方法、装置及电子设备,属于通信技术领域,能够解决电子设备对焦后拍摄得到的图像出现模糊现象,导致电子设备的拍摄效果较差的问题。该方法包括:通过目标光谱组件,获取待拍摄对象对应的目标光线,目标光谱组件为M个光谱滤光片或FPI多光谱组件,M为正整数;根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合,目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息,目标对象为待拍摄对象中处于运动状态的对象;根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。本申请实施例应用于电子设备进行对焦的过程中。
Description
技术领域
本申请属于通信技术领域,具体涉及一种对焦方法、装置及电子设备。
背景技术
通常,用户在通过电子设备的镜头进行拍摄时,电子设备可以通过相位差自动对焦方式对镜头进行对焦,以拍摄得到比较清晰的图片。具体的,电子设备可以获取被拍摄物体的相位差,并将该相位差转换成镜头模组内的马达的移动距离,从而电子设备可以根据该移动距离确定出对焦点,以实现对焦。
然而上述方法中,若被拍摄物体是处于运动状态(例如快速移动状态)的物体,由于电子设备获取的是被拍摄物体在某个瞬间的相位差,因此电子设备进行对焦后,拍摄得到的图像会出现模糊的现象,如此导致电子设备的拍摄效果较差。
发明内容
本申请实施例的目的是提供一种对焦方法、装置及电子设备,能够解决电子设备对焦后拍摄得到的图像出现模糊现象,导致电子设备的拍摄效果较差的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种对焦方法,应用于电子设备,电子设备的摄像头模组包括目标光谱组件和实感像素传感器,该对焦方法包括:通过目标光谱组件,获取待拍摄对象对应的目标光线,该目标光谱组件为M个光谱滤光片或FPI多光谱组件,M为正整数;根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合,该目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息,该目标对象为待拍摄对象中处于运动状态的对象;根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。
第二方面,本申请实施例提供了一种对焦装置,该对焦装置的摄像头模组包括目标光谱组件和实感像素传感器,该对焦装置包括:获取模块和控制模块。其中,获取模块,用于通过目标光谱组件,获取待拍摄对象对应的目标光线,该目标光谱组件为M个光谱滤光片或FPI多光谱组件,M为正整数;并根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合,该目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息,该目标对象为待拍摄对象中处于运动状态的对象。控制模块,用于根据获取模块获取的目标图像序列和相位差信息集合,控制摄像头对焦。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,电子设备可以通过摄像头模组上的目标光谱组件,获取待拍摄对象对应的目标光线,并根据该目标光线,通过实感像素传感器获取处于运动状态的目标对象的目标图像序列和相位差信息集合,以根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。由于电子设备的摄像头模组包括目标光谱组件和实感像素传感器,因此电子设备可以通过目标光谱组件进行光线筛选,仅获取待拍摄对象的光线,以减小冗余数据量,从而使得实感像素传感器可以快速地基于该待拍摄对象的光线得到对应的图像;并且,由于实感像素传感器是用于采集处于运动状态的对象的图像的,且具有实时抓取高精度动态物体和相位差信息的特性,因此通过实感像素传感器能够采集到处于运动状态的目标对象的图像序列和与图像序列对应的相位差信息,即通过实感像素传感器能够准确、实时地获取到目标对象在运动过程中,目标对象的每帧图像对应的相位差信息,从而电子设备可以根据该每帧图像对应的相位差信息,快速、准确地对运动状态下的目标对象进行对焦,避免了拍摄得到的图像出现模糊的现象,如此提升了电子设备的拍摄效果。
附图说明
图1是本申请实施例提供的一种对焦方法的示意图;
图2是本申请实施例提供的一种镜头模组的结构示意图之一;
图3是本申请实施例提供的一种镜头模组的结构示意图之二;
图4是本申请实施例提供的一种镜头模组的结构示意图之三;
图5是本申请实施例提供的一种镜头模组的结构示意图之四;
图6是本申请实施例提供的一种FPI多光谱组件的结构示意图;
图7是本申请实施例提供的一种光线处理模块的示意图;
图8是本申请实施例提供的一种实感像素的排列分布示意图;
图9是本申请实施例提供的一种对焦装置的结构示意图;
图10是本申请实施例提供的一种电子设备的硬件结构示意图之一;
图11是本申请实施例提供的一种电子设备的硬件结构示意图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面对本申请实施例提供的对焦方法、装置及电子设备中涉及的一些概念和/或术语做一下解释说明。
相机传感器(sensor):是相机的核心,也是相机中最关键的技术。传感器一般分为两种:一种是广泛使用的CCD(电荷耦合)元件,另一种是CMOS(互补金属氧化物半导体)器件。
目前使用的CMOS器件,与CCD一样同为在数码相机中可记录光线变化的半导体。与传统相机相比,传统相机使用“胶卷”作为其记录信息的载体,而数码相机的“胶卷”就是其成像感光元件,感光元件就是数码相机的不用更换的“胶卷”而且是与相机一体。CMOS的大致工作流程是,通过大量的感光二极管(pixel),感知光信号,转换成电信号,通过放大电路,AD(模数转换)转换电路,形成数字信号矩阵(即图像),再经过图像信号处理(ISP)模块处理,压缩存储起来。
多光谱、高光谱甚至超光谱的相机或者成像仪最早的应用是来自于航空照相,也就是说通常是用于卫星遥感。顾名思义,多光谱成像是按照光谱分辨率(能分辨的最小波长间隔)把入射的全波段或宽波段的光信号分成若干个窄波段的光束,再让光束成像在传感器上面。如果光谱分辨率足够高,多光谱技术就可以将入射的光谱曲线完全采样出来,在民用、军事领域都有广泛应用(无人机侦查、农业病虫害监测、土壤肥力、水域污染监测等)。
对焦:电子设备通过计算分析被拍摄对象,以调整镜头和传感器之间的距离,达到拍摄清晰图片的目的。对焦方式可以包括以下至少一项:反差对焦、相位对焦和激光对焦等。
本申请实施例中,基于新型传感器设计一种相机模组结构,电子设备可以基于多光谱和实感像素技术,利用多光谱筛选目标光谱,减小冗余数据量,然后利用实感像素实时抓取的高精度动态物体的轮廓图和对应的相位信息,实现快速地对动态物体对焦,避免拍摄得到的图像出现模糊的现象,提升电子设备的拍摄效果。
本申请实施例提供一种对焦方法,图1示出了本申请实施例提供的一种对焦方法的流程图,该方法可以应用于电子设备。如图1所示,本申请实施例提供的对焦方法可以包括下述的步骤201至步骤203。
步骤201、电子设备通过目标光谱组件,获取待拍摄对象对应的目标光线。
本申请实施例中,电子设备的摄像头模组包括目标光谱组件和实感像素传感器;目标光谱组件为M个光谱滤光片或法珀干涉仪(FPI)多光谱组件,M为正整数。
本申请实施例中,用户可以开启具有拍摄功能的应用程序(例如相机应用程序),以通过电子设备的摄像头,基于多光谱和实感像素技术,采集待拍摄对象(例如包括运动物体)对应的图像序列,并获取与该图像序列对应的相位差信息集合,从而根据该图像序列和相位差信息集合控制电子设备的摄像头(摄像头上的镜头)对焦。
本申请实施例的一种实现方式中,电子设备包括镜头模组,该镜头模组至少包括以下组件:镜头、滤光片(例如M个光谱滤光片)和传感器(例如实感像素传感器、常规传感器)。其中,滤光片可以设置在传感器之外(可以称为传感器外滤光片),也可以设置在传感器的内部(可以称为传感器内滤光)。在这种方式中,电子设备可以通过滤光片和多光谱技术,获取特定光谱的光线(例如待拍摄对象的目标光线),以实现仅对待拍摄对象进行图像采集。
需要说明的是,上述传感器外滤光片,是使用分光镜或者滤光片在传感器感光之前实现光谱过滤,以获取光谱信息,即光线在进行到传感器之前,先通过滤光片进行滤光处理,以获取特定光谱的光线(例如待拍摄对象的光线),以在该特定光谱的光线进入传感器之后,传感器可以基于该特定光谱的光线进行图像采集。
可选地,本申请实施例中,传感器外滤光片可以设置在镜头外侧,也可以设置在镜头内侧(即镜头与传感器之间)。传感器外滤光片的设置方式可以为可抽拉方式、轮盘方式、分光镜方式等。可抽拉方式可以是由电子设备控制的,也可以是机械系统控制的,本申请实施例不作限制。
示例性的,如图2所示,电子设备的镜头模组包括镜头、M个光谱滤光片(例如1#光谱滤光片至M#光谱滤光片)、传感器(例如实感像素传感器)和红外滤光片;待拍摄对象的光线通过M个光谱滤光片中的某些光谱滤光片进行滤光处理后,进入到传感器中,以通过传感器实现图像的采集。
需要说明的是,上述传感器内滤光片,是将常规传感器内的每个像素上的CFA,即RGB滤光片替换成光谱滤光片,每个光谱滤光片对应允许通过的光谱波段。
示例性的,如图3所示,电子设备的镜头模组包括镜头和传感器(例如实感像素传感器),且该传感器内设置有M个光谱滤光片(图3中并未画出);待拍摄对象的光线进入到传感器后,传感器中的光谱滤光片对光线进行滤光处理后,并基于光线滤光处理后得到的特定光谱的光线实现图像的采集。
本申请实施例的另一种实现方式中,电子设备包括镜头模组,该镜头模组至少包括以下组件:镜头、FPI多光谱组件和传感器(例如实感像素传感器、常规传感器等)。电子设备可以通过FPI多光谱组件和多光谱技术,获取特定光谱的光线(例如待拍摄对象的目标光线),以实现仅对待拍摄对象进行图像采集。
需要说明的是,电子设备的镜头模组的内部空间在设计时,可以做大一些并且在镜头模组的底部侧面留出一定的空间,以保证能够放置FPI多光谱组件,且FPI多光谱组件与红外滤光片的切换不受干扰。FPI多光谱组件和红外滤光片在镜头模组内部的具体固定方式,可以根据实际使用需求确定,本申请实施例不作限制。
可选地,本申请实施例中,上述FPI多光谱组件可以设置在镜头内侧(即镜头与传感器之间);红外滤光片可以设置在FPI多光谱组件与传感器之间。
可选地,本申请实施例中,上述FPI多光谱组件的设置方式可以为可抽拉方式或轮盘方式等。可抽拉方式可以是由电子设备控制的,也可以是机械系统控制的,本申请实施例不作限制。
示例性的,如图4所示,电子设备的镜头模组包括镜头、FPI多光谱组件、红外滤光片和传感器(例如实感像素传感器);待拍摄对象的光线通过FPI多光谱组件进行光线筛选后,将透过FPI多光谱组件的特定光谱的光线传入到传感器中,以通过传感器实现图像的采集。
又示例性的,如图5所示,在进行常规图像采集(即无需进行特定光谱的光线的筛选)时,电子设备可以控制FPI多光谱组件移动至其他位置,以使得待拍摄对象的光线无需经过FPI多光谱组件的筛选,而是直接经过红外滤光片进入到传感器中,以通过传感器实现图像的采集。
可选地,本申请实施例中,上述FPI多光谱组件可以包括法珀腔动子(rest)和法珀腔定子(fixed);FPI多光谱组件为光学谐振腔,可以通过改变腔长来控制需要透过的波段的光线。一种实现方式,用户可以通过调整法珀腔动子与法珀腔定子之间的距离,以使得在目标光谱范围内的光线(例如目标光线)透过FPI多光谱组件;另一种实现方式,用户可以在电子设备中输入一个光谱范围(例如下述实施例所述的目标光谱范围),以使得电子设备控制法珀腔动子与法珀腔定子之间的距离,从而使得在目标光谱范围内的光线透过FPI多光谱组件。
可以理解,上述两种方式中,仅允许在目标光谱范围内的光线(即特定光谱的光线)透过FPI多光谱组件以进入到传感器中,使得传感器基于该特定光谱的光线进行图像采集,而在目标光谱范围外的光线并不能透过FPI多光谱组件进入到传感器中。
需要说明的是,物质的光谱具有唯一性,任何物质都有唯一的光谱反射曲线,即拉曼散射谱线。拉曼散射可以直接反映分子或晶格的振动、转动能级,对于不同物质来说,它们的组成成分或结构(分子、原子)不一样,所以任何两种不同的物质不会有完全相同的拉曼谱线,即物质的光谱反射曲线一定是唯一的,因此可以通过滤光片或FPI多光谱组件滤除掉/筛选掉不需要的光谱的光线,得到特定光谱的光线。
并且,摄像头模组的传感器感光的方式和人眼类似,像素上覆盖的CFA模拟人眼的三种视锥细胞,对光谱反射曲线进行采样,形成数字信号后通过ISP模块的处理,最终成为图像,所以传感器成像是对入射光谱曲线进行三原色采样,形成三个离散数据(也可以理解为三光谱采样),最终混合成颜色和亮度,所以人眼和摄像头的只能看到颜色和亮度,无法看到光谱曲线的细节(同色异谱现象)。电子设备的摄像头对很多物质特征和属性(例如肤色健康程度等特征)是不具备识别能力的,而多光谱技术可以协助摄像头的传感器对物质特征和属性进行识别,多光谱技术可以分为时域多光谱和空域多光谱。
需要说明的是,本申请实施例中,上述实感像素传感器可以理解为一种新型的传感器,是在常规传感器中集成一些特殊像素(可以称为实感像素),这些像素可以独立输出运动物体的信息,以利用实感像素实时地抓取高精度动态物体的轮廓图(例如抓取正在运动的被拍摄物体的运动信息)。实感像素传感器除了电路设计更加抗噪声、抗干扰以外,还具有测距功能。实感像素传感器可以包括两个感光二极管,分别代表两个感光单元,如此便可以得到待拍摄对象的相位差信息,通过相位差信息和镜头模组的光学设计,便可以计算出运动物体与镜头之间的距离,以快速完成相位对焦。针对通过实感像素传感器获取运动状态下的图像的方法,将在下述实施例中进行描述,此处不予赘述。
可选地,本申请实施例中,上述镜头模组还可以包括以下至少一项:镜头保护盖、音圈马达(VCM)、镜头支架、红外滤光片、柔性电路板(FPC)、镜头模组连接器等。
可选地,在本申请实施例的一种实现方式中,上述目标光谱组件为M个光谱滤光片。在上述步骤201之前,本申请实施例提供的对焦方法还包括下述的步骤301,并且上述步骤201具体可以通过下述的步骤201a实现。
步骤301、电子设备接收用户的第一输入。
本申请实施例中,上述第一输入为用户对目标光谱范围的输入,上述目标光线的光谱在目标光谱范围内。
本申请实施例中,用户可以在电子设备中输入目标光谱范围,以使得电子设备在检测到光线时,允许光谱位于目标光谱范围内的光线(例如待拍摄对象的光线)透过滤光片进入到传感器中,而将其他光线滤除掉,从而使得传感器基于接收到的光线进行图像采集。
步骤201a、电子设备响应于第一输入,从M个光谱滤光片中确定与目标光谱范围对应的N个光谱滤光片,并通过N个光谱滤光片,对光谱处于目标光谱范围外的光线进行滤光处理,以获取目标光线。
本申请实施例中,N为小于或等于M的正整数。
本申请实施例中,每个光谱滤光片分别对应一个光谱频段(即允许透过的光谱的频段),电子设备可以根据用户输入的目标光谱范围,控制光谱频段在目标光谱范围内的光谱滤光片(例如N个光谱滤光片)处于工作状态,从而通过这些光谱滤光片进行其他光线(即光谱位于目标光谱范围外的光线)的滤光处理。
需要说明的是,控制N个光谱滤光片处于工作状态可以理解为:控制N个光谱滤光片转动至预设位置,以使得该N个光谱滤光片能够接收到光线;或者,控制N个光谱滤光片处于通电状态,以使得该N个光谱滤光片接收光线。
本申请实施例中,用户可以通过N个光谱滤光片和多光谱技术选择想要获取的特定光谱,以使得电子设备实现仅对待拍摄对象的图像进行采集,达到剔除冗余信息(例如待拍摄对象周围的环境信息)的目的,进而再通过实感像素技术只对动态物体进行高精度识别,以快速、准确地获取动态物体对应的图像序列和相位差信息集合,从而实现快速地对动态物体对焦,避免拍摄得到的图像出现模糊的现象,提升电子设备的拍摄效果。
可选地,在本申请实施例的另一种实现方式中,上述目标光谱组件为FPI多光谱组件,该FPI多光谱组件包括法珀腔动子和法珀腔定子。在上述步骤201之前,本申请实施例提供的对焦方法还包括下述的步骤401,并且上述步骤201具体可以通过下述的步骤201b实现。
步骤401、电子设备接收用户的第二输入。
本申请实施例中,上述第二输入为用户对目标光谱范围的输入,上述目标光线的光谱在目标光谱范围内。
本申请实施例中,用户可以在电子设备中输入目标光谱范围,以使得电子设备在检测到光线时,允许光谱位于目标光谱范围内的光线(例如待拍摄对象的光线)透过FPI多光谱组件进入到传感器中,而将其他光线(例如待拍摄对象周围环境中的光线)滤除掉,从而使得传感器基于接收到的光线进行图像采集。
步骤201b、电子设备响应于第二输入,控制法珀腔动子与法珀腔定子之间的距离在预设距离范围内,以允许在目标光谱范围内的光线透过FPI多光谱组件,以获取目标光线。
本申请实施例中,不同的距离范围对应的不同的光谱频段(即允许透过的光谱的频段),电子设备可以根据用户输入的目标光谱范围,控制法珀腔定子移动,以使得法珀腔动子与法珀腔定子之间的距离在预设距离范围(该预设距离范围对应目标光谱范围),从而使得FPI多光谱组件仅透过在目标光谱范围内的光线(例如目标光线),而在目标光谱范围外的光线并不能够透过FPI多光谱组件进入到传感器中,即在目标光谱范围外的光线被滤除掉了。
示例性的,如图6所示,上述FPI多光谱组件包括法珀腔动子和法珀腔定子,法珀腔动子和法珀腔定子均处于初始位置时,法珀腔动子与法珀腔定子之间的距离最大(例如距离d1),可以通过移动法珀腔动子,调整法珀腔动子与法珀腔定子之间的距离,使得FPI多光谱组件的法珀腔可以透过特定波段(与法珀腔动子与法珀腔定子之间的距离所在距离范围对应的波段)的光线,例如调整到最小距离d2,此时法珀腔动子处于移动后的位置(图6中以虚线框示意)。
本申请实施例中,用户可以通过FPI多光谱组件和多光谱技术选择想要获取的特定光谱,以使得电子设备实现仅对待拍摄对象的图像进行采集,达到剔除冗余信息(例如待拍摄对象周围的环境信息)的目的,进而再通过实感像素技术只对动态物体进行高精度识别,以快速、准确地获取动态物体对应的图像序列和相位差信息集合,从而实现快速地对动态物体对焦,避免拍摄得到的图像出现模糊的现象,提升电子设备的拍摄效果。
步骤202、电子设备根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合。
本申请实施例中,上述实感像素传感器用于采集处于运动状态的对象的图像;上述目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息;上述目标对象为待拍摄对象中处于运动状态的对象。
本申请实施例中,上述目标图像序列包括目标对象的多帧图像,即目标图像序列为在目标对象运动过程中实时采集的目标对象的图像。上述相位差信息集合包括目标对象的多个相位差信息,该多个相位差信息中的每个相位差信息分别与目标对象的多帧图像中的一帧图像对应,即不同帧图像对应不同的相位差信息。
需要说明的是,上述目标对象可以为待拍摄对象,或者为待拍摄对象的一部分对象。
本申请实施例中,用户在启用具有拍摄功能的应用程序之后,电子设备的摄像头模组中的实感像素传感器处于工作状态,在检测到被拍摄对象/待拍摄对象中的目标对象处于运动状态的情况下,可以实时地获取处于运动状态的目标对象的多帧图像和每帧图像对应的相位差信息,以在该每帧图像曝光前对运动物体进行对焦。
需要说明的是,实感像素传感器可以仅对运动物体(例如目标对象)的图像进行输出,即输出信号数据量小,并且实感像素传感器频率极高、实时性非常好,实感像素传感器本身也具备对运动物体进行相位检测的能力,可以获取只针对运动物体的相位信息,因此实感像素传感器能够实时地提供运动物体的位置信息和距离,使得摄像头在每帧图像曝光前对运动物体进行对焦,以达到实时对焦的效果。实感像素传感器相比较于常规传感器,常规传感器要在一个时间段内(和帧率相关)对光信息做积分后按照顺序逐个读出,而实感像素传感器可以分别独立的,随着像素时钟频率(即每个时间单位),实感像素传感器可以实时感知外界环境亮度变化(即光线亮度变化),将环境亮度的变换转化成电流的变化,进而转换成数字信号的变化,如果某个实感像素的数字信号的变化量超过预设阈值(例如下述实施例所述的VH和VL),则会上报系统要求输出对应的图像(即确定该实感像素对应的对象处于运动状态),并且输出带有坐标信息、亮度信息、时间信息的数据包。所以,实感像素传感器相比较于常规传感器的实时性更好,信号冗余性更好,精度更高,可以捕捉动态物体的运动信息和相位差信息,具有较高的实时性和精度。
可以理解,上述实感像素传感器是用来采集处于运动状态的对象的图像的,而对于静止状态的对象,实感像素传感器是可以不进行图像采集的。
示例性的,如图7所示,电子设备可以通过电流放大模块对输入的光信号(光线对应的光信号)进行电流放大处理,然后通过模数转换模块对电流放大处理后的光信号进行信号转换处理,得到对应的数字信号,再通过逻辑判断模块判断数字信号的变化量(即上一时钟频率的数字信号与当前时钟频率的数字信号的强度变化量)是否超过预设阈值VH和VL(图中VH为上一时钟频率时该实感像素的数字信号值+阈值,VL为上一时钟频率时该实感像素的数字信号值-阈值),并在数字信号的变化量超过预设阈值的情况下,通过信号控制模块、模拟信号输出模块和多路复用开关模块等,输出对应的模拟信号(即图像)。
可选地,本申请实施例中,电子设备在通过传感器外滤光片获取目标光线之后,可以通过密度实感像素传感器,获取目标对象的目标图像序列和相位差信息集合。需要说明的是,密度实感像素传感器是将实感像素按密度插入常规传感器(如图8所示,电子设备的传感器包括常规像素(即红绿蓝(RGB)像素和实感像素),即使得传感器在不影响正常输出彩色图像的同时,具有精确高速抓取运动物体轮廓的能力。
本申请实施例中,上述通过传感器外滤光片和密度实感像素传感器获取目标图像序列和相位差信息集合的方式中,在实现抓取特定光谱下的高速运动物体的图像的同时,可以不损失常规彩色图像的拍摄功能;用户后续需求使用常规彩色图像的拍摄功能时,可以将传感器外滤光片全部收回,以实现常规彩色图像的拍摄。
可选地,本申请实施例中,电子设备在通过传感器内滤光片获取目标光线之后,可以继续通过包括滤光片的传感器(即上述将常规传感器内的每个像素上的CFA替换成光谱滤光片后的传感器),获取目标对象的目标图像序列和相位差信息集合。需要说明的是,该传感器中不再有常规像素,即该传感器中的像素全部为实感像素。
示例性的,如表1和表2所示,示出了两种不同的实感像素传感器(例如实感像素传感器1和实感像素传感器2)中的滤光片分布情况。其中,实感像素传感器1和实感像素传感器2中的像素均全部为实感像素。
表1
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 | s1 | s2 |
s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 | s3 | s4 |
在上述表1中,s1~s4表示实感像素传感器1中的不同波段的滤光片。
表2
s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 |
s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 |
s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 |
s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 |
s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 |
s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 |
s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 |
s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 |
s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 |
s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 |
s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 |
s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 |
s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 | s1 | s2 | s3 |
s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 | s4 | s5 | s6 |
s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 | s7 | s8 | s9 |
在上述表2中,s1~s9表示实感像素传感器2中的不同波段的滤光片。
本申请实施例中,上述通过传感器内滤光片和实感像素传感器获取目标图像序列和相位差信息集合的方式中,镜头模组的结构简单,无须额外的滤光结构,设计难度低,生产良率和可靠性高。
可选地,本申请实施例中,上述步骤202具体可以通过下述的步骤202a和步骤202b实现。
步骤202a、电子设备通过实感像素传感器,将目标光线中满足预设条件的光线对应的对象确定为目标对象。
本申请实施例中,上述预设条件为光线的信号变化量大于或等于预设阈值。
可以理解,在光线的信号变化量大于或等于预设阈值的情况下,可以确定该光线对应的对象处于运动状态。需要说明的是,针对光线的信号变化量的相关说明,可以参见上述步骤202中的描述,此处不再赘述。
步骤202b、电子设备获取目标对象在每个时间单位的像素点信息和相位差信息,并根据每个时间单位的像素点信息生成目标图像序列,以及根据每个时间单位的相位差信息确定相位差信息集合。
本申请实施例中,在目标对象运动的过程中,电子设备可以每隔一个时间单位获取目标对象的像素点信息和相位差信息,并根据获取的当前时间单位的像素点信息生成一帧图像,依次类推,直至目标对象处于静止状态,以获取多帧图像,即目标图像序列;并且,电子设备可以将在每个时间单位获取的相位差信息,确定为相位差信息集合。
可选地,本申请实施例中,上述像素点信息可以包括以下至少一项:目标对象对应的像素点亮度值、目标对象对应的像素点分布信息、目标对象对应的像素点颜色值等。
步骤203、电子设备根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。
本申请实施例中,电子设备可以根据实时获取的目标对象的多帧图像和每帧图像对应的相位差信息,以在每帧图像曝光前对运动物体进行对焦。
可以理解,上述目标图像序列为目标对象处于运动状态时获取的多帧图像,每帧图像分别对应一个相位差信息,每个相位差信息分别对应一个对焦点/合焦点;电子设备可以根据每帧图像对应的相位差信息,确定对应的对焦点,即针对每帧图像,电子设备对目标对象对焦时的对焦点不同,从而电子设备根据每帧图像对应的对焦点,在每帧图像曝光前对目标对象进行对焦。
可选地,本申请实施例中,上述步骤203具体可以通过下述的步骤203a和步骤203b实现。
步骤203a、针对目标图像序列中的每帧图像,电子设备根据一帧图像对应的相位差信息,确定该一帧图像对应的目标位置和目标距离,以确定每帧图像对应的目标位置和目标距离。
本申请实施例中,上述一帧图像对应的目标位置为采集该一帧图像时目标对象所处的位置,上述一帧图像对应的目标距离为采集该一帧图像时目标对象与电子设备的摄像头之间的距离。
步骤203b、电子设备根据每帧图像对应的目标位置和目标距离,分别控制电子设备的摄像头对目标对象对焦。
可以理解,目标图像序列中的每帧图像对应的相位差信息不同,不同相位差信息对应不同的对焦相关信息(即目标位置和目标距离),不同的对焦相关信息对应不同的对焦点;电子设备可以在目标对象运动过程中,获取第一帧图像对应的目标对象的相位差信息,并通过预设算法将该一帧图像对应的相位差信息,转换为该一帧图像对应的目标位置和目标距离,以根据该目标位置和目标距离,确定该一帧图像对应的对焦点,然后再基于该对焦点调整镜头与传感器之间的距离,实现该一帧图像对应的目标对象的对焦,以此类推,直至目标对象处于静止状态,从而实现在每帧图像曝光前对目标对象进行对焦。
可选地,本申请实施例中,电子设备在完成对焦后,可以曝光输出目标对象的图像,并通过ISP模块对该图像处理,以在拍摄预览界面中输出处理后的图像;或者,电子设备在完成对焦后,可以曝光输出目标对象的图像,并在检测到用户的拍摄输入的情况下,通过ISP模块对该图像进行处理,并将ISP处理后的图像进行压缩处理,以得到一张目标格式(例如JPG格式)的图片。
本申请实施例提供一种对焦方法,电子设备可以通过摄像头模组上的目标光谱组件,获取待拍摄对象对应的目标光线,并根据该目标光线,通过实感像素传感器获取处于运动状态的目标对象的目标图像序列和相位差信息集合,以根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。由于电子设备的摄像头模组包括目标光谱组件和实感像素传感器,因此电子设备可以通过目标光谱组件进行光线筛选,仅获取待拍摄对象的光线,以减小冗余数据量,从而使得实感像素传感器可以快速地基于该待拍摄对象的光线得到对应的图像;并且,由于实感像素传感器是用于采集处于运动状态的对象的图像的,且具有实时抓取高精度动态物体和相位差信息的特性,因此通过实感像素传感器能够采集到处于运动状态的目标对象的图像序列和与图像序列对应的相位差信息,即通过实感像素传感器能够准确、实时地获取到目标对象在运动过程中,目标对象的每帧图像对应的相位差信息,从而电子设备可以根据该每帧图像对应的相位差信息,快速、准确地对运动状态下的目标对象进行对焦,避免了拍摄得到的图像出现模糊的现象,如此提升了电子设备的拍摄效果。
需要说明的是,本申请实施例提供的对焦方法,执行主体可以为对焦装置,或者该对焦装置中的用于执行对焦方法的控制模块。本申请实施例中以对焦装置执行对焦方法为例,说明本申请实施例提供的对焦装置。
图9示出了本申请实施例中涉及的对焦装置的一种可能的结构示意图,对焦装置的摄像头模组包括目标光谱组件和实感像素传感器。如图9所示,该对焦装置60可以包括:获取模块61和控制模块62。
其中,获取模块61,用于通过目标光谱组件,获取待拍摄对象对应的目标光线,该目标光谱组件为M个光谱滤光片或FPI多光谱组件,M为正整数;并根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合,该目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息,该目标对象为待拍摄对象中处于运动状态的对象。控制模块62,用于根据获取模块61获取的目标图像序列和相位差信息集合,控制摄像头对焦。
在一种可能的实现方式中,上述目标光谱组件为M个光谱滤光片。本申请实施例提供的对焦装置60还包括:接收模块。其中,接收模块,用于在获取模块61通过目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第一输入,该第一输入为用户对目标光谱范围的输入,该目标光线的光谱在目标光谱范围内。获取模块61,具体用于响应于接收模块接收的第一输入,从M个光谱滤光片中确定与目标光谱范围对应的N个光谱滤光片,并通过N个光谱滤光片,对光谱处于目标光谱范围外的光线进行滤光处理,以获取目标光线,N为小于或等于M的正整数。
在一种可能的实现方式中,上述目标光谱组件为FPI多光谱组件;FPI多光谱组件包括法珀腔动子和法珀腔定子。本申请实施例提供的对焦装置60还包括:接收模块。其中,接收模块,用于在获取模块61通过目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第二输入,该第二输入为用户对目标光谱范围的输入,该目标光线的光谱在目标光谱范围内。上述获取模块61,具体用于响应于接收模块接收的第二输入,控制法珀腔动子与法珀腔定子之间的距离在预设距离范围内,以允许在目标光谱范围内的光线透过FPI多光谱组件,以获取目标光线。
在一种可能的实现方式中,上述获取模块61,具体用于通过实感像素传感器,将目标光线中满足预设条件的光线对应的对象确定为目标对象,该预设条件为光线的信号变化量大于或等于预设阈值;并获取目标对象在每个时间单位的像素点信息和相位差信息,以及根据每个时间单位的像素点信息生成目标图像序列,根据每个时间单位的相位差信息确定相位差信息集合。
在一种可能的实现方式中,上述控制模块62,具体用于针对目标图像序列中的每帧图像,根据一帧图像对应的相位差信息,确定一帧图像对应的目标位置和目标距离,以确定每帧图像对应的目标位置和目标距离,一帧图像对应的目标位置为采集一帧图像时目标对象所处的位置,一帧图像对应的目标距离为采集一帧图像时目标对象与的摄像头之间的距离;并根据每帧图像对应的目标位置和目标距离,分别控制摄像头对目标对象对焦。
本申请实施例提供一种对焦装置,由于对焦装置的摄像头模组包括目标光谱组件和实感像素传感器,因此可以通过目标光谱组件进行光线筛选,仅获取待拍摄对象的光线,以减小冗余数据量,从而使得实感像素传感器可以快速地基于该待拍摄对象的光线得到对应的图像;并且,由于实感像素传感器是用于采集处于运动状态的对象的图像的,且具有实时抓取高精度动态物体和相位差信息的特性,因此通过实感像素传感器能够采集到处于运动状态的目标对象的图像序列和与图像序列对应的相位差信息,即通过实感像素传感器能够准确、实时地获取到目标对象在运动过程中,目标对象的每帧图像对应的相位差信息,从而可以根据该每帧图像对应的相位差信息,快速、准确地对运动状态下的目标对象进行对焦,避免了拍摄得到的图像出现模糊的现象,如此提升了拍摄效果。
本申请实施例中的对焦装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的对焦装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的对焦装置能够实现上述方法实施例实现的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
可选地,如图10所示,本申请实施例还提供一种电子设备90,包括处理器91,存储器92,存储在存储器92上并可在所述处理器91上运行的程序或指令,该程序或指令被处理器91执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图11为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图11中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
本申请实施例中,电子设备的摄像头模组包括目标光谱组件和实感像素传感器。
其中,处理器110,用于通过目标光谱组件,获取待拍摄对象对应的目标光线,该目标光谱组件为M个光谱滤光片或FPI多光谱组件,M为正整数;根据目标光线,通过实感像素传感器获取目标对象的目标图像序列和相位差信息集合,该目标图像序列中的每帧图像分别对应相位差信息集合中的一个相位差信息,该目标对象为待拍摄对象中处于运动状态的对象;根据目标图像序列和相位差信息集合,控制电子设备的摄像头对焦。
本申请实施例提供一种电子设备,由于电子设备的摄像头模组包括目标光谱组件和实感像素传感器,因此电子设备可以通过目标光谱组件进行光线筛选,仅获取待拍摄对象的光线,以减小冗余数据量,从而使得实感像素传感器可以快速地基于该待拍摄对象的光线得到对应的图像;并且,由于实感像素传感器是用于采集处于运动状态的对象的图像的,且具有实时抓取高精度动态物体和相位差信息的特性,因此通过实感像素传感器能够采集到处于运动状态的目标对象的图像序列和与图像序列对应的相位差信息,即通过实感像素传感器能够准确、实时地获取到目标对象在运动过程中,目标对象的每帧图像对应的相位差信息,从而电子设备可以根据该每帧图像对应的相位差信息,快速、准确地对运动状态下的目标对象进行对焦,避免了拍摄得到的图像出现模糊的现象,如此提升了电子设备的拍摄效果。
可选地,本申请实施例中,上述目标光谱组件为M个光谱滤光片。用户输入单元107,用于在处理器110通过目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第一输入,该第一输入为用户对目标光谱范围的输入,该目标光线的光谱在目标光谱范围内。处理器110,具体用于响应于第一输入,从M个光谱滤光片中确定与目标光谱范围对应的N个光谱滤光片,并通过N个光谱滤光片,对光谱处于目标光谱范围外的光线进行滤光处理,以获取目标光线,N为小于或等于M的正整数。
可选地,本申请实施例中,上述目标光谱组件为FPI多光谱组件;该FPI多光谱组件包括法珀腔动子和法珀腔定子。用户输入单元107,还用于在处理器110通过目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第二输入,该第二输入为用户对目标光谱范围的输入,该目标光线的光谱在目标光谱范围内。处理器110,具体用于响应于第二输入,控制法珀腔动子与法珀腔定子之间的距离在预设距离范围内,以允许在目标光谱范围内的光线透过FPI多光谱组件,以获取目标光线。
可选地,本申请实施例中,处理器110,具体用于通过实感像素传感器,将目标光线中满足预设条件的光线对应的对象确定为目标对象,该预设条件为光线的信号变化量大于或等于预设阈值;并且,获取目标对象在每个时间单位的像素点信息和相位差信息,并根据每个时间单位的像素点信息生成目标图像序列,以及根据每个时间单位的相位差信息确定相位差信息集合。
可选地,本申请实施例中,处理器110,具体用于针对目标图像序列中的每帧图像,根据一帧图像对应的相位差信息,确定该一帧图像对应的目标位置和目标距离,以确定每帧图像对应的目标位置和目标距离,该一帧图像对应的目标位置为采集该一帧图像时目标对象所处的位置,该一帧图像对应的目标距离为采集该一帧图像时目标对象与电子设备的摄像头之间的距离;并根据每帧图像对应的目标位置和目标距离,分别控制电子设备的摄像头对目标对象对焦。
本申请实施例提供的电子设备能够实现上述方法实施例实现的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解的是,本申请实施例中,输入单元104可以包括图形处理器(GraphicsProcessing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器109可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (12)
1.一种对焦方法,其特征在于,应用于电子设备,所述电子设备的摄像头模组包括目标光谱组件和实感像素传感器,所述方法包括:
通过所述目标光谱组件,获取待拍摄对象对应的目标光线,所述目标光谱组件为M个光谱滤光片或法珀干涉仪FPI多光谱组件,M为正整数;
根据所述目标光线,通过所述实感像素传感器获取目标对象的目标图像序列和相位差信息集合,所述目标图像序列中的每帧图像分别对应所述相位差信息集合中的一个相位差信息,所述目标对象为所述待拍摄对象中处于运动状态的对象;
根据所述目标图像序列和所述相位差信息集合,控制所述电子设备的摄像头对焦。
2.根据权利要求1所述的方法,其特征在于,所述目标光谱组件为所述M个光谱滤光片;
所述通过所述目标光谱组件,获取待拍摄对象对应的目标光线之前,所述方法还包括:
接收用户的第一输入,所述第一输入为用户对目标光谱范围的输入,所述目标光线的光谱在所述目标光谱范围内;
所述通过所述目标光谱组件,获取待拍摄对象对应的目标光线,包括:
响应于所述第一输入,从所述M个光谱滤光片中确定与所述目标光谱范围对应的N个光谱滤光片,并通过所述N个光谱滤光片,对光谱处于所述目标光谱范围外的光线进行滤光处理,以获取所述目标光线,N为小于或等于M的正整数。
3.根据权利要求1所述的方法,其特征在于,所述目标光谱组件为所述FPI多光谱组件;所述FPI多光谱组件包括法珀腔动子和法珀腔定子;
所述通过所述目标光谱组件,获取待拍摄对象对应的目标光线之前,所述方法还包括:
接收用户的第二输入,所述第二输入为用户对目标光谱范围的输入,所述目标光线的光谱在所述目标光谱范围内;
所述通过所述目标光谱组件,获取待拍摄对象对应的目标光线,包括:
响应于所述第二输入,控制所述法珀腔动子与所述法珀腔定子之间的距离在预设距离范围内,以允许在所述目标光谱范围内的光线透过所述FPI多光谱组件,以获取所述目标光线。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述根据所述目标光线,通过所述实感像素传感器获取目标对象的目标图像序列和相位差信息集合,包括:
通过所述实感像素传感器,将所述目标光线中满足预设条件的光线对应的对象确定为所述目标对象,所述预设条件为光线的信号变化量大于或等于预设阈值;
获取所述目标对象在每个时间单位的像素点信息和相位差信息,并根据所述每个时间单位的像素点信息生成所述目标图像序列,以及根据所述每个时间单位的相位差信息确定所述相位差信息集合。
5.根据权利要求1至3中任一项所述的方法,其特征在于,所述根据所述目标图像序列和所述相位差信息集合,控制所述电子设备的摄像头对焦,包括:
针对所述目标图像序列中的每帧图像,根据一帧图像对应的相位差信息,确定所述一帧图像对应的目标位置和目标距离,以确定所述每帧图像对应的目标位置和目标距离,所述一帧图像对应的目标位置为采集所述一帧图像时所述目标对象所处的位置,所述一帧图像对应的目标距离为采集所述一帧图像时所述目标对象与所述电子设备的摄像头之间的距离;
根据所述每帧图像对应的目标位置和目标距离,分别控制所述电子设备的摄像头对所述目标对象对焦。
6.一种对焦装置,其特征在于,所述对焦装置的摄像头模组包括目标光谱组件和实感像素传感器,所述对焦装置包括:获取模块和控制模块;
所述获取模块,用于通过所述目标光谱组件,获取待拍摄对象对应的目标光线,所述目标光谱组件为M个光谱滤光片或法珀干涉仪FPI多光谱组件,M为正整数;并根据所述目标光线,通过所述实感像素传感器获取目标对象的目标图像序列和相位差信息集合,所述目标图像序列中的每帧图像分别对应所述相位差信息集合中的一个相位差信息,所述目标对象为所述待拍摄对象中处于运动状态的对象;
所述控制模块,用于根据所述获取模块获取的所述目标图像序列和所述相位差信息集合,控制所述摄像头对焦。
7.根据权利要求6所述的装置,其特征在于,所述目标光谱组件为所述M个光谱滤光片;
所述对焦装置还包括:接收模块;
所述接收模块,用于在所述获取模块通过所述目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第一输入,所述第一输入为用户对目标光谱范围的输入,所述目标光线的光谱在所述目标光谱范围内;
所述获取模块,具体用于响应于所述接收模块接收的所述第一输入,从所述M个光谱滤光片中确定与所述目标光谱范围对应的N个光谱滤光片,并通过所述N个光谱滤光片,对光谱处于所述目标光谱范围外的光线进行滤光处理,以获取所述目标光线,N为小于或等于M的正整数。
8.根据权利要求6所述的装置,其特征在于,所述目标光谱组件为所述FPI多光谱组件;所述FPI多光谱组件包括法珀腔动子和法珀腔定子;
所述对焦装置还包括:接收模块;
所述接收模块,用于在所述获取模块通过所述目标光谱组件,获取待拍摄对象对应的目标光线之前,接收用户的第二输入,所述第二输入为用户对目标光谱范围的输入,所述目标光线的光谱在所述目标光谱范围内;
所述获取模块,具体用于响应于所述接收模块接收的所述第二输入,控制所述法珀腔动子与所述法珀腔定子之间的距离在预设距离范围内,以允许在所述目标光谱范围内的光线透过所述FPI多光谱组件,以获取所述目标光线。
9.根据权利要求6至8中任一项所述的装置,其特征在于,所述获取模块,具体用于通过所述实感像素传感器,将所述目标光线中满足预设条件的光线对应的对象确定为所述目标对象,所述预设条件为光线的信号变化量大于或等于预设阈值;并获取所述目标对象在每个时间单位的像素点信息和相位差信息,以及根据所述每个时间单位的像素点信息生成所述目标图像序列,根据所述每个时间单位的相位差信息确定所述相位差信息集合。
10.根据权利要求6至8中任一项所述的装置,其特征在于,所述控制模块,具体用于针对所述目标图像序列中的每帧图像,根据一帧图像对应的相位差信息,确定所述一帧图像对应的目标位置和目标距离,以确定所述每帧图像对应的目标位置和目标距离,所述一帧图像对应的目标位置为采集所述一帧图像时所述目标对象所处的位置,所述一帧图像对应的目标距离为采集所述一帧图像时所述目标对象与所述摄像头之间的距离;并根据所述每帧图像对应的目标位置和目标距离,分别控制所述摄像头对所述目标对象对焦。
11.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至5中任一项所述的对焦方法的步骤。
12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至5中任一项所述的对焦方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011563775.1A CN112672054B (zh) | 2020-12-25 | 2020-12-25 | 对焦方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011563775.1A CN112672054B (zh) | 2020-12-25 | 2020-12-25 | 对焦方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112672054A true CN112672054A (zh) | 2021-04-16 |
CN112672054B CN112672054B (zh) | 2022-06-10 |
Family
ID=75410071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011563775.1A Active CN112672054B (zh) | 2020-12-25 | 2020-12-25 | 对焦方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112672054B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113784044A (zh) * | 2021-08-26 | 2021-12-10 | 昆山丘钛微电子科技股份有限公司 | 一种摄像模组成像方法、摄像模组及电子设备 |
CN115118890A (zh) * | 2022-06-24 | 2022-09-27 | 维沃移动通信有限公司 | 摄像头模组、拍摄方法、拍摄装置和电子设备 |
CN115118892A (zh) * | 2022-06-24 | 2022-09-27 | 维沃移动通信有限公司 | 图像采集方法、装置及电子设备 |
CN116233602A (zh) * | 2022-12-15 | 2023-06-06 | 山东大学 | 一种高光谱相机的自动对焦方法、系统、介质及设备 |
WO2023193626A1 (zh) * | 2022-04-08 | 2023-10-12 | 华为技术有限公司 | 图像传感器、成像模组、图像采集设备和图像处理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102854704A (zh) * | 2011-06-29 | 2013-01-02 | 株式会社尼康 | 焦点调节装置及拍摄装置 |
CN106713746A (zh) * | 2016-11-29 | 2017-05-24 | 维沃移动通信有限公司 | 一种对焦方法及移动终端 |
US20190028631A1 (en) * | 2014-09-30 | 2019-01-24 | Huawei Technologies Co., Ltd. | Auto-Focus Method and Apparatus and Electronic Device |
CN110196640A (zh) * | 2019-05-31 | 2019-09-03 | 维沃移动通信有限公司 | 一种操作控制方法及终端 |
CN110290328A (zh) * | 2019-07-04 | 2019-09-27 | Oppo广东移动通信有限公司 | 一种对焦方法、装置、终端和计算机存储介质 |
CN110798601A (zh) * | 2019-11-29 | 2020-02-14 | 维沃移动通信有限公司 | 摄像模组、电子设备、拍摄控制方法及装置 |
-
2020
- 2020-12-25 CN CN202011563775.1A patent/CN112672054B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102854704A (zh) * | 2011-06-29 | 2013-01-02 | 株式会社尼康 | 焦点调节装置及拍摄装置 |
US20190028631A1 (en) * | 2014-09-30 | 2019-01-24 | Huawei Technologies Co., Ltd. | Auto-Focus Method and Apparatus and Electronic Device |
CN106713746A (zh) * | 2016-11-29 | 2017-05-24 | 维沃移动通信有限公司 | 一种对焦方法及移动终端 |
CN110196640A (zh) * | 2019-05-31 | 2019-09-03 | 维沃移动通信有限公司 | 一种操作控制方法及终端 |
CN110290328A (zh) * | 2019-07-04 | 2019-09-27 | Oppo广东移动通信有限公司 | 一种对焦方法、装置、终端和计算机存储介质 |
CN110798601A (zh) * | 2019-11-29 | 2020-02-14 | 维沃移动通信有限公司 | 摄像模组、电子设备、拍摄控制方法及装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113784044A (zh) * | 2021-08-26 | 2021-12-10 | 昆山丘钛微电子科技股份有限公司 | 一种摄像模组成像方法、摄像模组及电子设备 |
CN113784044B (zh) * | 2021-08-26 | 2023-07-18 | 昆山丘钛微电子科技股份有限公司 | 一种摄像模组成像方法、摄像模组及电子设备 |
WO2023193626A1 (zh) * | 2022-04-08 | 2023-10-12 | 华为技术有限公司 | 图像传感器、成像模组、图像采集设备和图像处理方法 |
CN115118890A (zh) * | 2022-06-24 | 2022-09-27 | 维沃移动通信有限公司 | 摄像头模组、拍摄方法、拍摄装置和电子设备 |
CN115118892A (zh) * | 2022-06-24 | 2022-09-27 | 维沃移动通信有限公司 | 图像采集方法、装置及电子设备 |
CN116233602A (zh) * | 2022-12-15 | 2023-06-06 | 山东大学 | 一种高光谱相机的自动对焦方法、系统、介质及设备 |
CN116233602B (zh) * | 2022-12-15 | 2024-06-04 | 山东大学 | 一种高光谱相机的自动对焦方法、系统、介质及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN112672054B (zh) | 2022-06-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112672054B (zh) | 对焦方法、装置及电子设备 | |
US9581436B2 (en) | Image processing device, image capturing apparatus, and image processing method | |
US9635274B2 (en) | High resolution multispectral image capture | |
EP2380345B1 (en) | Improving the depth of field in an imaging system | |
CN102783135A (zh) | 利用低分辨率图像提供高分辨率图像的方法和装置 | |
US20080266418A1 (en) | Method and apparatus for generating image | |
US9473700B2 (en) | Camera systems and methods for gigapixel computational imaging | |
CN105635533B (zh) | 一种具有高动态响应范围的快照式高光谱相机 | |
CN105453534A (zh) | 图像处理装置、摄像装置、图像处理方法及程序 | |
CN205080731U (zh) | 用于遥控交通工具的系统 | |
CN105021282A (zh) | 快照式偏振高光谱相机及成像方法 | |
CN112672021B (zh) | 语言识别方法、装置及电子设备 | |
US9538100B1 (en) | Systems and methods for image processing using visible and near-infrared spectral information | |
Kumar et al. | New digital camera sensor architecture for low light imaging | |
CN112669817B (zh) | 语言识别方法、装置及电子设备 | |
CN115278057A (zh) | 图像采集方法、装置、电子设备及存储介质 | |
CN115239550A (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN114125319A (zh) | 图像传感器、摄像模组、图像处理方法、装置和电子设备 | |
CN206514949U (zh) | 一种多光谱成像装置 | |
CN109118460B (zh) | 一种分光偏振光谱信息同步处理方法及系统 | |
CN113784044A (zh) | 一种摄像模组成像方法、摄像模组及电子设备 | |
CN115118856B (zh) | 图像传感器、图像处理方法、摄像头模组及电子设备 | |
CN116849624B (zh) | 基于4cmos的图像传感器荧光成像方法及系统 | |
EP4300936A1 (en) | Image sensor, image data acquisition method and imaging device | |
US20240302210A1 (en) | Method of performing color calibration of multispectral image sensor and image capturing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |