CN107205109B - 具有多摄像模块的电子装置及其控制的方法 - Google Patents
具有多摄像模块的电子装置及其控制的方法 Download PDFInfo
- Publication number
- CN107205109B CN107205109B CN201610592172.1A CN201610592172A CN107205109B CN 107205109 B CN107205109 B CN 107205109B CN 201610592172 A CN201610592172 A CN 201610592172A CN 107205109 B CN107205109 B CN 107205109B
- Authority
- CN
- China
- Prior art keywords
- camera
- module
- analysis information
- shooting
- common
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/72—Combination of two or more compensation controls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
本发明提出一种具有多摄像模块的电子装置及其控制的方法,此方法包括下列步骤。首先,利用至少一摄像模块,分别检测场景以产生摄像分析信息。接着,收集摄像分析信息,并且通过所有摄像模块之间的交谈程序,产生包括共同标的的共同摄像信息。之后,根据共同摄像信息,产生各个摄像模块的个别化摄像参数,并且使各个摄像模块以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像。本发明提出的电子装置及其控制的方法可以减少后续图像分析处理上的误差,有助于提升应用效能。
Description
技术领域
本发明是有关于一种具有多摄像模块的电子装置,且特别是有关于一种具有多摄像模块的电子装置及其控制的方法。
背景技术
随着科技的发展,各式各样的智能电子装置,举凡平板型电脑、个人数字化助理、智能手机等,已成为现代人不可或缺的工具。其中,高阶款的智能电子装置所搭载的相机镜头已经与传统消费型相机不相上下,甚至可以取而代之,少数高阶款还可通过双镜头而达到接近数字单眼的画质或是拍摄三维图像的功能。
以搭载双镜头的电子装置而言,其是利用两个镜头以不同视角取得相同场景的两张图像,再通过图像分析处理来进行深度估测、数字变焦、立体视觉等多种后续应用。然而,正因为两个镜头是以不同视角去观看相同场景,某些拍摄物体将会被弱化或是遮蔽,使得两个镜头所计算出的最佳对焦位置、曝光值、白平衡等摄像参数略有差异,进而导致后续图像分析处理上的困难以及误差。
发明内容
有鉴于此,本发明提供一种具有多摄像模块的电子装置及其控制的方法,其可通过所有摄像模块之间的交谈程序所产生的共同摄像信息来设定各个摄像模块的个别化摄像参数,据以获取拍摄场景的图像,从而减少后续图像分析处理上的误差。
在本发明的一实施例中,上述电子装置的控制方法包括下列步骤。首先,利用至少一摄像模块,分别检测场景以产生摄像分析信息。接着,收集摄像分析信息,并且通过所有摄像模块之间的交谈程序,产生包括共同标的的共同摄像信息。之后,根据共同摄像信息,产生各个摄像模块的个别化摄像参数,并且使各个摄像模块以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像。
在本发明的一实施例中,上述电子装置的控制方法包括下列步骤。首先,使各个摄像模块分别进行自动对焦程序,以产生各自的对焦分析信息。接着,针对所有摄像模块进行交谈程序,以整合所有对焦分析信息,并且产生关联于共同对焦区域的共同对焦信息。之后,利用共同对焦信息,分别产生各个摄像模块的个别化对焦参数,并且使各个摄像模块以其个别化对焦参数进行对焦程序,以分别产生对应的输出图像。
在本发明的一实施例中,上述的电子装置包括多个摄像模块、处理器以及图像处理器。处理器耦接各个摄像模块,并且包括分别对应于各个摄像模块的摄像参数调整模块以及交谈模块。至少一摄像参数调整模块利用对应的摄像模块,分别检测场景,以产生摄像分析信息。交谈模块收集所有摄像分析信息,并且通过所有摄像参数调整模块之间的交谈程序,产生包括共同标的的共同摄像信息。各个摄像参数调整模块根据共同摄像信息产生对应的摄像模块的个别化摄像参数,并且使对应的摄像模块以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像。图像处理器耦接各个摄像模块,并且自各个摄像模块接收对应的输出图像。
在本发明的一实施例中,上述的电子装置包括多个摄像模块、处理器以及图像处理器。处理器耦接各个摄像模块并且包括对应于各个摄像模块的多个对焦参数调整模块以及交谈模块。各个对焦参数调整模块使对应的摄像模块分别进行自动对焦程序,以产生各自的对焦分析信息。交谈模块针对所有对焦参数调整模块进行交谈程序,以整合所有对焦分析信息,并且产生关联于共同对焦区域的共同对焦信息。各个对焦参数调整模块利用共同对焦信息,分别产生对应的摄像模块的个别化对焦参数,并且使对应的摄像模块以其个别化对焦参数进行对焦程序,以分别产生对应的输出图像。图像处理器耦接各个摄像模块,并且自各个摄像模块接收对应的输出图像。
基于上述,本发明所提出具有多摄像模块的电子装置及其控制方法,其可在电子装置针对特定场景进行图像获取之前,针对所有摄像模块进行交谈程序,以产生关联于上述场景的共同摄像信息,而所有摄像模块将根据共同摄像信息所产生的个别化摄像参数来获取上述场景的图像,以减少后续图像分析处理上的误差,且有助于提升后续例如是深度估测、图像融合、距离量测、数字变焦、立体视觉等应用的效能。
为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合附图作详细说明如下。
附图说明
图1是根据本发明一实施例所示出的电子装置的方块图;
图2为根据本发明的一实施例所示出的电子装置的控制方法的流程图;
图3为根据本发明的一实施例所示出的电子装置的控制方法的流程图;
图4为根据本发明的一实施例所示出的电子装置的控制方法的流程图;
图5是根据本发明一实施例所示出的电子装置的方块图;
图6是根据本发明一实施例所示出的电子装置的方块图;
图7A为根据本发明的一实施例所示出的电子装置的控制方法的流程图;
图7B为根据本发明的一实施例所示出设定第一对焦分析信息以及第二对焦分析信息的示意图;
图7C为根据现有自动对焦方法所示出的输出图像示意图;
图7D为根据本发明的一实施例所示出的输出图像示意图;
图8A为根据本发明的一实施例所示出的电子装置的控制方法的流程图;
图8B为根据本发明的一实施例所示出设定第一对焦分析信息以及第二对焦分析信息的示意图;
图9是根据本发明一实施例所示出的电子装置的方块图;
图10是根据本发明一实施例所示出的电子装置的方块图;
图11为根据本发明的一实施例所示出设定第一曝光分析信息以及第二曝光分析信息的示意图;
图12是根据本发明一实施例所示出的电子装置的方块图;
图13是根据本发明一实施例所示出的电子装置的方块图;
图14是根据本发明一实施例所示出的电子装置的方块图;
图15是根据本发明一实施例所示出的电子装置的方块图。
附图标记说明:
100、500、600、900、1000、1200、1300、1400、1500:电子装置;
111、611、1011、1311:第一摄像模块;
112、612、1012、1312:第二摄像模块;
120、520、620、920、1020、1220、1320、1420、1520:处理器;
121:第一摄像参数调整模块;
122:第二摄像参数调整模块;
135、535、635、935、1035、1235、1335、1435、1535:交谈模块;
140、540、640、940、1040、1240、1340、1440、1540:图像处理器;
511~51n、911~91n、1211~121n、1411~141n、1511~151n:摄像模块;
521~52n:摄像参数调整模块;
621:第一对焦参数调整模块;
622:第二对焦参数调整模块;
921~92n:对焦参数调整模块;
1021:第一曝光参数调整模块;
1022:第二曝光参数调整模块;
1221~122n:曝光参数调整模块;
1321:第一白平衡参数调整模块;
1322:第二白平衡参数调整模块;
1421~142n:白平衡参数调整模块;
1521~152n:3A参数调整模块;
S202~S208、S301~S310、S402~S410、S702~S710、S802~S810:电子装置的控制方法流程;
71、72、81、82:曲线;
A、B、D、E、K:对焦位置;
750B、750D、750E:输出图像;
1150A、1150B:图像画面;
rA、rB:中间区域。
具体实施方式
本发明的部份实施例接下来将会配合附图来详细描述,以下的描述所引用的元件附图标记,当不同附图出现相同的元件附图标记将视为相同或相似的元件。这些实施例只是本发明的一部份,并未揭示所有本发明的可实施方式。更确切的说,这些实施例只是本发明的权利要求书中的方法与电子装置的范例。
图1是根据本发明一实施例所示出的具有多摄像模块的电子装置的方块图,但此仅是为了方便说明,并不用以限制本发明。首先图1先介绍电子装置的所有构件以及配置关系,详细功能将配合图2一并揭示。在本实施例中,将以具有两个摄像模块的电子装置来说明。
请参照图1,电子装置100包括第一摄像模块111、第二摄像模块112、处理器120以及图像处理器140。在本实施例中,电子装置100例如是数字摄像模块、单眼摄像模块、数字摄影机或是其他具有图像获取功能的智能手机、平板电脑、个人数字助理等电子装置,本发明不以此为限。
第一摄像模块111以及第二摄像模块112分别包括镜头以及感光元件。镜头包括透镜以及致动器。致动器可以例如是步进马达(stepping motor)、音圈马达(voice coilmotor,VCM)、压电致动器(piezoelectric actuator)或其它可机械式地移动透镜的致动器,本发明不在此设限。感光元件用以分别感测进入透镜的光线强度,进而分别产生图像。感光元件可以例如是电荷耦合元件(charge coupled device,CCD)、互补性氧化金属半导体(complementary metal-oxide semiconductor,CMOS)元件或其他元件,本发明不在此设限。在本实施例中,第一摄像模块111以及第二摄像模块112的镜头皆为彩色镜头,然而本发明不以此为限。
处理器120耦接至第一摄像模块111以及第二摄像模块112,其可以例如是中央处理单元(central processing unit,CPU),或是其他可编程的一般用途或特殊用途的微处理器(microprocessor)、数字信号处理器(digital signal processor,DSP)、可编程化控制器、特殊应用积体电路(Application Specific Integrated Circuits,ASIC)、可编程化逻辑装置(programmable logic device,PLD)或其他类似装置或这些装置的组合。处理器120包括对应于第一摄像模块111的第一摄像参数调整模块121、对应于第二摄像模块112的第二摄像参数调整模块122以及交谈模块135。第一摄像参数调整模块121、第二摄像参数调整模块122以及交谈模块135可以是载入处理器120的电脑程序或指令,亦可以是实作为逻辑电路,本发明不在此设限。
图像处理器140耦接至第一摄像模块111以及第二摄像模块112,其可以例如是用以执行图像处理功能的数字信号处理器、微处理器、可编程化控制器、特殊应用积体电路、可编程化逻辑装置或其他类似装置或这些装置的组合。在另一实施例中,图像处理器140亦可与处理器120整合为同一芯片或芯片组,本发明不在此设限。图像处理器140用以针对第一摄像模块111以及第二摄像模块112所获取的图像进行处理。
本领域技术人员应明了,电子装置100还包括可耦接至第一摄像模块111、第二摄像模块112、处理器120以及图像处理器140的数据存储装置(未示出),用以存储图像以及数据。数据存储装置可以例如是任意型式的固定式或可移动式随机存取存储器(randomaccess memory,RAM)、只读存储器(read-only memory,ROM)、快速存储器(flash memory)、硬盘或其他类似装置或这些装置的组合。
以下即搭配图1的电子装置100的各元件列举实施例,以说明电子装置100针对第一摄像模块111以及第二摄像模块112执行控制方法的详细步骤。
图2为根据本发明的一实施例所示出的电子装置的控制方法的流程图。
请同时参照图1以及图2,当电子装置100在对拍摄场景进行图像获取之前,第一摄像参数调整模块121将利用第一摄像模块111以和/或者是第二摄像参数调整模块122将利用第二摄像模块112检测上述场景,以产生摄像分析信息(步骤S202)。前述的摄像分析信息可以有关于自动对焦(auto focus,AF)、自动曝光(auto exposure,AE)、自动白平衡(autowhite balance,AWB)等对于上述场景的设定值。
接着,交谈模块135将收集所有摄像分析信息,并且通过第一摄像参数调整模块121以及第二摄像参数调整模块122来进行第一摄像模块111与第二摄像模块112之间的交谈程序,以产生包括共同标的的共同摄像信息(步骤S204)。第一摄像参数调整模块121以及第二摄像参数调整模块122将分别根据共同摄像信息,产生第一摄像模块111以及第二摄像模块112的个别化摄像参数(步骤S206),并且使第一摄像模块111以及第二摄像模块112以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像(步骤S208)。详细来说,处理器120交谈模块135可视为第一摄像模块111与第二摄像模块112之间沟通并且整合摄像信息的管道,使第一摄像参数调整模块121以及第二摄像参数调整模块122可依照整合后的摄像信息来产生第一摄像模块111以及第二摄像模块112的个别化摄像参数,从而获取场景的图像,以减少图像处理器140进行后续图像处理上的误差。在此的后续图像处理可以是利用所有输出图像进行深度估测、图像融合、距离量测、数字变焦、立体视觉等多种本领域技术人员所熟知的应用或其组合,于此不赘述。
前述的控制方法可包含主从式(master-slave)架构以及共同决定式(joint-decision)架构,以下将分叙并列举实施例说明。
图3为根据本发明的一实施例所示出的电子装置的控制方法的流程图,而此流程是基于主从式架构。在本实施例中,假设第一摄像模块111为主摄像模块,第二摄像模块112为从属摄像模块。
请同时参照图1以及图3,当电子装置100在对拍摄场景进行图像获取之前,第一摄像参数调整模块121系利用第一摄像模块111检测场景,产生第一摄像分析信息(步骤S301)。此外,第二摄像参数调整模块122利用第二摄像模块112检测场景,产生第二摄像分析信息(步骤S302)。在此,第一摄像参数调整模块121可利用任何控制演算法对第一摄像模块111输出的信号进行分析以取得第一摄像模块111的第一摄像分析信息,并且根据此第一摄像分析信息选出最佳化的摄像标的,并以此摄像标的决定第一摄像模块的个别化摄像参数(步骤S303)。另一方面,第二摄像参数调整模块122亦可利用任何控制演算法对第二摄像模块112输出的信号进行分析以取得第二摄像模块112的第二摄像分析信息,但是第二摄像参数调整模块122并不在此时决定其个别化摄像参数。
之后,第一摄像模块111会将第一摄像分析信息及最佳化的摄像标的传送至交谈模块135,而交谈模块135会将最佳化的摄像标的设定为共同标的,并将包含此共同标的及第一摄像分析信息的信息设定为共同摄像信息(步骤S304)。举例来说,当摄像参数为自动对焦值、自动曝光值或是自动白平衡值时,第一摄像参数调整模块121可利用3A演算法来取得第一摄像模块111对此场景的对焦分析、曝光分析或是白平衡分析来做为第一摄像分析信息。
接着,交谈模块135会依据此共同摄像信息及第二摄像参数调整模块122的第二摄像分析信息,协助第二摄像模块112决定其个别化摄像参数。详细来说,第二摄像参数调整模块122将第二摄像分析信息传送至交谈模块135,而交谈模块135将同时参考共同摄像信息(共同标的、第一摄像分析信息)以及第二摄像分析信息来设定第二摄像模块112的个别化摄像参数(步骤S306)。此处所举的例子是交谈模块135决定第二摄像模块112的个别化摄像参数并传送回第二摄像参数调整模块122,但是在另外的实施例中,也可以是交谈模块135将共同摄像信息传送给第二摄像参数调整模块122,并由其参考共同摄像信息(共同标的、第一摄像分析信息)以及第二摄像分析信息来设定第二摄像模块112的个别化摄像参数。
必须说明的是,第二摄像模块112的个别化摄像参数并不一定与第一摄像模块111的个别化摄像参数相同,而是会以第一摄像分析信息做为辅助信息来判定第二摄像模块112的个别化摄像参数,以使稍后第一摄像模块111与第二摄像模块112所获取到的图像具有相同的图像特性。举例来说,此些图像可以是具有相同的对焦标的、具有相同的曝光程度或是白平衡效果等共同标的,以利于图像处理器140进行后续的图像处理。
之后,第一摄像参数调整模块121以及第二摄像参数调整模块122将分别使第一摄像模块111以及第二摄像模块1102以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像(步骤S308),而图像处理器140将利用第一摄像模块111以及第二摄像模块112所输出的图像进行处理(步骤S310)。
图4为根据本发明的一实施例所示出的电子装置的控制方法的流程图,而此流程是基于共同决定式架构。
请同时参照图1以及图4,第一摄像参数调整模块121以及第二摄像参数调整模块122将分别利用第一摄像模块111以及第二摄像模块112检测场景,以产生第一摄像分析信息以及第二摄像分析信息(步骤S402)。在此,第一摄像参数调整模块121以及第二摄像参数调整模块122可利用任何控制演算法对第一摄像模块111以及第二摄像模块112所输出的信号进行分析以分别取得第一摄像分析信息以及第二摄像分析信息。举例来说,当拍摄参数为自动对焦值、自动曝光值或是自动白平衡值时,第一摄像模块111以及第二摄像模块112可利用3A演算法来各自取得对此拍摄场景的对焦分析信息、曝光分析信息或是白平衡分析信息。
接着,第一摄像模块与第二摄像模块将分别将其第一摄像分析信息以及第二摄像分析信息传送至交谈模块135,并且通过此交谈程序,产生包含共同标的物的共同摄像信息(步骤S404)。相较于主从式架构的实施例仅是根据单一摄像模块(主摄像模块)的最佳化摄像标的及第一摄像分析信息来产生包含共同标的的共同摄像信息,在此的共同决定式架构是同时根据第一摄像模块111与第二摄像模块112的摄像分析信息进行整合并产生共同摄像信息。
接着,交谈模块135可以根据共同摄像信息及第一摄像分析信息产生第一摄像模块111的个别化摄像参数,以及根据共同摄像信息及第二摄像分析信息产生第二摄像模块112的个别化摄像参数(步骤S406),以使后续第一摄像模块111与第二摄像模块112所获取到的图像具有相同的图像特性,以利于图像处理器140进行后续的图像处理。同样地,第一摄像参数调整模块121以及第二摄像参数调整模块122将分别使第一摄像模块111以及第二摄像模块112以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像(步骤S408),而图像处理器140将使第一摄像模块111以及第二摄像模块112所输出的图像进行后续的处理(步骤S410)。在其他实施例中,亦可以由交谈模块135将共同摄像信息传给第一摄像参数调整模块121以及第二摄像参数调整模块122,并且由第一摄像参数调整模块121参考共同摄像信息及第一摄像信息以决定第一摄像模块的个别化摄像参数,以及由第二摄像参数调整模块122参考共同摄像信息及第二摄像信息以决定第二摄像模块112的个别化摄像参数。
前述图1~图4的实施例可延伸至具有三个以上摄像模块的电子装置。详细来说,图5是根据本发明一实施例所示出的电子装置的方块图。
请参照图5,电子装置500包括摄像模块511~51n、处理器520以及图像处理器540,其分别类似于图1中的第一摄像模块111与第二摄像模块112、处理器120以及图像处理器140,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器520包括对应于摄像模块511~51n的摄像参数调整模块521~52n以及交谈模块535,以控制电子装置500各元件的作动。在主从式架构下,摄像模块5101~510n的其中之一者可做为主摄像模块,而其它可做为从属摄像模块,并且交谈模块535是基于主摄像模块的摄像分析信息来设定共同摄像信息。在共同决定式架构下,交谈模块535是基于摄像模块511~51n的所有摄像分析信息进行整合来设定共同摄像信息。基此,本领域技术人员可参照图2~图4的相关说明而推得电子装置500的控制方法,因此于此将不再赘述。
图6是根据本发明一实施例所示出的电子装置的方块图。
请参照图6,电子装置600包括第一摄像模块611、第二摄像模块612、处理器620以及图像处理器640,其类似于图1中的第一摄像模块111、第二摄像模块112、处理器120以及图像处理器140,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器620包括对应于第一摄像模块611的第一对焦参数调整模块621、对应于第二摄像模块612的第二对焦参数调整模块622以及交谈模块635,以控制电子装置600各元件的作动。
图7A为根据本发明的一实施例所示出的电子装置的控制方法的流程图,而此流程是基于主从式架构来进行电子装置600的第一摄像模块611与第二摄像模块612的对焦控制。在本实施例中,假设第一摄像模块611为主摄像模块,第二摄像模块612为从属摄像模块。
请同时参照图6以及图7A,当电子装置600在对拍摄场景进行图像获取之前,第一对焦参数调整模块621以及第二对焦参数调整模块622将分别使第一摄像模块611以及第二摄像模块612分别进行自动对焦程序,以取得第一对焦分析信息以及第二对焦分析信息(步骤S702)。在此,第一对焦参数调整模块621以及第二对焦参数调整模块622可利用任何自动对焦机制来取得第一摄像模块611以及第二摄像模块612的对焦分析信息。举例来说,第一对焦参数调整模块621以及第二对焦参数调整模块622可利用例如是爬山法(hill-climbing)等对比式的自动对焦机制(contrast-based AF),利用致动器来移动第一摄像模块611以及第二摄像模块612的透镜以搜寻对焦位置,并且将两者的对焦值与对焦位置的关系曲线、对焦距离以和/或判定坡峰(peak)的机制分别做为第一对焦分析信息以及第二对焦分析信息。其中,第一对焦参数调整模块621会根据第一对焦分析信息,决定一最佳化对焦标的,并根据此最佳化对焦标的决定其个别化对焦参数(步骤S703),例如是VCM移动步数。
接着,交谈模块635将进行第一摄像模块611与第二摄像模块612之间的交谈程序。此交谈程序可以包含第一对焦参数调整模块621将其最佳化对焦标的及第一对焦分析信息的信息做为共同对焦信息传送给交谈模块635(步骤S704),和/或第一对焦参数调整模块621将其最佳化对焦标的及第一对焦分析信息的信息做为共同对焦信息传送给交谈模块635。接着,交谈模块635将根据共同对焦信息以及第二对焦分析信息,产生第二摄像模块612的个别化对焦参数(步骤S706)。详细来说,假设第一对焦分析信息为第一摄像模块611所取到具有最大对焦值的对焦位置(在此称为“第一对焦位置”),而此将为主从式架构下的共同对焦信息以及第一摄像模块611的个别化对焦参数。另一方面,假设第二对焦分析信息为第二摄像模块612所取到具有局部最大对焦值的至少一个对焦位置(在此称为“第二对焦位置”)。在此主从式架构下,第二对焦参数调整模块622将自上述第二对焦位置之中选择位于第一对焦位置的局部区域中的第二对焦位置,以将其设定为第二摄像模块612的个别化对焦参数。
此外,在另一实施例中,假设第一对焦参数调整模块621先取得到第一对焦位置,并且交谈模块635已根据第一对焦位置产生关联于共同对焦区域的共同对焦信息,并且将此信息传送到第二对焦参数调整模块622。此时,第二对焦参数调整模块622亦可直接控制第二摄像模块612移动至第一对焦位置的局部区域搜寻具有局部最大对焦值的对焦位置,以直接将其设定为第二摄像模块612的个别化对焦参数。
接着,第一摄像参数调整模块621以及第二摄像参数调整模块622将分别使第一摄像模块611以及第二摄像模块612以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像(步骤S708),而图像处理器640将使第一摄像模块611以及第二摄像模块612所输出的图像进行后续的处理(步骤S710)。也就是说,第一摄像参数调整模块621以及第二摄像参数调整模块622将分别控制第一摄像模块611以及第二摄像模块612的透镜移动至符合其个别化对焦参数的对焦位置,基此,第一摄像模块611以及第二摄像模块612所获取的图像将具有共同对焦区域,以利于图像处理器640进行后续的图像处理。
具体而言,图7B为根据本发明的一实施例所示出设定第一对焦信息以及第二对焦信息的示意图。
请先参照图7B,假设曲线71以及曲线72分别为第一对焦参数调整模块621以及第二对焦参数调整模块622在分别控制第一摄像模块611以及第二摄像模块612针对拍摄场景执行爬山法所得到的对焦值与对焦位置的关系曲线。若是以一般的自动对焦机制,第一摄像模块611将会对焦至B点所对应拍摄平面(拍摄场景的前景,其中实线代表对焦区,虚线代表非对焦区),第二摄像模块612将会对焦至D点所对应拍摄平面(拍摄场景的背景),而分别获取到对焦于不同拍摄平面的两张图像,例如是图7C根据现有自动对焦方法所示出的输出图像750B以及输出图像750D。
然而,若以图7A所提出的对焦控制机制,第一对焦参数调整模块621在取得具有最大对焦值的B点后,交谈模块635会将B点设定为共同对焦信息,并且第二对焦参数调整模块632会将第二摄像模块6102的透镜直接移动至与B点较为接近并且具有局部最大对焦值的E点。如此一来,即便E点所对应的对焦值并非为第二摄像模块612的全域最大对焦值,然而其与B点同为拍摄场景的前景并且具有局部最大对焦值,因此图7A所提出的对焦控制机制可确保第一摄像模块611以及第二摄像模块612获取到对焦于同一拍摄平面的两张图像,例如是图7D根据本发明的一实施例所示出的输出图像750B以及输出图像750E。
图8A为根据本发明的一实施例所示出的电子装置的控制方法的流程图,而此流程是基于共同决定式架构来进行电子装置600的第一摄像模块611与第二摄像模块612的对焦控制。
当电子装置600在对拍摄场景进行图像获取之前,第一对焦参数调整模块621以及第二对焦参数调整模块622将分别使第一摄像模块611以及第二摄像模块612分别进行自动对焦程序,以取得第一对焦分析信息以及第二对焦分析信息(步骤S802)。在此,第一对焦参数调整模块621以及第二对焦参数调整模块622可利用任何自动对焦机制来取得第一摄像模块611以及第二摄像模块612的对焦分析信息。相关说明请参照前述实施例的相关段落,于此不再赘述。
接着,交谈模块635将进行第一摄像模块611与第二摄像模块612之间的交谈程序,以整合第一对焦分析信息以及第二对焦分析信息,并且产生包括共同对焦标的的共同对焦信息(步骤S804)。接着,第一对焦参数调整模块621以及第二对焦参数调整模块622将分别根据共同对焦信息,产生第一摄像模块611以及第二摄像模块612的个别化对焦参数(步骤S806)。详细来说,假设第一对焦参数调整模块621利用第一摄像模块611所取得的对焦分析信息包括具有局部最大对焦值的多个局部对焦位置(以下称为“第一局部对焦位置”),第二对焦参数调整模块622利用第二摄像模块612所取得的对焦信息为亦包括具有局部最大对焦值的多个局部对焦位置(以下称为“第二局部对焦位置”)。交谈模块635将分别自前述多个第一局部对焦位置以及前述多个第二局部对焦位置中分别选择符合共同对焦区域的第一局部对焦位置以及第二局部对焦位置,以分别做为第一摄像模块611以及第二摄像模块612的个别化对焦参数。
在一范例中,由于一般的拍摄主体为图像的近景,因此交谈模块635可以将符合近景的区域设定为共同对焦区域。在另一范例中,交谈模块635可通过使用者界面(未示出)提供使用者选择共同对焦区域。
之后,第一摄像参数调整模块621以及第二摄像参数调整模块622将分别使第一摄像模块611以及第二摄像模块612以其个别化摄像参数,获取上述场景的图像,以分别产生对应的输出图像(步骤S808)。基此,第一摄像模块611以及第二摄像模块612所获取的图像将具有共同对焦区域,而图像处理器640将对第一摄像模块611以及第二摄像模块612所输出的图像进行后续的处理(步骤S810)。
具体而言,图8B为根据本发明的一实施例所示出设定第一对焦分析信息以及第二对焦分析信息的示意图。
请参照图8B,假设曲线81以及曲线82分别为第一对焦参数调整模块621以及第二对焦参数调整模块622在分别控制第一摄像模块611以及第二摄像模块612针对拍摄场景执行爬山法所得到的对焦值与对焦位置的关系曲线,其中A点与B点为第一摄像模块611具有局部最大对焦值的局部对焦位置,而D点与E点为第二摄像模块612具有局部最大对焦值的局部对焦位置。以图8A所提出的对焦控制机制,假设交谈模块635将大于K值所对应的位置(亦即,近景的范围)做为共同对焦区域。第一对焦参数调整模块631以及第二对焦参数调整模块632会分别将第一摄像模块611以及第二摄像模块612的透镜直接移动至符合共同对焦区域的B点以及E点,因此图8A所提出的对焦机制可确保摄像模块611以及摄像模块612获取到对焦于同一拍摄平面的两张图像。
前述图6~图8的实施例可延伸至具有三个以上摄像模块的电子装置。详细来说,图9是根据本发明一实施例所示出的电子装置的方块图。
请参照图9,电子装置900包括摄像模块911~91n、处理器920以及图像处理器940,其类似于图6中的第一摄像模块611与第二摄像模块612、处理器620以及图像处理器640,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器920包括对应于摄像模块911~91n的对焦参数调整模块921~92n以及交谈模块935,以控制电子装置900各元件的作动。在主从式的架构下,摄像模块911~91n的其中之一者可做为主摄像模块,而其它者可做为从属摄像模块,并且交谈模块935是基于主摄像模块的对焦分析信息来设定共同对焦信息。在共同决定式架构下,交谈模块935是基于摄像模块911~91n的所有对焦分析信息来设定共同对焦信息。基此,本领域技术人员可参照图6~图8的相关说明而推得电子装置900的对焦控制方法,因此于此将不再赘述。
图10是根据本发明一实施例所示出的电子装置的方块图。
请参照图10,电子装置1000包括第一摄像模块1011、第二摄像模块1012、处理器1020以及图像处理器1040,其类似于图6中的第一摄像模块611、第二摄像模块612、处理器620以及图像处理器640,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器1020包括对应于第一摄像模块1011的第一曝光参数调整模块1021、对应于第二摄像模块1012的第二曝光参数调整模块1022以及交谈模块1035,以控制电子装置1000各元件的作动。
图11为根据本发明的一实施例所示出设定第一曝光分析信息以及第二曝光分析信息的示意图,此实施例将分别基于主从式架构以及共同决定式架构来说明电子装置1000的第一摄像模块1011以及第二摄像模块1012的曝光控制。
请同时参照图10以及图11,假设图像画面1150A以及图像画面1150B分别为第一摄像模块1011以及第二摄像模块1012针对拍摄场景所获取到的图像画面。若是以一般的自动曝光机制,图像画面1150A的中间区域rA以及图像画面1150B的中间区域rB将会被锁定,并且将计算两者的曝光分析信息。然而,由于第一摄像模块1011以及第二摄像模块1012具有拍摄视角上的差异,使得图像画面1150A的中间区域rA以及图像画面1150B的中间区域rB具有不同的拍摄物体以及亮度值,而造成曝光程度上的差异。
在本实施例中的主从式架构的曝光机制下,第一曝光参数调整模块1021可先利用任何自动曝光机制来取得第一摄像模块1011针对拍摄场景的曝光分析信息,以做为第一曝光分析信息。在此的第一曝光分析信息为第一摄像模块1011的曝光时间以及亮度增益值(以下称为“第一曝光时间”以及“第一亮度增益值”)。其中,第一曝光时间及第一亮度增益值为第一摄像模块1011的个别化摄像参数。交谈模块1035会将第一曝光分析信息设定为共同曝光信息,并且传送到第二曝光参数调整模块1022,而第二曝光参数调整模块1022会根据共同曝光信息来调整第二摄像模块1012本身的曝光时间以及亮度增益值(以下称为“第二曝光信息”,其包括“第二曝光时间”以及“第二亮度增益值”)。
详细来说,为了确保第一摄像模块1011以及第二摄像模块1012可以获取到相同亮度及色彩的图像,第二曝光参数调整模块1022会参考预先存储的校正参数及第一曝光时间,来决定第二摄像模块1012的第二曝光时间,其中包含将第二曝光时间调整和第一曝光时间相同。此外,基于第一摄像模块1011与第二摄像模块1012可能存在感光度(luminoussensitivity)上的差异,第二曝光参数调整模块1022将根据预先存储的第一摄像模块1011与第二摄像模块1012之间的亮度增益比值(gain ratio),参考第一亮度增益值来产生第二摄像模块1012的第二亮度增益值。第二曝光参数调整模块1022会将第二曝光时间及第二亮度增益值做为第二摄像模块1012的个别化摄像参数。如此一来,第一摄像模块1011以及第二摄像模块1012所获取到的图像将有相同的曝光程度。附带一提的是,在此的亮度增益比值可以是在电子装置1000出厂前,在相同光源下,第一摄像模块1101与第二摄像模块1102以相同曝光时间所获取到的图像亮度值所计算出,并且预先存储于数据存储装置。在此实施例中,系由第二曝光参数调整模块102根据共同曝光信息及预先存储的校正参数或亮度增益比值来决定第二摄像模块1012的个别化曝光参数,但是在其他实施例中,亦可由交谈模块1035根据共同曝光信息及预先存储的校正参数或亮度增益比值来决定第二摄像模块1012的个别化曝光参数,并传送给第二摄像模块1012。
在本实施例中的共同决定式架构的曝光机制下,为了确保第一摄像模块1011以及第二摄像模块1012可以获取到相同拍摄物体,交谈模块1035会根据第一摄像模块1011以及第二摄像模块1012的曝光时间来决定共同曝光时间,以将第一摄像模块1011以及第二摄像模块1012的曝光时间调整为一致。此外,基于第一摄像模块1011以及第二摄像模块1012可能存在感光度上的差异,第一曝光参数调整模块1021以及第二曝光参数调整模块1022将分别根据第一摄像模块1011与第二摄像模块1012的亮度增益值以及第一摄像模块1011与第二摄像模块1012之间的亮度增益比值来调整各自的亮度增益值。第一曝光参数调整模块1021以及第二曝光参数调整模块1022将分别根据前述调整后的曝光时间以及亮度增益值来做为第一摄像模块1011以及第二摄像模块1012的个别化曝光参数,以使第一摄像模块1011以及第二摄像模块1012所获取到的图像将有相同的曝光程度。
前述图10~图11的实施例可延伸至具有三个以上摄像模块的电子装置。详细来说,图12是根据本发明一实施例所示出的电子装置的方块图。
请参照图12,电子装置1200包括摄像模块1211~121n、处理器1220以及图像处理器1240,其类似于图10中的第一摄像模块1011与第二摄像模块1012、处理器1020以及图像处理器1040,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器1220包括对应于摄像模块1211~121n的曝光参数调整模块1221~122n以及交谈模块1235,以控制电子装置1200各元件的作动。在主从式的架构下,摄像模块1211~121n的其中之一者可做为主摄像模块,而其它者可做为从属摄像模块,并且交谈模块1235是基于主摄像模块的曝光分析信息来设定共同曝光信息。在共同式的架构下,交谈模块1235是基于摄像模块1211~121n的所有曝光分析信息来设定共同曝光信息。基此,本领域技术人员可参照图10~图11的相关说明而推得电子装置1200的曝光控制方法,因此于此将不再赘述。
图13是根据本发明一实施例所示出的电子装置的方块图。
请参照图13,电子装置1300包括第一摄像模块1311、第二摄像模块1312、处理器1320以及图像处理器1340,其类似于图6中的第一摄像模块611、第二摄像模块612、处理器620以及图像处理器640,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器1320包括对应于第一摄像模块1311的第一白平衡参数调整模块1321、对应于第二摄像模块1312的第二白平衡参数调整模块1322以及交谈模块1335,以控制电子装置1300各元件的作动。
以下将分别基于主从式架构以及共同决定式架构来说明电子装置1300的第一摄像模块1311以及第二摄像模块1312的白平衡控制。
类似于图10~图11的实施例,由于第一摄像模块1311与第二摄像模块1312具有拍摄视角上的差异,使得两者所获取到的图像画面具有不同的色温,进而造成白平衡的差异。在本实施例中的主从式架构的白平衡机制下,第一白平衡参数调整模块1321可先利用任何自动白平衡机制来取得第一摄像模块1311针对拍摄场景的白平衡分析信息,以做为第一白平衡分析信息。在此的第一白平衡分析信息为第一摄像模块1311的色温以及色彩增益值(以下称为“第一色温”以及“第一色彩增益值”)。交谈模块1335会将第一白平衡分析信息设定为共同白平衡信息,并且传送到二白平衡参数调整模块1322,而第二白平衡参数调整模块1322会根据共同白平衡信息来设定第二摄像模块1312本身的色温以及色彩增益值(以下称为“第二白平衡信息”,其包括“第二色温”以及“第二彩色增益值”)。
举例而言,第二白平衡参数调整模块1322可以将第二色温设定为第一色温。此外,基于第一摄像模块1311与第二摄像模块1312可能存在感色度(color sensitivity)上的差异,第二白平衡参数调整模块1322将根据第一彩色增益值以及预先存储的第一摄像模块1311与第二摄像模块1312之间的彩色增益比值(gain ratio),来决定第二摄像模块1312的第二彩色增益值。亦即,第二白平衡参数调整模块1322会将调整后的第二色温以及调整后的第二彩色增益值来做为第二摄像模块1312的个别化白平衡参数(个别化摄像参数)。另一方面,第一白平衡参数调整模块1321会直接将第一色温以及第一彩色增益值来做为第一摄像模块1311的个别化白平衡参数(个别化摄像参数)。如此一来,第一摄像模块1311以及二摄像模块1312所获取到的图像将有相同的白平衡。同样地,在此的色彩增益比值可以是在电子装置1300出厂前,第一摄像模块1311以及第二摄像模块1312以相同色温所获取到的图像色彩参数所计算出,并且预先存储于数据存储装置。在此实施例中,系由第二白平衡参数调整模块1322根据共同白平衡信息及预先存储的彩色增益比值来决定第二摄像模块1312的个别化白平衡参数,但是在其他实施例中,亦可由交谈模块1335根据共同白平衡信息及预先存储的彩色增益比值来决定第二摄像模块1312的个别化白平衡参数,并传送给第二摄像模块1312。
在本实施例中的共同决定式架构的白平衡机制下,交谈模块1335会根据第一摄像模块1311以及第二摄像模块1312的第一色温以及第二色温来决定共同色温,以将第一摄像模块1311以及第二摄像模块1312的色温调整为一致。此外,基于第一摄像模块1011以及第二摄像模块1012可能存在感色度上的差异,第一白平衡参数调整模块1321以及第二白平衡参数调整模块1322将分别根据第一摄像模块1311与摄像模块1312的彩色增益值以及第一摄像模块1311与第二摄像模块1312之间的彩色增益比值来调整各自的彩色增益值。第一白平衡参数调整模块1321以及第二白平衡参数调整模块1322将分别根据前述调整后的色温以及彩色增益值来做为第一摄像模块1311以及第二摄像模块1312的个别化白平衡参数,以使第一摄像模块1311以及第二摄像模块1312所获取到的图像将有相同的白平衡。
前述图13的实施例可延伸至具有三个以上摄像模块的电子装置。详细来说,图14是根据本发明一实施例所示出的电子装置的方块图。
请参照图14,电子装置1400包括摄像模块1411~141n、处理器1420以及图像处理器1440,其类似于图13中的第一摄像模块1311与第二摄像模块1312、处理器1320以及图像处理器1340,详细说明请参照前述相关段落,于此不再赘述。在本实施例中,处理器1420包括对应于摄像模块1411~141n的白平衡参数调整模块1421~142n以及交谈模块1435,以控制电子装置1400各元件的作动。在主从式的架构下,摄像模块1411~141n的其中之一者可做为主摄像模块,而其它者可做为从属摄像模块,并且交谈模块1435是基于主摄像模块的白平衡分析信息来设定共同白平衡信息。在共同式的架构下,交谈模块1435是基于摄像模块1411~141n的所有白平衡分析信息来设定共同白平衡信息。基此,本领域技术人员可参照图13的相关说明而推得电子装置1400的白平衡控制方法,因此于此将不再赘述。
前述的实施例可整合至同一电子装置,即同一电子装置可同时根据对焦分析信息、曝光分析信息以及白平衡分析信息(即3A摄像参数)来控制摄像模块进行图像获取。详细来说,图15是根据本发明一实施例所示出的电子装置的方块图。
请参照图15,电子装置1500包括摄像模块1511~151n、处理器1520以及图像处理器1540。在本实施例中,处理器1520包括对应于摄像模块1511~151n的3A参数调整模块1521~152n以及交谈模块1535,以控制电子装置1500各元件的作动。在主从式的架构下,摄像模块1511~151n的其中之一者可做为主摄像模块,而其它者可做为从属摄像模块,并且交谈模块1535是基于主摄像模块的对焦分析信息、曝光分析信息以及白平衡分析信息来设定共同对焦分析信息、共同曝光分析信息以及共同白平衡对焦信息。在共同式的架构下,交谈模块1535是基于摄像模块1511~151n的所有对焦分析信息、曝光分析信息以及白平衡分析信息来设定共同对焦分析信息、共同曝光分析信息以及共同白平衡分析信息。基此,本领域技术人员可参照前述实施例的相关说明而推得电子装置1500的3A控制方法,因此于此将不再赘述。
综上所述,本发明所提出具有多摄像模块的电子装置及其控制方法,其可在电子装置针对特定场景进行图像获取之前,针对所有摄像模块进行交谈程序,以产生关联于上述场景的共同摄像信息,而所有摄像模块将根据共同摄像信息所产生的个别化摄像参数来获取上述场景的图像,以减少后续图像分析处理上的误差,且有助于提升后续例如是深度估测、图像融合、距离量测、数字变焦、立体视觉等应用的效能。
虽然本发明已以实施例揭示如上,然其并非用以限定本发明,任何所属技术领域技术人员,在不脱离本发明的精神和范围内,当可作些许的更动与润饰,故本发明的保护范围当视随附的权利要求书所界定的范围为准。
Claims (20)
1.一种电子装置的控制方法,适用于具有多个摄像模块的电子装置,其特征在于,包括下列步骤:
利用至少一所述摄像模块,分别检测一场景以产生摄像分析信息,其中该摄像分析信息关联于自动对焦或者该摄像分析信息关联于自动曝光或者该摄像分析信息关联于自动白平衡,其中所述摄像模块包括第一摄像模块以及至少一第二摄像模块,利用该第一摄像模块检测该场景,以产生第一摄像分析信息,利用各所述第二摄像模块检测该场景,以产生第二摄像分析信息,该第一摄像分析信息包括第一曝光时间以及第一亮度增益值;
收集所述摄像分析信息,并且通过所述摄像模块之间的交谈程序,产生包括共同标的的共同摄像信息;
根据该共同摄像信息以及各所述第二摄像分析信息,产生各所述第二摄像模块的个别化摄像参数,包括:
根据该第一曝光时间以及预先存储于该第二摄像模块的校正参数,设定该第二摄像分析信息的第二曝光时间;
根据该第一亮度增益值以及预先存储于该第二摄像模块的该第二摄像模块与该第一摄像模块之间的亮度增益比值,设定该第二摄像分析信息的第二亮度增益值;以及
设定该第二曝光时间以及该第二亮度增益值为对应的该第二摄像模块的该个别化摄像参数;以及
使各所述摄像模块以其个别化摄像参数,获取该场景的图像,以分别产生对应的输出图像。
2.根据权利要求1所述的方法,其特征在于,收集所述摄像分析信息,并且通过所述摄像模块之间的该交谈程序,产生包括该共同标的的该共同摄像信息的步骤包括:
自该第一摄像分析信息之中取得最佳化的摄像标的;
设定该最佳化的摄像标的为该共同标的;以及
设定包括该第一摄像分析信息以及该最佳化的摄像标的的信息为该共同摄像信息。
3.根据权利要求2所述的方法,其特征在于,根据该共同摄像信息产生各所述摄像模块的该个别化摄像参数的步骤包括:
根据该共同摄像信息,设定该第一摄像模块的该个别化摄像参数;以及
根据该共同摄像信息以及各所述第二摄像分析信息,产生各所述第二摄像模块的该个别化摄像参数。
4.根据权利要求3所述的方法,其特征在于,该第一摄像分析信息以及该第二摄像分析信息关联于自动对焦,该第一摄像分析信息包括第一对焦位置,该第一对焦位置的对焦物为该共同标的,而根据该共同摄像信息以及各所述第二摄像分析信息,产生各所述第二摄像模块的该个别化摄像参数的步骤包括:
在该第二摄像分析信息中寻找接近该共同标的的区域;
在所述接近该共同标的的区域中,寻找包括具有局部最大对焦值的第二对焦位置;以及
设定该第二对焦位置为对应的该第二摄像模块的该个别化摄像参数。
5.根据权利要求1所述的方法,其特征在于,收集所述摄像分析信息,并且通过所述摄像模块之间的该交谈程序,产生包括该共同标的的该共同摄像信息的步骤包括:
整合各所述摄像模块检测该场景所产生的该摄像分析信息,产生该共同摄像信息。
6.根据权利要求5所述的方法,其特征在于,根据该共同摄像信息,产生各所述摄像模块的该个别化摄像参数的步骤包括:
根据该共同摄像信息以及各所述摄像分析信息,产生各所述摄像模块的该个别化摄像参数。
7.根据权利要求6所述的方法,其特征在于,各所述摄像分析信息分别包括关联于自动对焦的多个局部对焦位置,该共同标的为相同的对焦标的,而根据该共同标的,设定各所述摄像模块的该个别化摄像参数的步骤包括:
自各所述摄像模块的所述局部对焦位置中设定接近该共同标的的区域中的该局部对焦位置,以做为对应的该个别化摄像参数。
8.根据权利要求6所述的方法,其特征在于,各所述摄像分析信息包括关联于自动曝光的曝光时间以及亮度增益值,而根据该共同摄像信息以及各所述摄像分析信息,产生各所述摄像模块的该个别化摄像参数的步骤包括:
根据各所述摄像模块的该曝光时间,设定共同曝光时间;
对于各所述摄像模块,根据对应的该亮度增益值以及与所述摄像模块之间的亮度增益比值,调整对应的该亮度增益值;以及
针对各所述摄像模块,以该共同曝光时间以及调整后的该亮度增益值,做为对应的该个别化摄像参数。
9.根据权利要求6所述的方法,其特征在于,各所述摄像信息包括关联于自动白平衡的色温以及色彩增益值,而根据该共同摄像信息以及各所述摄像分析信息,产生各所述摄像模块的该个别化摄像参数的步骤包括:
根据各所述摄像模块的该色温,设定共同色温;
对于各所述摄像模块,根据对应的该色彩增益值以及与所述摄像模块之间的色彩增益比值,调整对应的该色彩增益值;以及
针对各所述摄像模块,以该共同色温以及调整后的该色彩增益值,做为对应的该个别化摄像参数。
10.一种电子装置的控制方法,适用于具有多个摄像模块的电子装置,其特征在于,包括下列步骤:
利用至少一所述摄像模块,分别检测一场景以产生摄像分析信息,其中所述摄像模块包括第一摄像模块以及至少一第二摄像模块,利用该第一摄像模块检测该场景,以产生第一摄像分析信息,利用各所述第二摄像模块检测该场景,以产生第二摄像分析信息,该第一摄像分析信息以及该第二摄像分析信息关联于自动白平衡,该第一摄像分析信息包括第一色温以及第一色彩增益值;
收集所述摄像分析信息,并且通过所述摄像模块之间的交谈程序,产生包括共同标的的共同摄像信息;
根据该共同摄像信息以及各所述第二摄像分析信息,产生各所述第二摄像模块的个别化摄像参数,包括:
根据该第一色温,设定该第二摄像分析信息的第二色温;
根据该第一色彩增益值以及预先存储于该第二摄像模块的该第二摄像模块与该第一摄像模块之间的色彩增益比值,设定该第二摄像分析信息的第二色彩增益值;
设定该第二色温以及该第二色彩增益值为对应的该第二摄像模块的该个别化摄像参数;以及
使各所述摄像模块以其个别化摄像参数,获取该场景的图像,以分别产生对应的输出图像。
11.一种电子装置,其特征在于,包括:
多个摄像模块;
处理器,耦接各所述摄像模块,并且包括多个模块,其中所述模块包括:
多个摄像参数调整模块,分别对应于所述摄像模块;以及
交谈模块,其中:
至少一所述摄像参数调整模块利用对应的该摄像模块,分别检测一场景以产生摄像分析信息,其中该摄像分析信息关联于自动对焦或者该摄像分析信息关联于自动曝光或者该摄像分析信息关联于自动白平衡,其中所述摄像模块包括第一摄像模块以及至少一第二摄像模块,所述摄像参数调整模块包括对应于该第一摄像模块的第一摄像参数调整模块以及对应于各所述第二摄像模块的第二摄像参数调整模块,利用该第一摄像模块检测该场景,以产生第一摄像分析信息,利用各所述第二摄像模块检测该场景,以产生第二摄像分析信息,该第一摄像分析信息以及该第二摄像分析信息关联于自动曝光,该第一摄像分析信息包括第一曝光时间以及第一亮度增益值,而各所述第二摄像参数调整模块根据该第一曝光时间以及预先存储于该第二摄像模块的校正参数,设定该第二摄像分析信息的第二曝光时间,又根据该第一亮度增益值以及预先存储于该第二摄像模块的该第二摄像模块与该第一摄像模块之间的亮度增益比值,设定该第二摄像分析信息的第二亮度增益值,以及设定该第二曝光时间以及该第二亮度增益值为对应的该第二摄像模块的该个别化摄像参数;
该交谈模块收集所述摄像分析信息,并且通过所述摄像参数调整模块之间的交谈程序,产生包括共同标的的共同摄像信息;
各所述摄像参数调整模块根据该共同摄像信息产生对应的该摄像模块的个别化摄像参数,并且使对应的该摄像模块以其个别化摄像参数,获取该场景的图像,以分别产生对应的输出图像;以及
图像处理器,耦接各所述摄像模块,自各所述摄像模块接收对应的该输出图像。
12.根据权利要求11所述的电子装置,其特征在于,其中该第一摄像参数调整模块利用该第一摄像模块检测该场景,以产生该第一摄像分析信息,并且自该第一摄像分析信息之中取得最佳化的摄像标的,而该交谈模块设定该最佳化的摄像标的为该共同标的,又设定包括该第一摄像分析信息以及该最佳化的摄像标的的信息为该共同摄像信息。
13.根据权利要求12所述的电子装置,其特征在于,该第一摄像参数调整模块根据该共同摄像信息,设定该第一摄像模块的该个别化摄像参数,以及各所述第二摄像参数调整模块根据该共同摄像信息以及各所述第二摄像分析信息,产生各所述第二摄像模块的该个别化摄像参数。
14.根据权利要求13所述的电子装置,其特征在于,该第一摄像分析信息以及该第二摄像分析信息关联于自动对焦,该第一摄像分析信息包括第一对焦位置,该第一对焦位置的对焦物为该共同标的,而各所述第二摄像参数调整模块在该第二摄像分析信息中寻找接近该共同标的的区域,又在所述接近该共同标的的区域中,寻找包括具有局部最大对焦值的第二对焦位置,以及设定该第二对焦位置为对应的该第二摄像模块的该个别化摄像参数。
15.根据权利要求11所述的电子装置,其特征在于,该交谈模块整合各所述摄像模块检测该场景所产生的该摄像分析信息,产生该共同摄像信息。
16.根据权利要求15所述的电子装置,其特征在于,各所述摄像参数调整模块根据该共同摄像信息以及各所述摄像分析信息,产生对应的该摄像模块的该个别化摄像参数。
17.根据权利要求16所述的电子装置,其特征在于,各所述摄像分析信息分别包括关联于自动对焦的多个局部对焦位置,该共同标的为相同的对焦标的,而各所述摄像参数调整模块自对应的该摄像模块的所述局部对焦位置中设定接近该共同标的的区域中的该局部对焦位置,以做为对应的该个别化摄像参数。
18.根据权利要求16所述的电子装置,其特征在于,各所述摄像分析信息包括关联于自动曝光的曝光时间以及亮度增益值,而该交谈模块根据各所述摄像模块的该曝光时间,设定共同曝光时间,各所述摄像参数调整模块根据对应的该摄像模块的该亮度增益值以及所述摄像模块之间的亮度增益比值,调整对应的该亮度增益值,并且以该共同曝光时间以及调整后的该亮度增益值,做为对应的该摄像模块的该个别化摄像参数。
19.根据权利要求16所述的电子装置,其特征在于,各所述摄像信息包括关联于自动白平衡的色温以及色彩增益值,而该交谈模块根据各所述摄像模块的该色温,设定共同色温,各所述摄像参数调整模块根据对应的该摄像模块的该色彩增益值以及各所述摄像模块之间的色彩增益比值,调整对应的该色彩增益值,并且以该共同色温以及调整后的该色彩增益值,做为对应的该摄像模块的该个别化摄像参数。
20.一种电子装置,其特征在于,包括:
多个摄像模块;
处理器,耦接各所述摄像模块,并且包括多个模块,其中所述模块包括:
多个摄像参数调整模块,分别对应于所述摄像模块;以及
交谈模块,其中:
至少一所述摄像参数调整模块利用对应的该摄像模块,分别检测一场景以产生摄像分析信息,其中该摄像分析信息关联于自动对焦或者该摄像分析信息关联于自动曝光或者该摄像分析信息关联于自动白平衡,其中所述摄像模块包括第一摄像模块以及至少一第二摄像模块,所述摄像参数调整模块包括对应于该第一摄像模块的第一摄像参数调整模块以及对应于各所述第二摄像模块的第二摄像参数调整模块,利用该第一摄像模块检测该场景,以产生第一摄像分析信息,利用各所述第二摄像模块检测该场景,以产生第二摄像分析信息,该第一摄像分析信息以及该第二摄像分析信息关联于自动白平衡,该第一摄像分析信息包括第一色温以及第一色彩增益值,而各所述第二摄像参数调整模块根据该第一色温,设定该第二摄像分析信息的第二色温,又根据该第一色彩增益值以及预先存储于该第二摄像模块的该第二摄像模块与该第一摄像模块之间的色彩增益比值,设定该第二摄像分析信息的第二色彩增益值,以及设定该第二色温以及该第二色彩增益值为对应的该第二摄像模块的该个别化摄像参数;
该交谈模块收集所述摄像分析信息,并且通过所述摄像参数调整模块之间的交谈程序,产生包括共同标的的共同摄像信息;
各所述摄像参数调整模块根据该共同摄像信息产生对应的该摄像模块的个别化摄像参数,并且使对应的该摄像模块以其个别化摄像参数,获取该场景的图像,以分别产生对应的输出图像;以及
图像处理器,耦接各所述摄像模块,自各所述摄像模块接收对应的该输出图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662309966P | 2016-03-18 | 2016-03-18 | |
US62/309,966 | 2016-03-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107205109A CN107205109A (zh) | 2017-09-26 |
CN107205109B true CN107205109B (zh) | 2020-10-09 |
Family
ID=58766076
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610592172.1A Active CN107205109B (zh) | 2016-03-18 | 2016-07-26 | 具有多摄像模块的电子装置及其控制的方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10798288B2 (zh) |
CN (1) | CN107205109B (zh) |
TW (1) | TWI573459B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018170656A (ja) * | 2017-03-30 | 2018-11-01 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、撮像モジュール、撮像システムおよび撮像装置の制御方法 |
CN107277480B (zh) * | 2017-07-10 | 2019-03-29 | Oppo广东移动通信有限公司 | 白平衡同步方法、装置和终端设备 |
CN107343158A (zh) * | 2017-07-25 | 2017-11-10 | 广东欧珀移动通信有限公司 | 加快aec收敛的方法及装置、终端设备 |
CN107728421B (zh) * | 2017-11-05 | 2020-08-25 | 信利光电股份有限公司 | 一种多光谱的多摄像头模组的校准方法和校准系统 |
TWI633384B (zh) * | 2017-11-08 | 2018-08-21 | 欣普羅光電股份有限公司 | 動態環景影像參數調整系統及其方法 |
CN107911682B (zh) * | 2017-11-28 | 2020-02-18 | Oppo广东移动通信有限公司 | 图像白平衡处理方法、装置、存储介质和电子设备 |
WO2019117549A1 (en) * | 2017-12-15 | 2019-06-20 | Samsung Electronics Co., Ltd. | Imaging apparatus, imaging method, and computer program product |
CN109151336B (zh) * | 2018-10-15 | 2020-11-13 | 长沙智能驾驶研究院有限公司 | 摄像头的同步方法、装置、系统、存储介质及计算机设备 |
CN110049257B (zh) * | 2019-05-31 | 2021-09-21 | 影石创新科技股份有限公司 | 一种确定半同步曝光参数的方法及电子装置 |
WO2021051307A1 (zh) * | 2019-09-18 | 2021-03-25 | 深圳市大疆创新科技有限公司 | 图像的颜色校正方法、拍摄设备、图像的颜色校正系统 |
WO2021184239A1 (zh) * | 2020-03-18 | 2021-09-23 | 深圳市大疆创新科技有限公司 | 曝光方法、装置、拍摄设备、可移动平台和存储介质 |
CN111383224B (zh) * | 2020-03-19 | 2024-04-16 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
KR102661114B1 (ko) * | 2020-11-10 | 2024-04-25 | 삼성전자주식회사 | 카메라 모듈 검사 장치, 카메라 모듈 검사 방법 및 이미지 생성 장치 |
CN114827098A (zh) * | 2021-01-28 | 2022-07-29 | 华为技术有限公司 | 合拍的方法、装置、电子设备和可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004109863A (ja) * | 2002-09-20 | 2004-04-08 | Canon Inc | 焦点検出装置、それを有する撮像装置、及び撮影レンズ |
CN102511013A (zh) * | 2010-07-23 | 2012-06-20 | 索尼公司 | 摄像装置及其控制方法和程序 |
CN103136747A (zh) * | 2011-11-28 | 2013-06-05 | 歌乐株式会社 | 车载摄像系统及其校准方法和校准程序 |
CN103246130A (zh) * | 2013-04-16 | 2013-08-14 | 广东欧珀移动通信有限公司 | 一种对焦方法及装置 |
CN103873849A (zh) * | 2012-12-10 | 2014-06-18 | 联发科技股份有限公司 | 多镜头取相装置的控制方法及控制装置 |
EP3028443A2 (en) * | 2013-08-01 | 2016-06-08 | Corephotonics Ltd. | Thin multi-aperture imaging system with auto-focus and methods for using same |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006340120A (ja) * | 2005-06-03 | 2006-12-14 | Sony Corp | 撮像装置、撮像結果の処理方法、画像処理装置、撮像結果の処理方法のプログラム、撮像結果の処理方法のプログラムを記録した記録媒体及び撮像結果の処理システム |
US8330830B2 (en) * | 2006-04-13 | 2012-12-11 | Eastman Kodak Company | Camera user input based image value index |
EP2375376B1 (en) * | 2010-03-26 | 2013-09-11 | Alcatel Lucent | Method and arrangement for multi-camera calibration |
US8451994B2 (en) * | 2010-04-07 | 2013-05-28 | Apple Inc. | Switching cameras during a video conference of a multi-camera mobile device |
US9264689B2 (en) * | 2011-08-04 | 2016-02-16 | Semiconductor Components Industries, Llc | Systems and methods for color compensation in multi-view video |
TW201351959A (zh) * | 2012-06-13 | 2013-12-16 | Wistron Corp | 立體全景影像合成方法及其相關之立體攝影機 |
WO2014138697A1 (en) * | 2013-03-08 | 2014-09-12 | Pelican Imaging Corporation | Systems and methods for high dynamic range imaging using array cameras |
EP3065392B1 (en) * | 2013-10-31 | 2018-08-22 | Fujifilm Corporation | Image processing device, image capture device, parameter generating method, image processing method, and program |
JP6354442B2 (ja) * | 2014-08-12 | 2018-07-11 | カシオ計算機株式会社 | 撮像装置、制御方法及びプログラム |
US9741117B2 (en) * | 2014-12-22 | 2017-08-22 | Motorola Mobility Llc | Multiple camera apparatus and method for synchronized auto white balance |
CN105141833B (zh) * | 2015-07-20 | 2018-12-07 | 努比亚技术有限公司 | 终端拍摄方法和装置 |
-
2016
- 2016-07-26 CN CN201610592172.1A patent/CN107205109B/zh active Active
- 2016-07-26 TW TW105123512A patent/TWI573459B/zh active
- 2016-10-18 US US15/296,057 patent/US10798288B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004109863A (ja) * | 2002-09-20 | 2004-04-08 | Canon Inc | 焦点検出装置、それを有する撮像装置、及び撮影レンズ |
CN102511013A (zh) * | 2010-07-23 | 2012-06-20 | 索尼公司 | 摄像装置及其控制方法和程序 |
CN103136747A (zh) * | 2011-11-28 | 2013-06-05 | 歌乐株式会社 | 车载摄像系统及其校准方法和校准程序 |
CN103873849A (zh) * | 2012-12-10 | 2014-06-18 | 联发科技股份有限公司 | 多镜头取相装置的控制方法及控制装置 |
CN103246130A (zh) * | 2013-04-16 | 2013-08-14 | 广东欧珀移动通信有限公司 | 一种对焦方法及装置 |
EP3028443A2 (en) * | 2013-08-01 | 2016-06-08 | Corephotonics Ltd. | Thin multi-aperture imaging system with auto-focus and methods for using same |
Also Published As
Publication number | Publication date |
---|---|
CN107205109A (zh) | 2017-09-26 |
US10798288B2 (en) | 2020-10-06 |
TW201735614A (zh) | 2017-10-01 |
US20170272644A1 (en) | 2017-09-21 |
TWI573459B (zh) | 2017-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107205109B (zh) | 具有多摄像模块的电子装置及其控制的方法 | |
CN107948519B (zh) | 图像处理方法、装置及设备 | |
TWI538512B (zh) | 調整對焦位置的方法及電子裝置 | |
US10511781B2 (en) | Image pickup apparatus, control method for image pickup apparatus | |
US9635280B2 (en) | Image pickup apparatus, method of controlling image pickup apparatus, and non-transitory computer-readable storage medium | |
US20160173762A1 (en) | Image-capturing apparatus | |
US10395348B2 (en) | Image pickup apparatus, image processing apparatus, and control method of image pickup apparatus | |
US8810712B2 (en) | Camera system and auto focus method | |
US20140307054A1 (en) | Auto focus method and auto focus apparatus | |
US9967451B2 (en) | Imaging apparatus and imaging method that determine whether an object exists in a refocusable range on the basis of distance information and pupil division of photoelectric converters | |
TW201541141A (zh) | 使用多鏡頭的自動對焦系統及其方法 | |
CN109416458A (zh) | 相机 | |
JP6427027B2 (ja) | 焦点検出装置及びその制御方法、撮像装置、プログラム、並びに記憶媒体 | |
WO2013069279A1 (ja) | 撮像装置 | |
US20190052815A1 (en) | Dual-camera image pick-up apparatus and image capturing method thereof | |
JP2016142924A (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
EP3163369B1 (en) | Auto-focus control in a camera to prevent oscillation | |
TWI566002B (zh) | 影像擷取裝置及其自動對焦方法 | |
KR101698917B1 (ko) | 폐쇄회로텔레비젼 카메라의 팬/틸트/줌/포커싱 통합 제어방법 | |
CN110519504B (zh) | 电子设备、电子设备的控制装置、存储介质以及控制方法 | |
US10447937B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and storage medium that perform image processing based on an image processing parameter set for a first object area, and information on a positional relationship between an object in a second object area and an object in the first object area | |
WO2017208991A1 (ja) | 撮像処理装置、電子機器、撮像処理方法、撮像処理装置制御プログラム | |
JP4200778B2 (ja) | 撮像装置 | |
JP7406880B2 (ja) | 画像処理装置、その制御方法及びプログラム | |
JP2017058563A (ja) | 自動焦点調節装置、撮像装置、および自動焦点調節方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |