CN107800959B - 电子设备及其控制方法 - Google Patents
电子设备及其控制方法 Download PDFInfo
- Publication number
- CN107800959B CN107800959B CN201710800468.2A CN201710800468A CN107800959B CN 107800959 B CN107800959 B CN 107800959B CN 201710800468 A CN201710800468 A CN 201710800468A CN 107800959 B CN107800959 B CN 107800959B
- Authority
- CN
- China
- Prior art keywords
- frame rate
- camera
- processor
- image
- ratio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title abstract description 23
- 230000008859 change Effects 0.000 claims description 27
- 230000001360 synchronised effect Effects 0.000 claims description 7
- 230000006870 function Effects 0.000 description 70
- 238000004891 communication Methods 0.000 description 34
- 230000002194 synthesizing effect Effects 0.000 description 21
- 238000012545 processing Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000005286 illumination Methods 0.000 description 5
- 238000002360 preparation method Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000015572 biosynthetic process Effects 0.000 description 4
- 230000010267 cellular communication Effects 0.000 description 4
- 230000009977 dual effect Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000012795 verification Methods 0.000 description 4
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 4
- WQZGKKKJIJFFOK-GASJEMHNSA-N Glucose Natural products OC[C@H]1OC(O)[C@H](O)[C@@H](O)[C@@H]1O WQZGKKKJIJFFOK-GASJEMHNSA-N 0.000 description 3
- 239000008280 blood Substances 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 239000008103 glucose Substances 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 238000009530 blood pressure measurement Methods 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000003155 kinesthetic effect Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000002595 magnetic resonance imaging Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000013341 scale-up Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/65—Control of camera operation in relation to power supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
提供了一种电子设备及其控制方法。所述电子设备包括:第一相机,包括第一视角;第二相机,包括第二视角;显示器;输入装置,用于获取设置比;处理器。如果所述比在指定的范围之内,则所述处理器将第一相机设置为指定的第一帧率,将第二相机设置为比第一帧率慢的第二帧率,并且显示使用第一相机以第一帧率获取的第一图像。如果所述比在另一指定的范围之内,则所述处理器将第二相机设置为指定的第三帧率,将第一相机设置为比第三帧率慢的第四帧率,并且显示使用第二相机以第三帧率获取的第二图像。
Description
本申请要求于2016年9月7日在韩国知识产权局提交的并被分配序列号为10-2016-0115309的韩国专利申请的权益,所述申请的全部公开通过引用合并于此。
技术领域
本公开涉及一种装备有多个相机的电子设备及其控制方法。
背景技术
近来,已经将多个相机模块应用于电子设备。例如,多个相机模块可被安装在电子设备的不同表面上,并且可被用于沿不同方向来捕捉图像。可选地,多个相机模块可被安装在电子设备的相同表面上,并且当电子设备提供通过将沿相同方向捕捉的图像进行合成获取的图像(例如,三维(3D)图像)时可被使用。
由于两个相机模块之间的视差、颜色和亮度的差异,使用双摄相机的电子设备可使得用户感到不适。
上述信息仅作为背景信息被提供以帮助理解本公开。对于任何的上述信息是否可被用作针对本公开的现有技术尚未作出决定,也未作出断言。
发明内容
本公开的各方面在于至少解决上述问题和/或缺点,并至少提供下述优点。因此,本公开的一方面要提供一种能够降低双摄相机模块的功耗的电子设备及其控制方法。
根据本公开的一个方面,提供了一种电子设备。所述电子设备包括:第一相机,包括第一视角;第二相机,包括第二视角;显示器;输入装置,基于用户输入来获取设置比;至少一个处理器。如果所述比在指定的范围之内,则所述至少一个处理器被配置为:将第一相机设置为指定的第一帧率,将第二相机设置为比第一帧率慢的第二帧率,并且通过所述显示器显示通过使用第一相机以第一帧率获取的第一图像。如果所述比在其它指定的范围之内,则所述至少一个处理器被配置为:将第二相机设置为指定的第三帧率,将第一相机设置为比第三帧率慢的第四帧率,并且通过所述显示器显示通过使用第二相机以第三帧率获取的第二图像。
根据本公开的另一方面,提供了一种通过至少一个处理器来控制包括具有第一视角的第一相机和具有第二视角的第二相机的电子设备的方法。所述方法包括:通过输入设备接收用户意图设定的比,如果所述比在指定范围内,则将第一相机设置为指定的第一帧率,将第二相机设置为比第一帧率慢的第二帧率,并通过显示器显示通过使用第一相机以第一帧率获得的第一图像,并且如果所述比在其它指定范围内,则将第二相机设置为指定的第三帧率,将第一相机设置为比第三帧率慢的第四帧率,并且通过显示器显示通过使用第二相机以第三帧率获得的第二图像。
从以下结合附图公开了本公开的各种实施例的详细描述中,本公开的其他方面、优点和突出特征将变得对于本领域技术人员显而易见。
附图说明
从以下结合附图的描述中,本公开的特定实施例的上述和其它方面、特征和优点将更加清楚,其中:
图1是示出根据本公开的实施例的电子设备的框图;
图2是示出根据本公开的第一实施例的相机驱动方法的流程图;
图3是示出根据本公开的第二实施例的相机驱动方法的流程图;
图4是示出根据本公开的实施例的处理器的框图;
图5是示出根据本公开的实施例的帧率的时序图;
图6A至图6C是用于描述根据本公开的各种实施例的帧率控制方法的时序图;
图7是示出本公开的实施例的电子设备控制方法的流程图;以及
图8是根据本公开的各种实施例的网络环境中的电子装置的框图。
贯穿附图,应当注意相同的标号用于示出相同或相似的元件、特征和结构。
具体实施方式
提供以下参照附图的描述以帮助全面理解由权利要求和它们的等同物限定的本公开的各种实施例。所述描述包括各种具体细节以帮助所述理解,但是这些具体细节将被认为仅是示例性的。因此,本领域普通技术人员将认识到,在不脱离本公开的范围和精神的情况下,可对本文描述的各种实施例进行各种改变和修改。此外,为了清楚和简明,可省略公知功能和构造的描述。
以下描述和权利要求中使用的术语和词语不限于书面含义,而是仅由发明人使用以使得能够清楚和一致地理解本公开。因此,本公开的各种实施例的以下描述仅是为了说明的目的,而不是为了限制由所附权利要求和它们的等同物限定的本公开的目的对本领域技术人员应当是显而易见的。
将理解,除非上下文另有明确地指出,否则单数形式包括复数指代。因此,例如,参照“组件表面”包括参照一个或更多个这样的表面。
根据本公开的实施例的电子设备可包括以下项中的至少一个:智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型计算机、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组(MPEG-1或MPEG-2)音频层3(MP3)播放器、医疗装置、相机或的可穿戴装置(诸如,附件类型的装置(包括手表、戒指、手镯、脚镯、项链、眼镜、隐形眼镜或头戴装置(HMD))、一体式织物或衣服类型的装置(诸如,电子衣服)、身体附接类型的装置(诸如,皮肤垫或纹身,或生物可植入电路))。
根据实施例,电子装置可包括以下项中的至少一个:电视(TV)、数字通用盘(DVD)播放器、音响、冰箱、空调、清洁器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动控制面板、安全控制面板、媒体盒(诸如,三星HomeSyncTM、苹果TVTM或谷歌TVTM)、游戏机(诸如,XboxTM或PlayStationTM)、电子词典、电子钥匙、摄像机、电子相框等。
根据另一实施例,电子装置可以包括以下项中的至少一个:各种便携式医疗测量装置(诸如,血糖监测装置、心跳测量装置、血压测量装置和体温测量装置)、磁共振血管造影(MRA)装置、磁共振成像(MRI)装置、计算机断层扫描(CT)装置、扫描器和超声装置、导航装置、全球导航卫星系统(GNSS)、事件数据记录器(EDR)、飞行数据记录器(FDR)、车辆信息娱乐装置、船用电子装备(诸如,导航系统和陀螺仪)、航空电子设备、安全装置、车用头部单元、工业或家用机器人、无人机、自动取款机(ATM)、销售点(POS)装置或物联网(IoT)装置(诸如,灯泡、各种传感器、洒水装置、火灾报警器、恒温器、路灯、烤面包机、运动装备、热水箱、加热器和锅炉)。
根据实施例,电子装置可以包括以下项中的至少一个:家具、大楼/建筑物或车辆的一部分、电子板、电子签名接收装置、投影仪或各种测量仪器(诸如,水表、电表、气表或波表)。
根据实施例,电子装置可以是柔性电子装置或上述装置中的两个或更多个装置的组合,但是可不限于上述电子装置。本文使用的术语“用户”可指使用电子装置的人或使用电子装置的人工智能电子装置。
图1是示出根据本公开的实施例的电子设备的框图。
参照图1,根据本公开的实施例的电子设备10可包括第一相机模块141和第二相机模块142、存储器120、输入单元160(例如,输入装置)、显示器130、照度传感器110和至少一个处理器150。
根据本公开的实施例,第一相机模块141可包括:第一透镜组,具有第一焦距和第一视角;第一图像传感器,被布置在第一透镜组的下方并捕捉图像。例如,第一透镜组可以是广角镜头。
根据本公开的实施例,第二相机模块142可包括:第二透镜组,具有超过第一焦距的第二焦距和小于第一视角的第二视角;第二图像传感器,被布置在第二透镜组的下方并捕捉图像。例如,第二透镜组可以是远摄镜头。
根据本公开的实施例,在预览模式下,第一相机模块141和第二相机模块142中的一个可作为提供预览图像的主机来操作,而另一个可作为不提供预览图像的从机来操作。第一相机模块141和第二相机模块142的从机可接收主机的同步信号Vsync,并且可将帧率与同步信号(时间同步)进行同步。从机可接收主机的自动曝光(AE)信息和自动白平衡(AWB)信息,并且可通过使用主机的AE信息和AWB信息来调整AE和AWB。作为结果,根据本公开的实施例,可根据执行缩放功能来轻微校正第一图像和第二图像之间的颜色、亮度等的变化。根据本公开的实施例,AE、AWB和自动对焦(AF)可由处理器150来执行。
存储器120可以是易失性存储器(例如,随机存取存储器(RAM)等)、非易失性存储器(例如,只读存储器(ROM)、闪速存储器等)或其组合。例如,存储器120可存储与电子设备10的至少一个其他组件相关联的指令或数据。根据本公开的实施例,存储器120可存储控制双摄相机所需的信息。例如,存储器120可存储针对每个感测到的照度的帧率、第一帧率与第二帧率的比,第一临界比和第二临界比、边缘照度、临界照度等。
根据本公开的实施例,照度传感器110可感测第一相机模块141和第二相机模块142的环境照度。例如,照度传感器110可邻近第一机模块141和第二相机模块142被安装,并且可感测环境照度。照度传感器110可被省略。例如,照度传感器110可被包括在第一相机模块141和第二相机模块142中的至少一个中,并且图像传感器可被用作照度传感器110。
根据本公开的实施例,输入单元160可接收或感测用户输入。例如,输入单元160可包括被包括在显示器130上的触摸传感器(触摸屏)和按钮中的至少一个。根据实施例,输入单元160可基于用户输入来获取设置比。
显示器130可包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机LED(OLED)显示器或电子纸显示器。显示器130可向用户显示例如各种类型的内容(例如,文本、图像、视频、图标和/或符号)。根据本公开的实施例,显示器130可在处理器150的控制下输出图像(例如,从第一相机模块141和第二相机模块142中的至少一个接收到的预览图像或捕捉图像)。显示器130可在处理器150的控制下显示用户界面等。例如,用户界面可以是用于选择缩放调整功能、预览模式、捕捉等的命令的屏幕。
例如,处理器150可包括至少一个中央处理单元(CPU)、图形处理单元(GPU)、微处理器、应用处理器(AP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA),并且可具有多个核。处理器150可执行与电子设备10的至少一个其他元件的控制和/或通信相关联的数据处理或操作。
根据本公开的实施例,处理器150可对第一相机模块141和第二相机模块142执行总体控制。例如,处理器150可控制第一相机模块141和第二相机模块142中的每一个的驱动(开)、驱动模式(例如,睡眠、待机、活跃等)、帧率、数字缩放等。
根据本公开的实施例,处理器150可在预览模式下在调整缩放比之前通过使用来自第一相机模块141的第一图像来产生预览图像。例如,如果进入预览模式,则处理器150可驱动第一相机模块141和第二相机模块142,并且可允许第二相机模块142在特定时间段之后进入睡眠(或待机)模式。处理器150可将第一相机模块141的帧率设置为第一帧率。例如,第一帧率可以是针对预览(或实时取景)的最高帧率(例如,30fps),并且可根据环境照度而被改变,使得第一帧率小于最高帧率。根据实施例,处理器150可将作为从机的第二相机模块142的帧率设置为第二帧率,而不将第二相机模块142控制为处于睡眠模式或待机模式。例如,第二帧率可小于第一帧率,并且可以是例如5fps。
根据本公开的实施例,处理器150可通过使用第一相机模块141和第二相机模块142之间的视差来获得深度信息。处理器150可基于通过使用第一相机模块141和第二相机模块142获取的深度信息来验证关于外部对象(例如,主题)的深度信息。
根据本公开的实施例,在基于第一相机模块141和第二相机模块142中的每一个的校准值将通过使用第一相机模块141和第二相机模块142分别产生的第一图像和第二图像对齐之后,处理器150可在第二图像的像素被偏移的同时搜索与第二图像的像素匹配的第一图像的像素以产生深度图。根据实施例,处理器150可将搜索与第二图像的像素中的每一个匹配的第一图像的像素所需的偏移量映射为深度信息以产生深度图。处理器150可将偏移量小的像素表示为深度图中的短距离像素,并且可将偏移量大的像素表示为深度图中的长距离像素。根据实施例,当制造第一相机模块141和第二相机模块142时,校准值可通过校准处理被确定,并且可以是例如本征参数或非本征参数。本征参数可以是相机模块中的每一个的特性,并且可以是光学中心、焦距、镜头畸变等。非本征参数可指示两个相机模块之间的相对位置,并且可以被倾斜或偏移。校准值可被存储在第一相机模块141和第二相机模块142中的每一个的内部存储器(例如,ROM)中。
根据本公开的实施例,处理器150可减小第一图像和第二图像(例如,视频图形阵列(VGA)~高清晰度(HD))中的每一个的分辨率以产生深度图。然后,在将深度图的分辨率调整为根据应用程序需要的分辨率之后,处理器150可输出调整的深度图。处理器150可通过根据距主题的距离通过使用深度图调整第一图像和第二图像中的至少一个中的模糊量来产生脱焦(out-focused)场景。根据本公开的实施例,处理器150可通过使用通过第二相机模块142捕捉的第二图像来产生预览图像,并且可将预览图像输出到显示器130。处理器150可在与预览图像相应的场景中产生深度图。在这种情况下,处理器150可通过使用第一图像和第二图像来产生深度图。处理器150可通过使用深度图将脱焦效果应用于与预览图像相应的图像。作为结果,根据本公开的实施例,可根据执行缩放功能来校正第一图像和第二图像之间的视差。
根据本公开的实施例,如果在预览模式下选择了缩放调整功能,则处理器150可根据设置的缩放比来改变和设置来自第一相机模块141和第二相机模块142中的提供预览图像的相机模块(主机)。处理器150可通过使用通过输入单元160的在显示预览图像的显示器130上的双指触摸来验证缩放调整功能的选择。例如,在预览模式下,如果设置的缩放比小于第一临界比(例如,两倍),则处理器150可将第一相机模块141保持为主机。对于另一示例,如果设置的缩放比不小于第一临界比,则处理器150可将供预览图像的相机模块(主机)从第一相机模块141改变为第二相机模块142。
根据本公开的实施例,处理器150可指引第一相机模块141和第二相机模块142来执行基于指定的中心的AF。根据另一实施例,当在预览模式下选择变焦调整功能时,处理器150可将指定的中心信息提供给第二相机模块142,并且可指引第二相机模块142来执行基于中心的AF。在这种情况下,第二相机模块142的帧率可被改变为第一帧率,并且可执行AF功能。处理器150可指引第二相机模块142来改变用于执行AF的帧率。根据实施例,设置的中心可以是相机模块141和相机模块142中的每一个的捕捉图像的中心。可选地,设置中心可以是用户选择的变焦场景的中心。
根据本公开的实施例,在预览模式下,处理器150可以以倍数关系来控制主机和从机的帧率。例如,处理器150可以以从机的帧率的倍数来控制主机的帧率。对于另一示例,如果第一相机模块141是主机,则处理器150可将第一相机模块141的帧率设置为30fps,并且可将作为从机的第二相机模块142的帧率设置为5fps(=30fps/n,“n”是自然数)。
根据本公开的实施例,处理器150可将第二帧率进行设置以根据第一相机模块141和第二相机模块142中的被设置为从机的相机模块来改变。例如,在第一相机模块141是从机的情况下,处理器150可将第二帧率设置为10fps。在第二相机模块142是从机的情况下,处理器150可将第二帧率设置为5fps。因此,根据本公开的实施例,当AF处理速度相对快的第一相机模块141是从机时,可以在不改变帧率的情况下执行AF功能。
根据本公开的实施例,例如,处理器150可在用于捕捉静止图像的预览模式下根据照度传感器110感测到的环境照度来调整主机的帧率。在这种情况下,处理器150可调整从机相机模块的帧率以与主机相机模块的帧率相应。例如,在第一相机模块141是主机的情况下,处理器150可根据环境照度将第一相机模块141的帧率设置为30fps至10fps,如表1的第一列所示。在第一相机模块141是主机的情况下,处理器150可基于根据环境照度指定的帧率比(fps比)将第二相机模块142的帧率调整为5fps至7.5fps的帧率,如表1的第二列所示。例如,如表1的第三列所示,处理器150可以以指定的倍数关系来控制主机和从机的帧率。
表1
W[fps] | T[fps] | fps比 |
30 | 5 | 6:1 |
30~25 | 6~5 | 5:1 |
25~20 | 6.25~5 | 4:1 |
20~15 | 6.7~5 | 3:1 |
15~10 | 7.5~5 | 2:1 |
例如,在第二相机模块142是主机的情况下,如表2所示,处理器150可根据环境照度将第二相机模块142的帧率设置为30fps至10fps,并且可将从机(即,第一相机模块141)的帧率调整为10fps至20fps的指定的帧率。例如,如表2的第三列所示,处理器150可以以指定的倍数关系来控制主机和从机的帧率。
表2
T[fps] | W[fps] | fps比 |
30 | 10 | 3:1 |
30~25 | 15~10 | 2~2.5:1 |
25~20 | 20~10 | 1:1 |
根据本公开的实施例,如果照度小于临界照度,则处理器150可根据感测到的照度可变地设置第一相机模块141和第二相机模块142中的主机的帧率,但是处理器150可不调整从机的帧率。根据实施例,临界照度可以是减小由第一相机模块141和第二相机模块142以第一帧率(最高帧率)捕捉的图像的分辨率的照度,并且可被实验性地确定。
根据本公开的实施例,处理器150可根据进入的照度变化将第一相机模块141和第二相机模块142中的从机控制在与主机时间异步状态下。例如,在主机的帧率被设置为小于最高帧率的情况下,处理器150可不以倍数关系来控制从机和主机的帧率。例如,在第一相机模块141是主机并且第二相机模块142是从机的情况下,在主机的帧率可被设置为27fps的情况下,以及在从机的帧率可被设置为5fps的情况下,可将主机和从机控制在时间异步状态下。如果通过输入单元160验证了捕捉命令,则处理器150可中断从机的帧,并且可重新启动从机的帧以与主机的帧同步。作为结果,处理器150可在主机和从机的帧彼此同步的状态下产生捕捉图像。在这种情况下,重新启动的从机的帧率可与主机的帧率相同,或者从机可以以指定的第二帧率操作。
根据本公开的实施例,在用于视频录制的预览模式下,不管环境照度如何,处理器150可不执行帧率控制。例如,在用于视频录制的预览模式下,不管环境照度如何,处理器150可不改变第一帧率。
根据本公开的实施例,当将第二相机模块142的帧率从第二帧率改变为第一帧率时,处理器150可在停止第二相机模块142之后再次设置第二相机模块142的帧率。例如,在指引第二相机模块142来关闭流之后,处理器150可将第二相机模块142的帧率调整为第一帧率,然后处理器150可指引第二相机模块142来打开流以与第一相机模块141的帧率同步。照此,根据本公开的实施例,改变帧率的速度可被提高。
根据本公开的实施例,在设置的临界时间段(例如,5秒)或者更多临界时间段期间(例如,当缩放调整功能被选择时),在第一相机模块141和第二相机模块142两者都以设置的第一帧率操作的状态下,在处理器150不发送捕捉和缩放比改变中的至少一个命令的情况下,处理器150可将从机的帧率改变为第二帧率。
根据本公开的实施例,在预览模式下,处理器150可周期性地指引第一相机模块141和第二相机模块142中的至少一个来执行AF。此外,在预览模式下选择变焦调整功能的情况下,处理器150可通过使用通过输入单元160选择的场景的中心信息来指引第一相机模块141和第二相机模块142中的至少一个来执行AF。对于另一示例,在选择了变焦调整功能的情况下,处理器150可指引从机来执行AF。
根据本公开的实施例,如果接收到AF执行的命令,则第一相机模块141和第二相机模块142中的每一个可执行AF。在第一相机模块141和第二相机模块142中的每一个接收到选择的场景的中心信息的情况下,第一相机模块141和第二相机模块142中的每一个可执行针对基于中心信息的中心的AF。根据实施例,如果在以第二帧率操作的同时接收到AF命令,则第二相机模块142可将帧率改变为第一帧率,然后第二相机模块142可执行AF。当作为从机操作时,第一相机模块141即使验证了AF命令也可不改变帧率来执行AF。
根据本公开的实施例,第一相机模块141和第二相机模块142中的主机可执行AE或AWB中的至少一个,并且可通过处理器150将AE信息或AWB信息中的至少一个提供给从机。根据实施例,从机可基于主机的AE信息来执行AE,并且可基于主机的AWB信息来执行AWB。
根据本公开的实施例,如果不小于第一临界比的缩放比被调整为小于第一临界比的比,则处理器150可首先将第一相机模块141设置为主机,然后可将第一相机模块141的帧率调整为第一帧率。例如,通过缩小来将第一相机模块141的缩放比调整为小于第一临界比,在通过使用从第一相机模块141接收到的图像输出预览图像的同时,处理器150可指引第一相机模块141来将第一相机模块141的帧率改变为第一帧率。处理器150可指引第二相机模块142来将第二相机模块142的帧率改变为第二帧率。
根据本公开的实施例,如果通过缩放调整功能调整的缩放比在特定的比区间之内(例如,1.7~2.3倍),则处理器150可将第一相机模块141和第二相机模块142中的每一个的帧率设置为第一帧率。例如,在当缩放比小于第一临界比(例如,两倍)时的时间点放大发生时,处理器150可将第一相机模块141和第二相机模块142中的每一个的帧率设置为缩放比为1.7倍至2倍的区间中的第一帧率。对于另一示例,在当缩放比不小于第一临界比(例如两倍)时的时间点缩小发生时,处理器150可将第一相机模块141和第二相机模块142中的每一个的帧率设置为缩放比为2.3倍至2倍的区间中的第一帧率。作为结果,当调整后的缩放比被改变为大于或等于第一临界比或者小于第一临界比时,可以减小主机和从机的改变的时间延迟。
根据本公开的实施例,当第一相机模块141和第二相机模块142两者都以第一帧率操作时,如果未接收到对捕捉、AF和缩放比的改变中的至少一个的请求,则处理器150可将不负责预览的从机相机模块的帧率改变为第二帧率。
根据本公开的实施例,虽然响应于捕捉命令产生了捕捉图像,但是处理器150可根据缩放比来通过使用从第一相机模块141和第二相机模块142中的至少一个接收到的图像来产生捕捉图像。
根据实施例,如果缩放比小于第二临界比(例如,1.3倍),则处理器150可通过使用由第一相机模块141捕捉的图像来产生捕捉图像。例如,处理器150可通过使用第一相机模块141的数字缩放调整功能来按比例放大来自第一相机模块141的图像以产生捕捉图像。
根据另一实施例,如果缩放比不小于第二临界比并且小于第一临界比(例如,两次),则处理器150可通过将来自第一相机模块141和第二相机模块142的图像进行合成来产生捕捉图像。当缩放比不小于第二临界比并且小于第一临界比时,处理器150可将第一相机模块141和第二相机模块142的帧率彼此进行同步(时间同步)以将来自第一相机模块141和第二相机模块142的图像进行合成。处理器150可通过将第一相机模块141和第二相机模块142的图像进行合成来产生特定缩放比的图像。例如,处理器150可产生由第一相机模块141和第二相机模块142捕捉的第一图像和第二图像。处理器150可对第一图像和第二图像进行裁剪以适合于缩放比,然后处理器150可将两个裁剪的图像进行合成。处理器150可基于第二相机模块142的校准值倾斜并偏移第二图像。处理器150可通过将第二图像划分为多个块来检测第二图像的将被使用的哪个场景在第一图像中。此外,处理器150可将第二图像和第一图像的检测到的场景进行合成。在本公开的实施例中,随着距主题的距离变得更短,第一相机模块141和第二相机模块142之间的视差可更大。随着距主题的距离变得更长,第一相机模块141和第二相机模块142之间的视差可更小。图像合成单元157可通过克服第一图像和第二图像之间的视差来检测与第二图像的将被使用的所述场景相应的第一图像的场景以将每个捕捉过程的第一图像和第二图像进行合成。
在另一实施例中,如果设置的缩放比不小于第一临界比,则处理器150可通过使用来自第二相机模块142的第二图像来产生捕捉图像。例如,处理器150可通过第二相机模块142的数字缩放调整功能来根据第一临界比的缩放比或更高的缩放比来放大第二图像以产生捕捉图像。根据本公开的实施例,当通过使用第一图像和第二图像中的至少一个来产生捕捉图像时,处理器150可对第一图像和第二图像中的至少一个来执行降噪、对比度增强和/或超分辨率(SR)缩放。
根据本公开的实施例,处理器150可通过使用由第一相机模块141和第二相机模块142捕捉的多个图像帧来产生一个捕捉图像。例如,多个图像帧可根据在当被捕捉时的时间点的环境(例如,手抖动)而彼此不同。这样,当通过使用多个帧(例如,四个)来执行SR缩放时,处理器150可提高捕捉图像的分辨率。例如,处理器150可通过使用具有比正常曝光短的曝光的第一相机模块141和第二相机模块142中的至少一个捕捉图像来产生多个图像帧,并且可以通过使用所述多个图像帧来产生合成的图像(捕捉图像)。这样,根据本公开的实施例,可产生抖动小并且噪声减小的捕捉图像。例如,当缩放比为2倍或更高时,随着缩放比增加,可减小使用第二相机模块142的捕捉图像的分辨率。当通过将使用第二相机模块142的捕捉图像的多个帧进行合成来执行SR合成时,处理器150可提高捕捉图像的分辨率。可选地,当缩放比小于2倍时,使用第一相机模块141的捕捉图像的分辨率可低于使用第二相机模块142的捕捉图像的分辨率。这样,在通过将第一相机模块141和第二相机模块142进行合成而获得的图像中,在第二相机模块142的图像范围之外的边缘场景的分辨率可低于第二相机模块142的图像范围的中心场景的分辨率。为了解决这个问题,在通过将使用第一相机模块141的捕捉图像的多个帧进行合成来提高第一相机模块141的捕捉图像的分辨率之后,处理器150可将分辨率提高的图像和使用第二相机模块142的捕捉图像进行合成以便与设定的缩放比相应。
根据本公开的各种实施例,除了需要不提供预览图像的相机模块的情况之外,可通过减小两个相机模块中的不提供预览图像的相机模块的帧率来减小功耗。
根据本公开的各种实施例,可通过经由使用提供预览图像的主机相机模块的AE/AWB信息来执行从机相机模块的AE/AWB来减少执行AE/AWB所需的时间。
图2是示出根据本公开的第一实施例的相机驱动方法的流程图。
参照图2,在操作205中,如果进入预览模式,则处理器150可驱动第一相机模块141和第二相机模块142。
在操作210中,处理器150可确定第一相机模块141的初始化是否被完成。如果第一相机模块141的初始化被完成,则处理器150可通过使用来自第一相机模块141的第一图像来执行预览。
如果第二相机模块142的初始化被完成,则处理器150可以在睡眠(或待机)模式下驱动第二相机模块142。在操作220中,处理器150可确定用户是否选择了缩放调整功能。例如,当感测到预览屏幕上的双指触摸时,处理器150可验证缩放调整功能的选择。
如果选择了在操作220中验证的缩放调整功能,则在操作225中,处理器150可指引第二相机模块142来执行唤醒以及AE、AWB和AF功能。例如,如果第二相机模块142处于睡眠(或待机)模式下,则处理器150可指引第二相机模块142唤醒并以第一帧率操作,然后处理器150可指引第二相机模块142来执行AE、AWB和AF功能。在操作225中,第一相机模块141可在每个帧起始点输出同步(例如Vsync)信号。第二相机模块142可与第一相机模块141的同步信号同步地输出第二图像。在操作225中,处理器150可通过使用来自第一相机模块141的第一图像的AWB信息和AE信息来对从第二相机模块142接收到的第二图像执行AWB和AE。在操作225中,处理器150可执行相位差AF(相位检测)或对比度AF(粗略AF)。例如,在由于低照度等而相位差AF的信息不精确导致AF需要花费更长时间的情况下,处理器150可在不是最佳聚焦的位置过早地结束AF功能。在发送AF命令之后第一临界时间段到期的情况下,处理器150可结束第二相机模块142的AF功能并且可执行对比度AF。
在操作230中,当通过输入单元160改变缩放比时,处理器150可确定设定的缩放比是否不小于第一临界比。
在操作235中,如果缩放比不小于第一临界比(例如,两倍),则处理器150可确定第二相机模块142的准备是否被完成。例如,在第二相机模块142以第一帧率操作,AE功能、AWB功能和AF功能的执行被完成,并且环境照度不小于边缘照度的情况下,处理器150可确定第二相机模块142可用。根据实施例,如果缩放比不小于第一临界比,则边缘照度可以是第二相机模块142的分辨率或图像质量分别低于第一相机模块141的分辨率或图像质量的照度,并且可通过实验来确定。边缘照度可根据用于视频录制的预览模式和用于捕捉静止图像的预览模式中的每一个而被不同地设置。例如,边缘照度可在视频的预览模式下被设置为80lux,并且可在静止图像的预览模式下被设置为50lux。在操作235中,另外地或可选地,处理器150可通过使用距对象的距离来确定第二相机模块142是否可用。例如,在距对象的距离短于第二相机模块142的可聚焦的距离(例如,20cm)的情况下,第二相机模块142的AF可不准确。此外,在距物体的距离短的情况下,用于将从两个相机模块获得的图像进行合成的时间段可增加。这样,只有当距物体的距离不小于指定的边缘距离时,处理器150可确定第二相机模块142可用。可在选择了缩放调整功能之后至少执行一次操作235,然后可跳过操作235。
在操作235中,如果处理器150通过使用来自第二相机模块142的图像来执行预览,则在操作240中,处理器150可通过使用来自第二相机模块142的图像将预览图像输出到显示器130。在操作240中,处理器150可将第二相机模块142的帧率设置为第一帧率,并且可将第一相机模块141的帧率设置为第二帧率。例如,第一相机模块141的第二帧率可以是10fps。
在操作245中,处理器150可确定缩放调整功能是否被结束。例如,处理器150可通过验证在预览屏幕中执行缩放调整功能的用户的手指被释放来验证缩放调整功能被结束。
在操作245中,如果验证了缩放调整功能被结束,则在操作250中,处理器150可指引第一相机模块141和第二相机模块142来执行AF功能。在操作250之后,处理器150可将第一相机模块141和第二相机模块142中的不负责预览的相机模块的模式或帧率分别改变为睡眠(或待机)模式或第二帧率。
在操作220中,如果缩放调整功能未被选择或者在操作250被执行之后,则在操作255中,处理器150可验证预览模式被结束。如果预览模式被结束,则处理器150可指引第一相机模块141和第二相机模块142以被关闭。直到预览模式被结束,处理器150可将从第一相机模块141或第二相机模块142提供的第一图像或第二图像作为预览图像输出到显示器130。
如果在操作230中处理器150验证了缩放比小于第一临界比,或者如果在操作235中处理器150验证了第二相机模块142未被准备,则处理器150可通过使用来自第一相机模块141的图像将预览图像输出到显示器130。如果在操作245中处理器150验证了缩放调整功能未被结束,则在操作230中,处理器150可确定是否调整缩放比。
图3是示出根据本公开的第二实施例的相机驱动方法的流程图。
参照图3,当驱动相机时处理器150将第二相机模块142的帧率设置为第二帧率,而不是将第二相机模块142控制为进入睡眠模式或待机模式,或者当选择了缩放调整功能时处理器150将第二相机模块142的帧率调整为第二帧率。当指引从机来执行AF时,处理器150可将从机的帧率调整为第一帧率,或者可将从机的帧率保持为第二帧率。在前者的情况下,处理器150可在执行AF之后再次将从机的帧率改变为第二帧率。根据实施例,第一帧率可以是在预览模式中设置的最高帧率,并且第二帧率可小于第一帧率。
在操作305中,处理器150可确定第一相机模块141和第二相机模块142中的每一个的初始化是否被完成。
在操作310中,如果第一相机模块141和第二相机模块142中的第一相机模块141的初始化被完成,则处理器150可通过使用第一相机模块141的图像来输出预览图像。处理器150可将第一相机模块141的帧率设置为第一帧率。如果第二相机模块142的初始化被完成,则处理器150可将第二相机模块142的帧率设置为第二帧率。
在操作315中,处理器150可确定用户是否选择了缩放调整功能。例如,当验证预览屏幕上的双指触摸时,处理器150可验证对缩放调整功能的选择。
在操作320中,如果选择了缩放调整功能,则处理器150可确定通过输入单元160的调整的缩放比是否不小于第一临界比(例如,1.3倍)。当在调整缩放比之前第二相机模块142的AF未被完成或AF失败时,处理器150可指引第二相机模块142来执行AF功能。在提供预览图像的相机模块被改变之前,预先调整将被改变的相机模块的帧率的第一临界比可以是例如1.7倍。
如果在操作320中处理器150验证了调整的缩放比不小于第一临界比,则在操作325中,处理器150可指引第二相机模块142来将第二相机模块142的帧率改变为第一帧率。如果不管缩放比如何选择了缩放调整功能,则处理器150可指引第二相机模块142来将第二相机模块142的帧率改变为第一帧率。
在操作330中,处理器150可确定缩放比是否不小于第二临界比。第二临界比可以是第一相机模块141和第二相机模块142中的提供预览图像并且是主机的相机模块被改变的条件的比,并且可以是2倍。
在操作335中,如果缩放比不小于第二临界比,则处理器150可确定第二相机模块142的准备是否被完成。例如,如果在第二相机模块142完成AF的同时第二相机模块142的帧率改变为第一帧率被完成,则处理器150可确定第二相机模块142的准备被完成。即使AF被完成并且第二相机模块142的帧率被改变为第一帧率被完成,如果环境照度小于边缘照度,则处理器150也可确定第二相机模块142的准备未被完成。根据实施例,如果缩放比不小于第一临界比,则边缘照度可以是第二相机模块142的分辨率低于第一相机模块141的分辨率的照度,并且可通过实验来确定。边缘照度可根据用于视频录制的预览模式和用于捕捉静止图像的预览模式中的每一个而被不同地设置。例如,边缘照度可在视频的预览模式下被设置为80lux,并且可在静止图像的预览模式下被设置为50lux。
在操作335中,另外地或可选地,处理器150可通过使用距对象的距离来确定第二相机模块142是否可用。例如,在距对象的距离短于第二相机模块142的可聚焦的距离(例如,20cm)的情况下,第二相机模块142的AF可不准确。此外,在距物体的距离短的情况下,用于将从两个相机模块获得的图像进行合成的时间段可增加。这样,只有当距物体的距离不小于指定的边缘距离时,处理器150可确定第二相机模块142可用。在选择缩放调整功能之后,操作335可仅被执行特定的次数(例如,一次),然后可跳过操作335。
在操作340中,如果第二相机模块142的准备被完成,则处理器150可通过使用来自第二相机模块142的第二图像来执行预览。
在操作345中,处理器150可确定缩放调整功能是否被结束。例如,处理器150可通过验证执行缩放调整功能的用户的手指离开预览屏幕来验证缩放调整功能被结束。
如果缩放调整功能被结束,则在操作350中,处理器150可指引第一相机模块141和第二相机模块142来执行AF功能。在操作350之后,处理器150可将第一相机模块141和第二相机模块142中的不负责预览的相机模块的帧率改变为第二帧率。
在操作315,如果缩放调整功能未被选择或者在操作350被执行之后,则在操作355,处理器150可验证预览模式被结束。如果预览模式被结束,则处理器150可指引第一相机模块141和第二相机模块142以被关闭直到预览模式被结束,处理器150可将从第一相机模块141或第二相机模块142提供的第一图像或第二图像作为预览图像输出到显示器。
图4是示出根据本公开的实施例的处理器的框图。
参照图4,处理器150可包括输入验证单元151、缩放控制单元155,第一图像处理单元153-1和第二图像处理单元153-2以及图像合成单元157。处理器150的元件可以是单独的硬件模块,或者可以是由至少一个处理器实施的软件模块。例如,包括在处理器150中的元件中的每一个的功能可由一个处理器来执行,或者可由每个单独的处理器来执行。
根据本公开的实施例,输入验证单元151可验证用户的静止图像/视频捕捉请求、捕捉请求、缩放调整请求等。输入验证单元151可基于用户输入来检测缩放比。例如,在用户输入的接口是触摸面板的情况下,输入验证单元151可检测基于两个手指之间的与初始的间隔距离相比增加了的间隔距离而设置的缩放比。
根据本公开的实施例,缩放控制单元155可根据由输入验证单元151检测到的缩放比来控制第一相机模块141和第二相机模块142中的每一个的驱动模式。例如,缩放控制单元155可通过指引第一相机模块141和第二相机模块142以改变为开模式、关模式或睡眠(或待机)模式来控制第一相机模块141和第二相机模块142中的每一个的驱动模式。在预览模式下选择缩放调整功能之前,缩放控制单元155可允许第二相机模块142进入睡眠模式或待机模式。在预览模式下选择缩放调整功能之后,缩放控制单元155可允许第二相机模块142进入活动模式。根据实施例,活动模式可以是第二相机模块142在以第二帧率被驱动的同时输出第二图像的模式。
根据本公开的实施例,缩放控制单元155可基于缩放比来控制相机模块141和相机模块142中的每一个的帧率、AF功能、AE功能和AWB功能中的至少一个。例如,缩放控制单元155可基于缩放比将相机模块141和相机模块142中的每一个的帧率调整为第一帧率或第二帧率。缩放控制单元155可基于感测到的环境照度来改变和设置主机相机模块(相机模块141和相机模块142中的一个)的帧率。例如,为了根据照度与被改变的主相机模块(相机模块141和相机模块142中的一个)进行同步,缩放控制单元155可以在捕捉的同时可变地设置从机相机模块(相机模块141和相机模块142中的另一个)的帧率。
根据本公开的实施例,缩放控制单元155可根据预设场景来指引第一图像处理单元153-1和第二图像处理单元153-2以执行AF、AE和AWB。例如,如果在预览模式下通过输入验证单元151选择了缩放调整功能,则缩放控制单元155可指引第一图像处理单元153-1和第二图像处理单元153-2来执行AF、AE和AWB。根据本公开的实施例,缩放控制单元155可以指引图像合成单元157来产生预览图像和捕捉图像。
根据本公开的实施例,第一图像处理单元153-1和第二图像处理单元153-2可分别对第一相机模块141和第二相机模块1142的输出执行3A(AF、AWB和AE)功能,并且可分别产生在执行3A功能之后获得的第一图像和第二图像。第一图像处理单元153-1和第二图像处理单元153-1可分别执行用于将在第一相机模块141和第二相机模块142的输出上的图像质量(颜色、亮度、焦点等)调整为彼此相同的任务。例如,第一相机模块141和第二相机模块142中的从机中的第一图像处理单元153-1和第二图像处理单元153-2中的一个可从主机中的第一图像处理单元153-1和第二图像处理单元153-2中的另一个接收AWB信息,并且可基于主机的AE和AWB来执行AE和AWB。当接收到AF命令时,第一图像处理单元153-1和第二图像处理单元153-2可执行针对中心的AF功能。根据实施例,第一图像处理单元153-1和第二图像处理单元153-2(例如,相机的图像信号处理单元(ISP))可被分别包括在相机模块141和相机模块142中。
根据本公开的实施例,在预览模式下,图像合成单元157可通过使用来自第一相机模块141和第二相机模块142中的至少一个的图像来产生预览图像。例如,在预览模式下,如果缩放比小于第二临界比,则图像合成单元157可通过使用来自第一相机模块141的图像来产生与缩放比相应的预览图像,并且如果缩放比不小于第二临界比,则可通过使用来自第二相机模块142的图像来产生与缩放比相应的预览图像。
根据本公开的实施例,一旦捕捉,则图像合成单元157可通过使用来自第一相机模块141和第二相机模块142中的至少一个的图像来产生捕捉图像。例如,如果缩放比小于第二临界比,则图像合成单元157可通过根据缩放比对第一相机模块141的图像执行数字缩放来产生捕捉图像。如果缩放比不小于第一临界比里,则图像合成单元157可通过根据缩放比对第二相机模块142的图像执行数字缩放来产生捕捉图像。如果缩放比不小于第二临界比并且小于第一临界比,则图像合成单元157可通过将第一相机模块141和第二相机模块142的图像进行合成来提供捕捉图像。
根据本公开的实施例,图像合成单元157可使用第一相机模块141和第二相机模块142通过图像捕捉来产生第一图像和第二图像,可对第一图像和第二图像进行裁剪以与缩放比相应,并可将裁剪的两张图像进行合成。图像合成单元157可基于第二相机模块142的校准值来倾斜和偏移第二图像。处理器150可通过将第二图像划分为多个块来检测第二图像中的将被使用的哪个场景在第一图像中。此外,处理器150可将第二图像和第一图像的检测到的场景进行合成。在本公开的实施例中,随着距主题的距离变得更短,第一相机模块141和第二相机模块141之间的视差可更大。随着距离主题的距离变的更长,第一相机模块141和第二相机模块142之间的视差可更小。图像合成单元157可检测将被使用的与第二图像的场景相应的第一图像的场景以将每次捕捉过程的第一图像和第二图像进行合成。
根据实施例,当制造第一相机模块141和第二相机模块142时,校准值可通过校准处理来确定,并且可以是例如本征参数或非本征参数。本征参数可以是相机模块中的每一个的特征,并且可以是光学中心、焦距、镜头畸变等。非本征参数可指示两个相机模块之间的相对位置,并且可以倾斜或偏移。校准值可被存储在第一相机模块141和第二相机模块142中的每一个的内部存储器中,或者被存储在第一相机模块141和第二相机模块141中的一个(例如,ROM)中。
根据本公开的实施例,图像合成单元157可根据缩放比调整第一图像和第二图像的合成比。例如,当缩放比为1.3倍时,图像合成单元157可将第一图像的70%和第二图像的30%进行合成。当缩放比为2倍时,图像合成单元157可仅使用第二图像的100%。根据实施例,合成比可通过实验来确定。
根据本公开的各种实施例,可通过使用来自作为多个单焦相机的第一相机模块和第二相机模块的第一图像和第二图像中的至少一个图像来产生预览图像或捕捉图像。因此,根据本公开的各种实施例,可以通过单焦相机来提供与光学缩放功能相似的缩放功能。
图5是示出根据本公开的实施例的帧率的时序图。
参照图5,如果缩放比满足指定的第一条件缩放1,则处理器150可将第一相机模块141的帧率设置为作为最高帧率的第一帧率(例如,30fps),并且可将第二相机模块142的帧率设置为作为低帧率的第二帧率(例如,5fps)。可选地,如果缩放比满足指定的第二条件缩放2,则处理器150可将第一相机模块141和第二相机模块142的每个帧率调整为第一帧率。如果缩放比满足指定的第三条件缩放3,则处理器150可将第一相机模块141的帧率调整为第二帧率,并且可将第二相机模块142的帧率调整为第一帧率。
图6A至图6C是用于描述根据本公开的各种实施例的帧率控制方法的时序图。
参照图6A至图6C,方形的实线可以是由第一相机模块和第二相机模块输出图像帧的部分,方形的虚线可以是不由第一相机模块或第二相机模块输出图像帧的部分。图6A和图6B是在第一相机模块141或第二相机模块142输出最高帧率(30fps)的图像的情况下的时序图,图6C是在低照度中的在第一相机模块141或第二相机模块142的帧率低于最高帧率的状态下输出图像的情况下的时序图。在这种情况下,示出了第一相机模块141和第二相机模块142异步操作(时间异步)。
如图6A所示,当以第二帧率驱动第二相机模块142时,处理器150可通过以下步骤改变第二相机模块142的帧率。在指引第二相机模块142以在时间点t1关闭流之后,处理器150可将第二相机模块142的帧率改变为第一帧率,然后处理器150可指引第二相机模块142以打开流。第二相机模块142可在t1至t2的延迟之后以第一帧率输出第二图像。与在保持第二摄像机模块142的图像输出的状态下改变帧率的情况相比,延迟“t2-t1”可相对短。
如图6B所示,在以第二帧率驱动第二相机模块142的同时,为了将第二相机模块142的帧率改变为第一帧率,处理器150可指引第二相机模块142以在时间点t3将第二相机模块142的帧率改变为第一帧率。在这种情况下,第二相机模块142可以在t3至t4的延迟之后以第一帧率再次输出第一图像。与图6A的延迟“t2-t1”相比,延迟“t4-t3”可增加。
如图6C所示,当异步地驱动第二相机模块142和第一相机模块141的同时,处理器150可以在时间点t5关闭第二相机模块142的图像的流以匹配同步。然后,处理器150可将第二相机模块142的帧率改变为第一帧率,然后处理器150可以与第一相机模块同步地打开来自第二相机模块142图像的流。图6C示出了延迟“t5-t6”。
图7是示出根据本公开的实施例的电子设备控制方法的流程图。
参照图7,在操作710中,处理器(例如,图1的处理器150)可通过输入单元160接收设置的比。
在操作720中,处理器150可确定设置的比是否在指定的范围之内。
在操作730中,处理器150可将第一相机(例如,第一相机模块141)的帧率设置为指定的第一帧率,并且可将第二相机的帧率设置为第二帧率。处理器150可通过使用第一相机在显示器(图1的显示器130)中显示第一图像。
在操作740中,处理器150可将第二相机(例如,第二相机模块142)的帧率设置为指定的第三帧率并且可将第一相机的帧率设置为第四帧率。处理器150可通过使用第二相机在显示器中显示第二图像。
图8示出了根据本公开的各种实施例的网络环境800中的电子装置801。
参照图8,电子装置801可包括各种类型的装置。例如,电子装置801可包括便携式通信装置(例如,智能电话)、计算机装置(例如,个人数字助理(PDA)、平板个人计算机(PC)、膝上型PC、台式PC、工作站或服务器)、便携式多媒体装置(例如,电子书阅读器或运动画面专家组(MPEG-1或MPEG-2)音频层3(MP3)播放器)、便携式医疗装置(例如,心率计、血糖计、血压计或温度计)、相机或可穿戴装置中的至少一个。可穿戴装置可包括附件类型的装置(例如,钟表、戒指、手链、脚链、项链、眼镜、隐形眼镜或头戴装置(HMD))、一体式织物或衣服类型的装置(例如,电子衣物)、身体附接类型的装置(例如,皮肤垫或纹身)或生物可植入电路中的至少一个。根据实施例,电子装置可包括例如电视机(TV)、数字通用盘(DVD)播放器、音响、音响附件装置(例如,扬声器、头戴耳机或耳麦)、冰箱、空调、清洁器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动控制面板、安全控制面板、游戏机、电子词典、电子钥匙、摄像机或电子相框中的至少一个。
根据另一实施例,电子装置可包括导航装置、全球导航卫星系统(GNSS)、事件数据记录器(EDR)(例如,用于汽车、船舶或飞机的黑匣子)、车辆信息娱乐装置(例如,车辆的平视显示器)、工业或家用机器人、无人机、自动柜员机(ATM)、销售点(POS)装置、测量装置(例如,水表、电表或燃气表)或物联网(例如,灯泡、喷水灭火装置、火灾报警器、恒温器或路灯)中的至少一个。根据本公开的实施例,电子装置不限于上述装置。例如,与具有测量个人生物信息(例如心率或血糖)的功能的智能电话相似,电子装置可复杂地提供多个装置的功能。在本公开中,本文使用的术语“用户”可指使用电子装置的人或可指使用电子装置的装置(例如,人工智能电子装置)。
参照图8,在网络环境800下,电子装置801(例如,电子装置)可通过本地无线通信898与电子装置802进行通信,或者可通过网络899与电子装置804或服务器808进行通信。根据实施例,电子装置801可通过服务器808与电子装置804进行通信。
根据实施例,电子装置801可包括总线810、处理器820(例如,至少一个处理器)、存储器830、输入装置850(例如,微型电话或鼠标)、显示器860、音频模块870、传感器模块876、接口877、触觉模块879、相机模块880、电源管理模块888、电池889、通信模块890和用户识别模块896。根据实施例,电子装置801可不包括上述元件的至少一个(例如,显示器860或相机模块880),或者还可包括其他元件。
例如,总线810可与上述元件820至890进行互连,并且可包括用于在上述元件之间传送信号(例如,控制消息或数据)的电路。处理器820可包括中央处理单元(CPU)、应用处理器(应用)、图形处理单元(GPU)、相机的相机图像信号处理器(ISP)或通信处理器(CP)中的一个或更多个。根据实施例,处理器820可用片上系统(Soc)或封装中的系统(SiP)来实施。例如,处理器820可驱动操作系统(OS)或应用来控制被连接到处理器820的另一个元件(例如,硬件或软件元件)中的至少一个,并且可处理和计算各种数据。处理器820可将从其他元件(例如,通信模块890)中的至少一个接收到的指令或数据加载到非易失性存储器832中以处理指令或数据,并且可将处理结果数据存储到非易失性存储器834中。
存储器830可包括例如易失性存储器832或非易失性存储器834。易失性存储器832可包括例如随机存取存储器(RAM)(例如,动态随机存取存储器(DRAM)、静态RAM(SRAM)或同步动态RAM(SDRAM))。非易失性存储器834可包括例如一次可编程只读存储器(OTPROM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、掩模ROM、闪存ROM、闪速存储器、硬盘驱动器或固态驱动器(SSD)。此外,根据电子装置801的连接形式,非易失性存储器834可以以内部存储器836的形式或者以仅在必要时通过连接可用的外部存储器838的形式来配置。外部存储器838还可包括诸如紧凑闪存(CF)、安全数字(SD)、微安全数字(micro-SD)、微型安全数字(mini-SD)、极速数字(xD)、多媒体卡(MMC)或记忆棒的闪速驱动。外部存储器838可以以有线方式(例如,电缆或通用串行总线(USB))或无线(例如,蓝牙(BT))方式可操作地或物理地与电子装置801连接。
例如,存储器830可存储例如电子装置801的至少一个不同的软件元件,诸如与程序840相关联的指令或数据。程序840可包括例如内核841、库843、应用框架845或应用程序(可互换地,“应用”)847。
输入装置850可包括麦克风、鼠标或键盘。根据实施例,键盘可包括被物理地连接的键盘或通过显示器860显示的虚拟键盘。
显示器860可包括显示器、全息图装置或投影仪以及用于控制相关装置的控制电路。屏幕可包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机LED(OLED)显示器、塑料OLED(POLED)、微机电系统(MEMS)显示器或电子纸显示器。根据实施例,显示器可被柔性地、透明地或可穿戴地实施。显示器可包括能够检测用户的触摸输入(诸如,手势输入、接近输入或悬停输入)的触摸电路或能够测量触摸的压力的强度的压力传感器(可互换地,力传感器)。触摸电路或压力传感器可与显示器被整体地实施,或者可以使用从显示器分离的至少一个传感器来实施。全息图装置可使用光的干涉在空间中显示立体图像。投影仪可将光投射到屏幕上以显示图像。屏幕可位于电子装置801的内部或外部。
音频模块870可以例如将声音转换为电信号或将电信号转换为声音。根据实施例,音频模块870可通过输入装置850(例如,麦克风)来获取声音,或者可通过包括在电子装置801中的输出装置(未示出)(例如,扬声器或接收器)、外部电子装置(例如,电子装置802(例如,无线扬声器或无线耳机))或与电子装置801连接的电子装置806(例如,有线扬声器或有线耳机)来输出声音。
传感器模块876可测量或检测例如电子装置801的内部操作状态(例如,功率或温度)或外部环境状态(例如,高度、湿度或亮度)以产生与测量的状态或检测的状态的信息相应的电子信号或数据值。传感器模块876可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁传感器、加速度传感器、握持传感器、接近传感器、颜色传感器(例如,红、绿、蓝(RGB)传感器)、红外传感器、生物传感器(例如,虹膜传感器、指纹传感器、心跳速率监测(HRM)传感器、电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器)、温度传感器、湿度传感器、照度传感器或UV传感器中的至少一个。传感器模块876还可包括用于控制其中包括的至少一个或更多个传感器的控制电路。根据实施例,传感器模块876可通过使用处理器820或与处理器820分离的处理器(例如,传感器集线器)被控制。在使用单独的处理器(例如,传感器集线器)的情况下,在处理器820处于睡眠状态的同时,单独的处理器可在不唤醒处理器820的情况下操作以控制操作的至少一部分或者传感器模块876的状态。
根据实施例,接口877可包括高清晰度多媒体接口(HDMI)、通用串行总线(USB)、光学接口、推荐标准232(RS-232)、D超小型(D-sub)、移动高清链接(MHL)接口、SD卡/MMC(多媒体卡)接口或音频接口。连接器878可将电子装置801和电子装置806进行物理地连接。根据实施例,连接器878可包括例如USB连接器、SD卡/MMC连接器或音频连接器(例如,耳机连接器)。
触觉模块879可将电信号转换为机械刺激(例如,振动或运动)或电刺激。例如,触觉模块879可以向用户施加触觉或动觉刺激。触觉模块879可包括例如马达、压电元件或电激励器。
相机模块880可捕捉例如静止图像和运动画面。根据实施例,相机模块880可包括至少一个镜头(例如,广角镜头和远摄镜头或者前镜头和后镜头)、图像传感器、图像信号处理器(ISP)或闪光灯(例如,发光二极管或氙灯)。
将管理电子装置801的电源的电源管理模块888可构成电源管理集成电路(PMIC)的至少一部分。
电池889可包括主电池、次电池或燃料电池,并且可由外部电源再充电以向电子装置801的至少一个元件供电。
通信模块890可在电子装置801和外部装置(例如,第一外部电子装置802、第二外部电子装置804或服务器808)之间建立通信信道。通信模块890可通过建立的通信信道支持有线通信或无线通信。根据实施例,通信模块890可包括无线通信模块892或有线通信模块894。通信模块890可通过经由无线通信模块892或有线通信模块894中的相关模块的第一网络898(例如,诸如蓝牙(BT)或红外数据协会(IrDA)的无线局域网(LAN))或第二网络899(例如,诸如蜂窝网络的无线广域网)与外部装置(例如,第一外部电子装置802、第二外部电子装置804或服务器808)进行通信。
无线通信模块892可支持例如蜂窝通信、本地无线通信、全球导航卫星系统(GNSS)通信。蜂窝通信可包括例如长期演进(LTE)、LTE高级(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)或全球移动通信系统(GSM)。本地无线通信可包括无线保真(Wi-Fi)、WiFi直连、光保真、BT、蓝牙低能耗(BLE)、紫蜂、近场通信(NFC)、磁安全传输(MST)、射频(RF)或人体局域网(BAN)。GNSS可包括全球定位系统(GPS)、全球导航卫星系统(Glonass)、北斗导航卫星系统(北斗)或者伽利略(欧洲全球卫星导航系统)等中的至少一个。在本公开中,可以互换地使用“GPS”和“GNSS”。
根据实施例,当无线通信模块892支持蜂窝通信时,无线通信模块892可例如使用用户识别模块896(例如,用户识别模块(SIM)卡)来识别或认证通信网络之内的电子装置801。根据实施例,无线通信模块892可包括处理器820(例如,应用处理器(AP)和单独的通信处理器(CP))。在这种情况下,CP可当处理器820处于非活动(睡眠)状态下时代替处理器820或者当处理器820处于活动状态时与处理器820一起来执行与电子装置801中的元件810至896中的至少一个相关联的功能中的至少一部分。根据实施例,无线通信模块892可包括多个通信模块,每个通信模块仅支持蜂窝通信、短程无线通信中的相关通信方案或GNSS通信方案。
有线通信模块894可包括例如局域网(LAN)服务、电力线通信或普通老式电话服务(POTS)。
例如,第一网络898可采用例如用于通过电子装置801和第一外部电子装置802之间的无线直接连接来发送或接收指令或数据的WiFi直连或蓝牙(BT)。第二网络899可包括用于在电子装置801和第二电子装置804之间发送或接收指令或数据的电信网络(例如,诸如LAN或广域网(WAN)的计算机网络、互联网或电话网络)。
根据实施例,可以通过与第二网络连接的服务器808在电子装置801和第二外部电子装置804之间发送或接收指令或数据。第一外部电子装置802和第二外部电子装置804中的每一个可以是类型与电子装置801的类型不同或相同的装置。根据各种实施例,电子装置801将执行的全部操作或一部分操作可由另一电子装置或多个电子装置(例如,电子装置802和电子装置804或服务器808)来执行。根据实施例,在电子装置801自动地或响应于请求执行任何功能或服务的情况下,电子装置801可不内部地执行功能或服务,而是可以可选地或另外地将对与电子装置801相关联的功能中的至少一部分的请求发送到另一装置(例如,电子装置802或804或服务器808)。另一电子装置(例如,电子装置802或804或服务器808)可执行请求的功能或附加功能,并且可将执行结果发送到电子装置801。电子装置801可使用接收到的结果来提供所请求的功能或服务,或者可另外地处理接收的结果以提供请求的功能或服务。为此,例如,可以使用云计算、分布式计算或客户端-服务器计算。
除非另外指明,单数形式的术语可包括复数形式。在本公开中,表述“A或B”、“A和/或B中的至少一个”、“A,B或C”或者“A、B和/或C”中的至少一个可包括相关联的列出的项目中的一个或更多个的所有可能的组合。本文所使用的诸如“第一”、“第二”等的术语可不管元件的顺序和/或优先级来表示各种元件,并且可被用于将一个元件与另一元件相区分,而不限制所述元件。将理解,当将元件(例如,第一元件)称为“(可操作地或通信地)与另一元件(例如,第二元件)结合/被结合到”另一元件(例如,第二元件)或“连接到”另一元件(例如,第二元件)时,元件可以与其它元件直接结合/被直接结合到其它元件或被连接到其它元件,或者可在所述元件和其它元件之间存在中间元件(例如,第三元件)。
在本公开中,根据所述情况,本文使用的“适应于或者被配置为”的表述可与例如“适合于”、“具有…的能力”、“被改变为”、“被制造为”、“能够”或“被设计为”的表述互换使用。在特定情况下,表述“被配置为…的装置”可表示所述装置“能够”与另一装置或其他组件一起操作。例如,“被配置为(或适应于)执行A、B和C”的处理器可表示用于执行相应的操作的专用处理器(例如,嵌入式处理器)或可以通过执行存储在存储装置(例如,830)中的一个或更多个软件程序来执行相应的操作的通用处理器(例如,中央处理器单元(CPU)或应用处理器(AP))。
在本公开中使用的术语“模块”可表示例如包括硬件、软件和固件的一个或更多个组合的单元。术语“模块”可与术语“单元”、“逻辑”、“逻辑块”、“组件”和“电路”交换使用。“模块”可以是集成组件中的最小单元或者可以是集成组件的一部分。“模块”可以是用于执行一个或更多个功能或其中一部分的最小单元。“模块”可被机械地或电子地实施。例如,“模块”可包括已知的或将被开发的应用专用IC(ASIC)芯片、现场可编程门阵列(FPGA)和用于执行某些操作可编程逻辑装置中的至少一个。
例如,根据本公开的实施例的设备(例如,模块或其功能)或方法(例如,操作)中的至少一部分可由以程序模块的形式被存储在计算机可读存储介质中的指令来实施。所述指令当由处理器820执行时可使得一个或更多个处理器来执行与所述指令相应的功能。例如计算机可读存储介质可以是存储器830。
计算机可读记录介质可包括硬盘、软盘、磁介质(例如,磁带)、光学介质(例如,紧凑盘只读存储器(CD-ROM)和数字通用盘(DVD)、磁光介质(例如,光盘))和硬件装置(例如,只读存储器(ROM)、随机存取存储器(RAM)或闪存)。此外,程序指令不仅可包括诸如由编译器产生的机器代码,还可包括在计算机上使用解释器可执行的高级语言代码。根据本公开的实施例,上述硬件单元可被配置为经由用于执行操作的一个或更多个软件模块来操作,反之亦然。
根据本公开的实施例的模块或程序模块包括以上元件中的至少一个或者可省略以上元件中的一部分,或者还可以包括附加的其它元件。由模块、程序模块或其他元件执行的操作可被顺序地、并行地、重复地或以启发式方法来执行。此外,一些操作可以以不同的顺序被执行或可被省略。可选地,可添加其他操作。
根据本公开的实施例,在使用双摄相机的系统中,可减少由相机消耗的功率。
虽然已经参照本公开的各种实施例显示和描述了本公开,但是本领域技术人员将理解,在不脱离由所附权利要求和它们的等同物限定的本公开的精神和范围的情况下,可对其进行各种形式和细节上的改变。
Claims (15)
1.一种电子设备,包括:
第一相机,包括第一视角;
第二相机,包括第二视角;
显示器;
输入装置,被配置为基于用户输入来获取设置比;以及
至少一个处理器,
其中,如果所述比在指定的范围之内,则所述至少一个处理器被配置为:
将第一相机设置为指定的第一帧率,
将第二相机设置为比第一帧率慢的第二帧率,以及
通过所述显示器显示通过使用第一相机以第一帧率获取的第一图像,以及
其中,如果所述比在另一指定的范围之内,则所述至少一个处理器还被配置为:
将第二相机设置为指定的第三帧率,
将第一相机设置为比第三帧率慢的第四帧率,
通过所述显示器显示通过使用第二相机以第三帧率获取的第二图像,
其中,所述比是针对所述显示器显示的图像设置的缩放比,
其中,所述指定的范围和所述另一指定范围不具有重叠的部分。
2.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果所述比在所述指定的范围之内,则通过使用第二相机以第二帧率来获取第二图像,以及
如果所述比在所述另一指定的范围之内,则通过使用第一相机以第四帧率来获取第一图像。
3.如权利要求1所述的电子设备,其中,第一帧率与第三帧率相同;以及
第二帧率与第四帧率相同。
4.如权利要求1所述的电子设备,
其中,第一帧率和第二帧率是倍数关系,以及
其中,第三帧率和第四帧率是倍数关系。
5.如权利要求4所述的电子设备,其中,所述至少一个处理器还被配置为:
将第一相机的帧率设置为第二相机的帧率的倍数,以允许第一相机和第二相机彼此同步。
6.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果根据感测到的环境照度可变地设置第一帧率或第三帧率,则根据所述感测到的环境照度将第二帧率或第四帧率可变地设置为指定的速率,使得第一帧率与第二帧率同步或者第三帧率与第四帧率同步。
7.如权利要求6所述的电子设备,其中,如果在根据所述感测到的环境照度来可变地设置第一相机的第一帧率、不保持倍数关系以及第一相机与第二相机异步地操作的状态下通过所述输入装置接收到捕捉命令,则所述至少一个处理器还被配置为:
中断第二相机的帧;以及
与第一相机的帧同步地重新开始第二相机的所述帧,使得第二相机的所述帧与第一相机的所述帧同步。
8.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果所述比在所述另一指定的范围之内,则确定第二相机是否完成了自动曝光(AE)、自动白平衡(AWB)和自动聚焦(AF)以及第二相机的所述帧率到第一帧率的改变;以及
当确定第二相机完成了所述AE、所述AWB和所述AF以及第二相机的所述帧率到第一帧率的改变,并且环境照度不小于边缘照度时,通过所述显示器显示通过使用第二相机以第三帧率获取的第二图像。
9.如权利要求8所述的电子设备,其中,所述至少一个处理器还被配置为:
如果所述比在所述另一指定的范围之内,并且如果环境照度小于边缘照度,则通过所述显示器显示通过使用第一相机以第一帧率或者以根据所述环境照度调整的帧率获取的第一图像。
10.如权利要求8所述的电子设备,其中,所述至少一个处理器还被配置为:
如果所述比在所述另一指定的范围之内,如果第二相机未完成所述AF或者如果第二相机的所述帧率未被改变为第一帧率,则通过所述显示器显示通过使用第一相机以第一帧率或以根据环境照度调整的帧率获取的第一图像。
11.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果通过缩小将所述比的范围从所述另一指定的范围改变为所述指定的范围,则
将第一相机的帧率设置为第一帧率,
在第一相机的所述帧率被改变之前,通过所述显示器显示以第四帧率获取的第一图像,以及
在第一相机的所述帧率被改变为第一帧率之后,通过所述显示器显示以第一帧率获取的第一图像。
12.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果通过所述输入装置接收到捕捉命令,则根据所述设置比对第一图像或第二图像执行数字缩放,或者
在根据所述设置比对第一图像和第二图像进行裁剪之后,利用裁剪的第一图像和裁剪的第二图像来产生与所述设置比相应的捕捉图像。
13.如权利要求1所述的电子设备,
其中,第一相机和第二相机中的一个是提供将被输出到所述显示器的图像的主机,另一个是从机,以及
其中,所述至少一个处理器还被配置为基于所述主机的自动曝光(AE)信息和自动白平衡(AWB)信息来执行所述从机的AE和AWB。
14.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
在通过所述输入装置调整所述比之前,允许第二相机进入睡眠模式或待机模式,以及
如果调整所述比,则指引第二相机醒来。
15.如权利要求1所述的电子设备,其中,所述至少一个处理器还被配置为:
如果通过所述输入装置将所述比调整为增加之后将所述比调整为减小,并且如果所述比是一倍,则指引第二相机进入睡眠模式或待机模式。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160115309A KR102600504B1 (ko) | 2016-09-07 | 2016-09-07 | 전자 장치 및 그 제어 방법 |
KR10-2016-0115309 | 2016-09-07 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107800959A CN107800959A (zh) | 2018-03-13 |
CN107800959B true CN107800959B (zh) | 2021-06-08 |
Family
ID=59829214
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710800468.2A Expired - Fee Related CN107800959B (zh) | 2016-09-07 | 2017-09-07 | 电子设备及其控制方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10484600B2 (zh) |
EP (1) | EP3293962B1 (zh) |
KR (1) | KR102600504B1 (zh) |
CN (1) | CN107800959B (zh) |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101926018B1 (ko) * | 2016-08-12 | 2018-12-06 | 라인 가부시키가이샤 | 동영상 녹화 방법 및 시스템 |
US10250812B2 (en) * | 2017-05-17 | 2019-04-02 | Caterpillar Inc. | Display system for machine |
CN107343158A (zh) * | 2017-07-25 | 2017-11-10 | 广东欧珀移动通信有限公司 | 加快aec收敛的方法及装置、终端设备 |
US10681273B2 (en) * | 2017-08-24 | 2020-06-09 | Samsung Electronics Co., Ltd. | Mobile device including multiple cameras |
KR20190032818A (ko) * | 2017-09-20 | 2019-03-28 | 삼성전자주식회사 | 롤링 셔터 방식을 이용한 복수의 카메라를 포함하는 전자 장치 |
JP6630939B2 (ja) * | 2018-04-26 | 2020-01-15 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 制御装置、撮像装置、移動体、制御方法、及びプログラム |
CN110830756B (zh) * | 2018-08-07 | 2022-05-17 | 华为技术有限公司 | 一种监控方法与装置 |
KR102544709B1 (ko) * | 2018-09-18 | 2023-06-20 | 삼성전자주식회사 | 외부 조도에 기반하여 복수개의 카메라를 구동하는 전자 장치 |
EP3855713B1 (en) * | 2018-09-21 | 2024-02-14 | LG Electronics Inc. | Mobile terminal |
US11991445B2 (en) * | 2018-12-13 | 2024-05-21 | Hangzhou Taro Positioning Technology Co., Ltd. | Camera mobile device stabilization using a high frame rate auxiliary imaging element |
KR102629343B1 (ko) * | 2018-12-21 | 2024-01-26 | 삼성전자주식회사 | 다중 셀 구조의 카메라 모듈 및 그 카메라 모듈을 포함하는 휴대용 통신 장치 |
CN109743561A (zh) * | 2018-12-29 | 2019-05-10 | 努比亚技术有限公司 | 一种终端拍摄方法、拍摄终端及计算机可读存储介质 |
KR102661614B1 (ko) * | 2019-02-11 | 2024-04-29 | 삼성전자주식회사 | 화면 제공 방법 및 이를 지원하는 전자 장치 |
EP3928255A1 (en) | 2019-02-19 | 2021-12-29 | Lutron Technology Company LLC | Visible light sensor configured for detection of glare conditions |
KR102664705B1 (ko) | 2019-02-19 | 2024-05-09 | 삼성전자주식회사 | 복수의 카메라들을 이용하여 이미지의 배율을 변경하기 위한 전자 장치 및 방법 |
GB2583704B (en) * | 2019-04-19 | 2023-05-24 | Jaguar Land Rover Ltd | Imaging system and method |
KR20200141338A (ko) * | 2019-06-10 | 2020-12-18 | 삼성전자주식회사 | 이미지 신호 프로세서, 상기 이미지 신호 프로세서의 동작 방법 및 상기 이미지 신호 프로세서를 포함하는 이미지 처리 시스템 |
US11113797B1 (en) * | 2019-08-19 | 2021-09-07 | Snap Inc. | Passive flash imaging |
US11064108B2 (en) * | 2019-08-21 | 2021-07-13 | Sony Corporation | Frame rate control for media capture based on rendered object speed |
CN112422805B (zh) * | 2019-08-22 | 2022-02-18 | 华为技术有限公司 | 一种拍摄方法及电子设备 |
KR102099687B1 (ko) * | 2020-01-29 | 2020-04-10 | 주식회사 원테크시스템 | 영상 촬영 장치 및 시스템 |
US10949986B1 (en) | 2020-05-12 | 2021-03-16 | Proprio, Inc. | Methods and systems for imaging a scene, such as a medical scene, and tracking objects within the scene |
CN113784015A (zh) * | 2020-06-10 | 2021-12-10 | Oppo广东移动通信有限公司 | 图像处理电路、电子设备和图像处理方法 |
JP2021197659A (ja) * | 2020-06-16 | 2021-12-27 | キヤノン株式会社 | 制御装置、制御方法、及び、プログラム |
US11265462B2 (en) * | 2020-07-06 | 2022-03-01 | Qualcomm Incorporated | Automatic camera selection capturing intended subjects in an image |
US11671704B2 (en) * | 2020-11-13 | 2023-06-06 | Samsung Electronics Co., Ltd. | Electronic device including a plurality of image sensors and method for thereof |
US20220160260A1 (en) * | 2020-11-25 | 2022-05-26 | Electronics And Telecommunications Research Institute | System and method for measuring biomedical signal |
US11425306B2 (en) * | 2021-01-22 | 2022-08-23 | Qualcomm Incorporated | Zoom in or zoom out with slow-motion video capture |
CN112887617B (zh) * | 2021-01-26 | 2022-12-20 | 维沃移动通信有限公司 | 一种拍摄方法、装置和电子设备 |
US20220327718A1 (en) * | 2021-04-13 | 2022-10-13 | Qualcomm Incorporated | Techniques for enhancing slow motion recording |
EP4333449A4 (en) * | 2021-09-27 | 2024-10-16 | Samsung Electronics Co Ltd | PORTABLE DEVICE WITH CAMERA AND CONTROL METHOD THEREFOR |
US20230147711A1 (en) * | 2021-11-08 | 2023-05-11 | Proprio, Inc. | Methods for generating stereoscopic views in multicamera systems, and associated devices and systems |
CN117641116B (zh) * | 2022-08-26 | 2024-10-15 | 荣耀终端有限公司 | 一种控制摄像头帧率的方法及电子设备 |
CN116156334A (zh) * | 2023-02-28 | 2023-05-23 | 维沃移动通信有限公司 | 拍摄方法、装置、电子设备和可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004304252A (ja) * | 2003-03-28 | 2004-10-28 | Minolta Co Ltd | 撮像システム |
CN101506868A (zh) * | 2006-09-08 | 2009-08-12 | 索尼株式会社 | 显示设备和显示方法 |
CN102959941A (zh) * | 2010-07-02 | 2013-03-06 | 索尼电脑娱乐公司 | 信息处理系统、信息处理装置及信息处理方法 |
CN104333702A (zh) * | 2014-11-28 | 2015-02-04 | 广东欧珀移动通信有限公司 | 一种自动对焦的方法、装置及终端 |
EP2874386A1 (en) * | 2013-11-18 | 2015-05-20 | Nokia Corporation | Method, apparatus and computer program product for capturing images |
CN104660994A (zh) * | 2015-02-09 | 2015-05-27 | 武汉理工大学 | 海事专用摄像机及海事智能监控方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7978239B2 (en) * | 2007-03-01 | 2011-07-12 | Eastman Kodak Company | Digital camera using multiple image sensors to provide improved temporal sampling |
CN104350734B (zh) * | 2012-06-11 | 2017-12-12 | 索尼电脑娱乐公司 | 图像生成设备以及图像生成方法 |
CN108234851B (zh) * | 2013-06-13 | 2019-08-16 | 核心光电有限公司 | 双孔径变焦数字摄影机 |
US9438868B2 (en) | 2014-02-13 | 2016-09-06 | Semiconductor Components Industries, Llc | Adaptive image sensor systems and methods |
WO2016004115A1 (en) | 2014-07-01 | 2016-01-07 | Apple Inc. | Mobile camera system |
US9800798B2 (en) * | 2015-02-13 | 2017-10-24 | Qualcomm Incorporated | Systems and methods for power optimization for imaging devices with dual cameras |
-
2016
- 2016-09-07 KR KR1020160115309A patent/KR102600504B1/ko active IP Right Grant
-
2017
- 2017-09-06 EP EP17189709.3A patent/EP3293962B1/en active Active
- 2017-09-06 US US15/696,504 patent/US10484600B2/en active Active
- 2017-09-07 CN CN201710800468.2A patent/CN107800959B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004304252A (ja) * | 2003-03-28 | 2004-10-28 | Minolta Co Ltd | 撮像システム |
CN101506868A (zh) * | 2006-09-08 | 2009-08-12 | 索尼株式会社 | 显示设备和显示方法 |
CN102959941A (zh) * | 2010-07-02 | 2013-03-06 | 索尼电脑娱乐公司 | 信息处理系统、信息处理装置及信息处理方法 |
EP2874386A1 (en) * | 2013-11-18 | 2015-05-20 | Nokia Corporation | Method, apparatus and computer program product for capturing images |
CN104333702A (zh) * | 2014-11-28 | 2015-02-04 | 广东欧珀移动通信有限公司 | 一种自动对焦的方法、装置及终端 |
CN104660994A (zh) * | 2015-02-09 | 2015-05-27 | 武汉理工大学 | 海事专用摄像机及海事智能监控方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3293962B1 (en) | 2021-12-29 |
US20180070009A1 (en) | 2018-03-08 |
KR102600504B1 (ko) | 2023-11-10 |
US10484600B2 (en) | 2019-11-19 |
EP3293962A1 (en) | 2018-03-14 |
KR20180027978A (ko) | 2018-03-15 |
CN107800959A (zh) | 2018-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107800959B (zh) | 电子设备及其控制方法 | |
US11048061B2 (en) | Electronic device including camera module | |
EP3296951B1 (en) | Image composition method and electronic device for supporting the same | |
US11350033B2 (en) | Method for controlling camera and electronic device therefor | |
EP3628121B1 (en) | Electronic device for storing depth information in connection with image depending on properties of depth information obtained using image and control method thereof | |
KR102524498B1 (ko) | 듀얼 카메라를 포함하는 전자 장치 및 듀얼 카메라의 제어 방법 | |
CN108289161B (zh) | 电子设备及其图像捕捉方法 | |
KR102520225B1 (ko) | 전자 장치 및 전자 장치의 이미지 촬영 방법 | |
US10491826B2 (en) | Method for obtaining panning shot image and electronic device supporting the same | |
US11006030B2 (en) | Method and electronic device for acquiring image by using camera comprising driving apparatus capable of rotating mirror | |
EP2991339B1 (en) | Photographing method and electronic device | |
KR102547104B1 (ko) | 전자 장치 및 복수의 영상을 처리하는 방법 | |
EP3188467A1 (en) | Method for image capturing using unmanned image capturing device and electronic device supporting the same | |
KR20180042718A (ko) | 영상을 촬영하는 전자 장치 | |
KR20180011539A (ko) | 영상의 처리를 위한 전자 장치 | |
US20160147498A1 (en) | Method for displaying image and electronic device thereof | |
EP3476119B1 (en) | Method for controlling multi-filed of view image and electronic device for supporting the same | |
KR102489279B1 (ko) | 이미지 처리장치 및 방법 | |
US10326936B2 (en) | Method for providing images and electronic device supporting the same | |
US20190364186A1 (en) | Image processing method and electronic device supporting same | |
KR20190025373A (ko) | 복수의 이미지 센서들의 동기화 제어 방법 및 이를 구현한 전자 장치 | |
KR20200094500A (ko) | 이미지 프레임 데이터에 포함된 라인 데이터를 복수의 구간들로 처리하는 전자 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210608 |