CN108702457B - 用于自动图像校正的方法、装置和计算机可读存储媒体 - Google Patents
用于自动图像校正的方法、装置和计算机可读存储媒体 Download PDFInfo
- Publication number
- CN108702457B CN108702457B CN201780012963.5A CN201780012963A CN108702457B CN 108702457 B CN108702457 B CN 108702457B CN 201780012963 A CN201780012963 A CN 201780012963A CN 108702457 B CN108702457 B CN 108702457B
- Authority
- CN
- China
- Prior art keywords
- image
- imaging device
- user
- lens
- blocks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003702 image correction Methods 0.000 title claims abstract description 77
- 238000000034 method Methods 0.000 title claims abstract description 76
- 238000003384 imaging method Methods 0.000 claims abstract description 86
- 230000000007 visual effect Effects 0.000 claims abstract description 15
- 230000015654 memory Effects 0.000 claims description 18
- 238000004891 communication Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 11
- 241001465754 Metazoa Species 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 230000001788 irregular Effects 0.000 description 3
- 230000003936 working memory Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 229910001285 shape-memory alloy Inorganic materials 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10148—Varying focus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
Abstract
公开用于自动图像校正的方法、装置和计算机可读存储媒体。在一个方面,所述方法可由包含触摸传感器的成像装置操作以用于执行图像校正。所述方法可包含获得场景的第一图像,和经由所述触摸传感器接收指示所述第一图像的选定区域且具有对应于所述选定区域的形状的形状的触摸输入。所述方法还可包含确定指示所述选定区域的视觉性质的统计,基于所述确定的统计和所述触摸输入的所述形状调整所述成像装置的至少一个图像校正参数,和基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
Description
技术领域
本申请大体涉及数字图像处理,且更具体地说,涉及用于改善数字图像校正的方法和系统。
背景技术
例如数码相机的成像装置可对捕获的图像执行自动图像校正以便在无显著用户干预的情况下增加捕获的图像的质量。自动图像校正可涉及(例如)3A图像校正功能(即,自动曝光、自动白平衡和自动聚焦)。举例来说,3A图像校正可基于全部捕获的图像、在图像内的物体的自动检测或由用户对图像内的点的选择。此类图像校正方法可受到选择关注区域用于3A图像校正的方式影响。在此情况下,保持对于基于对关注区域的选择的改善对图像校正进一步控制的需求。
发明内容
本公开的系统、方法和装置各自具有若干创新方面,其中没有单个方面单独负责本文中所公开的合乎需要的属性。
在一个方面,提供一种可由包含触摸传感器的成像装置操作以用于执行图像校正的方法。所述方法可包括获得场景的第一图像;经由所述触摸传感器接收指示所述第一图像的选定区域且具有对应于所述选定区域的形状的形状的触摸输入;确定指示所述选定区域的视觉性质的统计;基于所述确定的统计和所述触摸输入的所述形状调整所述成像装置的至少一个图像校正参数;以及基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
在另一方面中,提供一种成像装置,包括图像传感器;显示器;触摸传感器;至少一个处理器;以及存储器,其存储用于控制所述至少一个处理器进行以下操作的计算机可执行指令:从所述图像传感器获得场景的第一图像;以及控制所述显示器显示所述第一图像;从所述触摸传感器接收指示所述第一图像的选定区域且具有对应于所述选定区域的形状的形状的触摸输入;确定指示所述选定区域的视觉性质的统计;基于所述确定的统计和所述触摸输入的所述形状调整所述成像装置的至少一个图像校正参数;以及基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
在又一方面中,提供一种设备,其包括用于获得场景的第一图像的装置;用于接收指示所述第一图像的选定区域且具有对应于所述选定区域的形状的形状的触摸输入的装置;用于确定指示所述选定区域的视觉性质的统计的装置;用于基于所述确定的统计和所述触摸输入的所述形状调整成像装置的至少一个图像校正参数的装置;以及用于基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像的装置。
在再一方面中,提供一种非暂时性计算机可读存储媒体,其具有存储于其上的指令,所述指令在被执行时使装置的处理器:获得场景的第一图像;经由触摸传感器接收指示所述第一图像的选定区域且具有对应于所述选定区域的形状的形状的触摸输入;确定指示所述选定区域的视觉性质的统计;基于所述确定的统计和所述触摸输入的所述形状调整成像装置的至少一个图像校正参数;以及基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
附图说明
图1A说明根据本公开的方面的包含可记录场景的图像的成像系统的设备(例如,移动通信装置)的实例。
图1B是说明根据本公开的方面的成像装置的实例的框图。
图2是由根据本公开的方面的成像装置捕获的第一图像的实例。
图3是根据本公开的方面的由用户选择用于图像校正的区域的实例。
图4是根据本公开的方面的由用户选择用于图像校正的区域的另一实例。
图5是根据本公开的方面的由用户选择用于图像校正的区域的又一实例。
图6展示根据本公开的方面的包含由用户选择的多个物体的区域的实例。
图7说明根据本公开的方面的确定选定区域的统计的实例方法。
图8是说明根据本公开的方面的可由成像装置操作的实例方法的流程图。
图9是说明根据本公开的方面的可由成像装置操作的另一实例方法的流程图。
具体实施方式
数码相机系统或其它成像装置可执行各种自动过程以校正或调整捕获的图像的视觉性质。图像校正可包含(例如)3A图像校正功能(即,自动曝光、自动白平衡和自动聚焦)。数码相机可确定与当前图像校正功能有关的视觉统计,且将确定的统计用作在确定校正值以调整数码相机系统的图像校正参数中的反馈。举例来说,在自动聚焦的情况下,统计可涉及捕获的图像的聚焦值。数码相机可接着调整相机的镜头的位置,重新确定聚焦值,和重新调整镜头的位置直到已获得光学聚焦值。
自动聚焦算法可涉及优化用于全部捕获的图像的聚焦值。由于图像内的物体的焦点可基于物体距相机的镜头的相应距离(也被称作物体的深度),因此当物体位于不同距离处时,其可能并不都在给定镜头位置的焦点内。优化全部图像的聚焦值的自动聚焦方法可针对大多数物体处于类似深度(例如,主焦深)的场景产生可接受的焦点。然而,相机的用户可能不能够使用这自动聚焦方法聚焦于不在主焦深处的物体。
存在可解决以上限制的自动聚焦算法的许多变化。在一个此方法中,自动聚焦算法可对捕获的图像的中心更加重点关注。因此,用户可能够通过在由相机捕获的图像的中心处定位所要的物体来选择焦点深度。然而,这方法使用户不能够自动聚焦于不在图像的中心处的物体上的图像。
在另一实施方案中,相机可接受指示执行自动聚焦的图像的位置的来自用户的输入。用户可选择图像内的位置,且相机可仅基于或权重大地基于对应于用户的选定位置的区域而自动聚焦。在一个实例中,用户可经由触摸输入来输入选定位置。这可使用户能够选择不在图像的中心处或图像的主焦深处的物体用于自动聚焦。然而,这实施方案可具有用户可仅能够选择固定大小和形状的单个位置的限制。不能使用这方法选择具有不规则形状的某些物体或多个物体用于自动聚焦。
在又一实施方案中,相机可从用户接受多个位置以基于选定多个位置找到一或多个最佳聚焦值。因此,用户可选择相机执行自动聚焦的多个区域。为了相机聚焦选定区域中的每一个,可能需要相机在对应于选定区域的焦深中的每一个处捕获多个图像,或相机可包含冗余硬件组件用于同时捕获在不同焦深处的图像。
以上描述的自动聚焦实施方案中的每一个可在用户可选择图像的位置用于自动聚焦的方式方面受到限制。举例来说,用户可仅能够选择可由相机在执行自动聚焦过程中使用的固定区和固定形状区域。因此,此有限信息防止摄像机系统的处理器执行可更精确地聚焦于用户所关注的物体的更先进的自动聚焦技术。用户也可能难以选择具有比选定位置的定义的大小和形状大的大小的物体。举例来说,当使用触摸输入传感器时,用户选择靠近一起的多个位置以便选择较大物体可能棘手。另外,选定位置的组合可能比期望由用户选择的物体大,这可导致不准确的自动聚焦处理。
虽然已关于图像校正的自动聚焦实施方案论述上文,但本公开也可应用于其它自动图像校正技术,例如,自动曝光和自动白平衡。由处理器确定的统计和反馈值可对应于应用的具体自动图像校正。举例来说,在自动曝光中,由处理器确定的统计可涉及捕获的图像的亮度、对比度等。统计可由处理器用作反馈来基于统计按次序控制相机的光圈大小或快门速度中的至少一个以执行自动曝光。类似地,在自动白平衡中,处理器可基于选定位置确定图像的色温。所述处理器可基于确定的色温更改捕获的图像以补偿场景的照明。也可在本公开的范围内执行其它图像校正算法。
以下详细描述是针对某些具体实施例。然而,可以大量不同方式体现描述的技术。应当显而易见的是,本文中的方面可以广泛多种形式体现,并且本文中公开的任何具体结构、功能或两者仅为代表性的。基于本文中的教示,所属领域的技术人员应了解,本文中所揭示的方面可以独立于任何其它方面而实施,且可以各种方式组合这些方面中的两个或更多个方面。举例来说,可以使用本文中所阐述的任何数目个方面来实施设备或实践方法。此外,使用除了在本文中所阐述的方面中的一或多个之外或不同于在本文中所阐述的方面中的一或多个的其它结构、功能性或结构和功能性可以实施此设备或可以实践此方法。
另外,本文中描述的系统和方法可实施于代管相机的多种不同计算装置上。这些包含移动电话、平板电脑、专用相机、便携式计算机、照相亭或照片冲印机、个人数字助理、超移动个人计算机和移动互联网装置。它们可使用通用或专用计算系统环境或配置。可适合供本发明使用的计算系统、环境和/或配置的实例包含(但不限于)个人计算机(PC)、服务器计算机、手持式装置或膝上型装置、多处理器系统、基于微处理器的系统、可编程消费型电子器件、网络PC、微型计算机、大型计算机、包含以上系统或装置中的任一个的分散式计算环境等。
图1A说明根据本公开的方面的包含可记录场景的图像的成像系统的设备(例如,移动通信装置)的实例。设备100包含显示器120。设备100还可在设备的相反侧上包含未展示的相机。显示器120可显示在相机的视野130内捕获的图像。图1A展示在视野130内的可由相机捕捉的物体150(例如,人)。设备100内的处理器可基于与捕获的图像相关联的测得值执行场景的捕获的图像的自动图像校正。
设备100可执行各种自动过程以校正图像的视觉性质。在一个方面,设备100可基于由用户选择的图像的区域执行自动图像校正,包含自动聚焦、自动曝光和自动白平衡中的一或多个。本公开的方面可涉及允许设备100的用户选择图像的不规则区域(例如,具有由用户在选择时确定的形状和大小的区域)用作自动图像校正期间的反馈的技术。
图1B描绘说明根据本公开的方面的成像装置的实例的框图。成像装置200(在本文中还被互换地称作相机)可包含操作性地连接到图像传感器214的处理器205、任选深度传感器216、镜头210、致动器212、光圈218、快门220、存储器230、任选存储装置275、显示器280、输入装置290和任选闪光灯295。在这个实例中,说明的存储器230可存储指令以配置处理器205执行关于成像装置200的功能。在这个实例中,存储器230可包含用于指导处理器205执行根据本公开的方面的图像校正的指令。
在说明性实施例中,光进入镜头210且聚焦于图像传感器214上。在一些实施例中,镜头210是可包含多个镜头和可调整光学元件的自动聚焦镜头系统的部分。在一个方面,图像传感器214利用电荷耦合装置(CCD)。在另一方面,图像传感器214利用互补金属氧化物半导体(CMOS)或CCD传感器。镜头210耦合到致动器212且可由致动器212相对于图像传感器214移动。致动器212被配置成在自动聚焦操作期间在一系列一或多个镜头移动中移动镜头210,例如,调整镜头位置以改变图像的焦点。当镜头210到达其移动范围的边界时,镜头210或致动器212可被称作饱和。在说明性实施例中,致动器212是开环音圈电机(VCM)致动器。然而,可通过所属领域中已知的任何方法(包含闭环VCM、微机电系统(MEMS)或形状记忆合金(SMA))致动镜头210。
在某些实施例中,成像装置可包含多个图像传感器214。每一图像传感器214可具有对应的镜头210和/或光圈218。在一个实施例中,多个图像传感器214可为相同类型的图像传感器(例如,拜耳(Bayer)传感器)。在这个实施方案中,成像装置200可经由可在不同焦深处聚焦的多个图像传感器214同时捕获多个图像。在其它实施例中,图像传感器214可包含产生关于捕获的场景的不同信息的不同图像传感器类型。举例来说,不同图像传感器214可被配置成捕获不同于可见光谱的不同波长的光(红外线、紫外线等)。
深度传感器216被配置成估计图像中待由成像装置200捕获的物体的深度。所述物体可由用户经由用户经由输入装置290输入对应于物体的区域来选择。深度传感器216可被配置成使用可适用于确定或估计物体或场景关于成像装置200的深度的任何技术(包含用于估计深度的自动聚焦技术,例如,相位检测自动聚焦、飞行时间自动聚焦、激光自动聚焦或双相机自动聚焦)来执行深度估计。也可使用由成像装置200从场景内的物体或关于所述物体接收的深度或位置信息来应用所述技术。
显示器280被配置成显示经由镜头210和图像传感器214捕获的图像,且也可用以实施成像装置200的配置功能。在一个实施方案中,显示器280可被配置成显示由成像装置200的用户经由输入装置290选择的捕获的图像的一或多个区域。在一些实施例中,成像装置200可不包含显示器280。
输入装置290可取决于实施方案而呈现许多形式。在一些实施方案中,输入装置290可与显示器280集成,以便形成触摸屏显示器。在其它实施方案中,输入装置290可包含在成像装置200上的分离的按键或按钮。这些按键或按钮可提供用于在显示器280上显示的菜单的导览的输入。在其它实施方案中,输入装置290可为输入端口。举例来说输入装置290可提供另一装置到成像装置200的操作性耦合。成像装置200可接着接收经由输入装置290从附接的键盘或鼠标的输入。在再其它实施例中,输入装置290可远离成像装置200,且通过例如无线网络或硬接线网络的通信网络与成像装置200通信。在又其它实施例中,输入装置290可为可经由跟踪输入装置的位置的改变接收呈三维形式的输入的运动传感器(例如,运动传感器用作用于虚拟现实显示器的输入)。输入装置290可以允许用户经由可形成曲线(例如,线)、闭环或开环的连续或大体上连续线/曲线的输入选择图像的区域。
存储器230可由处理器205用以存储在成像装置200的操作期间动态创建的数据。在一些实例中,存储器230可包含其中存储动态创建的数据的分离的工作存储器。举例来说,存储于存储器230中的指令在由所述处理器205执行时可存储于工作存储器中。工作存储器也可存储动态运行的数据,例如,由在处理器205上执行的程序利用的堆叠或堆栈数据。存储装置275可用以存储由成像装置200创建的数据。举例来说,经由图像传感器214捕获的图像可存储于存储装置275上。像输入装置290一样,存储装置275也可位于远处,即,不与成像装置200成整体,且可所述通信网络接收捕获的图像。
存储器230可被视为计算机可读媒体且存储用于指导处理器205执行根据本公开的各种功能的指令。举例来说,在一些方面,存储器230可被配置成存储使处理器205执行方法400、方法500或其部分的指令,如下描述且如在图8和9中所说明。
在一个实施方案中,存储于存储器230中的指令可包含用于执行自动聚焦的指令,所述指令配置处理器205以确定镜头210的可包含用于捕获图像的所要的镜头位置的一系列镜头位置中的镜头位置。所确定的镜头位置可不包含在镜头位置的范围内的每个可能镜头位置,但可仅包含在镜头位置的范围内的一子集的可能镜头位置。所确定的镜头位置可按确定的镜头位置之间的一或多个可能镜头位置的步长分开。举例来说,所确定的镜头位置可包含:在镜头位置的范围的一端处的第一镜头位置,所述第一镜头位置表示第一聚焦距离;和在镜头位置的范围的另一端处的第二镜头位置,所述第二镜头位置表示第二聚焦距离。所确定的镜头位置可进一步包含一或多个中间镜头位置,每一中间镜头位置表示第一聚焦距离与第二聚焦距离之间的聚焦距离,其中所确定的镜头位置按第一镜头位置范围中的确定的镜头位置之间的一或多个可能镜头位置的步长分开。在说明性实施例中,处理器205可至少部分地基于物体的深度的估计确定镜头位置的范围中的镜头位置。所述指令也可配置处理器205确定或产生在镜头位置的范围内的一或多个镜头位置处捕获的图像的聚焦值。用于捕获图像的所要镜头位置可以是具有最大聚焦值的镜头位置。所述指令也可配置处理器205基于确定的或产生的聚焦值确定或产生聚焦值曲线或表示聚焦值曲线的数据。所述指令也可配置处理器205至少部分基于产生的聚焦值确定镜头位置的搜索范围中的镜头位置,或基于镜头位置的先前搜索范围确定聚焦值曲线或表示聚焦值曲线的数据。
现将关于图2到7描述可由用户选择用于执行根据本公开的方面的自动图像校正的各种区域的实例。图2是由根据本公开的方面的成像装置捕获的第一图像的实例。图2的图像包含由在图像的右边展示的男人310拿着的中心物体305。中心物体305部分阻碍正在图像的背景中的女人315。另外,另一女人的脸320可在图像的左侧上的前景中看到。在关于图2到7的以下描述中,可关于输入装置290为触摸传感器的实施例来描述由用户进行的区域的选择。然而,所属领域的技术人员应了解,用户也可经由其它输入装置290选择图像的区域,例如,经由运动传感器、分开的按键或按钮,或经由从网络连接(硬接线或无线)接收的预定输入。
图2的图像可为使用自动图像校正技术捕获的图像。举例来说,位于图像的中心处的装置可被自动选择为关于哪一个执行自动图像校正的主体。在自动聚焦的情况下,处理器205可确定物体305的焦深,且基于确定的焦深调整镜头的位置以便聚焦中心物体305上的捕获的图像。
根据本公开的一或多个方面,图3是根据本公开的方面的由用户选择用于图像校正的区域的实例。在图3的实施方案中,用户可选择在图像的右边展示的男人310用于自动图像校正。这可通过用户在男人310周围绘制闭环325来实现。由于闭环325不包含中心物体305,因此处理器205可基于排除或减小从中心物体305和/或捕获的图像的其它区域确定的统计的效果来执行自动图像校正。因此,处理器205可基于所述区域包含在图像的右边的男人310来执行自动图像校正。在自动聚焦的一个实例中,处理器205可确定闭环325的选定区域内的主焦深,或可确定闭环325的完全焦深内的多个图像的捕获的一系列深度。这将在下文关于图8更详细地描述。
图4是根据本公开的方面的由用户选择用于图像校正的区域的另一实例。如图4中所展示,用户可选择在背景中的女人315作为用于自动图像校正的区域。由于中心物体305阻碍了女人315的大部分被看到,因此用户可能难以在排除中心物体305供选择的同时在女人315周围绘制闭环。因而,在图4中说明的选定区域中,用户可绘制重叠背景中的女人315的曲线或线330。由于曲线330不重叠中心物体305,所以用户可能够易于选择女人315,而不包含选定区域中的中心物体305。
参看图5,展示根据本公开的方面的由用户选择用于图像校正的区域。图5的图像包含位于不同焦深处的许多填充地动物。在图5的实例中,用户可尝试经由多点触摸输入335、340、345、350和355(例如,通过分别在所要的填充动物上放置五个手指)来选择许多填充的动物。用户可能难以准确且同时在填充的动物上放置五个手指,这是由于它们在图像内位置相互接近。
根据本公开的一或多个方面,图6展示包含由用户选择的多个物体的区域的实例。如图6中所展示,用户可在所要的填充的动物周围绘制闭环360。这可对处理器205指示执行自动图像校正所关于的区域。处理器205可能够在选定区域内自动检测五个填充的动物中的每一个以用于更准确图像校正。举例来说,处理器205可只在选定区域内执行面部辨识以识别填塞动物的的。取决于场景的内容,处理器205可执行自动检测选定区域内的物体的其它方法,其可然后在如下文所论述的确定指示物体的视觉性质的统计中使用。
在有关方面,图7说明确定所关注的的选定区域的统计的实例方法,其中所关注的选定区域具有开口弯曲形状370。如图7中所展示,处理器205可将捕获的图像划分成多个块365或块365的网格。处理器205可确定块365中的每一个的统计。统计可取决于正执行的自动图像校正的类型。举例来说,在自动聚焦期间,处理器205可确定聚焦值作为每一块365的统计。聚焦值可为用于块365的总或平均聚焦的数字表示(例如,块距最佳焦点的距离)。在自动曝光实例中,统计可为块365的总或平均亮度、明度或饱和度的数字表示。在白平衡实例中,统计可为块365的总或平均色温的数字表示。
处理器205可使用统计作为在自动图像校正方法中的反馈。在自动聚焦的实例中,处理器205可基于针对每一块365确定的聚焦值来确定校正的镜头位置。校正的镜头位置可用以确定移动镜头以在经校正或最佳镜头位置中定位镜头210的量。在自动曝光的实例中,处理器205可基于块365的总或平均亮度、明度或饱和度的确定的数字表示来确定校正的光圈大小或校正的快门速度。类似地,在自动白平衡实例中,处理器205可基于块365的总或平均色温的确定的数字表示来确定白平衡补偿参数或色彩补偿参数。
在一个实施方案中,处理器205可对用于在选定区域中的块365的统计给予权重比用于不在选定区域中的块365的统计高。这可允许在执行自动图像校正时自动图像校正重点关注选定区域。在一个实施方案中,处理器205可给予用于不在选定区域中的块365的统计权重为零。在这个实施方案中,可不需要处理器205计算用于不在选定区域中的块365的统计。
当用户触摸输入是如图7中所展示的曲线370时,处理器205可对对应于重叠曲线370的块365的统计给予权重比对应于图像的其余块365的统计高。当用户触摸输入是闭环325(见图3)时,处理器205可对对应于在闭环325内或对应于由闭环325界定的区的块365的统计给予权重比对应于图像的其余块365的统计高。举例来说,处理器205可对对应于在闭环325内或对应于由闭环325界定的区的块的统计给予权重0.8(例如,80%),且对对应于其余块365的统计给予权重0.2(例如,20%)。在一些实施方案中,如上关于图5所论述,处理器205可自动找出选定区域内的物体的位置。在这些实施方案中,处理器205可对用于对应于检测到的物体的块365的统计给予权重比选定区域的其余部分高。
在一个实例中,当成像装置200尚未接收到用户触摸输入时,处理器205可根据方程式1确定最终统计值:
其中N是图像中的统计区域(例如,块)的总数,statsi是图像的第i个区域的统计,且weighti是指派给第i区域的统计的权重。
当成像装置200已接收到用户触摸输入时,处理器205可通过根据方程式2加权统计来确定最终统计值:
其中M是用户选定统计区域的总数,N是图像中的统计区域(例如,块)的总数,statsi是图像的第i区域的统计,且weighti是指派给第i区域的统计的权重。在方程式2中,M的值小于N的值。另外,可如上所论述选择用户选定统计区域(例如,作为重叠用户触摸输入的块,或由用户触摸输入围住的块)。
在另一实例中,来自所有用户选定区域的最终统计可同等地加权。举例来说,可用等于1/M的weighti来加权用户选定区域。在这个实例中,可对未由用户选择的区域给予权数零。这通过方程式3展示:
虽然已关于单个图像传感器214描述上文,但本公开的方面也可适于由包含多个图像传感器214的成像装置200使用。举例来说,成像装置200可包含多个相同类型的图像传感器214。在这个实例中,当成像装置200接收来自用户的触摸输入(例如,开口曲线、线或闭环)时,触摸输入可指示包含多个焦深的图像的区域。处理器205可基于区域确定多个主深度,且图像传感器214可分别捕获在确定的主深度处的场景的图像。在一个实施方案中,这可通过处理器205确定用于选定区域中的块中的每一个的加权的最终统计和基于加权的最终统计确定选定区域的主深度的数目来实现。图像传感器214可同时捕获在主深度中的每一个处的图像。
在另一实例中,成像装置200可包含从场景捕获不同类型的信息的多个图像传感器214。不同图像传感器214可被配置成基于可由图像传感器214捕获的光的光谱来捕获选定区域的额外信息。包含不同图像传感器214的成像装置200的一个实施方案可为可执行特征提取且聚焦于由用户选择的区域的无人驾驶飞机。举例来说,处理器205可确定用于选定区域中的块中的每一个的加权的最终统计。图像传感器214可将选定区域放大,且捕获一组新的图像。处理器205可基于放大的所捕获图像确定用于选定区域中的块中的每一个的更详细的加权的最终统计。无人驾驶飞机可基于详细统计重新定位自身和图像传感器214以为了选定区域的更好查看,且捕获选定区域的后续图像。
用于不规则区域自动聚焦的实例流程图
现将在自动聚焦程序的情况下来描述本公开的示范性实施方案。然而,应注意,自动聚焦仅被描述为示范性自动图像校正程序,且可修改关于图8描述的方法400以可适用于其它自动图像校正程序,例如,自动曝光和自动白平衡。
图8是说明根据本公开的方面的可由成像装置200或其组件操作以用于自动聚焦的实例方法的流程图。举例来说,图8中所说明的方法400的步骤可由成像装置200的处理器205执行。为方便起见,方法400被描述为由成像装置200的处理器205执行。
方法400开始于框401。在框405处,处理器205捕获场景的第一图像。在框401处,处理器205在显示器280上显示第一图像,且提示成像装置200的用户选择对其执行自动聚焦的第一图像的区域。在框415处所述处理器205接收指示第一图像的选定区域的来自用户的输入。处理器205可经由例如触摸传感器的输入装置290接收来自用户的输入。在框420处,处理器205可基于选定区域确定校正的镜头位置。在一些实施方案中,这可涉及处理器205将第一图像划分成多个块,确定所述块中的每一个的聚焦值,和/或基于对用于选定区域中的块的聚焦值给予权重比不在选定区域中的块大来确定校正的镜头位置。
在框425处,处理器205将镜头的位置调整到校正的位置。在框430处,处理器205捕获在校正的镜头位置处的场景的第二图像。在一些实施方案中,这可包含反馈回路,其中处理器205捕获中间图像,重新确定聚焦值,且如果聚焦值不大于阈值聚焦值,那么重新确定校正的镜头位置。一旦处理器205确定用于中间图像的聚焦值大于阈值聚焦值,那么处理器205可确定选定区域处于最佳或可接受的焦点水平。方法结束于框435处。
在某些实施方案中,选定区域可包括多个焦深(例如,在选定区域内的物体可位于距成像装置200的不同深度处)。在这种情况下,处理器205可捕获在选定区域的深度范围内的多个间隔处的场景的多个第二图像。这可允许用户选择来自多个捕获的第二图像的图像中的一个保存到存储器230。替代地,处理器205可对第二图像执行后处理以创建合成图像,其中全部或大多数选定区域在焦点内。
图9是说明根据本公开的方面的可由成像装置操作的另一实例方法的流程图。图9中说明的步骤可以由成像装置200或其组件执行。举例来说,方法500可以由成像装置200的处理器205执行。为方便起见,方法500被描述为由成像装置的处理器205执行。
方法500开始于框501。在框505处,处理器205获得场景的第一图像。处理器205获得第一图像可包含从成像装置200的图像传感器214接收第一图像。图像传感器214可基于经由镜头210接收的光产生场景的图像。在框510处,处理器205经由触摸传感器(例如,输入装置290)接收指示第一图像的选定区域且具有对应于选定区域的形状的形状的触摸输入。触摸输入可为由成像装置200的用户进行的到触摸传感器的输入。用户触摸输入可为由用户对触摸输入绘制的开口曲线(例如,线)或闭环。
在框515处,处理器205确定指示选定区域的视觉性质的统计。处理器205也可确定指示第一图像的其余区域的视觉性质的统计。在框520处,处理器205基于确定的统计和触摸输入的形状调整成像装置200的图像校正参数。在框530处,处理器基于成像装置200的调整的图像校正参数获得场景的第二图像。处理器205获得第二图像可包含从成像装置200的图像传感器214接收第二图像或经由影像处理产生第二图像。方法结束于框535处。
其它考虑事项
在一些实施例中,上文所论述的电路、过程和系统可用于例如设备100的无线通信装置。无线通信装置可以是一种用于与其它电子装置无线通信的电子装置。无线通信装置的实例包含蜂窝式电话、智能电话、个人数字助理(PDA)、电子阅读器、游戏系统、音乐播放器、上网本、无线调制解调器、膝上型计算机、平板装置等。
无线通信装置可包含:一或多个图像传感器;两个或更多个图像信号处理器;和存储器,其包含用于实行上文所论述的过程的指令或模块。装置还可具有数据、从存储器加载指令和/或数据的处理器、一或多个通信接口、一或多个输入装置、一或多个输出装置(例如,显示装置)和电源/接口。无线通信装置可另外包含发射器和接收器。发射器与接收器可共同被称作收发器。收发器可耦合到一或多个天线以供发射及/或接收无线信号。
无线通信装置可无线连接到另一电子装置(例如,基地台)。无线通信装置可替代地被称作移动装置、移动台、订户台、用户装备(UE)、接入终端、移动终端、终端、用户终端、订户单元等。无线通信装置的实例包含膝上型计算机或桌上型计算机、蜂窝电话、智能电话、无线调制解调器、电子阅读器、平板装置、游戏系统等。无线通信装置可根据一或多个业界标准(例如,第三代合作伙伴计划(3GPP))来操作。因此,通用术语“无线通信装置”可包含用业界标准的不同命名法所描述的无线通信装置(例如,接入终端、用户装备(UE)、远程终端等等)。
可将本文中所描述的功能作为一或多个指令而存储在处理器可读或计算机可读媒体上。术语“计算机可读媒体”指可由计算机或处理器存取的任何可用媒体。借助于实例而非限制,这种媒体可包含随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪存储器或其它光盘存储装置、磁盘存储装置或其它磁性存储装置或可用以存储呈指令或数据结构的形式且可由计算机存取的期望程序代码的任何其它媒体。如本文中所使用的磁盘和光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软性磁盘及光盘,其中磁盘通常以磁性方式再现数据,而光盘用激光以光学方式再现数据。应注意,计算机可读媒体可为有形的和非暂时性的。术语“计算机程序产品”指计算装置或处理器,其与可由计算装置或处理器执行、处理或计算的代码或指令(例如,“程序”)组合。如本文中所使用,术语“代码”可指可由计算装置或处理器执行的软件、指令、代码或数据。
本文中公开的方法包含用于实现所描述方法的一或多个步骤或动作。在不脱离权利要求书的范围的情况下,方法步骤和/或动作可以彼此互换。换句话说,除非正描述的方法的适当操作需要步骤或动作的具体次序,否则,在不脱离权利要求书的范围的情况下,可修改具体步骤和/或动作的次序和/或使用。
应注意,如本文中所使用,术语“耦合(couple、coupling、coupled)”或词语耦合(couple)的其它变体可指示间接连接或者直接连接。举例来说,如果第一组件“耦合”到第二组件,那么第一组件可间接连接到第二组件或者直接连接到第二组件。如本文所使用,术语“多个”表示两个或更多个。举例来说,多个组件指示两个或更多个组件。
术语“确定”涵盖广泛多种动作,且因此,“确定”可包含计算、运算、处理、推导、研究、查找(例如,在表、数据库或另一数据结构中查找)、查实等。并且,“确定”可包含接收(例如,接收信息)、存取(例如,存取存储器中的数据)等。并且,“确定”可包含解析、选择、挑选、建立等。
除非另外明确地指定,否则短语“基于”并不意味着“仅基于”。换句话说,短语“基于”描述“仅基于”和“基于至少”两者。
在前文描述中,给出具体细节以提供对实例的透彻理解。然而,所属领域的一般技术人员应理解,可以在没有这些具体细节的情况下实践所述实例。举例来说,可在框图中展示电组件/装置,以免用不必要的细节混淆所述实例。在其它实例中,可详细展示此类组件、其它结构和技术以进一步解释所述实例。
本文包含标题以供参考且辅助定位各个章节。这些标题并不希望限制关于其描述的概念的范围。此类概念可在整个说明书中具有适用性。
还应注意,可将实例描述成过程,这个过程被描绘成流程图、流图、有限状态图、结构图或框图。尽管流程图可将操作描述为依序过程,但是许多操作可并行或同时执行,且可重复所述过程。此外,可重新排列操作的次序。当过程的操作完成时,所述过程终止。过程可以对应于方法、功能、程序、子例程、子程序等。当过程对应于软件函数时,其终止对应于所述函数返回到调用函数或主函数。
提供对所公开实施方案的先前描述以使所属领域的技术人员能够制作或使用本公开。所属领域的技术人员将容易显而易见对这些实施方案的各种修改,且可在不脱离本公开的精神或范围的情况下将本文中定义的一般原理应用到其它实施方案。因此,本公开并不希望限于本文中所展示的实施方案,而应符合与本文中所公开的原理和新颖特征相一致的最广泛范围。
Claims (22)
1.一种可由包含触摸传感器的成像装置操作以用于执行图像校正的方法,所述方法包括:
获得场景的第一图像,所述第一图像被划分成多个块;
经由所述触摸传感器接收指示所述第一图像的选定区域且具有与所述选定区域的形状相对应的形状的用户绘制的输入;
确定指示所述块中的每一个的视觉性质的统计;
确定所述用户绘制的输入的所述形状包括开口曲线;
对用于所述第一图像中重叠所述开口曲线的块的所述统计给予权重比所述第一图像中不重叠所述开口曲线的块高;
基于所述加权的统计调整所述成像装置的至少一个图像校正参数;以及
基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
2.根据权利要求1所述的方法,其中所述成像装置的所述至少一个图像校正参数包括以下中的一或多个:镜头的位置、光圈的大小、快门速度和白平衡补偿参数。
3.根据权利要求1所述的方法,其中所述方法进一步包括基于所述用户绘制的输入的所述形状定义所述选定区域作为所述第一图像的对应于所述用户绘制的输入的区。
4.根据权利要求1所述的方法,进一步包括:
经由所述触摸传感器接收指示所述第一图像的第二选定区域且具有与所述第二选定区域的形状相对应的形状的第二用户绘制的输入;
确定所述第二用户绘制的输入的所述形状包括闭环;以及
对用于所述第一图像中由所述闭环围住的块的所述统计给予权重比所述第一图像中不由所述选定区域围住的块高。
5.根据权利要求1所述的方法,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述方法进一步包括:
确定分别对应于所述选定区域的不同焦深的所述镜头的多个位置;以及
接收在所述镜头的所述确定位置的每一者处的第三图像。
6.根据权利要求1所述的方法,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述方法进一步包括:
检测所述选定区域内的至少一个物体;
确定对应于所述物体的焦深的所述镜头的所述位置;以及
基于所述镜头的所述确定位置的调整所述镜头的所述位置。
7.一种成像装置,包括:
图像传感器;
显示器;
触摸传感器;
至少一个处理器;以及
存储器,其存储计算机可执行指令以用于控制所述至少一个处理器:
从所述图像传感器获得场景的第一图像,所述第一图像被划分成多个块;
控制所述显示器显示所述第一图像;
从所述触摸传感器接收指示所述第一图像的选定区域且具有与所述选定区域的形状相对应的形状的用户绘制的输入;
确定指示所述块中的每一个的视觉性质的统计;
确定所述用户绘制的输入的所述形状包括开口曲线;
对用于所述第一图像中重叠所述开口曲线的块的所述统计给予权重比所述第一图像中不重叠所述开口曲线的块高;
基于所述加权的统计调整所述成像装置的至少一个图像校正参数;以及
基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
8.根据权利要求7所述的成像装置,其中所述成像装置的所述至少一个图像校正参数包括以下中的一或多个:镜头的位置、光圈的大小、快门速度和白平衡补偿参数。
9.根据权利要求7所述的成像装置,其中所述计算机可执行指令进一步用于控制所述至少一个处理器基于所述用户绘制的输入的所述形状定义所述选定区域作为所述第一图像的对应于所述用户绘制的输入的区。
10.根据权利要求7所述的成像装置,其中所述计算机可执行指令进一步用于控制所述至少一个处理器:
经由所述触摸传感器接收指示所述第一图像的第二选定区域且具有与所述第二选定区域的形状相对应的形状的第二用户绘制的输入;
确定所述第二用户绘制的输入的所述形状包括闭环;以及
对用于所述第一图像中由所述闭环围住的块的所述统计给予权重比所述第一图像中不由所述选定区域围住的块高。
11.根据权利要求7所述的成像装置,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述计算机可执行指令进一步用于控制所述至少一个处理器:
确定分别对应于所述选定区域的不同焦深的所述镜头的多个位置;以及
接收在所述镜头的所述确定位置的每一者处的第三图像。
12.根据权利要求7所述的成像装置,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述计算机可执行指令进一步用于控制所述至少一个处理器:
检测所述选定区域内的至少一个物体;
确定对应于所述物体的焦深的所述镜头的所述位置;以及
基于所述镜头的所述确定位置的调整所述镜头的所述位置。
13.一种设备,包括:
用于获得场景的第一图像的装置,所述第一图像被划分成多个块;
用于接收指示所述第一图像的选定区域且具有与所述选定区域的形状相对应的形状的用户绘制的输入的装置;
用于确定指示所述块中的每一个的视觉性质的统计的装置;
用于确定所述用户绘制的输入的所述形状包括开口曲线的装置;
用于对用于所述第一图像中重叠所述开口曲线的块的所述统计给予权重比所述第一图像中不重叠所述开口曲线的块高的装置;
用于基于所述加权的统计调整成像装置的至少一个图像校正参数的装置;以及
用于基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像的装置。
14.根据权利要求13所述的设备,其中所述成像装置的所述至少一个图像校正参数包括以下中的一或多个:镜头的位置、光圈的大小、快门速度和白平衡补偿参数。
15.根据权利要求13所述的设备,其中所述设备进一步包括用于基于所述用户绘制的输入的所述形状定义所述选定区域作为所述第一图像的对应于所述用户绘制的输入的区的装置。
16.根据权利要求13所述的设备,进一步包括:
用于经由所述触摸传感器接收指示所述第一图像的第二选定区域且具有与所述第二选定区域的形状相对应的形状的第二用户绘制的输入的装置;
用于确定所述第二用户绘制的输入的所述形状包括闭环的装置;以及
用于对用于所述第一图像中由所述闭环围住的块的所述统计给予权重比所述第一图像中不由所述选定区域围住的块高的装置。
17.根据权利要求13所述的设备,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述设备进一步包括:
用于确定分别对应于所述选定区域的不同焦深的所述镜头的多个位置的装置;以及
用于接收在所述镜头的所述确定位置的每一者处的第三图像的装置。
18.根据权利要求13所述的设备,其中所述成像装置的所述至少一个图像校正参数包括镜头的位置,所述设备进一步包括:
用于检测所述选定区域内的至少一个物体的装置;
用于确定对应于所述物体的焦深的所述镜头的所述位置的装置;以及
用于基于所述镜头的所述确定位置的调整所述镜头的所述位置的装置。
19.一种非暂时性计算机可读存储媒体,其具有存储于其上的指令,所述指令在被执行时使装置的处理器:
获得场景的第一图像,所述第一图像被划分成多个块;
经由触摸传感器接收指示所述第一图像的选定区域且具有与所述选定区域的形状相对应的形状的用户绘制的输入;
确定指示所述块中的每一个的视觉性质的统计;
确定所述用户绘制的输入的所述形状包括开口曲线;
对用于所述第一图像中重叠所述开口曲线的块的所述统计给予权重比所述第一图像中不重叠所述开口曲线的块高;
基于所述加权的统计调整成像装置的至少一个图像校正参数;以及
基于所述成像装置的所述调整的至少一个图像校正参数获得所述场景的第二图像。
20.根据权利要求19所述的非暂时性计算机可读存储媒体,其中所述成像装置的所述至少一个图像校正参数包括以下中的一或多个:镜头的位置、光圈的大小、快门速度和白平衡补偿参数。
21.根据权利要求19所述的非暂时性计算机可读存储媒体,其中所述非暂时性计算机可读存储媒体进一步具有存储于其上的指令,所述指令在被执行时使所述处理器基于所述用户绘制的输入的所述形状定义所述选定区域作为所述第一图像的对应于所述用户绘制的输入的区。
22.根据权利要求19所述的非暂时性计算机可读存储媒体,其进一步具有存储于其上的指令,所述指令在被执行时使所述处理器:
经由所述触摸传感器接收指示所述第一图像的第二选定区域且具有与所述第二选定区域的形状相对应的形状的第二用户绘制的输入;
确定所述第二用户绘制的输入的所述形状包括闭环;以及
对用于所述第一图像中由所述闭环围住的块的所述统计给予权重比所述第一图像中不由所述选定区域围住的块高。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/059,097 US9838594B2 (en) | 2016-03-02 | 2016-03-02 | Irregular-region based automatic image correction |
US15/059,097 | 2016-03-02 | ||
PCT/US2017/012701 WO2017151222A1 (en) | 2016-03-02 | 2017-01-09 | Irregular-region based automatic image correction |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108702457A CN108702457A (zh) | 2018-10-23 |
CN108702457B true CN108702457B (zh) | 2020-09-15 |
Family
ID=58018203
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780012963.5A Expired - Fee Related CN108702457B (zh) | 2016-03-02 | 2017-01-09 | 用于自动图像校正的方法、装置和计算机可读存储媒体 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9838594B2 (zh) |
EP (1) | EP3424207A1 (zh) |
CN (1) | CN108702457B (zh) |
WO (1) | WO2017151222A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10785400B2 (en) | 2017-10-09 | 2020-09-22 | Stmicroelectronics (Research & Development) Limited | Multiple fields of view time of flight sensor |
US11138699B2 (en) * | 2019-06-13 | 2021-10-05 | Adobe Inc. | Utilizing context-aware sensors and multi-dimensional gesture inputs to efficiently generate enhanced digital images |
CN114466129A (zh) * | 2020-11-09 | 2022-05-10 | 哲库科技(上海)有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN112556653B (zh) * | 2020-12-16 | 2022-07-26 | 全芯智造技术有限公司 | 半导体制造工艺中的图案量测方法、电子设备和存储介质 |
CN112819742B (zh) * | 2021-02-05 | 2022-05-13 | 武汉大学 | 一种基于卷积神经网络的事件场合成孔径成像方法 |
CN114964169B (zh) * | 2022-05-13 | 2023-05-30 | 中国科学院空天信息创新研究院 | 像方物方协同改正的遥感影像平差方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101408709A (zh) * | 2007-10-10 | 2009-04-15 | 鸿富锦精密工业(深圳)有限公司 | 影像撷取装置及其自动对焦方法 |
CN105141843A (zh) * | 2015-09-01 | 2015-12-09 | 湖南欧斐网络科技有限公司 | 基于摄像装置拍摄目标图像的标尺定位方法和设备 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6956612B2 (en) * | 2001-07-31 | 2005-10-18 | Hewlett-Packard Development Company, L.P. | User selectable focus regions in an image capturing device |
US20050177315A1 (en) | 2004-02-06 | 2005-08-11 | Srinka Ghosh | Feature extraction of partial microarray images |
JP4755490B2 (ja) * | 2005-01-13 | 2011-08-24 | オリンパスイメージング株式会社 | ブレ補正方法および撮像装置 |
US20070222859A1 (en) | 2006-03-23 | 2007-09-27 | Coban Research And Technologies, Inc. | Method for digital video/audio recording with backlight compensation using a touch screen control panel |
US7664384B2 (en) | 2006-11-07 | 2010-02-16 | Sony Ericsson Mobile Communications Ab | User defined autofocus area |
US8249391B2 (en) | 2007-08-24 | 2012-08-21 | Ancestry.com Operations, Inc. | User interface method for skew correction |
JP5398156B2 (ja) * | 2008-03-04 | 2014-01-29 | キヤノン株式会社 | ホワイトバランス制御装置およびその制御方法並びに撮像装置 |
US8259208B2 (en) | 2008-04-15 | 2012-09-04 | Sony Corporation | Method and apparatus for performing touch-based adjustments within imaging devices |
US8452105B2 (en) | 2008-05-28 | 2013-05-28 | Apple Inc. | Selecting a section of interest within an image |
US8237807B2 (en) | 2008-07-24 | 2012-08-07 | Apple Inc. | Image capturing device with touch screen for adjusting camera settings |
US8885977B2 (en) | 2009-04-30 | 2014-11-11 | Apple Inc. | Automatically extending a boundary for an image to fully divide the image |
WO2012099175A1 (ja) * | 2011-01-18 | 2012-07-26 | 富士フイルム株式会社 | オートフォーカスシステム |
CN103765276B (zh) * | 2011-09-02 | 2017-01-18 | 株式会社尼康 | 对焦评价装置、摄像装置及程序 |
JP6083987B2 (ja) | 2011-10-12 | 2017-02-22 | キヤノン株式会社 | 撮像装置、その制御方法及びプログラム |
US20140247368A1 (en) | 2013-03-04 | 2014-09-04 | Colby Labs, Llc | Ready click camera control |
KR102068748B1 (ko) | 2013-07-31 | 2020-02-11 | 삼성전자주식회사 | 디지털 촬영 장치, 그 제어 방법, 및 영상 재생 장치 및 방법 |
KR102155093B1 (ko) * | 2014-08-05 | 2020-09-11 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
-
2016
- 2016-03-02 US US15/059,097 patent/US9838594B2/en not_active Expired - Fee Related
-
2017
- 2017-01-09 WO PCT/US2017/012701 patent/WO2017151222A1/en active Application Filing
- 2017-01-09 CN CN201780012963.5A patent/CN108702457B/zh not_active Expired - Fee Related
- 2017-01-09 EP EP17704846.9A patent/EP3424207A1/en not_active Withdrawn
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101408709A (zh) * | 2007-10-10 | 2009-04-15 | 鸿富锦精密工业(深圳)有限公司 | 影像撷取装置及其自动对焦方法 |
CN105141843A (zh) * | 2015-09-01 | 2015-12-09 | 湖南欧斐网络科技有限公司 | 基于摄像装置拍摄目标图像的标尺定位方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108702457A (zh) | 2018-10-23 |
US20170257557A1 (en) | 2017-09-07 |
US9838594B2 (en) | 2017-12-05 |
WO2017151222A1 (en) | 2017-09-08 |
EP3424207A1 (en) | 2019-01-09 |
WO2017151222A9 (en) | 2018-08-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108702457B (zh) | 用于自动图像校正的方法、装置和计算机可读存储媒体 | |
CN108764091B (zh) | 活体检测方法及装置、电子设备和存储介质 | |
CN107950018B (zh) | 图像生成方法和系统、以及计算机可读介质 | |
CN109889724B (zh) | 图像虚化方法、装置、电子设备及可读存储介质 | |
CN107258077B (zh) | 用于连续自动聚焦(caf)的系统和方法 | |
CN108076278B (zh) | 一种自动对焦方法、装置及电子设备 | |
CN104333748A (zh) | 获取图像主体对象的方法、装置及终端 | |
EP3038345B1 (en) | Auto-focusing method and auto-focusing device | |
CN112529951A (zh) | 扩展景深图像的获取方法、装置及电子设备 | |
CN107787463B (zh) | 优化对焦堆栈的捕获 | |
CN108463993B (zh) | 用于防止在相位检测自动聚焦(af)的焦点摆动的方法和设备 | |
CN108924428A (zh) | 一种自动对焦方法、装置及电子设备 | |
EP3057304A1 (en) | Method and apparatus for generating image filter | |
JP2018509657A (ja) | 深度アシスト型オートフォーカスのためのサーチ範囲拡張 | |
CN104363378A (zh) | 相机对焦方法、装置及终端 | |
US20140307054A1 (en) | Auto focus method and auto focus apparatus | |
KR102661185B1 (ko) | 전자 장치 및 그의 이미지 촬영 방법 | |
JP5968379B2 (ja) | 画像処理装置およびその制御方法 | |
CN106154688B (zh) | 一种自动对焦的方法及装置 | |
CN106922181B (zh) | 方向感知自动聚焦 | |
JP6645711B2 (ja) | 画像処理装置、画像処理方法、プログラム | |
CN115623313A (zh) | 图像处理方法、图像处理装置、电子设备、存储介质 | |
CN110910304B (zh) | 图像处理方法、装置、电子设备及介质 | |
CN111724300A (zh) | 单张图片背景虚化方法、装置及设备 | |
CN114244999A (zh) | 自动对焦的方法、装置、摄像设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200915 Termination date: 20220109 |
|
CF01 | Termination of patent right due to non-payment of annual fee |