CN104954661A - 用于控制图像捕获的方法和装置 - Google Patents

Abstract

本发明的实施例涉及用于控制图捕获的方法和装置。公开了一种用于检测环境参数以控制图像捕获的方法，所述方法包括：利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。还公开了相应的装置、电子设备和计算机程序产品。

Description

用于控制图像捕获的方法和装置

技术领域

本发明的实施例涉及图像处理领域，更具体地，涉及用于检测环境参数以控制图像捕获的方法和装置。

背景技术

随着图像获取和处理技术的发展，越来越多的用户设备具有图像捕获的功能。例如，目前的大多数手持移动设备(例如，移动电话、个人数字助理PDA、平板式计算机，等等)都配备有能够捕获图像的相机。当用户使用这样的移动设备捕获图像时，光照和色温等环境参数通常将随不同的环境而改变，而这些环境参数又对图像的捕获具有直接的影响。例如，取决于不同的环境参数，相机需要调节其曝光时间、传感器灵敏度、不同颜色通道的增益和/或自动白平衡处理，等等。否则，所捕获的图像将可能存在问题，例如具有不正确的亮度或者色调。

传统上，为了适应不同环境中的图像捕获，可以允许用户以人工方式设置照相机参数，以确保曝光时间、感光度、白平衡等与当前环境相匹配。然而，对于用户特别是普通消费者而言，由于缺乏专业知识，设置照相机参数是一个复杂的过程而且无法确保准确性。

另一种已知的方式是事先设置并且保存针对若干典型环境的简档(profile)以供用户选择。例如，此类简档的示例可以包括“强光”、“夜间”、“自动”等等。在使用中，用户可以根据具体的环境而选择一个简档，以便在图像捕获过程中应用相应的环境参数。然而，可以理解的是，事先存储的简档与用户所处的特定环境常常不是完全匹配的。因此，通过应用简档中所定义的预设环境参数而捕获的图像可能仍然无法达到最佳质量。

为了实现对捕获图像的自适应处理，已经提出了自动检测环境中的光照和色温。然而，已知的方法具有各自的缺陷。例如，一种方案是检测场景中的白点以用于自动白平衡之类的图像处理。但是，当场景中不存在明显的白色物体可被用作参照物时，这种方法将失效。

综上所述，本领域中需要一种能够更加准确、有效地检测环境参数以控制图像捕获的技术方案。

发明内容

为了克服现有技术中的上述问题，本发明提出一种用于控制图像捕获的方法和装置。

在本发明的一个方面，提供一种用于检测环境参数以控制图像捕获的方法。所述方法包括：利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。这方面的实施例还包括相应的计算机程序产品。

在本发明的另一方面，提供一种用于检测环境参数以控制图像捕获的装置。所述方法包括：眼睛信息获取单元，被配置为利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；环境检测单元，被配置为基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及图像捕获控制单元，被配置为响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。

通过下文描述将会理解，根据本发明的实施例，在用户利用电子设备上的一个相机捕获图像的同时，可以利用该电子设备的另一独立的相机来获取用户的眼睛的信息。由于人眼能够提供可被用于环境检测的稳定的参照信息(例如，巩膜颜色，瞳孔比例，等等)，因此可以基于获取的眼睛信息来估计用户所处环境的环境参数，诸如色温和亮度。由此，可以由一个相机估计的环境参数来控制另一相机对图像的捕获，例如执行自动曝光和/或自动白平衡处理。以此方式，能够获得较高质量的图像。

附图说明

通过参考附图阅读下文的详细描述，本发明实施例的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本发明的若干实施例，其中：

图1示出了本发明的示例性实施例可实现于其中的电子设备的框图；

图2示出了根据本发明的示例性实施例的用于检测环境参数以控制图像捕获的方法的流程图；

图3示出了根据本发明的示例性实施例的用于针对特定用户而校准眼睛信息与环境参数的预定义映射的方法的流程图；

图4A和图4B示出了根据本发明的示例性实施例的基于偏移向量来校准预定义映射的示意图；以及

图5示出了根据本发明的示例性实施例的用于检测环境参数以控制图像捕获的装置的框图。

在各个附图中，相同或对应的标号表示相同或对应的部分。

具体实施方式

正如上文概述以及下面将要详细讨论的，本发明的主要思路之一是：在用户使用电子设备上的一个相机(例如，后置相机)捕获图像的同时，可以利用该电子设备的另一独立的相机(例如，前置相机)来获取用户的眼睛的信息。由于人眼能够提供可被用于环境检测的稳定的参照信息(例如，巩膜颜色，瞳孔比例，等等)，因此可以基于获取的眼睛信息来估计用户所处环境的环境参数，诸如色温和亮度。由此，可以由一个相机估计的环境参数来控制另一相机对图像的捕获，例如执行自动曝光和/或自动白平衡处理。以此方式，能够获得较高质量的图像。而且，在某些实施例中，可以针对不同的用户而实现对环境检测的个性化定制，从而进一步改善用户体验。

请注意，在本公开的上下文中，所使用的术语“图像”既包括静态图像，也包括动态图像(即，视频)。另外，在此使用的术语“图像的捕获”即包括对图像的拍摄过程本身，也包括对所拍摄的图像的任何后处理过程。

下面将参考附图中示出的若干示例性实施例来描述本发明的原理和精神。应当理解，描述这些实施例仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。

首先参考图1，其示出了本发明的实施例可实现于其中的电子设备100的框图。根据本发明的实施例，电子设备100可以是移动电话之类的便携式电子设备。然而，应当理解，这仅仅是示例性和非限制性的。其他的用户设备类型也可以容易地采取本发明的实施例，诸如个人数字助理(PDA)、寻呼机、移动计算机、移动TV、游戏装置、膝上式计算机、照相机、视频照相机、GPS设备和其他类型的语音和文本通信系统。

电子设备100可以具有通信同能。为此，如图所示，电子设备100可以包括一个或多个可操作与发射器114和接收器116通信的天线112。电子设备100还包括至少一个处理器控制器120。应当理解，控制器120包括实现电子设备100的所有功能所需要的电路。例如，控制器120可以包括数字信号处理器设备、微处理器设备、A/D转换器、D/A转换器以及其他支持电路。电子设备100的控制和信号处理功能根据这些设备各自的能力分配。电子设备100还可以包括用户接口，例如可以包括振铃器122、扬声器124、扩音器126、显示器或取景器128以及小键盘130，所有以上设备都耦合至控制器120。

特别地，电子设备100包括用于捕捉静态图像和/或动态图像的第一相机136和第二相机137。根据本发明的实施例，第一相机136和第二相机137可以位于电子设备100的不同侧。例如，在某些实施例中，第一相机136可以是电子设备100的前置相机，也即，它在使用时与显示器或取景器128位于电子设备100的相同侧。第二相机137则可以是电子设备100的后置相机，也即，它在使用时与显示器或取景器128位于电子设备100的相对侧。当然，这种位置关系并不是必须的。第一相机136和第二相机137之间的任何其他位置关系都是可能，只要二者在使用中能够捕获不同场景的图像。本发明的范围在此方面不受限制。

另外，电子设备100还包括电池134，诸如振动电池组，用于向操作电子设备100所需要的各种电路供电，并且备选地提供机械振动作为可检测的输出。电子设备100还包括用户识别模块(UIM)138。UIM138通常是具有内置的处理器的存储器设备。UIM138可以例如包括订户识别模块(SIM)、通用集成电路卡(UICC)、通用用户识别模块(USIM)或可移动用户识别模块(R-UIM)等等。UIM138可以包括根据本发明的实施例的卡连接检测装置。

电子设备100还包括存储设备。例如，电子设备100可以包括易失性存储器140，例如，包括高速缓存区域中的用于临时存储数据的易失性随机存取存储器(RAM)。电子设备100还可以包括其他的可以是嵌入的或可移动的非易失性存储器142。非易失性存储器142可以附加地或备选地例如包括EEPROM和闪存等。存储器可以存储多个信息片段中的任意项和电子设备100使用的数据，以便实现电子设备100的功能。

应当理解，图1中的结构框图仅仅示出用于说明目的，并非旨在限制本发明的范围。在某些情况下，某些组件可以按照具体需要而增加或者减少。

图2示出了根据本发明的示例性实施例的用于检测环境参数以控制图像捕获的方法200的流程图。可以理解，方法200可以由上文参考图1描述的电子设备100执行，例如由控制器120来执行。为讨论方便，在下文描述中将参考图1所示的电子设备100来描述方法200。

方法200开始之后，在步骤S201，利用电子设备100的第一相机136，获取电子设备100的用户的眼睛信息。

根据本发明的实施例，第一相机136对用户的眼睛信息的获取可以由各种不同的条件来触发。例如，在某些实施例中，可以响应于检测到用户正在使用第二相机137捕获图像而执行步骤S201。作为示例，当用户例如通过操作电子设备100上的物理按键或者用户界面(U1)上的按钮等控件而利用第二相机137捕获图像时，电子设备100的控制器120可以检测到该动作，并且相应地触发第一相机136获取眼睛信息。如上所述，根据本发明的实施例，第一相机136可以是电子设备100的前置相机，而第二相机137可以是电子设备100的后置相机。当用户举起电子设备100使用第一(后置)相机137捕获前方场景的图像时，第二(前置)相机136刚好对准用户的脸部，从而能够获取用户眼睛的信息。。

备选地或附加地，方法200的步骤S201也可由不同的事件触发。例如，在某些实施例中，一旦电子设备100的控制器120检测到用户激活了电子设备100上的相机程序(例如通过点击相应的图标)，则可以命令第一相机136开始检测用户的眼睛。一旦第一相机136检测到用户的眼睛出现在其视野范围内，则开始获取眼睛信息。在此方面，第一相机136可以使用任何目前已知或者将来开发的技术来实现人眼检测，例如基于图像处理的算法、模式识别算法、基于眼球光学特性的算法，等等。本发明的范围在此方面不受限制。而且，应当理解，用于步骤S201的任何其他的触发条件也是可能的，本发明的范围在此方面亦不受限制。

在本发明的某些实施例中，在步骤S201处检测的眼睛信息可以包括用户眼睛的巩膜(sclera)颜色。如已知的，巩膜是人眼中基本上为白色区域，并且巩膜颜色将随环境中色温(color temperature)的变化而改变。由此，通过检测巩膜颜色，可以检测用户当前所处环境中的色温，而色温转而可被用来控制第二相机137对图像的捕获。例如，色温可被用于自动白平衡处理，这将在下文详述。根据本发明的实施例，可以使用任何目前已知的或者将来开发的技术来检测人眼区域中的巩膜颜色，例如图像处理技术、模式识别技术、基于光学知识的技术，等等。本发明的范围在此方面不受限制。

备选地或附加地，在本发明的某些实施例中，在步骤S201处检测的眼睛信息可以包括瞳孔(pupil)或者虹膜(iris)的比例，例如占眼球面积的比例或者整个眼睛区域的比例，等等。如已知的，人类眼睛的瞳孔比例会随着环境中光照的亮度(brightness)的变化而改变。由此，通过检测瞳孔比例，可以检测用户当前所处环境中的亮度等光照情况，而亮度转而可被用于控制第二相机在捕获图像时的自动曝光处理(例如调节曝光时间)，这将在下文讨论。根据本发明的实施例，可以使用任何目前已知或者将来开发的瞳孔检测和处理技术，例如图像处理技术、模式识别技术、基于光学知识的技术(例如，瞳孔角膜反射向量方法)，等等。本发明的范围在此方面不受限制。

应当理解，上文描述的巩膜颜色和瞳孔比例仅仅是在步骤S201处检测的用户眼睛信息的示例，并非意在限制本发明的实施例。在步骤S201，可以获取可被用于环境参数检测的任何备选或附加的眼睛信息。本发明的范围在此方面不受限制。

接下来，方法200进行到步骤S202，在此基于由第一相机136捕获的眼睛信息，来检测电子设备100的用户所处环境的环境参数。如上文所述，环境参数可以包括将会对图像的捕获和/或处理产生影响的任何参数，包括但不限于光照亮度、色温，等等。

根据本发明的实施例，在步骤S201处检测到的眼睛信息与对应环境参数之间的关联关系可以基于先验知识而被预先定义，并且被存储在电子设备100中。换言之，在步骤S202处，可以利用基于预定义的映射而从眼睛信息确定环境参数。

仅出于说明之目的，考虑巩膜颜色作为眼睛信息的示例。不同的巩膜颜色所对应的色温可以由例如电子设备100的生产商或者相机程序的提供商事先测定并且存储。作为示例，在某些示例实施例中，这种关联关系可以作为映射表(mapping table)而被存储在电子设备100中，例如存储在非易失性存储器142中。备选地，预定义映射也可以存储在独立于电子设备100的位置，例如存储于服务器中，并且可由电子设备100访问。类似地，作为又一示例，不同的瞳孔比例所对应的光照亮度之间的关联关系也可以被事先测定并且保存在映射表中。

特别地，根据本发明的某些实施例，映射表可以被直接使用。映射表也可以由设备制造商或者其他服务提供商更新。备选地或附加地，在某些实施例中，可以针对电子设备100的用户而对预定义的映射表执行校准，从而实现更加准确和/或个性化的图像捕获和处理。这方面的示例性实施例将在下文详述。

方法200继而进行到步骤S203，在此判断预定义的条件是否得到满足。关于预定义条件的若干示例将在下文稍后讨论。在步骤S203，如果确定预定义条件未被满足(分支“否”)，则方法200进行到步骤S204，在此控制第二照相机137捕获图像而不使用在步骤S202处由第一相机136检测到的环境参数。步骤S204处的操作与已知的方案类似，在此不再赘述。

反之，如果在步骤S203处判断预定义条件得以满足(分支“是”)，方法200进行到步骤S205，在此至少部分地基于在步骤S202处检测到的环境参数来控制电子设备100的第二相机137对图像的捕获。

传统上，第二相机137在捕获图像的过程中将仅仅使用它自己获取的信息被捕获和处理。以白平衡处理为例，第二相机137将在场景中定位白点，并且利用白点所提供的信息在捕获图像时执行自动白平衡处理。然而，当目标场景中的白点很少甚至根本不存在白点时，自动白平衡处理可能效果不佳甚至失效。这样，得到的结果图像的质量将会降低。

与此不同，由于眼睛的巩膜可以稳定地提供作为参考的白色，因此可以利用第一相机136准确地检测到环境的色温。通过在步骤S205处基于检测到的色温来控制图像捕获，本发明的实施例能够更加准确、有效地对第二相机137所捕获的图像执行自动白平衡处理。相应地，第二相机137无须再执行对白点的定位和处理。

类似地，如上文所述，可以基于第一相机136获取的瞳孔比例来确定环境的亮度。在这样的实施例中，在步骤S205，可以至少部分地基于检测到的环境亮度来控制第二相机137的曝光时间，从而实现更加准确的自动曝光处理。备选地或附加地，检测到的环境参数还可以用于控制第二相机137的感光度、一个或多个颜色通道的增益，等等。应当注意，可以通过任何适当的方式在针对第二相机137的控制中使用在步骤S202处检测到的环境参数，从而捕获高质量的图像。

现在返回方法200的步骤S203，根据本发明的实施例，可以根据具体的需求和应用场景而使用任何适当的预定义条件，来使能由第一相机检测到的环境参数在第二相机的图像捕获中的使用。

例如，在某些实施例中，预定义条件可以是用户的输入或命令。例如，在电子设备100的相关设置中可以提供一个选项，使得用户可以通过操作该选项来选择启用或者禁用在第二相机的图像捕获过程中使用由第一相机检测到的环境参数。换言之，在这样的实施例中，响应于接收到此类用户选择，在步骤S203处确定预定义条件得到满足。

备选地或附加地，在某些实施例中，可以比较第一相机和第二相机所处的环境之间的差异，并且将这种差异与预定义阈值的比较作为步骤S203处的预定义条件。具体而言，可以理解的是，在第二相机捕获图像的过程中，第二相机本身也将获得来自所拍摄场景的信息，并且这些信息也可被用于检测所在环境的环境参数，诸如光照亮度、色温，等等。为讨论方便，由第二相机检测到的环境参数可称为“参考环境参数”。继而，参考环境参数可与在步骤S202处由第一相机检测到的环境参数进行比较。如果二者之间的差异小于预定义阈值，则在步骤S203处可以判定预定义条件被满足。

在这样的实施例中，通过比较第一相机与第二相机各自检测到的环境参数的差异，能够有效地避免潜在的图像质量下降问题。例如，考虑如下情况：位于室内的用户透过门或者窗户使用电子设备100拍摄室外的场景。此时，朝向用户的第一相机136所检测到是室内的环境参数，而朝向目标场景的第二相机137所检测到的是室外的环境参数。如果室内外的环境相差过大，则基于第一相机136检测到的环境参数来控制第二相机137的图像捕获可能反而降低图像的质量。此时，根据本发明的上述实施例，电子设备100可以基于两组环境参数的比较而自动地在第二相机137的图像捕获过程中禁用由第一相机136检测到的环境参数，从而避免该问题的发生。

应当理解，上文描述的仅仅是预定义条件的若干示例，并非意在限制本发明的范围。任何其他适当的预定义条件都是可能。例如，在某些实施例中，可以将预定义条件设置为“空”，使得在步骤S203处始终判定预定义条件被满足。换言之，此时，将总是基于由第一相机检测到的环境参数，来控制第二相机对图像的捕获。

请注意，上文描述的方法200中各个步骤的顺序仅仅是示例性的，并非意在限制本发明的范围。例如，如上文所述，在某些实施例中，步骤S203处的预定义条件可以是指示用户选择的输入。此时，步骤S203可被最先执行。换言之，在这样的实施例中，将首先判断预定条件是否被满足，并且仅在预定条件被满足的情况下才执行方法的后续步骤。其他备选顺序也是可能的，本发明的范围在此方面不受限制。

特别地，如上文所述，在某些实施例中，电子设备100例如可以以映射表的形式存储用户的眼睛信息与对应环境参数之间的关联关系。这样的映射表可以直接使用。备选地，考虑到不同用户的眼睛对于相同的环境可能具有不同的反应(例如，在相同的色温下具有不同巩膜颜色)，在某些实施例中，可以针对电子设备100的特定用户而对眼睛信息与环境参数之间的预定义映射进行校准。

在某些实施例中，例如可以使用色卡之类的辅助工具对用户在给定条件下的眼睛颜色进行取样，并且相应地执行校准。备选地或附加地，为了提高校准的效率和用户友好程度，在某些实施例中，可以通过如下方式来实现校准。首先，接收用户对一组校准图像中的一个校准图像的选择，这组校准图像是在相同的图像捕获条件下利用不同的环境参数捕获的。用户的校准眼睛信息由第一相机136获取。而后，校准可以基于用户对校准图像的选择以及校准眼睛信息来完成。下面将参考图3描述这方面的示例实施例。

图3示出了根据本发明的示例性实施例的用于针对特定用户而校准眼睛信息与环境参数之间的预定义映射的方法300的流程图。根据本发明的实施例，方法300可以在上文描述的方法200之前执行。例如，可以在用户第一次配置或者使用电子设备100或其图像捕获功能时执行方法300，以实现针对用户的校准。

在图3所示的实施例中，映射表指示与一组图像捕获条件中的每个图像捕获条件相关联的环境参数以及对应的眼睛信息。图像捕获条件可以是预定义的，例如蓝天、多云、正午、钨丝灯、烛光，等等。对于每个图像捕获条件，映射表指示与之关联的环境参数和对应的眼睛信息。仅出于说明和讨论目的，考虑色温作为环境参数的示例。此时，对应的眼睛信息可以是巩膜颜色，并且可以通过二元组(R/G，B/G)来表征，其中R、G、B分别表示巩膜颜色的红、绿、蓝通道的值。由此，映射表例如可以定义如下(注意，所有数值仅仅是示例性的)：

表1

拍摄条件	色温	巩膜颜色信息(R/G，B/G)
			蓝天	10000k	(129，162)
多云	6500k	(161，130)
			正午	5500k	(175，123)
钨丝灯	3000k	(216，104)
			烛光	2000k	(264，95)

应当注意，在映射表中，还可以记录有其他环境参数的值以及对应的眼睛信息，这些环境参数可能并不与特定的图像捕获条件相关联。例如，在表1示出的示例性预定义映射中，除了与各个预定义图像捕获条件相关联的色温之外，还可以记录其他色温，例如6700k色温以及表示对应巩膜颜色的二元组(R/G，B/G)。

为了针对电子设备100的用户而自适应地校准预定义映射，在方法300的步骤S301，接收用户对一个特定图像捕获条的选择。为讨论方便，假设用户选择了“多云”这一图像捕获条件。

在步骤S302，根据预定义映射，确定与用户所选择的图像捕获条件相关联的环境参数，在此例中是与“多云”相关联的色温6500k。

接下来，在步骤S303，在步骤S302处确定的环境参数的预定义邻域内，选择一组候选环境参数。例如，可以以步骤S302处确定的环境参数为中心，向给定的步长在预定义的范围内进行采样，从而获得候选环境参数。例如，在所讨论的示例中，可以以色温6500k为中心，向两侧分别以例如200k的步长进行两次采样。这样可以获得一组候选环境参数{6100k，6300k，6500k，6700k，6900k}。可以看到，候选环境参数包括在步骤S302处确定的环境参数本身。这仅仅是示例，任何其他的采样方式也是可行的。本发明的范围在此方面不受限制。

在方法300的步骤S304，利用电子设备100的第一相机136获取用户的眼睛信息。在此例中，获取的眼睛信息至少包括巩膜的颜色。为讨论方便起见，在步骤S304处获取的眼睛信息可以称为“校准眼睛信息”。

在与步骤S304基本同时的步骤S305，基于在步骤S303处确定的每个候选环境参数，分别控制第二相机137捕获目标场景的图像，从而获得一组图像，称为“校准图像”。换言之，每个校准图像是基于不同的候选环境参数而捕获的图像。在此例中，例如，在上文示例中，可以分别基于候选色温{6100k，6300k，6500k，6700k，6900k}中的每个色温，控制第二相机在捕获图像时应用各自的自动白平衡处理，从而获得5个校准图像。

接下来，在步骤S306，接收用户对校准图像之一的选择。具体而言，根据本发明的实施例，可以在电子设备100的UI上向用户呈现得到的每个校准图像，从而允许用户从中选择他/她认为与当前图像捕获条件最为匹配的那个校准图像。可以理解，用户所选择的校准图像是他/她认为在视觉上和心理上具有最佳质量的图像。这种选择不仅能够反映客观的图像质量，而且还能够在一定程度上反映用户的偏好。以此方式，对预定义映射的校准同时实现了针对特定用户的个性化定制。为讨论方便，假设在此例中用户选择了基于6700k色温这一候选环境参数而捕获的校准图像。

此后，在步骤S307，确定与用户选择的校准图像相关联的那个候选环境参数所对应的眼睛信息。为讨论方便，在步骤S307处确定的眼睛信息可称为“默认眼睛信息”。例如，在所讨论的示例中，可以在步骤S307处确定与色温6700k这一候选环境参数相对应的巩膜颜色，作为默认眼睛信息。

在某些实施例中，与用户选择的校准图像相关联的候选环境参数所对应的默认眼睛信息可能已经被记录在预定义映射中。此时，在步骤S307，可以直接从预定义映射中读取该默认眼镜信息。备选地，在某些其他实施例中，某个候选环境参数所对应的默认眼睛信息可能未被记录在预定义映射。此时，可以利用诸如插值(interpolation)之类的技术，基于附近已知的环境参数和眼睛信息，估计或者计算该候选环境参数所对应的眼睛信息。

接下来，在步骤S308，基于在步骤S304处获取的校准眼睛信息以及在步骤S307确定的默认眼睛信息，来校准预定义的映射表。例如，在某些实施例中，可以建立从默认眼睛信息指向校准眼睛信息的偏移向量(offset vector)，并且利用该偏移向量来执行对预定义映射的校准。

具体而言，在这样的实施例中，可以利用表示巩膜颜色的二元组(R/G，B/G)定义一个坐标系。例如，R/G可以充当横轴，而B/G充当纵轴。这样，每个二元组(R/G，B/G)可以表示该坐标系中的一个点。基于预定义映射中所指示的二元组(R/G，B/G)，可以通过例如曲线拟合技术获得一条曲线，称为“映射曲线”。作为示例，图4A示出了基于上文表1中所示的映射表生成的映射曲线401。

在步骤S304处获取的校准眼睛信息定义了该坐标系中的点A，而在步骤S307处获得的默认眼睛信息定义坐标系上的点B。特别地，如上所述，默认眼睛信息是基于预定义映射生成的，因此点B位于映射曲线401之上。由此，从点B指向点A的向量可被定义为偏移向量。基于该偏移向量，如图4B所示，可以对映射曲线401进行平移，以得到更新的映射曲线402。继而，可以基于更新后的映射曲线402来完成对预定义映射的校准。

应当理解，尽管在上文描述中，参考巩膜颜色和色温描述了对预定义映射的校准，但是这种校准机制同样适用于其他环境参数和对应的眼睛信息，例如亮度和瞳孔比例。

现在参考图5，其示出了根据本发明的示例性实施例的用于检测环境参数以控制图像捕获的装置500的框图。如图所示，根据本发明的实施例，装置500包括：眼睛信息获取单元501，被配置为利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；环境检测单元502，被配置为基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及图像捕获控制单元503，被配置为响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。

在某些实施例中，所述眼睛信息包括巩膜的颜色，并且所述环境检测单元502可以包括色温检测单元，被配置为基于所述巩膜的颜色来检测所述环境的色温。

在某些实施例中，所述眼睛信息包括瞳孔的比例，并且所述环境检测单元502可以包括亮度检测单元，被配置为基于所述瞳孔的比例来检测所述环境的光照的亮度。

在某些实施例中，所述环境检测单元502可以被配置为使用预定义映射而从所述眼睛信息确定所述环境参数。在这样的实施例中，所述装置500还可以包括：校准单元，被配置为在使用所述预定义映射之前，针对所述用户而对所述预定义映射进行校准。

在某些实施例中，所述预定义映射至少指示与一组图像捕获条件中的每一个相关联的环境参数和眼睛信息。在这样的实施例中，所述装置还包括：第一接收单元，被配置为接收用户对所述图像捕获条件中的一个图像捕获条件的选择；环境参数确定单元，被配置为基于所述预定义映射，确定与所述用户选择的所述图像捕获条件相关联的所述环境参数；候选参数选择单元，被配置为在所述环境参数的预定义邻域内选择一组候选环境参数；校准眼睛信息获取单元，被配置为利用所述第一相机获取所述用户的校准眼睛信息；校准图像生成单元，被配置为基于每个所述候选环境参数而控制所述第二相机捕获图像，以生成一组校准图像；第二接收单元，被配置为接收所述用户对所述校准图像中的一个校准图像的选择；以及默认眼睛信息确定单元，被配置为基于所述预定义映射，确定与所述用户选择的所述校准图像相关联的所述候选环境参数所对应的默认眼睛信息。相应地，在这样的实施例中，所述校准单元可以被配置为基于所述校准眼睛信息和所述默认眼睛信息，来校准所述预定义映射。

在某些实施例中，装置500还可以包括：参考环境检测单元，被配置为基于所述第二相机在捕获所述图像时获取的信息，来检测所述环境的参考环境参数；环境参数比较单元，被配置为比较基于所述眼睛信息而检测到的所述环境参数与所述参考环境参数；以及第一条件判定单元，被配置为响应于所述环境参数与所述参考环境参数之间的差异低于预定义阈值，确定所述预定义条件被满足。

备选地或附加地，在某些实施例中，装置500还可以包括：用户输入接收单元，被配置为接收用户输入，所述用户输入指示基于所述环境参数来控制所述第二相机对所述图像的所述捕获；以及第二条件判定单元，被配置为响应于接收到所述用户输入，确定所述预定义条件被满足。

在某些实施例中，所述图像捕获控制单元503可被配置为控制以下至少一项：曝光时间；感光度；至少一个颜色通道的增益；以及白平衡处理。

应当理解，为清晰起见，在图5中没有示出装置500某些可选单元和子单元。然而，应当理解，上文参考图1-图4所描述的各个特征同样适用于装置500，因而没有赘述。而且，这里所用的术语“单元”既可以是硬件模块，也可以是软件单元模块。相应地，装置500可以通过各种方式实现。例如，在某些实施例中，装置500可以部分或者全部利用软件和/或固件来实现，例如被实现为包含在计算机可读介质上的计算机程序产品。备选地或附加地，装置500可以部分或者全部基于硬件来实现，例如被实现为集成电路(IC)、专用集成电路(ASIC)、片上系统(SOC)、现场可编程门阵列(FPGA)等。本发明的范围在此方面不受限制。

仅出于说明目的，上文已经描述了本发明的若干示例性实施例。本发明的实施例可以通过硬件、软件或者软件和硬件的结合来实现。硬件部分可以利用专用逻辑来实现；软件部分可以存储在存储器中，由适当的指令执行系统，例如微处理器或者专用设计硬件来执行。特别地，上文参考图2和图3描述的方法均可被实施为一种用于检测环境参数以控制图像捕获的计算机程序产品，所述计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令，所述机器可执行指令在被执行时使机器执行方法200和/或300的步骤。

本领域的普通技术人员可以理解上述的系统和方法可以使用计算机可执行指令和/或包含在处理器控制代码中来实现，例如在诸如磁盘、CD或DVD-ROM的载体介质、诸如只读存储器(固件)的可编程的存储器或者诸如光学或电子信号载体的数据载体上提供了这样的代码。本发明系统可以由诸如超大规模集成电路或门阵列、诸如逻辑芯片、晶体管等的半导体、或者诸如现场可编程门阵列、可编程逻辑设备等的可编程硬件设备的硬件电路实现，也可以用由各种类型的处理器执行的软件实现，也可以由上述硬件电路和软件的结合例如固件来实现。

应当注意，尽管在上文详细描述中提及了装置的若干单元，但是这种划分仅仅并非强制性的。实际上，根据本发明的实施例，上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之，上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。类似地，尽管在附图中以特定顺序描述了本发明方法的操作，但是这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。相反，流程图中描绘的步骤可以改变执行顺序。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

虽然已经参考若干具体实施例描述了本发明，但是应该理解，本发明并不限于所公开的具体实施例。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。所附权利要求的范围符合最宽泛的解释，从而包含所有这样的修改及等同结构和功能。

Claims (22)

1.一种用于检测环境参数以控制图像捕获的方法，所述方法包括：

利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；

基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及

响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。

2.根据权利要求1所述的方法，其中检测所述环境参数包括使用预定义映射而从所述眼睛信息确定所述环境参数。

3.根据权利要求2所述的方法，还包括：

在使用所述预定义映射之前，针对所述用户而对所述预定义映射进行校准。

4.根据权利要求3所述的方法，其中针对所述用户而对所述预定义映射进行校准包括：

接收所述用户对一组校准图像中的一个校准图像的选择，所述一组校准图像是在相同的图像捕获条件下利用不同的环境参数捕获的；

利用所述第一相机获取所述用户的校准眼睛信息；以及

基于所述用户对所述校准图像的所述选择以及所述校准眼睛信息来校准所述预定义映射。

5.根据权利要求4所述的方法，其中所述预定义映射至少指示与一组图像捕获条件中的每一个相关联的环境参数和眼睛信息，

其中接收所述用户对一组校准图像中的一个校准图像的选择包括：

接收用户对所述图像捕获条件中的一个图像捕获条件的选择；

基于所述预定义映射，确定与所述用户选择的所述图像捕获条件相关联的所述环境参数；

在所述环境参数的预定义邻域内选择一组候选环境参数；

基于每个所述候选环境参数而控制所述第二相机捕获图像，以生成所述一组校准图像；以及

接收所述用户对所述一组校准图像中的所述一个校准图像的选择，

并且其中校准所述预定义映射包括：

基于所述预定义映射，确定与所述用户选择的所述校准图像相关联的所述候选环境参数所对应的默认眼睛信息；以及

基于所述校准眼睛信息和所述默认眼睛信息来校准所述预定义映射。

6.根据权利要求1至5任一项所述的方法，其中所述眼睛信息包括巩膜的颜色，并且其中检测所述环境参数包括基于所述巩膜的颜色来检测所述环境的色温。

7.根据权利要求1至5任一项所述的方法，其中所述眼睛信息包括瞳孔的比例，并且其中检测所述环境参数包括基于所述瞳孔的比例来检测所述环境的光照的亮度。

8.根据权利要求1至5任一项所述的方法，还包括：

基于所述第二相机在捕获所述图像时获取的信息，来检测所述环境的参考环境参数；

比较基于所述眼睛信息而检测到的所述环境参数与所述参考环境参数；以及

响应于所述环境参数与所述参考环境参数之间的差异低于预定义阈值，确定所述预定义条件被满足。

9.根据权利要求1至5任一项所述的方法，还包括：

接收用户输入，所述用户输入指示基于所述环境参数来控制所述第二相机对所述图像的所述捕获；以及

响应于接收到所述用户输入，确定所述预定义条件被满足。

10.根据权利要求1至5任一项所述的方法，其中控制所述第二相机对所述图像的所述捕获包括控制以下至少一项：

曝光时间；

感光度；

至少一个颜色通道的增益；以及

白平衡处理。

11.一种用于检测环境参数以控制图像捕获的装置，所述装置包括：

眼睛信息获取单元，被配置为利用电子设备上的第一相机，获取所述电子设备的用户的眼睛信息；

环境检测单元，被配置为基于由所述第一相机捕获的所述眼睛信息，来检测所述用户所处环境的环境参数；以及

图像捕获控制单元，被配置为响应于预定义条件被满足，至少部分地基于检测到的所述环境参数来控制所述电子设备上的第二相机对图像的捕获，所述第一相机与所述第二相机位于所述电子设备的不同侧。

12.根据权利要求11所述的装置，其中所述环境检测单元被配置为使用预定义映射而从所述眼睛信息确定所述环境参数。

13.根据权利要求12所述的装置，还包括：

校准单元，被配置为在使用所述预定义映射之前，针对所述用户而对所述预定义映射进行校准。

14.根据权利要求13所述的装置，还包括：

用户选择接收单元，被配置为接收所述用户对一组校准图像中的一个校准图像的选择，所述一组校准图像是在相同的图像捕获条件下利用不同的环境参数捕获的；以及

校准眼睛信息获取单元，被配置为利用所述第一相机获取所述用户的校准眼睛信息，

所述校准单元被配置为基于所述用户对所述校准图像的所述选择以及所述校准眼睛信息来校准所述预定义映射。

15.根据权利要求14所述的装置，其中所述预定义映射至少指示与一组图像捕获条件中的每一个相关联的环境参数和眼睛信息，

其中所述用户选择接收单元包括：

第一接收单元，被配置为接收用户对所述图像捕获条件中的一个图像捕获条件的选择；

环境参数确定单元，被配置为基于所述预定义映射，确定与所述用户选择的所述图像捕获条件相关联的所述环境参数；

候选参数选择单元，被配置为在所述环境参数的预定义邻域内选择一组候选环境参数；

校准图像生成单元，被配置为基于每个所述候选环境参数而控制所述第二相机捕获图像，以生成所述一组校准图像；以及

第二接收单元，被配置为接收所述用户对所述一组校准图像中的所述一个校准图像的选择，

其中所述装置还包括默认眼睛信息确定单元，被配置为基于所述预定义映射，确定与所述用户选择的所述校准图像相关联的所述候选环境参数所对应的默认眼睛信息，

并且其中所述校准单元被配置为基于所述校准眼睛信息和所述默认眼睛信息来校准所述预定义映射。

16.根据权利要求11至15任一项所述的装置，其中所述眼睛信息包括巩膜的颜色，并且其中所述环境检测单元包括色温检测单元，被配置为基于所述巩膜的颜色来检测所述环境的色温。

17.根据权利要求11至15任一项所述的装置，其中所述眼睛信息包括瞳孔的比例，并且其中所述环境检测单元包括亮度检测单元，被配置为基于所述瞳孔的比例来检测所述环境的光照的亮度。

18.根据权利要求11至15任一项所述的装置，还包括：

参考环境检测单元，被配置为基于所述第二相机在捕获所述图像时获取的信息，来检测所述环境的参考环境参数；

环境参数比较单元，被配置为比较基于所述眼睛信息而检测到的所述环境参数与所述参考环境参数；以及

第一条件判定单元，被配置为响应于所述环境参数与所述参考环境参数之间的差异低于预定义阈值，确定所述预定义条件被满足。

19.根据权利要求11至15任一项所述的装置，还包括：

用户输入接收单元，被配置为接收用户输入，所述用户输入指示基于所述环境参数来控制所述第二相机对所述图像的所述捕获；以及

第二条件判定单元，被配置为响应于接收到所述用户输入，确定所述预定义条件被满足。

20.根据权利要求11至15任一项所述的装置，其中所述图像捕获控制单元被配置为控制以下至少一项：

曝光时间；

感光度；

至少一个颜色通道的增益；以及

白平衡处理。

21.一种电子设备，包括：

控制器；

第一相机；

与所述第一相机位于所述电子设备的不同侧的第二相机；以及

根据权利要求11至20任一项所述的装置。

22.一种用于检测环境参数以控制图像捕获的计算机程序产品，所述计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令，所述机器可执行指令在被执行时使机器执行根据权利要求1至10任一项所述的方法的步骤。