CN106464801A - 用于确定图像分辨率的系统和方法 - Google Patents

Abstract

揭示用于基于场景的一或多个特征而以推断方式确定成像装置的分辨率设置的系统和方法。所述特征可包含所述场景内的主要或前景人脸的大小、所述场景内的最大高频内容量、所述场景的照明条件或电子装置的电池电量。

Description

用于确定图像分辨率的系统和方法

技术领域

本文中所揭示的系统和方法大体上涉及自动并以推断方式确定最优图像分辨率。

背景技术

用户通常将其相机设置成在最高分辨率下拍摄图片，因为他们不知道自己何时确实需要用于后续缩放或平移的额外像素。在最大分辨率下拍摄的一个缺点为，文件自然较大，且甚至在现今移动电话上，那些图片和视频也会迅速填满存储装置。本文中所论述的实施例说明用于基于许多因素中的一或多者而以推断方式确定每次拍摄的分辨率的系统和方法。

发明内容

本发明的系统、方法和装置各自具有若干创新方面，其中无单个方面单独负责本文中所揭示的所要属性。本文中所描述的创新、方面和特征的组合可并入于系统、方法和装置的各种实施例中，且此类组合不受本文中所描述的实施例的实例限制。

本文中所描述的实施例和创新涉及可在电子装置上的处理器中运行以用于在“最优”分辨率下获得图像的系统和方法，此分辨率取决于许多因素中的一或多者。这些因素可包含(但不限于)场景内的主要人脸的大小、场景中的最大高频内容量、场景的照明条件和装置的电池寿命。呈现直观的用户体验以允许用户选择待用于确定捕获图像的最优分辨率的一或多个因素。

在一些实施例中，选择相机且将其指向场景处。场景可含有多个感兴趣区(ROI)，例如由人脸检测功能识别的人脸，或由对象跟踪功能识别的对象。可确定以总视野的百分比计的感兴趣区中的一或多者的大小。基于一或多个感兴趣区的大小，可增加或减少相机分辨率设置以在最低分辨率设置下提供所确定的最高质量图像。在一些实施例中，场景内的最大高频内容量可用于确定是否应增加或减少相机分辨率设置。在一些实施例中，可确定场景的照明条件。如果照明条件被确定为低照明条件，那么可增加相机分辨率设置，且将CCD像素合并(binning)用于降低信噪比和增加图像质量。在一些实施例中，可基于相机的电池电量而减少或增加相机分辨率设置。

一个方面涉及一种用于以推断方式确定图像捕获分辨率的系统，其包含控制模块，所述控制模块经配置以基于场景的一或多个特征而确定场景相关分辨率设置，且在所述场景相关分辨率设置下捕获所述场景的图像。所述控制模块可进一步经配置以设置默认图像捕获分辨率，且所述控制模块可进一步经配置以基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多者而确定场景相关分辨率设置。所述系统可进一步包含成像装置，所述成像装置包括成像传感器，且其中所述控制模块进一步经配置以按预览模式操作所述成像装置。在一些实施例中，所述控制模块可进一步经配置以使用人脸检测算法或对象跟踪算法中的一或多者来确定所述场景内的感兴趣区。在一些实施例中，所述控制可进一步经配置以基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区。在其它实施例中，所述控制模块进一步经配置以在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的5％的情况下增加分辨率设置。在其它实施例中，所述控制模块进一步经配置以在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的8％的情况下增加分辨率设置。在一些实施例中，所述控制模块进一步经配置以通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量。在一些实施例中，所述控制模块进一步经配置以访问查找表以基于所述场景的所述高频内容量而确定对分辨率设置的增加。在其它实施例中，所述控制模块进一步经配置以确定场景的照明条件且基于所述照明条件而增加分辨率设置。在一些实施例中，所述控制模块为移动装置的相机应用程序的组件。

在另一方面中，一种用于以推断方式确定图像捕获分辨率的方法包含基于场景的一或多个特征而确定场景相关分辨率设置以及在所述场景相关分辨率设置下捕获所述场景的图像的步骤。在一些实施例中，所述方法进一步包含设置默认图像捕获分辨率以及基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多个特征而确定场景相关分辨率设置的步骤。在一些实施例中，所述方法进一步包含以预览模式操作成像装置的步骤。在其它实施例中，所述方法进一步包含使用人脸检测算法或对象跟踪算法中的一或多者来确定场景内的感兴趣区的步骤。在其它实施例中，所述方法进一步包含基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区的步骤。在一些实施例中，所述方法进一步包含在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的5％的情况下增加分辨率设置的步骤。在其它实施例中，所述方法进一步包含通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量的步骤。在其它实施例中，所述方法进一步包含基于所述场景的所述高频内容量而增加分辨率设置的步骤。在一些实施例中，所述成像装置经配置以作为移动装置的相机应用程序的一部分操作。

在另一方面中，一种用于以推断方式确定图像捕获分辨率的设备包含：用于基于场景的一或多个特征而确定场景相关分辨率设置的装置；以及用于在所述场景相关分辨率设置下捕获所述场景的图像的装置。在一些实施例中，所述设备进一步包含用于基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多者而确定场景相关分辨率设置的装置。在其它实施例中，所述设备进一步包含用于设置默认图像捕获分辨率的装置。

在另一方面中，一种非暂时性计算机可读媒体存储指令，所述指令在经执行时致使至少一个物理计算机处理器执行基于场景的特征而以推断方式确定图像捕获分辨率的方法。所述方法可包含基于所述场景的一或多个特征而确定场景相关分辨率设置以及在所述场景相关分辨率设置下捕获所述场景的图像的步骤。在其它实施例中，所述方法可进一步包含设置默认图像捕获分辨率以及基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多个特征而确定场景相关分辨率设置的步骤。在一些实施例中，所述方法可进一步包含以预览模式操作成像装置的步骤。在其它实施例中，所述方法可进一步包含使用人脸检测算法或对象跟踪算法中的一或多者来确定场景内的感兴趣区以及基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区的步骤。在一些实施例中，所述方法可进一步包含在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的5％的情况下增加分辨率设置的步骤。在其它实施例中，所述方法可进一步包含通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量以及基于所述场景内的所述高频内容量而增加分辨率设置的步骤。在一些实施例中，所述成像装置经配置以作为移动装置的相机应用程序的一部分操作。

附图说明

将在下文中结合附图来描述所揭示方面，提供附图以说明但不限制所揭示方面，其中相同符号表示相同元件。

图1为描绘实施一些可操作元件以用于确定成像装置的分辨率的系统的框图。

图2为说明用于确定成像装置的分辨率的过程的一个实施例的流程图。

图3为说明用于确定成像装置的分辨率的过程的另一实施例的流程图。

图4为说明用于确定成像装置的分辨率的过程的又一实施例的流程图。

具体实施方式

为了易于参考，可用于捕获图像或拍摄图片或捕获多个图像(例如，视频)的装置或装置的组件可有时在本文中被称作相机或成像系统。通常，并入于智能装置(例如，蜂窝电话、膝上型计算机、相机、平板计算机或其它移动装置)中的相机可经设置或经配置以在各种级别的分辨率中的一者下捕获图像。举例来说，如果用户打算打印或显示图像，那么用户可设置相机以在最高分辨率下捕获图像，或如果用户打算仅用电子邮件发送或经由社交媒体共享图像，那么用户可设置相机以在较低分辨率下捕获图像。很多时候，用户将用于捕获图像的相机的分辨率设置成最高分辨率，而不完全理解在此级别的分辨率下捕获图像的缺点或此级别的分辨率对于每个图像可能不是必需的。如本文中所使用，下文所论述的方法和系统提供解决方案以基于场景的一或多个因素而确定最优图像分辨率，且可向用户建议分辨率设置或自动设置分辨率。

在一些实施例中，所提议的分辨率确定过程引导处理器基于一或多个因素而确定分辨率设置，所述因素例如照明(例如，场景的环境照明)、人脸检测、场景的高频内容、成像系统的电池电量或自动确定或由用户指示的预期图像用途。此分辨率设置可针对所捕获的每个图像来自动确定，或可为向用户建议的任选设置。用户可在图像捕获之前选择图像的分辨率，或可设置相机以自动设置图像捕获分辨率。当相机经启动以捕获图像时，可在由用户手动输入或由处理器自动确定的分辨率设置下捕获图像。在一些实施例中，在由成像系统捕获图像之后，系统可从用户接收输入，所述输入确定图像分辨率(例如，用以存储图像的分辨率)。

应注意，所述实例可描述为过程，所述过程被描绘成流程图、流图、有限状态图、结构图或框图。尽管流程图可将操作描述为顺序过程，但许多操作可并行或同时执行，且所述过程可重复。另外，可重新布置操作的次序。当过程的操作完成时，所述过程终止。过程可对应于方法、函数、过程(procedure)、子例程、子程序等。当过程对应于软件函数时，过程的终止对应于函数返回到调用函数或主函数。

可在芯片上系统(SoC)或外部硬件、软件、固件或其任何组合中实施实施例。所属领域的技术人员将理解，可使用多种不同技术和技艺中的任一者来表示信息和信号。举例来说，可由电压、电流、电磁波、磁场或磁粒子、光场或光粒子或其任何组合来表示贯穿以上描述参考的数据、指令、命令、信息、信号、位、符号和码片。

在以下描述中，给出特定细节以提供对实例的透彻理解。然而，所属领域的一般技术人员将理解，可在没有这些特定细节的情况下实践所述实例。举例来说，可在框图中展示电组件/装置，以免用不必要的细节混淆所述实例。在其它情况下，可详细展示这些组件、其它结构和技术以便进一步解释所述实例。

系统概述

图1说明经配置以基于许多因素中的一或多者而确定图像的(最优)分辨率的成像系统100的一个实例。所说明实施例并不意味着是限制性的，而是说明一些实施例中的某些组件。系统100可包含用于其它功能的为了所说明组件清楚可见而未展示的多种其它组件。

成像系统100可包含成像装置110和电子显示器130。电子显示器130的某些实施例可为任何平板显示器技术，例如LED、LCD、等离子或投影屏。电子显示器130可耦合到处理器120以用于接收供视觉显示给用户的信息。此类信息可包含(但不限于)存储于存储器位置中的文件、安装在处理器120上的软件应用程序、用户接口和网络可接入内容对象的视觉表示。

成像装置110可使用成像传感器中的一者或组合。成像系统100可进一步包含链接到成像装置110的处理器120。工作存储器135、电子显示器130和程序存储器140也与处理器120通信。成像系统100可为移动装置、平板计算机、膝上型计算机或蜂窝式电话。

处理器120可为通用处理单元或其可为经专门设计以用于手持式电子装置的成像应用的处理器。如所展示，处理器120连接到程序存储器140和工作存储器135，且与程序存储器140和工作存储器135进行数据通信。在一些实施例中，工作存储器135可并入于处理器120中，例如，高速缓冲存储器。工作存储器135还可为与处理器120分开且耦合到处理器120的组件，例如，一或多个RAM或DRAM组件。换句话说，尽管图1说明两个存储器组件，包含包括若干模块的存储器组件140和包括工作存储器的单独存储器135，但所属领域的技术人员将认识到利用不同存储器架构的若干实施例。举例来说，设计可利用ROM或静态RAM存储器来存储实施存储器140中所含有的模块的处理器指令。处理器指令可随后加载到RAM中，以有助于由处理器执行。举例来说，工作存储器135可为RAM存储器，且指令在由处理器120执行之前被加载到工作存储器135中。

在所说明的实施例中，程序存储器140存储图像捕获模块145、特征大小确定模块150、高频内容确定模块155、照明条件确定模块157、分辨率确定模块160、操作系统165和用户接口模块170。这些模块可包含配置处理器120以执行各种图像处理和装置管理任务的指令。程序存储器140可为任何合适的计算机可读存储媒体，例如，非暂时性存储媒体。工作存储器135可由处理器120使用以存储存储器140的模块中所含有的处理器指令的工作集合。或者，工作存储器135还可由处理器120使用以存储在成像系统100的操作期间产生的动态数据。

如上文所提及，处理器120可由存储于存储器140中的若干模块配置。换句话说，处理器120可运行存储于存储器140中的模块中的指令。图像捕获模块145可包含配置处理器120以从成像装置获得图像的指令。因此，处理器120连同图像捕获模块145、成像装置110和工作存储器135表示用于获得图像传感器数据的一个装置。

仍参考图1，存储器140还可含有特征大小确定模块150。特征大小确定模块150可包含配置处理器120以确定场景内的特征(例如，人脸)的大小且将所述特征分类为前景和背景特征的指令，如下文将进一步详细描述。因此，处理器120连同特征大小确定模块150、工作存储器135和电子显示器130表示用于基于特征的大小而识别感兴趣场景内的特征且对其分类的一个装置。

存储器140还可含有高频内容确定模块155。高频内容确定模块155可包含配置处理器120以执行自动对焦功能且计算图像的高频内容的指令。举例来说，如果感兴趣场景含有具有较高程度的细节的区域(例如，草地)，那么高频内容确定模块155自动对焦功能可返回对应于高频内容的自动对焦参数。因此，处理器120连同高频内容确定模块155和工作存储器135表示用于识别感兴趣场景中的最大高频内容量的一个装置。

存储器140还可含有照明条件确定模块157。照明条件确定模块157可包含配置处理器120以执行自动白平衡功能以确定感兴趣场景中的照明的量和类型的指令。举例来说，如果自动白平衡功能检测到低照明条件，那么照明条件确定模块157可发指令给处理器120以在最大分辨率下拍摄，且将电荷耦合装置(CCD)元件像素合并以改进图像的信噪比(SNR)。因此，处理器120连同照明条件确定模块157和工作存储器135表示用于识别感兴趣场景的照明条件的一个装置。

存储器140还可含有分辨率确定模块160。图1中所说明的分辨率确定模块160可包含配置处理器120以基于由处理器120的其它功能获取的数据而设置图像的拍摄分辨率的指令。举例来说，如果对感兴趣场景执行特征检测功能且识别到许多前景特征，那么分辨率确定模块160可发指令给处理器120以基于前景特征的大小和数目而增加成像装置110的图像捕获分辨率，如下文将更详细地描述。因此，处理器120连同特征大小确定模块150、分辨率确定模块160和工作存储器135表示用于基于感兴趣场景中所检测到的特征的大小和数目而动态地调整成像装置的图像捕获分辨率的一个装置。

在另一实例中，用户可拍摄含有草叶或包含大量细节(例如，边缘)的其它特征的图像，如由高频内容确定模块155所检测到的。在此实例中，分辨率确定模块160可发指令给处理器120以基于感兴趣场景中的高频内容量而增加成像装置110的图像捕获分辨率；或降低含有相对较少量细节的图像的分辨率。因此，处理器120连同高频内容确定模块155、分辨率确定模块160和工作存储器135表示用于基于感兴趣场景中的最大高频内容量而动态地调整成像装置的图像捕获分辨率的一个装置。

在又一实例中，用户可在例如室内或夜晚等低照明条件下拍摄图像，如由照明条件确定模块157所检测到的。在此实例中，分辨率确定模块160可发指令给处理器120以基于感兴趣场景的所检测到的照明条件而增加成像装置110的图像捕获分辨率。因此，处理器120连同照明条件确定模块157、分辨率确定模块160和工作存储器135表示用于基于感兴趣场景的所检测到的照明条件而动态地调整成像装置的图像捕获分辨率的一个装置。

存储器140还可含有用户接口模块170。图1中所说明的用户接口模块170可包含配置处理器120以提供显示中(on-display)对象和软控件的集合的指令，所述软控件允许用户与装置交互，例如，允许用户选择所建议的图像捕获分辨率或确认成像装置的自动图像捕获分辨率设置。用户接口模块170还可允许应用程序与系统的其余部分交互。操作系统模块165还可驻留于存储器140中且通过处理器120操作以管理系统100的存储器和处理资源。举例来说，操作系统165可包含装置驱动器以管理例如电子显示器130或成像装置110的硬件资源。在一些实施例中，特征大小确定模块150、高频内容确定模块155、照明条件确定模块157和分辨率确定模块160中所含有的指令可不直接地与这些硬件资源交互，而是经由位于操作系统165中的标准子例程或API交互。操作系统165内的指令可随后直接地与这些硬件组件交互。

处理器120可将数据写入到存储模块125。尽管存储模块125以图形方式表示为传统的磁盘驱动器，但是所属领域的技术人员将理解，多个实施例可包含基于磁盘的存储装置或若干其它类型的存储媒体中的一者，包含存储磁盘、USB驱动器、闪存驱动器、远程连接的存储媒体、虚拟磁盘驱动器等等。

尽管图1描绘包括单独组件的装置以包含处理器、成像装置、电子显示器和存储器，但本领域技术人员将认识到，这些单独组件中的一或多者可以多种方式组合以实现特定设计目标。举例来说，在替代实施例中，存储器组件可与处理器组件组合以节省成本并改进性能。

另外，尽管图1说明两个存储器组件，包含包括若干模块的存储器组件140和包括工作存储器的单独存储器135，但所属领域的技术人员将认识到利用不同存储器架构的若干实施例。举例来说，设计可利用ROM或静态RAM存储器来存储实施存储器140中所含有的模块的处理器指令。或者，可在系统启动时从磁盘存储装置读取处理器指令，所述磁盘存储装置集成到成像系统100中或经由外部装置端口连接。处理器指令可随后加载到RAM中，以有助于由处理器执行。举例来说，工作存储器135可为RAM存储器，且指令在由处理器120执行之前被加载到工作存储器135中。

方法概述

本发明的实施例涉及一种用于确定最优图像分辨率的方法，所述方法可包含启用成像装置的分辨率确定模式，其中系统基于场景的一或多个特征而确定分辨率以用于捕获场景的图像。所述实例可描述为过程，所述过程被描绘为流程图、流图、有限状态图、结构图或框图。尽管流程图可将操作描述为顺序过程，但许多操作可并行或同时执行，且所述过程可重复。另外，可重新布置操作的次序。当过程的操作完成时，所述过程可终止。过程可对应于方法、功能、过程(procedure)、子例程、子程序等。当过程对应于软件函数时，过程的终止可对应于函数返回到调用函数或主函数。

图2说明用以配置具有成像装置(例如，图1中所展示的成像装置110)的电子装置以执行可在图1中所描绘的模块中的一或多者中实施的场景相关图像分辨率确定的过程200的实施例的一个实例。在各种实施方案中，过程200可包含一或多个额外过程特征，或不包含某一所说明特征。在一些实例中，过程200可在处理器(例如，处理器120(图1))上且在图1中所说明的存储于存储器140中或并入于其它硬件或软件中的其它组件上运行。在一些实施例中，过程200的至少一部分可在硬件中实施。

过程200开始于开始框202且转到框204，在框204中，将默认图像捕获分辨率设置成预定分辨率。在一些实施例中，可基于(例如)装置上可用的存储器存储空间的大小、用户对默认分辨率的过去选择或可用的分辨率的级别(例如，在中点分辨率下)或一或多个其它因素而选择预定分辨率。举例来说，在一些实施例中，可将默认图像捕获分辨率设置成成像装置110的最大分辨率的三分之一。在其它实施例中，可将默认图像捕获分辨率设置成最大分辨率的任何分数，例如，八分之一、六分之一、四分之一、二分之一等。

接着，过程200转到框206，其中以预览模式操作成像装置110以预览感兴趣场景。在一些实施例中，预览模式可包含在电子显示器(例如，电子显示器130(图1))上显示由成像装置110的镜头观看到的场景。电子装置可为手持式通信装置，例如，蜂窝式电话或“智能电话”，或包含平板计算机的移动个人数据助理(PDA)。举例来说，用户可以预览模式操作移动装置的相机以确定是否捕获图像。在另一实例中，用户可以预览模式操作移动装置的相机以确定使用何种分辨率来捕获场景的图像。

过程200随后转到框208，其中发指令给处理器(例如，处理器120)以确定当前场景内的感兴趣区(例如，人脸或对象)。在一些实施例中，处理器可使用人脸检测算法或对象跟踪算法来识别可能的感兴趣区。举例来说，人脸检测算法可确定在场景内出现八张人脸。在另一实例中，对象跟踪算法可识别放在中性背景内的许多物品，例如，沙滩上的桶、沙堡和鸟。优选地，在预览模式期间作为持续过程而确定感兴趣区。优选地，如由成像系统100运行的过程200并不取决于所使用的特定人脸检测算法，只要所选的算法可充分地检测人脸便可。在一些实施例中，可使用人脸检测算法，例如，可用于OpenCV中的维奥拉琼斯(ViolaJones)人脸检测算法。类似地，如由成像系统100运行的过程200还理想地不取决于所使用的对象跟踪算法，只要可确定准确的对象跟踪便可。在已确定可能的感兴趣区之后，过程200转到块210。

在框210中，过程200可发指令给处理器以将所检测到的人脸或对象分类为前景或背景人脸或对象。在一些实施例中，将每个人脸或对象分类为前景或背景人脸或对象可基于直方图截止(cut-off)大小分布。举例来说，直方图截止大小分布可指示前景或背景人脸或对象所占据的视野(FOV)的百分比。前景和/或背景人脸和对象的面积可表达为图像传感器或具有当前视野的图像的像素×像素面积。可基于由人脸或对象占据的FOV的百分比是否大于预定阈值而将人脸或对象分类为前景人脸或对象。举例来说，如果三张人脸占据成像装置110的全部视野(FOV)的5％且存在加起来占据FOV的约2％的八张其它人脸，那么处理器将确定存在三个前景或主要人脸。在一个实例中，在典型图像中，人脸应至少占据FOV的大约5％或1/20才能被视为主要或前景人脸。在其它实施例中，人脸可至少占据FOV的大约2％、3％或4％才能被视为主要或前景人脸。然而，在其它实施例中，可由用户定义用于将主要或前景人脸或对象与背景人脸或对象分开的准则或阈值。

过程200接着转到框212，且过程200基于主要人脸或对象的大小与预定阈值的比较而确定是否增加成像装置110的图像捕获分辨率。此可通过将指令提供到此动作的处理器来完成。在一些实施例中，如果主要人脸占据FOV的计算所得的百分比，那么可发指令给处理器以访问存储器中所存储的信息以确定给定人脸大小的分辨率，如框212所指示。举例来说，如果主要人脸占据FOV的计算所得的百分比，那么可发指令给处理器以访问查找表(LUT)以确定给定人脸大小的分辨率，如框212所指示。在其它实施例中，可由数学函数确定给定人脸大小的分辨率。

在一个实例中，对于所检测到的每指定数目个(例如，1000个)锐边，分辨率可增加2兆像素(MP)。在其它实施例中，可将锐边检测阈值设置成其它值，例如500、1000、1500、2000等，其中每个阈值与分辨率增加(例如，1MP、2MP、3MP、4MP等)相关联。在一个实例中，如果人脸占据FOV的约15％，那么将在默认分辨率设置(可为3兆像素(MP))下捕获图像。在另一实例中，如果主要人脸占据小于FOV的8％，那么可发指令给处理器以调整分辨率，使得在较高分辨率(例如，5MP)下拍摄图像。

在另一实例中，如果人脸占据小于FOV的5％，那么可发指令给处理器以调整分辨率，使得在最大分辨率(例如，10MP)下拍摄图像。换句话说，如果发现人脸和/或对象为FOV的小区域，那么理想地增加分辨率。如果人脸和/或对象占据FOV的较大区域，那么分辨率可保持与默认分辨率相同或可减少。在每个实例中，最大分辨率取决于成像装置110的最大分辨率，且因此可基于成像装置110的分辨率而设置图像捕获分辨率的不同阈值。在已确定并设置分辨率之后，过程200转到框214，其中发指令给处理器以在经优化场景相关分辨率下捕获场景的图像，如框214所指示。一旦已在场景相关分辨率下捕获图像，过程200可转到框216并结束。

图3说明用以配置具有成像装置(例如，图1中所展示的成像装置110)的电子装置以执行可在图1中所描绘的模块中的一或多者中实施的场景相关图像分辨率的过程的实施例的另一实例。在一些实例中，过程300可在处理器(例如，处理器120(图1))上且在图1中所说明的存储于存储器140中或并入于其它硬件或软件中的其它组件上运行。

过程300开始于开始框302且转到框304，其中将默认图像分辨率设置成预定分辨率。举例来说，在一些实施例中，如上文所论述，可将默认图像捕获分辨率设置成成像装置110的最大分辨率的三分之一。接着，过程300转到框306，其中成像装置110可以预览模式操作以预览感兴趣场景以确定是否需要改变分辨率。

过程300接着转到框308，其中可发指令给处理器以识别图像中的最大高频内容量。锐度可能是最重要的摄影图像质量因素，因为其确定成像系统可再现的细节的量。可由不同色调或颜色的区之间的边界或边缘定义锐度。可使用锐度检测器(例如，快速傅立叶变换或滑动窗口)来确定图像的锐度。可通过图像最锐的自动对焦位置处的高频分数来确定最大高频内容量。接着，在框310中，可发指令给处理器以基于场景中的最大高频内容而确定图像分辨率。如果图像中的高频内容量高于预定阈值，那么将增加图像分辨率。举例来说，如果用户拍摄蓝天或大海的图片，那么默认分辨率或较低分辨率设置可为足够的。然而，如果用户拍摄具有例如草叶或其它细节特征等高频内容的图像，那么理想地增加分辨率以捕获图像的细节。在一些实施例中，查找表可用于确定应使用何种分辨率来捕获具有各种高频内容量的图像。在确定最优分辨率之后，过程300转到框312，其中发指令给处理器以在最优场景相关分辨率设置下设置分辨率。接着，在框314中，由成像装置110在场景相关分辨率设置下捕获场景的图像。在获取图像之后，过程300转到框316并结束。

图4说明用以配置具有成像装置(例如，图1中所展示的成像装置110)的电子装置以执行可在图1中所描绘的模块中的一或多者中实施的场景相关图像分辨率的过程的实施例的另一实例。在一些实例中，过程400可在处理器(例如，处理器120(图1))上且在图1中所说明的存储于存储器140中或并入于其它硬件或软件中的其它组件上运行。

过程400开始于开始框402且转到框404，其中将默认图像分辨率设置成预定分辨率。举例来说，在一些实施例中，如上文所论述，可将默认图像捕获分辨率设置成成像装置110的最大分辨率的三分之一。接着，过程400转到框406，其中成像装置110可以预览模式操作以预览感兴趣场景以确定是否需要改变分辨率。

过程400接着转到框408，其中可发指令给处理器以识别场景的照明条件以确定默认分辨率是否足够。在一些实施例中，可使用自动白平衡特征来确定场景的光级。最小可检测光源取决于成像装置的图像传感器，确切地说取决于图像传感器的大小。举例来说，基于所检测到的流明的数目，可发指令给处理器以启用像素合并。如应用于电荷耦合装置(CCD)的像素合并允许组合来自邻近像素的电荷，从而提供例如以空间分辨率减少为代价加快读出速度和改进信噪比等益处。在例如室内或昏暗的餐厅等低照明条件下拍摄照片将触发处理器确定给定照明条件所需的分辨率级别，如下一步骤(框410)所指示。在确定给定照明条件的最优分辨率之后，过程400转到框412，其中发指令给处理器以将分辨率设置在最优场景相关分辨率设置下。如果检测到低照明条件，那么处理器将发指令给成像装置110以在最大分辨率下拍摄图像，但将CCD元件像素合并以改进信噪比。接着，在框414中，由成像装置110在场景相关分辨率设置下捕获场景的图像。在一个实例中，相机可在40MP下拍摄低照明场景以产生3MP图像。在获取图像之后，过程400转到框416并结束。过程400可用于在给定低照明条件的情况下产生最优图像文件，无论可选择的自定义设置如何。

在又一实例中，电子装置的当前电池电量可触发图像分辨率的变化以便节省电池电力。举例来说，如果装置确定装置的当前电池电量可不允许在下一预期充电周期之前用当前设置来操作装置，那么可发指令给处理器以降低图像分辨率，使得成像装置110在较低分辨率下获取图像以节省电池寿命。在一些实施例中，当电子装置插上电源并充电时，可发指令给处理器以运行应用程序以对图像调整大小。

上文关于过程200、300和400所论述的实例可在电子装置中个别地实施，或者所述过程中的一或多者可一同实施。在一些实施例中，可在成像装置的图像捕获前功能期间(例如，在自动对焦或自动白平衡功能期间)实施上文针对场景相关图像分辨率所论述的过程或实例中的一或多者。在一些实施例中，可在图像捕获之后实施场景相关分辨率过程，例如上文所描述的场景相关分辨率过程。在于图像捕获之后实施场景相关分辨率过程的实施例中，可在存储之前对所获取图像调整大小以节省磁盘空间。

在考虑多于一个因素以确定分辨率的一些实施例中，可对所述因素分配权重以确定哪些因素将控制或主要控制分辨率。在一些实施例中，可相互结合地评估所述因素以确定所要分辨率。

关于术语的阐明

除非另有指示，否则对具有特定特征的设备的操作的任何揭示内容还明确地希望揭示具有类似特征的方法(且反之亦然)，且对根据特定配置的设备的操作的任何揭示内容还明确地希望揭示根据类似配置的方法(且反之亦然)。术语“配置”可参考如由其特定上下文指示的方法、设备和/或系统来使用。术语“方法”、“过程”、“过程(procedure)”和“技术”通用地且可互换地使用，除非特定上下文另有指示。术语“设备”和“装置”也通用地且可互换地使用，除非特定上下文另有指示。术语“元件”和“模块”通常用于指示较大配置的一部分。除非由其上下文明确限制，否则术语“系统”在本文中用于指示其普通含义中的任一者，包含“交互以用于共同目的的元件群组”。通过参考文献的一部分的任何并入也应理解为并入了在所述部分内所参考的术语或变量的定义，其中这些定义出现在文献中的其它地方，且并入了所并入部分中所参考的任何图。

所属领域的技术人员将进一步了解，结合本文所揭示的实施方案而描述的各种说明性逻辑块、模块、电路和过程步骤可实施为电子硬件、计算机软件或两者的组合。为了清晰地说明硬件与软件的此互换性，上文已大体就其功能性描述了各种说明性组件、块、模块、电路和步骤。此功能性是实施为硬件还是软件取决于特定应用和强加于整个系统的设计约束。所属领域的技术人员可针对每一特定应用以不同方式来实施所描述的功能性，但此类实施方案不应被解释为会导致脱离本发明的范围。所属领域的技术人员将认识到，一个部分或一部分可包括小于或等于整体的内容。举例来说，像素集合的一部分可指那些像素的子集合。

可用经设计以执行本文中所描述的功能的通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件或其任何组合来实施或执行结合本文中所揭示的实施方案而描述的各种说明性逻辑块、模块和电路。通用处理器可为微处理器，但在替代方案中，处理器可为任何常规处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合，例如，DSP与微处理器的组合、多个微处理器、结合DSP核心的一或多个微处理器，或任何其它此类配置。

结合本文中所揭示的实施方案而描述的方法或过程的步骤可直接体现于硬件、由处理器执行的软件模块或所述两者的组合中。软件模块可驻留在RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM，或所属领域中已知的任何其它形式的非暂时性存储媒体中。示范性计算机可读存储媒体耦合到处理器，使得处理器可从计算机可读存储媒体读取信息且将信息写入到计算机可读存储媒体。在替代方案中，存储媒体可与处理器成一体式。处理器和存储媒体可驻留于ASIC中。ASIC可驻留于用户终端、相机或其它装置中。在替代方案中，处理器和存储媒体可作为离散组件驻留于用户终端、相机或其它装置中。

本文中包含一些标题是为了参考和辅助定位各部分。这些标题并不希望限制关于其描述的概念的范围。此类概念可贯穿整个说明书适用。

提供对所揭示实施方案的先前描述以使得所属领域的技术人员能够进行或使用本发明。所属领域的技术人员将易于了解对这些实施方案的各种修改，且本文中所定义的一般原理可应用于其它实施方案而不脱离本发明的精神或范围。因此，本发明并不希望限于本文中所展示的实施方案，而是应符合与本文中所揭示的原理和新颖特征一致的最广范围。

Claims (30)

1.一种用于以推断方式确定图像捕获分辨率的系统，其包括：

控制模块，其经配置以：

基于场景的一或多个特征而确定场景相关分辨率设置；且

在所述场景相关分辨率设置下捕获所述场景的图像。

2.根据权利要求1所述的系统，

其中所述控制模块进一步经配置以设置默认图像捕获分辨率；且

其中所述控制模块进一步经配置以基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多者而确定场景相关分辨率设置。

3.根据权利要求1所述的系统，其进一步包括成像装置，所述成像装置包括成像传感器，且其中所述控制模块进一步经配置以按预览模式操作所述成像装置。

4.根据权利要求3所述的系统，其中所述控制模块进一步经配置以使用人脸检测算法或对象跟踪算法中的一或多者来确定所述场景内的感兴趣区。

5.根据权利要求4所述的系统，其中所述控制模块进一步经配置以基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区。

6.根据权利要求5所述的系统，其中所述控制模块进一步经配置以在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的用户所指定百分比的情况下增加分辨率设置。

7.根据权利要求5所述的系统，其中所述控制模块进一步经配置以在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的5％的情况下增加分辨率设置。

8.根据权利要求2所述的系统，其中所述控制模块进一步经配置以通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量。

9.根据权利要求8所述的系统，其中所述控制模块进一步经配置以访问查找表以基于所述场景的所述高频内容量而确定对分辨率设置的增加。

10.根据权利要求2所述的系统，其中所述控制模块进一步经配置以确定场景的照明条件且基于所述照明条件而增加分辨率设置。

11.根据权利要求1所述的系统，其中所述控制模块为移动装置的相机应用程序的组件。

12.一种用于以推断方式确定图像捕获分辨率的方法，其包括：

基于场景的一或多个特征而确定场景相关分辨率设置；以及

在所述场景相关分辨率设置下捕获所述场景的图像。

13.根据权利要求12所述的方法，其进一步包括设置默认图像捕获分辨率以及基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多个特征而确定场景相关分辨率设置。

14.根据权利要求12所述的方法，其进一步包括以预览模式操作成像装置。

15.根据权利要求12所述的方法，其进一步包括使用人脸检测算法或对象跟踪算法中的一或多者来确定场景内的感兴趣区。

16.根据权利要求15所述的方法，其进一步包括基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区。

17.根据权利要求16所述的方法，其进一步包括在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的用户所指定百分比的情况下增加分辨率设置。

18.根据权利要求13所述的方法，其进一步包括通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量。

19.根据权利要求18所述的方法，其进一步包括基于所述场景的所述高频内容量而增加分辨率设置。

20.根据权利要求14所述的方法，其中所述成像装置经配置以作为移动装置的相机应用程序的一部分操作。

21.一种用于以推断方式确定图像捕获分辨率的设备，其包括：

用于基于场景的一或多个特征而确定场景相关分辨率设置的装置；以及

用于在所述场景相关分辨率设置下捕获所述场景的图像的装置。

22.根据权利要求21所述的设备，其进一步包括用于基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多者而确定场景相关分辨率设置的装置。

23.根据权利要求21所述的设备，其进一步包括用于设置默认图像捕获分辨率的装置。

24.一种非暂时性计算机可读媒体，其存储指令，所述指令在经执行时致使至少一个物理计算机处理器执行基于场景的特征而以推断方式确定图像捕获分辨率的方法，所述方法包括：

基于所述场景的一或多个特征而确定场景相关分辨率设置；以及

在所述场景相关分辨率设置下捕获所述场景的图像。

25.根据权利要求24所述的非暂时性计算机可读媒体，其进一步包括设置默认图像捕获分辨率以及基于所述场景的感兴趣区的大小、所述场景内的高频内容量、所述场景的照明条件和电子装置的电池电量中的一或多个特征而确定场景相关分辨率设置。

26.根据权利要求24所述的非暂时性计算机可读媒体，其进一步包括以预览模式操作成像装置。

27.根据权利要求24所述的非暂时性计算机可读媒体，其进一步包括使用人脸检测算法或对象跟踪算法中的一或多者来确定场景内的感兴趣区以及基于每个感兴趣区的像素面积而将所述感兴趣区分类为前景或背景感兴趣区。

28.根据权利要求27所述的非暂时性计算机可读媒体，其进一步包括在前景感兴趣区的所述像素面积小于所述成像传感器的总视野的用户所指定百分比的情况下增加分辨率设置。

29.根据权利要求25所述的非暂时性计算机可读媒体，其进一步包括通过使用快速傅立叶变换或滑动窗口针对边缘扫描所述场景来识别所述场景中的最大高频内容量以及基于所述场景内的所述高频内容量而增加分辨率设置。

30.根据权利要求26所述的非暂时性计算机可读媒体，其中所述成像装置经配置以作为移动装置的相机应用程序的一部分操作。