CN103379284A - 用于在突发模式中对静态图像进行高质量处理的方法和设备 - Google Patents

Abstract

本发明是用于在突发模式中对静态图像进行高质量处理的方法和设备。本发明公开提供了以两种不同质量等级处理由突发模式中的图像传感器捕捉的数据。在缓冲存储器中存储以较高质量等级处理的数据，直到执行了该较高质量处理。

Description

用于在突发模式中对静态图像进行高质量处理的方法和设备

技术领域

本公开涉及数字摄相机，并且更具体地涉及用于在突发模式中对静态图像进行高质量处理的方法和设备。

背景技术

数字摄相机(包括内置于智能手机以及其他多功能电子设备中的数字摄相机)常具有连续捕捉图像序列的突发模式。在突发模式中，捕捉图像的速率通常比对数据进行高质量处理所需的时间更快。因此，很多数字摄相机具有突发管道或路径，在突发模式中，将来自图像传感器的数据导向到该突发管道或路径。然而，在突发管道中的处理通常比当捕捉单个静态照片时进行的处理的质量低。

附图说明

图1是示出了适合于执行本公开的示例实施例的电子设备的方框图。

图2是示出了图1的电子设备的图像捕捉部件的方框图。

图3是示出了根据本公开的一个示例实施例的图像捕捉部件的方框图。

图4是针对根据本公开的一个示例实施例的突发模式中静态图像的高质量处理的方法的流程图。

图5是示出了根据本公开的一个示例实施例的图像捕捉部件中的数据流程的示意图。

图6是示出了根据本公开的一个示例实施例的图像部件中的数据流程的示意图。

图7是示出了根据本公开的一个示例实施例的图像部件中的数据流程的示意图。

具体实施方式

现在将参考示出本公开的示例实施例的附图。为了叙述的简单和清楚，可以在附图中重复附图标记以指示对应的或类似的元件。阐述很多细节以提供对本文描述的示例实施例的理解。可以实现示例实施例，而不需要某些这些细节。在其他实例中，没有详细描述周知的方法、过程和组件，以免使描述的示例实施例不清楚。说明书不被认为是受限于本文描述的实施例的范围。

对本文提到的方向或取向的任何引用是为了简洁，而不意在是限制性的，除非本文明确说明。任何相对于图形用户界面(GUI)的方向性指代是与GUI的屏幕取向而非主机电子设备上的固定点或参考相关。为了简洁，本文使用的术语“用户界面”常指代GUI。为了本公开的目的，术语设备取向和设备位置被看作是等同的。

本公开提供了突发模式中的高质量静态图像处理。同时向分离的路径或管道发送由在突发模式中操作的图像传感器捕捉的数据。一个管道是突发管道，其中，以第一质量等级处理数据。第二管道是用于在更高质量等级处理。

根据本公开第一方案的第一示例实施例，提供了在突发模式下操作的图像处理设备上处理静态图像的方法，所述方法包括：以第一质量处理由在突发模式中操作的图像传感器提供的数据，以产生第一质量处理数据；在以第一质量处理的同时，将数据存储到缓冲存储器中；以及，以第二质量处理在所述缓冲存储器中存储的所述数据，以产生第二质量处理数据，所述第二质量处理数据是以比所述第一质量处理数据更高的质量处理的。

根据本公开第一方案的第二示例实施例，提供了处理由在突发模式中操作的图像传感器提供的数据的方法，所述方法包括：以第一质量处理由图像传感器提供的数据，以产生第一质量处理数据；对所述第一质量处理数据进行编码，以产生若干第一质量静态图像；将由图像传感器提供的数据或所述第一质量处理数据存储到缓冲存储器中；以及，以第二质量处理在所述缓冲存储器中存储的所述数据，以产生第二质量处理数据，所述第二质量处理数据是以比所述第一质量处理数据更高的质量处理的。

根据本公开的另一方案，提供了图像捕捉部件，包括：图像传感器，能够在突发模式中操作；图像编码器，用于将数据编码为静态图像；缓冲存储器；以及，与所述图像传感器、所述图像编码器和所述缓冲存储器耦合的图像处理器，被配置为执行本文阐述的方法。

根据本公开的进一步方案，提供了图像处理设备，包括：图像传感器，能够在突发模式中操作；图像编码器，用于将数据编码为静态图像；缓冲存储器；以及，与所述图像传感器、所述图像编码器和所述缓冲存储器耦合的处理器，被配置为执行本文阐述的方法。

根据本公开的进一步方案，提供了具有计算机可读指令存储在其上的计算机可读介质，当执行所述计算机可读指令时，使处理器执行本文阐述的方法。

首先参考图1，图1示出了可以应用本公开中描述的示例实施例的电子设备100。下文描述的电子设备100具有无线通信能力；然而，可以想到，本公开的教导可以应用于不具有无线通信能力的设备。电子设备100的示例包括(但不限于)移动电话、智能电话或超级电话、平板计算机、笔记本计算机(取决于设备能力也被称为膝上型计算机、上网本计算机或超级本计算机)、无线整理器、个人数字助理(PDA)、电子游戏设备以及数字摄相机(能够捕捉静态图像和视频图像)。

电子设备100包括封装电子设备100的电子组件的坚硬的外壳(未示出)。电子设备100的电子组件被安装在印刷电路板(未示出)上。电子设备100包括控制器，该控制器包括控制电子设备100的整体操作的至少一个处理器102(例如，微处理器)。通过通信子系统104执行包括数据通信和语音通信的通信功能。由解码器106解压并解密由电子设备100接收的数据。通信子系统104从无线网络101接收消息，并向无线网络101发送消息。无线网络101可以是任意合适类型的无线网络。

处理器102与其他组件交互，例如，一个或更多个输入设备105、随机存取存储器(RAM)108、只读存储器(ROM)110、显示器112(例如，彩色液晶显示器(LCD))、持久(非易失性)存储器120(可以是闪速可擦写可编程只读存储(EPROM)存储器(“闪存”)或任意其他合适形式的存储器)、图像捕捉部件200、运动传感器180(使处理器102能够在任意合适的时间(例如，当捕捉图像时)确定电子设备100是否在运动并确定任意感测运动的性质)、取向传感器182(使处理器102能够在任意合适的时间(例如，当捕捉图像时)确定电子设备100指向的方向)、全球定位系统(GPS)设备184(使处理器102能够在任意合适的时间(例如，当捕捉图像时)确定电子设备100的GPS坐标(即，位置))、辅助输入/输出(I/O)子系统150、数据端口152(例如，串行数据端口(例如，通用串行总线(USB)数据端口))、扬声器156、麦克风158、短距离通信子系统162以及其他设备子系统(概括地表示为164)。电子设备100的组件经由在各种组件之间提供通信路径的通信总线(未示出)耦合。

显示器112一般包括可以显示信息的显示区域和在显示区域外围延伸的非显示区域。非显示区域中不显示信息。可以使用非显示区域来在显示区域的边缘上容纳例如电子迹线或电连接、粘合剂或其他密封剂和/或保护涂料。

显示器112可以被提供为提供输入设备105的触敏显示器的一部分。与触敏覆盖物(未示出)一起可操作地耦合至电子控制器(未示出)的显示器112包括触敏显示器。触敏显示器一般是包括电容性触敏覆层的电容性触敏显示器，但也可以是任意其他合适的触敏显示器(例如，如本领域公知的电阻性、红外、声表面波(SAW)触敏显示器、张力测量计、光学成像、色散信号技术、声学脉冲识别等)。触敏显示器的覆层可以是堆叠的多层部件，可以包括例如基板、接地屏蔽层、阻挡层、由基底或其他阻挡分离的一个或更多个电容性触摸传感器层以及覆盖层。电容性触敏层可以是任意合适的材料(例如，形成有图案的氧化铟锡(ITO))。

通过输入设备105执行与GUI的用户交互。经由处理器102在显示器112上呈现并显示信息(例如，文本、字符、符号、图像、图标和其他项目)。为了为GUI确定屏幕取向，处理器102可以与用于检测重力或重力反作用力的取向传感器交互，以便确定例如电子设备100的取向。

输入设备105可以包括键盘、控制按钮(例如，电压开关(开/关)按钮(未示出)、用于启动摄像模式的摄像机按钮(未示出)、用于在摄像模式中能够实现图像捕捉序列的捕捉按钮(未示出)、用于在摄像模式中能够实现变焦设置的选择的一个或更多个变焦按钮(未示出))以及浏览存储的数据(例如在显示器112上显示的数字图像、菜单选项等)的导航设备(未示出)。当显示器112被提供为触敏显示器的一部分时，取代使用物理接口组件，或除了物理接口组件之外，可以由在显示器112上显示的屏幕上用户界面要素来提供捕捉按钮、变焦按钮和其他摄像机控制。取决于实施例，取代提供触敏显示器，或除了触敏显示器之外，可以提供键盘。控制按钮中的至少一些可以是多功能按钮，而不是专用按钮。

电子设备100也包括用于接收可移除存储卡132(包括，持久存储器(例如，闪存))的存储卡接口130。可移除存储卡132可以插入存储卡接口130中或与存储卡接口130耦合用于由处理器102存储和读取数据，该数据包括(但不限于)由图像捕捉部件200捕捉的静态图像以及(可选地)视频图像。其他类型的用户数据也可以存储在可移除存储卡132上。除可移除存储卡132之外，或取代使用可移除存储卡132，可以使用其他类型的可移除数字图像存储介质(例如，磁硬盘、磁带或光盘)。

处理器102在存储的程序的控制下操作，并执行在存储器(例如，在持久存储器120)中存储的软件模块175。如图1所示，软件模块175包括操作系统软件177和软件应用179。软件应用179包括摄像机应用181和照片阅览器应用183。摄像机应用181包含以下逻辑：操作图像捕捉部件200并从图像捕捉部件200捕捉静态图像以及(可选地)视频图像，并将静态图像和视频图像存储在持久存储器120中。照片阅览器应用183包含以下逻辑：在显示器112上显示来自持久存储器120的数据(即，静态图像以及(可选地)视频图像)以及来自图像捕捉部件200的数据。持久数据185(例如，用户数据)也可以存储在持久存储器120上。持久数据185可以包括：在电子设备100中存储的数字媒体文件(例如，由图像捕捉部件200捕捉的静态图像和/或视频图像)；或传送到、下载到或存储到持久存储器120上的其他静态图像和/或视频图像。

软件模块175或其部分可以被临时地装载到易失性存储器(例如RAM108)中。RAM108可用于存储运行时数据变量和其他类型的数据或信息。尽管针对各种类型的存储器描述了特定功能，这仅是一个示例，并且也可以使用向各种类型的存储器进行不同功能分配。

在捕捉后，将由图像捕捉部件200捕捉的静态图像以及(可选地)视频图像存储在持久存储器中。持久存储器可以是内部持久存储器120、可移除存储卡132或远程持久存储之一或任意组合。远程持久存储可以是基于云的资源(例如远程内容服务器)，基于云的资源可以由无线网络101或(可能地)经由到主机计算机的有线(例如，经由数据端口152)或短距离无线连接(例如，经由短距离通信子系统162)来访问，其中，该主机计算机具有对基于云资源的有线访问。存储捕捉到的静态图像和(可选地)视频图像的位置一般是事先或在捕捉时由用户设置的可配置设置。

摄像机应用181和/或照片阅览器应用183可以通过无线网络101或(可能地)经由与主机计算机的有线或短距离无线连接，来访问远程持久存储和(可选地)基于云的应用，其中，该主机计算机具有对基于云资源的有线访问。基于云的存储或其他远程持久存储的使用允许从能访问因特网的几乎任意计算机或便携式电子设备，对由图像捕捉部件200捕捉的静态图像以及(可选地)视频图像的访问。

电子设备100也包括电池138作为电源，电池138一般是可以例如通过与电池接口(例如，串行数据端口152)耦合的充电电路进行充电的一个或更多个可充电池。电池138向电子设备100中的至少某些电路供电，并且电池接口136提供针对电池138的机械和电连接。电池接口136与整流器(未示出)耦合，整流器向电子设备100的电路提供电源V+。

通过通信子系统104处理接收信号(例如文本消息、电子邮件消息或下载的网页)并将它们输入处理器102。处理器102处理接收的信号，以输出到显示器112和/或到辅助I/O子系统150。订户可以产生数据项目(例如，电子邮件消息)，并可以通过例如通信子系统104在无线网络101上发送该数据项目。

运动传感器180可以包括加速计(例如，三轴加速计)或其他合适的运动传感器。取向传感器182可以包括加速计(例如，三轴加速计)、电子指南针、陀螺仪或其组合。取代使用加速计、电子指南针、陀螺仪，或除了使用加速计、电子指南针、陀螺仪之外，可以使用其他合适的取向传感器。可以在例如集成组件中合并或共享运动传感器180和取向传感器182或其部分。处理器102或三轴加速计的控制器(未示出)可以将加速测量转换为设备取向。

电子设备100可以经由串行数据端口152或通过合适的相互连接(例如，USB连接、Firewire^TM连接、蓝牙^TM连接等)进行通信的短距离通信子系统162与主机个人计算机(未示出)相连。

现在参考图2，将更详细地描述电子设备100的图像捕捉部件200的示例实施例。图像捕捉部件200包括执行下文中描述的各种图像处理功能的图像处理器202。图像处理器202一般是可编程图像处理器，但也可以是例如硬接线专用集成电路(IC)处理器、通用微处理器或硬接线专用IC处理器和可编程处理器的组合。当图像捕捉部件200是多功能电子设备(例如，移动电话、智能电话或超级电话)的一部分时，可以由主机电子设备100的主处理器102执行图像捕捉部件200的至少某些功能。可以想到，可以由主处理器102执行由图像处理器202执行的所有功能，在这种情况下，可以省略图像处理器202。此外，图像捕捉部件200能够访问主机电子设备100的各种组件，并且可以从主机电子设备100的各种组件(例如，输入设备105、运动传感器180、取向传感器182、GPS184、RAM108、持久存储器120等)接收输入，并向主机电子设备100的各种组件发送输出。

在一些实施例中，图像捕捉部件200也包括由调焦器206(例如，变焦和聚焦马达)控制的变焦镜头204，调焦器206调整变焦镜头204的焦长和焦距。变焦镜头204具有可变孔径，可变孔径的大小由f-数(有时称为焦距比、f-比、f-值或相对孔径)表示，f-数是变焦镜头204的孔径直径的测度。f-数是焦长除以“有效”孔径直径。f-数是作为镜头“速率”的量化测度的无量纲的数。

变焦镜头204向图像传感器208提供图像。图像传感器208可以具有若干纵横比(例如，4∶3以及16∶9的图像纵横比)以及若干图像分辨率。在一些实施例中，图像传感器208是电荷耦合器件(CCD)传感器；然而，也可以使用互补金属氧化物半导体(CMOS)传感器或其他合适的图像传感器。使用变焦镜头204中的可调节孔径和快门部件(未示出)来控制孔径大小和图像传感器208的曝光时间。在其他实施例中，可以将变焦镜头204替换为定焦长镜头(也被称为“主”镜头)，在这种情况下，调焦器仅调整镜头的焦距。可以由图像捕捉部件200的图像处理器202或处理器102执行的数字图像处理来提供数字变焦(而不是变焦镜头204提供的光学变焦)。在其他实施例中，受益于电子快门，可以省略快门部件。

图像处理器202通过向图像传感器208提供各种控制信号来控制图像传感器208。图像处理器202也控制调焦器206和用于发光来照亮变焦镜头204正在捕捉的场景的闪光灯224。输入设备105提供用户控制，用户控制可以控制图像捕捉部件200的操作。在缓冲存储器212(例如，动态随机存取存储器(DRAM)缓冲存储器)中临时存储图像传感器208输出的捕捉到的图像信号A。

一般响应于捕捉按钮的激活，图像处理器202产生聚焦信号，驱动调焦器206(例如，变焦和聚焦马达)调整图像的聚焦，来提供针对捕捉到的图像信号的图像传感器输出。响应于捕捉按钮的激活，图像处理器202产生聚焦信号，驱动调焦器206(例如，变焦和聚焦马达)调整图像的聚焦，来提供针对到捕捉的图像信号的图像传感器输出。电子设备100一般提供被动自动聚焦系统。在被动自动聚焦系统中，向图像处理器102提供捕捉到的图像信号A，图像处理器102对捕捉到的图像信号A执行自动聚焦计算。作为自动聚焦计算的输出的结果，根据需要向聚焦适配器206发送聚焦信号以调整变焦镜头204的焦距。一般使用对比度检测法或相位检测法来执行自动聚焦计算，这依赖于移动变焦镜头204以在焦距上作出微小调整，直到获得最大(或最优)对比度。自动聚焦计算假定与最大清晰度对应的最大(或最优)对比度。自动聚焦计算的性质在本公开的范围之外，这里将不再更详细地进行描述。本领域周知并且技术人员将很容易地知道图像处理器202适用的自动聚焦方法和计算。

当图像捕捉部件200处于活动或等待捕捉状态(而不是非活动状态，例如当显示全屏菜单时)中时，图像处理器202可以连续地产生聚焦信号，从而提供连续的自动聚焦，使得正在向缓冲存储器212中存储的图像是聚焦图像，而不是如前所述的响应于上述捕捉按钮的激活执行自动聚焦操作。

在其他实施例中，可以使用主动自动聚焦系统，而不是上述被动自动聚焦系统。主动自动聚焦系统可以包括红外(IR)发射机和IR传感器，IR传感器使用反射IR波返回IR传感器的时间和/或反射IR波的强度来确定从IR发射机到焦点上的物体的距离。调焦器206根据确定的距离移动变焦镜头204。

也可以向显示器112输出捕捉到的图像信号A，以提供预览图像。捕捉到的图像信号A可以用于提供实时或“实况”的预览，其中，为了图形处理效率，在显示器112或(备选地)专用电子取景器设备上显示利用图像传感器208捕捉的图像的实时图像(或图像的近似)，作为捕捉图像的缩略图(例如，减少大小/分辨率版本)。

在单图像捕捉模式中，由图像处理器202随后处理由缓冲存储器212提供的捕捉到的图像信号D，以产生处理后的数字图像文件(可以包含静态数字图像或视频图像)。

在一个示例实施例中，当图像传感器208处于突发(或连续捕捉)模式中时，向图像处理器202输出图像文件用于基本处理和编码为编码后的数字图像。从图像传感器到在突发模式中编码的图像处理器的此路径常被称为是突发管道。以赶得上图像传感器的图像捕捉速率的足够快的速率(在一些情况下在15fps和30fps之间)进行处理。在一些实施例中，处理较慢，而在其他实施例中，处理较快。该速率取决于整个系统的能力。在突发管道中的处理通常比上述处理的质量低，上述处理是在单图像捕捉模式中对缓冲存储器212存储图像信号之后执行的。在突发模式中产生的图像与在单图像捕捉模式中产生的图像有相同的分辨率。可以执行的编码的非限制性示例是JPEG(联合图象专家组)、JPEG2000、TIFF(带标影像档案格式)以及Exif(可交换图像文件格式)编码。然后可以存储编码后的数字图像，用于产生全景图像、用在追溯突发(retro-active burst)应用(例如，时间区间(temporal bracketing))中、用于图像稳定或使用来自突发模式的图像的任意其他应用。与数字图像文件的编码同时，向缓冲存储器212发送数字图像文件或(在一些实施例中的)来自图像传感器208的原始数据。然后，使用在缓冲存储器212中存储的数据，执行较高质量处理，例如(但不限于)，在发送要编码的数据之前的高级噪声滤波。

缓冲存储器212也可用于在常被称为“零”或“负”快门延迟模式中消除快门延迟。在缓冲存储器212中以捕捉图像的时间的时间先后顺序存储从图像传感器208获取的图像序列。一般与捕捉图像的日期和/或时间相关联地存储图像，以帮助随后的访问和/或检索，例如，用于基于时间先后顺序访问和检索图像。当在零快门延迟模式中时，对图像进行连续地采样，并将其存储到缓冲存储器212中直到设置的上限。缓冲存储器212的限制一般是图像的数目(例如，1、2、3、4、5、10、25或其他合适的数目)，该数目取决于图像传感器208的帧速率(图像传感器208每秒钟捕捉的帧的数目(fps))以及其他因素。缓冲存储器212的限制可以是另一合适的限制(例如，图像的总大小或捕捉的持续时间(例如，在最近n秒内拍摄的所有图像))。在一些实施例中，缓冲存储器212的上限是可配置的。设置上限使得：在缓冲存储器212中存储的捕捉图像和实时预览图像总体上是同时的。因此，缓冲存储器212的上限很大程度上取决于帧速率。

零快门延迟模式和突发模式不同在于：图像仅被临时地存储在缓冲存储器212中，并且采样是连续的，而不是取决于捕捉按钮的激活。因为捕捉按钮是将捕捉图像的存储从缓冲存储器212中的临时存储改变为存储器120或可移除存储卡132中的持久存储的触发条件，所以在零快门延迟模式中，不能激活捕捉按钮。

在显示器112上显示的实时图像与缓冲存储器212中存储的图像同步，使得当激活捕捉按钮时，缓冲存储器212选择缓冲存储器212中与当捕捉按钮激活时在显示器112上显示的实时图像相对应的图像，用于图像处理器202的进一步处理，并将该图像存储到持久存储器(例如，持久存储器120或可移除存储卡132)中。以此方式，向用户显示的图像对应于图像捕捉部件200捕捉的图像，从而不提供快门延迟。

图像处理器202可以执行各种其他图像处理功能(包括颜色插值以及颜色和色调矫正)，以产生所呈现的图像数据(例如，标准红绿蓝(sRGB)图像数据)。然后，在可移除存储卡132的存储器或持久存储器120中存储所呈现的图像数据。在一些实施例中，可以在存储之前对描绘的图像数据进行压缩，例如，可以对所呈现的图像数据进行JPEG压缩并存储为JPEG图像文件，其可以具有可交换图像文件(Exif)格式或优选支持图像元数据(例如捕捉图像的日期/时间、捕捉图像的变焦镜头204的f-数、捕捉图像时GPS位置和指向方向以及可能的其他摄相机设置中的一个或更多个)的其他合适格式。

一般由固件存储器(未示出)中存储的固件控制由图像处理器202执行的处理，固件存储器可以是闪存或任意其他合适形式的存储器。图像处理器202使用用于在处理期间存储中间结果的RAM存储器(例如，主机电子设备的RAM108或可能分离的专用RAM)处理来自缓冲存储器212的数字输入图像。

现在参考图3，将描述用在图像处理设备(例如，电子设备100)中的图像捕捉部件200的示例实施例。本实施例的图像捕捉部件包括图像传感器208、图像编码器270、缓冲存储器212以及图像处理器202。图像传感器208能够在突发模式下操作。图像编码器270用于将数据编码为静态图像。图像编码器的非限制性示例是JPEG编码器和TIFF编码器。图像处理器202与图像传感器208、图像编码器270和缓冲存储器212耦合，并被配置为：以第一质量对由在突发模式中操作的图像传感器208提供的数据进行处理，以产生第一质量处理数据；在以第一质量进行处理的同时，将数据存储到缓冲存储器212；以及以第二质量对缓冲存储器212中存储的数据进行处理，以产生第二质量处理数据，该第二质量处理数据是以比第一质量处理数据更高的质量处理的。第一质量处理可以包括例如基本或粗略(on-the-fly)处理，而第二质量处理可以包括例如高级噪声滤波等其他“更高”质量处理。

在某些实施例中，图像编码器270是图像处理器202的一部分。在某些实施例中，图像处理器202是图像信号处理器(例如(但不限于)，ST微电子-STV0987；MtekVision-MV9319；富士通-MBG041M-7MO；TI OMAP4430/60/70；或高通MSM8655/8660/8960)。

在某些实施例中，缓冲存储器212是循环缓冲区，在该循环缓冲区中，一旦缓冲存储器212达到其容量上限，最早存储的数据被最晚存储的数据覆盖。

在某些实施例中，图像传感器208可以在突发模式中以每秒15帧和每秒30帧之间的速率捕捉数据。

尽管电子设备100的组件被示为图1、2和3中分离的块，在实际处理元件、电路等中，可以合并各种组件的功能。此外，当在实际处理元件、电路等中实现时，图1、2和3的一些功能块可以分离为一个或更多个子块。

图4是根据本公开的一个示例实施例的用于在突发模式中操作的图像处理设备上处理静态图像的方法400的流程图。可以至少部分地由固件或软件(例如由处理器102和/或图像处理器202执行的摄像机应用181)实现方法400。用于实现这种方法400的软件的编码是在本公开提供的本领域中普通技术人员的范围中的。方法400可以包含与示出的和/或描述的方法相比附加的或更少的处理，并可以以不同顺序执行方法400。由用于执行方法400的处理器102和/或图像处理器202中至少一个执行的计算机可读代码可以存储在计算机可读介质(例如，持久存储器120)中。

方法400从步骤410开始，以第一质量处理250由在突发模式中操作的图像传感器208提供的数据，以产生第一质量处理数据。下一步骤420是：与以第一质量处理的同时，向缓冲存储器212存储数据。下一步骤430是：以第二质量处理260处理在缓冲存储器212中存储的数据，该第二质量处理数据是比第一质量处理数据更高质量处理的。

在某些实施例中，以第一质量处理由在突发模式中操作的图像传感器208提供的数据中的至少一些发生在向缓冲存储器212发送数据之前。因此，向缓冲存储器212发送的数据是第一质量处理数据。在其他实施例中，向缓冲存储器212发送来自图像传感器的原始数据。

在某些实施例中，方法还包括：对第一质量处理数据进行编码以产生至少一个静态图像。编码可以是例如JPEG编码。在其他示例中，编码是TIFF编码。编码后的静态图像可以用于图像处理功能(例如，与突发模式相关的图像处理功能，例如(但不限于)全景图像、追溯突发、图像稳定或其组合)。然后，可以在显示器112上显示图像处理功能的结果。编码户的静态图像也可以存储在存储介质(例如，上文中参考图1描述的ROM 110、持久存储器120以及可移除存储卡132)中。编码后的静态图像一般是利用元数据(例如，捕捉图像的日期/时间中的一个或更多个)进行编码的。

与突发模式相关的图像处理功能的一个示例是对突发模式中拍摄的图像能够实现来回翻看的追溯突发功能。作为至少一些示例中翻动的一部分，选择编码后的静态图像，并且响应于接收到的选择前一图像或下一图像的输入(一般以从初始图像(例如，最初选择的图像)开始的时间先后顺序)，在显示器112上显示所选择的编码后的静态图像或其近似。输入可以是例如方向性输入(例如，对于前一图像，是在触敏显示器上向左拖拽或划动(从右向左移动)，或者，对于下一图像，是在触敏显示器上向右拖拽或划动(从左向右移动))。在某些实施例中，大约20帧被存储在存储器(例如缓冲存储器212或可移除存储卡132)中。取决于存储器和可用处理速率，可以存储任意数目的帧。

在追溯突发的一些实施例中，响应于输入(例如，在触敏显示器上的轻敲或触摸)，可以选择编码后的静态图像的一部分，并且选择并在显示器112上显示前一图像或下一图像中的对应部分而不是整个图像。可以在对话框、弹出框、提示框或用于提高可视效果的其他可视提示中显示前一图像或下一图像中的一部分。其他输入(例如，在前一图像或下一图像的显示部分的位置上触摸或轻敲触敏显示器)可以将前一图像或下一图像的显示部分合并到初始图像的此部分中，以产生合成图像。本领域技术人员将理解，初始图像的部分和前一图像或下一图像的显示部分对应于图像中的相同像素区域。作为合并的一部分，前一图像或下一图像的显示部分替换了初始图像的对应部分。对于初始图像的若干部分，可以重复此操作。合并到初始图像中的部分的图像可以来自相同或不同图像。可以根据定义的准则自动地选择在追溯突发中选择的初始图像的部分。在某些示例中，定义的准侧是使用本领域已知的脸部识别技术在图像中检测的脸部。

在实施例中，方法还包括对第二质量图像进行编码以产生至少一个静态图像。编码的示例包括(但不限于)JPEG和TIFF编码。静态图像可以存储在存储设备(例如(但不限于)，上文中参考图1描述的ROM110、持久存储器120以及可移除存储卡132)中。

在某些实施例中，第二质量处理包括：传递数据通过一个或更多个噪声滤波器。噪声滤波器的非限制性示例包括时间、颜色和/或拜耳型噪声滤波器。在某些实施例中，噪声滤波器执行比可以以第一质量处理执行的任何噪声滤波更高级的过滤。在某些实施例中，执行高级颜色深浅(color shading)补偿。在某些实施例中，执行高级的边缘和/或细节增强。高级处理的类型和程度取决于所使用的图像处理器208。

在某些实施例中，响应于请求捕捉高质量静态图像的输入，进行第二质量处理。例如，电子设备100可以保持突发模式“开启”，并仅当按下捕捉按钮时执行更高质量处理。在另一示例中，可以以一种方式激活突发模式，并可以以另一方式激活捕捉高质量静态图像。例如，将捕捉按钮按下或保持大于或等于阈值持续时间的持续时间可以激活突发模式，而简单地按下捕捉按钮(例如，按下比阈值持续时间短的持续时间)可以激活高质量静态图像的捕捉。

在某些实施例中，方法400包括：图像处理器以第三质量处理数据以产生预览图像并在显示器上显示预览图像。第三质量处理一般与第一质量处理和第二质量处理不同。在这种情况下，第三质量处理一般比第一质量处理和第二质量处理低。预览图像可以具有比由第一质量处理和第二质量处理产生的图像更小的大小。预览图像可以具有比由第一质量处理和第二质量处理产生的图像更低的分辨率(如上所述，第一质量处理和第二质量处理产生的图像具有相同的分辨率)。

现在参考图5，将描述：当以预览显示操作在突发模式中操作时，图像捕捉部件200的一个实施例中的数据的路径。向图像处理器202输出来自图像传感器208的原始数据505。图像处理器202中的基本处理250对原始数据505执行第一质量处理(或粗略处理)，以产生向操作系统177或摄像机应用181发送的要在显示器112上显示的(例如，预览大小的)基本处理数据510。也从基本处理250向编码器270和缓冲存储器212输出(完全大小的)基本处理数据520。编码器270对数据520进行编码，并向操作系统177或摄像机应用181输出编码后的突发图像530待用。在图5中示出了图像处理器202的第二质量处理功能(也被称为较慢的高质量处理)260，但不使用第二质量处理功能260除非接收到请求高质量静态图像的输入。现在将参考图6描述当在突发模式中操作时，对于高质量图像的这种请求的处理。

图6与图5相同，除了缓冲存储器212向第二质量处理260输出基本处理数据520，在第二质量处理260中执行较慢的较高质量处理。向编码器270输出(完全大小的)高质量数据，编码器270对高质量数据进行编码并向存储280输出高质量图像620。

如上所述，在某些实施例中，图像传感器208向缓冲存储器212发送原始数据505。在图7中示出本实施例，其与图6的不同在于：示出原始数据505从图像传感器208向基本处理250和缓冲存储器212传递；不向缓冲存储器212发送(完全大小的)基本处理数据520；以及，从缓冲存储器向较慢的高质量处理260输出的数据是原始数据505。

本文中描述的流程图和示意图中的步骤和/或操作仅是为了示例的目的。在不脱离本公开的教导的前提下，可能存在对这些步骤和/或操作的很多变形。例如，可以以不同顺序执行步骤，或者可以添加、删除或修改步骤。

尽管描述了与方法(至少部分)相关的本公开，本领域普通技术人员将理解：本公开也针对用于通过硬件组件、软件或两者组合的方式或以任何其它方式，执行描述的方法的至少一些方案和特征的各种组件。此外，本公开也针对预记录存储设备或包括存储在其上的用于执行本文描述方法的程序指令的其他类似计算机可读介质。

在不脱离权利要求的主题的前提下，可以以其他特定形式实现本公开。描述的示例实施例在各方面被看作仅是示意性的，而不是限制性的。本公开意在覆盖并包含技术中所有合适的改变。因此，本公开的范围是由所附权利要求所描述而不是由上文所描述。

Claims (18)

1.一种处理由图像传感器提供的数据的方法，所述方法包括：

以第一质量处理由按照突发模式操作的所述图像传感器提供的数据，以产生第一质量处理数据；

对所述第一质量处理数据进行编码，以产生若干第一质量静态图像；

将由所述图像传感器提供的所述数据或所述第一质量处理数据存储到缓冲存储器中；以及

以第二质量处理在所述缓冲存储器中存储的所述数据，以产生第二质量处理数据，所述第二质量处理数据是以比所述第一质量处理数据高的质量处理的。

2.根据权利要求1所述的方法，其中，所述第一质量处理数据被存储在所述缓冲存储器中，其中，以所述第二质量处理所述数据包括：处理在所述缓冲存储器中存储的所述第一质量处理数据。

3.根据权利要求1或2所述的方法，还包括：使用所述第一质量静态图像执行图像处理功能，并在显示器上显示所述图像处理功能的结果。

4.根据权利要求3所述的方法，其中，所述图像处理功能是产生全景图像、图像稳定或追溯突发功能之一。

5.根据权利要求4所述的方法，其中，所述追溯突发模式能够实现来回翻看在所述突发模式中拍摄的图像。

6.根据权利要求1至5中任意一项所述的方法，还包括：对所述第二质量处理数据进行编码，以产生至少一个第二质量静态图像。

7.根据权利要求6所述的方法，其中，所述第一质量静态图像和所述至少一个第二质量静态图像具有相同的分辨率。

8.根据权利要求7所述的方法，还包括：将所述至少一个第二质量静态图像存储到存储设备中。

9.根据权利要求1至8中任意一项所述的方法，其中，以所述第二质量处理所述数据包括：噪声滤波、颜色深浅补偿、边缘增强或细节增强中的任意一个或更多个。

10.根据权利要求1至9中任意一项所述的方法，其中，以所述第二质量处理在所述缓冲存储器中存储的所述数据是响应于请求捕捉高质量静态图像的输入而发生的。

11.根据权利要求1至10中任意一项所述的方法，还包括：

以第三质量处理所述数据，以产生预览图像；

在显示器上显示所述预览图像。

12.根据权利要求11所述的方法，其中，所述预览图像比所述第一质量静态图像小，所述预览图像具有比所述第一质量静态图像低的分辨率，或者所述预览图像比所述第一质量静态图像小且具有比所述第一质量静态图像低的分辨率。

13.一种在电子设备中使用的图像捕捉部件，包括：

图像传感器，能够按照突发模式操作；

图像编码器，用于将数据编码为静态图像；

缓冲存储器；以及

与所述图像传感器、所述图像编码器和所述缓冲存储器相连的图像处理器，被配置为执行权利要求1至12中任意一项所述的方法。

14.根据权利要求13所述的图像捕捉部件，还包括显示器，其中，所述图像处理器被配置为：以第三质量处理由所述图像传感器提供的所述数据，以产生预览图像，并将所述预览图像显示在所述显示器上。

15.根据权利要求13或14所述的图像捕捉部件，其中，所述图像编码器是所述图像处理器的一部分。

16.根据权利要求13至15中任意一项所述的图像捕捉部件，其中，所述图像编码器是JPEG编码器。

17.根据权利要求13至16中任意一项所述的图像捕捉部件，其中，所述缓冲存储器是循环缓冲区。

18.根据权利要求13至17中任意一项所述的图像捕捉部件，其中，所述图像传感器按照突发模式以每秒15帧和每秒30帧之间的速率捕捉数据。

Images