CN104521227A - 图像处理方法和设备 - Google Patents

图像处理方法和设备 Download PDF

Info

Publication number
CN104521227A
CN104521227A CN201380041321.XA CN201380041321A CN104521227A CN 104521227 A CN104521227 A CN 104521227A CN 201380041321 A CN201380041321 A CN 201380041321A CN 104521227 A CN104521227 A CN 104521227A
Authority
CN
China
Prior art keywords
image
preview
display
full resolution
shooting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380041321.XA
Other languages
English (en)
Other versions
CN104521227B (zh
Inventor
尹泳权
曹沅亨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN104521227A publication Critical patent/CN104521227A/zh
Application granted granted Critical
Publication of CN104521227B publication Critical patent/CN104521227B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

提供了一种图像处理方法和设备。当拍摄各种拍摄选项(效果)被设置的照片时，所述图像处理方法和设备使图像被检测和捕捉之前的延迟时间最小化。所述图像处理方法包括：在拍摄模式下显示预览；在显示预览的同时接收基于拍摄选项的拍摄命令；作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时并行操作进入预览模式以对显示图像的预览进行显示。

Description

图像处理方法和设备
技术领域
本发明涉及一种用于在包括相机模块的装置中处理图像的图像处理方法及其设备。更具体地讲，本发明的某些方面涉及一种使图像被检测和捕捉之前的延迟时间最小化的用于在相机装置或便携式装置中处理图像的图像处理方法和设备。
背景技术
近些年，相机装置或包括相机模块的便携式终端(以下称为“便携式装置”)变得能够更好地提供高质量图像和/或各种方便用户的功能。具有相机模块所提供的拍摄功能的便携式装置可通过图像传感器(或相机传感器)检测具有全高清(HD)分辨率或更高分辨率的图像。
另外，在预览模式下，便携式装置显示从相机传感器检测到的图像作为预览图像。如果用户按压快门按钮，则捕捉预览图像。在这种情况下，便携式装置响应于快门按钮输入而检测、捕捉、处理并在存储器中存储从图像传感器获取的图像，并且，存在从图像在存储器中的存储终止到下一可能的拍摄时刻(即，从快门按钮的输入到下一可能的对于另一照片的拍摄时刻)的延迟时间(例如，快门时刻到预览时刻)。由于被摄物的拍摄环境和图像处理能力的影响，会产生延迟时间。
相应地，根据延迟时间，用户必须等待下一次拍摄，直到图像处理终止为止。因此，当用户想要拍摄一系列连续照片时，这种延迟是不方便的，并会抑制在不同的连续时间对被摄物进行捕捉，其中，这种捕捉对于处于运动中的被摄物或其他物体而言是期望的。此外，近期，可通过根据用户设置而设置各种拍摄选项来捕捉被摄物的图像。例如，用户可设置素描效果、阴影效果、扭曲效果、合成效果、动画效果、黑白效果、渐晕效果、用于提高图像质量的组成变化和背景变化、用于执行拍摄的全景拍摄。当针对完整的捕捉图像所设置的拍摄选项是后处理补偿时，可通过处理图像转换来实现根据拍摄选项的图像拍摄。
相应地，当在便携式装置中根据拍摄选项设置进行拍摄时，从由用户进行的快门按钮的输入到下一可能的图像被捕捉的时刻的延迟时间与一般拍摄相比显著增加。相应地，用户必须不方便地等待比平常当在选择了附加的选项的情况下一般地拍摄图像时更长的用于利用某些后处理补偿来捕捉图像的时间段的结束。
发明内容
技术问题
本发明的某些实施例的目的在于至少部分地解决、减轻或消除与现有技术相关的问题和/或缺点中的至少一个。某些实施例旨在提供至少一个下述优点。
本发明部分针对以上问题而做出，并提供这样的一种图像处理方法及其设备：当基于便携式装置的拍摄选项进行拍摄操作时，所述图像处理方法及其设备能够通过快速处理图像转换以使连续图像捕捉之间的延迟时间最小化来进行图像转换和后续拍摄操作的快速输入，而不降低用户便利性。
本发明还提供了这样的一种图像处理方法：所述图像处理方法通过在便携式装置中实现用于使根据拍摄的延迟时间最小化的最优环境，提高了用户便利性和具有拍摄功能的便携式装置的可用性。
技术方案
根据本发明的示例性方面，图像处理方法可包括：在拍摄模式下显示预览；在显示预览的同时接收基于拍摄选项的拍摄命令；作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时进入预览模式以对显示图像的预览进行显示。
可与拍摄模式的终止独立地执行针对具有全分辨率的图像的处理补偿。
另外地或可选地，可提供针对正作为后台处理的图像补偿的进展状态。
所述图像处理方法还可包括：当基于拍摄选项的拍摄命令被接收时，确认浏览模式的预设状态。
本发明的另一方面提供了包括指令的计算机程序，其中，所述指令被布置为：当所述指令被执行时，所述指令实现与上述方面中的任意一个相应的方法。
根据本发明的另一示例性方面，提供了一种记录程序的计算机可读记录介质，其中，所述程序用于通过诸如处理器、微处理器或控制单元的硬件执行所述方法。
根据本发明的另一示例性方面，一种图像处理设备可包括：相机模块，获取具有全分辨率的图像，对所获取的具有全分辨率的图像进行缩放，以通过显示图像缓冲器进行缓存和输出，并通过静止图像缓冲器对具有全分辨率的图像进行缓存和输出；显示单元，用于显示从相机模块输出的显示图像的预览；存储器，存储至少一个程序、以显示图像为基础应用了拍摄选项的效果预览图像、以及以具有全分辨率的图像为基础应用了拍摄选项的图像；控制器，在显示显示图像的预览的同时，执行所述至少一个程序以处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时进入预览模式以对显示图像的预览进行显示。
根据本发明的另一示例性方面，计算机可读记录介质存储程序。当所述程序被加载到诸如用于执行机器可执行代码的处理器或装置的处理器内时，所述装置将通过相机模块获取的图像转换为显示图像和具有全分辨率的图像，以对转换后的显示图像和转换后的具有全分辨率的图像进行缓存，显示缓存的显示图像的预览，当在显示显示图像的预览的同时基于拍摄选项的拍摄命令被接收时，作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时或者至少在重叠的时间期间进入预览模式，以显示基于下一帧的显示图像的预览。
本发明的各种方面和特征在权利要求中被限定。
有益效果
根据上述本发明的图像处理方法和设备的示例性实施例，用于显示预览的预览图像由显示图像而不是具有全分辨率的图像转换而成，允许预览图像被迅速地处理和显示。此外，根据本发明示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
相应地，在本发明示例性实施例中，当用于显示预览图像的图像转换处理或对于具有全分辨率的图像的图像转换处理时，作为从快门按钮的输入到下一可能的拍摄的时间段的延迟时间(例如，拍摄到预览时刻)可大幅缩短。
此外，根据本发明的示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
附图说明
图1是示意性地示出根据本发明示例性实施例的便携式装置的配置的框图；
图2是示意性地示出根据本发明示例性实施例的相机模块的配置的框图；
图3是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图；
图4示出其上显示有预览图像的画面上的用于选择用于设置拍摄选项的预设项目(或图标)的选择事件的输入；
图5示出处于能够在其上显示有便携式装置的预览图像的画面上选择各种拍摄选项的拍摄选项菜单的状态下的画面的示例；
图6示出用户输入用于从通过拍摄选项菜单而提供的各种拍摄选项中选择素描的选择事件(触摸)；
图7示出根据选择事件输入而转换的图6的画面；
图8显示根据浏览模式或快速查看模式的设置状态(激活或未激活)的画面；
图9示出根据本发明示例性实施例的当便携式装置显示新图像作为预览时便携式装置上的画面的示例；
图10是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图；
图11是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的过程期间用于显示效果预览图像的示例性操作的流程图；
图12是示出根据本发明示例性实施例的在便携式装置中基于拍摄选项而拍摄图像过程期间的示例性并行处理操作的流程图。
具体实施方式
以下参照附图在这里详细描述本发明示例性实施例。在附图中，始终使用相同的附图标号来指示相同或相似的部件。可省略对合并于此的公知的功能和结构的详细描述，以避免模糊本领域普通技术人员对于本发明的主题的判断。
本发明实施例提供了一种相机装置或便携式终端(以下称为“便携式装置”)中的图像处理方法及其设备。具体地讲，本发明示例性实施例提供了一种用于在照片拍摄方案下处理图像的方法和设备，其中，所述照片拍摄方案经历通过图像后处理校正(诸如，图像合成或各种过滤器处理)以新形式捕捉的图像。换言之，在本发明的这个示例性实施例中，一种用于处理图像的方法和设备可检测、捕捉、处理并在存储器中存储在各种拍摄选项(或效果)被设置的拍摄执行期间的图像，并使再次能够进行拍摄(换言之，在快门按钮的输入之后，随后能够捕捉(拍摄)另一图像)之前的延迟时间(例如，拍摄时刻到预览时刻)最小化。
在本发明的某些示例性实施例中，拍摄选项可包括诸如例如素描、阴影、扭曲、合成、动画、渐晕、复古、色彩转换和冷光的效果选项，以及诸如用于提高图像质量的组成、能够改变被摄物的背景的背景和能够拍摄宽视角的全景的效果选项。根据本发明的这个示例性实施例，可以以插件形式实现上述拍摄选项。例如，用户可促进各种拍摄选项的开发，并通过选择和下载各种拍摄选项以及在便携式装置中安装所述拍摄选项，在便携式装置中容易地更新各种拍摄选项。
根据本发明的这个示例性实施例，便携式装置处理在驱动相机模块期间(例如，当进入预览模式时)从相机模块获取的针对每一帧的图像，以产生用于预览显示的显示图像和用于捕捉的具有全分辨率的整幅图像(或静止图像)。显示图像的尺寸可小于静止图像的尺寸，或与静止图像的尺寸相同。在这种情况下，便携式装置可针对每一帧从相机模块获取图像，将获取的图像转换为将作为预览显示的显示图像，在显示单元上对显示图像进行显示，并对从相机模块获取的具有全分辨率的图像进行缓存，以将该图像作为静止图像进行存储。另外，在前述状态下，如果捕捉被请求，也就是说，当快门按钮被输入时，便携式装置可从被缓存的帧的图像中选择在当捕捉被请求时(也就是说，当快门按钮被输入时)的时间点处的一帧的图像，并对所选择的帧的图像进行压缩编码和存储。
相应地，本发明的这个示例性实施例可包括用于暂时存储具有全分辨率的图像(或静止图像)的缓冲器，其中，所述暂时存储操作与下列操作独立(并行)：在预览模式下对显示图像进行显示的操作，以及用于处理图像转换的后台的功能(应用)(诸如，具有全分辨率的图像的后处理校正)。
通过上文中的前述布置，在驱动相机模块期间，便携式装置可在缓冲器中对具有全分辨率的图像进行缓存。此外，当因快门按钮的输入而进行的图像捕捉(拍摄)被用户请求时，便携式装置可从通过缓冲器而缓存的帧图像选择捕捉请求时间点的帧图像，并作为后台对所选择的帧图像进行处理。具体地讲，本发明的这个示例性实施例可单独地(并行地)操作用于在拍摄选项被设置的拍摄方案下进行拍摄的拍摄功能(或应用)和用于对图像进行补偿的校正功能(或应用)，作为后台针对具有全分辨率的图像对校正进行处理，并通过拍摄应用直接返回到预览模式以将显示图像的预览作为预览而显示。通过校正应用的图像校正可作为后台功能进行，直到相应的任务被终止为止，即使在拍摄应用已终止之后，所述图像校正也可继续进行。
此外，根据本发明的这个示例性实施例，便携式装置可将针对作为后台进行的图像转换处理的进展度(例如，针对图像转换已进行了多少百分比的进展情况)或针对包括所有堆积任务中的多少任务被处理和剩余多少任务的图像转换的进展情况返回给用户。在这种情况下，当拍摄应用正在进行时，可在拍摄应用的执行画面上提供反馈。如果拍摄应用被终止，则可通过设置在给定的执行画面(例如，空闲画面、画廊画面和其他应用执行画面)的一个区域上的用户界面(UI)或图形UI(GUI)来提供返回。
同时，在下文中，具有全分辨率的图像(或静止图像)表示从相机模块获取的图像，并可表示针对通过图像传感器获取的图像的缩放未被实现的图像。此外，显示图像表示在预览模式下显示在显示单元上的图像，并可表示通过根据预设尺寸(或分辨率)对通过图像传感器获取的图像进行缩放而获得的图像。同时，捕捉图像表示将被作为静止图像而存储的图像，并可表示通过图像传感器获取的具有全分辨率的图像或通过将从图像传感器获取的图像缩放到预设尺寸而获得的显示图像。
此外，在本发明的这个示例性实施例中，图像缩放可表示控制具有全分辨率的图像使其变为预设尺寸(或分辨率)。在本发明示例性实施例中，可通过尺寸调节方案以及相加和平均方案来实现图像缩放。尺寸调节指示通过对图像进行抽取、插值和裁剪来控制图像的尺寸的方案。此外，相加和平均方案指示通过将邻近像素产生为一个像素来控制像素的数量的方案，可在平均方案被执行后执行抽取、插值和裁剪。
在下文中，现在将参照附图来描述根据本发明示例性实施例的便携式装置的配置和操作控制方法。根据本发明示例性实施例的便携式装置的配置不限于下面的内容，而是同样可应用于基于下面的示例性实施例的各种示例性实施例。
图1是示意性地示出根据本发明示意性实施例的便携式装置的配置的框图。
现在参照图1，本示例性实施例中的便携式装置优选地包括射频(RF)通信单元110、用户输入单元120、显示单元130、音频处理器140、存储器150、接口单元160、相机模块170、控制器180和供电单元190。由于图1中示出的构成元件不是必要的，因此可在要求保护的发明的范围内实现本实施例的具有更多或更少的构成元件的便携式装置100。例如，当根据本发明示例性实施例的便携式装置时，在便携式装置不支持单独的通信功能的情况下，可省略RF通信单元110的配置。
RF通信单元110可包括至少一个模块，其中，所述至少一个模块实现下列无线通信：便携式装置与无线通信系统之间的无线通信，以及便携式装置与其他便携式装置所位于的网络之间的无线通信。例如，RF通信单元110可包括移动通信模块111、无线局域网(WLAN)模块113、短距离通信模块115、位置计算模块117和广播接收模块119。应理解的是，这些模块中的每一个模块包括诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件。
移动通信模块111向基站、外部装置和服务器中的至少一个发送无线信号，并从基站、外部装置和服务器中的至少一个接收无线信号。无线信号可包括例如音频呼叫信号、图像呼叫信号或根据字符/多媒体的收发的各种类型的数据。移动通信模块111可与服务器进行通信，以在控制器180的控制下根据用户选择来下载插件式拍摄选项和图像补偿应用。移动通信模块包括诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件。
WLAN模块113与无线因特网相连，并与其他电子装置形成无线LAN链接，其中，所述其他电子装置可安装在便携式装置的内部或外部。无线LAN(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)和HSDPA(高速下行链路分组接入)可被用作无线互联网技术。WLAN模块113可与诸如市场的服务器相连，以在控制器180的控制下根据用户选择来下载插件式拍摄选项和图像补偿应用。此外，当便携式装置与另一电子装置(该电子装置可以是也可以不是另一便携式装置)形成WLAN链接时，WLAN模块113可根据用户选择向另一电子装置发送拍摄数据，并从另一电子装置接收拍摄数据。WLAN模块113可根据用户选择向云服务器发送拍摄数据，从云服务器接收拍摄数据，并包括诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件。
短距离通信模块115是用于近场通信的模块。蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee和近场通信(NFC)是短距离模块115可使用的短距离通信技术的一些非限制性示例。当便携式装置经由短距离通信与另一电子装置相连时，短距离通信模块115可根据用户选择向另一电子装置发送拍摄数据，或者从另一电子装置接收拍摄数据，并包括诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件。
继续参照图1，位置计算模块117是用于获取便携式装置的位置的模块。例如，位置计算模块117包括全球定位系统(GPS)模块。位置计算模块117可计算来自至少三个基站的距离信息和准确时间信息，并将计算出的信息应用于三角测量，以得到根据维度、经度和高度的三维当前位置信息。位置计算模块117可从至少三个卫星实时地连续接收便携式装置的当前位置以计算位置信息，并包括诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件。可通过各种方案获取便携式装置的位置信息。
广播接收模块119通过广播频道(例如，卫星频道、地面频道)和诸如处理器或微处理器、发送器、接收器、收发器、编码器/解码器电路、存储器等的硬件，从外部广播管理服务器接收广播信号(例如，TV广播信号、无线电广播信号、数据广播信号)和/或与广播相关的信息(例如，广播频道、广播节目或广播服务器提供商)。
用户输入单元120产生用于控制便携式装置的操作的输入数据。用户输入单元120可包括键区、圆顶开关、(恒压/电容的)触摸板、滚动轮和滚动开关。可以以按钮形式在便携式装置外部实现用户输入单元120，并可通过触摸面板来实现一些按钮。
显示单元130显示(输出)便携式装置所处理的信息。例如，当便携式装置处于呼叫模式时，显示单元130显示与呼叫相关的用户界面(UI)或图形UI(GUI)。另外，当便携式装置处于图像呼叫模式或拍摄模式时，显示单元130显示拍摄到的图像和/或接收到的图像、UI或GUI。具体地讲，在相机模块170的驱动期间，显示单元130包括诸如用于输出控制器180所指示的图像的显示屏和相关电路的硬件，并可显示与拍摄功能的操作相关的各种UI和GUI。换言之，显示单元130可执行显示通过相机模块170拍摄的图像和拍摄期间的信息的功能。例如，显示单元130可显示从相机模块170接收到的预览图像和与用户设置(例如，如上所述的效果)相应的拍摄选项(例如，效果)被反映在预览图像上的预览图像(效果预览图像)。此外，显示单元130可通过给定项目(例如，图标、状态条、文本)显示针对作为后台进行的图像转换的任务的进展情况。稍后将描述本发明的某些实施例所操作的显示单元130的画面的示例。
显示单元130可包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFTLCD)、有机发光二极管(OLED)、有源矩阵OLED(AMOLED)、柔性显示器和3D显示器中的至少一个。可通过透明显示器来实现一些前述显示器，其中，通过透明型或光学透明型来配置所述透明显示器。
根据本发明的一些示例性实施例，当用于检测触摸操作的显示单元130和触摸面板具有相互层状结构(mutual layered structure)时(以下称为“触摸屏”)，显示单元130在用作输出装置以外还可用作输入装置。触摸面板可将施加到显示单元130的特定区域的压力的变化或在显示单元130的特定区域产生的电容转换为电输入信号。触摸面板可检测触摸时的压力以及触摸位置和触摸区域。当存在针对触摸面板的触摸输入时，将相应的信号发送到触摸控制器(未示出)。触摸控制器对该信号进行处理，并将相应的数据发送到控制器180。相应地，控制器180可识别显示单元130的哪个区域被触摸。此外，显示单元能够检测非接触触摸，其中，例如手指或手写笔在与屏幕没有物理接触的情况下进入某个预定距离内。然而，手指或手写笔足够接近以使显示单元考虑显示器被触摸的区域。尽管这样的预定距离存在很多变化，但是一个这样的非限制性示例是1mm。
音频处理器140将从控制器180接收到的音频信号发送到扬声器SPK，并将诸如从麦克风MIC接收到的语音的音频信号传输到控制器180。音频处理器140包含诸如电路的硬件，其中，所述电路可能属于集成电路也可能不属于集成电路，用于在控制器180的控制下通过扬声器SPK将语音/声音数据转换为可听的声音，并输出所述可听的声音。音频处理器140可在控制器180的控制下将诸如从麦克风MIC接收到的语音的音频信号转换为数字信号，并将数字信号传输到控制器180。
在呼叫模块、记录模式、音频识别模式和广播接收模式下，扬声器SPK可输出从RF通信单元110接收到的音频数据或存储在存储器150中的音频数据。扬声器SPK可输出与便携式装置所执行的功能(例如，接收到呼叫连接、发送呼叫连接、接收到消息、回放音乐文件)相关的声音信号。
在呼叫模式、记录模式和音频识别模式下，麦克风MIC接收外部声音信号，并将所述外部声音信号处理为电音频数据。在呼叫模式的情况下，可将处理后的音频数据转换为可通过通信模块111发送到移动通信基站的格式。用于消除在接收外部声音信号的过程中在麦克风MIC中产生的噪声的各种噪声消除算法可通过音频处理器被实现，或者被实现为另一处理器的一部分。
存储器150可存储机器可执行代码，诸如，例如用于进行处理和控制控制器180的程序，其中，存储器150包括非暂时性机器可读介质。存储器150可执行用于暂时存储输入/输出数据(例如，电话号码(联络点信息)、消息、音频、静止图像、电子书、移动图像、联系人)的功能。存储器150可存储使用频率(例如，应用的使用频率，电话号码、消息和多媒体的使用频率，以及社区服务的使用频率)、重要度和优先级。存储器150可存储关于当触摸在触摸屏上被输入时所输出的具有各种模式的振动和声音的数据。存储器150可存储在拍摄模式下所拍摄的数据(例如，静止图像或移动图像)和用于各种后处理效果的各种拍摄选项。可以以例如通过RF通信单元110下载并另外安装的插件形式来实现拍摄选项。此外，存储器150可存储通过根据拍摄选项转换显示图像而获得的第一图像和通过根据拍摄选项转换显示图像而获得的第二图像。在这种情况下，根据用户设置，存储器150可仅存储第二图像或者同时存储第一图像和第二图像。
存储器150包括具有闪存型、硬盘型、微型多媒体卡型、存储卡(例如，SD存储卡或XD存储卡)型、RAM(随机存取存储器)、SRAM(静态随机存取存储器)、ROM(只读存储器)、EEPROM(电可擦除可编程只读存储器)、PROM(可编程只读存储器)、MRAM(磁性RAM)、磁盘和光盘中至少一种类型的存储介质。便携式装置可与执行存储器150的存储功能的web存储器相关联地操作。
接口单元160用作使所有的外部装置连接到便携式装置的路由器。接口单元160从外部装置接收数据或电力，并将接收到的数据或电力传递到便携式装置内部的各个构成元件。接口单元160使得将数据从便携式装置内部发送到外部装置(在图1中未示出)成为可能。例如，接口单元160可包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、连接包括识别模块的装置的端口、音频输入/输出端口、视频输入/输出端口和耳机端口。
相机模块170支持便携式装置的拍摄功能。换言之，相机模块170可拍摄被摄物的静止图像和移动图像。在控制器180的控制下，相机模块170可拍摄预定的被摄物，并将拍摄图像数据传输到显示单元130和控制器180。例如，相机模块170可包括诸如图像传感器(或相机传感器)和图像信号处理器的硬件，其中，图像传感器(或相机传感器)将输入的光信号转换为电信号，图像信号处理器将从图像传感器接收到的电信号转换为数字图像数据。图像传感器可包括使用电荷耦合器件(CCD)方案或互补金属氧化物半导体(CMOS)方案的传感器。具体地讲，相机模块170可支持能够在各种拍摄选项(效果)被设置的拍摄时使从图像的检测到图像的捕捉的延迟时间最小化的图像处理功能。换言之，相机模块可支持用于使因在照片拍摄方案下的图像处理而产生的延迟时间最小化的功能，其中，所述照片拍摄方案经历通过图像后处理校正(诸如，图像合成或各种过滤器处理)以新形式拍摄的图像。将描述根据本发明的某些实施例的相机模块170的配置和操作的示例。
控制器180控制便携式装置的整体操作。例如，控制器180可执行与音频呼叫、数据通信和图像呼叫相关的控制。此外，控制器180可执行与拍摄功能和对拍摄图像进行处理(例如，后台后拍摄补偿)相关的控制。控制器180可包括用于对拍摄图像进行后台后处理补偿的后处理补偿模块185。此外，控制器180可包括用于播放多媒体的多媒体模块(未示出)。在这样的实施例中，后处理补偿模块185和多媒体模块(未示出)可被配置在控制器180内部，或者可被配置为与控制器180分离。控制器包括诸如例如可以是集成电路的一部分的微处理器和处理器的硬件。
根据本发明的这个示例性实施例，控制器180控制与使用根据本发明示例性实施例的相机模块的拍摄和图像处理相关的整体操作。具体来讲，在拍摄模式下，控制器180可控制与用于在拍摄选项被设置的图像拍摄方案下应用拍摄选项的图像补偿的后处理操作相关的整体操作。控制器180可使显示图像与具有全分辨率的图像(静止图像)分离，以并行地(单独地)处理图像。控制器180被配置为控制相机模块170处理预览模式下的显示图像。控制器180控制相机模块170同时地(例如，表示基本上同时，在同一时刻或在给定的重叠时间段内)根据显示图像来处理预览显示，并针对具有全分辨率的图像来处理图像转换的后台(诸如，后处理补偿)。
如果在通过执行存储在存储器150中的至少一个程序对显示图像的预览进行显示时接收到基于拍摄选项的拍摄命令，则控制器180处理将拍摄选项应用于具有全分辨率的图像的图像补偿，还执行与进入预览模式相关的操作以基于下一帧的显示图像来处理预览显示(即，并行地通过图像补偿进行处理)。所述至少一个程序可包括用于执行与下述处理相关的操作的命令：将从相机模块获取的图像转换为显示图像和具有全分辨率的图像(静止图像)，对转换后的显示图像和具有全分辨率的图像进行缓存，显示被缓存的显示图像作为预览图像，在对显示图像进行显示作为预览的同时，在设置拍摄选项的输入被接收时，显示通过将拍摄选项应用于显示图像而获得的效果预览图像，在快门按钮的输入被接收时，作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并在作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿的同时，在快门按钮的输入被接收时进入预览模式以基于下一帧的显示图像来处理预览显示。将参照附图在便携式装置的操作及其控制方法的示例中描述控制器180的详细的控制操作。
在控制器180的控制下，供电单元190使用从外部电源施加的电力或内部电源对其施加的电力，并向每个构成元件供应操作每个构成元件所需的电力。我们注意到了电子装置的供电单元可仅包括可拆卸的电源线，其中，所述电源线可能包括也可能不包括传递某一期望水平的能量的转换电路。此外，申请人所附的权利要求不描述电池，并且供电单元可包括连接到电源的硬件。
同时，根据本发明的各种示例性实施例可被实现在其上存储有机器可执行代码的介质可读介质中，其中，所述机器可执行代码可被加载到计算机、处理器或微处理器内以进行执行。根据硬件实现，可使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器和用于执行所述功能的电子单元(仅列举一些非限制性的可能性)中的至少一种来实现本发明各种示例性实施例。在某些情况下，可由控制器180实现变化示例性实施例。根据软件实现，可通过包括机器可执行代码的单独的软件模块来实现根据说明书的过程和功能的实施例，其中，所述机器可执行代码被加载到硬件内以发挥功能。当软件模块被加载到硬件内并被执行时，所述软件模块可执行说明书中所描述的功能和操作中的至少一个。
此外，图1中所示的便携式装置可包括使用应用处理器(AP)、图像处理单元(GPU)和中央处理单元(CPU)来支持本发明的某些实施例的功能的各种装置，诸如各种信息和通信装置、多媒体装置及其应用装置。例如，便携式装置包括基于与各种通信系统相应的各个通信协议进行操作的装置，诸如，平板个人计算机(PC)、平板电话、智能电话、数码相机、便携式多媒体播放器(PMP)、媒体播放器、便携式游戏装置、膝上型计算机、个人数字助理(PDA)以及移动通信装置。
图2是示意性地示出根据本发明示例性实施例的相机模块170的示例性配置的框图。
现在参照图2，相机模块170包括相机210、图像处理器230和编解码器250。
可实现与图1和图2相比具有更多或更少元件的相机模块170。
当由控制器180驱动相机模块170时，也就是说，当激活拍摄功能时，相机210通过内部传感器来获取图像。相机210可包括例如光学单元211、图像传感器213和信号处理器215。
继续参照图2，光学单元211通过meca快门、马达和致动器进行操作，并可通过致动器来操作缩放操作和聚焦操作。光学单元211提供外围图像，并且图像传感器213检测从光学单元211提供的图像并将所述图像转换为电信号。图像传感器231可以是具有高分辨率的图像传感器，诸如CMOS传感器或CCD传感器。在本发明示例性实施例中，图像传感器231可以是检测大于的超高清(UHD)级的图像的传感器。图像传感器213可在其中包括全局快门。通过信号处理器215将从图像传感器213检测到的图像转换为数字图像，并输出所述数字图像。
信号处理器215可包括图像信号处理器(ISP)。相机210可包括取景器。图像处理器230将从相机210产生的图像转换为显示图像，并对所述显示图像进行处理。此外，当拍摄选项被添加时，图像处理器230可对使用显示图像的图像转换和使用静止图像的图像转换进行处理。图像处理器230可包括预处理器231、图像缩放器233、静止图像缓冲器235、显示图像缓冲器237和后处理器239。
预处理器231执行对从相机210获取的图像进行预处理的功能。例如，预处理功能可包括3A(AWB(自动白平衡)、AE(自动曝光)、AF(自动聚焦)提取和处理功能、镜头暗角校正、坏像素校正和畸变(knee)校正功能。
图像缩放器233将从预处理器231输出的相机210的具有全分辨率的图像调整(缩放)为用于显示在显示单元130上的尺寸。例如，可通过诸如尺寸调节、抽取、插值、裁剪、相加和平均的各种方案中的至少一种方案来实现图像缩放。图像缩放器233可包括尺寸调节器和/或求和平均单元，其中，尺寸调节器和求和平均单元中的每一个包括用于操作的硬件，诸如，处理器、子处理器和/或与其相关的电路。
当通过尺寸调节器(未示出)来实现图像缩放器233时，尺寸调节器对从预处理器输出的具有高分辨率的图像进行尺寸调节，以使其符合将显示在显示单元130上的图像的容量和尺寸。在这种情况下，如上所述，所述尺寸调节可执行适合于显示单元130的宽高比的诸如抽取、插值和裁剪的操作，并可在控制单元180的控制下进行操作。
当通过求和平均来实现图像缩放器233时，求和平均单元(未示出)被配置为对图像的邻近像素进行相加和平均，以减少图像的像素数量。求和平均单元对从预处理器231输出的具有全分辨率的图像的邻近像素进行平均，以减少显示图像的像素数量。
静止图像缓冲器235提供机器可读存储器对从预处理器231输出的相机210的具有高分辨率的图像进行缓存。静止图像缓冲器235可被设置为具有足以存储具有高分辨率的帧图像的容量的尺寸。静止图像缓冲器235对每一帧的从预处理器231输出的具有全分辨率的图像进行缓存。当图像捕捉被请求时，可访问在控制器180的控制下被选择的图像。
显示图像缓冲器237可对从图像缩放器233输出的缩放后的图像进行缓存。显示图像缓冲器237可针对时间进行补偿，以显示和处理显示单元130上的显示图像。
从显示图像缓冲器237输出的显示图像和/或从静止图像缓冲器235输出的静止图像被输入到后处理器239。后处理器239执行诸如色彩插值、噪声抑制和色彩校正的后处理，并通过对经过后处理的图像进行图像转换处理来产生YUV数据。更具体地讲，后处理器239对经过预处理的图像进行色彩插值的后处理，并将经过后处理的图像转换为YUV图像。后处理器239可包括色彩插值器、图像处理链(IPC)和图像转换器。
色彩插值器执行将输入图像转换为彩色图像的色彩插值功能。例如，色彩插值器可将从相机210输出的图像的像素转换为包括三种颜色RGB的色彩(全色转换)。色彩插值器使用邻近像素之间的相关性来执行色彩插值。通常，在图像处理器230内，在色彩插值之前的图像处理可被称为预处理，并且色彩插值之后的图像处理可被称为后处理。
后处理器239的IPC还可对通过色彩插值器被色彩插值的图像执行降噪、伽马校正和亮度校正。
图像转换器将经过后处理的图像转换为YUV图像。
在预览模式下，后处理器239可输出由显示单元130显示的图像。后处理器239在捕捉模式下将后处理器239的图像分类为显示图像和静止图像，在显示单元130上输出显示图像，通过后台对具有全分辨率的图像进行后处理补偿，并通过编解码器250输出存储器150中的图像。可在加载到硬件内以执行的软件方案中配置后处理器239的功能。
在配置后处理器239的功能的方法中，控制器180在每一帧区间期间控制显示图像缓冲器239和静止图像缓冲器250，以选择应用于后处理器239的图像，并控制从后处理器239输出的图像，以将所述图像分类为显示图像和静止图像。控制器180将经分类的显示图像恢复到预览模式，并控制显示单元130输出所述显示图像，并且作为后台针对经分类的静止图像处理图像补偿以完成图像补偿。基于后台的后处理补偿功能可被存储或加载在至少一个存储器150中，并由控制器180或单独的处理器(未示出)执行。可通过单独的用于基于后台的后处理的图像补偿应用来实现基于后台的后处理补偿功能，其中，用于基于后台的后处理的图像补偿应用与执行拍摄功能(具体地讲，预览模式、预览模式下的预览图像的显示和拍摄)的基本拍摄应用分离。在这种情况下，拍摄应用和图像补偿应用并行地对图像进行处理。如果拍摄应用终止而后处理补偿还未终止，则图像补偿应用可继续执行任务而不考虑拍摄应用的终止，直到后处理补偿已终止为止。图像补偿的任务可根据用户设置在预设时间段期间被操作，或者被手动终止，或者根据用户选择而被执行。可按照各种单位来设置预设时间段期间的操作，可以以预定时间段(例如，预定时间间隔的夜间(例如，用户睡觉时的时间间隔))为单位、以时间为单位、以星期为单位、以周为单位和以月为单位来设置预设时间段期间的操作。
编解码器250包含或配置用于对从图像处理器230输出的静止图像进行压缩编码并在存储器150中存储编码后的静止图像的硬件。编解码器250可包括JPEG编解码器。
将描述具有上述构造的便携式装置的操作。
控制器180根据通过用户输入单元120输入的控制命令来控制相机模块170的操作。换言之，当相机模块170的驱动命令被产生时，用户控制相机210和图像处理器230在预览模式下执行操作。
更详细地讲，控制器180根据驱动命令来驱动相机210，并且从相机210输出的图像被输入到预处理器231。在控制器180的控制下，预处理器231针对每个帧周期(帧率)产生帧图像。帧周期可具有30fps(帧/秒)或更大(例如，60fps)。预处理器231从帧图像提取并处理3A(AWB、AE、AF)，并执行镜头暗角补偿、坏像素和畸变补偿。如上所述，经过预处理的图像是具有全分辨率的图像，所述图像被应用于图像缩放器233和静止图像缓冲器235。
图像缩放器233将具有全分辨率的输入图像缩放为将在显示单元130上显示的尺寸。可通过下列处理来实现图像缩放：减少具有全分辨率的图像的像素数量，以将图像缩放为将在显示单元130上显示的合适尺寸；将具有全分辨率的图像缩放到合适的宽高比。可按照不同比例来实现图像缩放。
如上所述，将缩放后的图像应用于显示图像缓冲器237，使得缩放后的图像可由显示图像缓冲器237缓存。显示图像缓冲器237可调整显示图像的处理时间。换言之，在捕捉模式下，显示图像缓冲器237可对下一帧的显示图像进行缓存，直到对静止图像的处理终止为止。
此外，静止图像缓冲器235对从预处理器231输出的具有全分辨率的图像进行缓存。在这种情况下，静止图像缓冲器235可具有环形缓冲器配置，并可缓存预设数量的帧图像。换言之，静止图像缓冲器235可以是“N”(N是除了1以外的整数)个能够缓存N个帧的图像数据的环形缓冲器配置，并可针对每一帧对从预处理器231输出的帧图像数据进行缓存。例如，从静止图像缓冲器235的第一缓冲器起，对针对每一帧产生的帧图像数据进行缓存。如果帧图像数据被缓存到最后一个缓冲器，则控制器180将从预处理器231输出的帧图像数据重新覆盖在第一缓冲器中。
相应地，来自相机210的针对每一帧获取的图像被缓存在显示图像缓冲器237中作为显示图像，并随后被缓存在静止图像缓冲器235中作为静止图像。相应地，控制器180将显示图像缓冲器237和/或静止图像缓冲器235的图像应用于后处理器239。
首先，示意性地描述预览模式的操作。
如上所述，来自相机210的针对每一帧拍摄的图像可被缩放为具有全分辨率的图像，并可通过对具有全分辨率的经过预处理的图像进行缩放被产生为显示图像。此外，显示图像缓冲器237对缩放后的显示图像进行缓存，并且静止图像缓冲器235对具有全分辨率的经过预处理的图像进行缓存。控制器180还可对将缓存在图像缓冲器237中的显示图像传输到后处理器239的处理进行控制。相应地，后处理器239执行色彩插值、IP处理和颜色转换以输出显示图像(例如，YUV)。控制器180访问显示图像，以控制显示单元130(或显示单元130和存储器150)输出显示图像。当在预览模式下拍摄选项被设置时，基于显示图像缓冲器237的显示图像来实现图像转换，并且控制器180控制显示单元130输出转换后的显示图像(效果预览图像)。
以下，将示意性地描述捕捉模式的操作。
如果在如上所述的预览模式下，用户通过例如用户输入单元120来请求静止图像拍摄(捕捉)，则控制器180选择缓存在静止图像缓冲器235中的具有全分辨率的图像(静止图像)。
在这种情况下，当在处理捕捉模式时浏览模式被设置时，控制器180选择存储在显示图像缓冲器237中的显示图像，以将所选择的显示图像应用于后处理器239，并进行处理以提供通过针对由后处理器239处理的将在显示单元130上显示的显示图像进行后处理补偿(即，应用根据拍摄选项的效果)获得的效果预览图像。
如果在浏览模式下显示在显示单元130上的图像的存储被请求，则控制器180选择缓存在静止图像缓冲器235中的具有全分辨率的图像，并将所选择的图像传输到后处理器239。此外，后处理器239对输入的静止图像进行处理。在这种情况下，静止图像可以是具有全分辨率的图像，并且/或者可以是通过相机210获取的图像。此外，控制器180作为后台对静止图像进行处理，并通过后处理器239读取和处理将在显示单元130上显示的缓存在显示图像缓冲器237中的显示图像。
然而，当处理捕捉模式时浏览模式未被设置时，控制器180省略对显示图像的处理，作为后台针对静止图像缓冲器235的具有全分辨率的图像进行诸如补偿的图像转换，并通过后处理器239与将在显示单元130上显示并行地对显示图像缓冲器237的显示图像进行读取和处理。
如上所述，根据本发明示例性实施例，当捕捉通过用户输入单元120被请求时，控制器180可并行地执行预览模式处理和图像补偿。此外，控制器180在显示单元130上显示显示图像，并在捕捉被请求时从静止图像缓冲器235选择具有全分辨率的图像以作为后台处理后处理补偿。接下来，当图像补偿被完成时，控制器180对作为后台处理的具有全分辨率的图像进行编码，并控制存储器150存储编码后的图像。
例如，控制器180控制图像处理器230将显示图像暂时存储在显示图像缓冲器237中，并将具有全分辨率的图像暂时存储在静止图像缓冲器235中。此外，在预览模式下，控制器180可控制图像处理器230将显示图像缓冲器237的显示图像输出在显示单元130上。此外，在捕捉模式下，控制器180控制图像处理器230将显示图像缓冲器237的显示图像输出在显示单元130上。控制器180作为后台针对具有全分辨率的图像处理后处理图像补偿，并在存储器150中存储处理后的图像。
此外，控制器180可选择性地存储效果预览图像。例如，控制器180可捕捉和存储根据用户设置对具有全分辨率的图像进行补偿的效果预览图像，或者根据浏览模式存储捕捉的效果预览图像。
如上所述，根据本发明示例性实施例的便携式装置可通过下述操作来去除从相机210获取的图像被检测到和捕捉到之前的用户等待操作(即，在快门按钮被输入之后、下一拍摄可以进行之前的用户等待操作)：针对具有全分辨率的图像来处理转换，以作为后台补偿后处理图像并同时返回预览模式。相应地，即使在需要延时的拍摄方案(诸如各种拍摄选项或具有高分辨率的图像)下，用户也可直接执行下一拍摄，而没有实质性的等待时间。
图3是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图。
现在参照图3，如果相机模块170的驱动命令通过具有输入功能的用户输入单元120或显示单元130被产生，则在步骤301，控制器180可驱动相机模块170。
在步骤303，控制器可控制预览模式，其中，在预览模式下，通过相机模块170获取的图像和预览图像被显示在显示单元130上。
控制器180可将显示图像缓冲器237的显示图像输出到显示单元130以使预览图像被显示，并可通过静止图像缓冲器235对具有全分辨率的静止图像进行缓存。
在步骤305，在预览模式下，控制器180可在显示来自步骤303的预览图像的同时根据用户选择来设置拍摄选项。例如，如果在显示预览图像的同时拍摄选项根据用户输入被请求，则控制器180可在预览图像上提供能够设置弹出窗(例如，拍摄选项菜单)的各种选项(效果)，并可将用户从弹出窗(例如，拍摄选项菜单)选择的选项设置为拍摄选项。
在步骤307，如果拍摄选项的设置被终止(完成)，则控制器180可显示效果预览图像。例如，控制器180可显示对通过显示图像缓冲器237获取的显示图像进行与用户设置的拍摄选项相应的效果处理(图像转换)的效果预览图像。显示图像的尺寸可小于具有全分辨率的静止图像的尺寸，并可与显示单元130的尺寸相应。相应地，效果预览图像的尺寸可与显示图像的尺寸相应。
在步骤309，控制器180可在显示效果预览图像的同时接收来自用户的快门按钮输入。例如，用户可通过具有输入功能的用户输入单元120或显示单元130来输入命令拍摄的快门按钮。
当在步骤309接收到快门按钮输入时，控制器180可在步骤311进入预览模式并可在步骤315显示预览图像。与步骤311和步骤315相并行，在步骤313，控制器180可执行用于与效果预览图像相应的后处理补偿的后台处理，其中，所述后台处理与用于显示预览图像的处理同时且并行地进行。
例如，如果快门按钮输入信号被接收，则控制器180返回预览模式，并可显示通过显示图像缓冲器237获取的图像作为预览图像。此外，控制器180可作为后台根据用户设置来执行拍摄选项的图像转换，其中，所述图像转换与用于预览模式的操作分离且并行地进行。在这种情况下，控制器180可在快门按钮被输入时获取被缓存在静止图像缓冲器235中的具有高分辨率的图像(静止图像)，并作为后台进行将拍摄选项应用于静止图像的图像转换。换言之，控制器180针对每一帧时间段从相机模块170获取图像，将所获取的图像转换为用于预览的显示图像，以在显示单元130上显示转换后的图像，并作为后台执行用于将拍摄选项应用于从相机模块170获取的具有高分辨率的图像的处理。
图4、图5、图6、图7、图8和图9是根据本发明示例性实施例的使用便携式装置来拍摄被摄物的操作的示图示例。
现在参照图4到图9。图4示出当便携式装置显示图像作为预览时的便携式装置的画面。例如，如果相机模块170的驱动命令根据从用户输入的控制命令而产生，则相机210和图像处理器230被控制，使得预览模式的操作被执行的状态的画面可被提供。
用户可在其上预览图像被如图4所示地显示的画面上输入选择用于设置拍摄选项的预设项目(或图标)400的选择事件。例如，用户可通过在其上预览图像被显示的画面上选择(触摸或接近触摸)指示选项设置的预设项目(或图标)400来命令调用拍摄选项菜单500。
相应地，如果选项事件(触摸或接近触摸)被输入到预设项目400，则如图5所示，便携式装置可显示用于设置拍摄选项的拍摄选项菜单500。换言之，图5示出其上便携式装置的预览图像被显示的画面上的处于能够选择各种拍摄选项的拍摄选项菜单500的状态下的画面的示例。
根据本发明的某些实施例，用户可选择性地设置各种拍摄选项，其中，所述拍摄选项诸如：包括素描、阴影、扭曲、合成、动画、渐晕、复古、色彩转换和冷光的效果选项，以及诸如用于提高图像质量的组成、能够改变被摄物的背景的背景和能够拍摄宽视角的全景的效果选项。上述拍摄选项可以以插件形式实现，并可根据用户选择被添加或移除。此外，可通过拍摄选项菜单500选择用于访问能够下载拍摄选项的服务器的功能菜单，并且用户可根据对功能菜单的选择与服务器通信以下载拍摄选项，甚至在拍摄模式下也可以这样。
同时，用户可输入从其上拍摄选项菜单500被如图5中所示地显示的画面选择如图6所示的将被设置的选项项目的选择事件。例如，如图6所示，用户可输入从通过拍摄选项菜单500提供的各个拍摄选项中选择素描的选择事件(触摸)。用户可选择将被设置为终止选项设置的选项项目。如果来自用户的从拍摄选项菜单500选择选项的选择事件输入被检测到，则便携式装置可自动终止选项设置。
如果拍摄选项设置被终止(完成)，则如图7所示，便携式装置可显示画面。也就是说，根据选择事件输入，如图6所示的便携式装置的画面被转换为如图7所示。
如上所述，如果选项项目(例如，素描)根据用户输入从拍摄选项设置画面被选择，则便携式装置显示根据用户选择的选项(或效果)效果被应用于预览图像的效果预览图像。例如，如上所述，其中显示图像被作为为预览显示的便携式装置的画面被转换为其上转换后的效果预览图像被显示为与图6中由用户选择的选项项目的选项相应的预览的画面。
在效果预览图像被作为预览显示的情况下，用户可(通过触摸或接近触摸)选择用于拍摄(捕捉)的快门按钮。如果使用快门按钮进行输入，则便携式装置可根据浏览模式或快速查看模式的设置状态(激活或未激活)来显示如图8或图9所示的画面。
例如，当浏览模式被设置为激活时，图7中示出的屏幕被转换为如图8所示。如图8所示，便携式装置可捕捉如图7所示的效果预览图像，显示所捕捉的图像，并在捕捉图像画面的一个区域上显示能够确定所捕捉的图像是否被存储的存储项目(或图标、菜单)800。换言之，图8示出处于其中拍摄选项(例如，素描)被应用于显示图像缓冲器237的显示图像的捕捉图像被显示的状态的画面的示例。
用户可确认如图8所示的捕捉图像的预览，以确定是否存储捕捉图像。当确定存储捕捉图像时，用户可输入(触摸)对存储项目800的选择。当确定取消捕捉图像时，用户可输入选择设置在便携式装置中的取消按钮(未示出)的事件(触摸)。
当用户在图8的状态下选择存储捕捉图像时，或者当在图7的状态下浏览模式被设置为未激活时(也就是说，当快速查看模式被设置为激活时)，如图9中所示，便携式装置可返回预览操作以在预览模式下显示其上显示有预览图像的画面。也就是说，图9示出当便携式装置将新图像作为预览显示时便携式装置上的画面的示例。
例如，根据在图7的画面显示状态下的快门按钮输入或在图8的画面显示状态下的存储命令输入，将图7或图9所示的画面转换为图9中所示的画面。此外，如果在图7或图8中交互(例如，快门按钮输入或存储命令输入)根据用户输入被接收，则便携式装置可作为后台通过将拍摄选项(例如，素描)应用于静止图像缓冲器235的具有全分辨率的图像来处理图像转换。此外，便携式装置处理图像补偿，返回预览模式，同时作为后台针对具有全分辨率图像来处理补偿，从而显示通过相机模块170获取的显示图像作为预览图像。
如图9所示，报告根据后台处理的进展状态的状态项目(例如，图标、状态栏900、文本等)可被设置在画面的一个区域上，其中，如图9所示，在该画面上，显示图像缓冲器237的显示图像被作为预览而显示。
如上所述，根据本发明的某些实施例，当浏览模式被设置为激活时，通过将根据用户的选择的选项(效果)应用于具有低分辨率的尺寸与预览相应的显示图像，能够通过图像补偿进行快速显示。当在浏览模式下存储命令被输入时，或者当浏览模式被设置为未激活时，图像补偿可作为后台图像进行，同时并行地根据预览模式的切换来显示预览图像，其中，所述图像补偿将根据用户的选择的选项(效果)应用于具有与全分辨率(或根据用户设置的分辨率)相应的尺寸的静止图像。相应地，用户可直接请求下一次拍摄，而没有针对下一次拍摄的延迟时间(例如，快门延时或快门时滞)。
图10是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图。
现参照图10，在步骤1001，如果相机模块170的驱动命令通过用户输入单元120或具有输入功能的显示单元130被产生，则控制器180可驱动相机模块170。
在步骤1003，控制器可控制通过相机模块170获取的图像和预览图像被显示在显示单元130上的预览模式。控制器180可将显示图像缓冲器237的显示图像输出到显示单元130使得预览图像被显示，并可通过静止图像缓冲器235来缓存具有全分辨率的静止图像。
在步骤1005，控制器180在预览模式下显示预览图像的同时，根据用户选择来设置拍摄选项。例如，如果在显示预览图像的同时拍摄选项根据用户输入被请求，则控制器180可提供能够在预览图像上设置弹出窗(例如，拍摄选项菜单)的各种选项(效果)，并可将用户从弹出窗(例如，拍摄选项菜单)选择的选项设置为拍摄选项。
在步骤1007，如果拍摄选项根据用户选择被设置，则控制器180确定所选择的拍摄选项是否为支持预览的选项。例如，控制器180可确定所选择的拍摄选项是直接应用于显示图像且将作为预览被显示的选项(诸如，包括素描的效果)，还是不直接应用于显示图像但通过后处理补偿被应用的选项(诸如，包括扭曲的效果)。
当在步骤1007所选择的拍摄选项是支持预览的选项时(在步骤1007的是)，则在步骤1009，控制器180可显示根据所选择的拍摄选项的效果(例如，素描)被应用于画面上的显示图像的效果预览图像作为预览。换言之，控制器180可显示针对通过显示图像缓冲器237而获取的显示图像而处理与用户设置的拍摄选项相应的效果(图像转换)的效果预览图像。显示图像可具有小于具有全分辨率的静止图像的显示尺寸，并可具有与显示单元130的显示尺寸相应的尺寸。相应地，效果预览图像可具有与显示图像的显示尺寸相应的尺寸。
当在步骤1011在显示效果预览图像的同时快门按钮输入从用户被接收时，则在步骤1013，控制器180可确定浏览模式是否被设置。
当在步骤1013浏览模式未被设置时(步骤1013的否)，则在步骤1021，控制器180作为后台执行处理图像转换的控制。例如，控制器180可获取缓存在静止图像缓冲器235中的具有全分辨率的图像(即，静止图像)，并在步骤0121作为后台处理将拍摄选项应用于静止图像的图像转换。
此外，在步骤1023，控制器180返回预览模式，在预览模式下同时并行地处理针对静止图像的后台，以处理用于显示显示图像缓冲器237的显示图像的处理操作。换言之，控制器1023在快门按钮输入时刻返回预览模式，以显示预览画面，并作为后台并行地处理针对静止图像的转换。
如果在步骤1013浏览模式被设置时(步骤1013的是)，则在步骤1015，控制器180捕捉显示在画面上的效果预览图像。
在步骤1017，控制器控制捕捉图像的显示(1017)。例如，当快门按钮输入被接收且浏览模式被设置时，控制器180可获取显示图像缓冲器237的显示图像，并处理将拍摄选项应用于所获取的显示图像的图像转换，以在画面上显示拍摄图像。
在步骤1019，控制器180确定在显示捕捉图像之后捕捉图像是否被存储。例如，控制器180可确定用于存储捕捉图像的命令是否通过存储项目800被输入。
如果在步骤1019捕捉图像的存储命令未被产生，换言之，如果取消命令被产生(步骤1019的否)，则在步骤1023，控制器180返回预览模式，以控制用于显示预览图像的操作。
如果在步骤1019捕捉图像的存储命令被产生(步骤1019的是)，则控制器180可获取缓存在静止图像缓冲器235中的具有全分辨率的图像(即，静止图像)，并可在步骤1021作为后台处理将拍摄选项应用于静止图像的图像转换。
此外，在步骤1023，控制器180可在处理针对静止图像的后台的同时返回预览模式，以执行用于显示显示图像缓冲器237的显示图像作为预览的操作。换言之，控制器1023可返回预览模式并可将其上显示有效果预览图像的画面转换为预览画面以显示预览图像，并可作为后台并行地执行针对静止图像的图像转换。
当在步骤1007所选择的拍摄选项不是支持预览的选项时(步骤1007的否)，则在步骤1025，控制器180可在画面上显示预览图像。换言之，控制器180可显示通过显示图像缓冲器237获取的显示图像。
当在步骤1027在显示效果预览图像的同时快门按钮输入从用户被接收时，则在步骤1029，控制器180可确定浏览模式是否被设置。
如果在步骤1029浏览模式未被设置(步骤1029的否)，则控制器180返回预览模式以处理预览显示，作为后台获取缓存在静止图像缓冲器235中的具有全分辨率的图像(即，静止图像)以执行图像转换(诸如，与拍摄选项相应的图像补偿)。
当在步骤1029浏览模式被设置时(步骤1029的是)，控制器180可在步骤1031捕捉缓存在显示图像缓冲器237中的显示图像，并在步骤1033在显示图像中处理根据拍摄选项的效果。在步骤1035，控制器180可控制捕捉图像的显示。接下来，控制器可如上所述地执行步骤1019，并控制前述过程。
图11是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的过程期间用于显示效果预览图像的示例性操作的流程图。具体地讲，图11是示出用于如上所述地显示效果预览图像的示例性方法的流程图。
现在参照图11，在步骤1101，当进入预览模式时，例如，当相机模块170的驱动命令根据用户输入被产生时，控制器180可控制相机模块170的相机210和图像处理器230以控制预览模式的操作。
具体地讲，控制器180可根据驱动命令来驱动相机210，并可在步骤1103通过相机210获取图像。
此外，在步骤1105，控制器180将来自相机210的具有全分辨率的图像转换为显示图像。例如，控制器180可通过图像缩放器233，将从相机210输出的具有全分辨率的图像转换为具有将显示在显示单元130上的尺寸的显示图像。
在步骤1107，控制器180可通过显示图像缓冲器237缓存从具有全分辨率的图像转换(缩放)的显示图像，并可通过静止图像缓冲器235缓存具有全分辨率的图像。换言之，针对每一帧从相机120获取的图像可被缓存在显示图像缓冲器237中作为显示图像，并可被缓存在静止图像缓冲器235中作为静止图像。
在步骤1109，控制器180控制缓存在显示图像缓冲器237中的显示图像的预览显示。例如，控制器180可将缓存在显示图像缓冲器237中的显示图像传输到后处理器239，并针对显示图像执行色彩插值、IP处理和图像转换，以通过后处理器239输出显示图像。随后，控制器180访问显示图像，以控制显示单元130输出显示图像。
在步骤1111，如果在如上所述地显示显示图像的预览的同时用于设置拍摄选项的预设命令被产生，则在步骤1113，控制器180可基于设置被请求的选项的效果来执行图像转换。例如，控制器180可执行将效果(例如，素描、古典、阴影等)应用于从显示图像缓冲器237获取的显示图像的图像转换。
在步骤1115，如果图像转换处理被终止，则控制器180可控制效果预览图像的显示。换言之，控制器180可显示其中在通过显示图像缓冲器237获取的显示图像中与用户设置的拍摄选项相应的效果被处理的效果预览图像。显示图像可具有小于具有全分辨率的静止图像的显示尺寸的显示尺寸，并可具有与显示单元130的显示尺寸相应的尺寸。相应地，预览图像可具有与显示图像的显示尺寸相应的尺寸。
如上所述，根据本发明示例性实施例，当基于拍摄选项处理效果预览图像时，处理针对缩小到与显示单元130的显示分辨率相应的水平的显示图像的转换，而不是针对具有全分辨率的图像的转换。
转换后的效果预览图像可被用户作为预览观看。根据当用户的快门按钮输入时的浏览模式的设置状态，选择性地执行效果预览图像被捕捉的捕捉显示的显示操作和接收用户选择的操作。随后，针对具有全分辨率的图像的基于拍摄选项的转换可作为后台图像被处理。相应地，在本发明示例性实施例中，当基于拍摄选项拍摄操作时，用户可快速地确认效果被应用的效果预览图像。
图12是示出根据本发明示例性实施例的在便携式装置中基于拍摄选项而拍摄图像过程期间的并行处理操作的示例性操作的流程图。
图12示出随着如上所述的预览模式的进行一起同时处理针对具有全分辨率的静止图像的后台的操作。换言之，图12示出在本发明的便携式装置拍摄基于拍摄选项的图像时执行的并行处理操作。
现在参照图12，当基于拍摄选项的拍摄操作时，控制器180可控制相机模块170的相机210和图像处理器230以并行操作单独地执行在预览模式下的预览显示处理操作和针对具有全分辨率的图像的转换处理操作。
详细地讲，如上所述，在步骤1201，控制器180可将通过相机210输出的具有全分辨率的图像转换(缩放)为显示图像，通过显示图像缓冲器237缓存转换后的显示图像，并通过静止图像缓冲器235缓存具有全分辨率的图像(静止图像)。
在步骤1203，针对在静止图像缓冲器235中缓存的静止图像的后处理补偿根据基于根据前述过程的用户的拍摄选项的拍摄命令被确定，控制器180作为后台针对静止图像进行后处理补偿，并进入预览模式以控制下一显示图像的预览的显示。如图12所示，当在步骤1203后处理补偿被确定时，控制器180以这样的方式并行地执行步骤1205到步骤1207以及步骤1209到步骤1213：各个图像处理步骤可被单独地操作。
例如，控制器180在步骤1205通过拍摄功能返回预览操作，并在步骤1207显示使用显示图像缓冲器237的显示图像的预览图像。
此外，控制器180在步骤1209调用用于处理对具有全分辨率的图像(静止图像)的补偿的图像补偿功能，并在步骤1211作为后台通过图像补偿功能在静止图像缓冲器235的静止图像中处理基于选项的图像转换设置。
接下来，在步骤1213，控制器120控制指示在作为后台而进行的图像转换的进展度的信息输出。例如，报告图像转换的进展状态的项目(例如，图标、状态条、文本等)可被设置在下列区域：根据拍摄功能操作的画面的一个区域，或在根据拍摄功能的操作被终止且另一操作被操作时当前提供的画面的一个区域。
如上所述，根据本发明示例性实施例，后处理补偿(例如，基于所设置的拍摄选项的效果应用)通过单独的处理作为后台被处理，同时便携式装置通过操作的拍摄处理进入预览模式以控制下一显示图像的预览显示。
根据如上所述的本发明示例性实施例，当针对预览图像应用拍摄选项时，针对显示图像缓冲器237的显示图像而不是具有全分辨率的图像的基于拍摄选项的图像转换可被处理并提供，其中，所述显示图像与显示单元130的显示分辨率相应。此外，当根据快门按钮输入的拍摄(捕捉)时，便携式装置返回预览模式，并且针对静止图像缓冲器235的具有全分辨率的图像(静止图像)的基于拍摄选项的转换可作为后台被处理。更具体地将，根据本发明示例性实施例，当拍摄拍摄选项被应用的照片时，针对静止图像的后处理补偿(例如，效果应用)进行到后台，同时便携式装置进入预览模式以直接拍摄下一图像。
本发明的某些实施例具有通过使拍摄功能(或拍摄应用)与图像补偿功能(或图像补偿应用)分离来实现并行操作的配置，在快门按钮输入或模式终止时调用图像补偿功能以获取与快门按钮输入时的显示图像相应的具有全分辨率的图像，作为后台进行对具有全分辨率的图像的图像补偿，并通过拍摄功能转到预览模式。
在这样的示例性实施例中，独立地分离的用于处理图像补偿的图像补偿功能(或图像补偿应用)作为后台继续并进行图像变换处理，直到给定的图像转换任务被终止(根据用户选择的强制终止、在根据用户选择的时间段期间的自动装置)为止。此外，即使当拍摄功能(或拍摄应用)被终止使得相机模块170被关闭时，也可连续执行基于后台的图像转换处理。此外，当图像转换任务正在进行时，可通过系统(具体来讲，控制器180)来提供关于进展情况的信息，其中，所述信息包括处理已进行了多少百分比，并指示已另外进行的图像转换任务的条的数量。在拍摄功能(或拍摄应用)时，可通过拍摄功能在执行的画面(例如，预览画面)上提供进展信息。在拍摄功能(或拍摄应用)被终止之后，可在系统UI或GUI(例如，所执行的应用的画面(消息画面、画廊画面、空闲画面等))上提供进展信息
因此，根据本发明示例性实施例，与现有技术不同，由于用于显示预览的预览图像由显示图像而不是具有全分辨率的图像转换而成，因此预览图像可被快速地处理并显示。此外，根据本发明示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。因此，在本发明示例性实施例中，当用于显示预览图像的图像转换处理或对具有全分辨率的图像的图像转换处理时，作为从快门按钮的输入到下一可能的拍摄的时期的延迟时间(例如，快门延时或快门时滞)可被大幅缩短。此外，根据本发明示例性实施例，由于用于补偿图像的图像补偿功能(或图像补偿应用)与拍摄功能(或拍摄应用)被单独地操作，因此当更加改进的图像补偿算法被建议时，难以更新并应用便携式装置的图像补偿功能(或图像补偿应用)。
根据本发明的某些实施例的上述方法可被实现在硬件、固件中，或被实现为配置硬件以进行操作并存储在非暂时性机器可读介质(诸如CD ROM、DVD、RAM、软盘、硬盘或磁光盘(诸如，软光盘))上的软件或计算机代码，或被实现为原本存储在远程记录介质或非暂时性机器可读介质上的、通过网络下载的计算机代码以及存储在本地非暂时性记录介质上的计算机代码，使得这里所描述的方法可被加载到诸如通用计算机或专用处理器的硬件内，或被加载在可编程硬件或专用硬件(诸如ASIC或FPGA)中。如本领域中将会理解的，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储器组件(例如，RAM、ROM、闪存等)，其中，当所述软件或计算机代码被计算机、处理器或应用访问并执行时，实现这里所描述的处理方法。
此外，将识别出当通用计算机访问用于实现这里所示的处理的代码时，所述代码的执行将通用计算机转变为专用计算机以执行这里所示的处理。此外，技术人员明白并理解“处理器”或“微处理器”包括权利要求中的硬件。当在这里使用术语“单元”或“模块”时，所述术语将在最宽的合理解释下被理解，并不构成软件本身。当单元或模块包括机器可执行代码时，将理解为非暂时性机器可读介质包含加载到诸如处理器或控制器的硬件内用于执行的机器可执行代码。
本发明的前述示例性实施例可被实现在由各种计算机方法形成的可执行程序命令中，并被记录在计算机可读记录介质中。在这种情况下，计算机可读记录介质可单独地包括程序命令、数据文件和数据结构或者包括以上项的组合。同时，记录在记录介质中的程序命令可针对本发明的某些实施例被专门设计或配置，或对于将使用的计算机软件领域的普通技术人员而言是已知的。计算机可读记录介质包括存储和执行程序命令的磁介质(诸如，硬盘、软盘或磁带)、光介质(诸如，压缩盘只读存储器(CD-ROM)或数字多功能盘(DVD))、磁光介质(诸如，软光盘)和硬件装置(诸如，ROM、RAM、闪存)。此外，程序命令包括由编译器创建的机器语言代码和可由计算机使用解译器执行的高级语言代码。前述硬件装置可被配置为作为至少一个软件模块而进行操作以执行本发明的操作，反之亦然。
根据上述本发明的图像处理方法和设备的示例性实施例，用于显示预览的预览图像由显示图像而不是具有全分辨率的图像转换而成，允许预览图像被迅速地处理和显示。此外，根据本发明示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
相应地，在本发明示例性实施例中，当用于显示预览图像的图像转换处理或对于具有全分辨率的图像的图像转换处理时，作为从快门按钮的输入到下一可能的拍摄的时间段的延迟时间(例如，拍摄到预览时刻)可大幅缩短。
此外，根据本发明示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
相应地，本发明在具有拍摄功能的便携式装置中实现用于使根据拍摄的延迟时间最小化的最佳环境，使得用户便利性、便携式装置的使用、便利和竞争力可被提高。在各种类型的便携式装置和相应的各种装置中，本发明可被简单地实现。
虽然在上文中已详细地描述了本发明示例性实施例，但应清楚地理解：如权利要求所限定的那样，这里教导的基本发明构思的许多变化和修改仍将落入本发明的范围内，其中，所述变化和修改对于本领域技术人员而言会是明显的。
贯穿本说明书的描述和权利要求，词语“包括”和“包含”和所述词语的变化(例如，“包括……的”)表示“包括但不限于”，并不意在(且不)排除其他组件、整体或步骤。
贯穿本说明书的描述和实施例，除非上下文另有需要，否则单数包括复数。具体地讲，当使用不定冠词时，除非上下文另有需要，否则说明书将被理解为考虑复数和单数。
除非与之不兼容，否则与本发明的特定方面、实施例或示例相结合地描述的特征、整体或特性将被理解为可应用于在此描述的任何其他方面、实施例或示例。
还将理解的是，贯穿本说明书的描述和权利要求，以“用于Y的X”(其中，Y是一些动作、活动或步骤，X是用于实施所述动作、活动或步骤的一些方法)的一般形式的语言包括方法X适合于或被特定地布置为进行Y，但不排他。

Claims (15)

1.一种图像处理方法，包括：
在相机模块的拍摄模式下，由显示单元显示第一预览图像；
在第一预览图像被显示的同时，由控制器接收用于设置拍摄选项的输入；
通过根据拍摄选项对第一预览图像进行转换来显示效果预览图像；
由控制器根据拍摄命令，作为后台通过将拍摄选项应用于与效果预览图像相应的具有全分辨率的图像来处理图像补偿，并同时进入预览模式以显示第二预览图像。
2.如权利要求1所述的图像处理方法，其中，在预览模式下显示第一预览图像或第二预览图像的步骤包括：
将通过相机模块获取的图像缓存为显示图像和具有全分辨率的图像两者；
显示缓存的显示图像。
3.如权利要求1所述的图像处理方法，还包括：
通过将拍摄选项应用于第一预览图像来处理图像转换。
4.如权利要求2所述的图像处理方法，其中，缓存步骤包括：
将通过相机模块获取的图像缩放为显示图像；
通过显示图像缓冲器对缩放后的图像进行缓存；
通过静止图像缓冲器对与缩放后的图像相应的具有全分辨率的图像进行缓存。
5.如权利要求4所述的图像处理方法，其中，处理图像补偿的步骤包括：
由控制器进行切换，以显示通过显示图像缓冲器缓存的下一帧的图像；
由图像处理器作为后台通过将拍摄选项应用于静止图像缓冲器的具有全分辨率的图像来处理图像补偿。
6.如权利要求1所述的图像处理方法，其中，处理图像补偿的步骤包括：
由控制器调用用于执行图像补偿的补偿应用；
通过拍摄应用将第二预览图像显示到预览模式；
由图像处理器通过调用的补偿应用，作为后台根据拍摄选项处理与第一预览图像相应的具有全分辨率的图像的补偿，
其中，按照并行操作来执行对预览第二图像的显示以及作为后台对补偿的处理。
7.如权利要求6所述的图像处理方法，其中，并行操作被同时执行。
8.如权利要求4至权利要求7中的任意一项所述的图像处理方法，还包括：
当拍摄选项被接收时，确认浏览模式的预设状态；
当浏览模式未被设置时，由图像处理器通过将拍摄选项应用于静止图像缓冲器的具有全分辨率的图像来处理图像补偿，并同时返回预览模式，以将显示图像缓冲器的显示图像作为预览进行显示；
当浏览模式被设置时，捕捉并显示效果预览图像。
9.如权利要求8所述的图像处理方法，还包括：
由控制器确定捕捉到的效果预览图像是否被存储；
当存储命令未被产生时，由控制器返回预览模式，以使用显示图像缓冲器的显示图像来处理预览操作；
当存储命令被产生时，由控制器返回预览模式，以将显示有效果预览图像的画面转换为基于显示图像的预览画面，并作为后台针对具有全分辨率的图像来处理图像补偿。
10.如权利要求9所述的图像处理方法，还包括：
当针对具有全分辨率的图像的图像补偿已终止时，存储补偿后的具有全分辨率的图像；
当执行图像补偿时，在存储器中选择性地存储效果预览图像。
11.一种图像处理设备，包括：
相机模块，被配置为用于获取具有全分辨率的图像，对所获取的图像进行缩放，通过显示图像缓冲器对显示图像进行缓存和输出，并通过静止图像缓冲器对具有全分辨率的图像进行缓存；
显示单元，将显示图像作为预览图像进行显示；
存储器，存储包括机器可执行代码的至少一个程序、以显示图像为基础应用了拍摄选项的效果预览图像、以及以具有全分辨率的图像为基础应用了拍摄选项的图像；
控制器，被配置为用于在预览模式下通过根据用户的拍摄选项对第一预览图像进行转换来显示效果预览图像，执行所述至少一个程序以通过应用拍摄选项来处理图像补偿，当在显示第一预览图像的同时拍摄命令被接收时，针对与第一预览图像相应的具有全分辨率的图像来处理图像补偿，并按照并行操作进入预览模式以显示第二预览图像。
12.如权利要求11所述的图像处理设备，其中，相机模块包括图像传感器和信号处理器，其中，信号处理器接收来自图像传感器的输出，将所述输出转换为数字图像信号。
13.如权利要求12所述的图像处理设备，其中，相机模块还包括：图像处理器，当在预览模式下时，将从信号处理器产生的图像转换为显示图像，并对显示图像进行处理。
14.如权利要求11所述的图像处理设备，其中，所述至少一个程序的机器可执行代码包括用于执行下述操作的命令：
将从相机模块获取的图像缓存为显示图像和具有全分辨率的图像两者；
显示缓存的显示图像；
当在对显示图像进行显示的同时用于设置拍摄选项的输入被接收时，通过将拍摄选项应用于显示图像来处理图像补偿；
当快门按钮输入被接收时，作为后台通过将拍摄选项应用于具有全分辨率的图像来处理图像补偿，同时进入预览模式，以显示基于下一帧的显示图像的预览。
15.一种记录包含机器可执行代码的程序的计算机可读记录介质，其中，当由处理器执行所述机器可执行代码时，所述机器可执行代码将电子装置配置为用于：将通过相机模块获取的图像转换为显示图像和具有全分辨率的图像，以对转换后的显示图像和转换后的具有全分辨率的图像进行缓存，显示缓存的显示图像的预览，当在对显示图像的预览进行显示的同时基于拍摄选项的拍摄命令被接收时，作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时进入预览模式以显示基于下一帧的显示图像的预览。
CN201380041321.XA 2012-08-03 2013-08-05 图像处理方法和设备 Active CN104521227B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2012-0085169 2012-08-03
KR1020120085169A KR101917650B1 (ko) 2012-08-03 2012-08-03 이미지 처리 방법 및 장치
PCT/KR2013/007027 WO2014021692A1 (en) 2012-08-03 2013-08-05 Image processing method and apparatus

Publications (2)

Publication Number Publication Date
CN104521227A true CN104521227A (zh) 2015-04-15
CN104521227B CN104521227B (zh) 2017-12-08

Family

ID=48949021

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380041321.XA Active CN104521227B (zh) 2012-08-03 2013-08-05 图像处理方法和设备

Country Status (7)

Country Link
US (1) US9225905B2 (zh)
EP (1) EP2693737B1 (zh)
KR (1) KR101917650B1 (zh)
CN (1) CN104521227B (zh)
AU (1) AU2013297221B2 (zh)
IN (1) IN2015DN00563A (zh)
WO (1) WO2014021692A1 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105959557A (zh) * 2016-06-07 2016-09-21 深圳市万普拉斯科技有限公司 拍照方法和装置
CN106341610A (zh) * 2016-11-25 2017-01-18 广东欧珀移动通信有限公司 拍照方法及移动终端
CN106453886A (zh) * 2016-09-30 2017-02-22 维沃移动通信有限公司 一种移动终端的拍照方法及移动终端
CN106657788A (zh) * 2016-12-28 2017-05-10 深圳众思科技有限公司 电子设备的图像处理方法及电子设备
CN107592450A (zh) * 2017-08-30 2018-01-16 珠海市君天电子科技有限公司 一种媒体数据处理方法及装置
CN108370414A (zh) * 2016-10-29 2018-08-03 华为技术有限公司 一种拍摄方法和终端
CN108886608A (zh) * 2016-03-31 2018-11-23 富士胶片株式会社 白平衡调整装置及其工作方法和工作程序
CN111988518A (zh) * 2019-05-23 2020-11-24 三星电子株式会社 具有能切换视线的相机模块的电子装置及录制视频的方法
CN112217990A (zh) * 2020-09-27 2021-01-12 北京小米移动软件有限公司 任务调度方法、任务调度装置及存储介质
CN112672093A (zh) * 2020-12-23 2021-04-16 北京市商汤科技开发有限公司 视频显示方法、装置、电子设备及计算机存储介质
CN114286007A (zh) * 2021-12-28 2022-04-05 维沃移动通信有限公司 图像处理电路、图像处理方法、电子设备和可读存储介质
CN114631306A (zh) * 2019-11-01 2022-06-14 三星电子株式会社 用于提供预览的方法和用于显示预览的电子装置
CN115529453A (zh) * 2022-08-10 2022-12-27 北京罗克维尔斯科技有限公司 车载摄像头的测试方法和装置

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6046931B2 (ja) 2011-08-18 2016-12-21 キヤノン株式会社 撮像装置およびその制御方法
KR101899851B1 (ko) * 2012-05-03 2018-09-18 삼성전자 주식회사 이미지 처리 장치 및 방법
AP00894S1 (en) * 2013-02-23 2017-03-20 Samsung Electronics Co Ltd Display screen or portion thereof with animated graphical user interface
KR102146854B1 (ko) * 2013-12-30 2020-08-21 삼성전자주식회사 촬영 장치 및 이의 제어 방법
CN104182313B (zh) * 2014-08-14 2018-09-04 小米科技有限责任公司 延时拍照的方法和装置
US9641737B2 (en) 2014-08-14 2017-05-02 Xiaomi Inc. Method and device for time-delay photographing
CN106155611A (zh) * 2015-04-17 2016-11-23 中强光电股份有限公司 影像显示系统及其影像呈现方法
WO2016204520A1 (en) * 2015-06-17 2016-12-22 Lg Electronics Inc. Display device and operating method thereof
CN105072336A (zh) * 2015-07-31 2015-11-18 小米科技有限责任公司 调节拍摄功能的控制方法、装置和设备
CN105183095B (zh) * 2015-10-19 2019-03-15 京东方科技集团股份有限公司 具有透明显示装置的手持终端
US10296821B2 (en) * 2017-08-17 2019-05-21 Assa Abloy Ab RFID devices and methods of making the same
CN107659769B (zh) * 2017-09-07 2019-07-26 维沃移动通信有限公司 一种拍摄方法、第一终端及第二终端
US11394898B2 (en) * 2017-09-08 2022-07-19 Apple Inc. Augmented reality self-portraits
KR102640234B1 (ko) 2018-09-28 2024-02-23 삼성전자주식회사 디스플레이 장치의 제어 방법 및 그에 따른 디스플레이 장치
KR102685899B1 (ko) 2019-02-19 2024-07-19 삼성전자주식회사 촬영된 이미지를 처리하기 위한 방법 및 그 전자 장치
CN112073765A (zh) * 2019-06-10 2020-12-11 海信视像科技股份有限公司 一种显示设备
CN112399235B (zh) * 2019-08-18 2023-05-09 海信视像科技股份有限公司 一种智能电视的摄像头拍照效果增强方法及显示设备
KR20210141179A (ko) * 2020-05-15 2021-11-23 삼성전자주식회사 영상을 제공하는 방법 및 장치
KR20220097818A (ko) * 2020-12-31 2022-07-08 삼성전자주식회사 언더 디스플레이 카메라
WO2023034633A2 (en) * 2021-09-03 2023-03-09 Meta Platforms Technologies, Llc Wrist-wearable device for delayed processing of images captured by the wrist-wearable device, and methods of use thereof

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070285736A1 (en) * 2006-06-13 2007-12-13 Alpha Imaging Technology Corp. Image acquisition device
US20100231735A1 (en) * 2009-03-13 2010-09-16 Nokia Corporation Methods, Apparatuses, and Computer Program Products for Facilitating Concurrent Video Recording and Still Image Capture
US20100321530A1 (en) * 2009-06-18 2010-12-23 Samsung Electronics Co., Ltd. Apparatus and method for reducing shutter lag of a digital camera
US20110109766A1 (en) * 2009-11-10 2011-05-12 Jong Ho Roh Camera module for reducing shutter delay, camera including the same, and method of driving the same
US20110261217A1 (en) * 2010-04-21 2011-10-27 Nokia Corporation Image processing architecture with pre-scaler
CN102546925A (zh) * 2010-12-29 2012-07-04 Lg电子株式会社 移动终端及其控制方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6995793B1 (en) * 2000-11-14 2006-02-07 Eastman Kodak Company Video tap for a digital motion camera that simulates the look of post processing
JP2005277908A (ja) 2004-03-25 2005-10-06 Nec Access Technica Ltd 画像処理装置、その画像処理方法およびカメラつき携帯電話
JP4448039B2 (ja) * 2005-01-26 2010-04-07 キヤノン株式会社 撮像装置及びその制御方法
JP4401974B2 (ja) 2005-01-28 2010-01-20 キヤノン株式会社 撮像装置及びその制御方法
US20060197849A1 (en) * 2005-03-02 2006-09-07 Mats Wernersson Methods, electronic devices, and computer program products for processing images using multiple image buffers
JP4902136B2 (ja) * 2005-04-28 2012-03-21 キヤノン株式会社 撮像装置、撮像方法及びプログラム
WO2009089525A1 (en) 2008-01-11 2009-07-16 Kyocera Wireless Corp. Pre-image capture color effects
JP5517219B2 (ja) * 2009-10-27 2014-06-11 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像撮影装置及び画像撮影方法
KR20110052275A (ko) 2009-11-12 2011-05-18 엘지전자 주식회사 프리뷰 영상 표시 방법 및 그 장치
TWI438715B (zh) 2010-09-02 2014-05-21 Htc Corp 手持式裝置之影像處理方法及系統，及其電腦程式產品
CN102469245B (zh) 2010-11-11 2015-07-29 奥林巴斯映像株式会社 摄像装置和摄像方法
JP5646960B2 (ja) 2010-11-11 2014-12-24 オリンパスイメージング株式会社 撮像装置、撮像方法および撮像プログラム
US20130021512A1 (en) * 2011-07-20 2013-01-24 Broadcom Corporation Framing of Images in an Image Capture Device
US9225904B2 (en) * 2012-02-13 2015-12-29 Htc Corporation Image capture method and image capture system thereof
TWI519155B (zh) * 2012-02-24 2016-01-21 宏達國際電子股份有限公司 影像連續拍攝方法與相關影像擷取系統
US20140078343A1 (en) * 2012-09-20 2014-03-20 Htc Corporation Methods for generating video and multiple still images simultaneously and apparatuses using the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070285736A1 (en) * 2006-06-13 2007-12-13 Alpha Imaging Technology Corp. Image acquisition device
US7715660B2 (en) * 2006-06-13 2010-05-11 Alpha Imaging Technology Corp. Image acquisition device
US20100231735A1 (en) * 2009-03-13 2010-09-16 Nokia Corporation Methods, Apparatuses, and Computer Program Products for Facilitating Concurrent Video Recording and Still Image Capture
US20100321530A1 (en) * 2009-06-18 2010-12-23 Samsung Electronics Co., Ltd. Apparatus and method for reducing shutter lag of a digital camera
US20110109766A1 (en) * 2009-11-10 2011-05-12 Jong Ho Roh Camera module for reducing shutter delay, camera including the same, and method of driving the same
US20110261217A1 (en) * 2010-04-21 2011-10-27 Nokia Corporation Image processing architecture with pre-scaler
CN102546925A (zh) * 2010-12-29 2012-07-04 Lg电子株式会社 移动终端及其控制方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108886608A (zh) * 2016-03-31 2018-11-23 富士胶片株式会社 白平衡调整装置及其工作方法和工作程序
CN105959557A (zh) * 2016-06-07 2016-09-21 深圳市万普拉斯科技有限公司 拍照方法和装置
CN105959557B (zh) * 2016-06-07 2019-05-10 深圳市万普拉斯科技有限公司 拍照方法和装置
CN106453886B (zh) * 2016-09-30 2019-07-26 维沃移动通信有限公司 一种移动终端的拍照方法及移动终端
CN106453886A (zh) * 2016-09-30 2017-02-22 维沃移动通信有限公司 一种移动终端的拍照方法及移动终端
CN108370414A (zh) * 2016-10-29 2018-08-03 华为技术有限公司 一种拍摄方法和终端
CN106341610A (zh) * 2016-11-25 2017-01-18 广东欧珀移动通信有限公司 拍照方法及移动终端
CN106657788A (zh) * 2016-12-28 2017-05-10 深圳众思科技有限公司 电子设备的图像处理方法及电子设备
CN107592450A (zh) * 2017-08-30 2018-01-16 珠海市君天电子科技有限公司 一种媒体数据处理方法及装置
CN111988518A (zh) * 2019-05-23 2020-11-24 三星电子株式会社 具有能切换视线的相机模块的电子装置及录制视频的方法
CN114631306A (zh) * 2019-11-01 2022-06-14 三星电子株式会社 用于提供预览的方法和用于显示预览的电子装置
CN114631306B (zh) * 2019-11-01 2024-05-28 三星电子株式会社 用于提供预览的方法和用于显示预览的电子装置
CN112217990A (zh) * 2020-09-27 2021-01-12 北京小米移动软件有限公司 任务调度方法、任务调度装置及存储介质
CN112217990B (zh) * 2020-09-27 2024-04-09 北京小米移动软件有限公司 任务调度方法、任务调度装置及存储介质
CN112672093A (zh) * 2020-12-23 2021-04-16 北京市商汤科技开发有限公司 视频显示方法、装置、电子设备及计算机存储介质
CN114286007A (zh) * 2021-12-28 2022-04-05 维沃移动通信有限公司 图像处理电路、图像处理方法、电子设备和可读存储介质
CN115529453A (zh) * 2022-08-10 2022-12-27 北京罗克维尔斯科技有限公司 车载摄像头的测试方法和装置

Also Published As

Publication number Publication date
IN2015DN00563A (zh) 2015-06-26
EP2693737B1 (en) 2019-05-22
AU2013297221A1 (en) 2015-03-05
AU2013297221B2 (en) 2016-11-24
KR20140018686A (ko) 2014-02-13
KR101917650B1 (ko) 2019-01-29
US20140036108A1 (en) 2014-02-06
EP2693737A3 (en) 2014-04-09
AU2013297221A2 (en) 2015-03-12
EP2693737A2 (en) 2014-02-05
US9225905B2 (en) 2015-12-29
CN104521227B (zh) 2017-12-08
WO2014021692A1 (en) 2014-02-06

Similar Documents

Publication Publication Date Title
CN104521227A (zh) 图像处理方法和设备
EP4131926A1 (en) Viewfinding method for multichannel video recording, graphic user interface, and electronic device
CN110493538B (zh) 图像处理方法、装置、存储介质及电子设备
KR102045957B1 (ko) 휴대단말의 촬영 방법 및 장치
CN102546925B (zh) 移动终端及其控制方法
CN104333701A (zh) 一种相机预览画面的显示方法、装置及终端
CN104954719B (zh) 一种视频信息处理方法及装置
CN105245777A (zh) 生成视频图片的方法及装置
US20240365002A1 (en) Image capture method, and related apparatus and system
US20210127020A1 (en) Method and device for processing image
CN115359105B (zh) 景深扩展图像生成方法、设备及存储介质
US20150215514A1 (en) Device for wirelessly controlling a camera
WO2022095712A1 (zh) 数据分享方法、装置、系统及电子设备
CN118042280A (zh) 图像处理方法、电子设备、计算机程序产品及存储介质
KR102028125B1 (ko) Ｉｐ주소를 이용하여 어플리케이션을 자동으로 구동하는 방법 및 장치
CN118018835A (zh) 图像拍摄方法、装置、摄像设备及存储介质
CN106527442B (zh) 平衡车控制系统
CN109981729A (zh) 文件处理方法、装置、电子设备及计算机可读存储介质
CN117082295B (zh) 图像流处理方法、设备及存储介质
US9185337B2 (en) Device and method for making quick change to playback mode after photographing subject
CN116320784B (zh) 图像处理方法及装置
RU2809660C1 (ru) Способ кадрирования для записи многоканального видео, графический пользовательский интерфейс и электронное устройство
CN107105182B (zh) 视频备份方法及装置
CN118382012A (zh) 一种图像处理方法及装置、电子设备、存储介质
CN114449211A (zh) 拍摄方法及装置、电子设备、存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant