CN107408401B - 用于图像的简化调整的用户滑块 - Google Patents

用于图像的简化调整的用户滑块 Download PDF

Info

Publication number
CN107408401B
CN107408401B CN201680017397.2A CN201680017397A CN107408401B CN 107408401 B CN107408401 B CN 107408401B CN 201680017397 A CN201680017397 A CN 201680017397A CN 107408401 B CN107408401 B CN 107408401B
Authority
CN
China
Prior art keywords
image
user
slider
effect
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680017397.2A
Other languages
English (en)
Other versions
CN107408401A (zh
Inventor
丹尼尔·佩蒂格鲁
杰森·张
罗纳德·弗兰克·沃茨罗
谢夫凯特·德林·巴巴肯
阿拉温德·克里希纳斯瓦米
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN107408401A publication Critical patent/CN107408401A/zh
Application granted granted Critical
Publication of CN107408401B publication Critical patent/CN107408401B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/94Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/92Dynamic range modification of images or parts thereof based on global image properties
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Image Processing (AREA)

Abstract

描述了用于通过对图像施加效果来修改图像的方法和系统。效果包括对图像的突出效果、光调节、或者色彩调节。方法和系统包括提供用户滑块以用于向图像施加效果。方法和系统进一步包括确定包括面部的图像的第一部分以及创建保护遮掩来在图像修改期间保护第一部分中的面部。保护遮掩可以包括用于修改图像的第一部分的增强阈值。图像的修改可以包括不同于图像的第一部分而修改图像的第二部分。还描述了用于实施相同输入图像的不同分辨率以产生相似视觉结果的方法。

Description

用于图像的简化调整的用户滑块
相关申请的交叉引用
本申请根据35U.S.C.§119(e)要求2015年3月27日提交的题为“User Sliders forSimplified Adjustments of Images(用于图像的简化调整的用户滑块)”的美国临时专利申请No.62/139,621的优先权,其在此通过援引整体加入进来。
背景技术
使用现有照片编辑应用的消费者通常希望改进他们的数字图像的整体“外观”。某些常规图像编辑应用提供无数的控制,通常由滑块、曲线和取色器的组合构成。尽管专业拍摄者知道这些不同控制的含义且通常具有典型工作流或方法来浏览这些控制,一般用户通常对这些控制不足够熟悉以最好地利用它们。一般用户很可能触摸每个控制直到用户某种程度上对结果满意,但是并不确信他/她施加了最优的滑块和控制操作的组合。
此外,现有照片编辑应用不为不同分辨率下的相同输入图像提供相似视觉结果。用户一旦(a)增强图像以带出细节(施加“突出(pop)”)并且减小图像的尺寸,或者(b)减小原始图像的尺寸然后施加“突出”,将期望得到的图像在这两个操作之后看上去相似。这在许多编辑应用中尤其重要,因为用户可以在较低分辨率(例如屏幕分辨率)图像上进行编辑,但他们的编辑可以对于原始高分辨率图像施加和保存。如果对于这些操作使用相同的参数集合,则通常在许多常规图像编辑应用中的结果并不相同。
而且,现有照片编辑应用不提供有效方法来在保护图像中的皮肤色调或面部时增强图像的局部对比度和饱和度。这些编辑应用所执行的增强的量通常对于面部太强,这导致不想要的且视觉上不是非常好的效果。
发明内容
本说明书涉及用于图像的光调节和/或色彩调节的图像处理技术。
示例实现方式提供用户界面以启用图像中的简单和直观的色彩和/或光调节以及处理。根据本公开中描述的主题的一个方面,一种系统包括处理器;以及存储指令的存储器,所述指令当被执行时使得所述系统:接收选择图像以用于修改的输入;确定图像中的面部;确定包括面部的图像的第一部分;确定所述图像的第一部分的增强阈值;提供用户滑块以用于修改图像;响应于所述用户滑块被选择以施加效果,增强图像的第二部分,所述图像的第二部分排除了所述第一部分;响应于所述用户滑块被选择,在不超过增强阈值的情况下增强所述图像的第一部分;以及存储增强的图像。
一般地,本公开中所述的主题的另一方面包括一种用于向图像施加效果的方法。所述方法包括:使用一个或多个计算设备接收选择图像以用于修改的输入;使用所述一个或多个计算设备确定图像中的面部;使用所述一个或多个计算设备确定包括面部的图像的第一部分;使用所述一个或多个计算设备确定所述图像的第一部分的增强阈值;使用所述一个或多个计算设备提供用户滑块以用于修改图像;响应于所述用户滑块被选择,使用所述一个或多个计算设备增强图像的第二部分,所述图像的第二部分排除了所述第一部分;响应于所述用户滑块被选择,使用所述一个或多个计算设备在不超过增强阈值的情况下增强所述图像的第一部分;以及使用所述一个或多个计算设备存储增强的图像。
一个或多个这些方面的其他实现方式包括相应的系统、装置和计算机程序,被配置为执行在计算机存储设备上编码的方法的动作。
这些和其他实现方式每个可以可选地包括以下特征中的一个或多个。例如,操作进一步包括,当效果是突出效果时,用户滑块控制突出效果,且方法包括:使用一个或多个计算设备基于所述用户滑块来确定所述突出效果的量以向所述图像施加;使用所述一个或多个计算设备通过将所述突出效果施加到所述图像的第一部分来调节所述图像;以及使用所述一个或多个计算设备基于所述用户滑块而将所述突出效果施加到所述图像的第二部分。例如,所述突出效果包括以下组中的一个:饱和度提升、亮度调节、局部对比度的使用以增强图像的细节。
例如,操作进一步包括,当所述效果是光调节时,所述用户滑块控制对所述图像的光调节,且所述方法包括:使用所述一个或多个计算设备基于使用所述用户滑块所选择的所需光调节量而扩展直方图范围以包括光调节的可用范围并展开分布;使用所述一个或多个计算设备基于所需光调节量而调节与图像相关联的阴影或高光细节;以及使用所述一个或多个计算设备基于所需光调节量而调节与图像相关联的伽马。
例如,其中所述修改是将所述图像的尺寸重新调整到固定较小分辨率图像,操作进一步包括:使用所述一个或多个计算设备确定被饱和的所述图像中的色彩;以及使用所述一个或多个计算设备基于使用所述用户滑块所选择的色彩调节量而使所述图像的第二部分饱和。
一般地,本公开中所公开的主题的另一方面可以体现为方法,其包括:使用所述一个或多个计算设备确定金字塔层级数以匹配一些预先定义的固定较低分辨率图像;使用所述一个或多个计算设备选择重新映射层级为从金字塔层级的顶层的固定偏移;以及使用所述一个或多个计算设备施加局部拉普拉斯平滑以确保为不同尺寸的图像处理相似频带以产生用于固定较小分辨率图像的相似视觉结果。
例如,特征可以包括提供用户滑块以用于修改图像,所述用户滑块具有突出滑块、色彩滑块、光滑块以及图像的预览。
本发明旨在不管图像的分辨率而改进图像的图像质量的技术问题。更具体地,本发明解决了产生高视觉质量并降低由用户手工设置图像校正的复杂度的技术问题。本发明有利地包括滑块集合,所述滑块使用图像分析来确定用于执行图像增强的操作以解决控制复杂度问题。这些滑块的一个优点在于捕捉专业拍摄者的习惯,并且在用户操作滑块以增强图像时复制其典型工作流。本发明的另一优点在于其包括有效方式来实施相同输入图像的不同分辨率以产生相似视觉结果。又一个优点在于本发明包括独特的混合和遮掩技术以保护图像中的面部不被增强太多且产生视觉上更好的结果。
附图说明
在附图的各个图中,通过示例,而不是通过限制,来对说明书进行图示说明;附图中,相似参考标记用于指代相似元素。
图1是图示说明用于使用用户滑块增强图像的示例系统的框图。
图2是图示说明示例计算设备的框图。
图3A-3E是图示说明用于使用用户滑块增强图像的示例方法的流程图。
图4是用于增强图像的局部对比度和饱和度的示例方法。
图5是用于实施相同输入图像的不同分辨率以产生相似视觉效果的示例方法。
图6A-6C是描绘活动中的用户滑块的示例用户界面。
图7是比较本公开中描述的图像增强方法与现有的图像增强方法的图形表示。
图8是图示说明用于示例图像的活动中的光调节滑块的图形表示。
图9是图示说明用于另一示例图像的活动中的光调节滑块的图形表示。
图10A和10B是图示说明在用于示例图像的光调节滑块的操作期间的范围扩展和阴影细节调节的图形表示。
图11是图示说明用于示例图像的活动中的光调节滑块的图形表示。
图12是图示说明用于另一示例图像的活动中的光调节滑块的图形表示。
图13是图示说明用于增强示例图像的活动中的光调节滑块的示例图形表示。
图14是图示说明用于使示例图像饱和的活动中的色彩调节滑块的示例图形表示。
图15是图示说明用于使示例图像去饱和的活动中的色彩调节滑块的示例图形表示。
图16是图示说明用于增强示例图像的包括活动中的光调节滑块、色彩调节滑块和突出调节滑块的用户滑块的示例图形表示。
图17是图示说明,与现有方法之一的图像增强相比,当使用光调节滑块、色彩调节滑块和突出调节滑块中一个或多个来增强图像时怎样保留辉度的示例图形表示。
图18是图示说明对示例图像施加色调不变渲染意图的示例图形表示。
图19是图示说明使用相同参数集合的情况的示例图形表示。
图20是用金字塔层级数来图示说明两个金字塔的示例图形表示。
图21是图示说明金字塔的建造的示例图形表示。
图22是图示说明不同重新映射层级的选择的示例图形表示。
图23是图示说明限制突出效果的示例的示例图形表示。
具体实施方式
现有照片编辑应用遭受着某些技术问题。具有许多控制的现有照片编辑用户界面,可能使一般用户困惑。一般用户使用各种现有控制可能不能确信他们已经向图像施加了编辑的最优组合。某些现有照片编辑应用不为不同分辨率下的输入图像提供相似视觉结果。某些现有照片编辑应用将编辑施加于整个图像,通常导致编辑对于图像中所包括的面部而言太强。
在某些实现方式中,提供计算机系统和计算机执行的方法,其包括对上面讨论的技术问题的技术解决方案。具体地,计算机系统和计算机执行方法实现一个或多个图像处理或编辑用户界面,其直观且相当易于使用,并且其使得用户能够获得他们图像的想要的“外观”(例如更多或更少亮度、更多或更少色彩,等等)。示例系统或方法经由一个或多个滑块接收用户输入(用户向左或向右移动滑块),分析图像,以及基于用户输入和分析来增强图像。基于图像分析和图像细节(例如光、阴影、色彩、对比度等等)来确定增强。
在某些实现方式中,计算机系统和计算机执行的方法提供有效方式来实施使得相同图像在不同分辨率下的图像编辑生成基本相同的视觉结果。这是通过确定金字塔层级数以匹配固定最低分辨率图像(例如100x100)然后选择重新映射层级为从金字塔顶部的固定偏移而完成的。这确保对于不同尺寸的图像处理相似频带,其最终产生对于不同分辨率图像的相似结果。应该理解,可以根据固定最低分辨率图像而使用不同的金字塔层级数。
在某些实现方式中,计算机系统和计算机执行的方法使得独特混合和遮掩技术能够保护图像中的面部不被增强太多且产生视觉上更加好的结果。这里所述的系统和方法是通过在图像的特定部分上(例如人面部)限制突出效果的量而在面部以外的像素上允许效果发挥其完全效果而实现这一点的。在一些实现方式中,在面部上和/或周围使用模糊几何形状(例如矩形、椭圆形等等)以限制效果。示例的模糊矩形是通过用框滤波器来模糊面部边界框来生成的。产生的卷积可以以封闭形式计算。根据信号处理理论,用另一矩形来模糊一矩形将得到梯形。输出的任意点上的值可以仅仅取决于到矩形的距离,其可以用每像素的固定时间来计算,而不管模糊内核尺寸。在某些其他实现方式中,不同几何形状(例如椭圆形、圆形)可以用来保护图像的特定部分。在某些实现方式中,形状可以基于针对图像执行的对象或面部检测而生成。例如,被确定为包含面部的图像的一部分可以被指定为在其上用来限制突出效果的形状。
图1图示说明了用于使用用户滑块增强图像的示例系统100的框图。所图示说明的系统100具有通常由用户114a到114n利用来经由网络访问托管网站的服务器的用户(或客户端)设备106a到106n。系统100可以包括图像服务器134,用于增强、处理和存储图像。在所图示说明的示例中,这些实体经由网络102通信耦合。
应该认识到,在图1中以及用于图示说明技术的其他附图中,参考标记之后的字母的指示,例如“106a”,是对由该特定参考标记所指示的元素或部件的特定参考。在文本中出现参考标记而没有字母跟随其后的情况下,例如“106”,应该认识到,这是对具有该一般性参考标记的元素或部件的不同实现方式的一般性参考。而且,尽管只有两个用户设备在图1中示出,本领域普通技术人员将认识到,任意数量的客户端设备106n可由任意数量的用户114n使用。
网络102可以是常规类型、有线或无线,且可以具有多个不同配置,包括星形配置、令牌环配置或其他配置。而且,网络102可以包括局域网(LAN)、广域网(WAN)(例如因特网)和/或多个设备可以在其上通信的其他互连数据路径。在一些实现方式中,网络102可以是点对点网络。网络102还可以耦合到或包括部分电信网络,用于以各种不同通信协议发送数据。在一些其他实现方式中,网络102包括蓝牙通信网络或蜂窝通信网络,用于发送和接收数据,包括经由短信服务(SMS)、多媒体消息服务(MMS)、超文本传输协议(HTTP)、直接数据连接、无线应用协议(WAP)、电子邮件等等。此外,尽管图1图示说明单个网络102耦合到所图示的用户设备106和图像服务器134,实际上,可以有一个或多个网络102连接到这些实体。
举例来说,使用图1中的用户设备106a到106n。尽管仅图示了两个用户设备106,公开的内容适用于具有可用于任意数量的用户114的任意数量的用户设备106的系统架构。在图示的实现方式中,用户114a到114n与用户设备106a和106n分别经由信号线112a到112n而交互。用户设备106a到106n分别经由信号线104a到104n通信耦合到网络102。
在一些实现方式中,用户设备106(106a到106n中的任意或全部)可以是任何计算设备,包括存储器和处理器。例如,用户设备106可以是笔记本电脑、桌面电脑、平板电脑、移动电话、个人数字助理、移动电子邮件设备、便携游戏播放器、便携音乐播放器、具有一个或多个嵌入其中或与之耦合的处理器的电视或者能够访问网络102的任何其他电子设备等等。
在一些实现方式中,用户设备106a到106n包括用户应用108(图示为108a到108n)以及图像增强引擎136。用户114(114a到114n)使用用户应用108来视情况与图像增强引擎136以及图像服务器134交换信息,完成本技术的操作。作为一个示例,用户114可以使用包括在用户应用108a中的用户滑块110a对图像进行光和/或色彩调节,并且可以基于来自图像增强引擎136的这些调节而经由用户应用108接收结果。用户应用108的进一步的行为和/或功能在下面结合至少图2更加详细地进行描述。
这里讨论的系统和方法不要求收集或使用用户个人信息。在这里讨论的某些实现方式可能收集或使用有关用户的个人信息(例如用户数据、有关用户社交网络的信息、用户位置、用户生物计量信息、用户活动以及人口统计信息)的情况下,向用户提供一个或多个机会来控制是否收集个人信息,是否存储个人信息,是否使用个人信息,以及怎样收集、存储和使用有关用户的信息。也就是,这里讨论的系统和方法只在从相关用户接收到明确授权这样去做时才收集、存储和/或使用用户个人信息。此外,某些数据在其被存储或使用之前可以用一个或多个方式来处理,使得个人可识别信息被去除。作为一个示例,用户的身份可以被处理,使得没有个人可识别信息可以被确定。作为另一示例,用户的地理位置可以被广义化到更大的区域,使得用户的特定位置不能被确定。
在一些实现方式中,用户应用108要求用户同意允许用户应用108和/或这里其他地方所讨论的其他部件处理信息和图像。如果用户不同意,用户应用108不会处理与用户相关的任何信息。
图像服务器134可以是计算设备,包括处理器、存储器和网络通信能力。图像服务器134经由信号线132耦合到网络102。图像服务器134可以被配置为经由网络102从用户设备106(106a到106n)获得多个图像用来增强。尽管只有一个图像服务器134被示出,本领域普通技术人员将认识到可以使用多个服务器,以分布式架构或其他架构。出于这个应用的目的,系统配置和系统所执行的操作在单一图像服务器134的环境下描述。
在一些实现方式中,图像服务器134包括图像增强引擎136用于图像增强。图像增强引擎136可以从用户应用108接收在用户滑块110上的用户输入,并且然后基于所接收到的在滑块110上的用户输入而修改图像。例如,使用光调节滑块的用户114可以提供输入来使图像增亮,且图像增强引擎136可以分析图像并且基于在光调节滑块上接收到的所需用户输入而调亮图像。通过另一示例,使用色彩调节滑块的用户114可以提供输入以使图像饱和,且图像增强引擎136可以分析图像并且基于在色彩调节滑块上接收到的所需用户输入来使其饱和。许多其他示例也是可能的且考虑到的。
如图1中所描绘的,图像增强引擎136以虚线示出以指示这里所述的图像增强引擎136所执行的操作可以在服务器侧(例如图像服务器134)执行或者在用户侧(例如用户设备106a到106n)执行,或者在二者的组合下执行。图像增强引擎136的附加结构、动作和/或功能在下面结合至少图2更详细来描述。
图2是示例计算设备200的框图,其可以代表图像服务134和/或用户设备106中包括的计算设备。如所描绘的,计算设备200可以包括处理器216、存储器218、通信单元220、数据存储222、一个或多个用户应用108、以及图像增强引擎136,其可以通过通信总线214通信耦合。
根据配置,计算设备200可以包括不同部件。例如,在服务器侧实现方式中,计算设备200可以包括图像增强引擎136。在示例客户端侧实现方式中,计算设备200可以包括用户应用108和/或图像增强引擎136。应该理解,上面的配置是举例提供的,并且许多进一步的配置可被考虑且是可能的。
处理器216可以通过执行各种输入、逻辑和/或数学运算来执行软件指令。处理器216可以具有各种计算架构到方法数据信号,包括例如复杂指令集计算机(CISC)架构、精简指令集计算机(RISC)架构、和/或实现指令集组合的架构。处理器216可以是物理的和/或虚拟的,并且可以包括单一核或多个处理单元和/或核。在一些实现方式中,处理器216可能能够生成和提供电子显示信号到显示设备,支持图像的显示,捕捉和传输图像,执行包括各种类型的特征提取和采样的复杂任务等等。在一些实现方式中,处理器216可以经由总线214耦合到存储器218以从中访问数据和指令以及在其中存储数据。总线214可以将处理器216耦合到计算设备200的其他部件,包括例如存储器218、通信单元220以及数据存储222。
存储器218可以存储和提供对数据的访问给计算设备200的其他部件。在一些实现方式中,存储器218可以存储可由处理器216执行的指令和/或数据。存储器218还能够存储其他指令和数据,包括例如操作系统、硬件驱动、其他软件应用、数据库等等。存储器218可以耦合到总线214以与处理器216和计算设备200的其他部件通信。
存储器218可以包括非瞬时计算机可用(例如,可读、可写等等)介质,其可以是任何非瞬时装置或设备,能够包含、存储、传送、传播或运送指令、数据、计算机程序、软件、代码、例程等等,以便由或与处理器216相关进行处理。在一些实现方式中,存储器218可以包括一个或多个易失性存储器和非易失性存储器(例如RAM、ROM、硬盘、光盘等等)。应该理解,存储器218可以是单个设备或者可以包括多种类型的设备和配置。
总线214可以包括用于在计算设备的部件之间或者计算设备之间传送数据的通信总线,包括网络102或其部分的网络总线系统、处理器网、上述组合等等。在一些实现方式中,用户应用108和图像增强引擎136可以经由关联于总线214而实现的软件通信机制来协作且通信。软件通信机制可以包括和/或促进例如过程间通信、本地功能或流程调用、远程流程调用、基于网络的通信、安全通信等等。
通信单元220可以包括一个或多个接口设备用来与网络102以及包括例如用户设备106、图像服务器134和数据存储222等等的系统100的其他实体和/或部件进行有线和无线连接。例如,通信单元220可以包括,但不限于,CAT型接口;无线收发信机,用于使用Wi-Fi、蓝牙、蜂窝通信等等发送和接收信号;USB接口;其各种组合;等等。通信单元220可以经由信号线104和132耦合到网络102。在一些实现方式中,通信单元220可以将处理器216链接到网络102,网络102又可以耦合到其他处理系统。通信单元220能够使用各种标准通信协议,包括例如这里在别处讨论的那些,提供其他连接到网络102以及到系统100的其他实体。
数据存储222是信息源,用于存储数据和提供对数据的访问。在一些实现方式中,数据存储222可以经由总线214耦合到计算设备200的部件216、218、220、108和/或136以便接收数据和提供对数据的访问。在一些实现方式中,数据存储222可以存储从系统100的其他实体106和/或134接收到的数据,并且提供对这些实体的数据访问。数据存储222可以包括一个或多个非瞬时计算机可读介质,用于存储数据。在一些实现方式中,数据存储222可以与存储器218合并或者可以与之不同。在一些实现方式中,数据存储222可以包括数据库管理系统(DBMS)。例如,DBMS可以包括结构化查询语言(SQL)DBMS、NoSQL DMBS、其各种组合等等。在一些实例中,DBMS可以以由行和列组成的多维度表存储数据,并且使用编程操作来操纵,例如插入、查询、更新和/或删除,数据的行。在一些实现方式中,数据存储222可以在图像已被使用用户滑块110更改之后存储增强图像。
如所描绘的,用户应用108包括用户滑块110。用户滑块110可以包括光调节滑块、色彩调节滑块以及突出调节滑块中一个或多个的组合。光调节滑块可以是增加/降低图像的亮度(brightness)的滑块,如例如在图6B中所示。色彩调节滑块可以是使得图像饱和/去饱和的滑块,如例如在图6C中所示。突出调节滑块可以是提升图像中饱和度和亮度的滑块,如例如在图16中所示。
在一些实现方式中,这些滑块110中的每个可以与图像增强引擎136的一个或多个部件配合来执行这里所讨论的其操作。例如,光调节滑块可以与图像增强引擎136的用户界面模块202、图像分析器204、光调节模块206和图像完成模块212配合来增加/降低图像的亮度。色彩调节滑块可以与图像增强引擎136的用户界面模块202、图像分析器204、色彩调节模块208和图像完成模块212配合来使图像饱和/去饱和。
如所描绘的,图像增强引擎136包括用户界面模块202、图像分析器204、光调节模块206、色彩调节模块208、突出效果模块210和图像完成模块212。图像增强引擎136的部件202、204、206、208、210和212耦合用于彼此通信以及与计算设备200的其他部件108、110、216、218和220通信。部件202、204、206、208、210和212还经由通信单元220耦合到网络102以便与系统100的其他实体通信。
在一些实现方式中,用户界面模块202、图像分析器204、光调节模块206、色彩调节模块208、突出效果模块210和图像完成模块212是可由处理器216执行的指令集以提供它们相应的动作和/或功能。在其他实现方式中,用户界面模块202、图像分析器204、光调节模块206、色彩调节模块208、突出效果模块210和图像完成模块212存储在计算设备200的存储器218中且可由处理器216访问和执行以便提供它们相应的动作和/或功能。在这些实现方式中的任何一个中,用户界面模块202、图像分析器204、光调节模块206、色彩调节模块208、突出效果模块210和图像完成模块212可以适用于与处理器216和计算设备200的其他部件108、110、218和220协作和通信。
用户界面模块202可以是用于执行包括用于从用户滑块110接收用户输入然后将这些输入发送到图像增强引擎136的一个或多个其他部件来在其上执行它们相应的动作和/或功能的例程的步骤、处理、功能或设备。在一些实现方式中,来自用户滑块110的用户输入可以包括,例如,使用光调节滑块来调节图像的光的输入、使用色彩调节滑块来调节图像的色彩的输入以及使用突出调节滑块来调节图像的突出效果的输入。在一些实现方式中,用户界面模块202还可以被配置为从图像增强引擎136的其他部件接收图像增强结果然后基于这些结果提供图像以便向用户显示。
图像分析器204可以是用于执行包括用于分析已由用户选择进行图像增强的图像的例程的步骤、处理、功能或设备。在一些实现方式中,分析图像可以包括确定与图像相关联的当前光细节、与图像相关联的当前色彩细节(例如,图像中哪些色彩已经饱和以及不饱和、图像是否过饱和、图像中的饱和强度等等)、与图像相关联的一个或多个保护区域(例如图像中的皮肤色调、图像中存在的一个或多个人物等等)等等。在一些实现方式中,图像分析器可以发送其分析的结果到光调节模块206、色彩调节模块208、突出效果模块210和/或图像完成模块212,这些模块可以随后使用这些结果来作为它们的操作的基础。
光调节模块206可以是用于执行包括用于调节图像的光的例程的步骤、处理、功能或设备。在一些实现方式中,调节图像的光可以包括如这里其他地方所讨论地调亮或调暗图像。在一些实现方式中,光调节模块206可以基于图像分析器确定图像的光细节而调亮图像。光调节模块206可以通过1)扩展与图像相关联的直方图的范围以广阔地展开分布并占据用于光调节的可用范围,2)调节与图像相关联的阴影细节,或者3)应用伽马提升或校正,如讨论的,例如在图3D和8中,而调亮图像。阴影调节指的是执行图像处理以校正曝光(每单位面积的光量)。伽马是用于在视频或静止图像中调节辉度(luminance)或三色值的非线性操作。光调节模块206可以与在光调节滑块上接收到的用户输入相配合而执行这里所述的其操作。
在一些实现方式中,光调节模块206可以基于图像分析器确定图像的光细节而调暗图像。光调节模块206可以通过1)扩展与图像相关联的直方图的范围以广泛地展开分布并占据光调节的所有可用范围,2)调节与图像相关联的高光细节,或3)降低与图像相关联的伽马,如所讨论的,例如在图3D和11中,而调暗图像。在一些实现方式中,一旦光调节模块206完成执行这里所述的其光调节,光调节模块206可以发送其光调节到图像完成模块212,图像完成模块212可以随后使用这些调节和其他进一步的调节以完成图像以便向用户显示。
色彩调节模块208可以是用于执行包括用于调节图像的色彩的例程的步骤、处理、功能或设备。在一些实现方式中,调节图像的色彩可以包括如这里其他地方所讨论的使图像饱和或去饱和。在一些实现方式中,色彩调节模块208可以基于用户在色彩调节滑块中的当前位置来使图像饱和或去饱和。色彩调节模块208可以从用户界面模块202接收用户在滑块中的当前位置,该用户界面模块202通信耦合到用户滑块110以接收滑块上的用户输入。
如果用户在滑块中的当前位置超越第一方向(例如右或上)上的中点位置,色彩调剂模块208可以确定用户想要使图像饱和且随后可以通过1)使还未饱和的图像中的色彩饱和,和/或2)在饱和过程中保护图像中的人物的皮肤色调,来使图像饱和。另一方面,如果用户在滑块中的当前位置超越第二方向(例如左或下)上的中点位置,色彩调节模块208可以确定用户想要使图像去饱和且随后可以通过基于用户在滑块中的当前位置所反映出的去饱和的量来使还未去饱和的图像中的色彩去饱和来使图像去饱和。在一些实现方式中,一旦色彩调节模块208完成了执行这里所述的其色彩调节,色彩调节模块208可以发送其色彩调节到图像完成模块212,该图像完成模块212随后可以使用这些调节和其他进一步的调节来完成图像以便向用户显示。
突出效果模块210可以是用于执行包括用于将突出效果施加到图像的例程的步骤、处理、功能或设备。施加突出效果可以包括向图像添加饱和度提升、调节图像的亮度、或者使用局部对比度来增强图像的细节。在一些实现方式中,突出效果可以在光调节模块206和/或色彩调节模块208所执行的光调节和/或色彩调节之前被施加。在其他实现方式中,突出效果可以在图像增强的过程期间的任何时间被施加。在一些实现方式中,一旦突出效果模块210完成施加这里所述的其突出效果,突出效果模块210可以将突出效果发送到图像完成模块212,该图像完成模块212随后可以使用这些效果以及其他进一步的调节来完成图像以便向用户显示。有关突出效果的额外描述在下面结合至少图3B、3C、4和5来进一步讨论。
图像完成模块212可以是用于执行包括用于完成图像以便向用户显示的例程的步骤、处理、功能或设备。在一些实现方式中,图像完成模块212可以基于由光调节模块206、色彩调节模块208以及突出效果模块210分别完成的光、色彩和/或突出调节来完成图像,然后,如果需要,对图像施加色调不变渲染意图,如例如在图18中所讨论的。在一些实现方式中,图像完成模块212可以施加一些其他滤波器或图像增强技术来进一步增强图像。一旦图像被完成,图像完成模块212可以将完成的图像发送到用户界面模块202,该用户界面模块202随后可以提供其以便用户显示。
用户界面模块202、图像分析器204、光调节模块206、色彩调节模块208、突出效果模块210以及图像完成模块212的额外结构、动作和/或功能在下面结合至少图3A-3E以及图4和5来进一步描述。
方法
图3A-3E是图示说明用于使用用户滑块来增强图像的示例方法300的流程图。方法300开始于接收302选择图像以用于增强的用户输入,并且提供304用户滑块集合,包括光调节滑块、色彩调节滑块和突出效果滑块,以便向用户显示。在一些实现方式中,块302和304中的操作可以由用户应用108来执行或者以不同次序来执行。例如,用户应用可以是安装在用户设备上的照片应用,并且该照片应用可以在接收到用户对图像增强的选择之后提供用户滑块以便向用户显示,如例如在图6A中所描绘的。
方法300通过接收306从向用户显示的用户滑块集合中选择所需滑块的另一用户输入继续。在一些实现方式中,可以接收来自一个以上的滑块的输入。方法300随后可以在块308、310和312中确定用户选择分别是突出效果滑块、光调节滑块还是色彩调节滑块。应该理解,这些块308、310和312可以以不同于图3A所示的其它次序来执行。例如,块310可以在块308之前执行。如果确定的结果是突出效果滑块,则方法300可以前进到块316(参见图3B)以分析图像并在块318中确定图像是否包括任何保护区域。保护区域是其中增强将不施加或与图像剩余部分不同地施加的图像区域。在一些实现方式中,保护区域被自动定义,而在其他实现方式中是基于用户输入而手动定义的。在一些实现方式中,保护区域不需要包括面部但这完全是用户可定义的。例如,方法300可以在块318中经由面部检测确定图像是否包括任何人物面部且如果有的话,则以保护面部区域的方式来施加突出效果。在一些实现方式中,突出效果可以通过将突出效果在面部区域中施加到预先确定的阈值而施加以保护面部区域。在某些情况下,突出效果可以在面部区域施加到第一程度而在不具有任何人物面部的图像的区域中施加到不同的第二程度。在一些情况下,第一程度可以低于第二程度。例如,相同量的突出效果可以向图像的面部区域和非面部区域施加到特定水平,并且然后突出效果可以继续施加于图像剩余部分,而面部区域突出效果则保持在特定水平。在一些实现方式中,突出效果可以逐渐施加给面部区域周围边界的不同区。这些区域可以由保护遮掩来定义。保护遮掩是与保护区域匹配的一般边界,并且在其中将不施加或不同地施加增强。例如,对于图23,保护遮掩2302不是硬边界,但从保护遮掩到图像剩余部分逐渐褪色。
如果方法300确定图像的像素不是保护区域的一部分,方法300可以简单前进到提升320饱和度(如果这些像素需要)、调节322亮度(即增加/降低)(如果这些像素需要)、以及使用324局部对比度来增强非保护区域的细节,如这里其他地方所讨论的。另一方面,如果方法300在块318确定像素在图像中的保护区域内,则方法300可以提升326该区域的饱和度只到达某个预先确定的阈值,可以调节328该区域的亮度只到达某个预先确定的阈值,并且可以使用330局部对比度来增强该区域的细节只到达某个预先确定的阈值。这样做以将图像只调亮到某个水平并且保持在图像中标识出的人物的皮肤色调不变。
在一些实现方式中,方法300可以仍旧施加突出效果给保护区域,但是是以不同于施加到未保护区域的第一水平的第二预先确定的水平,其可以仍旧以适当增强水平保持保护区域,但不同于图像剩余部分(例如,保持等价于皮肤色调和逼真外观的色彩)。这在图3C中进一步图示说明。现在参看图3C,如果方法300确定在块316中分析的图像中存在保护区域,方法300可以在保护区域内以第二预先确定的速率提升332饱和度,可以在保护区域内以第二预先确定的速率调节334亮度,并且可以在保护区域内以第二预先确定的速率使用336局部对比度来增强图像的细节。在一些实现方式中,图3B和3C中描绘的块中的操作由图像分析器204和突出效果模块210配合用户滑块110中包括的突出调节滑块来执行。
回到图3A,如果确定的结果是光调节滑块,则方法300可以前进以在块338或340中(参见图3D)分别确定是否调亮图像或调暗图像。如果方法300确定调亮338图像,方法300可以前进并基于用户在光调节滑块中的当前光标位置来调节341图像中的高光细节。接下来,方法300可以基于用户在光调节滑块中的当前光标位置来扩展342直方图范围以使用所有可用范围(例如,参见图8、10A、11和13)。方法300继续调节344图像中的阴影细节,并且然后基于用户在光调节滑块中的当前光标位置来施加346伽马提升以便进行色彩校正,如这里其他地方所讨论的。例如,伽马提升可以是将图像的人类感知和图像辉度进行转换的参数值。这将色调水平调节到感觉更均匀的水平。
如果另一方面,方法300确定调暗340图像,方法300可以前进以基于用户在光调节滑块中的当前光标位置来扩展348直方图范围以使用所有可用范围,如上所讨论的。方法300可以随后基于用户在光调节滑块中的当前光标位置来调节350图像中的高光细节并且降低352伽马,如例如在图11中所示。在一些实现方式中,在图3D中描绘的块中的操作由光调节模块206配合用户滑块110中包括的光调节滑块来执行。
返回图3A,如果确定的结果是色彩调节滑块,则方法300可以前进到块354(参见图3E)以分析图像并且随后确定356用户在色彩调节滑块中的当前光标位置。响应于确定用户在滑块中的当前光标位置,方法300可以在块358和360中确定光标位置分别是在滑块中从中点位置的第一方向还是第二方向。方法300可以做出这个确定以决定使图像饱和或去饱和。例如,如果方法300在块358中确定光标位置高于中点位置,方法300可以确定362图像中的色彩是否等价于皮肤色调色彩,并且随后基于用户在色彩调节滑块中的当前光标位置来使图像饱和364,排除已经饱和的色彩并保护图像中一个或多个人物的皮肤色彩。在一些实现方式中,方法300可以施加饱和给皮肤色彩直到预先确定的阈值。例如,如果皮肤色调褪色(例如低于皮肤色调的饱和水平),则可以向皮肤色调施加饱和且皮肤色调色彩可以被饱和到与图像中其他色彩相同的水平。在另一示例中,皮肤色调可以以一个水平被饱和而图像剩余部分的色彩可以饱和到不同水平。另一方面,如果方法300在块360中确定光标位置低于中点位置,则方法300可以基于用户在色彩调节滑块中的当前光标位置来使图像去饱和366,如这里其他地方所讨论的。在一些实现方式中,图3E中所描绘的块中的操作由图像分析器204和色彩调节模块208配合用户滑块110中包括的色彩调节滑块来执行。
现在参看图3A,一旦方法300已经分别使用突出效果滑块308、光调节滑块310和色彩调节滑块312执行了突出效果调节、光调节和色彩调节中的一个或多个,如果需要,方法300可以随后施加314任何色调不变渲染意图给图像,如例如结合图18所讨论的。在一些实现方式中,块314中的操作可以由图像增强引擎136的图像完成模块212来执行。
在一些实现方式中,方法300可以包括自动增强特征。自动增强特征可以自动设置光调节、突出效果调节和/或色彩调节到为特定图像的需求所优化的预先确定的值。预先确定的值可以使用标准图像分析来确定并且比较不同图像版本与不同调节来识别理想的预先确定的值。
图4是用于使用局部拉普拉斯平滑来增强图像的局部对比度和饱和度的示例方法400。方法400使用局部拉普拉斯来进行知晓边缘的平滑。方法400随后可以找到原始图像和平滑后的图像之间的差异,并且将差异添加回来以增强图像的细节。增强通常在高强度下对于面部可能是不希望的。因此,方法400可以计算面部遮掩来保护面部不太被突出。在一些实现方式中,方法400中描述的操作可以由突出效果模块210来执行。
下面是描述在方法400中描绘的每个部件的一些重要细节的概述:
基本层:图像被接收并转换402为灰度级。直接经由适当局部拉普拉斯方法增强局部对比度和饱和度可能通常产生阶梯状伪像。方法400可以使用局部拉普拉斯金字塔404来对灰度级图像计算知晓边缘的模糊。原始图像和知晓边缘的模糊图像之间的差异405随后被添加406回来以增加对比度和饱和度。
局部拉普拉斯平滑:作为用户,将期待下面两个图像看上去相似:
施加突出并且重新调整图像为更小(重新调整尺寸的输出)
重新调整图像为更小并施加突出(重新调整尺寸的输入的输出)
这在许多编辑应用中尤其重要,因为用户可能针对较低分辨率(例如屏幕分辨率)图像进行编辑,但是他/她的编辑可能被施加和保存用于原始高分辨率图像。
如果使用相同参数集,结果将是不同的。描绘该场景的示例在图19中示出。
尽管效果可能难以并排区分,但在两个图像之间的快速变化导致非常容易察觉的差异。这个不想要的效果的原因就是金字塔层级数以及执行重新映射的层级都是固定的。这两个参数一起选择具体频率来相对于原始图像分辨率进行增强。因为两个输入图像具有不同分辨率,金字塔将影响不同频率,导致不同图像。
方法400可以通过从图像分辨率确定金字塔的层级数来解决这个问题。理想地,方法400可以创建金字塔直到某个固定最低分辨率的图像(例如100x100)。两个金字塔的示例例如在图20中示出。
图像可能不总在互相的两个因素之内。方法400可以找到金字塔的最优层级数以最好地匹配某个固定最低分辨率范围。构建的金字塔中的最坏情况差异在例如图21中示出。
方法400随后可以选择重新映射层级为从金字塔顶部的固定偏移(参见图22)。这确保相同频带被处理。
结构遮掩:方法400使用结构遮掩408使得小梯度的大区域不被增强。这帮助抑制突出效果中的噪声伪像。结构遮掩408可以基本通过使用Gabor滤波器来计算多频带中的能量而计算得出。
面部遮掩保护:在一些情况下,当图像的其他区域没有施加足够的突出时,突出效果可能针对面部太强。典型地,针对面部的突出的最大强度应该为~0.6,而如果在其他地方施加突出,最大强度应该是~1.5。
方法400可以通过使用保护区来限制针对面部的突出效果,保护区是面部周围的模糊矩形,其示例在图23中示出。
保护区可以通过执行面部检测410来确定并且将检测到的这些区域定义为保护区。保护遮掩可以通过模糊412模糊边界框、带有框滤波器的矩形来计算。但是,由于输入图像仅已知具有矩形,产生的卷积可以以封闭形式计算。根据信号处理理论,用另一个矩形模糊一个矩形将得到梯形。实际上,输出的任意点的值仅仅取决于到矩形的距离,这可以非常快速地计算出。一旦面部遮掩已被生成,突出图像和保护区被混合414以产生输出图像。
图5是用于实施相同输入图像的不同分辨率以产生相似视觉效果的示例方法500。方法500开始于确定502最优金字塔层级数以最好地匹配某个固定最低分辨率图像(例如100x100)。方法500可以选择504重新映射层级为从金字塔顶部的固定偏移。这确保相似频带被处理用于尺寸不同的图像,其最终为不同分辨率图像产生相似结果。最后,方法500可以施加506局部拉普拉斯平滑以便增强图像的局部对比度和饱和度,或者换句话说将突出效果施加到图像。在一些实现方式中,块502-504中的操作可以由突出效果模块210执行。
图形表示
图6A-6C是描绘活动中的用户滑块的示例用户界面。特别是,图6A是描绘响应于用户选择用户滑块602而向用户给出的进行图像增强的选项集合的示例界面。例如,如所描绘,一旦接收到对用户滑块602的用户选择,可以向用户提供调节光的选项604、调节色彩的选项606以及突出图像的选项608。图6B是描绘响应于用户选择调节图像的光或亮度的选项604的光调节滑块610的示例界面。图6C是描绘响应于用户选择调节图像的色彩的选项606的色彩调节滑块612的示例界面。
图7是比较本公开中描述的图像增强方法与现有的图像增强方法的示例图形表示。如所描绘的,这里所述的图像增强方法只使用两个用户滑块(例如光和色彩)来获取相同或更好的结果,如图像702中所示。相对比,现有的图像增强方法1、2和3分别如702、704和706中所示,提供无数控制或选项来调节图像。优点是,与如现有的图像增强方法1、现有的图像增强方法2和/或现有的图像增强方法3所描绘的更有经验或专业用户可能通过调节无数控制或选项而获取的图像增强相比,新手用户可能能够通过只使用光调节和色彩调节滑块就获取针对图像的想要的增强。
图8是图示说明了用于使示例图像照亮的活动中的光调节滑块的示例图形表示。特别是,参考标记802所指示的界面表明了没有任何照亮效果施加于图像的缺省图像。这是通过用户的当前光标位置804位于光调节滑块的中心而证明的。界面802还包括直方图806,其基于缺省图像的细节而示出分布。参考标记808所描绘的界面表明了基于光标位置810从其之前位置804向右边移动的图像中亮度的增加。而且,如参考标记812所证明的,直方图范围被扩展,使得广泛地展开分布且使用所有可用范围来进行光调节。参考标记814所描绘的界面表明了基于当前光标位置816和如参考标记818所指示的对于该增强正在被自动调节的阴影而在图像亮度上的进一步增强。最后,参考标记820所指示的界面表明了基于用户在滑块中的光标位置822移动到其极端以及如参考标记824所指示的伽马提升的施加的最终加亮图像。
图9是图示说明了用于另一示例图像的活动中的光调节滑块的图形表示。注意,在此情况下不需要范围扩展,因为整个范围都已是可用的了。
图10A和10B是图示说明在用于示例图像的光调节滑块的操作期间的范围扩展和阴影细节调节的另一图形表示。在图10A中,图形表示1000图示说明了改变范围扩展。在图像1002中,范围扩展1004被显示为滑块在中间。在图像1006中,范围扩展1008被显示为滑块移动到范围扩展1008的右边,与图像1002相比时,增强图像1006。在图10B中,图形表示1008在示例图像中显示阴影调节。在一个实现方式中,示例图像1010包括阴影调节1012,滑块位于中心线右边的位置。示例图像1014包括阴影调节1016,滑块位于中心线的很右边的位置且当与图像1010相比时,显示增强图像1014。
图11是图示说明了用于示例图像的活动中的光调节滑块的图形表示1100。特别是,参考标记1102所指示的界面表明了缺省图像,而没有施加于图像的任何调暗效果。这是由用户当前光标位置1104位于光调节滑块的中心处而证明的。界面1102还包括直方图1106,其基于缺省图像的细节示出分布。参考标记1108所描绘的界面基于光标位置1110从其之前位置1104向左移动而表明了图像中亮度的降低或调暗。而且,如参考标记1112所证明的,直方图范围被扩展以便广泛地展开分布且使用所有的可用范围以便光调节。参考标记1114所描绘的界面表明了基于当前光标位置1116和如参考标记1118所指示的正在被自动调节的高光细节,而在图像中的进一步调暗。
图12是图示说明用于另一示例图像的活动中的光调节滑块的图形表示1200。注意,对于这个情况(类似于参考图9所讨论的情况),不需要范围扩展,因为整个范围都已是可用的了。
图13是图示说明用于增强示例图像的活动中的光调节滑块的示例图形表示1300。特别是,参考标记1302所指示的界面表明了缺省图像,未对图像施加任何效果或增强。这是由用户当前光标位置1304位于光调节滑块的中心处而证明的。界面1302,类似于界面802和1102,还包括直方图1306,基于缺省图像的细节而示出分布。参考标记1308所指示的界面表明了基于光标位置1310从其之前位置1304向右移动的图像中亮度的增加。而且,如参考标记1312所证明的,直方图范围在两边都扩展了,使得广泛地展开分布并且使用所有可用范围来进行光调节。参考标记1314所描绘的界面表明了基于当前光标位置1316以及如参考标记1318所指示的正在被自动调节的阴影,在图像亮度上的进一步的增强。最后,由参考标记1320所指示的界面表明了基于用户在滑块1322中的光标位置移动到其极端以及如参考标记1324所指示的伽马调节的最终增强图像。
图14是图示说明用于使示例图像饱和的活动中的色彩调节滑块的示例图形表示1400。如所描绘的,以如下方式使图像饱和:图像中人物的皮肤色调被保护起来且图像中已经饱和的色彩不再被饱和。例如,以如下方式使图中描绘的图像饱和:在针对图像执行饱和之后,图像中包括的两个人物看上去没有晒黑或没有看上去丢失其自然皮肤色调。
图15是图示说明用于使示例图像去饱和的活动中的色彩调节滑块1502在三个不同位置(1502a-1502c)的示例图形表示。
图16是图示说明用于增强示例图像的包括活动中的光调节滑块、色彩调节滑块和突出调节滑块的用户滑块的示例图形表示1602。如所描绘的,一旦使用突出调节滑块,如果需要,示例图像的饱和度和/或亮度可以被提升,且局部对比度可能被用来进一步增强图像的细节。
图17是图示说明了与现有方法之一的图像增强相比,当使用光调节滑块、色彩调节滑块和突出调节滑块中的一个或多个来增强图像时怎样保留辉度的示例图形表示。参考标记1702指示原始图像(即,任何增强之前的图像)。参考标记1704指示由本公开中所述的方法增强之后的相同图像且参考标记1706指示由现有增强方法增强之后的相同图像。如所描绘的,如1702所指示的原始图像中的色调更浅且更淡,并且需要被调节。由现有方法所增强的图像1706使得图像中天空的色彩太暗,因此其变得与箭头1708所高光指示的水不可区分,而另一方面,由这里所述的方法增强的图像1704,与图像1702相比,同时使得色彩调节正好恰当而保持所保留的辉度。
图18是图示说明了对示例图像施加色调不变渲染意图的示例图形表示。参考标记1802指示原始图像(即任何增强之前的图像)。参考标记1804指示在由现有增强方法增强之后的相同图像而参考标记1806指示在由本公开中所述方法增强之后的相同图像。注意,将现有增强方法所增强的图像中的不想要的色调偏移1808与本公开中所述的方法所增强的图像1810中其如何改善进行相比。
图19是示出可能在输出被重新调整尺寸时引入的差异的示例图形表示。在一个示例中,用户可能接收图像用于编辑且在较低分辨率下对其进行编辑。当编辑后的较低分辨率的图像被重新调整尺寸1904且与在较高分辨率下编辑的重新调整尺寸后的图像1902相比时,在两个图像之间存在差异1906。即使相同参数施加于相同图像,只是分辨率不同,仍然存在这些差异1906。
图20是图像的金字塔的示例图形表示。图4中所述的方法400可以根据图像分辨率确定金字塔层级2002。图4中的方法400可以创建金字塔,直到某个固定最低分辨率图像。然后,金字塔层级通过2的因子而被重新调整尺寸为重新调整尺寸的金字塔层级2004且金字塔的分辨率被保留,使得当重新调整尺寸的金字塔层级2004被编辑然后被重新调整到原始尺寸时,该编辑通过分辨率而被保留,因此产生的图像避免了关于图19所述的差异。
图21是以不同因子调整尺寸的金字塔的示例图形表示。图4中所述的方法400可以确定最优金字塔层级数以便最好地匹配某个固定最低分辨率图像。原始金字塔2102和最坏情况重新调整尺寸的图像2104被示出,其中最坏情况被确定为比原始金字塔2102小29.3%的金字塔。
图22是使用金字塔来重新映射层级的示例图形表示。图4中所述的方法400可以确定重新映射层级为从金字塔顶部的固定偏移。原始金字塔2202示出重新映射的顶层级之下的两个层级。金字塔2204示出以不同缩放分辨率进行的重新映射。金字塔2206示出以可替换缩放分辨率进行的重新映射。通过以特定层级重新映射,该重新映射确保了相同频带被处理。
图23是被用作保护遮掩的模糊矩形的示例图形表示。在图4中所述的方法400中,模糊矩形2302可以基于在原始图像2304中的识别的面部而确定。图像2306示出具有施加的效果而不具有模糊的矩形2302保护遮掩的图像。图像2308显示模糊的矩形2302保护遮掩正被用来保护图像2304中的识别出的面部,而效果被施加到图像2308的剩余部分。
说明书中对“一些实现方式”或“实现方式”的引用意味着结合该实现方式所述的特定特征、结构或特性包括在描述的至少一些情形中。短语“在一些实现方式中”在说明书中各种位置中的出现不必全部指向相同的实现方式。
具体实施方式的一些部分通过对计算机存储器内的数据比特的处理和操作的符号表示来呈现。这些处理描述和表示是数据处理领域的技术人员所使用来最有效地传达其工作的本质给本领域的其他技术人员的手段。这些步骤需要物理量的物理操作。通常,尽管非必要,这些量采用能够被存储、传送、组合、比较以及另外操作的电或磁信号的形式。有时,主要出于公共使用的原因,证明将这些信号称为比特、值、元素、符号、字符、术语、数目等是方便的。
但是应该记住,所有这些和类似术语要与适当物理量相关联且仅仅是施加于这些量的便利标签。除非具体陈述,否则从下面讨论中很显然看出,应认识到,在通篇描述中,使用诸如“处理”或“算出”或“计算”或“确定”或“显示”等术语的讨论,指的是操作和转换表示为计算机系统的寄存器和存储器内的物理(电子)量的数据为类似表示为计算机系统存储器或寄存器或其他这样的信息存储、传输或显示设备内的物理量的其他数据的计算机系统或类似电子计算设备的动作和处理。
说明书还涉及用于执行这里的操作的装置。该装置可以特别构建用于所需用途,或者其可以包括被存储在计算机中的计算机程序选择性被激活或者重新配置的通用计算机。这样的计算机程序可以存储在计算机可读存储介质中,诸如但不限于,任何类型的盘,包括软盘、光盘、CD-ROM以及磁盘、只读存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPROM、磁卡或光卡、包括具有非易失存储器的USB钥匙的闪存存储器或者适于存储电子指令的任何类型的介质,每个都耦合到计算机系统总线。
说明书可以采用整个硬件实现方式、整个软件实现方式或包含硬件和软件元素的实现方式的形式。在一些实现方式中,说明书用软件来实现,其包括但不限于固件、驻留软件、微代码等等。
而且,描述可以采用可从计算机可用或计算机可读介质中访问、提供程序代码以便计算机或任何指令执行系统使用或与之结合使用的的计算机程序产品的形式。为了这个描述的目的,计算机可用或计算机可读介质可以是可以包含、存储、传送、传播或传输程序以便由指令执行系统、装置或设备使用或与之结合使用的任何装置。
适于存储和/或执行程序代码的数据处理系统将包括通过系统总线直接或间接耦合到存储器元件的至少一个处理器。存储器元件可以包括在程序代码的实际执行期间被使用的本地存储器、大容量存储、以及提供至少一些程序代码的临时存储以便减少在执行期间代码必须从大容量存储中获取的次数的高速缓冲存储器。
输入/输出或I/O设备(包括但不限于键盘、显示器、指向设备等等)可以直接或通过中介I/O控制器耦合到系统。
网络适配器也可以耦合到系统以使得数据处理系统能够变得通过中介专有或公共网络耦合到其他数据处理系统或远程打印机或社交网络数据存储。调制解调器、电缆调制解调器以及以太网卡都只是当前可用类型的网络适配器中的几个。
最后,这里所呈现的例程和显示并不本质上与任何特定计算机或其他装置相关联。各种通用系统可以与根据这里的教导的程序一起使用,或者可以证明便于构建更专门化的装置来执行所需的方法步骤。根据下面的描述,各种这些系统的所需结构将出现。此外,说明书并不结合任何特定编程语言来描述。将认识到,各种编程语言都可以用来实现这里所述的说明书的教导。
说明书的实现方式的前述描述已经出于说明和描述的目的而被呈现。不希望是穷尽的或者限制说明书到所公开的精确形式。根据上面的教导,许多修改和变化都是可能的。希望公开的范围不受到这个具体实施方式的限制,而是受到本申请的权利要求的限制。如熟悉本领域的技术人员将理解的,说明书可以以其他具体形式体现而不背离其精神或主要特性。类似地,模块、例程、特征、属性、方法和其他方面的特定命名和划分并非强制或有效的,且实现说明书或其特征的机制可能具有不同的命名、划分和/或格式。而且,如对于相关领域普通技术人员而言显而易见的,本公开的模块、例程、特征、属性、方法和其他方面可以被实现为软件、硬件、固件或三者的任意组合。而且,不管说明书的部件在哪里,其示例是模块,被实现为软件时,部件可以被实现为独立程序、更大程序的一部分、多个独立程序、静态或动态链接库、内核可加载模块、设备驱动和/或以现在已知或将来为计算机编程领域的普通技术人员所知的每个和任意其他方式实现。此外,本公开不以任何方式限制为任何具体编程语言的实现方式,或者用于任何具体操作系统或环境。因此,本公开想要是说明性的,而非限制如所附权利要求书中所阐述的说明书的范围。

Claims (24)

1.一种用于修改图像的计算机实现的方法,所述方法包括:
使用一个或多个计算设备接收选择所述图像以用于修改的输入;
使用所述一个或多个计算设备检测所述图像中的面部;
使用所述一个或多个计算设备确定包括所述面部的所述图像的第一部分;
使用所述一个或多个计算设备确定所述图像的所述第一部分的增强阈值;
使用所述一个或多个计算设备提供用户滑块以用于修改所述图像;
响应于所述用户滑块被选择以施加效果,使用所述一个或多个计算设备修改所述图像的第二部分以用于图像增强,所述图像的所述第二部分排除了所述第一部分;
响应于所述用户滑块被选择,使用所述一个或多个计算设备在不超过所述增强阈值的情况下修改所述图像的所述第一部分以用于图像增强;以及
使用所述一个或多个计算设备存储修改的图像。
2.如权利要求1所述的计算机实现的方法,其中,所述效果是突出效果,所述用户滑块控制所述突出效果,并且所述方法进一步包括:
使用所述一个或多个计算设备基于所述用户滑块来确定所述突出效果的量以向所述图像施加;
使用所述一个或多个计算设备通过将所述突出效果施加到所述图像的所述第一部分来调节所述图像;以及
使用所述一个或多个计算设备基于所述用户滑块来将所述突出效果施加到所述图像的所述第二部分。
3.如权利要求2所述的计算机实现的方法,其中,所述突出效果包括以下组中的一个:饱和度提升、亮度调节、局部对比度的使用以增强所述图像的细节。
4.如权利要求1所述的计算机实现的方法,其中,所述效果是光调节,所述用户滑块控制对所述图像的所述光调节,并且所述方法进一步包括:
使用所述一个或多个计算设备基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
使用所述一个或多个计算设备基于所需光调节量来调节与所述图像相关联的阴影;以及
使用所述一个或多个计算设备基于所需光调节量来调节与所述图像相关联的伽马。
5.如权利要求1所述的计算机实现的方法,其中,所述效果是光调节,所述用户滑块控制对所述图像的所述光调节,并且所述方法进一步包括:
使用所述一个或多个计算设备基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
使用所述一个或多个计算设备基于所需光调节量来调节与所述图像相关联的高光细节;以及
使用所述一个或多个计算设备基于所需光调节量来调节与所述图像相关联的伽马。
6.如权利要求1所述的计算机实现的方法,其中,所述效果是色彩调节,所述用户滑块控制对所述图像的所述色彩调节,并且所述方法进一步包括:
使用所述一个或多个计算设备确定被饱和的所述图像中的色彩;以及
使用所述一个或多个计算设备基于使用所述用户滑块所选择的色彩调节量来使所述图像的所述第二部分饱和。
7.如权利要求1所述的计算机实现的方法,其中,所述修改是将所述图像的尺寸重新调整到固定较低分辨率图像,并且所述方法进一步包括:
使用所述一个或多个计算设备确定金字塔层级数以匹配预先定义的固定较低分辨率图像;
使用所述一个或多个计算设备将重新映射层级选择为从所述金字塔层级的顶层的固定偏移;以及
使用所述一个或多个计算设备施加局部拉普拉斯平滑以确保对不同尺寸的图像处理相似频带以产生用于所述固定较低分辨率图像的相似视觉结果。
8.如权利要求1所述的计算机实现的方法,其中,提供所述用户滑块以用于修改所述图像包括:提供用户界面,所述用户界面包括突出滑块、色彩滑块、光滑块以及所述图像的预览。
9.一种包括计算机程序的非暂时性计算机可用介质,其中,所述计算机程序当在计算机上被执行时使得所述计算机:
接收选择图像以用于修改的输入;
确定所述图像中的面部;
确定包括所述面部的所述图像的第一部分;
确定所述图像的所述第一部分的增强阈值;
提供用户滑块以用于修改所述图像;
响应于所述用户滑块被选择以施加效果,修改所述图像的第二部分以用于图像增强,所述图像的所述第二部分排除了所述第一部分;
响应于所述用户滑块被选择,在不超过所述增强阈值的情况下修改所述图像的所述第一部分以用于图像增强;以及
存储修改的图像。
10.如权利要求9所述的非暂时性计算机可用介质,其中,所述效果是突出效果,所述用户滑块控制所述突出效果,并且所述计算机程序当在所述计算机上被执行时进一步使得所述计算机:
基于所述用户滑块来确定所述突出效果的量以向所述图像施加;
通过将所述突出效果施加到所述图像的所述第一部分来调节所述图像;以及
基于所述用户滑块来将所述突出效果施加到所述图像的所述第二部分。
11.如权利要求10所述的非暂时性计算机可用介质,其中,所述突出效果包括来自以下组中的一个:饱和度提升、亮度调节、局部对比度的使用以增强所述图像的细节。
12.如权利要求9所述的非暂时性计算机可用介质,其中,所述效果是光调节,所述用户滑块控制对所述图像的所述光调节,并且所述计算机程序当在所述计算机上被执行时进一步使得所述计算机:
基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
基于所需光调节量来调节与所述图像相关联的阴影;以及
基于所需光调节量来调节与所述图像相关联的伽马。
13.如权利要求9所述的非暂时性计算机可用介质,其中,所述效果是光调节,所述用户滑块控制对所述图像的所述光调节,并且所述计算机程序当在所述计算机上被执行时进一步使得所述计算机:
基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
基于所需光调节量来调节与所述图像相关联的高光细节;以及
基于所需光调节量来调节与所述图像相关联的伽马。
14.如权利要求9所述的非暂时性计算机可用介质,其中,所述效果是色彩调节,所述用户滑块控制对所述图像的所述色彩调节,并且所述计算机程序当在所述计算机上被执行时进一步使得所述计算机:
确定被饱和的所述图像中的色彩;以及
基于使用所述用户滑块所选择的色彩调节量来使所述图像的所述第二部分饱和。
15.如权利要求9所述的非暂时性计算机可用介质,其中,所述修改是将所述图像的尺寸重新调整到固定较低分辨率图像,所述计算机程序当在所述计算机上被执行时进一步使得所述计算机:
确定金字塔层级数以匹配预先定义的固定较低分辨率图像;
将重新映射层级选择为从所述金字塔层级的顶层的固定偏移;以及
施加局部拉普拉斯平滑以确保对不同尺寸图像处理相似频带以产生用于所述固定较低分辨率图像的相似视觉结果。
16.如权利要求9所述的非暂时性计算机可用介质,其中,为了提供所述用户滑块以用于修改所述图像,所述计算机程序当在所述计算机上被执行时进一步使得所述计算机提供用户界面,所述用户界面包括突出滑块、色彩滑块、光滑块以及所述图像的预览。
17.一种用于修改图像的系统,包括:
处理器;以及
存储指令的存储器,所述指令当被执行时使得所述系统:
接收选择图像以用于修改的输入;
确定所述图像中的面部;
确定包括所述面部的所述图像的第一部分;
确定所述图像的所述第一部分的增强阈值;
提供用户滑块以用于修改所述图像;
响应于所述用户滑块被选择以施加效果,修改所述图像的第二部分以用于图像增强,所述图像的所述第二部分排除了所述第一部分;
响应于所述用户滑块被选择,在不超过所述增强阈值的情况下修改所述图像的所述第一部分以用于图像增强;以及
存储修改的图像。
18.如权利要求17所述的系统,其中,所述效果是突出效果,所述用户滑块控制所述突出效果,并且所述存储器进一步存储指令,所述指令当被执行时使得所述系统:
基于所述用户滑块来确定所述突出效果的量以向所述图像施加;
通过施加所述突出效果以施加到所述图像的所述第一部分来调节所述图像;以及
基于所述用户滑块来将所述突出效果施加到所述图像的所述第二部分。
19.如权利要求18所述的系统,其中,所述突出效果包括来自以下组中的一个:饱和度提升、亮度调节、局部对比度的使用以增强所述图像的细节。
20.如权利要求17所述的系统,其中,所述效果是光调节滑块,所述用户滑块控制对所述图像的所述光调节,并且所述存储器进一步存储指令,所述指令当被执行时使得所述系统:
基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
基于所需光调节量来调节与所述图像相关联的阴影;以及
基于所需光调节量来调节与所述图像相关联的伽马。
21.如权利要求17所述的系统,其中,所述效果是光调节滑块,所述用户滑块控制对所述图像的所述光调节,并且所述存储器进一步存储指令,所述指令当被执行时使得所述系统:
基于使用所述用户滑块所选择的所需光调节量来扩展直方图范围以包括所述光调节的可用范围并且展开分布;
基于所需光调节量来调节与所述图像相关联的高光细节;以及
基于所需光调节量来调节与所述图像相关联的伽马。
22.如权利要求17所述的系统,其中,所述效果是色彩调节,所述用户滑块控制对所述图像的所述色彩调节,并且所述存储器进一步存储指令,所述指令当被执行时使得所述系统:
确定被饱和的所述图像中的色彩;以及
基于使用所述用户滑块所选择的色彩调节量来使所述图像的所述第二部分饱和。
23.如权利要求17所述的系统,其中,所述修改是将所述图像的尺寸重新调整到固定较低分辨率图像,并且所述存储器进一步存储指令,所述指令当被执行时使得所述系统:
确定金字塔层级数以最佳匹配预先定义的固定较低分辨率图像;
将重新映射层级选择为从所述金字塔层级的顶层的固定偏移;以及
施加局部拉普拉斯平滑以确保对不同尺寸图像处理相似频带以产生用于所述固定较低分辨率图像的相似视觉结果。
24.如权利要求17所述的系统,其中,为了提供所述用户滑块以用于修改所述图像,所述存储器进一步存储指令,所述指令当被执行时使得所述系统提供用户界面的指令,所述用户界面包括突出滑块、色彩滑块、光滑块以及所述图像的预览。
CN201680017397.2A 2015-03-27 2016-03-27 用于图像的简化调整的用户滑块 Active CN107408401B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562139621P 2015-03-27 2015-03-27
US62/139,621 2015-03-27
PCT/US2016/024398 WO2016160638A1 (en) 2015-03-27 2016-03-27 User sliders for simplified adjustment of images

Publications (2)

Publication Number Publication Date
CN107408401A CN107408401A (zh) 2017-11-28
CN107408401B true CN107408401B (zh) 2020-07-03

Family

ID=55752727

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680017397.2A Active CN107408401B (zh) 2015-03-27 2016-03-27 用于图像的简化调整的用户滑块

Country Status (4)

Country Link
US (1) US9934560B2 (zh)
EP (1) EP3254283B1 (zh)
CN (1) CN107408401B (zh)
WO (1) WO2016160638A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107408401B (zh) * 2015-03-27 2020-07-03 谷歌有限责任公司 用于图像的简化调整的用户滑块
US9864901B2 (en) * 2015-09-15 2018-01-09 Google Llc Feature detection and masking in images based on color distributions
JP6831453B2 (ja) * 2017-05-02 2021-02-17 日本電信電話株式会社 信号検索装置、方法、及びプログラム
CN108230331A (zh) * 2017-09-30 2018-06-29 深圳市商汤科技有限公司 图像处理方法和装置、电子设备、计算机存储介质
US10937200B2 (en) * 2019-03-19 2021-03-02 Adobe Inc. Object-based color adjustment
CN113870400A (zh) * 2021-09-27 2021-12-31 北京市商汤科技开发有限公司 虚拟对象的生成方法及装置、电子设备和存储介质
CN114840112B (zh) * 2022-05-16 2023-03-24 北京轻网科技股份有限公司 Pop资源管理方法、装置、设备和计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1600020A (zh) * 2001-10-26 2005-03-23 柯尼卡美能达控股株式会社 图像处理方法、装置及程序
CN1908936A (zh) * 2005-08-05 2007-02-07 索尼株式会社 图像处理装置、方法和程序
CN101777175A (zh) * 2008-07-31 2010-07-14 奥多比公司 对具有颜色加权优先级的图像进行基于缝隙的缩小和扩大
WO2014182577A1 (en) * 2013-05-05 2014-11-13 Google Inc. Enhancing video content appearance by selecting image parameter adjustments based on a reference object
CN104221359A (zh) * 2012-03-06 2014-12-17 苹果公司 用于色彩片段的色彩调节器
CN104221358A (zh) * 2012-03-06 2014-12-17 苹果公司 用于修改多个图像属性的统一滑块控制器

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7039222B2 (en) 2003-02-28 2006-05-02 Eastman Kodak Company Method and system for enhancing portrait images that are processed in a batch mode
JP4461789B2 (ja) * 2003-03-20 2010-05-12 オムロン株式会社 画像処理装置
JP4600435B2 (ja) * 2007-06-13 2010-12-15 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
WO2010012448A2 (en) * 2008-07-30 2010-02-04 Fotonation Ireland Limited Automatic face and skin beautification using face detection
JP5213620B2 (ja) * 2008-10-01 2013-06-19 キヤノン株式会社 画像処理装置及び画像処理方法
US8478029B2 (en) * 2009-05-26 2013-07-02 Tandent Vision Science, Inc. Multi-resolution analysis in image segregation
US8525847B2 (en) * 2009-06-01 2013-09-03 Apple Inc. Enhancing images using known characteristics of image subjects
US9251405B2 (en) * 2013-06-20 2016-02-02 Elwha Llc Systems and methods for enhancement of facial expressions
US9384384B1 (en) * 2013-09-23 2016-07-05 Amazon Technologies, Inc. Adjusting faces displayed in images
US9323996B2 (en) 2014-06-01 2016-04-26 Apple Inc. Controlling multiple photographic adjustments with a single control
CN107408401B (zh) * 2015-03-27 2020-07-03 谷歌有限责任公司 用于图像的简化调整的用户滑块

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1600020A (zh) * 2001-10-26 2005-03-23 柯尼卡美能达控股株式会社 图像处理方法、装置及程序
CN1908936A (zh) * 2005-08-05 2007-02-07 索尼株式会社 图像处理装置、方法和程序
CN101777175A (zh) * 2008-07-31 2010-07-14 奥多比公司 对具有颜色加权优先级的图像进行基于缝隙的缩小和扩大
CN104221359A (zh) * 2012-03-06 2014-12-17 苹果公司 用于色彩片段的色彩调节器
CN104221358A (zh) * 2012-03-06 2014-12-17 苹果公司 用于修改多个图像属性的统一滑块控制器
WO2014182577A1 (en) * 2013-05-05 2014-11-13 Google Inc. Enhancing video content appearance by selecting image parameter adjustments based on a reference object

Also Published As

Publication number Publication date
EP3254283A1 (en) 2017-12-13
WO2016160638A1 (en) 2016-10-06
CN107408401A (zh) 2017-11-28
EP3254283B1 (en) 2021-05-12
US9934560B2 (en) 2018-04-03
US20160284070A1 (en) 2016-09-29

Similar Documents

Publication Publication Date Title
CN107408401B (zh) 用于图像的简化调整的用户滑块
US9547427B2 (en) User interface with color themes based on input image data
US10304408B2 (en) Method and apparatus for changing background color of toolbar with dominant color of picture
US9639965B2 (en) Adjusting color attribute of an image in a non-uniform way
US8644638B2 (en) Automatic localized adjustment of image shadows and highlights
US20160246475A1 (en) Dynamic icon recoloring to improve contrast
US8692847B2 (en) Brushing tools for digital image adjustments
US20130201202A1 (en) Media editing with overlaid color adjustment tools
US8754902B2 (en) Color-space selective darkness and lightness adjustment
JP2005527880A (ja) ユーザ定義可能な画像参照ポイント
US20140212037A1 (en) Image processing apparatus, image processing method, and computer readable medium
US8995783B2 (en) System for photograph enhancement by user controlled local image enhancement
US11727543B2 (en) Systems and methods for content-aware enhancement of images
US8462171B2 (en) Saturation contrast image enhancement
US10049425B2 (en) Merging filters for a graphic processing unit
US11217205B2 (en) Method and apparatus for rendering contents for vision accessibility
CN113557564B (zh) 计算机实现方法、设备和计算机程序产品
JP2023049037A (ja) 画像内のディストラクションを低減させるための技術
CN117495894A (zh) 图像生成处理方法及电子设备
JP2021190807A (ja) 画像処理装置、画像処理方法
AU2014201797A1 (en) Method, apparatus and system for determining chromatic difference

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

GR01 Patent grant
GR01 Patent grant