CN112513939A - 用于环境自适应数字内容的色彩转换 - Google Patents

用于环境自适应数字内容的色彩转换 Download PDF

Info

Publication number
CN112513939A
CN112513939A CN201980049160.6A CN201980049160A CN112513939A CN 112513939 A CN112513939 A CN 112513939A CN 201980049160 A CN201980049160 A CN 201980049160A CN 112513939 A CN112513939 A CN 112513939A
Authority
CN
China
Prior art keywords
digital image
ambient lighting
ambient
computing device
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980049160.6A
Other languages
English (en)
Inventor
A·萨卡尔
Z·闻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN112513939A publication Critical patent/CN112513939A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

一种用于数字图像色彩转换的方法包括：在第一计算设备处捕捉第一现实世界环境的第一数字图像。基于第一现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换来生成第一环境光照不可知的数字图像。第一环境光照不可知的数字图像被传送至第二现实世界环境中的第二计算设备。从第二计算设备接收第二环境光照不可知的数字图像，该第二图像已经由第二计算设备使用捕捉侧环境光照色彩转换从第二数字图像生成。基于第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换从第二环境光照不可知的数字图像生成经光照校正的数字图像。经光照校正的数字图像被显示在第一计算设备上。

Description

用于环境自适应数字内容的色彩转换
背景
环境的环境光照条件可能会影响在该环境中拍摄的任何图像中色彩如何被表示。环境光照条件还可影响在图像被显示时该图像的色彩如何被感知。
发明内容
提供本发明内容以便以简化的形式介绍以下在具体实施方式述中进一步描述的概念的选集。本发明内容并不旨在标识所要求保护的主题的关键特征或必要特征，亦非旨在用于限制所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中提及的任何或所有缺点的实现。
一种用于数字图像色彩转换的方法，包括：在第一计算设备处捕捉第一现实世界环境的第一数字图像。基于第一现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换从第一数字图像生成第一环境光照不可知的数字图像。第一环境光照不可知的数字图像被传送至第二现实世界环境中的第二计算设备。从第二计算设备接收第二环境光照不可知的数字图像，该第二图像已经由第二计算设备使用捕捉侧环境光照色彩转换从第二数字图像生成。基于环境光照条件，使用显示侧环境光照色彩转换从第二环境光照不可知的数字图像生成经光照校正的数字图像。经光照校正的数字图像被显示在第一计算设备上。
附图简述
图1示意性地示出了交换数字图像的两个示例计算设备。
图2解说了用于数字图像色彩转换的示例方法。
图3解说了由在分开的现实世界环境中的计算设备对数字图像进行的交换和色彩转换。
图4解说了用于第二经光照校正的数字图像的数字图像色彩转换的示例方法。
图5示意性地解说了用于用户界面元素的界面色彩的色彩转换。
图6解说了用于显示侧环境光照色彩转换的示例方法。
图7解说了用于捕捉侧环境光照色彩转换的示例方法。
图8解说了用于数字图像色彩转换的示例方法。
图9解说了用于数字图像色彩转换的另一示例方法。
图10示意地示出示例计算系统。
具体实施方式
环境的环境光照条件将对在该环境中拍摄的任何图像、尤其是关于色彩再现产生影响。在典型的日光条件下拍摄的苹果与在白炽灯照明、荧光灯照明等条件下拍摄的相同苹果相比将在照片中具有明显不同的外观，至少部分是因为不同的光源往往具有不同的环境色彩配置(color profile)。许多数字相机使用各种图像处理技术(诸如自动白平衡)来尝试校正环境中的环境光照条件。因此，所得的数字图像可能无法精确地再现如由拍摄者感知的环境中的色彩。在许多情形中，所得图像被人工修改，使得所描绘的环境看起来在预定义的光照条件(诸如典型的日光)下被照亮或者计及主观偏好(例如，针对特定用户)。
这对于保持数字图像中的感知色彩精度有影响，尤其是在数字图像在与其被拍摄的光照条件不同的光照条件下被观看时。在此，达成感知的(或感知到的)色彩精度涉及在给定的环境光照条件下在显示器上渲染色彩以在视觉上匹配原始场景中的色彩。换言之，如果原始场景处于一种环境光照条件下，并且再现该场景的显示器处于不同的环境光照条件下，则在该场景中与相应场景白点相关的各种色彩的外观应被保留。感知色彩精度与通用术语“色彩精度”的不同之处在于，色彩精度是使用标准色彩空间(例如，sRGB、DCI-P3或Adobe RGB)中的参考色彩以比色法计算出的，该标准色彩空间具有特定白点，并且因此色彩精度是相对于该白点测得或计算出的。作为对比，感知色彩精度考虑了观看条件(例如，环境色彩和亮度)，并且使用色彩外观建模的各方面来预测在给定环境光照条件下色彩如何向用户表现。
作为示例，两个不同的计算设备可以交换数字图像，作为两个朋友之间的实况视频呼叫的一部分。在每个设备捕捉数字图像时，自动白平衡或类似技术将在所捕捉的图像被发送之前被用于计及每个设备相应的环境光照条件。因此，当一个朋友观看从另一朋友的设备接收到的数字图像时，他们对该数字图像的感知将受到由该朋友的设备执行的任何图像处理以及他们自己的本地环境光照两者的影响。作为结果，一个朋友在观看图像时感知的色彩可能与他们的朋友在拍摄该图像时感知的色彩显著不同。换言之，在这一场景中，感知色彩精度在这两个设备之间未被保持。
因此，本公开描述了一种用于数字图像色彩转换的技术，该技术旨在保持独立于环境光照条件的感知色彩精度。在捕捉到数字图像之后，计算设备确定其自己的现实世界环境的环境光照条件，并且使用捕捉侧环境光照色彩转换来生成环境光照不可知的数字图像。环境光照不可知的数字图像可以将现实世界环境描绘为就像在与该环境的实际光照条件相反的预定义光照条件(诸如日光)下一样。环境光照不可知的数字图像可随后被存储以用于稍后显示和/或传送至另一设备。在预期显示环境光照不可知的数字图像的情况下，该设备可以生成经光照校正的数字图像，该数字图像计及本地环境光照条件将如何影响对图像中的色彩的感知。在示例场景中，经光照校正的数字图像可被生成以供显示，使得其色彩被感知为与在原始数字图像被拍摄时色彩实际上如何向拍摄者表现类似。因此，本文所描述的技术可以帮助保持数字图像中的感知色彩精度，而不管在捕获时或显示时的环境的环境光照。
数字图像色彩转换技术本文中主要是参考两个设备在网络上交换数字图像来描述的。换言之，由一个设备拍摄的数字图像最终显示在另一设备上，并且两个不同环境中的环境光照条件被考虑在内。然而，数字图像色彩转换可被应用于任何数目的设备(包括处于通信中的不止两个设备或单个设备)的上下文中。例如，数字相机可被用于在第一环境中捕捉图像，而该图像在第二环境中被观看，并且因此两个不同的环境光照条件集合可被考虑在内。
图1示意性地解说了在两个示例计算设备100A和100B之间交换数字图像。在图1中，这些设备是各自包括集成显示器102A/102B和相机硬件104A/104B的移动设备。此外，每个设备包括环境色彩传感器106A/106B。然而，环境光照色彩转换可在具有任何合适的硬件的任何合适的计算设备上被执行。此类设备不需要包括集成相机、环境色彩传感器或显示器(例如，数字图像可由另一设备拍摄并传送以进行处理和/或显示)。作为示例，数字图像色彩转换可在膝上型计算机、台式机、智能电话、平板、数字相机、虚拟/增强/混合现实显示设备、服务器、可穿戴设备、媒体中心等上被执行。数字图像色彩转换可在以下关于图10描述的计算系统1000上实现。
设备100A和100B正在实况视频呼叫的上下文中交换数字图像。具体而言，设备100A和100B各自显示数字图像107A/107B，每个数字图像描绘了不同的现实世界环境108A/108B。用户110B被显示在设备100A上的图像107A中，该用户存在于环境108B中。类似地，用户110A被示出在设备100B上的图像107B中，用户110A存在于环境108A中。换言之，在图1中，计算设备100A存在于现实世界环境108A中，但是示出了由设备100B在现实世界环境108B中捕捉的图像107A。类似地，由设备100B示出的图像107B由计算设备100A的相机104A捕捉。
然而，每个设备还正显示描绘该设备自己的现实世界环境的补充图像112A/112B。设备100A正在显示描绘现实世界环境108A内的用户110A(即，该设备的所有者)的图像112A，而设备100B显示图像112B。换言之，每个计算设备捕捉其自己的现实世界环境的图像。这些图像都被显示在捕捉侧设备上(即，作为图像112A和112B)，并被传送以在另一设备上远程显示(即，作为图像107A和107B)。
在图1中，由每个设备显示的较小图像112A/112B示出了由该设备本地捕捉的内容，而较大图像107A/107B是从相对设备接收的，并且包括由该相对设备捕捉的内容。然而，在一些示例中，接收到的图像107A和107B可被显示为小于本地捕捉的图像112A和112B。此外，每个设备可以显示例如从附加设备接收到的附加图像，和/或一次仅显示单个图像。
每个现实世界环境108A/108B分别包括光源114A/114B。具体而言，环境108B包括呈灯形式的光源114B，而环境108A包括允许来自太阳114A的光的敞开的窗户。作为结果，环境108A和108B中的每一者将具有不同的环境光照条件。环境108B将具有与典型家庭光照一致的相对暖色的光照，而环境108A将更接近典型日光条件下的中性冷光照。
如以上所讨论的，这两个设备的现实世界环境中的不同环境光照条件将影响数字图像如何被捕捉和显示。例如，在设备100B拍摄用户110B的数字图像时，该设备可以执行自动白平衡和/或类似的图像处理以计及环境108B中相对温暖的光照。作为结果，用户110A可以将图像107A中的色彩感知为比图像107A中的色彩向现实世界环境108B内的用户110B表现地更冷。这在其中感知色彩精度很重要的各种场景中(诸如在用户110B正在向用户110A询问他对环境108B中新衣物制品的色彩或新涂料色彩的想法的情况下)可以是不期望的。
相应地，图2解说了用于数字图像色彩转换的示例方法200。方法200设想了其中两个设备(第一计算设备和第二计算设备)正在网络上交换数字图像的场景。然而，方法200中的各步骤全部由第一计算设备执行。作为结果，在一些情形中，类似或等同的步骤可由第二计算设备来执行。方法200可由设备100A和100B中的任一者或两者、图10的计算系统1000、和/或任何其他合适的计算机硬件来执行。
在202，方法200包括捕捉第一现实世界环境的第一数字图像。捕捉数字图像可以利用任何合适的相机或其他成像硬件来完成。此类成像硬件不需要被集成在实现方法200的计算设备中或被附连到该计算设备。相反，设备可以可任选地与外部相机通信以检索所捕捉的数字图像，和/或从另一合适的源检索所捕捉的数字图像。
图3示意性地解说了在两个计算设备之间的双向通信的上下文中的数字图像的色彩转换。所描绘的步骤在第一现实世界环境300A与第二现实世界环境300B之间划分。为了简单起见，被示为在第一现实世界环境300A内发生的步骤由图1的计算设备100A来执行，而在第二现实世界环境300B中执行的步骤由图1的第二计算设备100B来执行。然而，所描绘的步骤可以在任何合适数目的计算设备之间被划分。在第一现实世界环境300A中，在步骤SA1，计算设备100A捕捉第一数字图像302A。类似地，在第二现实世界环境300B中，在步骤SB1，第二计算设备100B捕捉第二数字图像302B。
返回到图2，在204，方法200包括确定第一现实世界环境的环境光照条件。在一些示例中，环境的环境光照条件可以使用计算设备的环境色彩传感器(诸如图1中所示的环境色彩传感器106A和106B)来确定。附加地或替换地，环境的环境光照条件可以按其他合适的方式来确定。例如，环境的环境光照条件可以从所捕捉的数字图像的像素值来推断出。这可例如在通过在环境内标识假定为白色的物体并且确定该白色物体的外观色彩与真实白色有何不同来执行自动白平衡的情况下被完成。该差异可被推断为源自环境内的环境色温。
在206，方法200包括基于第一现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换来从第一数字图像生成第一环境光照不可知的数字图像。换言之，各种图像处理技术和算法可被用于调整色彩在数字图像中如何表现以计及该图像在其下被捕捉的光照条件。关于环境光照色彩转换的附加细节将在以下关于图6和7给出。
在一些示例中，捕捉侧环境光照色彩转换被配置成将数字图像的色彩转换为看起来就好像该数字图像是在预定义光照条件下被捕捉的。预定义光照条件可以例如是6500K(D65)的环境色温，其类似于在典型的日光条件下观察到的光照。换言之，不管在拍摄数字图像时所存在的环境光照条件如何，环境光照不可知的数字图像应看起来就好像环境被典型的日光照亮。然而，预定义光照条件取决于实现和用户偏好而可以是任何合适的环境色彩配置。
在图3中示意性地解说了环境光照不可知的数字图像的生成。如在步骤SA2所示，捕捉侧环境光照色彩转换被用于从第一数字图像302A生成第一环境光照不可知的数字图像304A。类似地，在第二现实世界环境300B中，利用另一捕捉侧环境光照色彩转换SB2从第二数字图像302B生成第二环境光照不可知的数字图像304B。
简要返回到图2，在208，方法200包括向第二现实世界环境处的第二计算设备传送第一环境光照不可知的数字图像。在210，方法200包括从第二计算设备接收第二现实世界环境的第二环境光照不可知的数字图像。类似于第一环境光照不可知的数字图像，第二环境光照不可知的数字图像由第二计算设备使用捕捉侧环境光照色彩转换从第二数字图像生成。换言之，第二数字图像可以是由第二计算设备捕捉的原始图像，并且根据该原始图像生成第二环境光照不可知的数字图像。在一些情形中，作为环境光照不可知的数字图像的补充或替换，从一个设备传送至另一设备的数字图像可以是原始捕捉的图像(例如，基本上未修改的图像)。
在图3中示意性地解说了数字图像传输和接收，其中第一环境光照不可知的数字图像304A从第一计算设备100A被传送至第二现实世界环境300B中的第二计算设备100B。类似地，第二环境光照不可知的数字图像304B由第一计算设备100A从第二计算设备100B接收。
数字图像可以按任何合适的方式来传送和接收。例如，数字图像可以通过有线连接、经由合适的无线通信协议(例如，蓝牙)、通过局域网、通过因特网等无线地被传送。此外，在一些示例中，第一环境光照不可知的数字图像的传输和第二环境光照不可知的数字图像的接收由第一计算设备的实况视频通信应用来执行，从而允许第一和第二设备交换其周围环境的实况视频。然而，数字图像可以在任何合适的上下文中在两个设备之间被交换。
再次返回到图2，在212，方法200包括基于第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换来从第二环境光照不可知的数字图像生成经光照校正的数字图像。换言之，各种图像处理技术和算法可被用于调整色彩在经光照校正的数字图像中如何表现以计及该图像在其下被显示的光照条件。关于环境光照色彩转换的附加细节在以下关于图6和7提供。
在一些示例中，显示侧环境光照色彩转换被配置成转换第二环境光照不可知的数字图像的色彩，以保持第二现实世界环境在第一现实世界环境的环境光照条件下的感知色彩精度。例如，如果现实世界环境的环境光照条件相对温暖，则显示侧环境光照色彩转换可以将图像色彩转换成看起来相对较冷，使得色彩在温暖光照下被感知为是中性的。在一些情形中，显示侧环境光照色彩转换可以使用人类感知模型来计及数字图像的像素将如何由人类观察者的视觉系统来感知。
在图3中示意性地解说了经光照校正的数字图像的生成。如图所示，一旦从第二计算设备100B接收到第二环境光照不可知的数字图像304B，第一计算设备100A就使用显示侧环境光照色彩转换SA3来生成经光照校正的数字图像306A。类似地，第二计算设备100B使用显示侧环境光照色彩转换SB3来从第一环境光照不可知的数字图像304B生成经光照校正的数字图像306B。在图3中以及本文的其他地方，以点填充图案示出了经光照校正的数字图像，以将其与第一/第二数字图像302A/302B和环境光照不可知的数字图像304A/304B区分开。
简要返回到图2，在214，方法200包括在第一计算设备上显示经光照校正的数字图像。取决于第一计算设备的特定显示器硬件，因显示器而异的色彩校准可以与显示侧环境光照色彩转换合作地或作为其组成部分或者以其他方式在显示经光照校正的数字图像之前被执行。此类因显示器而异的色彩校准可以按任何合适的方式来执行，并且包括例如基于本地环境光照条件和预设的适应强度来适应显示性能。
取决于所执行的特定光照转换，所显示的经光照校正的数字图像中的色彩可由第一用户感知为与相同的色彩向第二现实世界环境中的第二用户如何表现类似(如果不相同)。如以上所讨论的，取决于所涉及的特定显示器硬件，因显示器而异的色彩校准可被执行。换言之，如果第二用户拍摄衣物制品的照片并将其发送给第一用户，则这两个用户可以按相同的方式感知该衣物制品的色彩。因此，第一用户可以例如针对第二用户的肤色提供关于衣物的色彩是否讨人喜欢的建议。而在没有本文所述的环境色彩转换的情况下，关于两个用户是否真正看到相同的色彩将存在不确定性。
现在转到图4，在一些情形中，计算设备可以将数字图像色彩转换应用于由设备自身捕捉的图像。图4再现了来自图1的计算设备100A，仍然正显示图像107A和112A。如以上所讨论的，图像107A从第二计算设备接收，并且描绘了第二现实世界环境。然而，图像112A由计算设备100A捕捉并且描绘了设备100A的第一现实世界环境。在一些情形中，可以在图像112A显示在显示器102A上之前将数字图像色彩转换应用于图像112A。
相应地，图4也解说了用于数字图像色彩转换的示例方法400。在402，方法400包括捕捉数字图像。在404，方法400包括确定计算设备的现实世界环境的环境光照条件。在406，方法400包括使用捕捉侧环境光照色彩转换从数字图像生成第一环境光照不可知的数字图像。这些步骤可以按与以上关于图2所述的基本上相同的方式来执行。换言之，计算设备捕捉其自身环境的数字图像，并且基于该设备自身环境的环境光照条件来生成第一环境光照不可知的数字图像。第一环境光照不可知的数字图像可被传送至第二计算设备，而描述第二现实世界环境的第二环境光照不可知的数字图像作为回报被接收。第一经光照校正的数字图像可随后由计算设备100A从第二环境光照不可知的数字图像生成并且显示为图像107A。
然而，在408，方法400包括经由显示侧环境光照色彩转换从第一环境光照不可知的数字图像生成第二经光照校正的数字图像。换言之，该设备对其经由捕捉侧环境光照色彩转换生成的且描绘了第一现实世界环境的相同环境光照不可知的数字图像执行显示侧环境光照色彩转换。因此，该设备生成经环境光照校正的数字图像，该数字图像描述了其自身环境并且被修改以计及该设备自身环境中的环境光照条件。
在410，方法400包括在计算设备上显示第二经光照校正的数字图像(例如，作为图像112A)。这可确保在显示器上可见的用户本地环境的图像看起来在视觉上匹配用户在他或她的本地环境中实际体验的色彩。这与其中图像中的色彩可与现实世界环境中可见的色彩不同地被感知的传统的自动白平衡和其他类似的图像处理技术形成对比。如以上所讨论的，第二经光照校正的数字图像可被呈现在采用因显示器而异的色彩校准的显示器上。
迄今，数字图像色彩转换的描述聚焦在其对由相机捕捉的数字图像的应用上。然而，本文所描述的数字图像色彩转换技术可以附加地或替换地应用于由计算设备显示的用户界面元素。例如，图5示出了在其显示器上渲染各种用户界面元素的另一示例计算设备500。这包括实况视频通信应用502，该应用进而包括数字图像504。还显示了界面元素506A(新闻应用)、506B(股票应用)和506C(天气应用)。
如以上所讨论的，在其中观看数字图像的环境的环境光照条件可能会影响数字图像的色彩如何被感知。例如，在具有相对温暖的光照的环境中显示的白色图像可能被环境光照“污染”，并且因此被感知为比该图像的实际像素值所指示的相对更暖。用户界面元素的色彩可能会以与由相机捕捉的数字图像几乎相同的方式受到影响。
相应地，作为将色彩转换应用于数字图像的补充或替换，计算设备可被配置成对所显示的用户界面元素执行显示侧环境光照色彩转换。在图5中，计算设备500将经光照校正的数字图像504显示为包括多个用户界面元素的用户界面的一部分，如以上所讨论的。用户界面可被渲染并呈现在经色彩校准的显示器上。尽管在图5中不可见，这些用户界面元素中的每一者可具有预定义的界面元素色彩(例如，如由软件应用的编程所指定的)，并且此类色彩的感知可能受到本地环境光照的影响。因此，在图5中，显示侧环境光照色彩转换C1被用于基于本地环境光照条件来将界面元素色彩转换成经光照校正的界面元素色彩。经光照校正的界面元素以点填充图案示出。
在图5中，显示侧环境光照色彩转换被应用于用户界面的所有元素。换言之，由计算设备500渲染的基本上所有像素都可能受到数字图像色彩转换的影响。然而，在一些情形中，数字图像色彩转换可被应用于少于由计算设备渲染的所有像素/UI元素。例如，显示侧环境光照色彩转换可在每应用基础上被应用，这意味着一些应用内容被渲染而无需考虑本地环境光照。
在技术层面上，显示侧环境光照色彩转换通常将涉及修改由设备显示的像素的RGB值。在一些场景中，这可以经由软件通过GPU着色器计算来完成，在该情形中，执行显示侧环境光照色彩转换通常将消耗计算设备的附加处理器周期，这会对设备性能和电功率消耗有影响。附加地或替换地，显示侧环境光照色彩转换的各方面可(例如，连同上述因显示器而异的色彩校准)被集成到硬件显示器流水线中。
在任何情况下，对像素RGB值的修改也可影响图像的相对亮度。例如，当图像被适配成在相对较冷的环境中显示时，图像的色彩配置可被偏移以看上去相对更暖。然而，这也可导致图像看上去相对更暗，并且因此更难以看清。作为响应，计算设备可以通过增加硬件显示器背光的强度来增加图像的亮度，尽管这也将消耗附加的电功率。取决于设备的特定配置，电功率消耗的增加可能对设备性能是不利的(诸如在设备依靠电池功率运行时)。相应地，显示侧环境光照色彩转换可以可任选地基于计算设备的电池电荷水平降至低于一阈值而被中断。在一些情形中，该阈值可以是100％，这意味着数字图像色彩转换仅在设备被插入时才被执行。附加地或替换地，电池电荷阈值可以是用户指定的。
如以上所讨论的，与捕捉侧和显示侧环境光照色彩转换相关联的特定技术细节可因不同的实现而变化。尽管如此，图6解说了可根据显示侧转换使用的用于数字图像色彩转换的示例方法600。如同本文所描述的其他方法一样，方法600可以在任何合适的计算机硬件(包括以上描述的计算设备中的任一者、以下关于图10描述的计算系统1000和/或另一合适的系统)上被实现。
数字图像的像素值通常是关于特定色彩空间来定义的。存在各自针对不同应用具有特定适用性的各种标准化的色彩空间。关于数字相机和计算机显示器，使用Adobe RGB和sRGB色彩空间是常见的。这些色彩空间定义了可感知色彩的有限集合，其中每种不同的色彩由数字值–例如，不同的红色、绿色和蓝色值、或者可被映射到色度图的数字元组来定义。
当计算设备被用于捕捉数字图像时，图像中的色彩将关于由设备使用的色彩空间来定义，并且该色彩空间可基于设备相机和/或显示器的硬件特性来选择。然而，通常需要将经白平衡的色彩从设备RGB空间转换到XYZ三刺激值空间，使得后续计算可被执行。相应地，在604，方法600包括将与数字图像所使用的色彩空间相关联的白色的RGB值(例如，[255,255,255]或[1,1,1])转换成第一XYZ值。
在数字成像中，白点是定义特定光照下的色彩“白色”的三刺激值或色度坐标。因此，期望在不同光照条件下拍摄的图像具有不同的白点。例如，在相对温暖的白炽灯照明(例如，色温为3000K)下成像的白色物体将具有与在日光条件(例如，6500K)下成像的相同白色物体不同的外观。因此，不同的白点目标被用于具有不同光照条件的图像，使得物体在两个图像中看起来为白色。以上计算出的第一XYZ值可以关于数字图像的源白点来定义，该源白点可以是由图像处理软件(例如，基于图像统计数据)自动选择的、或在数字图像被捕捉时由捕捉过程应用的白点。
相应地，在606，方法600包括将图像的源白点设置为XYZ值，并且将图像的目标白点设置为另一XYZ值。源白点可以从潜在地从如上所述的环境色彩传感器报告的环境光照条件推断出。在示例场景中，源白点可以是3000K(即，温暖的光照)，而目标白点是6500K(即，日光条件)。在该示例中，6500K是以上关于环境光照不可知的数字图像参考的预定义光照条件。
在608，方法600包括应用色度适配变换，以将数字图像的第一白色XYZ值转换成具有目标白点的经适配的XYZ值。如以上所讨论的，关于源白点定义了数字图像的第一白色XYZ值。因此，色度适配变换具有将定义在源光照条件下的白色的感知值的第一白色XYZ值转换成定义在目标光照条件下的白色的感知值的第二白色XYZ值的效果。
色度适配变换的特性将取决于使用哪个色彩外观模型。作为示例，特定于CIECAM02、iCAM06和Bradford色彩外观模型的色度适配变换可被使用。在特定场景中，色度适配变换可包括设置3x3色度适配变换矩阵matAdapt(例如，由iCAM图像外观模型指定)。接下来，[3x1]光谱锐化的RGB响应根据第一白色XYZ值计算。作为示例，矩阵matAdapt可被应用于第一白色XYZ值(XYZin)、以及源和目标白点XYZ值(whiteSrc和whiteDest)以给出RGB白点：
RGBin＝matAdapt*XYZin
RGB_whiteSrc＝matAdapt*whiteSrc
RGB_whiteDest＝matAdapt*whiteDest
接下来，色度适配变换可包括基于指定的适配强度、环境光照环绕因素和环境光照亮度因素来计算适配度。适配度degAdapt可以按任何合适的方式来表达——例如，被表达为零到一之间的值。经适配的白色RGB值基于第一白色XYZ值、源和目标RGB白点和适配度来计算：
adaptedRGB[ii]＝(degAdapt*RGB_whiteDest[ii]/RGB_whiteSrc[ii]+1–degAdapt)*RGBin[ii]，其中0≤ii≤2。
最终，经适配的白色XYZ XYZ_adapt值可以根据经适配的白色RGB值来计算：
XYZ_adapt＝inv(matAdapt)*adaptedRGB
在610，方法600包括针对设备显示器的期望的输出色彩空间(例如，sRGB)将经适配的XYZ值转换成经适配的RGB值。基于经适配的RGB值，经环境光照校正的数字图像可被生成。这可包括例如修改数字图像的像素以计及以上计算出的新的经光照适配的RGB白色值，使得经环境光照校正的数字图像具有经适配的RGB色彩值。此外，当在显示侧环境光照色彩转换的上下文中应用时，经适配的XYZ色彩值可被用作用于因显示器而异的色彩校准的目标白点。这可用于调谐设备的物理显示器硬件，以按感知上准确的方式渲染经光照校正的数字图像。
图7解说了用于捕捉侧环境光照色彩转换的示例方法700。如同本文所描述的其他方法一样，方法700可以在任何合适的计算机硬件(包括以上描述的计算设备中的任一者、以下关于图10描述的计算系统1000和/或另一合适的系统)上被实现。
在702，方法700包括对所捕捉的数字图像执行白平衡。执行白平衡包括首先估计环境的环境光照条件(例如，经由如上所述的环境色彩传感器)，或者估计所捕捉场景的环境白点，以及将白平衡通道增益应用于所捕捉图像的色彩通道。因为捕捉侧环境光照色彩转换的目标是要实现感知色彩精度，所以方法700的白平衡步骤被完成以便尽可能准确地估计环境中的环境光照条件。与用于相机调谐的常规办法不同，方法700不纳入主观用户偏好。在白平衡之后，图像中的中性色看上去是中性的。
继续方法700，在704，经白平衡的设备RGB值基于源白点(例如，5000K的色温(D50))而被转换成XYZ值。在706，方法700包括将图像的目标白点设置为XYZ值(例如，D65)。如前所述，在708，方法700包括应用色度适配变换，以将数字图像的XYZ值转换成具有目标白点的经适配的XYZ值。在710，方法700包括针对设备相机的期望的输出色彩空间(例如，sRGB)将经适配的XYZ值转换成经适配的RGB值。基于经适配的RGB值，环境光照不可知的数字图像可被生成。
以上对数字图像色彩转换的描述聚焦于其中两个计算设备中的每一者负责图像处理的某个方面的场景。换言之，捕捉侧环境光照色彩转换在实际捕捉数字图像的第一计算设备上被执行，而显示侧环境光照色彩转换在图像在其上被显示的第二计算设备上被执行。然而，此类处理可以分布在任何数目的设备(包括仅一个设备)之间。
图8解说了其中单个设备对从外部源接收到的数字图像执行捕捉侧和显示侧环境光照色彩转换两者的用于数字图像色彩转换的另一示例方法800。图8可以在任何合适的计算机硬件(包括以上描述的计算设备中的任一者、以下关于图10描述的计算系统1000和/或另一合适的系统)上被实现。出于该描述的目的，方法800将被假定由存在于第一现实世界环境中的第一计算设备执行。
在802，方法800包括接收第二现实世界环境的数字图像和描述第二现实世界环境的环境光照条件的环境光照信息。如以上所讨论的，两个计算设备之间的网络通信可以按任何合适的方式来完成。关于图8，接收到的数字图像尚未经历捕捉侧环境光照色彩转换。换言之，接收到的数字图像可被描述为原始捕捉的图像。取决于用于捕捉数字图像的成像硬件的特性，白平衡和/或其他图像处理在传输之前可以或可以不被应用。
环境光照信息可以采取任何合适的形式，并且可以取决于用于捕捉数字图像的设备的硬件能力。当可用时，环境色彩传感器(诸如图1中所示的传感器106A/106B)可被用于量化第二现实世界环境中的环境光照条件(例如，作为以开尔文度测得的色温)。在其他示例中，第二现实世界环境的环境光照条件可以由第二计算设备在发送数字图像之前或由第一计算设备在接收到数字图像之后从图像本身的像素值推断出。换言之，环境光照信息可以经由图像像素值、作为附加的元数据、作为单独的文件等被包括在数字图像本身中。
继续图8，在804，方法800包括基于第二现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换来从数字图像生成环境光照不可知的数字图像。值得注意的是，在该情形中，捕捉侧环境光照色彩转换由实际上未捕捉数字图像的设备来执行。无论如何，术语“捕捉侧环境光照色彩转换”仍然是指用于生成环境光照不可知的数字图像的算法和数字图像处理技术的某种组合。此类转换可以在任何合适的计算设备上被执行，只要关于第二现实世界环境的环境光照条件的足够信息是可用的。
在806，方法800包括确定第一现实世界环境的环境光照条件。在808，方法800包括基于第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换来从环境光照不可知的数字图像生成经光照校正的数字图像。在810，方法800包括显示经光照校正的数字图像。经光照校正的数字图像可被显示在经色彩校准的显示器上，如以上所讨论的。这些步骤可以基本上如以上关于图2所述的被执行。
以上对数字图像色彩转换的描述一般聚焦于其中两个计算设备正在网络上交换数字图像(例如，作为实况视频呼叫的一部分)的场景。然而，所描述的技术可以附加地或替换地在单个设备上被执行。图9解说了其中单个设备在第一现实世界环境中捕捉数字图像并在第二现实世界环境中显示该数字图像的用于数字图像色彩转换的另一示例方法900。方法900可以在任何合适的计算机硬件(包括以上描述的计算设备中的任一者、以下关于图10描述的计算系统1000和/或另一合适的系统)上被实现。
在902，方法900包括捕捉第一现实世界环境的数字图像。在904，方法900包括确定第一现实世界环境的第一环境光照条件。在906，方法900包括基于第一环境光照条件，使用捕捉侧环境光照色彩转换来从数字图像生成环境光照不可知的数字图像。这些步骤可以基本上如以上关于图2所述的被执行。
然而，与方法200形成对比，环境光照不可知的数字图像未被传送到第二计算设备，第二环境光照不可知的数字图像也未被接收到。相反，环境光照不可知的数字图像被存储在计算设备上以供稍后显示。除了原始数字图像之外，还可以存储环境光照不可知的数字图像，这意味着数字图像被保留，或者环境光照不可知的数字图像可以替代原始捕捉的图像。
在908，方法900包括接收输入以显示环境光照不可知的数字图像。值得注意的是，该输入在计算设备处于具有第二环境光照条件的第二现实世界环境中时可被接收。替换地，计算设备可以保持在第一现实世界环境中，尽管环境光照条件已经改变(例如，因为光源被打开/关闭或一天中的时间已经改变)。无论如何，当输入被接收到时，环境光照条件现在会有所不同。
接收到的输入可以采取任何合适的形式。例如，用户可以从相册或其他软件应用中选择图像以供显示。替换地，图像可以由一个或多个软件应用响应于应用编程或一个或多个外部因素而被自动地显示。例如，数字图像可被保存为通信设备上特定联系人的联系人照片。因为联系人照片通常与来自其相关联的联系人的新通信合作地被显示，所以用于显示图像的输入可以采用来自特定联系人的新呼叫或通信的形式。
在910，方法900包括确定第二现实世界环境的第二环境光照条件。在912，方法900包括基于第二环境光照条件，使用显示侧环境光照色彩转换来从该环境光照不可知的数字图像生成经光照校正的数字图像。在914，方法900包括显示经光照校正的数字图像。再一次，这些步骤可以基本上如以上关于图2所述的被执行。例如，经光照校正的数字图像可被呈现在经色彩校准的显示器上。然而，值得注意的是，在该情形中，显示侧环境光照色彩转换由捕捉了数字图像的相同设备来执行。
由计算设备长期存储的数字图像的版本可因不同的实现而变化。如以上所讨论的，环境光照不可知的数字图像可以代替原始捕捉的图像，或者两个图像都可被保留。类似地，尽管经光照校正的数字图像一般将是向用户显示的图像，但是经光照校正的数字图像可以或可以不被长期存储。例如，即使在经光照校正的数字图像被显示时，环境光照不可知的数字图像也可保持被存储在计算设备上。当经光照校正的数字图像不再被显示时，它可以可任选地保持在计算设备上的存储中。替换地，给定经光照校正的数字图像可能不适合于计算设备可能经历的其他环境光照条件，经光照校正的数字图像可以在每次接收到用于显示数字图像的输入时被丢弃和/或代替。更进一步，经光照校正的数字图像可以代替环境光照不可知的数字图像。在一些情形中，计算设备可被配置成在一些情况下(例如，在用户请求之际)显示环境光照不可知的数字图像而不是经光照校正的数字图像。
在一些实施例中，本文中所描述的方法和过程可以与一个或多个计算设备的计算系统绑定。具体而言，这样的方法和过程可被实现为计算机应用程序或服务、应用编程接口(API)、库、和/或其他计算机程序产品。
图10示意性地示出了可执行上述方法和过程中的一个或多个的计算系统1000的非限制性实施例。以简化形式示出了计算系统1000。计算系统1000可采取一个或多个下列各项的形式：个人计算机、服务器计算机、平板计算机、家庭娱乐计算机、网络计算设备、游戏设备、移动计算设备、移动通信设备(例如，智能电话)、和/或其他计算设备。
计算系统1000包括逻辑机1002和存储机1004。计算系统1000可任选地包括显示子系统1006、输入子系统1008、通信子系统1010和/或在图10中未示出的其他组件。
逻辑机1002包括被配置成执行指令的一个或多个物理设备。例如，逻辑机可被配置成执行作为一个或多个下列各项的一部分的指令：应用、服务、程序、例程、库、对象、组件、数据结构、或其他逻辑构造。此类指令可被实现以执行任务、实现数据类型、变换一个或多个组件的状态、实现技术效果、或以其他方式得到期望的结果。
逻辑机可包括被配置成执行软件指令的一个或多个处理器。附加地或替换地，逻辑机可包括被配置成执行硬件或固件指令的一个或多个硬件或固件逻辑机。逻辑机的处理器可以是单核或多核的，并且在其上执行的指令可被配置成用于串行、并行、和/或分布式处理。逻辑机的各个个体组件可任选地分布在两个或更多个分开的设备之中，这些设备可位于远程和/或被配置成用于协同处理。逻辑机的各方面可以由用云计算配置进行配置的能远程地访问的联网计算设备来虚拟化和执行。
存储机1004包括被配置成保持能由逻辑机执行以实现本文中所描述的方法和过程的指令的一个或多个物理设备。当实现这些方法和过程时，可以变换存储机1004的状态－例如，以保持不同的数据。
存储机1004可包括可移除和/或内置设备。存储机1004可包括光学存储器(例如，CD、DVD、HD-DVD、蓝光盘等)、半导体存储器(例如，RAM、EPROM、EEPROM等)、和/或磁存储器(例如，硬盘驱动器、软盘驱动器、磁带驱动器、MRAM等)，等等。存储机1004可包括易失性、非易失性、动态、静态、读/写、只读、随机存取、顺序存取、位置可寻址、文件可寻址、和/或内容可寻址设备。
将领会，存储机1004包括一个或多个物理设备。然而，本文中所描述的指令的各方面可替换地通过不被物理设备保持达有限历时的通信介质(例如，电磁信号、光信号等)来传播。
逻辑机1002和存储机1004的各方面可被一起集成到一个或多个硬件逻辑组件中。此类硬件逻辑组件可包括例如现场可编程门阵列(FPGA)、程序和应用专用集成电路(PASIC/ASIC)、程序和应用专用标准产品(PSSP/ASSP)、片上系统(SOC)，以及复杂可编程逻辑器件(CPLD)。
术语“模块”、“程序”和“引擎”可被用来描述计算系统1000的被实现为执行特定功能的方面。在一些情形中，可以经由执行被存储机1004保持的指令的逻辑机1002来实例化模块、程序或引擎。将理解，不同的模块、程序、和/或引擎可以从相同的应用、服务、代码块、对象、库、例程、API、函数等实例化。类似地，相同的模块、程序和/或引擎可由不同的应用、服务、代码块、对象、例程、API、功能等来实例化。术语“模块”、“程序”和“引擎”意在涵盖单个或成组的可执行文件、数据文件、库、驱动程序、脚本、数据库记录等。
应当领会，如本文中所使用的“服务”是能跨多个用户会话执行的应用程序。服务可用于一个或多个系统组件、程序、和/或其他服务。在一些实现中，服务可以在一个或多个服务器计算设备上运行。
当显示子系统1006时被包括时，显示子系统1006可被用来呈现由存储机1004保持的数据的视觉表示。该视觉表示可采取图形用户界面(GUI)的形式。由于本文中所描述的方法和过程改变了由存储机保持的数据，并因而变换了存储机的状态，因此同样可以变换显示子系统1006的状态以视觉地表示底层数据中的改变。显示子系统1006可包括利用实质上任何类型的技术的一个或多个显示设备。可将此类显示设备与逻辑机1002和/或存储机1004组合在共享封装中，或者此类显示设备可以是外围显示设备。
当包括输入子系统1008时，输入子系统1008可包括诸如键盘、鼠标、触摸屏、或游戏控制器之类的一个或多个用户输入设备或者与上述用户输入设备对接。在一些实施例中，输入子系统可包括所选择的自然用户输入(NUI)部件或者与上述自然用户输入(NUI)部件相对接。此类部件可以是集成的或外围的，并且输入动作的换能和/或处理可以在板上或板外被处置。示例NUI部件可包括用于语音和/或话音识别的话筒；用于机器视觉和/或姿势识别的红外、色彩、立体、和/或深度相机；用于运动检测和/或意图识别的头部跟踪器、眼睛跟踪器、加速度计、和/或陀螺仪；以及用于评估脑部活动的电场感测部件。
当包括通信子系统1010时，通信子系统1010可被配置成将计算系统1000与一个或多个其他计算设备通信地耦合。通信子系统1010可包括与一个或多个不同通信协议兼容的有线和/或无线通信设备。作为非限制性示例，通信子系统可被配置成用于经由无线电话网络、或者有线或无线局域网或广域网进行通信。在一些实施例中，通信子系统可允许计算系统1000经由诸如互联网之类的网络将消息发送至其他设备以及/或者从其他设备接收消息。
在一示例中，一种用于数字图像色彩转换的方法包括：在第一计算设备处捕捉第一现实世界环境的第一数字图像；基于该第一现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换从该第一数字图像生成第一环境光照不可知的数字图像；向第二现实世界环境中的第二计算设备传送该第一环境光照不可知的数字图像；从该第二计算设备接收该第二现实世界环境的第二环境光照不可知的数字图像，该第二环境光照不可知的数字图像已由该第二计算设备使用捕捉侧环境光照色彩转换从第二数字图像生成；基于该第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换从该第二环境光照不可知的数字图像生成经光照校正的数字图像；以及在该第一计算设备上显示该经光照校正的数字图像。在该示例或任何其他示例中，捕捉侧环境光照色彩转换被配置成将第一数字图像的色彩转换为看起来就好像该第一数字图像是在预定义光照条件下被捕捉的。在该示例或任何其他示例中，预定义光照条件是6500K的环境色温(D65)。在该示例或任何其他示例中，捕捉侧环境光照转换包括：将数字图像的白色RGB色彩值转换成具有源白点的第一白色XYZ三刺激值，应用色度适配变换以基于环境光照环绕和亮度因素来将该第一白色XYZ三刺激值转换成具有目标白点的经适配的白色XYZ三刺激值，以及生成具有经适配的RGB色彩值的环境光照不可知的数字图像。在该示例或任何其他示例中，显示侧环境光照色彩转换被配置成转换第二环境光照不可知的数字图像的色彩，以在第一现实世界环境的环境光照条件下在经色彩校准的显示器上被显示时保持第二现实世界环境的感知色彩精度。在该示例或任何其他示例中，第一现实世界环境的环境光照条件是使用第一计算设备的环境色彩传感器来确定的。在该示例或任何其他示例中，该方法进一步包括：在第一计算设备上使用显示侧环境光照色彩转换以从第一现实世界环境的第一环境光照不可知的数字图像生成第二经光照校正的数字图像，以及在第一计算设备上显示第二经光照校正的数字图像。在该示例或任何其他示例中，第一环境光照不可知的数字图像的传输和第二环境光照不可知的数字图像的接收由第一计算设备的实况视频通信应用来执行。在该示例或任何其他示例中，经光照校正的数字图像被显示为包括一个或多个用户界面元素的用户界面的一部分，该一个或多个用户界面元素中的每一者具有预定义的界面元素色彩，并且该方法进一步包括基于第一现实世界环境的环境光照条件使用显示侧环境光照色彩转换来将预定义的界面元素色彩转换成经光照校正的界面色彩。在该示例或任何其他示例中，该方法进一步包括基于第一计算设备的电池电荷水平降至低于一阈值来中断显示侧环境光照色彩转换。在该示例或任何其他示例中，该方法进一步包括：当第一计算设备位于第三现实世界环境中时，接收输入以显示第一环境光照不可知的数字图像；基于第三现实世界环境的环境光照条件，使用显示侧环境光照色彩转换从第一环境光照不可知的数字图像生成第二经光照校正的数字图像；以及在第一计算设备上显示第二经光照校正的数字图像。在该示例或任何其他示例中，即使在第二经光照校正的数字图像被显示时，第一环境光照不可知的数字图像也被存储在第一计算设备上。
在一示例中，一种计算设备包括：逻辑机；以及存储机，该存储机保持可由该逻辑机执行以进行以下操作的指令：当该计算设备处于第一现实世界环境中时，从第二计算设备接收第二现实世界环境的数字图像；基于第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换从该数字图像生成经光照校正的数字图像；以及在该计算设备的显示器上显示经光照校正的数字图像。在该示例或任何其他示例中，数字图像是由第二计算设备使用捕捉侧环境光照色彩转换从原始捕捉的图像生成的环境光照不可知的数字图像。在该示例或任何其他示例中，捕捉侧环境光照色彩转换被配置成将原始捕捉的图像的色彩转换成看起来就好像该原始捕捉的图像是在预定义光照条件下被捕捉的。在该示例或任何其他示例中，预定义光照条件是6500K的环境色温(D65)。在该示例或任何其他示例中，捕捉侧环境光照色彩转换包括：将原始捕捉的图像的白色RGB色彩值转换成具有源白点的第一白色XYZ三刺激值，应用色度适配变换以基于环境光照环绕和亮度因素来将该第一白色XYZ三刺激值转换成具有目标白点的经适配的白色XYZ三刺激值，以及生成具有经适配的RGB色彩值的环境光照不可知的数字图像。在该示例或任何其他示例中，这些指令可被进一步执行以基于描述第二现实世界环境的环境光照条件的环境光照信息，使用捕捉侧环境光照色彩转换从数字图像生成环境光照不可知的数字图像，并且使用显示侧环境光照色彩转换从环境光照不可知的数字图像生成经光照校正的数字图像。在该示例或任何其他示例中，显示侧环境光照色彩转换被配置成转换数字图像的色彩，以在第一现实世界环境的环境光照条件下保持第二现实世界环境的感知色彩精度。
在一示例中，一种用于数字图像色彩转换的方法包括：在第一现实世界环境中的计算设备处接收第二现实世界环境的数字图像和描述该第二现实世界环境的环境光照条件的环境光照信息；基于该第二现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换从该数字图像生成环境光照不可知的数字图像；基于第一现实世界环境的环境光照条件，使用显示侧环境光照色彩转换从环境光照不可知的数字图像生成经光照校正的数字图像；以及在该计算设备上显示该经光照校正的数字图像。
应当理解，本文中所描述的配置和/或办法本质上是示例性的，并且这些具体实施例或示例不应被视为具有限制意义，因为许多变体是可能的。本文中所描述的具体例程或方法可表示任何数目的处理策略中的一个或多个。由此，所例示和/或所描述的各种动作可以以所例示和/或所描述的顺序执行、以其他顺序执行、并行地执行，或者被省略。同样，以上所描述的过程的次序可被改变。
本公开的主题包括此处公开的各种过程、系统和配置以及其他特征、功能、动作和/或属性、以及它们的任一和全部等价物的所有新颖且非显而易见的组合和子组合。

Claims (12)

1.一种用于数字图像色彩转换的方法，包括：
在第一计算设备处捕捉第一现实世界环境的第一数字图像；
基于所述第一现实世界环境的环境光照条件，使用捕捉侧环境光照色彩转换从所述第一数字图像生成第一环境光照不可知的数字图像；
向第二现实世界环境中的第二计算设备传送所述第一环境光照不可知的数字图像；
从所述第二计算设备接收所述第二现实世界环境的第二环境光照不可知的数字图像，所述第二环境光照不可知的数字图像已由所述第二计算设备使用所述捕捉侧环境光照色彩转换从第二数字图像生成；
基于所述第一现实世界环境的所述环境光照条件，使用显示侧环境光照色彩转换从所述第二环境光照不可知的数字图像生成经光照校正的数字图像；以及
在所述第一计算设备上显示所述经光照校正的数字图像。
2.如权利要求1所述的方法，其中所述捕捉侧环境光照色彩转换被配置成将所述第一数字图像的色彩转换为看起来就好像所述第一数字图像是在预定义光照条件下被捕捉的。
3.如权利要求2所述的方法，其中所述预定义光照条件是6500K的环境色温(D65)。
4.如权利要求2所述的方法，其中所述捕捉侧环境光照转换包括：将所述数字图像的白色RGB色彩值转换成具有源白点的第一白色XYZ三刺激值，应用色度适配变换以基于环境光照环绕和亮度因素来将所述第一白色XYZ三刺激值转换成具有目标白点的经适配的白色XYZ三刺激值，以及生成具有经适配的RGB色彩值的所述环境光照不可知的数字图像。
5.如权利要求1所述的方法，其中所述显示侧环境光照色彩转换被配置成转换所述第二环境光照不可知的数字图像的色彩，以在所述第一现实世界环境的所述环境光照条件下在经色彩校准的显示器上被显示时保持所述第二现实世界环境的感知色彩精度。
6.如权利要求1所述的方法，其中所述第一现实世界环境的所述环境光照条件是使用所述第一计算设备的环境色彩传感器来确定的。
7.如权利要求1所述的方法，进一步包括：在所述第一计算设备上使用所述显示侧环境光照色彩转换以从所述第一现实世界环境的所述第一环境光照不可知的数字图像生成第二经光照校正的数字图像，以及在所述第一计算设备上显示所述第二经光照校正的数字图像。
8.如权利要求1所述的方法，其中所述第一环境光照不可知的数字图像的传输和所述第二环境光照不可知的数字图像的接收由所述第一计算设备的实况视频通信应用来执行。
9.如权利要求1所述的方法，其中所述经光照校正的数字图像被显示为包括一个或多个用户界面元素的用户界面的一部分，所述一个或多个用户界面元素中的每一者具有预定义的界面元素色彩，并且所述方法进一步包括基于所述第一现实世界环境的所述环境光照条件使用所述显示侧环境光照色彩转换来将所述预定义的界面元素色彩转换成经光照校正的界面色彩。
10.如权利要求1所述的方法，进一步包括基于所述第一计算设备的电池电荷水平降至低于一阈值来中断所述显示侧环境光照色彩转换。
11.如权利要求1所述的方法，进一步包括：
当所述第一计算设备位于第三现实世界环境中时，接收输入以显示所述第一环境光照不可知的数字图像；
基于所述第三现实世界环境的环境光照条件，使用所述显示侧环境光照色彩转换从所述第一环境光照不可知的数字图像生成第二经光照校正的数字图像；以及
在所述第一计算设备上显示所述第二经光照校正的数字图像。
12.如权利要求11所述的方法，其中即使在所述第二经光照校正的数字图像被显示时，所述第一环境光照不可知的数字图像也被存储在所述第一计算设备上。
CN201980049160.6A 2018-07-23 2019-06-19 用于环境自适应数字内容的色彩转换 Pending CN112513939A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/043,017 2018-07-23
US16/043,017 US10715774B2 (en) 2018-07-23 2018-07-23 Color conversion for ambient-adaptive digital content
PCT/US2019/037827 WO2020023135A1 (en) 2018-07-23 2019-06-19 Color conversion for ambient-adaptive digital content

Publications (1)

Publication Number Publication Date
CN112513939A true CN112513939A (zh) 2021-03-16

Family

ID=67145878

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980049160.6A Pending CN112513939A (zh) 2018-07-23 2019-06-19 用于环境自适应数字内容的色彩转换

Country Status (4)

Country Link
US (1) US10715774B2 (zh)
EP (1) EP3827410A1 (zh)
CN (1) CN112513939A (zh)
WO (1) WO2020023135A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111508450B (zh) * 2019-01-30 2021-08-31 北京小米移动软件有限公司 屏幕颜色转换方法、装置、存储介质和电子设备
EP4136634A1 (en) 2020-04-17 2023-02-22 Dolby Laboratories Licensing Corp. Chromatic ambient light correction

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020196972A1 (en) * 2001-06-26 2002-12-26 Gokalp Bayramoglu Color correction for color devices based on illuminant sensing
CN102783133A (zh) * 2010-02-24 2012-11-14 伊斯曼柯达公司 具有在不利条件下提高可见度的显示器的便携式成像装置
US20140292997A1 (en) * 2013-03-29 2014-10-02 Konica Minolta Laboratory U.S.A., Inc. Color reproduction of display camera system
US20140362159A1 (en) * 2013-06-07 2014-12-11 Apple Inc. Adaptive post-processing for mobile video calling system
US20150070337A1 (en) * 2013-09-10 2015-03-12 Cynthia Sue Bell Ambient light context-aware display
CN105519109A (zh) * 2013-08-06 2016-04-20 微软技术许可有限责任公司 对在低光照中捕获的视频进行编码
CN107071396A (zh) * 2015-12-23 2017-08-18 欧普菲有限公司 用于测试视频系统的方法、装置和计算机程序产品

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6980697B1 (en) * 2001-02-01 2005-12-27 At&T Corp. Digitally-generated lighting for video conferencing applications
US9955551B2 (en) 2002-07-12 2018-04-24 Yechezkal Evan Spero Detector controlled illuminating system
WO2008115547A1 (en) 2007-03-19 2008-09-25 Sti Medical Systems, Llc A method of automated image color calibration
WO2011028626A2 (en) 2009-09-01 2011-03-10 Entertainment Experience Llc Method for producing a color image and imaging device employing same
JP5752133B2 (ja) 2009-10-08 2015-07-22 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ デジタル画像を低ダイナミック・レンジ（ｌｄｒ）画像から高ダイナミック・レンジ（ｈｄｒ）画像に変換するための方法およびシステム
US8463317B2 (en) * 2009-11-17 2013-06-11 Lg Electronics Inc. Mobile terminal and method of controlling the operation of the mobile terminal
US8922665B2 (en) * 2010-10-06 2014-12-30 Microsoft Corporation Rapidly initializing and dynamically adjusting media streams
US9076252B2 (en) * 2012-01-05 2015-07-07 Qualcomm Incorporated Image perceptual attribute adjustment
US9060113B2 (en) 2012-05-21 2015-06-16 Digimarc Corporation Sensor-synchronized spectrally-structured-light imaging
US9197848B2 (en) * 2012-06-25 2015-11-24 Intel Corporation Video conferencing transitions among a plurality of devices
EP2972155B1 (en) 2013-03-15 2023-08-23 Shiseido Company, Limited Systems and methods for specifying and formulating customized topical agents
US8836716B1 (en) 2013-09-20 2014-09-16 Spinella Ip Holdings, Inc. System and method for reducing visible artifacts in the display of compressed and decompressed digital images and video
US9432612B2 (en) 2013-09-20 2016-08-30 Echostar Technologies L.L.C. Environmental adjustments to perceive true content
EP3304881B1 (en) 2015-06-05 2022-08-10 Apple Inc. Rendering and displaying high dynamic range content
US10368105B2 (en) * 2015-06-09 2019-07-30 Microsoft Technology Licensing, Llc Metadata describing nominal lighting conditions of a reference viewing environment for video playback
KR20170091913A (ko) 2016-02-02 2017-08-10 삼성전자주식회사 영상 서비스 제공 방법 및 장치
US20170279866A1 (en) 2016-03-22 2017-09-28 Intel Corporation Adaptation of streaming data based on the environment at a receiver
US20180060994A1 (en) 2016-08-27 2018-03-01 Grace Rusi Woo System and Methods for Designing Unobtrusive Video Response Codes

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020196972A1 (en) * 2001-06-26 2002-12-26 Gokalp Bayramoglu Color correction for color devices based on illuminant sensing
CN102783133A (zh) * 2010-02-24 2012-11-14 伊斯曼柯达公司 具有在不利条件下提高可见度的显示器的便携式成像装置
US20140292997A1 (en) * 2013-03-29 2014-10-02 Konica Minolta Laboratory U.S.A., Inc. Color reproduction of display camera system
US20140362159A1 (en) * 2013-06-07 2014-12-11 Apple Inc. Adaptive post-processing for mobile video calling system
CN105519109A (zh) * 2013-08-06 2016-04-20 微软技术许可有限责任公司 对在低光照中捕获的视频进行编码
US20150070337A1 (en) * 2013-09-10 2015-03-12 Cynthia Sue Bell Ambient light context-aware display
CN107071396A (zh) * 2015-12-23 2017-08-18 欧普菲有限公司 用于测试视频系统的方法、装置和计算机程序产品

Also Published As

Publication number Publication date
US20200029061A1 (en) 2020-01-23
US10715774B2 (en) 2020-07-14
WO2020023135A1 (en) 2020-01-30
EP3827410A1 (en) 2021-06-02

Similar Documents

Publication Publication Date Title
US9118876B2 (en) Automatic skin tone calibration for camera images
Akyüz et al. Color appearance in high-dynamic-range imaging
US20160180593A1 (en) Wearable device-based augmented reality method and system
US20150009246A1 (en) Image display device and method
US8976191B1 (en) Creating a realistic color for a virtual object in an augmented reality environment
US11727321B2 (en) Method for rendering of augmented reality content in combination with external display
US11375166B2 (en) Selective colorization of thermal imaging
US11416974B2 (en) Image processing method and electronic device supporting the same
KR20200101048A (ko) 영상을 처리하는 전자 장치 및 그 영상 처리 방법
CN112513939A (zh) 用于环境自适应数字内容的色彩转换
CN110225331B (zh) 选择性地将色彩施加到图像
CN117692788B (zh) 一种图像处理方法及电子设备
US11388348B2 (en) Systems and methods for dynamic range compression in multi-frame processing
CN116668656A (zh) 图像处理方法及电子设备
CN108335659A (zh) 图像显示方法及设备
KR20210036292A (ko) 증강 현실 디바이스들에 대한 최적의 휘도 매핑
CN111416971B (zh) 一种控制方法、控制系统、电子设备及可读存储介质
CN116700646B (zh) 图像色差处理方法和装置
CN117119316B (zh) 图像处理方法、电子设备及可读存储介质
CN113615148B (zh) 相机色彩图像处理
WO2023026543A1 (ja) 情報処理装置、情報処理方法、及びプログラム
US20210349315A1 (en) Camera controller and integration for vr photography/videography
US20200073967A1 (en) Technique for saving metadata onto photographs
CN115984448A (zh) 一种透明物模型渲染方法、装置、计算机设备和存储介质
CN117119317A (zh) 图像处理方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination