CN117478861A - 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置 - Google Patents

颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置 Download PDF

Info

Publication number
CN117478861A
CN117478861A CN202311400136.7A CN202311400136A CN117478861A CN 117478861 A CN117478861 A CN 117478861A CN 202311400136 A CN202311400136 A CN 202311400136A CN 117478861 A CN117478861 A CN 117478861A
Authority
CN
China
Prior art keywords
color
image
original
rendering
colors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311400136.7A
Other languages
English (en)
Inventor
李晓阳
陈石平
刘灏
梅大为
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenli Vision Shenzhen Cultural Technology Co ltd
Original Assignee
Shenli Vision Shenzhen Cultural Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenli Vision Shenzhen Cultural Technology Co ltd filed Critical Shenli Vision Shenzhen Cultural Technology Co ltd
Priority to CN202311400136.7A priority Critical patent/CN117478861A/zh
Publication of CN117478861A publication Critical patent/CN117478861A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/327—Calibration thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/15—Processing image signals for colour aspects of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/324—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本公开提供了颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置，方法应用于虚拟拍摄系统中的主控端，还包括显示屏以及拍摄设备，方法包括：获取待显示的一个或多个颜色集合，颜色集合包含原始颜色；控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；获取拍摄设备对显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；获取每个原始颜色在所属的目标渲染图像中的目标位置，基于目标渲染图像所对应的采集图像中目标位置的颜色以确定与原始颜色对应的采集颜色；根据获取的与每个原始颜色分别对应的采集颜色建立颜色校准映射关系。

Description

颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置
技术领域
本公开涉及虚拟拍摄技术领域，尤其涉及颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置。
背景技术
目前，一些影视制作采用了虚拟拍摄技术，在拍摄现场，渲染设备可以渲染出虚拟场景并在显示屏中显示；演员可以在显示屏前方、基于显示屏所显示的虚拟场景中进行表演，拍摄设备可以对演员及虚拟场景进行拍摄。其中，在正式拍摄之前，可以预先建立渲染设备的渲染颜色与拍摄设备的采集颜色之间的颜色校准映射关系；这是由于拍摄设备的性能或外界环境光等多种因素的影响，拍摄设备拍摄显示屏所得到的图像中的采集颜色，可能会与渲染至显示屏上显示的渲染图像中的渲染颜色存在差异。因此，如何快速地建立颜色校准映射关系，是亟待解决的技术问题。
发明内容
为克服相关技术中存在的问题，本公开提供了颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置。
根据本说明书实施例的第一方面，提供一种颜色校准映射关系的建立方法，所述方法应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备，所述方法包括：
获取待显示的一个或多个颜色集合；其中，每个所述颜色集合包含一个或多个原始颜色；
控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；
获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；
获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；
根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
根据本说明书实施例的第二方面，提供一种颜色校准映射关系的建立装置，所述装置应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备，所述装置包括：
颜色集合获取模块，用于获取待显示的一个或多个颜色集合；其中，每个所述颜色集合包含一个或多个原始颜色；
控制模块，用于：控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；
采集图像获取模块，用于：获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；
确定模块，用于：获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；
建立模块，用于：根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
根据本说明书实施例的第三方面，提供一种虚拟拍摄系统，所述虚拟拍摄系统包括主控机、显示屏和拍摄设备；所述主控机运行有主控程序，所述主控程序被处理器执行时实现第一方面所述方法实施例的步骤。
根据本说明书实施例的第四方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述计算机程序时实现前述第一方面所述方法实施例的步骤。
根据本说明书实施例的第五方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现前述第一方面所述方法实施例的步骤。
本说明书的实施例提供的技术方案可以包括以下有益效果：
本说明书实施例中，虚拟拍摄系统中配置有主控端，该主控端可以获取待显示的一个或多个颜色集合，每个所述颜色集合包含一个或多个原始颜色；控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。本实施例中，每个渲染图像可以包含多个原始颜色，因此可以提升颜色校准映射关系的建立效率。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本说明书的实施例，并与说明书一起用于解释本公开的原理。
图1是本说明书根据一示例性实施例示出的一种虚拟拍摄的场景示意图。
图2A是本说明书根据一示例性实施例示出的一种颜色校准映射关系的建立方法的流程图。
图2B和图2C分别是本说明书根据一示例性实施例示出的一种渲染图像的示意图。
图2D是本说明书根据一示例性实施例示出的一种输出颜色校准比较结果的示意图。
图2E是本说明书根据一示例性实施例示出的一种颜色校准比较结果中某个原始颜色的校准前后比较示意图。
图2F是本说明书根据一示例性实施例示出的一种颜色校准映射关系的建立方法的场景图。
图3是本说明书根据一示例性实施例示出的一种颜色校准映射关系的建立装置所在计算机设备的一种硬件结构图。
图4是本说明书根据一示例性实施例示出的一种颜色校准映射关系的建立装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书的一些方面相一致的装置和方法的例子。
在本说明书使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书。在本说明书和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本说明书可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本公开所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
虚拟拍摄是一种利用显示屏构建虚拟背景的虚拟拍摄技术。它结合了实时渲染和LED(Light Emitting Diode，发光二极管)显示技术，可以在现场实时呈现出逼真的虚拟环境，以替代传统的绿幕或蓝幕拍摄。虚拟拍摄的主要原理是将背景数字化并实时渲染到一组大型显示屏上。这些显示屏围绕拍摄区域排列，并且可以根据需要实时调整显示内容，以呈现逼真的虚拟背景。
如图1所示，是本说明书根据一示例性实施例示出的一种虚拟拍摄场景的示意图，该虚拟拍摄场景中可以包括由一个或多个计算机设备构成的虚拟拍摄系统，作为一个例子，该系统可以包括如下一种或多种设备的组合：一个或多个主控机011、一个或多个渲染设备021(也可以称为上屏机)、一个或多个播控处理设备031、一个或多个显示屏040(图中示出了3个显示屏：显示屏041、显示屏042和显示屏043)，以及一个或多个拍摄设备051；其中，各类设备的数量可以根据实际需要灵活配置，本实施例对此不进行限定。实际应用中，根据需要虚拟拍摄系统中还可以包括其他设备，例如移动终端或网络设备等等，本实施例对此不进行限定。
可选的，每个主控机011可以与一个或多个渲染设备021连接，具体的连接方式可以根据实际需求和设备的兼容性进行选择。作为例子，可以通过局域网或互联网进行有线或无线等连接，可使用网络传输协议进行通信。作为一个例子，主控机可以向与其连接的渲染设备发送多种控制指令，例如可以是包含特定图像信息的控制指令等等。
可选的，每个渲染设备021可以与一个或多个播控处理设备031连接；具体的连接方式可以根据实际需求和设备的兼容性进行选择。作为例子，可以包括DP(DisplayPort，一种数字显示接口标准)连接，DP可用于传输高质量的音频和视频信号。还可以是HDMI(High-Definition Multimedia Interface，一种高清数字音视频接口标准)，HDMI可以将音频、视频和控制信号合并在一条电缆上传输。作为一个例子，渲染设备021可以向与其连接的播控处理设备发送多种控制指令，例如渲染设备可以作为图像信号源，发送包含渲染图像的控制指令等等。
实际应用中，播控处理设备031是可选的，在一些场景下也可以不进行配置。可选的，每个播控处理设备031可以与一个或多个显示屏(图中示出了显示屏041、显示屏042和显示屏043)连接；具体的连接方式可以根据实际需求和设备的兼容性进行选择。作为例子，也可以包括DP或HDMI连接，还可以包括USB(Universal Serial Bus，通用串行总线)或网络连接等等。播控处理设备可用于控制和管理与其连接的显示屏，作为一个例子，播控处理设备031可用于数据传输和解码，如播控处理设备031可接收来自外部源(如上屏机、计算机、移动终端或媒体播放器等等)的信号，并将其解码为适合显示屏显示的格式；还可用于显示控制，如对显示屏进行整体控制和调度，包括亮度调整、色彩校正、灰度控制等；还可用于对显示屏进行分区管理，可以将显示屏划分为多个独立的区域，每个区域可以显示不同的内容。
可选的，每个主控机011可以与一个或多个拍摄设备051连接；具体的连接方式可以根据实际需求和设备的兼容性进行选择。作为例子，可以包括HDMI或SDI(SerialDigital Interface，一种数字视频传输标准)等有线连接，还可以包括Wi-Fi(WirelessFidelity，无线保真)或RF(Radio Frequency，无线射频)等无线连接。拍摄设备051可以将拍摄的数据传输至主控机。
可选的，显示屏040可以是LED屏幕、液晶屏幕等类型，可以是曲面屏或平面屏等结构，应理解，本领域技术人员可以根据实际需求自定义设置虚拟拍摄系统中显示屏的类型、数量、尺寸、分辨率等，对此本说明书实施例不作限制。应理解，本说明书实施例对于设备之间的通信连接方式不作限制。
虚拟拍摄需要使用显示屏来渲染背景画面，由于显示屏显示的渲染颜色和拍摄设备拍摄得到的采集颜色之间存在一定的失真，所以需要对虚拟拍摄现场的每个显示屏与拍摄设备进行颜色校准，确保拍摄设备采集回来的采集颜色与显示屏接收到的渲染颜色是一致的。颜色校准可以采用3D LUT(Three-Dimensional Look-Up Table)的方案，该方案中每次会控制显示屏上显示一种颜色值，然后通过拍摄设备进行拍摄获取采集颜色值，并找出这两者的对应关系以建立LUT表。可以理解，颜色值越多，建立的LUT表越准确，所以在进行颜色校准时，需要尽可能多获取颜色值的对应关系。但是该方案显示屏每次仅显示一种渲染颜色，渲染的颜色越多，建立LUT表所需要的整体时长就越大。如果为了提升效率，采集的颜色值数量较少，则会影响颜色校准的精度，甚至导致颜色校准失败。
基于此，本说明书实施例提供了一种颜色校准映射关系的建立方法，所述方法可以应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备。如图2A所示，是本说明实施例的颜色校准映射关系的建立方法的流程图，可以包括：
步骤202，获取待显示的一个或多个颜色集合。其中，每个所述颜色集合可以包含一个或多个原始颜色。
步骤204，控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像。
步骤206，获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像。
步骤208，获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色。
步骤210，根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
在一些例子中，本实施例方法所应用的主控端可以是运行于图1所示实施例中的主控机上的软件程序，其中，主控机具体可以是计算机设备，包括但不限于服务器、云服务器、服务器集群、平板计算机、个人数字助理、膝上计算机、或者台式计算机等设备。
其中，步骤202中的颜色集合可以是由用户配置的，例如主控端可以提供配置接口，通过配置接口获取用户配置的一个或多个颜色集合。也可以是由主控端自动配置的，例如，主控端中包含了开发人员预先配置的颜色集合生成规则，主控端可以利用颜色集合生成规则自动生成一个或多个颜色集合，每个颜色集合中可以包含有一个或多个原始颜色。本实施例对颜色集合的数量不进行限定，每个颜色集合中所包含的原始颜色的数量及具体的颜色值也不进行限定，每个颜色集合所包含的原始颜色的数量可以相同或不同，实际应用中可以根据需要进行配置。
作为例子，颜色可以采用颜色值表示，例如RGB(RED，Green，Blue，红绿蓝)值表示，每个颜色通道的取值可以是0到255之间的数值；可选的，也可以将0至255归一化后再进行后续处理。作为一个例子，可以是每个颜色通道均匀地采样n个不同数值，构成所有原始颜色，其中n的取值可以灵活配置，采样的数值也可以灵活配置，本实施例对此不进行限定。以n为16为例，则一共可以有4096(16*16*16)个不同的原始颜色，这4096个原始颜色，可以划分为64个颜色集合，每个颜色集合包含64个不同的原始颜色，则显示屏显示64个渲染图像，每个渲染图像对应一个颜色集合，即可完成颜色校准映射关系的建立。作为一个例子：
R通道的取值可以包括：0，16，32，64，……255；
G通道的取值可以包括：0，16，32，64，……255；
B通道的取值可以包括：0，16，32，64，……255；
基于此，从RGB通道的取值中任意组合，可以生成多个原始颜色；例如：(0，0，0)，(16，0，0)，(0，0，16)，(0，16，0)，(32，0，0)，(0，0，32)，(0，32，0)等等。可以看出，在生成原始颜色时，可以是先从RGB三通道的最小值(0，0，0)开始，依次取数值以生成颜色，下一个数值是16：第一次只变R通道，取16，其他两个通道不变化，得到(16，0，0)。接着取B通道的最小值，其他两个通道不变化，得到(0，0，16)。再取G通道的最小值，其他两个通道不变化，得到(0，16，0)。再下一个数值是32，同理，得到(32，0，0)，(0，0，32)，(0，32，0)；以此类推，得到第一个颜色集合中的64个原始颜色。
作为一个例子，由于颜色集合中的多个原始颜色包含于一个渲染图像中，为了便于后续处理，例如为了便于后续从采集图像中准确地识别出每一个采集颜色，所述颜色集合包含多个原始颜色，所述渲染图像中相邻两个不同原始颜色之间的色差大于或等于设定色差阈值，具体的色差阈值可以根据实际需要灵活配置，例如5等数值，本实施例对此不进行限定。例如，以如下表格为例：
序号 1 2 3 4 5 … n
1 (0,0,0) (0,16,0) (0,0,16) (16,0,0) (0,0,0) (0,16,0) …
2 … (0,128,0) … … … … …
… … … … … … … …
n … … … … … … …
其中，该表格用于表示渲染图像中包含的各个原始颜色，以第1行第2列的原始颜色A12(0,16,0)为例，与其相邻的原始颜色是第1行第1列的颜色A11、第1行第3列A13的颜色和第2行第2列的颜色A22，可以设置A12与A11之间的色差大于设定阈值，A12与A13之间的色差也大于设定阈值，A12与A22之间的色差也大于设定阈值；其他同理。
在步骤204中，可以是主控端生成渲染图像并控制显示屏显示渲染图像；或者，还可以是所述虚拟拍摄系统包括了一个或多个渲染设备，所述控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像，可以包括：将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，并由所述显示屏显示各渲染图像。
例如，主控端可以把各个颜色集合发送给渲染设备；其中，可以是将所有颜色集合同时发送给渲染设备，然后由渲染设备接收到所有颜色集合后，分别对每个颜色集合渲染出渲染图像；也可以是主控端将每个颜色集合单独分别发送给渲染设备，例如，主控端按顺序依次发送颜色集合，当发送一个颜色集合至渲染设备，渲染设备渲染出对应的渲染图像；接着，主控端再发送一个颜色集合至渲染设备，渲染设备再渲染出对应的渲染图像；接着主控端再发送下一个颜色集合，以此类推，直至所有颜色集合都发送完。实际应用中可以根据需要选择，本实施例对此不进行限定。
可选的，渲染设备可以配置有GPU(Graphics Processing Unit，图形处理器)，还可以运行有渲染引擎，渲染设备可以利用GPU和渲染引擎，对包含有多个原始颜色的颜色集合渲染出对应的渲染图像。例如，若创建有屏幕模型，可以有渲染设备中配置的3D渲染引擎安装显示屏对应的屏幕模型，由3D渲染引擎通过屏幕模型对每个颜色集合渲染出对应的渲染图像，以此避免图像拉伸变形等问题。
其中，每个渲染图像中可以包含该图像所对应的颜色集合中的所有原始颜色。其中，各个原始颜色可以分布于渲染图像中的不同位置，每个原始颜色还可以占据一定的大小，实际应用中可以灵活设置渲染图像，本实施例对此不进行限定。
在步骤206中，当显示屏在显示每个渲染图像时，拍摄设备可以对显示屏进行拍摄，以得到与每个渲染图像对应的采集图像。可选的，实际应用时，拍摄设备可以采用拍照功能，显示屏显示一个渲染图像后，拍摄设备即拍摄对应的采集图像。拍摄设备也可以采用视频拍摄功能，对显示屏显示所有渲染图像的过程进行拍摄得到视频，之后再从视频中提取与每个渲染图像对应的视频帧图像。实际应用中可以根据需要进行配置，本实施例对此不进行限定。
在步骤208中，在得到拍摄设备的各个采集图像中，可以获取每个原始颜色在所属的目标渲染图像中的目标位置，基于目标渲染图像所对应的采集图像中目标位置的颜色以确定与原始颜色对应的采集颜色。如此，在得到与每个所述原始颜色分别对应的采集颜色后，可以建立颜色校准映射关系。
在一些例子中，每个所述渲染图像中可以包含颜色显示区域和至少一个图形标记，所述渲染图像的颜色显示区域中包含该渲染图像对应的颜色集合中所包含的各原始颜色，所述渲染图像的图形标记编码有该渲染图像对应的颜色集合的集合标识，所述渲染图像的图形标记还用于标记该渲染图像中颜色显示区域的位置。
所述获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色确定与所述原始颜色对应的采集颜色，可以包括：
针对获取的每个采集图像，分别执行如下操作：识别出所述采集图像中包含的图形标记，从识别出的图形标记中解码出该图形标记中编码的集合标识后，确定解码出的集合标识所对应的目标渲染图像，进一步获取所述目标渲染图像所包含的各个原始颜色；利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
在一些例子中，为了对颜色集合进行区分，可以为每个颜色集合配置集合标识，具体的标识可以灵活设置，本实施例对此不进行限定。本实施例中，每个渲染图像还对应有一个或多个图形标记，其中，图形标记可以包括如下两个作用：①用于编码颜色集合的集合标识，以及②用于标记渲染图像中颜色显示区域的位置。具体的：
①用于编码颜色集合的集合标识；具体实现可以有多种方式，例如，图形标记可以包含集合标识的形状，例如集合标识为“1”，图形标记中包含“1”的形状，后续对图形标记进行如字符识别等图像识别即可。或者，图形标记可以是图形码等，通过二维码等方式编码集合标识。
作为例子，图形标记可以是ArUco(Augmented Reality University of Cordoba，一种增强现实标记)码；ArUco码由黑白方块组成，每个方块中包含特定的图案信息。这些码可以使用专门的软件库，如OpenCV(Open Source Computer Vision Library，开放源代码计算机视觉库)等生成，每个ArUco码都有一个唯一的ID，可以根据ID识别和解码。
其中，图形标记可以有多个，在有多个的情况下，每个渲染图像中包含的图形标记可以相同也可以不同；例如，在不同的情况下，可以是其中一个图形标记编码集合标识，其他图形标记编码的信息与集合标识无关；例如，集合标识为1，对应的共有4个图形标记，其中1个图形标记编码1，其他3个图形标记编码的信息与任一颜色集合的集合标识不同。还可以是多个图形标记所编码的信息共同构成集合标识，例如，某个渲染图像中有四个图形标记，四个图形标记编码的信息分别为1、2、3和4，该渲染图像所对应的颜色集合的集合标识为1234。实际应用中可以根据需要进行配置，本实施例对此不进行限定。
在一些例子中，所述将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，可以包括：
获取与所述一个或多个颜色集合中每个颜色集合对应的集合标识后，生成与每个颜色集合对应的至少一个图形标记；
将每个所述颜色集合及每个所述颜色集合对应的至少一个图形标记发送给所述渲染设备，由所述渲染设备渲染出与每一个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像。
本实施例中，主控端获取到一个或多个颜色集合后，可以进一步获取每个颜色集合对应的集合标识；可选的，集合标识可以是主控端自动生成的，具体的标识本实施例对此不进行限定，可以是数字、字母或字符串等等，实际应用中可以灵活进行配置。作为一个例子，将获取到的颜色集合按顺序排列，依据顺序生成集合标识，例如，第一个颜色集合的集合标识为1，第二个颜色集合的集合标识为2，第二个颜色集合的集合标识为3，以此类推。
进一步基于集合标识生成与每个颜色集合对应的至少一个图形标记；例如，每个颜色集合对应有4个图形标记，假设颜色集合的集合标识为abcd，对应的4个图形标记编码的信息可以依次为a、b、c和d；颜色集合的集合标识为efgh，对应的4个图形标记编码的信息依次为e、f、g和h；颜色集合的集合标识为ijkl，对应的4个图形标记编码的信息依次为i、j、k和l，以此类推；也即是，颜色集合的集合标识是由4个图形标记分别编码的信息共同构成的；当然，实际应用中还可以是其他实现方式，可以根据需要灵活配置。
进一步的，主控端可以将每个颜色集合及每个所述颜色集合对应的至少一个图形标记发送给所述渲染设备，例如分别发送，由渲染设备分别渲染出与每一个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像。
②用于标记渲染图像中颜色显示区域的位置；具体实现可以有多种方式，例如，图形标记可以编码渲染图像中颜色显示区域的位置信息。或者，在渲染图像中，图形标记的位置与颜色显示区域的位置相关联，例如，两者相邻，则识别出图形标记后，图形标记的相邻位置即颜色显示区域；或者图形标记和颜色显示区域均为矩形，可以设置图形标记的其中一个顶点与颜色显示区域的其中一个顶点重合或相邻等等，实际应用中可以灵活设置。
作为一个例子，如图2B所示，是本说明书根据一示例性实施例示出的一种渲染图像的示意图，所述渲染图像中可以包含有四个图形标记，所述四个图形标记可以分别位于所述渲染图像的颜色显示区域的四个顶点的顶点位置；图中为了示例方便，颜色显示区域中暂未示出原始颜色。所述利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，可以包括：获取识别出的四个图形标记分别在所述渲染图像中的标记位置，基于获取到的四个标记位置作为顶点所构成的矩形，可以快速地确定出所述采集图像中的颜色显示区域。
通过上述实施例，拍摄设备对该渲染图像拍摄得到的采集图像中，可以快速准确地识别出4个图形标记，并根据这4个图形标记的顶点位置，从中获取到与颜色显示区域关联的4个顶点：O1、O2、O3和O4，这4个顶点也构成了颜色显示区域的顶点，基于此可以得到这4个为顶点所构成的矩形，矩形即颜色显示区域。因此，通过上述实施例可以快速准确地确定出采集图像中的颜色显示区域。
在一些例子中，所述渲染图像的颜色显示区域包含可以有多个子区域，所述多个子区域中每个子区域用于显示该渲染图像所对应的颜色集合中的每个原始颜色；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，可以包括：
从确定出的颜色显示区域中识别出与所述目标渲染图像所包含的每个原始颜色分别对应的每个子区域，进一步对每个子区域中采样一个或多个像素点，基于每个子区域的采样得到的各像素点的像素值获取每个子区域的采集颜色，得到与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
如图2C所示，是本说明书根据一示例性实施例示出的另一种渲染图像的示意图，图中颜色显示区域内显示了24个子区域，每个子区域具体可以为矩形，各个子区域的大小可以均相同；当然，此处只是示例，实际实现时，可以根据需要灵活配置各个子区域的大小、形状以及在颜色显示区域中的具体位置等等，本实施例对此不进行限定。
其中，每个子区域可以用于显示颜色集合中的一种原始颜色，附图中示出的24个原始颜色用了灰度图示意，实际应用中此处可以是彩色图。
如此，拍摄设备从该渲染图像拍摄得到的采集图像中，快速准确地识别出各个子区域，并从每个子区域中提取对应的采集颜色。本实施例中为了得到准确的采集颜色，可以是对每个子区域中采样一个或多个像素点，例如可以采样子区域的中心像素点，或者采样子区域的多个像素点，例如均匀采样16个像素点等等，采样的像素点的数量和位置实际实现时可以灵活配置，本实施例对此不进行限定。进一步的，可以基于采样的各像素点的像素值获取该子区域的采集颜色，例如，在有多个像素点的情况下，可以取各个像素点的平均值作为采集颜色。每个子区域均进行相同的处理。最终，采集图像的每个子区域具有采集颜色，而采集图像对应有渲染图像，渲染图像对应有颜色集合，即每个子区域具有对应的原始颜色，因此，即可得到多个原始颜色和多个采集颜色之间的一一对应关系。
在一些例子中，所述颜色集合包含按设定顺序排列的多个原始颜色；所述渲染图像的颜色显示区域中的各原始颜色按照该渲染图像所对应的颜色集合中的设定顺序排列；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，可以包括：
基于所述目标渲染图像所包含的多个原始颜色的设定顺序，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
本实施例中，颜色集合中包含多个原始颜色，各个原始颜色可以按照设定顺序排列，具体的顺序可以根据需要进行配置；例如，颜色集合中包含的多个原始颜色依次为：(0，0，0)、(0，16，0)、(0，0，16)、(16，0，0)、……。为了便于后续的处理，渲染图像的颜色显示区域中的各原始颜色按照该渲染图像所对应的颜色集合中的设定顺序排列。
如此，拍摄设备对该渲染图像拍摄得到的采集图像中，可以基于目标渲染图像所包含的多个原始颜色的设定顺序，从确定出的颜色显示区域中获取与目标渲染图像所包含的各个原始颜色分别对应的采集颜色可以快速准确地确定采集颜色与原始颜色之间的对应关系。
在另一些例子中，也可以不依赖于图形标记实现渲染图像与采集图像之间一一对应关系的确定。例如，拍摄设备对显示屏显示各个渲染图像时采集得到视频格式的数据，主控端可以根据各个渲染图像显示时的时刻，从采集到的视频中提取与每个渲染图像对应的视频帧图像作为前述的采集图像。如此，主控端需要准确地确定显示屏显示每个渲染图像的时刻。可选的，主控端执行本实施例方案时，可以向渲染设备单独发送每个颜色集合，例如，在t1时刻发送颜色集合1，在t2时刻发送颜色集合2，在t3时刻发送颜色集合3，以此类推直至发送完所有颜色集合。各个发送时刻之间的间隔可以根据需要进行配置。在主控端发出颜色集合的过程中，渲染设备接收到一个颜色集合，就对应渲染出渲染图像在显示屏中显示，而拍摄设备也实时拍摄并传输采集信号至主控端。
其中，考虑到主控端发出颜色集合到渲染设备，渲染设备渲染图像在显示屏中显示的过程具有一定的时长，主控端可以获取主控端发出颜色集合至显示屏显示出渲染图像之间的延时时长，该延时时长可以通过测试等方式获取到。如此，主控端接收到拍摄设备传输的视频流，可以基于延时时长得到与渲染图像对应的采集图像。例如，在t1时刻发送颜色集合1，延时时长为k，则视频流中t1+k时刻的视频帧即与颜色集合1对应的采集图像，如此，可得到颜色集合1的渲染图像与采集图像之间的对应关系。
在一些例子中，所述虚拟拍摄系统还包括渲染设备，所述方法还可以包括：
将建立的颜色校准映射关系发送至所述渲染设备中运行的渲染引擎，以使所述渲染引擎在本地完成对接收到的颜色校准映射关系的配置后，由所述渲染引擎基于配置好的颜色校准映射关系渲染出虚拟场景图像至显示屏中进行显示。
本实施例中的渲染引擎可以有多种，例如可以是UE(Unreal Engine，虚幻引擎)等实时渲染虚幻引擎。在主控端建立好颜色校准映射关系后，主控端可以将该颜色校准映射关系发送给渲染引擎，渲染引擎在本地完成对接收到的颜色校准映射关系的配置，之后，渲染引擎即可基于配置好的颜色校准映射关系渲染出虚拟场景图像至显示屏中进行显示。
在一些例子中，为了向用户直观展示颜色校准映射关系的校准结果，所述方法还可以包括：
在建立颜色校准映射关系后，向用户输出颜色校准比较结果；其中，所述颜色校准比较结果可以包含：原始颜色与该原始颜色对应的采集颜色之间的比对，以及原始颜色与校准颜色对应的采集颜色之间的比对；其中，所述校准颜色是将所述原始颜色经过所述颜色校准映射关系校准后得到的颜色。
其中，输出的颜色校准比较结果中，可以涉及一种原始颜色的比对，也可以是包含多种原始颜色的比对，具体的颜色数量本实施例对此不进行限定。
例如，图2D是本实施例示出的一种颜色校准比较结果的示意图，附图中采用了灰度图示意，实际应用中此处可以是彩色图。图中示出了64种原始颜色的比对，图2D中左侧的比对图中，包含了64对色块，每一对色块表示一种原始颜色与该原始颜色对应的采集颜色；每一对色块中位于左边的色块表示原始颜色(未经颜色校准映射关系校准)，位于右边的色块表示该原始颜色对应的采集颜色。而图2D中右侧的比对图中同样包含64对色块，每一对色块表示一种原始颜色与校准颜色对应的采集颜色；每一对色块中位于左边的色块表示原始颜色，位于右边的色块表示校准颜色(即原始颜色经过颜色校准映射关系校准后的颜色)对应的采集颜色。
结合图2E示出的其中一种原始颜色的比对示意图进行说明，该示意图可以理解为分别从图2D左侧的64对色块和右侧的64对色块中分别取出的相同位置的一对色块。图2E中，左侧的一对色块包括了原始颜色C，以及渲染引擎未经校准对其渲染出图像显示在显示屏中，拍摄设备对其进行拍摄，得到的采集颜色为C’，此处的采集颜色C’可以通过前述颜色校准映射关系的建立方法实施例的流程中得到。
图2E中，左侧的一对色块包括了原始颜色C，以及采集颜色C1’。具体的，主控端可以利用建立好的颜色校准映射关系，将原始颜色C转换为校准颜色C1，该校准颜色C1可以理解为：在正式拍摄过程中，若主控端发送原始颜色C至渲染引擎，渲染引擎会基于自身配置好的颜色校准映射关系，对原始颜色C转换为渲染在显示屏上进行显示的校准颜色C1。进一步主控端还需要获取与校准颜色C1对应的采集颜色C1’，同理，前述实施例在建立颜色校准映射关系之前进行了数据采集，拍摄设备采集到很多采集颜色，查询出C1对应的采集颜色C1’即可。如此，可以展示原始颜色C和采集颜色C1’的比对；而用户通过C’和C1’，也能感受到校准前后相机的采集颜色的差异。
在一些例子中，所述颜色校准比较结果中还可以包含：
原始颜色与该原始颜色对应的采集颜色之间的色差；以及原始颜色与校准颜色对应的采集颜色之间的色差。
本实施例中，可以利用原始颜色的颜色值与该原始颜色对应的采集颜色的颜色值，计算出前后两个颜色值之间的色差。同理，可以利用原始颜色的颜色值与校准颜色对应的采集颜色的颜色值，计算出前后两个颜色值之间的色差。例如，对于图2E，可以计算C与C’的色差，以及计算C与C1’的色差，将计算的两个色差输出，用户即可以得到客观的颜色校准结果。
在颜色校准比较结果中涉及多种原始颜色的情况下，还可以计算每一种原始颜色与该原始颜色对应的采集颜色之间的色差，得到多个色差值并取平均值，得到第一色差平均值。同理，计算每一种原始颜色与该原始颜色校准后的校准颜色所对应的采集颜色之间的色差，得到多个色差值并取平均值，得到第二色差平均值。最后输出两个色差平均值。例如，图2D中，对于64种原始颜色，左侧中基于64种原始颜色中每一种原始颜色与分别对应的采集颜色之间的色差，得到64个色差值并取平均值，得到了第一色差平均值为0.039(此处颜色值经过归一化处理，实际应用中可以根据需要不进行归一化)；同理，右侧中进行类似计算，得到第一色差平均值为0.002。
本实施例在输出颜色校准比较结果时，还将两个色差也输出给用户，使得用户可以直观地查到颜色校准映射关系的校准结果。
如图2F所示，是本说明书根据一示例性实施例示出的另一种应用场景示意图，图2F中主控机可以与拍摄设备通过SDI传输线连接，渲染设备可以与播控处理设备通过DP或HDMI等传输线连接，播控处理设备可以与显示屏连接。在颜色校准时，通过同一时刻在显示屏上渲染一个包含有多个原始颜色的渲染图像，渲染图像中包含有ArUco码，拍摄设备采集到画面后传输至主控机，主控机对采集图像进行分析提取出对应的采集颜色。本实施例可以大大提高颜色校准中颜色采集的效率，使得更高阶的颜色采集流程可行，提升颜色校准的准确性。由于在进行颜色校准时同一时刻显示屏不同区域显示不同的颜色，对应的在拍摄设备的采集图像上设置多个采样点，这样拍摄设备采集一幅图像就可以获得多个颜色对应关系，加速颜色校准流程，节省虚拟拍摄成本。
与前述颜色校准映射关系的建立方法的实施例相对应，本说明书还提供了颜色校准映射关系的建立装置及其所应用的计算机的实施例。
本说明书颜色校准映射关系的建立装置的实施例可以应用在计算机设备上，例如服务器或终端设备。装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图3所示，为本说明书颜色校准映射关系的建立装置所在计算机设备的一种硬件结构图，除了图3所示的处理器310、内存330、网络接口320、以及非易失性存储器340之外，实施例中颜色校准映射关系的建立装置331所在的计算机设备，通常根据该计算机设备的实际功能，还可以包括其他硬件，对此不再赘述。
如图4所示，图4是本说明书根据一示例性实施例示出的一种颜色校准映射关系的建立装置的框图，所述装置应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备，所述装置包括：
颜色集合获取模块41，用于获取待显示的一个或多个颜色集合；其中，每个所述颜色集合包含一个或多个原始颜色；
控制模块42，用于：控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；
采集图像获取模块43，用于：获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；
确定模块44，用于：获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；
建立模块45，用于：根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
在一些例子中，所述虚拟拍摄系统还包括渲染设备，所述控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像，包括：
将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，并由所述显示屏显示各渲染图像。
在一些例子中，每个所述渲染图像中包含颜色显示区域和至少一个图形标记，所述渲染图像的颜色显示区域中包含该渲染图像对应的颜色集合中所包含的各原始颜色，所述渲染图像的图形标记编码有该渲染图像对应的颜色集合的集合标识，所述渲染图像的图形标记还用于标记该渲染图像中颜色显示区域的位置；
所述获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色，包括：
针对获取的每个采集图像，分别执行如下操作：识别出所述采集图像中包含的图形标记，从识别出的图形标记中解码出该图形标记中编码的集合标识后，确定解码出的集合标识所对应的目标渲染图像，进一步获取所述目标渲染图像所包含的各个原始颜色；利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
在一些例子中，所述渲染图像中包含有四个图形标记，所述四个图形标记分别位于所述渲染图像的颜色显示区域的四个顶点的顶点位置；
所述利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，包括：
获取识别出的四个图形标记分别在所述渲染图像中的标记位置，基于获取到的四个标记位置作为顶点所构成的矩形，确定出所述采集图像中的颜色显示区域。
在一些例子中，所述将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，包括：
获取与所述一个或多个颜色集合中每个颜色集合对应的集合标识后，生成与每个颜色集合对应的至少一个图形标记；
将每个所述颜色集合及每个所述颜色集合对应的至少一个图形标记发送给所述渲染设备，由所述渲染设备渲染出与每一个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像。
在一些例子中，所述渲染图像的颜色显示区域包含有多个子区域，所述多个子区域中每个子区域用于显示该渲染图像所对应的颜色集合中的每个原始颜色；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，包括：
从确定出的颜色显示区域中识别出与所述目标渲染图像所包含的每个原始颜色分别对应的每个子区域，进一步对每个子区域中采样一个或多个像素点，基于每个子区域的采样得到的各像素点的像素值获取每个子区域的采集颜色，得到与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
在一些例子中，所述颜色集合包含按设定顺序排列的多个原始颜色；所述渲染图像的颜色显示区域中的各原始颜色按照该渲染图像所对应的颜色集合中的设定顺序排列；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，包括：
基于所述目标渲染图像所包含的多个原始颜色的设定顺序，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
在一些例子中，所述颜色集合包含多个原始颜色，所述渲染图像中相邻的两个不同原始颜色之间的色差大于或等于设定色差阈值。
在一些例子中，所述虚拟拍摄系统还包括渲染设备，所述装置还包括发送模块，用于：
将建立的颜色校准映射关系发送至所述渲染设备中运行的渲染引擎，以使所述渲染引擎在本地完成对接收到的颜色校准映射关系的配置后，由所述渲染引擎基于配置好的颜色校准映射关系渲染出虚拟场景图像至显示屏中进行显示。
上述颜色校准映射关系的建立装置中各个模块的功能和作用的实现过程具体详见上述颜色校准映射关系的建立方法中对应步骤的实现过程，在此不再赘述。
相应的，本说明书实施例还提供了一种虚拟拍摄系统，所述虚拟拍摄系统包括主控机、显示屏和拍摄设备；所述主控机运行有主控程序，所述主控程序被处理器执行时实现前述颜色校准映射关系的建立方法实施例的步骤。
相应的，本说明书实施例还提供了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现前述颜色校准映射关系的建立方法实施例的步骤。
相应的，本说明书实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现颜色校准映射关系的建立方法实施例的步骤。
相应的，本说明书实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现颜色校准映射关系的建立方法实施例的步骤。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本说明书方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
上述实施例可以应用于一个或者多个计算机设备中，所述计算机设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，所述计算机设备的硬件包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit，ASIC)、可编程门阵列(Field-Programmable Gate Array，FPGA)、数字处理器(Digital Signal Processor，DSP)、嵌入式设备等。
所述计算机设备可以是任何一种可与用户进行人机交互的电子产品，例如，个人计算机、平板电脑、智能手机、个人数字助理(Personal Digital Assistant，PDA)、游戏机、交互式网络电视(Internet Protocol Television，IPTV)、智能式穿戴式设备等。
所述计算机设备还可以包括网络设备和/或用户设备。其中，所述网络设备包括，但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算(CloudComputing)的由大量主机或网络服务器构成的云。
所述计算机设备所处的网络包括但不限于互联网、广域网、城域网、局域网、虚拟专用网络(Virtual Private Network，VPN)等。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
上面各种方法的步骤划分，只是为了描述清楚，实现时可以合并为一个步骤或者对某些步骤进行拆分，分解为多个步骤，只要包括相同的逻辑关系，都在本专利的保护范围内；对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计，但不改变其算法和流程的核心设计都在该申请的保护范围内。
其中，“具体示例”、或“一些示例”等的描述意指结合所述实施例或示例描述的具体特征、结构、材料或者特点包含于本说明书的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
本领域技术人员在考虑说明书及实践这里申请的发明后，将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本说明书的真正范围和精神由下面的权利要求指出。
应当理解的是，本说明书并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。
以上所述仅为本说明书的较佳实施例而已，并不用以限制本说明书，凡在本说明书的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书保护的范围之内。

Claims (13)

1.一种颜色校准映射关系的建立方法，所述方法应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备，所述方法包括：
获取待显示的一个或多个颜色集合；其中，每个所述颜色集合包含一个或多个原始颜色；
控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；
获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；
获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；
根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
2.根据权利要求1所述的方法，所述虚拟拍摄系统还包括渲染设备，所述控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像，包括：
将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，并由所述显示屏显示各渲染图像。
3.根据权利要求2所述的方法，每个所述渲染图像中包含颜色显示区域和至少一个图形标记，所述渲染图像的颜色显示区域中包含该渲染图像对应的颜色集合中所包含的各原始颜色，所述渲染图像的图形标记编码有该渲染图像对应的颜色集合的集合标识，所述渲染图像的图形标记还用于标记该渲染图像中颜色显示区域的位置；
所述获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色，包括：
针对获取的每个采集图像，分别执行如下操作：识别出所述采集图像中包含的图形标记，从识别出的图形标记中解码出该图形标记中编码的集合标识后，确定解码出的集合标识所对应的目标渲染图像，进一步获取所述目标渲染图像所包含的各个原始颜色；利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
4.根据权利要求3所述的方法，所述渲染图像中包含有四个图形标记，所述四个图形标记分别位于所述渲染图像的颜色显示区域的四个顶点的顶点位置；
所述利用识别出的图形标记所标记的位置确定出所述采集图像中的颜色显示区域，包括：
获取识别出的四个图形标记分别在所述渲染图像中的标记位置，基于获取到的四个标记位置作为顶点所构成的矩形，确定出所述采集图像中的颜色显示区域。
5.根据权利要求3所述的方法，所述将所述一个或多个颜色集合发送给所述渲染设备，由所述渲染设备渲染出与每个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像，包括：
获取与所述一个或多个颜色集合中每个颜色集合对应的集合标识后，生成与每个颜色集合对应的至少一个图形标记；
将每个所述颜色集合及每个所述颜色集合对应的至少一个图形标记发送给所述渲染设备，由所述渲染设备渲染出与每一个颜色集合对应的、且具有该颜色集合所包含的各个原始颜色的渲染图像。
6.根据权利要求3所述的方法，所述渲染图像的颜色显示区域包含有多个子区域，所述多个子区域中每个子区域用于显示该渲染图像所对应的颜色集合中的每个原始颜色；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，包括：
从确定出的颜色显示区域中识别出与所述目标渲染图像所包含的每个原始颜色分别对应的每个子区域，进一步对每个子区域中采样一个或多个像素点，基于每个子区域的采样得到的各像素点的像素值获取每个子区域的采集颜色，得到与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
7.根据权利要求3所述的方法，所述颜色集合包含按设定顺序排列的多个原始颜色；所述渲染图像的颜色显示区域中的各原始颜色按照该渲染图像所对应的颜色集合中的设定顺序排列；
所述从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色，包括：
基于所述目标渲染图像所包含的多个原始颜色的设定顺序，从确定出的颜色显示区域中获取与所述目标渲染图像所包含的各个原始颜色分别对应的采集颜色。
8.根据权利要求1所述的方法，所述颜色集合包含多个原始颜色，所述渲染图像中相邻的两个不同原始颜色之间的色差大于或等于设定色差阈值。
9.根据权利要求1所述的方法，所述虚拟拍摄系统还包括渲染设备，所述方法还包括：
将建立的颜色校准映射关系发送至所述渲染设备中运行的渲染引擎，以使所述渲染引擎在本地完成对接收到的颜色校准映射关系的配置后，由所述渲染引擎基于配置好的颜色校准映射关系渲染出虚拟场景图像至显示屏中进行显示。
10.一种颜色校准映射关系的建立装置，所述装置应用于虚拟拍摄系统中的主控端，所述虚拟拍摄系统还包括显示屏以及拍摄设备，所述装置包括：
颜色集合获取模块，用于获取待显示的一个或多个颜色集合；其中，每个所述颜色集合包含一个或多个原始颜色；
控制模块，用于：控制所述显示屏显示与每个颜色集合分别对应的、且对所对应的颜色集合包含的各个原始颜色进行渲染后的渲染图像；
采集图像获取模块，用于：获取所述拍摄设备对所述显示屏显示的每个渲染图像分别进行拍摄得到的各个采集图像；
确定模块，用于：获取每个所述原始颜色在所属的目标渲染图像中的目标位置，基于所述目标渲染图像所对应的采集图像中所述目标位置的颜色，确定与所述原始颜色对应的采集颜色；
建立模块，用于：根据获取的与每个所述原始颜色分别对应的采集颜色，建立颜色校准映射关系。
11.一种虚拟拍摄系统，所述虚拟拍摄系统包括主控机、显示屏和拍摄设备；所述主控机运行有主控程序，所述主控程序被处理器执行时实现权利要求1至9任一所述方法的步骤。
12.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述计算机程序时实现权利要求1至9任一所述方法的步骤。
13.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至9任一所述方法的步骤。
CN202311400136.7A 2023-10-25 2023-10-25 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置 Pending CN117478861A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311400136.7A CN117478861A (zh) 2023-10-25 2023-10-25 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311400136.7A CN117478861A (zh) 2023-10-25 2023-10-25 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置

Publications (1)

Publication Number Publication Date
CN117478861A true CN117478861A (zh) 2024-01-30

Family

ID=89637186

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311400136.7A Pending CN117478861A (zh) 2023-10-25 2023-10-25 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置

Country Status (1)

Country Link
CN (1) CN117478861A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110033510A (zh) * 2019-03-25 2019-07-19 阿里巴巴集团控股有限公司 建立颜色映射关系用于校正渲染图像颜色的方法及装置
CN111326099A (zh) * 2018-12-14 2020-06-23 西安诺瓦星云科技股份有限公司 显示校正方法、装置及系统、存储介质以及显示系统
US20220059049A1 (en) * 2018-11-02 2022-02-24 Portrait Displays, Inc. System and Method for Color Calibration
CN115083303A (zh) * 2022-08-16 2022-09-20 成都索贝数码科技股份有限公司 移动视角下led显示屏空间色彩校正方法、介质及装置
CN115103168A (zh) * 2022-06-27 2022-09-23 展讯通信（上海）有限公司 图像生成方法、装置、电子设备及存储介质
CN116489328A (zh) * 2022-11-22 2023-07-25 腾讯科技（深圳）有限公司 基于拍摄参数的色彩查找表生成方法、装置和计算机设备
CN116485979A (zh) * 2023-04-28 2023-07-25 北京优酷科技有限公司 映射关系计算方法、颜色校准方法及电子设备
CN116540963A (zh) * 2023-04-21 2023-08-04 北京优酷科技有限公司 映射关系计算方法、颜色校准方法、装置及电子设备
CN116862813A (zh) * 2023-08-22 2023-10-10 北京凯视达科技股份有限公司 一种用于扩展现实技术的颜色校准方法和系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220059049A1 (en) * 2018-11-02 2022-02-24 Portrait Displays, Inc. System and Method for Color Calibration
CN111326099A (zh) * 2018-12-14 2020-06-23 西安诺瓦星云科技股份有限公司 显示校正方法、装置及系统、存储介质以及显示系统
CN110033510A (zh) * 2019-03-25 2019-07-19 阿里巴巴集团控股有限公司 建立颜色映射关系用于校正渲染图像颜色的方法及装置
CN115103168A (zh) * 2022-06-27 2022-09-23 展讯通信（上海）有限公司 图像生成方法、装置、电子设备及存储介质
CN115083303A (zh) * 2022-08-16 2022-09-20 成都索贝数码科技股份有限公司 移动视角下led显示屏空间色彩校正方法、介质及装置
CN116489328A (zh) * 2022-11-22 2023-07-25 腾讯科技（深圳）有限公司 基于拍摄参数的色彩查找表生成方法、装置和计算机设备
CN116540963A (zh) * 2023-04-21 2023-08-04 北京优酷科技有限公司 映射关系计算方法、颜色校准方法、装置及电子设备
CN116485979A (zh) * 2023-04-28 2023-07-25 北京优酷科技有限公司 映射关系计算方法、颜色校准方法及电子设备
CN116862813A (zh) * 2023-08-22 2023-10-10 北京凯视达科技股份有限公司 一种用于扩展现实技术的颜色校准方法和系统

Similar Documents

Publication Publication Date Title
JP7359521B2 (ja) 画像処理方法および装置
US10964089B1 (en) Method and apparatus for coding view-dependent texture attributes of points in a 3D point cloud
US10114838B2 (en) Reference card for scene referred metadata capture
AU2018225269B2 (en) Method, system and apparatus for visual effects
US20240314289A1 (en) Method and device for processing three-dimensional video, and storage medium
CN116485979B (zh) 映射关系计算方法、颜色校准方法及电子设备
CN112967193B (zh) 图像校准方法及装置、计算机可读介质和电子设备
CN116569218B (zh) 图像处理方法和图像处理装置
US10957092B2 (en) Method and apparatus for distinguishing between objects
WO2021068795A1 (zh) 图像显示方法、图像识别方法、装置、介质、设备及系统
CN108090877A (zh) 一种基于图像序列的rgb-d相机深度图像修复方法
CN116540963A (zh) 映射关系计算方法、颜色校准方法、装置及电子设备
CN112770095B (zh) 全景投影方法、装置及电子设备
CN114663570A (zh) 贴图生成方法、装置、电子装置及可读存储介质
US11138795B2 (en) Method and device for determining a characteristic of a display device
CN117478861A (zh) 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置
CN117478860B (zh) 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置
CN117499559B (zh) 虚拟拍摄系统、设备配置方法、装置、设备及存储介质
Setkov et al. Evaluation of color descriptors for projector-camera systems
CN111861911B (zh) 基于引导相机的立体全景图像增强方法和系统
CN116126150B (zh) 一种基于实景交互的模拟驾驶系统及方法
US20230281910A1 (en) Methods and apparatus rendering images using point clouds representing one or more objects
KR20180117867A (ko) 가상현실 콘텐츠 서비스를 위한 360도 vr 어안 렌더링 방법
CN113947675A (zh) 显示装置的边缘提取方法、系统、装置、电子设备及介质
JP2022182835A (ja) 画像処理システム及びその制御方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination