CN116540963B - 映射关系计算方法、颜色校准方法、装置及电子设备 - Google Patents

映射关系计算方法、颜色校准方法、装置及电子设备 Download PDF

Info

Publication number
CN116540963B
CN116540963B CN202310437199.3A CN202310437199A CN116540963B CN 116540963 B CN116540963 B CN 116540963B CN 202310437199 A CN202310437199 A CN 202310437199A CN 116540963 B CN116540963 B CN 116540963B
Authority
CN
China
Prior art keywords
color
rendering
image
original
color value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310437199.3A
Other languages
English (en)
Other versions
CN116540963A (zh
Inventor
李晓阳
陈石平
刘杰
张欢
张中杰
黄玉岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenli Vision Shenzhen Cultural Technology Co ltd
Original Assignee
Shenli Vision Shenzhen Cultural Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenli Vision Shenzhen Cultural Technology Co ltd filed Critical Shenli Vision Shenzhen Cultural Technology Co ltd
Priority to CN202310437199.3A priority Critical patent/CN116540963B/zh
Publication of CN116540963A publication Critical patent/CN116540963A/zh
Application granted granted Critical
Publication of CN116540963B publication Critical patent/CN116540963B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Image Processing (AREA)

Abstract

本申请实施例提供了一种映射关系计算方法、颜色校准方法、装置及电子设备。映射关系计算方法包括：获取采集图像，采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画面；其中，颜色标识符表征原始渲染颜色值，原始渲染颜色值为原始渲染颜色的颜色值；识别颜色标识符，并解码颜色标识符，得到原始渲染颜色值；基于原始渲染颜色值和采集图像的颜色值，计算得到颜色校准映射关系。本申请实施例可以提升映射关系计算的灵活性和准确性。

Description

映射关系计算方法、颜色校准方法、装置及电子设备
技术领域
本申请实施例涉及计算机技术领域，尤其涉及一种映射关系计算方法、颜色校准方法、装置、电子设备及计算机存储介质。
背景技术
虚拟拍摄是通过将虚拟的场景图投屏到LED屏幕上显示，然后演员利用LED屏幕作为背景进行表演，图像采集设备(如摄像机)同时拍摄演员和LED屏幕，之后，再将拍摄到的图像与原始场景图合成，从而将真实演员置身于虚拟场景中，达到在影棚内拍摄外景或科幻背景的效果。由于外界环境(如外界环境光)等因素的影响，图像采集设备拍摄LED屏幕画面时，通常无法完全准确地捕获LED屏幕显示的颜色，进而使得LED屏幕上显示的实际颜色(原始渲染颜色值)和图像采集设备采集到的LED屏幕画面颜色(采集图像的颜色值)之间会存在一定的失真。因此，需要对原始渲染颜色值与采集图像的颜色值进行颜色校准，即：先计算上述两种颜色值之间的映射关系，再应用上述映射关系对场景图进行颜色校准，以提升虚拟拍摄合成图像的视觉效果。
在实际应用中，场景图通常涉及到多种不同颜色，并且，对于某个具体的原始渲染颜色而言，其在LED屏幕中的画面渲染过程，与图像采集设备的画面采集过程，两者之间存在一定的延迟，因此，映射关系计算的关键在于：在多种不同的原始渲染颜色中，确定出与当前采集图像的颜色所对应的原始渲染颜色，也即：确定出原始渲染颜色与采集图像颜色之间的对应关系，之后，便可基于上述对应关系，计算映射关系。
相关技术中，先计算上述延迟数据，也即先进行延迟校准，进而再基于延迟数据确定渲染颜色值与采集颜色值之间的对应关系。这样会使得映射关系计算对延迟校准强依赖，如没有完成延迟校准则无法进行映射关系计算，甚至于，当延迟校准出现问题如延迟不稳定等情况时，映射关系计算结果会受到影响甚至出现错误。
发明内容
有鉴于此，本申请实施例提供一种映射关系计算方案，以至少部分解决上述问题。
根据本申请实施例的第一方面，提供了一种映射关系计算方法，包括：
获取采集图像，所述采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画面；其中，所述颜色标识符表征原始渲染颜色值，所述原始渲染颜色值为所述原始渲染颜色的颜色值；
识别所述颜色标识符，并解码所述颜色标识符，得到原始渲染颜色值；
基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系。
根据本申请实施例的第二方面，提供了一种颜色校准方法，包括：
获取目标场景图像；
基于颜色校准映射关系，对所述目标场景图像中的颜色进行颜色校准，得到校准后场景图像；
获取目标采集图像，所述目标采集图像是将所述校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面；
融合所述目标场景图像和所述目标采集图像，得到融合后图像；
其中，所述颜色校准映射关系采用如上述第一方面所述的方法得到。
根据本申请实施例的第三方面，提供了一种映射关系计算装置，包括：
采集图像获取模块，用于获取采集图像，所述采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画；其中，所述颜色标识符表征原始渲染颜色值，所述原始渲染颜色值为所述原始渲染颜色的颜色值；
解码模块，用于识别所述颜色标识符，并解码所述颜色标识符，得到原始渲染颜色值；
映射关系计算模块，用于基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系。
根据本申请实施例的第四方面，提供了一种颜色校准装置，包括：
目标场景图像获取模块，用于获取目标场景图像；
颜色校准模块，用于基于颜色校准映射关系，对所述目标场景图像中的颜色进行颜色校准，得到校准后场景图像；
目标采集图像获取模块，用于获取目标采集图像，所述目标采集图像是将所述校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面进行拍摄得到的画面；
融合模块，英语融合所述目标场景图像和所述目标采集图像，得到融合后图像；
其中，所述颜色校准映射关系采用如上述第一方面所述的方法得到。
根据本申请实施例的第五方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如第一方面或第二方面所述方法对应的操作。
根据本申请实施例的第六方面，提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面或第二方面所述的方法。
根据本申请实施例提供的映射关系计算方案，引入了颜色标识符来编码(表征)原始渲染颜色(值)，并在将原始渲染颜色渲染至显示屏的同时，还将上述颜色标识符也渲染至显示屏，通过对采集图像中颜色标识符的识别和解码，得到渲染至显示屏的原始渲染颜色值，进而通过计算得到颜色校准的映射关系。与基于延迟数据进行映射关系计算的方案相比，本申请实施例的映射关系计算过程，无需依赖延迟校准得到的延迟数据，实现了映射关系计算与延迟校准的解耦，因此，可以避免因延迟校准未完成导致的映射关系计算无法进行，或者，延迟校准结果不准确导致的映射关系计算结果不准确的问题，提升了映射关系计算的灵活性和准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请实施例中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。
图1为映射关系计算的流程示意图；
图2为颜色校准应用阶段的流程示意图；
图3为根据本申请实施例一的一种映射关系计算方法的步骤流程图；
图4为Aruco码的形状示意图；
图5为图3所示实施例中的一种场景示例的示意图；
图6为映射关系计算过程涉及的延迟数据分布示意图；
图7为图3所示实施例中的另一种场景示例的示意图；
图8为根据本申请实施例二的一种颜色校准方法的步骤流程图；
图9为根据本申请实施例三的一种映射关系计算装置的结构框图；
图10为根据本申请实施例四的一种颜色校准装置的结构框图；
图11为根据本申请实施例五的一种电子设备的结构示意图。
具体实施方式
为了使本领域的人员更好地理解本申请实施例中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请实施例一部分实施例，而不是全部的实施例。基于本申请实施例中的实施例，本领域普通技术人员所获得的所有其他实施例，都应当属于本申请实施例保护的范围。
参见图1，图1为映射关系计算的流程示意图。首先结合图1对映射关系计算的过程进行解释说明。具体地：
由于在实际应用中场景图通常涉及到多种不同颜色，因此，在进行映射关系计算时，原始渲染颜色的种类数量通常也为多个，图1中原始渲染颜色的种类数量为K+1个(K为大于0的自然数)，对应的原始渲染颜色值分别为：A0、A1、……、AK。在确定了原始渲染颜色值之后，可以针对每个原始渲染颜色值(图中以Ai为例进行示例性说明，其中，i∈[0,K])，分别执行如下过程以得到其对应的采集图像的颜色值(图中的Ai′)：
通过播控处理器将原始渲染颜色值Ai渲染至LED屏幕上，以进行原始渲染颜色显示，之后，在环境光等外界因素的干扰下，通过摄像机拍摄LED屏幕，得到Ai对应的采集图像，进而得到采集图像的颜色值Ai′。
在得到各原始渲染颜色值对应的采集图像的颜色值Ai′之后，则可以基于得到的上述颜色值，进行映射关系计算，得到原始渲染颜色值与采集图像的颜色值之间的映射关系：映射函数M，以及，逆映射函数M-1，其中，M*Ai＝Ai′，M*M-1*Ai＝Ai。
经过上述颜色校准流程得到映射关系之后，接下来则可以进入颜色校准的应用阶段：利用上述映射关系，对在LED屏幕上渲染的颜色值进行校准，以使得摄像机拍摄到的采集图像的颜色值与场景图像中实际的颜色值一致。
参见图2，图2为颜色校准应用阶段的流程示意图。以下结合图2对颜色校准的应用阶段进行解释说明。具体地：
在获取到原始渲染颜色Ai之后，先将逆映射函数M-1作用于Ai上，即得到：M-1*Ai，再通过播控处理器将M-1*Ai渲染至LED屏幕上，以进行显示，之后，在环境光等外界因素的干扰下，通过摄像机拍摄LED屏幕，即可得到颜色值为Ai的采集图像，这样就达到了摄像机拍摄到的采集图像的颜色值与原始渲染颜色值一致的目的。
在上述映射关系计算过程中，对于某个具体的原始渲染颜色而言，其在LED屏幕中的画面渲染过程，与摄像机的画面采集过程，两者之间存在一定的延迟，因此，映射关系计算的关键在于：从多种不同的原始渲染颜色值A0、A1、……、AK中，确定出与当前采集图像的颜色值Ai′所对应的原始渲染颜色值Ai。
相关技术中，在获取到摄像机拍摄的当前采集图像之后，先计算上述延迟数据，具体地，延迟数据主要由以下几个阶段的耗时累加而来：颜色渲染阶段的耗时，即：将原始颜色渲染至显示屏的过程中产生的耗时；图像采集阶段的耗时，即：采集设备进行图像采集得到采集图像的过程中产生的耗时；采集图像获取阶段的耗时，即：从采集设备获取采集图像的过程中产生的耗时；在计算得到延迟数据后，再基于延迟数据确定与当前采集图像的颜色值Ai′对应的原始渲染颜色值Ai。这样会使得映射关系计算对延迟校准强依赖，如没有完成延迟校准则无法进行映射关系计算，甚至于，当延迟校准出现问题如延迟不稳定等情况时，映射关系计算效果会受到影响甚至出现错误。
而本申请实施例提供的映射关系计算方案中，引入了颜色标识符来编码(表征)原始渲染颜色(值)，并在将原始渲染颜色渲染至显示屏的同时，还将上述颜色标识符也渲染至显示屏，通过对采集图像中颜色标识符的识别和解码，得到渲染至显示屏的原始渲染颜色值，进而通过计算得到颜色校准的映射关系。与基于延迟数据进行映射关系计算的方案相比，本申请实施例的映射关系计算过程，无需依赖延迟校准得到的延迟数据，实现了映射关系计算与延迟校准的解耦，因此，可以避免因延迟校准未完成导致的映射关系计算无法进行，或者，延迟校准结果不准确导致的映射关系计算结果不准确的问题，提升了映射关系计算的灵活性和准确性。
下面结合本申请实施例附图进一步说明本申请实施例具体实现。
实施例一
参照图3，图3为根据本申请实施例一的一种映射关系计算方法的步骤流程图。具体地，本实施例提供的映射关系计算方法包括以下步骤：
步骤302，获取采集图像，采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画面符；其中，颜色标识符表征原始渲染颜色值，原始渲染颜色值为原始渲染颜色的颜色值。
具体地，本申请实施例中，引入颜色标识符来编码表征原始渲染颜色值，其中，原始渲染颜色值即为原始渲染颜色的颜色值。如上所述，由于原始渲染颜色的种类可能较多，因此，可以引入多个颜色标识符分别表征不同的原始渲染颜色值，也就是说，有多少种原始渲染颜色值，就对应引入多少个颜色标识符，一个颜色标识符对应表征一个原始渲染颜色值。
本申请实施例中，对于颜色标识符的具体表现形式不做限定，可以根据实际情况设定任意的符号形状作为颜色标识符。例如：可以采用自定义的图像作为颜色标识符，也可以采用不同的字符作为颜色标识符，等等。
可选的，在其中一些实施例中，颜色标识符可以基于Aruco码来生成。
具体地，参见图4，图4为Aruco码的形状示意图。结合图4，可以看出：Aruco码是一个合成的正方形标记，由宽的黑色边框和能够确定其标识的内部二进制矩阵组成。
本申请实施例中，可以基于Aruco码来生成颜色标识符，例如：可以将Aruco码作为颜色标识符；也可以在Aruco码的基础上增加其他的标识信息等作为颜色标识符；还可以对Aruco码进行一定的形状改进，将改进后的图像作为颜色标识符，等等。
对于将Aruco码作为颜色标识符，具有如下好处：
第一，Aruco码的生成过程，可以调用现有的Aruco码生成软件得到，因此，生成过程简单方便。
第二，Aruco码通常可以成套使用，可以根据实际情况生成任意预设数量个Aruco码，作为一套Aruco码集合。而本申请实施例中，对于不同的应用场景，原始渲染颜色的种类数量可能并不相同，也就是说，实际应用时，颜色标识符的数量可能会不断变化。因此，若将Aruco码作为颜色标识符，可以根据具体应用场景下原始渲染颜色的种类数量，生成对应数量的Aruco码作为颜色标识符，这样便于保证颜色标识符与原始渲染颜色之间的一一对应关系。
第三，Aruco码中的黑色边框设计有助于其在图像中的快速检测，边框内部的二进制矩阵有助于对Aruco码的识别结果纠错；并且，Aruco码的识别过程也很方便，可以调用现有识别函数进行识别。也即：采用Aruco码作为颜色标识符，在后续的标识符检测及识别过程中，具有操作过程简单、检测识别结果的准确率高等优势。
本申请实施例中，采集图像的获取过程可以包括：通过播控处理器将原始渲染颜色和颜色标识符渲染至显示屏上，之后，通过采集设备(如摄像机、相机等)拍摄显示屏中的画面，从而得到采集图像，再从采集设备中获取上述采集图像。
另外，本申请实施例对于原始渲染颜色和颜色标识符的显示方式不做限定。可以在显示屏中设置两个显示区域：第一显示区域用于显示原始渲染颜色对应的渲染结果，第二显示区域用于显示颜色标识符对应的渲染结果。本申请实施例中，对于上述两个显示区域之间的相对位置关系也不做限定，例如：第一显示区域和第二显示区域可以为两个相邻且形状相同的矩形区域，又如：第二显示区域可以为位于显示屏中心位置的小矩形区域，而第一显示区域可以为显示屏中除上述第二显示区域之外的其余部分，第一显示区域将第二显示区域包围，等等。另外，本申请实施例中，对于颜色标识符的颜色也不做限定，例如：可以与原始渲染颜色相同，也可以为某种固定颜色，如：当颜色标识符为Aruco码时，为了提升识别的准确率，可以将颜色标识符的颜色设置为黑色。
步骤304，识别颜色标识符，并解码颜色标识符，得到原始渲染颜色值。
具体地，可以先对采集图像进行目标检测，获取到颜色标识符所处的目标位置；再对目标位置处的颜色标识符进行识别，确定出采集图像中包含的是颜色标识符集合中的哪个颜色标识符；最后，按照预先设定的编码字典(颜色标识符与原始渲染颜色之间的对应关系)得到采集图像中的颜色标识符所表征的原始渲染颜色值。
步骤306，基于原始渲染颜色值和采集图像的颜色值，计算得到颜色校准映射关系。
具体地，在获取到采集图像之后，可以经过像素值提取得到采集图像的颜色值。
本申请实施例中，引入了颜色标识符来编码(表征)原始渲染颜色(值)，并在将原始渲染颜色渲染至显示屏的同时，还将上述颜色标识符也渲染至显示屏，通过对采集图像中颜色标识符的识别和解码，得到渲染至显示屏的原始渲染颜色值，进而通过计算得到颜色校准的映射关系。与基于延迟数据进行映射关系计算的方案相比，本申请实施例的映射关系计算过程，无需依赖延迟校准得到的延迟数据，实现了映射关系计算与延迟校准的解耦，因此，可以避免因延迟校准未完成导致的映射关系计算无法进行，或者，延迟校准结果不准确导致的映射关系计算结果不准确的问题，提升了映射关系计算的灵活性和准确性。
可选地，在其中一些实施例中，步骤306可以具体包括：
确定解码得到的原始渲染颜色值的种类数量是否等于预设的原始渲染颜色总数量；
若等于，基于原始渲染颜色值和采集图像的颜色值，计算得到颜色校准映射关系；
若不等于，返回获取采集图像的步骤。
具体地，原始渲染颜色总数量是指预先确定的原始渲染颜色的种类总数量。
如上述针对图1的说明中指出的，原始渲染颜色的种类数量通常为多个，因此，为保证最终得到的颜色校准映射关系可以用于对任一原始渲染颜色进行颜色校准，要在各原始渲染颜色均对应到采集图像的颜色后，再基于各原始渲染颜色及其对应的采集图像的颜色，进行映射关系计算。
参见图5，图5为图3所示实施例中的一种场景示例的示意图，以下，将参考图5所示的示意图，以一个具体场景示例，对本申请实施例进行说明：
渲染帧队列中包含有K+1个渲染帧，一个渲染帧对应一种原始渲染颜色值，具体地：序号为0的渲染帧对应的原始渲染颜色值为A0、序号为1的渲染帧对应的原始渲染颜色值为A1、……、序号为K的渲染帧对应的原始渲染颜色值为AK；采集帧队列中包含有K+1个采集帧，一个采集帧对应一种采集图像的颜色值，具体地：序号为0的采集帧对应的采集图像的颜色值为A0′、序号为1的采集帧对应的采集图像的颜色值为A1′、……、序号为K的采集帧对应的采集图像的颜色值为AK′。
颜色校准过程涉及两种线程：渲染线程和处理线程。其中，渲染线程用于将各原始渲染颜色值渲染至LED屏幕，具体操作为：从渲染队列中获取一帧渲染帧(如AL)，将AL编码为Aruco码，即实现了AL-Aruco码的编码转换，再将Aruco码和AL发送至LED显示屏幕上进行渲染，之后判断渲染帧队列是否为空，若不为空，则返回获取一帧渲染帧的步骤，若未空，则渲染过程结束，退出渲染线程；处理线程用于执行本申请实施例提供的颜色校准方法，具体操作为：从采集队列中获取一帧采集数据(如AL-N′，其中，N为延迟数据)，对该采集数据进行Aruco码检测获取采集图像的颜色值AL-N′对应的原始渲染颜色值AL-N，即实现了Aruco码-AL-N的解码转换，保存颜色值AL-N′与AL-N，之后判断各原始渲染颜色值是否都采集到(其中，可以通过判断解码得到的原始渲染颜色值的种类数量是否等于预设的原始渲染颜色总数量，来判断各原始渲染颜色值是否都采集到，若解码得到的原始渲染颜色值的种类数量等于预设的原始渲染颜色总数量，则表明各原始渲染颜色值都采集到了，若解码得到的原始渲染颜色值的种类数量小于预设的原始渲染颜色总数量，则表明原始渲染颜色值并未采集完整)，若原始渲染颜色值并未采集完整，则返回获取一帧采集数据的步骤，若各原始渲染颜色值都采集到了，则基于各原始渲染颜色值与采集图像的颜色值之间的对应关系，计算原始渲染颜色值A和采集图像的颜色值A′之间的颜色校准映射关系，得到上述映射关系后，退出处理线程。
可选地，在其中一些实施例，步骤304中，解码颜色标识符，得到原始渲染颜色值，具体可以包括：
根据预设编码字典解码颜色标识符，得到原始渲染颜色值；
具体地，如上所述，在进行映射关系计算时，原始渲染颜色的种类数量通常为多个，因此，颜色标识符的数量也通常为多个，编码字典即为颜色标识符与原始渲染颜色之间的对应关系。根据编码字典解码颜色标识符的过程即为：在识别出颜色标识符之后，根据上述对应关系确定颜色标识符对应的原始渲染颜色。
可选地，在其中一些实施例，映射关系计算方法，还可以包括：
获取延迟数据，延迟数据表征从渲染程序进行原始渲染颜色的渲染过程开始，至获取到采集图像为止的总耗时；
基于延迟数据，得到验证渲染颜色值；
若原始渲染颜色值不等于验证渲染颜色值，则输出延时数据错误提示信息。
具体地，从渲染程序进行原始渲染颜色的渲染，至获取到采集图像，这一过程中，可能存在如下几个阶段会产生耗时：颜色渲染阶段，即：将原始颜色渲染至显示屏的过程中，会产生一定的耗时；图像采集阶段，即：采集设备进行图像采集得到采集图像的过程中，会产生一定的耗时；采集图像获取阶段，即：从采集设备中获取到采集图像的过程中，也会产生一定的耗时。
本申请实施例中，在基于颜色标识符确定原始渲染颜色值时，还可以基于延迟数据再次确定出原始渲染颜色值(验证渲染颜色值)，确定该验证渲染颜色值的作用在于：验证延迟数据的准确性。具体地：可以对基于颜色标识符确定原始渲染颜色值和基于延迟数据确定出的原始渲染颜色值(验证渲染颜色值)进行对比，若两者相等，则表明延迟校准得到的延迟数据是准确的，相反，若两者不等，则表明延迟校准得到的延迟数据可能有误，此时，可以输出延时数据错误提示信息，以提示重新进行延时校准。
具体地，基于延迟数据得到验证渲染颜色值的过程可以为：渲染线程在对渲染帧队列中的渲染帧进行渲染时，渲染频率通常是固定的，也就是说，渲染单帧数据的耗时通常是固定的，因此，可以先延迟数据转换为延迟帧数(延迟时长与渲染单帧数据耗时的比值)，在获取到第L帧采集图像时，可以将原始渲染颜色队列中的第(L-N)帧原始渲染颜色的颜色值确定为验证渲染颜色值。
从发出指令进行初始渲染颜色的渲染，到获取到采集图像，需要经过多个软件及硬件的处理，因此，有一定的耗时，进而会造成颜色渲染过程，与获取到采集图像的过程之间存在一定的延迟。
参见图6，图6为颜色校正过程涉及的延迟数据分布示意图。从发出颜色渲染指令开始，该指令要经过操作系统进行处理，假设该过程会产生延迟N1；操作系统的处理结果再提交至显卡进一步处理，该过程会产生延迟N2；显卡的处理结果再提交至播控处理器做下一步处理，该过程会产生延迟N3；播控处理器将颜色渲染至LED屏幕，该过程产生延时N4；LED屏幕接收到渲染数据后进行显示处理，该过程会产生延迟N4；LED屏幕显示颜色之后，相机对LED屏幕进行图像采集的过程，会产生延迟N5；颜色校准软件从相机获取采集图像的过程，会产生延迟N6。综上，从发出颜色渲染指令，到获取到采集图像的整个过程中，累计起来总的延迟N＝N1+N2+N3+N4+N5+N6。
参见图7，图7为图3所示实施例中的另一种场景示例的示意图，以下，将参考图7所示的示意图，以一个具体场景示例，对本申请实施例进行说明：
与图5所示的场景相比，渲染线程执行的操作未发生改变，此处不再赘述。而处理线程的操作过程存在如下区别：从采集队列中获取一帧采集数据(如AL-N′)后，除了对该采集数据进行Aruco码检测获取采集图像的颜色值AL-N′对应的原始渲染颜色值AL-N2之外，还根据延时数据获取到了采集图像的颜色值AL-N′对应的原始渲染颜色值AL-N1(验证渲染颜色值)；另外，在此之后，还判断了AL-N2是否等于AL-N1，若等于，则保存AL-N′与AL-N1，并执行与图5同样的判断各原始渲染颜色值是否都采集到的后续步骤；如不等于，则通知渲染线程，以对AL-N1进行重新渲染。
其中，对AL-N1重新渲染的原因是：当基于延时数据得到的原始渲染颜色值，与基于Aruco码得到的原始渲染颜色值不等时，除了延时数据有误这一可能之外，还有一种可能：渲染线程在对AL-N1渲染时出现了渲染错误，例如：对除了AL-N1以外的其他初始渲染颜色值进行了渲染，或者，同时渲染了多种不同的原始渲染颜色值，因此，此时可以对AL-N1重新渲染来避免上述问题的出现。
实施例二
参照图8，图8为根据本申请实施例二的一种颜色校准方法的步骤流程图。本实施例提供的颜色校准方法可以应用于虚拟拍摄场景中，具体地，本实施例提供的颜色校准方法包括以下步骤：
步骤802，获取目标场景图像。
具体地，目标场景图像可以为视频流中的二维图像帧，也可以为基于三维场景信息渲染得到的二维纹理图像帧。具体地，当目标场景图像为二维图像帧时，获取过程可以为：其他设备将编码图像帧发送至执行本申请实施例提供的图像融合方法的电子设备，电子设备进行解码从而得到二维图像帧；当目标场景图像为基于三维场景信息渲染得到的二维纹理图像帧时，获取过程可以为：其他设备(如渲染服务器集群)基于三维场景信息进行图像渲染，得到渲染完成的二维纹理图像，再对上述二维纹理图像进行编码并传输至上述电子设备，电子设备进行解码从而得到二维纹理图像帧。
步骤804，基于颜色校准映射关系，对目标场景图像中的颜色进行颜色校准，得到校准后场景图像。
其中，颜色校准映射关系采用上述实施例一的方法得到。
步骤806，获取目标采集图像，目标采集图像是将校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面。
步骤808，融合目标场景图像和目标采集图像，得到融合后图像。
具体地，在虚拟拍摄场景中，目标场景图像可以是作为背景的图像，其中，可以包含拍摄背景；采集图像为对显示有上述目标场景图像的显示屏，以及位于显示屏前方的预设对象进行拍摄得到的图像，由于显示屏中显示有拍摄背景，而预设对象位于显示屏前方，因此，采集图像中则可以包含预设对象和拍摄背景，从而营造出预设对象在拍摄背景中活动的视觉效果。而由于采集设备拍摄角度等因素的影响，采集图像中可能只包含部分拍摄背景，为了进一步提升视觉体验，可以对采集图像和目标场景图像进行融合，从而使得到的融合后图像中拍摄背景的区域占比更大。但是，由于采集图像中的颜色相较于目标场景图像中的颜色，有一定的色差，因此，可以先获取颜色校准映射关系，并在获取到目标场景图像之后，采用颜色校准映射关系对目标场景图像进行颜色校准，得到校准后场景图像，这样，将校准后场景图像渲染至显示屏，并通过采集设备进行图像采集之后，可以使得到的目标采集图像的颜色与目标场景图像的颜色一致。
例如：想要生成演员在沙漠中行走的图像，则目标场景图像可以为初始的沙漠图像；在获取到初始的沙漠图像之后，可以基于颜色校准映射关系，对初始的沙漠图像中的颜色进行颜色校准，得到校准后沙漠图像；在将校准后沙漠图像渲染至显示屏，演员在显示屏前方行走，此时通过采集设备拍摄显示屏和演员，从而得到包含演员和校准后沙漠图像中的部分沙漠的目标采集图像，该目标采集图像中沙漠所在区域的颜色与初始的沙漠图像中对应区域的颜色一致；再对目标采集图像和初始的沙漠图像进行融合，最终得到的融合后图像，可以呈现出如下视觉效果：演员在较为宽广的沙漠中行走。
本申请实施例中，是基于准确性较高的颜色校准映射关系进行颜色校准的，因此，最终得到的目标采集图像与目标场景图像之间的颜色更为接近，这样，最终得到的融合后图像的视觉效果会更好。
实施例三
图9为根据本申请实施例三的一种映射关系计算装置的结构框图。该装置包括：
采集图像获取模块902，用于获取采集图像，采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画面；其中，颜色标识符表征原始渲染颜色值，原始渲染颜色值为原始渲染颜色的颜色值；
解码模块904，用于识别颜色标识符，并解码颜色标识符，得到原始渲染颜色值；
映射关系计算模块906，用于基于原始渲染颜色值和采集图像的颜色值，计算得到颜色校准映射关系。
可选地，在其中一些实施例中，颜色标识符基于Aruco码生成。
可选地，在其中一些实施例中，颜色校准装置还包括：
验证渲染颜色值得到模块，用于获取延迟数据，所述延迟数据表征从渲染程序进行原始渲染颜色的渲染过程开始，至获取到所述采集图像为止的总耗时；基于所述延迟数据，得到验证渲染颜色值；若原始渲染颜色值不等于验证渲染颜色值，则输出延时数据错误提示信息。
可选地，在其中一些实施例中，映射关系计算模块906，具体用于：确定解码得到的原始渲染颜色值的种类数量是否等于预设的原始渲染颜色总数量；若等于，基于原始渲染颜色值和采集图像的颜色值，计算得到颜色校准映射关系；若不等于，触发采集图像获取模块902。
本实施例的映射关系计算装置用于实现前述映射关系计算方法实施例中相应的映射关系计算方法，并具有相应的方法实施例的有益效果，在此不再赘述。此外，本实施例的映射关系计算装置中的各个模块的功能实现均可参照前述方法实施例中的相应部分的描述，在此亦不再赘述。
实施例四
图10为根据本申请实施例四的一种颜色校准装置的结构框图。该装置包括：
目标场景图像获取模块1002，用于获取目标场景图像；
颜色校准模块1004，用于基于颜色校准映射关系，对目标场景图像中的颜色进行颜色校准，得到校准后场景图像；
目标采集图像获取模块1006，用于获取目标采集图像，目标采集图像是将校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面；
融合模块1008，用于融合目标场景图像和目标采集图像，得到融合后图像；
其中，颜色校准映射关系采用上述第一方面的方法得到。
本实施例的颜色校准装置用于实现前述颜色校准方法实施例中相应的颜色校准方法，并具有相应的方法实施例的有益效果，在此不再赘述。此外，本实施例的颜色校准装置中的各个模块的功能实现均可参照前述方法实施例中的相应部分的描述，在此亦不再赘述。
实施例五
参照图11，示出了根据本申请实施例五的一种电子设备的结构示意图，本申请具体实施例并不对电子设备的具体实现做限定。
如图11所示，该控制终端可以包括：处理器(processor)1102、通信接口(Communications Interface)1104、存储器(memory)1106、以及通信总线1108。
其中：
处理器1102、通信接口1104、以及存储器1106通过通信总线1108完成相互间的通信。
通信接口1104，用于与其它电子设备或服务器进行通信。
处理器1102，用于执行程序1110，具体可以执行上述映射关系计算方法或颜色校准方法实施例中的相关步骤。
具体地，程序1110可以包括程序代码，该程序代码包括计算机操作指令。
处理器1102可能是CPU，或者是特定集成电路ASIC(Application SpecificIntegrated Circuit)，或者是被配置成实施本申请实施例的一个或多个集成电路。智能设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储器1106，用于存放程序1110。存储器1106可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序1110可包括多条计算机指令，程序1110具体可以通过多条计算机指令使得处理器1102执行前述多个方法实施例中所描述的方法对应的操作。
程序1110中各步骤的具体实现可以参见上述方法实施例中的相应步骤和单元中对应的描述，并具有相应的有益效果，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
本申请实施例还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述多个方法实施例中任一实施例所描述的方法。该计算机存储介质包括但不限于：只读光盘(Compact Disc Read-Only Memory，CD-ROM)、随机存储器(RandomAccess Memory，RAM)、软盘、硬盘或磁光盘等。
本申请实施例还提供了一种计算机程序产品，包括计算机指令，该计算机指令指示计算设备执行上述多个方法实施例中的任一方法对应的操作。
此外，需要说明的是，本申请实施例所涉及到的与用户有关的信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于对模型进行训练的样本数据、用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
需要指出，根据实施的需要，可将本申请实施例中描述的各个部件/步骤拆分为更多部件/步骤，也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤，以实现本申请实施例的目的。
上述根据本申请实施例的方法可在硬件、固件中实现，或者被实现为可存储在记录介质(诸如CD-ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如专用集成电路(Application Specific Integrated Circuit，ASIC)或现场可编辑门阵列(Field Programmable Gate Array，FPGA))的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，随机存储器(Random Access Memory，RAM)、只读存储器(Read-Only Memory，ROM)、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在此描述的方法。此外，当通用计算机访问用于实现在此示出的方法的代码时，代码的执行将通用计算机转换为用于执行在此示出的方法的专用计算机。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请实施例的范围。
以上实施方式仅用于说明本申请实施例，而并非对本申请实施例的限制，有关技术领域的普通技术人员，在不脱离本申请实施例的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本申请实施例的范畴，本申请实施例的专利保护范围应由权利要求限定。

Claims (8)

1.一种映射关系计算方法，包括：
获取采集图像，所述采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画面；其中，所述颜色标识符表征原始渲染颜色值，所述原始渲染颜色值为所述原始渲染颜色的颜色值；
识别所述颜色标识符，并解码所述颜色标识符，得到原始渲染颜色值；
基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系；
所述原始渲染颜色的总数量为多个，多个所述原始渲染颜色形成渲染队列；渲染程序按照预设固定频率逐一对所述渲染队列中的原始渲染颜色进行渲染；
所述方法还包括：
获取延迟数据，所述延迟数据表征从渲染程序进行原始渲染颜色的渲染过程开始，至获取到所述采集图像为止的总耗时；
基于所述延迟数据，得到验证渲染颜色值；所述验证渲染颜色值为所述渲染队列中与所述采集图像对应的原始渲染颜色的颜色值；
若解码得到的原始渲染颜色值不等于所述验证渲染颜色值，输出延时数据错误提示信息。
2.根据权利要求1所述的方法，其中，所述颜色标识符基于Aruco码生成。
3.根据权利要求1所述的方法，其中，所述基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系，包括：
确定解码得到的原始渲染颜色值的种类数量是否等于预设的原始渲染颜色总数量；
若等于，基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系；
若不等于，返回所述获取采集图像的步骤。
4.一种颜色校准方法，包括：
获取目标场景图像；
基于颜色校准映射关系，对所述目标场景图像中的颜色进行颜色校准，得到校准后场景图像；
获取目标采集图像，所述目标采集图像是将所述校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面；
融合所述目标场景图像和所述目标采集图像，得到融合后图像；
其中，所述颜色校准映射关系采用如权利要求1-3任一项所述的方法得到。
5.一种映射关系计算装置，包括：
采集图像获取模块，用于获取采集图像，所述采集图像为将原始渲染颜色和颜色标识符渲染至显示屏并对显示屏进行拍摄得到的画；其中，所述颜色标识符表征原始渲染颜色值，所述原始渲染颜色值为所述原始渲染颜色的颜色值；所述原始渲染颜色的总数量为多个，多个所述原始渲染颜色形成渲染队列；渲染程序按照预设固定频率逐一对所述渲染队列中的原始渲染颜色进行渲染；
解码模块，用于识别所述颜色标识符，并解码所述颜色标识符，得到原始渲染颜色值；
映射关系计算模块，用于基于所述原始渲染颜色值和所述采集图像的颜色值，计算得到颜色校准映射关系；
验证渲染颜色值得到模块，用于获取延迟数据，所述延迟数据表征从渲染程序进行原始渲染颜色的渲染过程开始，至获取到所述采集图像为止的总耗时；基于所述延迟数据，得到验证渲染颜色值；所述验证渲染颜色值为所述渲染队列中与所述采集图像对应的原始渲染颜色的颜色值；若解码得到的原始渲染颜色值不等于所述验证渲染颜色值，输出延时数据错误提示信息。
6.一种颜色校准装置，包括：
目标场景图像获取模块，用于获取目标场景图像；
颜色校准模块，用于基于颜色校准映射关系，对所述目标场景图像中的颜色进行颜色校准，得到校准后场景图像；
目标采集图像获取模块，用于获取目标采集图像，所述目标采集图像是将所述校准后场景图像渲染至显示屏并对显示屏进行拍摄得到的画面进行拍摄得到的画面；
融合模块，用于融合所述目标场景图像和所述目标采集图像，得到融合后图像；
其中，所述颜色校准映射关系采用如权利要求1-3任一项所述的方法得到。
7.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-4任一项所述的方法对应的操作。
8.一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1-4中任一项所述的方法。
CN202310437199.3A 2023-04-21 2023-04-21 映射关系计算方法、颜色校准方法、装置及电子设备 Active CN116540963B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310437199.3A CN116540963B (zh) 2023-04-21 2023-04-21 映射关系计算方法、颜色校准方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310437199.3A CN116540963B (zh) 2023-04-21 2023-04-21 映射关系计算方法、颜色校准方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN116540963A CN116540963A (zh) 2023-08-04
CN116540963B true CN116540963B (zh) 2023-12-19

Family

ID=87449819

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310437199.3A Active CN116540963B (zh) 2023-04-21 2023-04-21 映射关系计算方法、颜色校准方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN116540963B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117478861A (zh) * 2023-10-25 2024-01-30 神力视界(深圳)文化科技有限公司 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置
CN117478860A (zh) * 2023-10-25 2024-01-30 神力视界(深圳)文化科技有限公司 颜色校准映射关系的建立方法、虚拟拍摄系统及相关装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008066830A (ja) * 2006-09-05 2008-03-21 Seiko Epson Corp 画像表示システムおよびテレビ受像機ならびに画像表示方法
CN111640391A (zh) * 2019-03-01 2020-09-08 杭州海康威视数字技术股份有限公司 显示屏显示调整方法及系统
US11457187B1 (en) * 2021-08-04 2022-09-27 Warner Bros. Entertainment Inc. System and method for generating video content with hue-preservation in virtual production

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7522767B2 (en) * 2005-09-09 2009-04-21 Hewlett-Packard Development Company, L.P. True color communication
CN103167293B (zh) * 2011-12-09 2015-07-22 夏普株式会社 显示系统
US9152830B2 (en) * 2013-03-15 2015-10-06 Pictech Management Limited Color restoration for color space encoded image

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008066830A (ja) * 2006-09-05 2008-03-21 Seiko Epson Corp 画像表示システムおよびテレビ受像機ならびに画像表示方法
CN111640391A (zh) * 2019-03-01 2020-09-08 杭州海康威视数字技术股份有限公司 显示屏显示调整方法及系统
US11457187B1 (en) * 2021-08-04 2022-09-27 Warner Bros. Entertainment Inc. System and method for generating video content with hue-preservation in virtual production

Also Published As

Publication number Publication date
CN116540963A (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
CN116540963B (zh) 映射关系计算方法、颜色校准方法、装置及电子设备
Wan et al. CoRRN: Cooperative reflection removal network
CN109784181B (zh) 图片水印识别方法、装置、设备及计算机可读存储介质
CN104618803A (zh) 信息推送方法、装置、终端及服务器
CN110008997B (zh) 图像纹理相似度识别方法、装置及计算机可读存储介质
CN116485979B (zh) 映射关系计算方法、颜色校准方法及电子设备
CN107509080B (zh) 一种编码图像显示方法、装置和电子设备
CN111353965B (zh) 图像修复方法、装置、终端及存储介质
CN112581632A (zh) 一种房源数据的处理方法和装置
CN112967180A (zh) 一种生成对抗网络的训练方法、图像风格转换方法和装置
CN111508058A (zh) 图像三维重建的方法、装置、存储介质及电子设备
CN112911341B (zh) 图像处理方法、解码器网络训练方法、装置、设备和介质
US11051080B2 (en) Method for improving video resolution and video quality, encoder, and decoder
CN113298098B (zh) 基础矩阵估计方法及相关产品
CN113490009B (zh) 内容信息植入方法、装置、服务器和存储介质
CN113553469B (zh) 数据处理方法、装置、电子设备及计算机存储介质
CN111311722B (zh) 信息处理方法及装置、电子设备和存储介质
CN110781345B (zh) 视频描述生成模型的获取方法、视频描述生成方法及装置
CN115828848A (zh) 字体生成模型的训练方法、装置、设备及存储介质
CN113344161A (zh) 动态qr码的生成方法、装置、计算机设备及存储介质
CN113544701A (zh) 关联对象的检测方法及装置
CN112102205A (zh) 图像去模糊方法、装置、电子设备及存储介质
US9953199B2 (en) Decoding a main image using an auxiliary image
CN112634460B (zh) 基于Haar-like特征的户外全景图生成方法及装置
EP4171015A1 (en) Handling blur in multi-view imaging

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20230810

Address after: Room 602, Building S1, Alibaba Cloud Building, No. 3239 Keyuan Road, Ulan Coast Community, Yuehai Street, Nanshan District, Shenzhen City, Guangdong Province, 518054

Applicant after: Shenli Vision (Shenzhen) Cultural Technology Co.,Ltd.

Address before: Room 2601, floor 26, building 9, Wangjing Dongyuan Fourth District, Chaoyang District, Beijing 100102

Applicant before: BEIJING YOUKU TECHNOLOGY Co.,Ltd.

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant