CN117354439A - 光强处理方法、装置、电子设备和计算机存储介质 - Google Patents

光强处理方法、装置、电子设备和计算机存储介质 Download PDF

Info

Publication number
CN117354439A
CN117354439A CN202311432780.2A CN202311432780A CN117354439A CN 117354439 A CN117354439 A CN 117354439A CN 202311432780 A CN202311432780 A CN 202311432780A CN 117354439 A CN117354439 A CN 117354439A
Authority
CN
China
Prior art keywords
virtual
shooting
color
illumination
sampling position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311432780.2A
Other languages
English (en)
Inventor
卞梓霖
张家斌
李静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenli Vision Shenzhen Cultural Technology Co ltd
Original Assignee
Shenli Vision Shenzhen Cultural Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenli Vision Shenzhen Cultural Technology Co ltd filed Critical Shenli Vision Shenzhen Cultural Technology Co ltd
Priority to CN202311432780.2A priority Critical patent/CN117354439A/zh
Publication of CN117354439A publication Critical patent/CN117354439A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/841—Camera processing pipelines; Components thereof for processing colour signals to modify gamut
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例提供了一种光强处理方法、装置、电子设备和计算机存储介质。所述光强处理方法包括：获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度；确定与所述实际光照色彩匹配的虚拟显示色彩；在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩；在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。本发明实施例提高了视觉效果对齐的准确度，提高了拍摄的真实性。

Description

光强处理方法、装置、电子设备和计算机存储介质
技术领域
本发明实施例涉及计算机技术领域，尤其涉及一种光强处理方法、装置、电子设备和计算机存储介质。
背景技术
虚拟拍摄技术是传统电影制作技巧与现代技术的融合，有助于创作者实现将数字世界与物理世界实时结合在一起，提高拍摄效果。在基于LED的虚拟拍摄过程中，首先通过在诸如虚拟引擎的应用程序中制作与现实非常相似的精美场景，然后技术人员再将其播放至LED屏幕上，以代替现实世界场景。在这项技术中，诸如拍摄团队等拍摄人员无需去往取景地，而是可以通过随时切换虚拟拍摄背景来完成对不同拍摄前景的拍摄需求。为了保证最终拍摄画面中虚拟拍摄背景和现实拍摄前景能够很好的融合在一起，提高拍摄画面的真实性，因此需要保证虚拟引擎中的虚拟拍摄背景与现实拍摄前景所呈现的视觉效果保持高度一致。
在传统的虚实光强效果对齐的方案中，虚拟拍摄背景和现实拍摄前景受限于不同的显示机制，在执行拍摄时，虚拟拍摄背景与现实拍摄前景之间的视觉对齐效果较差，导致拍摄的真实性也较差。
发明内容
有鉴于此，本发明实施例提供一种光强处理方法、装置、电子设备和计算机存储介质，以至少部分解决上述问题。
根据本发明实施例的第一方面，提供了一种光强处理方法，包括：获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度；确定与所述实际光照色彩匹配的虚拟显示色彩；在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩；在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。
在本发明的另一实现方式中，所述在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩，包括：在所述现实拍摄前景的虚拟拍摄背景中，在所述光照采样位置周围设置预设虚拟光源；基于所述虚拟显示色彩设置所述预设虚拟光源。
在本发明的另一实现方式中，所述在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致，包括：检测所述光照采样位置在预设虚拟光源下的亮度；针对所述光照采样位置调整所述预设虚拟光源的光强，在所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致时，将所述预设虚拟光源的调整后光强确定为所述虚拟拍摄背景与所述现实拍摄前景对齐的光强。
在本发明的另一实现方式中，所述方法还包括：在所述光照采样位置的等效光照度与实际光照度不一致时，调整所述预设虚拟光源的光强，直到所述光照采样位置的等效光照度与实际光照度一致。
在本发明的另一实现方式中，所述确定与所述实际光照色彩匹配的虚拟显示色彩，包括：确定所述实际光照色彩在光感知色彩域中的光照色彩参数；将所述光照色彩参数转换为RGB色彩域中的虚拟色彩参数。
在本发明的另一实现方式中，所述方法还包括：基于拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄，得所述白色样本在拍摄后的前景色彩；基于所述拍摄参数设置所述虚拟拍摄背景中的虚拟相机，对虚拟白色样本进行拍摄，得到所述虚拟白色样本在拍摄后的背景色彩，所述虚拟白色样本的色彩参数与所述白色样本的色彩参数一致；通过对比所述前景色彩与所述背景色彩，验证所述现实拍摄前景与所述虚拟拍摄背景之间的光强对齐结果。
在本发明的另一实现方式中，所述方法还包括：通过调整初始拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄；
在所述白色样本在拍摄后的前景色彩为标准白色时，将所述初始拍摄参数确定为所述拍摄参数。
根据本发明实施例的第二方面，提供了一种光强处理装置，包括：获取模块，获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度；确定模块，确定与所述实际光照色彩匹配的虚拟显示色彩；设置模块，在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩；调整模块，在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。
根据本发明实施例的第三方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如第一方面所述方法对应的操作。
根据本发明实施例的第四方面，提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面所述的方法。
在本发明实施例的方案中，借助于光照采样位置在虚拟拍摄背景中的虚拟显示色彩与实际光照色彩进行匹配，实现了现实拍摄前景与虚拟拍摄背景的色彩对齐，此外，借助于光照采样位置在虚拟拍摄背景下的亮度，获得了光照采样位置的等效光照度，进而能够独立于虚拟显示色彩来调整预设虚拟光源的光强，使虚拟拍摄背景与现实拍摄前景的光强对齐，从而提高了视觉效果对齐的准确度，提高了拍摄的真实性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明实施例中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。
图1为根据一个示例的拍摄系统的示意图。
图2为根据本发明的一些实施例的光强处理方法的步骤流程图。
图3A为根据图2实施例的光强处理方法的进一步示例的步骤流程图。
图3B和图3C为根据图2实施例的现实拍摄前景和虚拟拍摄背景的光强对齐过程的示意图。
图4为根据本发明的另一些实施例的光强处理装置的结构框图。
图5为根据本发明的另一些实施例的电子设备的结构示意图。
具体实施方式
为了使本领域的人员更好地理解本发明实施例中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明实施例一部分实施例，而不是全部的实施例。基于本发明实施例中的实施例，本领域普通技术人员所获得的所有其他实施例，都应当属于本发明实施例保护的范围。
下面结合本发明实施例附图进一步说明本发明实施例具体实现。
图1示出了一个示例的拍摄系统。示例性地，拍摄系统可以包括显示设备101、服务端102、终端设备103及拍摄设备104。
其中，服务端102可以与终端设备103通信连接，服务端102存储有虚拟拍摄背景的背景资源，例如，图像资源和/或视频资源。
由此，终端设备103可以向服务端102发送下载请求，下载请求用于请求下载背景资源。
终端设备103可以对背景资源中的虚拟拍摄背景画质进行优化处理，例如，调整虚拟拍摄背景的显示效果，显示效果例如，颜色显示、光照度显示等。
显示设备101可以为显示屏或投影设备，显示设备101与终端设备103通信连接，接收终端设备103传输的虚拟拍摄背景。在显示设备101为显示屏的情况下，显示屏可以设置在现实拍摄前景的后面；在显示设备101为投影仪的情况下，投影仪将虚拟拍摄背景投影到投影屏，投影屏可以设置在现实拍摄前景的后面。
拍摄设备104用于在显示设备101显示虚拟拍摄背景时，对虚拟拍摄背景和现实拍摄前景进行拍摄。
进一步地，终端设备103中可以安装有诸如虚拟引擎等应用程序。对虚拟拍摄背景进行处理。虚拟引擎是一种能够对图像进行二维或三维渲染的图像处理应用程序。例如，终端设备103可以(例如，从拍摄设备104)获取现实拍摄前景的相关信息(例如，现实拍摄前景的位置信息、光照采样位置和实际光照度)。终端设备103还可以获取显示设备的位置信息。终端设备103可以通过调整虚拟拍摄背景与显示设备之间的相对位置，使虚拟拍摄背景与现实拍摄前景进行空间位置对齐。
应理解，终端设备103可以是智能手机、平板电脑、笔记本电脑、等电子设备。终端设备103可以接入网络，通过网络与服务端102和/或显示设备101和拍摄设备104进行通信连接和数据交互，上述网络包括局域网(英文：Local Area Network，LAN)、广域网(英文：Wide Area Network，WAN)、移动通信网络；如万维网(英文：World Wide Web，WWW)、长期演进(英文：Long Term Evolution，LTE)网络、2G网络(英文：2th Generation MobileNetwork)、3G网络(英文：3th Generation Mobile Network)，5G网络(英文：5thGeneration Mobile Network)等。当然，此处只是示例性说明，并不代表本发明局限于此。
图2示出了根据本发明的一些实施例的光强处理方法。图2的光强处理方法包括：
S210：获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度。
应理解，光照采样位置处于现实拍摄前景的被拍摄物体周围，可以通过光照度检测设备检测至少一个光照采样位置的实际光照度和光照色彩。
可替代地，也可以对现实拍摄前景进行预拍摄，将拍摄后的图像中光照采样位置的亮度表征的光照度作为实际光照度，并且将光照采样位置的显示色彩表征的光照色彩作为实际光照色彩。
S220：确定与实际光照色彩匹配的虚拟显示色彩。
应理解，可以将实际光照色彩所在的光照色彩域的参数转换为虚拟显示色彩的显示色彩域的参数，来实现上述色彩匹配。例如，光照色彩域可以是CIE 1931，显示色彩域可以是RGB色彩域。
S230：在现实拍摄前景的虚拟拍摄背景中，将光照采样位置的色彩设置为虚拟显示色彩。
应理解，可以直接在虚拟拍摄背景的图像处理应用(例如，虚拟引擎)中添加预设虚拟光源，并且设置光照采样位置的虚拟显示色彩。可替代地，也可以在图像处理应用中确定与现实拍摄前景对齐的光照采样位置，在光照采样位置处添加具有一定材质参数的诸如平面的虚拟物体，然后，设置虚拟物体上的虚拟显示色彩。另外，可以直接将预设虚拟光源设置成能够发射虚拟现实色彩的光线。
S240：在保持光照采样位置的虚拟显示色彩的情况下，在虚拟拍摄背景中调整光照采样位置的亮度，使得光照采样位置的亮度对应的等效光照度与实际光照度一致。
应理解，可以在虚拟显示色彩不变的情况下，调整预设虚拟光源的亮度，使光照采样位置的等效光照度的数值与实际光照度的数值均一致。
还应理解，在多个光照采样位置的情况下，可以采用拟合算法对多个光照采样位置的各个调整后光强进行拟合，得到预设虚拟光源的拟合光强作为拟合结果，拟合算法可以为线性回归、差值算法、均值拟合等。
在本发明实施例的方案中，借助于光照采样位置在虚拟拍摄背景中的虚拟显示色彩与实际光照色彩进行匹配，实现了现实拍摄前景与虚拟拍摄背景的色彩对齐，此外，借助于光照采样位置在虚拟拍摄背景下的亮度，获得了光照采样位置的等效光照度，进而能够独立于虚拟显示色彩来调整预设虚拟光源的光强，使虚拟拍摄背景与现实拍摄前景的光强对齐，从而提高了视觉效果对齐的准确度，提高了拍摄的真实性。
在一些示例中，图3A示出了图2实施例的一些示例的光强处理方法，其包括如下步骤：
S310：根据被拍摄物体在现实拍摄前景中的位置，确定光照采样位置。例如，光照采样位置可以为现实拍摄前景中目标光源下的光照采样点的位置或光照采样区域的位置。光照采样位置可以实现为一个光照采样点或光照采样区域的位置，也可以实现为多个光照采样点或多个光照采样区域的位置。在多个光照采样位置的情况下，多个光照采样位置处于在目标光源的照射平面中投影位置的拟合范围内，其中，拟合范围可以是多个光照采样位置在照射平面中投影位置的外接圆或外接多边形等。如图3B所示，多个光照采样位置A、B、C、D、E基于XYZ坐标系的坐标分别为(0,0,0)、(0,0.5,0)、(0,1,0)、(0,-0.5,0)、(0,-1,0)。在一个光照采样位置的情况下，光照采样位置位于目标光源的照射平面内，并且被拍摄物体的至少一部分在照射平面中的投影位置位于光照采样位置周边或邻近的位置，优选地，光照采样位置位于位置D(0,-0.5,0)，即，预设虚拟光源垂直照射到照射平面的位置。
S320：测量光照采样位置各自的实际光照度和实际光照色彩。例如，光照采样位置(0,0,0)在目标光源下的光照度为100lux。相应地，光照采样位置的实际光照色彩为[0.5,0.3,0]，示例性地，[x,y,z]可以为CIE 1931光照色彩域(一种示例性光照度色彩标准，也可以为其他光照度色彩标准)的参数。在多个光照采样位置的情况下，光照采样位置(0,0,0)的光照度为100lux，光照采样位置(0,-0.5,0)的光照度为80lux，光照采样位置(0,-1,0)的光照度为50lux，光照采样位置(0,0.5,0)的光照度为80lux，光照采样位置(0,-1,0)的光照度为50lux。可替代地，可以将上述任一光照采样位置的实际光照色彩为准。其他的光照采样位置用于调整光照度。
S330：确定与实际光照色彩匹配的虚拟显示色彩。例如，可以通过实际光照色彩所在的光照色彩域的参数转换为虚拟显示色彩的显示色彩域的参数，来实现上述色彩匹配。例如，光照色彩域可以是CIE 1931，显示色彩域可以是RGB色彩域。
S340：在虚拟拍摄背景的虚拟引擎中，将虚拟物体添加到对应于光照采样位置，并且基于光照采样位置设置预设虚拟光源。例如，在虚拟引擎中，预设虚拟光源照射到照射平面的位置位于虚拟物体处。另外，可以将虚拟物体的显示参数设置为标准灰度材质，例如，将基础颜色值设置为1，将粗糙度设置为1。应理解，基础颜色可以通过调节色相、饱和度和亮度来实现颜色的变化。基础颜色值通常是指在数字颜色空间中，用数字表示颜色的数值，其中，数字颜色空间可以为RGB颜色空间或CMYK颜色空间。粗糙度是指物体表面光滑度的程度，也可以用来描述物体表面的粗细和细腻程度，在计算机图形学中，粗糙度值通常是指用来描述物体表面光滑程度的一个参数，其取值范围一般是0到1，其中0表示非常光滑的表面，1表示非常粗糙的表面。
S350：根据实际光照色彩确定匹配的虚拟显示色彩，基于虚拟显示色彩设置预设虚拟光源。例如，可以基于下面的公式将光照色彩域与匹配的显示色彩域之间的转换：
相应地，对于光照色彩域参数[0.5,0.3,0]，得到匹配的RGB色彩域参数[255,21,43]，即，R通道值为255，G通道值为21，B通道值为43。
S360：在虚拟引擎中，根据预设映射关系，计算出被拍摄物体的等效光照度对应的亮度。例如，预设映射关系可以指示物体的等效光照度与亮度之间的对应关系，例如，下面的公式为预设映射关系的一个示例：
π*L＝R*E，其中，R为物体的表面反射系数；π为圆周率；E为物体的表面照度；L为物体表面的亮度值。例如，在光照采样位置(0,0,0)的光照度为100lux的情况下，虚拟物体(例如，具有标准灰度材质)表面的反射系数R＝0.19，计算得到虚拟物体的表面的亮度值L＝6.05。
又例如，如图3C所示，可以将该虚拟物体放置在光照采样位置(0,-0.5,0)处(光照采样位置D)，不失一般性地，可以将虚拟物体放置在任一光照采样位置(例如，光照采样位置A、B、C、D、或者E)。
不失一般性地，在虚拟拍摄背景与现实拍摄前景进行空间位置对齐时，作为确定多个光照采样位置在预设虚拟光源下的亮度的示例，可以根据现实拍摄前景与虚拟拍摄背景之间的空间对应关系，确定多个光照采样位置分别在虚拟拍摄背景中的多个坐标值，然后，在虚拟拍摄背景中读取多个坐标值在预设虚拟光源下的亮度。
S370：在保持虚拟显示色彩的情况下，调整预设虚拟光源的强度，使光照采样位置的等效光照度与实际光照度一致。例如，亮度检测工具能够基于虚拟物体的像素参数计算得到虚拟物体的表面的亮度值。在保证RGB参数为[255,21,43]的情况下，使虚拟物体在光照采样位置(0,0,0)时的亮度值为6.05，并记录预设虚拟光源的调整后光强I0。然后，将I0确定为虚拟拍摄背景与现实拍摄前景对齐的光强。不失一般性地，如此还可以测量其他光照采样位置B、C、D和E的表面亮度值，相应地记录预设虚拟光源的调整后光强I1、I2、I3和I4。在另一些示例中，还可以对预设虚拟光源的各个调整后光强进行拟合，将拟合结果。例如，对调整后光强I0、I1、I2、I3和I4进行平均值处理，得到拟合结果＝(I0+I1+I2+I3+I4)/5。
S380：在保持预设虚拟光源具有对齐的光强的情况下，调整预设虚拟光源的光圆锥体角度，使得多个光照采样位置的等效光照度与实际光照度一致。应理解，可以在虚拟引擎中，测量虚拟物体在至少部分光照采样位置处的照度，例如，可以测量光照采样位置(0,-0.5,0)处的光照度，测量光照采样位置(0,-1,0)处的光照度，计算其各个光照度与光照采样位置之间的线性变化曲线。应理解，预设虚拟光源的调整后光强与对齐光强相比可以有微调整，由此可以对照现实拍摄前景中的光照采样位置(0,-0.5,0)的光照度和光照采样位置(0,-1,0)的光照度的线性变化曲线(实际光照度的示例)，调整虚拟灯光的光圆锥体角度。虚拟光源的光圆锥体角度是指控制光源投射范围和扩散效果的一种参数。在虚拟引擎中，灯光通常以锥形或圆锥形的方式向场景中传播光线，因此，光圆锥体角度决定了光源发出的光束的角度大小。较小的角度会产生较为聚焦的光束，使灯光投射到的区域更加集中，产生较强的光照度。而较大的角度会产生较为散射的光束，使灯光投射到的区域更广泛，产生较弱光照度。
进一步地，对于图3A实施例而言，作为现实拍摄前景与虚拟拍摄背景的对齐结果的验证过程的示例，可以基于拍摄参数，对现实拍摄前景中的白色样本进行拍摄，得白色样本在拍摄后的前景色彩，然后，基于拍摄参数设置虚拟拍摄背景中的虚拟相机，对虚拟白色样本进行拍摄，得到虚拟白色样本在拍摄后的背景色彩(应理解，虚拟白色样本的色彩参数与白色样本的色彩参数一致)，然后，通过对比前景色彩与背景色彩，验证现实拍摄前景与虚拟拍摄背景之间的光强对齐结果。由于白色样本能够去除非光照度因素的影响可靠地表征光照度，从而在虚拟白色样本的色彩参数与白色样本的色彩参数一致的情况下，能够对前景色彩与背景色彩进行可靠且高效地对照，提高了验证的效率。
进一步地，在验证过程中，还可以通过调整初始拍摄参数，对现实拍摄前景中的白色样本进行拍摄，然后，在白色样本在拍摄后的前景色彩为标准白色时，将初始拍摄参数确定为拍摄参数。也就是说，在白色样本在拍摄后的前景色彩为标准白色时，更加准确地表征了光照度因素，进一步提高了验证过程的可靠性。
应理解，在上述各个步骤中，步骤S310和S320对应于图2的步骤S210。步骤S330对应于图2的步骤S220。步骤S340和S350对应于图2的步骤S230。步骤S360-S380对应于图2的步骤S240。
对于图3A的实施例，不失一般性地，作为确定多个光照采样位置在预设虚拟光源下的亮度的示例，可以根据现实拍摄前景与虚拟拍摄背景之间的空间对应关系，确定多个光照采样位置分别在虚拟拍摄背景中的多个坐标值，然后，在虚拟拍摄背景中读取多个坐标值在预设虚拟光源下的亮度。通过上述的处理过程，现实拍摄前景与虚拟拍摄背景之间的空间对应关系有利于光强对齐的效果。更具体地，上述的空间对应关系可以是指现实拍摄前景的坐标系与虚拟拍摄背景的坐标系的对应关系。现实拍摄前景的坐标系为基于现实拍摄前景设置的三维坐标系，虚拟拍摄背景的坐标系是在诸如虚拟引擎等图像处理应用程中进行编辑时所采用的虚拟三维坐标系，以便实现更逼真的三维视觉效果。因此，可以使现实拍摄前景的坐标系与虚拟拍摄背景的坐标系对齐(例如，将两个坐标系的三个维度分别对齐)，然后，基于对齐后的现实拍摄前景和虚拟拍摄背景，确定光照采样位置在现实拍摄前景的具体位置与光照采样位置在虚拟拍摄背景的具体位置之间的对应关系。
更具体地，作为在虚拟拍摄背景中读取多个坐标值在预设虚拟光源下的亮度的一个具体示例，对于每个坐标值，可以在虚拟引擎中在坐标值处设置虚拟物体(例如，平面虚拟物体)，然后，借助虚拟引擎中的亮度检测工具，检测虚拟物体的表面亮度值。
对于图3A的实施例，为了在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致，可以将虚拟拍摄背景与现实拍摄前景进行空间位置对齐，检测所述光照采样位置在预设虚拟光源下的亮度，然后针对所述光照采样位置调整所述预设虚拟光源的光强，在光照采样位置的亮度对应的等效光照度与所述实际光照度一致时，将所述预设虚拟光源的调整后光强确定为所述虚拟拍摄背景与所述现实拍摄前景对齐的光强。例如，可以基于预设映射关系，计算光照采样位置的亮度对应的等效光照度。
也就是说，在所述光照采样位置的等效光照度与实际光照度不一致时，调整所述预设虚拟光源的光强，直到所述光照采样位置的等效光照度与实际光照度一致。由于预设映射关系能够可靠地指示物体的等效光照度与亮度之间的对应关系，通过比较每个光照采样位置的等效光照度与实际光照度是否一致，能够可靠且高效地得到预设虚拟光源的调整后光强。
进一步地，对于图3A的实施例，不失一般性地，光强处理方法还可以包括：在多个光照采样位置的情况下，确定虚拟拍摄背景中多个光照采样位置所在的照射平面，然后，确定预设虚拟光源在虚拟拍摄背景中的位置，使得预设虚拟光源在照射平面中的投影位置在光照采样位置之间。应理解，预设虚拟光源在照射平面中的投影位置在光照采样位置之间，使光照采样位置得到更加趋近于垂直的照射，进一步提升了预设映射关系的表征的准确性。还应理解，可以将多个光照采样位置中与投影位置距离最近的位置确定为设置虚拟显示色彩的光照采样位置，然后，获取光照采样位置的实际光照色彩。
进一步地，对于图3A的实施例，不失一般性地，光强处理方法还可以包括：在多个光照采样位置的情况下，可以调整预设虚拟光源在虚拟拍摄背景中的位置，使得预设虚拟光源的各个调整后光强与拟合结果之间差异小于预设值。由此，预设虚拟光源的各个调整后光强更加接近，使得拟合结果更接近与现实拍摄前景的单一光源所带来的光照度，从而进一步提高了拟合处理的拟合效果。
图4示出了根据本发明的另一些实施例的光强处理装置。图4的光强处理装置可以用于执行图2的光强处理方法，包括：
获取模块410，获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度。
确定模块420，确定与所述实际光照色彩匹配的虚拟显示色彩。
设置模块430，在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩。
调整模块430，在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。
应理解，光照采样位置处于现实拍摄前景的被拍摄物体周围，可以通过光照度检测设备检测至少一个光照采样位置的实际光照度和光照色彩。可替代地，也可以对现实拍摄前景进行预拍摄，在拍摄后的图像中光照采样位置的亮度表征的光照度作为实际光照度，并且将光照采样位置的显示色彩表征的光照色彩作为实际光照色彩。
还应理解，可以将实际光照色彩所在的光照色彩域的参数转换为虚拟显示色彩的显示色彩域的参数，来实现上述色彩匹配。例如，光照色彩域可以是CIE 1931，显示色彩域可以是RGB色彩域。此外，可以直接在虚拟拍摄背景的图像处理应用(例如，虚拟引擎)中添加预设虚拟光源，并且设置光照采样位置的虚拟显示色彩。可替代地，也可以在图像处理应用中确定与现实拍摄前景对齐的光照采样位置，在光照采样位置处添加具有一定材质参数的诸如平面的虚拟物体，然后，设置虚拟物体上的虚拟显示色彩。另外，可以直接将预设虚拟光源设置成能够发射虚拟现实色彩的光线。
还应理解，可以在虚拟显示色彩不变的情况下，调整预设虚拟光源的亮度，使光照采样位置的等效光照度的数值与实际光照度的数值均一致。此外，在存在多个光照采样位置的情况下，可以采用拟合算法对多个光照采样位置的各个调整后光强进行拟合，得到预设虚拟光源的拟合光强作为拟合结果，拟合算法可以为线性回归、差值算法、均值拟合等。
在本发明实施例的方案中，借助于光照采样位置在虚拟拍摄背景中的虚拟显示色彩与实际光照色彩进行匹配，实现了现实拍摄前景与虚拟拍摄背景的色彩对齐，此外，借助于光照采样位置在虚拟拍摄背景下的亮度，获得了光照采样位置的等效光照度，进而能够独立于虚拟显示色彩来调整预设虚拟光源的光强，使虚拟拍摄背景与现实拍摄前景的光强对齐，从而提高了视觉效果对齐的准确度，提高了拍摄的真实性。
在另一些示例中，设置模块具体用于：在所述现实拍摄前景的虚拟拍摄背景中，在所述光照采样位置周围设置预设虚拟光源；基于所述虚拟显示色彩设置所述预设虚拟光源。
在另一些示例中，调整模块具体用于：检测所述光照采样位置在预设虚拟光源下的亮度；针对所述光照采样位置调整所述预设虚拟光源的光强，在所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致时，将所述预设虚拟光源的调整后光强确定为所述虚拟拍摄背景与所述现实拍摄前景对齐的光强。
在另一些示例中，调整模块还用于：在所述光照采样位置的等效光照度与实际光照度不一致时，调整所述预设虚拟光源的光强，直到所述光照采样位置的等效光照度与实际光照度一致。
在另一些示例中，调整模块还用于：将所述预设虚拟光源的调整后光强确定为所述虚拟拍摄背景与所述现实拍摄前景对齐的光强。
在另一些示例中，确定模块具体用于：确定所述实际光照色彩在光感知色彩域中的光照色彩参数；将所述光照色彩参数转换为RGB色彩域中的虚拟色彩参数。
在另一些示例中，光强处理装置还包括验证模块，验证模块用于：基于拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄，得所述白色样本在拍摄后的前景色彩；基于所述拍摄参数设置所述虚拟拍摄背景中的虚拟相机，对虚拟白色样本进行拍摄，得到所述虚拟白色样本在拍摄后的背景色彩，所述虚拟白色样本的色彩参数与所述白色样本的色彩参数一致；通过对比所述前景色彩与所述背景色彩，验证所述现实拍摄前景与所述虚拟拍摄背景之间的光强对齐结果。
在另一些示例中，验证模块还用于：通过调整初始拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄；在所述白色样本在拍摄后的前景色彩为标准白色时，将所述初始拍摄参数确定为所述拍摄参数。
参照图5，示出了根据本发明的另一实施例的一种电子设备的结构示意图，本发明具体实施例并不对电子设备的具体实现做限定。
如图5所示，该电子设备可以包括：用于执行程序510的处理器(processor)502、通信接口(Communications Interface)504、存储器(memory)506、以及通信总线508。
处理器、通信接口、以及存储器通过通信总线完成相互间的通信。
通信接口，用于与其它电子设备或服务器进行通信。
处理器，用于执行程序，具体可以执行上述方法实施例中的相关步骤。
具体地，程序可以包括程序代码，该程序代码包括计算机操作指令。
处理器可能是CPU，或者是特定集成电路ASIC(Application SpecificIntegrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。智能设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储器，用于存放程序。存储器可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序可包括多条计算机指令，程序具体可以通过多条计算机指令使得处理器执行前述多个方法实施例中任一实施例所描述的光强处理方法对应的操作。
程序中各步骤的具体实现可以参见上述方法实施例中的相应步骤和单元中对应的描述，并具有相应的有益效果，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
本发明实施例还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述多个方法实施例中任一实施例所描述的方法。该计算机存储介质包括但不限于：只读光盘(Compact Disc Read-Only Memory，CD-ROM)、随机存储器(RandomAccess Memory，RAM)、软盘、硬盘或磁光盘等。
本发明实施例还提供了一种计算机程序产品，包括计算机指令，该计算机指令指示计算设备执行上述多个方法实施例中的任一光强处理对应的操作。
此外，需要说明的是，本发明实施例所涉及到的与用户有关的信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于对模型进行训练的样本数据、用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关规定和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
需要指出，根据实施的需要，可将本发明实施例中描述的各个部件/步骤拆分为更多部件/步骤，也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤，以实现本发明实施例的目的。
上述根据本发明实施例的方法可在硬件、固件中实现，或者被实现为可存储在记录介质(诸如CD-ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如专用集成电路(Application Specific Integrated Circuit，ASIC)或现场可编辑门阵列(Field Programmable Gate Array，FPGA))的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，随机存储器(Random Access Memory，RAM)、只读存储器(Read-Only Memory，ROM)、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在此描述的方法。此外，当通用计算机访问用于实现在此示出的方法的代码时，代码的执行将通用计算机转换为用于执行在此示出的方法的专用计算机。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明实施例的范围。
以上实施方式仅用于说明本发明实施例，而并非对本发明实施例的限制，有关技术领域的普通技术人员，在不脱离本发明实施例的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明实施例的范畴，本发明实施例的专利保护范围应由权利要求限定。

Claims (10)

1.一种光强处理方法，包括：
获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度；
确定与所述实际光照色彩匹配的虚拟显示色彩；
在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩；
在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。
2.根据权利要求1所述的方法，其中，所述在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩，包括：
在所述现实拍摄前景的虚拟拍摄背景中，在所述光照采样位置周围设置预设虚拟光源；
基于所述虚拟显示色彩设置所述预设虚拟光源。
3.根据权利要求2所述的方法，其中，所述在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致，包括：
检测所述光照采样位置在预设虚拟光源下的亮度；
针对所述光照采样位置调整所述预设虚拟光源的光强，在所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致时，将所述预设虚拟光源的调整后光强确定为所述虚拟拍摄背景与所述现实拍摄前景对齐的光强。
4.根据权利要求3所述的方法，其中，所述方法还包括：
在所述光照采样位置的等效光照度与实际光照度不一致时，调整所述预设虚拟光源的光强，直到所述光照采样位置的等效光照度与实际光照度一致。
5.根据权利要求1所述的方法，其中，所述确定与所述实际光照色彩匹配的虚拟显示色彩，包括：
确定所述实际光照色彩在光感知色彩域中的光照色彩参数；
将所述光照色彩参数转换为RGB色彩域中的虚拟色彩参数。
6.根据权利要求1所述的方法，其中，所述方法还包括：
基于拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄，得所述白色样本在拍摄后的前景色彩；
基于所述拍摄参数设置所述虚拟拍摄背景中的虚拟相机，对虚拟白色样本进行拍摄，得到所述虚拟白色样本在拍摄后的背景色彩，所述虚拟白色样本的色彩参数与所述白色样本的色彩参数一致；
通过对比所述前景色彩与所述背景色彩，验证所述现实拍摄前景与所述虚拟拍摄背景之间的光强对齐结果。
7.根据权利要求6所述的方法，其中，所述方法还包括：
通过调整初始拍摄参数，对所述现实拍摄前景中的白色样本进行拍摄；
在所述白色样本在拍摄后的前景色彩为标准白色时，将调整后的所述初始拍摄参数确定为所述拍摄参数。
8.一种光强处理装置，包括：
获取模块，获取光照采样位置在现实拍摄前景中的实际光照色彩和实际光照度；
确定模块，确定与所述实际光照色彩匹配的虚拟显示色彩；
设置模块，在所述现实拍摄前景的虚拟拍摄背景中，将所述光照采样位置的色彩设置为所述虚拟显示色彩；
调整模块，在保持所述光照采样位置的虚拟显示色彩的情况下，在所述虚拟拍摄背景中调整所述光照采样位置的亮度，使得所述光照采样位置的亮度对应的等效光照度与所述实际光照度一致。
9.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行根据权利要求1-7中任一项所述的方法对应的操作。
10.一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现根据权利要求1-7中任一项所述的方法。
CN202311432780.2A 2023-10-31 2023-10-31 光强处理方法、装置、电子设备和计算机存储介质 Pending CN117354439A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311432780.2A CN117354439A (zh) 2023-10-31 2023-10-31 光强处理方法、装置、电子设备和计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311432780.2A CN117354439A (zh) 2023-10-31 2023-10-31 光强处理方法、装置、电子设备和计算机存储介质

Publications (1)

Publication Number Publication Date
CN117354439A true CN117354439A (zh) 2024-01-05

Family

ID=89362936

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311432780.2A Pending CN117354439A (zh) 2023-10-31 2023-10-31 光强处理方法、装置、电子设备和计算机存储介质

Country Status (1)

Country Link
CN (1) CN117354439A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705277A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 图像处理方法和装置
US20200027201A1 (en) * 2018-07-23 2020-01-23 Wistron Corporation Augmented reality system and color compensation method thereof
CN114143475A (zh) * 2021-12-31 2022-03-04 北京德火科技有限责任公司 一种可应用于虚拟电影拍摄的全局灯光仿真方法及系统
CN115665393A (zh) * 2022-10-20 2023-01-31 江苏鸿奥信息科技有限公司 一种应用于网络虚拟场景色彩及光影融合算法
US20230076326A1 (en) * 2021-04-02 2023-03-09 Tencent Technology (Shenzhen) Company Limited Illumination rendering method and apparatus, computer device, and storage medium
CN116506993A (zh) * 2022-09-09 2023-07-28 腾讯科技（深圳）有限公司 灯光控制方法及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705277A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 图像处理方法和装置
US20200027201A1 (en) * 2018-07-23 2020-01-23 Wistron Corporation Augmented reality system and color compensation method thereof
US20230076326A1 (en) * 2021-04-02 2023-03-09 Tencent Technology (Shenzhen) Company Limited Illumination rendering method and apparatus, computer device, and storage medium
CN114143475A (zh) * 2021-12-31 2022-03-04 北京德火科技有限责任公司 一种可应用于虚拟电影拍摄的全局灯光仿真方法及系统
CN116506993A (zh) * 2022-09-09 2023-07-28 腾讯科技（深圳）有限公司 灯光控制方法及存储介质
CN115665393A (zh) * 2022-10-20 2023-01-31 江苏鸿奥信息科技有限公司 一种应用于网络虚拟场景色彩及光影融合算法

Similar Documents

Publication Publication Date Title
US11115633B2 (en) Method and system for projector calibration
US10937167B2 (en) Automated generation of pre-labeled training data
US7724952B2 (en) Object matting using flash and no-flash images
US11210839B2 (en) Photometric image processing
CN108764052A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
WO2019047985A1 (zh) 图像处理方法和装置、电子装置和计算机可读存储介质
CN109587556B (zh) 视频处理方法、视频播放方法、装置、设备和存储介质
US10663291B2 (en) Method and system for reproducing visual content
CN108364292B (zh) 一种基于多幅视角图像的光照估计方法
US20180332239A1 (en) Background replacement utilizing infrared light and visible light
US11022861B2 (en) Lighting assembly for producing realistic photo images
Přibyl et al. Feature point detection under extreme lighting conditions
US11483463B2 (en) Adaptive glare removal and/or color correction
CN111105365A (zh) 一种纹理影像的色彩校正方法、介质、终端和装置
US11417019B2 (en) Detection of a calibration object for modifying image parameters
CN117459700B (zh) 一种彩色光度立体成像方法、系统、电子设备及介质
JP6292968B2 (ja) 疑似ｈｄｒ画像推定装置及び方法
JP2019179463A (ja) 画像処理装置、その制御方法、プログラム、記録媒体
JP2022060641A (ja) 質感取得システム、質感取得装置および質感取得プログラム
CN117354439A (zh) 光强处理方法、装置、电子设备和计算机存储介质
CN117354438A (zh) 光强处理方法、装置、电子设备和计算机存储介质
Štampfl et al. Shadow Segmentation with Image Thresholding for Describing the Harshness of Light Sources
CN114760422B (zh) 一种逆光检测方法及系统、电子设备及存储介质
US20210185214A1 (en) Trans-spectral feature detection for volumetric image alignment and colorization
Riess Physical Integrity

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination