CN117496095A - 一种虚实灯光对齐方法、装置、电子设备及介质 - Google Patents
一种虚实灯光对齐方法、装置、电子设备及介质 Download PDFInfo
- Publication number
- CN117496095A CN117496095A CN202311422794.6A CN202311422794A CN117496095A CN 117496095 A CN117496095 A CN 117496095A CN 202311422794 A CN202311422794 A CN 202311422794A CN 117496095 A CN117496095 A CN 117496095A
- Authority
- CN
- China
- Prior art keywords
- virtual
- light
- information
- actual
- illuminance information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 50
- 238000005286 illumination Methods 0.000 claims description 71
- 238000004891 communication Methods 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 12
- 238000002310 reflectometry Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 5
- 230000004927 fusion Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 11
- 230000005540 biological transmission Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004907 flux Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/105—Controlling the light source in response to determined parameters
- H05B47/11—Controlling the light source in response to determined parameters by determining the brightness or colour temperature of ambient light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/165—Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/61—Scene description
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Architecture (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Circuit Arrangement For Electric Light Sources In General (AREA)
Abstract
本申请实施例提供了一种虚实灯光对齐方法、装置、电子设备及介质。虚实灯光对齐方法包括：获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；虚拟位置为虚拟场景中与实际场景中目标位置相对应的位置；以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号，并基于灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。本申请实施例可以更好地保证虚实对应位置处灯光条件的一致性，对齐效果更好，且效率更高。
Description
技术领域
本申请实施例涉及计算机技术领域，尤其涉及一种虚实灯光对齐方法、装置、电子设备及计算机存储介质。
背景技术
基于屏幕(例如LED屏幕)的虚拟拍摄，是通过将经虚拟引擎渲染得到的虚拟资产场景中的渲染画面投屏到LED屏幕上显示，然后演员利用LED屏幕作为背景进行表演，图像采集设备同时拍摄演员和LED屏幕，之后，再将拍摄到的相机画面与渲染画面合成，从而将真实演员置身于虚拟场景中，达到在影棚内拍摄外景或科幻背景的效果。
虚实灯光对齐，是指将拍摄现场实际前景拍摄位置处的灯光，与虚拟资产场景中的灯光对齐。具体来说，是使得实际前景拍摄位置处光的照度，与在虚拟资产场景中对应位置处虚拟灯光打光的照度一致。在基于LED屏幕的虚拟拍摄项目中，虚实灯光对齐是获取真实生动的拍摄效果的重要前提。
相关技术中，主要依赖人工调整实际灯光的强度，并通过视觉直观感觉是否实现了虚实灯光对齐。该方式效率较低，并且，对齐效果欠佳。
发明内容
有鉴于此，本申请实施例提供一种虚实灯光对齐方案，以至少部分解决上述问题。
根据本申请实施例的第一方面，提供了一种虚实灯光对齐方法，包括：
获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；所述虚拟位置为虚拟场景中与所述实际场景中目标位置相对应的位置；
以所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过所述预设控制算法输出灯光参数控制信号，并基于所述灯光参数控制信号控制实际场景的灯光参数，以使所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值小于预设差异阈值。
根据本申请实施例的第二方面，提供了一种虚实灯光对齐装置，包括：
照度信息获取模块，用于获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；所述虚拟位置为虚拟场景中与所述实际场景中目标位置相对应的位置；
控制模块，用于以所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过所述预设控制算法输出灯光参数控制信号，并基于所述灯光参数控制信号控制实际场景的灯光参数，以使所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值小于预设差异阈值。
根据本申请实施例的第三方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如第一方面所述方法对应的操作。
根据本申请实施例的第四方面，提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面所述的方法。
根据本申请实施例提供的虚拟灯光对齐方案，从被灯光照射位置所接收到的灯光照度的角度出发，获取实际场景中目标位置处的实际灯光照度和虚拟场景中虚拟位置处的虚拟灯光照度，然后基于实际灯光照度和虚拟灯光照度之间的差异值，通过控制算法控制实际场景的灯光参数，通过不断调整，使得实际场景中目标位置处的灯光照度与虚拟场景中的灯光照度一致，完成虚实灯光对齐。与相关技术中主要依赖人工实现的灯光对齐方式相比，本申请实施例可以更好地保证虚实对应位置处灯光条件的一致性，对齐效果更好，且，效率更高。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请实施例中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。
图1为根据本申请实施例一的一种虚实灯光对齐方法的步骤流程图；
图2为根据本申请实施例二的另一种虚实灯光对齐方法的步骤流程图；
图3为根据本申请实施例三的一种虚实灯光对齐装置的结构框图；
图4为根据本申请实施例四的一种电子设备的结构示意图。
具体实施方式
为了使本领域的人员更好地理解本申请实施例中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请实施例一部分实施例，而不是全部的实施例。基于本申请实施例中的实施例，本领域普通技术人员所获得的所有其他实施例，都应当属于本申请实施例保护的范围。
为节约拍摄成本，可以采用虚拟拍摄技术进行视频或者图片拍摄。在拍摄之前，可以预先通过安装有虚拟渲染引擎的渲染服务器渲染出虚拟场景，在之后的拍摄过程中，则可以将渲染完成的虚拟场景中的部分虚拟画面投影至显示屏幕上，作为视频或者图片的背景。
具体地，虚拟拍摄的原理为：
拍摄之前，在实际拍摄场景中设置实体屏幕、实体相机等实体物体；对应地，在由渲染服务器渲染出的虚拟场景中，也对应设置有虚拟屏幕、虚拟相机等虚拟物体。虚拟相机用于在虚拟场景中进行虚拟拍摄，即：采集预设拍摄视角范围内的虚拟画面，并将该虚拟画面映射至虚拟屏幕中。另外，在实际场景中，也将上述虚拟画面渲染至实体屏幕上。为保证拍摄效果，虚拟屏幕通常与实体屏幕具有相同的参数，例如：屏幕尺寸、屏幕设置方向等。上述过程，由于在虚拟场景中，虚拟画面已被映射至虚拟屏幕，而虚拟屏幕与实体屏幕具有相同参数，因此，可以保证最终渲染至实体屏幕的虚拟画面是适配于实体屏幕的。
拍摄过程中，演员可以在实体屏幕前进行表演，实体相机再同时拍摄演员和实体屏幕，之后，再将拍摄到的相机画面与虚拟场景融合，从而将真实演员置身于虚拟场景中，达到在影棚内拍摄外景或科幻背景的效果。
虚拟拍摄技术中，在进行正式拍摄之前，需要先进行虚实灯光对齐，将拍摄现场实际前景拍摄区域中的实际灯光照度，与虚拟灯光照度之间的照度差异控制在一定范围内。这样，才可以使得经虚拟拍摄技术得到的拍摄效果真实生动。
目前，实现虚实灯光对齐的方式之一，是依赖人工调整实际灯光的强度，并通过视觉直观感觉是否实现了虚实灯光对齐。该方式效率较低，并且，对齐效果欠佳。
相关技术中，还提供了另一种实现虚实灯光对齐的方法，主要是将实际场景中的实际灯具的放置位置，与虚拟场景中的虚拟灯具的位置保持一致，并且，对于实际灯具和虚拟灯具均设置相同的灯光参数。但是，由于受现实多种不确定因素的影响，无法保证实际灯具和虚拟灯具完全一致，因此，即使将两者的灯光参数设置为相同值，也无法保证实际灯具与虚拟灯具发出相同条件的灯光从而实现虚实灯光的对齐。
本申请实施例提供的虚实灯光对齐方案，从被灯光照射位置所接收到的灯光照度的角度出发，获取实际场景中目标位置处的实际灯光照度和虚拟场景中虚拟位置处的虚拟灯光照度，然后基于实际灯光照度和虚拟灯光照度之间的差异值，通过控制算法控制实际场景的灯光参数，通过不断调整，使得实际场景中目标位置处的灯光照度与虚拟场景中的灯光照度一致，完成虚实灯光对齐。因此，本申请实施例可以更好地保证虚实对应位置处灯光条件的一致性，对齐效果更好，且，效率更高。
下面结合本申请实施例附图进一步说明本申请实施例具体实现。
实施例一
参照图1，图1为根据本申请实施例一的一种虚拟灯光对齐方法的步骤流程图。具体地，本实施例提供的虚拟灯光对齐方法包括以下步骤：
步骤102，获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息。
其中，虚拟位置为虚拟场景中与实际场景中目标位置相对应的位置。
虚拟拍摄中，为保证背景具有真实生动的视觉效果，渲染出的虚拟场景与实际场景之间是空间对齐的，也即：渲染出的虚拟场景中包含有与实际场景中的实体对象相对应的虚拟物体，虚拟物体之间的相对位置，与对应实体对象之间的相对位置保持一致。
例如：想要拍摄一场背景为教室的视频片段，则可以预先通过渲染服务器渲染出虚拟教室场景，该场景中可以包含虚拟课桌、虚拟显示屏幕、虚拟相机、虚拟灯具、虚拟讲台、虚拟黑板等虚拟物体。上述虚拟课桌、虚拟显示屏幕、虚拟相机等虚拟物体之间的相对位置，可以是与实际场景中的真实课桌、真实显示屏幕、真实相机之间的相对位置保持一致的。
本步骤中，是获取实际场景中目标位置处的实际灯光照度信息，以及，虚拟场景中与实际场景中目标位置相对应的虚拟位置处的虚拟灯光照度信息。其中，实际灯光照度信息表征实际场景中目标位置处每单位面积所接收到的光通量，也即：目标位置处每单位面积接收到多少光；虚拟灯光照度信息表征虚拟场景中虚拟位置处每单位面积所接收到的光通量，也即：虚拟位置处每单位面积接收到多少光。
本申请实施例中，对于目标位置的选取方式不做限定，可以根据实际拍摄需求自定义设定，另外，目标位置可以为在拍摄过程中固定不变的位置，也可以为随着拍摄需求不断变化的位置。例如：可以将相机拍摄范围的中心位置确定为目标位置，此种情况下，目标位置在拍摄过程中固定不变；也可以将演员所处的位置确定为目标位置，当演员走动时，目标位置也随之变动。
本申请实施例中，在获取实际场景中目标位置处的实际灯光照度信息时，可以借助照度计。具体地：可以在目标位置处放置照度计，从而获取到该位置处的实际灯光照度信息。在获取虚拟场景中虚拟位置处的虚拟灯光照度信息时，可以基于虚拟渲染引擎得到。
步骤104，以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号，并基于灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。
具体地，本步骤可以计算实际灯光照度信息与虚拟灯光照度信息之间的差异值，并将该差异值作为预设控制算法的输入，将灯光参数控制信号作为预设控制算法的输出，采用预设的控制算法得到灯光参数控制信号。进而，基于得到的灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。
其中，灯光参数可以包括：灯光亮度，进一步地，还可以包括：灯光色度、饱和度、对比度等。
具体控制过程可以为：计算实际灯光照度信息与虚拟灯光照度信息之间的差异值，采用预设的控制算法基于上述差异值进行计算，得到灯光参数控制信号；将得到的灯光参数控制信号发送至灯具中的调光模块，调光模块根据接收到的灯光参数控制信号调节灯具的灯光参数。随着灯光参数的改变，目标位置处的实际灯光照度信息也发生改变，进而，实际灯光照度信息与虚拟灯光照度信息之间的差异值也随之发生改变；不断重复上述过程，通过不断调整灯光参数控制信号，可以使得灯具照射至目标位置处的实际灯光照度不断接近虚拟位置处的虚拟灯光照；同时，不断监测实际灯光照度,实现反馈控制，进一步修正灯光参数控制信号，从而实现更加精准的控制，最终使得实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。
本申请实施例中，对于具体采用何种控制算法不做限定，可以根据实际需求自定义选择，例如：比例控制算法、积分控制算法、微分控制算法，或者，上述几种控制算法的融合，等等。另外，本申请实施例中，对于将灯光参数控制信号发送至灯具中的调光模块时所采用的具体传输方式也不做限定，可以根据实际情况自定义设定，例如：可以采用通用的数据传输协议进行传输，也可以采用专用于控制信号传输的传输协议(如：DMX，digitalmultiplex)协议，等等。
本申请实施例提供的虚拟灯光对齐方法，从被灯光照射位置所接收到的灯光照度的角度出发，获取实际场景中目标位置处的实际灯光照度和虚拟场景中虚拟位置处的虚拟灯光照度，然后基于实际灯光照度和虚拟灯光照度之间的差异值，通过控制算法控制实际场景的灯光参数，通过不断调整，使得实际场景中目标位置处的灯光照度与虚拟场景中的灯光照度一致，完成虚实灯光对齐。与相关技术中的灯光对齐方式相比，本申请实施例可以更好地保证虚实对应位置处灯光条件的一致性，对齐效果更好，且，效率更高。
可选地，在其中一些实施例中，虚拟位置处设置有光照属性信息已知的虚拟目标对象，对应地，步骤102中获取虚拟位置处的虚拟灯光照度信息的过程，可以包括：
在虚拟场景中，确定与实际场景中目标位置相对应的虚拟位置；
基于虚拟位置，获取虚拟目标对象的虚拟亮度信息；
基于虚拟亮度信息、光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息。
具体地，虚拟目标对象的光照属性信息，指虚拟目标对象在光照条件下所具有的属性信息。虚拟亮度信息，指在虚拟灯光的照射下虚拟目标对象的亮度信息。
对于光照属性已知的目标对象，照射至该目标对象中的亮度信息与照射至该目标对象中的照度信息之间满足一定的关系。因此，本申请实施例中，可以通过在虚拟位置处设置光照属性已知的虚拟目标对象，再通过预设关系推理计算的方式，获取到虚拟位置处的虚拟灯光照度信息。上述获取虚拟灯光照度信息的方式，计算过程简单，计算效率较高。
本申请实施例中，对于虚拟目标对象的形状、尺寸、材料等均不做限定，任意的已知光照属性信息的虚拟目标对象均可。
可选地，在其中一些实施例中，上述光照属性信息包括虚拟目标对象表面对光的反射特性，反射特性包括反射率和表面结构；对应地，基于虚拟亮度信息、光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息，包括：
基于虚拟亮度信息和光照属性信息，采用预设关系式计算得到虚拟位置处的虚拟灯光照度信息；
预设关系式为：
π*L＝E*R
其中，L为虚拟位置处的虚拟目标对象的虚拟亮度信息；E为虚拟位置处的虚拟灯光照度信息；R为虚拟目标对象的反射率信息；π为圆周率。
具体地，上述过程，基于光照属性信息、虚拟亮度信息及虚拟灯光照度信息之间的关系式，经过推理计算即可得到虚拟位置处的虚拟灯光照度信息，计算过程简单，效率较高。
可选地，在其中一些实施例中，在虚拟场景中，确定与实际场景中目标位置相对应的虚拟位置，包括：
获取实际场景中目标位置与实际场景中显示屏幕之间的相对位置关系；
基于相对位置关系以及虚拟场景中虚拟屏幕的位置信息，在虚拟场景中确定与实际场景中目标位置相对应的虚拟位置。
具体地，如上述针对步骤102的描述中指出的，渲染出的虚拟场景与实际场景之间是空间对齐的，因此，本申请实施例中，可以基于目标位置与实际场景中显示屏幕之间的相对位置关系，以及，虚拟场景中虚拟屏幕的位置，计算得到虚拟场景中的虚拟位置，使得虚拟位置与虚拟屏幕之间的相对位置关系，与目标位置与实际场景中显示屏幕之间的相对位置关系相同。
可选地，在其中一些实施例中，预设控制算法为比例积分微分控制算法；以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号，包括：
计算实际灯光照度信息与虚拟灯光照度信息之间的差异值，并计算差异值的积分和差异值的微分；
获取比例积分微分控制算法中的比例权重、积分权重及微分权重；
基于比例权重、积分权重及微分权重，对差异值、差异值的积分以及差异值的微分进行加权融合，得到比例积分微分控制算法输出的灯光参数控制信号。
具体地，本申请实施例中，对于比例权重、积分权重以及微分权重的取值原则不做限定，可以根据实际情况自定义设定。
上述过程中，通过比例积分微分控制算法输出灯光参数控制信息。其中，比例控制可以根据当前的差异值的大小调整控制算法的输出，当差异值较大时，输出信号也较大，从而加快实际灯光照度信息的响应速度，因此，可以使实际灯光照度信息与虚拟灯光照度信息之间的差异值快速接近预设差异阈值；积分控制可以根据差异值随时间累积的量来调整输出信号，因此，能够消除稳态误差，确保差异值最终稳定在预设差异阈值附近；微分控制则可以根据差异值变化的速率来调整输出信号，能够减小超调和提高稳定性。综上，采用比例积分微分控制算法来计算灯光参数控制信号，可以实现对实际灯光照度信息与虚拟灯光照度信息之间差异值的稳定精准控制，因此，可以提升虚拟灯光对齐的准确度及稳定性。
实施例二
参照图2，图2为根据本申请实施例二的另一种虚拟灯光对齐方法的步骤流程图。
具体地，本实施例提供的虚拟灯光对齐方法包括以下步骤：
步骤202，获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息。
其中，虚拟位置为虚拟场景中与实际场景中目标位置相对应的位置。
步骤204，以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号，并基于灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。
本申请实施例中的步骤202和步骤204，与图1所示的实施例一中的步骤102和步骤104相同，具体内容参见上述步骤102和步骤104，此处不再赘述。
步骤206，检测当前是否满足预设的虚实灯光对齐触发条件。若满足，则返回步骤202；若不满足，则结束流程。
本申请实施例中，对于虚拟灯光对齐触发条件的具体内容不做限定，可以根据实际情况自定义设定。例如：当投影至显示屏幕中的虚拟画面被切换时，确定满足虚拟灯光对齐触发条件；又如，当检测到虚拟场景中虚拟位置处的虚拟灯光照度的变化量大于预设变化量阈值时，确定满足虚拟灯光对齐触发条件，等等。
本申请实施例提供的虚拟灯光对齐方法，从被灯光照射位置所接收到的灯光照度的角度出发，获取实际场景中目标位置处的实际灯光照度和虚拟场景中虚拟位置处的虚拟灯光照度，然后基于实际灯光照度和虚拟灯光照度之间的差异值，通过控制算法控制实际场景的灯光参数，通过不断调整，使得实际场景中目标位置处的灯光照度与虚拟场景中的灯光照度一致，完成虚实灯光对齐。与相关技术中的灯光对齐方式相比，本申请实施例可以更好地保证虚实对应位置处灯光条件的一致性，对齐效果更好，且，效率更高。
另外，在实现了虚拟灯光对齐之后，本申请实施例还对当前是否满足虚实灯光对齐触发条件进行了检测，当检测到当前满足上述条件时，则再次执行本申请实施例提供的虚实灯光对齐方法。这样，可以在当虚拟位置处的虚拟灯光照度发生变化时，自动及时调整实际场景中目标位置处的实际灯光照度信息，从而重新实现虚拟灯光的对齐，进而提升虚拟拍摄的拍摄效果。
实施例三
图3为根据本申请实施例三的一种虚实灯光对齐装置的结构框图。该装置包括：
照度信息获取模块302，用于获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；虚拟位置为虚拟场景中与实际场景中目标位置相对应的位置；
控制模块304，用于以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号，并基于灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值。
可选地，在其中一些实施例中，虚拟位置处设置有光照属性信息已知的虚拟目标对象；照度信息获取模块302，在执行获取虚拟位置处的虚拟灯光照度信息的步骤时，具体用于：
在虚拟场景中，确定与实际场景中目标位置相对应的虚拟位置；
基于虚拟位置，获取虚拟目标对象的虚拟亮度信息；
基于虚拟亮度信息、光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息。
可选地，在其中一些实施例中，照度信息获取模块302，在执行在虚拟场景中，确定与实际场景中目标位置相对应的虚拟位置的步骤时，具体用于：
获取实际场景中目标位置与实际场景中显示屏幕之间的相对位置关系；
基于相对位置关系以及虚拟场景中虚拟屏幕的位置信息，在虚拟场景中确定与实际场景中目标位置相对应的虚拟位置。
可选地，在其中一些实施例中，预设控制算法为比例积分微分控制算法；控制模块304，在执行以实际灯光照度信息与虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过预设控制算法输出灯光参数控制信号的步骤时，具体用于：
计算实际灯光照度信息与虚拟灯光照度信息之间的差异值，并计算差异值的积分和差异值的微分；
获取比例积分微分控制算法中的比例权重、积分权重及微分权重；
基于比例权重、积分权重及微分权重，对差异值、差异值的积分以及差异值的微分进行加权融合，得到比例积分微分控制算法输出的灯光参数控制信号。
可选地，在其中一些实施例中，虚实灯光对齐装置还包括：
检测模块，用于在基于灯光参数控制信号控制实际场景的灯光参数，以使实际灯光照度信息与虚拟灯光照度信息之间的差异值小于预设差异阈值之后，检测当前是否满足预设的虚实灯光对齐触发条件；若满足，则触发照度信息获取模块302。
可选地，在其中一些实施例中，光照属性信息包括虚拟目标对象表面对光的反射特性，所述反射特性包括：反射率和表面结构；照度信息获取模块302，在执行基于虚拟亮度信息、光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息的步骤时，具体用于：
基于虚拟亮度信息和光照属性信息，采用预设关系式计算得到虚拟位置处的虚拟灯光照度信息；
预设关系式为：
π*L＝E*R
其中，L为虚拟位置处的虚拟目标对象的虚拟亮度信息；E为虚拟位置处的虚拟灯光照度信息；R为虚拟目标对象的反射率信息；π为圆周率。
本实施例的虚实灯光对齐装置用于实现前述虚实灯光对齐方法实施例中相应的虚实灯光对齐方法，并具有相应的方法实施例的有益效果，在此不再赘述。此外，本实施例的虚实灯光对齐装置中的各个模块的功能实现均可参照前述方法实施例中的相应部分的描述，在此亦不再赘述。
实施例四
参照图4，示出了根据本申请实施例四的一种电子设备的结构示意图，本申请具体实施例并不对电子设备的具体实现做限定。
如图4所示，该控制终端可以包括：处理器(processor)402、通信接口(Communications Interface)404、存储器(memory)406、以及通信总线408。
其中：
处理器402、通信接口404、以及存储器406通过通信总线408完成相互间的通信。
通信接口404，用于与其它电子设备或服务器进行通信。
处理器402，用于执行程序410，具体可以执行上述虚实灯光对齐方法实施例中的相关步骤。
具体地，程序410可以包括程序代码，该程序代码包括计算机操作指令。
处理器402可能是CPU，或者是特定集成电路ASIC(Application SpecificIntegrated Circuit)，或者是被配置成实施本申请实施例的一个或多个集成电路。智能设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储器406，用于存放程序410。存储器406可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序410可包括多条计算机指令，程序410具体可以通过多条计算机指令使得处理器402执行前述多个方法实施例中所描述的方法对应的操作。
程序410中各步骤的具体实现可以参见上述方法实施例中的相应步骤和单元中对应的描述，并具有相应的有益效果，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
本申请实施例还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述多个方法实施例中任一实施例所描述的方法。该计算机存储介质包括但不限于：只读光盘(Compact Disc Read-Only Memory，CD-ROM)、随机存储器(RandomAccess Memory，RAM)、软盘、硬盘或磁光盘等。
本申请实施例还提供了一种计算机程序产品，包括计算机指令，该计算机指令指示计算设备执行上述多个方法实施例中的任一方法对应的操作。
此外，需要说明的是，本申请实施例所涉及到的与用户有关的信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于对模型进行训练的样本数据、用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
需要指出，根据实施的需要，可将本申请实施例中描述的各个部件/步骤拆分为更多部件/步骤，也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤，以实现本申请实施例的目的。
上述根据本申请实施例的方法可在硬件、固件中实现，或者被实现为可存储在记录介质(诸如CD-ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如专用集成电路(Application Specific Integrated Circuit，ASIC)或现场可编辑门阵列(Field Programmable Gate Array，FPGA))的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，随机存储器(Random Access Memory，RAM)、只读存储器(Read-Only Memory，ROM)、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在此描述的方法。此外，当通用计算机访问用于实现在此示出的方法的代码时，代码的执行将通用计算机转换为用于执行在此示出的方法的专用计算机。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请实施例的范围。
以上实施方式仅用于说明本申请实施例，而并非对本申请实施例的限制，有关技术领域的普通技术人员，在不脱离本申请实施例的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本申请实施例的范畴，本申请实施例的专利保护范围应由权利要求限定。
Claims (10)
1.一种虚实灯光对齐方法，包括：
获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；所述虚拟位置为虚拟场景中与所述实际场景中目标位置相对应的位置；
以所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过所述预设控制算法输出灯光参数控制信号，并基于所述灯光参数控制信号控制实际场景的灯光参数，以使所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值小于预设差异阈值。
2.根据权利要求1所述的方法，其中，所述虚拟位置处设置有光照属性信息已知的虚拟目标对象；获取虚拟位置处的虚拟灯光照度信息的过程，包括：
在虚拟场景中，确定与所述实际场景中目标位置相对应的虚拟位置；
基于所述虚拟位置，获取所述虚拟目标对象的虚拟亮度信息；
基于所述虚拟亮度信息、所述光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息。
3.根据权利要求2所述的方法，其中，所述在虚拟场景中，确定与所述实际场景中目标位置相对应的虚拟位置，包括：
获取实际场景中目标位置与实际场景中显示屏幕之间的相对位置关系；
基于所述相对位置关系以及虚拟场景中虚拟屏幕的位置信息，在虚拟场景中确定与所述实际场景中目标位置相对应的虚拟位置。
4.根据权利要求1-3任一项所述的方法，其中，所述预设控制算法为比例积分微分控制算法；所述以所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过所述预设控制算法输出灯光参数控制信号，包括：
计算所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值，并计算所述差异值的积分和所述差异值的微分；
获取比例积分微分控制算法中的比例权重、积分权重及微分权重；
基于所述比例权重、积分权重及微分权重，对所述差异值、所述差异值的积分以及所述差异值的微分进行加权融合，得到所述比例积分微分控制算法输出的灯光参数控制信号。
5.根据权利要求1-3任一项所述的方法，其中，在所述基于所述灯光参数控制信号控制实际场景的灯光参数，以使所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值小于预设差异阈值之后，所述方法还包括：
检测当前是否满足预设的虚实灯光对齐触发条件；
若满足，则返回执行所述获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息的步骤。
6.根据权利要求2所述的方法，其中，所述光照属性信息包括虚拟目标对象表面对光的反射特性，所述反射特性包括：反射率和表面结构；
所述基于所述虚拟亮度信息、所述光照属性信息，以及，虚拟亮度信息、光照属性信息及虚拟灯光照度信息之间满足的预设关系，计算得到虚拟位置处的虚拟灯光照度信息，包括：
基于所述虚拟亮度信息和所述光照属性信息，采用预设关系式计算得到虚拟位置处的虚拟灯光照度信息；
所述预设关系式为：
π*L＝E*R
其中，L为虚拟位置处的虚拟目标对象的虚拟亮度信息；E为虚拟位置处的虚拟灯光照度信息；R为虚拟目标对象的反射率信息；π为圆周率。
7.一种虚实灯光对齐装置，包括：
照度信息获取模块，用于获取实际场景中目标位置处的实际灯光照度信息和虚拟位置处的虚拟灯光照度信息；所述虚拟位置为虚拟场景中与所述实际场景中目标位置相对应的位置；
控制模块，用于以所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值作为预设控制算法的输入，通过所述预设控制算法输出灯光参数控制信号，并基于所述灯光参数控制信号控制实际场景的灯光参数，以使所述实际灯光照度信息与所述虚拟灯光照度信息之间的差异值小于预设差异阈值。
8.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-6任一项所述的方法对应的操作。
9.一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1-6中任一项所述的方法。
10.一种计算机程序产品，包括计算机指令，所述计算机指令指示计算设备执行如权利要求1-6中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311422794.6A CN117496095A (zh) | 2023-10-27 | 2023-10-27 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311422794.6A CN117496095A (zh) | 2023-10-27 | 2023-10-27 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117496095A true CN117496095A (zh) | 2024-02-02 |
Family
ID=89677390
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311422794.6A Pending CN117496095A (zh) | 2023-10-27 | 2023-10-27 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117496095A (zh) |
-
2023
- 2023-10-27 CN CN202311422794.6A patent/CN117496095A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106412447B (zh) | 曝光控制系统及其方法 | |
| US10134443B2 (en) | Methods and apparatuses for processing or defining luminance/color regimes | |
| US9754629B2 (en) | Methods and apparatuses for processing or defining luminance/color regimes | |
| WO2021035723A1 (zh) | 补光控制方法、装置、系统和存储介质 | |
| CN103646392B (zh) | 逆光检测方法及设备 | |
| CN111710049B (zh) | Ar场景中的环境光照确定方法和装置 | |
| US20150015699A1 (en) | Apparatus, system and method for projecting images onto predefined portions of objects | |
| US8520054B2 (en) | System and method to quickly acquire images | |
| US9648699B2 (en) | Automatic control of location-registered lighting according to a live reference lighting environment | |
| TWI608735B (zh) | 影像擷取裝置及亮度調整方法 | |
| CN101888486A (zh) | 亮度补偿系统及亮度补偿方法 | |
| WO2019019904A1 (zh) | 白平衡处理方法、装置和终端 | |
| CN105912145A (zh) | 一种激光笔鼠标系统及其图像定位方法 | |
| TW201802562A (zh) | 閃光燈模組、具有閃光燈模組的電子裝置及控制方法 | |
| US8285133B2 (en) | Dynamic lighting control in hybrid camera-projector device | |
| CN108234971A (zh) | 白平衡参数确定方法、白平衡调整方法及装置、存储介质、终端 | |
| CN111988591A (zh) | 一种投影画面的平移方法、装置和投影设备 | |
| WO2019137262A1 (zh) | 终端拍照方法和装置、屏幕显示方法和装置以及终端 | |
| CN112235553A (zh) | 投影亮度调整方法、装置、投影设备及可读存储介质 | |
| KR102483680B1 (ko) | 주변 이미지를 프로세싱하기 위한 방법 및 디바이스 | |
| CN116486048A (zh) | 虚实融合画面的生成方法、装置、设备及系统 | |
| CN109618088A (zh) | 具有光照识别与重现功能的智能化拍摄系统及方法 | |
| CN105744173A (zh) | 一种区分图像前后景区域的方法、装置及移动终端 | |
| CN117496095A (zh) | 一种虚实灯光对齐方法、装置、电子设备及介质 | |
| CN117395386A (zh) | 一种虚拟延时视频的交互拍摄方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |