CN116506993A - 灯光控制方法及存储介质 - Google Patents
灯光控制方法及存储介质 Download PDFInfo
- Publication number
- CN116506993A CN116506993A CN202211105415.6A CN202211105415A CN116506993A CN 116506993 A CN116506993 A CN 116506993A CN 202211105415 A CN202211105415 A CN 202211105415A CN 116506993 A CN116506993 A CN 116506993A
- Authority
- CN
- China
- Prior art keywords
- virtual
- light
- lighting system
- entity
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 76
- 238000005286 illumination Methods 0.000 claims abstract description 81
- 238000005070 sampling Methods 0.000 claims description 31
- 238000009877 rendering Methods 0.000 claims description 21
- 238000012935 Averaging Methods 0.000 claims description 11
- 238000004458 analytical method Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 2
- 230000004927 fusion Effects 0.000 abstract description 9
- 230000000875 corresponding effect Effects 0.000 description 46
- 230000001276 controlling effect Effects 0.000 description 13
- 230000000694 effects Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 101000666730 Homo sapiens T-complex protein 1 subunit alpha Proteins 0.000 description 3
- 101000837443 Homo sapiens T-complex protein 1 subunit beta Proteins 0.000 description 3
- 102100038410 T-complex protein 1 subunit alpha Human genes 0.000 description 3
- 102100028679 T-complex protein 1 subunit beta Human genes 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
- G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
- G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
本申请公开了一种灯光控制方法及存储介质,涉及灯光技术领域。该方法包括:获取目标场景中灯光系统的位置数据;获取虚拟背景显示屏中虚拟灯光系统的光亮信息;基于虚拟灯光系统的光亮信息确定实体灯光系统的灯光系数;以灯光系数控制实体灯光系统对目标场景进行光照补偿。一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
Description
技术领域
本申请实施例涉及灯光技术领域,特别涉及一种灯光控制方法及存储介质。
背景技术
虚拟制片是指一系列计算机辅助制片和可视化电影制作方法,在虚拟制片的拍摄现场,有一个LED(Light Emitting Diode,发光二极管)屏幕用于显示虚拟内容,在LED屏幕前方有实际的制景道具,虚拟制片中的摄像机会同时拍摄LED屏幕和屏幕前制景,得到融合了LED屏幕和屏幕前制景的画面的视频。在实际拍摄过程中,LED屏幕中渲染的灯光能够为拍摄提供一部分的光照,但是受限制于LED屏幕本身的亮度,LED屏幕无法完全满足虚拟制片的光照需求。
相关技术中,往往基于灯光师的个人经验对屏幕前的制景以及拍摄镜头进行灯光分析,现场摆放各类灯具,然后分析摄像机拍摄到的画面效果,从而调整灯具的灯光系数。
然而,基于灯光师的经验手动调整灯具的灯光系数,对于灯光的控制效率较低。
发明内容
本申请实施例提供了一种灯光控制方法及存储介质,提高了对虚拟制片中灯光的控制效率,所述技术方案如下:
一方面,提供了一种灯光控制方法,所述方法包括:
获取目标场景中灯光系统的位置数据,所述目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,所述灯光系统中包括所述虚拟场景中的虚拟灯光系统和处于所述现实前景中的实体灯光系统;
获取所述虚拟背景显示屏中所述虚拟灯光系统的光亮信息,所述光亮信息用于指示所述虚拟背景显示屏中的所述虚拟灯光系统在所述目标场景中产生的光照情况;
基于所述虚拟灯光系统的光亮信息确定所述实体灯光系统的灯光系数;
以所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
另一方面,提供了一种灯光控制装置,所述装置包括:
获取模块,用于获取目标场景中灯光系统的位置数据,所述目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,所述灯光系统中包括所述虚拟场景中的虚拟灯光系统和处于所述现实前景中的实体灯光系统;
所述获取模块,还用于获取所述虚拟背景显示屏中所述虚拟灯光系统的光亮信息,所述光亮信息用于指示所述虚拟背景显示屏中的所述虚拟灯光系统在所述目标场景中产生的光照情况;
确定模块,用于基于所述虚拟灯光系统的光亮信息确定所述实体灯光系统的灯光系数;
补偿模块,用于以所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
另一方面,提供了一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述实施例所述的灯光控制方法。
另一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如上述实施例所述的灯光控制方法。
另一方面,提供了一种计算机程序产品或计算机程序,所述计算机程序产品或计算机程序包括计算机指令,所述计算机指令存储在计算机可读存储介质中,处理器从所述计算机可读存储介质读取并执行所述计算机指令,以实现如上述实施例所述的灯光控制方法。
本申请实施例提供的技术方案带来的有益效果至少包括:
通过获取目标场景中灯光系统的位置数据和虚拟灯光系统在目标场景中产生的光照情况,自动化的针对实体灯光系统中的实体灯光进行灯光系数的控制,一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个示例性实施例提供的计算机系统的示意图;
图2是本申请一个示例性实施例提供的灯光控制方法的流程图;
图3是本申请一个示例性实施例提供的灯光系统的位置信息示意图;
图4是本申请一个示例性实施例提供的实体灯光系统的平面示意图;
图5是本申请另一个示例性实施例提供的灯光控制方法的流程图;
图6是本申请一个示例性实施例提供的实体灯光系统的方向信息示意图;
图7是本申请一个示例性实施例提供的摄像机的拍摄方向示意图;
图8是本申请另一个示例性实施例提供的灯光控制方法的流程图;
图9是本申请一个示例性实施例提供的虚拟灯光系统中的虚拟灯光的角度示意图;
图10是本申请一个示例性实施例提供的虚拟灯光和实体灯光系统的位置关系的平面示意图;
图11是本申请一个示例性实施例提供的虚拟灯光和聚光灯的距离的平面示意图;
图12是本申请一个示例性实施例提供的灯光控制方法的整体流程图;
图13是本申请一个示例性实施例提供的灯光控制装置结构框图;
图14是本申请另一个示例性实施例提供的灯光控制装置结构框图;
图15是本申请一个示例性实施例提供的计算机设备的结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请中术语“第一”、“第二”等字样用于对作用和功能基本相同的相同项或相似项进行区分,应理解,“第一”、“第二”之间不具有逻辑或时序上的依赖关系,也不对数量和执行顺序进行限定。
在电影、电视等视频内容的制作过程中,会用到虚拟制片技术,虚拟制片是指一系列计算机辅助制片和可视化电影制作方法。在虚拟制片的拍摄现场,有一个LED屏幕用于显示虚拟内容,在LED屏幕前方有实际的制景道具,虚拟制片中的摄像机会同时拍摄LED屏幕和屏幕前制景,得到融合了LED屏幕和屏幕前制景的画面的视频。在实际拍摄过程中,LED屏幕中渲染的灯光能够为拍摄提供一部分的光照,但是受限制于其本身的亮度,LED屏幕无法完全满足虚拟制片的光照需求。
相关技术中,往往基于灯光师的个人经验对屏幕前的制景以及拍摄镜头进行灯光分析,现场摆放各类灯具,然后分析摄像机拍摄到的画面效果,从而调整灯具的灯光系数。然而,基于灯光师的经验手动调整灯具的灯光系数,对于灯光的控制效率较低。
本申请实施例提供了一种灯光控制方法,示意性的,请参考图1,其示出了一个示例性实施例提供的计算机系统的示意图。该计算机系统100包括计算机设备110、虚拟背景显示屏120、实体灯光系统130以及摄像机140。
计算机设备110中安装和运行有目标应用程序,示意性地,该目标应用程序可以是传统应用程序,可以是云应用程序,可以实现为宿主应用程序中的小程序或应用模块,也可以是某个网页平台,本实施例对此不加以限定。该目标应用程序提供有渲染功能和灯光系数调整功能。
渲染功能:示意性的,计算机设备110与虚拟背景显示屏120之间通过通信网络或者数据传输接口进行连接,计算机设备110中安装有渲染引擎,虚拟制片的制作人员可以在该渲染引擎中对将要在虚拟背景显示屏120中进行渲染的渲染数据进行设置,或者根据虚拟背景显示屏120反馈回来的画面数据对渲染数据进行调整。其中,渲染数据包括虚拟灯光系统的渲染数据,如图1所示,虚拟灯光系统实现为蓝色氛围灯,则当渲染引擎将蓝色氛围灯的渲染数据发送至虚拟背景显示屏120中,虚拟背景显示屏120中虚拟场景的整体光照将显示为蓝色氛围。
灯光系数调整功能:示意性的,计算机设备110与实体灯光系统130、计算机设备110与摄像机140之间通过通信网络或者数据传输接口进行连接,计算机设备110中安装有灯光控制引擎,当计算机设备110接收到灯光控制指令后,可选地,向实体灯光系统130发送数据获取请求,当实体灯光系统130接收到该数据获取请求后,实体灯光系统130会将其系统中实体灯光的位置数据发送至计算机设备110中;计算机设备110根据该位置数据向摄像机140发送画面拍摄指令,摄像机140接收到该画面拍摄指令后,会基于该位置数据拍摄此时目标场景的融合画面(包括虚拟背景显示屏120中的虚拟场景和屏幕前制景150)发送至计算机设备110中;计算机设备110接收到拍摄画面后,会在灯光控制引擎中,根据位置数据和拍摄画面的画面信息计算出实体灯光系统130的灯光系数,若计算机设备110与实体灯光系统130通过通信网络连接,通过DMX(Digital Multiplex,数字多路复用)协议与实体灯光系统130的控制台建立通过通信连接,将灯光系数发送到控制台,从而控制实体灯光系统130;若计算机设备110与实体灯光系统130通过数据传输接口连接,则计算机设备可以直接将灯光系数传输到控制台。如图1所示,当虚拟灯光系统实现为蓝色氛围灯时,可以控制位于目标场景的面光灯发出与虚拟灯光系统相同的蓝色灯光。
可选地,上述实体灯光系统130的位置数据还可以是制作人员设置在灯光控制引擎中的,那么,实体灯光系统130与计算机设备110之间还可以不进行连接,当计算得到灯光系数后,制作人员可以将该灯光系数通过控制台的输入设备(例如:键盘、鼠标等)输入至控制台中,从而实现对该实体灯光系统130的控制。
需要说明的是,本申请所涉及的信息(包括但不限于用户设备信息、用户个人信息等)、数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)以及信号,均为经用户授权或者经过各方充分授权的,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。例如,本申请中涉及到的位置数据都是在充分授权的情况下获取的。
结合上述介绍,对本申请实施例提供的灯光控制方法进行说明,图2示出了本申请一个示例性实施例提供的灯光控制方法的流程图,以该方法应用于如图1所示的计算机系统100中为例进行说明,该方法包括:
步骤201,获取目标场景中灯光系统的位置数据。
目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,灯光系统中包括虚拟场景中的虚拟灯光系统和处于现实前景中的实体灯光系统。
示意性的,虚拟背景显示屏可实现为多个LED屏幕,包括环形LED屏幕、顶层LED屏幕和底层LED屏幕等。请参考图3,在拍摄场地的建模场景300中包含有一个240度环形LED屏幕301和一个顶层LED屏幕302,可选地,环形LED屏幕301和顶层LED屏幕302都可以进行旋转和上下移动。
虚拟场景是指虚拟背景显示屏中显示的画面。可选地,虚拟场景包括虚拟环境、虚拟人物、虚拟物体、虚拟道具等元素中的至少一种,本申请实施例对此不加以限定。需要说明的是,该虚拟场景是可视化的场景,也就是说,在物理世界中,参与虚拟制片的人员是可以看到虚拟场景中的画面的,那么,在虚拟制片的过程中,可以通过虚拟场景实现复杂场景和超现实场景的制景。
可选地,制作人员在渲染引擎中设置需要的画面数据,将该画面数据渲染至虚拟背景显示屏中,即得到了虚拟场景,其中,画面数据中包括虚拟灯光系统相关的数据,若将该虚拟灯光系统渲染至虚拟背景显示屏中,则虚拟场景中将显示该虚拟灯光系统。示意性的,画面数据中包含有路灯的渲染数据,将该路灯渲染至虚拟背景显示屏中,在虚拟场景中即可显示该路灯。可选地,在渲染引擎中包括虚拟灯光系统的虚拟灯光的亮度、色彩、饱和度、在虚拟场景中的位置、光照的方向等系数。
可选地,虚拟灯光系统包括环境灯光(例如:太阳产生的光照)、灯具灯光(例如:路灯产生的光照)等,本申请实施例对此不加以限定。
现实前景是指物理世界中的实物,一般包含屏幕前制景和其他制景道具,屏幕前制景和虚拟场景是会被摄像机拍摄的场景,拍摄得到的融合画面即为虚拟制片最终得到的视频画面,屏幕前制景一般包含演员以及周边真实堆叠场景。其他制景道具包括摄像机、实体灯光系统等不需要在视频画面中出现的道具。
可选地,实体灯光系统中包含面光灯、聚光灯等,其中,面光灯主要用于对拍摄场景的整体环境的照明,聚光灯主要用于对拍摄物体在具体某一方向上的照明,例如:若拍摄物体为人物,则聚光灯可以提供对人物的正面光照、45度侧面光照、逆光光照等多个角度的照明。
可选地,上述位置数据为灯光系统在目标场景中的三维位置数据,则上述位置数据的获取方法还包括:获取虚拟灯光系统的在虚拟背景显示屏中的渲染位置;获取按照预设布局方式布局的实体灯光系统中面光灯和聚光灯的位置。
示意性的,对于虚拟灯光系统来说,该位置数据为制作人员在渲染引擎中提前设置的数据;或者,该位置数据为制作人员根据实时拍摄画面对虚拟灯光系统进行实时调整的数据。对于实体灯光系统来说,该位置数据为制作人员预设的将要在目标场景中架设的实体灯光的位置数据;或者该位置数据为实际目标场景中已有的实体灯光的位置数据。
可选地,其中预设布局方式用于指示面光灯和聚光灯以目标场景为中心,按照预设距离等间隔的排列在圆弧线上,且面光灯和聚光灯间隔排列。
示意性的,请参考图4,其示出了实体灯光系统的一种预设布局方式的俯视平面图,其中,矩形标识401表示面光灯,锥形标识402表示聚光灯,面光灯和聚光灯间隔排列在圆弧线上,且每个面光灯和每个聚光灯之间的间距相同。
需要说明的是,上述圆弧线并不是平面上的圆弧线,而是在三维空间中的圆弧线,也就是说,每个面光灯和每个聚光灯在目标场景中所处的高度是不同的。
在一些可选的实施例中,上述预设布局方式可以根据目标场景中的拍摄的目标的变化而改变,例如:将实体灯光系统中的灯具设置在轨道上,每个灯具都有对应的轨道坐标,当拍摄的重点从大的舞台换成了某一人物,则可以通过改变各个灯具对应的轨道坐标,控制灯具在轨道上自动进行移动,从而变换实体灯光的光照位置,使得实体灯光的光照重点从大舞台变换为单一人物。
步骤202,获取虚拟背景显示屏中虚拟灯光系统的光亮信息。
光亮信息用于指示虚拟背景显示屏中的虚拟灯光系统在目标场景中产生的光照情况。
可选地,其中光照情况是指虚拟灯光系统在目标场景的光照方向、虚拟灯光系统在目标场景中产生的光照的亮度和色度等。
示意性的,当虚拟灯光系统中包括太阳光,则在LED屏幕的虚拟场景中会显示该太阳光的光照效果,在LED屏幕中的太阳光同时会映射到现实前景中,改变现实前景中的光照效果,则该太阳光在虚拟场景中的显示情况以及该太阳光对现实前景产生的光照影响即为该太阳光在目标场景中产生的光照情况。
示意性的,当虚拟灯光系统中包括蓝色氛围灯,则在LED屏幕的虚拟场景中会显示蓝色氛围灯的整体蓝色光照效果,且LED屏幕中的蓝色氛围灯同时会映射到现实前景中,使得现实前景中的场景的光照显示为蓝色,则该蓝色氛围灯在虚拟场景中的显示情况以及该蓝色氛围灯对于现实前景的光照氛围的影响即为该蓝色氛围灯在目标场景中产生的光照情况。
步骤203,基于虚拟灯光系统的光亮信息确定实体灯光系统的灯光系数。
可选地,实体灯光系统中的实体灯光的系数包括亮度、色彩、饱和度、光照的方向等,本申请实施例对此不加以限定。
可选地,基于虚拟灯光系统的光亮信息确定实体灯光系统中灯光的亮度和色度。
虚拟灯光系统在虚拟场景中产生的亮度和色度是在渲染引擎中确定好的;而虚拟灯光系统在现实前景中产生的光照效果为虚拟灯光系统通过LED屏幕映射至现实前景产生的效果,受限制于LED屏幕本身的亮度,该光照效果无法与虚拟灯光系统在虚拟场景中产生的亮度和色度保持统一,则需要实体灯光系统产生一定的光照使得现实前景中的光照和虚拟场景中的光照之间的差距减小,从而提高拍摄画面的融合度。示意性的,可以获取在当前虚拟灯光系统下的目标场景画面的亮度和色度数据,基于该亮度和色度数据确定实体灯光系统中的灯光的亮度和色度系数。
可选地,在确定实体灯光系统中灯光的亮度和色度之前,还需要基于虚拟灯光系统和实体灯光系统的位置数据对实体灯光系统中实体灯光和虚拟灯光系统中的虚拟灯光进行匹配。
示意性的,若虚拟灯光系统中的虚拟灯光实现为方向灯光,即以某一指定方向照向某位置的灯光,则该需要根据该虚拟灯光在虚拟场景中的位置从而确定实体灯光系统中与该虚拟灯光匹配度最高的实体灯光,然后基于目标场景画面在该虚拟灯光下的亮度和色度数据,确定该实体灯光的亮度和色度系数。例如:虚拟灯光1是从人物的左边进行光照的,则需要从实体灯光系统中确定与虚拟灯光1的位置匹配度最高的实体灯光作为虚拟灯光1的补偿灯光。
可选地,基于虚拟灯光系统的光亮信息对实体灯光系统中实体灯光的光照角度进行调整。
示意性的,基于虚拟灯光系统的光照方向将目标虚拟灯光和目标实体灯光进行匹配后,可以根据目标虚拟灯光的光照角度调整目标实体灯光的光照角度,使目标实体灯光照向目标物体的角度与目标虚拟灯光照向目标物体的角度尽量保持一致。例如:目标虚拟灯光是以45度照射到人物的面部,则调整目标实体灯光的拍摄角度,使其照射到人物面部的光的角度为45度。
步骤204,以灯光系数控制实体灯光系统对目标场景进行光照补偿。
可选地,若实体灯光系统中包括多个实体灯光,则根据当前的拍摄需求确定实体灯光系统中的多个实体灯光的灯光系数后,可以根据该灯光系数控制多个实体灯光对目标场景进行光照补偿。
示意性的,通过DMX协议与实体灯光系统的控制台建立通过通信连接,从而控制其中多个实体灯光;或者制作人员将该灯光系数通过实体灯光系统的控制台的键盘、鼠标等输入设备输入到该控制台中,从而对多个实体灯光进行控制,本申请实施例对此不加以限定。
可选地,基于预设偏移参数对灯光系数进行调整;以调整后的灯光系数控制实体灯光系统对目标场景进行光照补偿。
其中,预设偏移系数包括整体偏移系数和部分偏移系数,整体偏移系数用于对实体灯光系统中的多个实体灯光的灯光系数整体进行调整,示意性的,当虚拟场景中的虚拟环境从白天变成了夜晚,可以根据该偏移系数对多个实体灯光的灯光系数进行统一调整。部分偏移系数用于对单个或者一组实体灯光的灯光系数进行调整,示意性的,随着剧情的推动,为了表现人物的内心独白,可以单独向该人物进行打光,则可以根据部分偏移系数调整在该人物的正上方的实体灯光的灯光系数。
可选地,上述预设偏移系数的确定方法,还包括:
获取当前目标场景的拍摄画面;对拍摄画面的画面风格进行画面风格分析,确定预设偏移参数。
可选地,将当前目标场景的拍摄画面输入到画面风格预测模型中,对拍摄画面进行分析得到拍摄画面的画面风格;对画面风格进行分析得到该拍摄画面对应的预设偏移参数。示意性的,通过画面风格预测模型提取拍摄画面图像对应的颜色特征、纹理特征、形状特征、尺寸特征、文本特征等,对上述多个特征联合分析得到拍摄画面对应的画面风格;然后对画面风格进行分析,输出得到拍摄画面对应的预设偏移参数。
其中,画面风格预测模型是基于样本画面和参考偏移参数进行训练得到的模型;参考偏移参数为专业灯光师基于画面风格,标注的样本画面对应的偏移参数。则画面风格预测模型的训练过程为:将样本画面输入到样本模型中,得到样本模型的样本偏移参数;基于样本偏移参数和参考偏移参数的差异性训练样本模型,从而得到上述画面风格预测模型。
综上所述,本申请实施例提供的灯光控制方法,通过获取目标场景中灯光系统的位置数据和虚拟灯光系统在目标场景中产生的光照情况,自动化的针对实体灯光系统中的实体灯光进行灯光系数的控制,一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
本申请实施例提供的方法,基于预设偏移参数对灯光系数进行调整,且该偏移系数支持对多个实体灯光的灯光系数的统一调整,也支持对单个或者一组实体灯光的灯光系数的单独调整,进一步的提高了对虚拟制片中的实体灯光系统的控制效率。
本申请实施例提供的方法,通过对拍摄画面的画风风格的分析可以确定预设偏移参数,将画面风格与预设偏移参数联系起来,提高了实体灯光系统与整个拍摄画面之间的匹配度。
在一些可选的实施例中,实体灯光系统中包括面光灯,可选地,通过实体灯光系统中的面光灯发出的灯光模拟虚拟灯光系统中的环境照明,也即是虚拟场景中的整体的光亮情况。图5示出了本申请一个示例性实施例提供的灯光控制方法的流程图,以该方法应用于如图1所示的计算机系统100中为例进行说明,该方法包括:
步骤501,获取目标场景中灯光系统的位置数据。
目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,灯光系统中包括虚拟场景中的虚拟灯光系统和处于现实前景中的实体灯光系统。
可选地,实体灯光系统中包括多个面光灯,其中,面光灯主要用于对拍摄场景的整体环境的照明,也即,环境光,例如:当拍摄场景为夜晚时,面光灯的发光亮度较小或者不发光,从而虚拟场景中各个位置的亮度都暗;当需要营造恐怖氛围时,面光灯可以发出彩色(例如:红色)光,则虚拟场景中各个位置都被映照为红色。
可选地,在计算机设备中可以针对拍摄场景进行建模,如图3所示,首先,在拍摄场地的建模场景300中添加摄像机303,从而确定拍摄位置,其次,在拍摄场地的建模场景300中添加实体灯光系统中面光灯的位置304。
可选地,上述位置数据的获取方式包括以下方式中的至少一种:
1、面光灯的位置数据为预设的布局位置。
示意性的,面光灯的位置数据为制作人员根据现场布置的实体灯光系统直接添加至建模场景中的位置数据。
2、面光灯的位置数据为实时反馈到计算机设备中的位置数据。
示意性的,面光灯的位置数据为实体灯光系统的控制台实时反馈至建模场景中的位置数据。
步骤502,获取面光灯相对虚拟场景对应的光照方向。
可选地,获取得到多个面光灯的位置数据后,基于位置数据可以获取多个面光灯分别对应的方向信息,可选地,该方向信息用于指示垂直于面光灯且指向拍摄目标的方向。示意性的,请参考图6,对于面光灯601来说,箭头602即为面光灯601相对虚拟场景的灯光方向。
步骤503,以光照方向的反方向进行图像采集,得到虚拟灯光系统对应的光亮信息。
可选地,上述得到虚拟灯光系统对应的光亮信息的方法还包括以下步骤:
步骤一:以光照方向的反方向,按照预设像素精度进行图像采集,得到目标场景的采样画面,采样画面对应有像素数据。
示意性的,请参考图7,面光灯701的灯光方向为方向702,则将通过摄像机703从方向702的反方向704拍摄画面,拍摄此时目标场景的画面,值得注意的是,面光灯701仅为位置标识,用于定位灯的位置,并不代表此时目标场景中有一盏面光灯在发光,也就是说,此时面光灯为未发光的状态,则摄像机采集得到的目标场景的光亮信息是仅通过虚拟灯光系统实现的。
可选地,在进行采样时,根据预设的像素精度进行采样,可选地,将预设的像素精度设置为较低的像素,例如:16×16像素,则得到的采样画面的像素数据即为16×16像素。
可选地,在进行采样时,使用sRGB(standard Red Green Blue)线性空间下的数据进行画面采样,也即是对从物理空间中采集得到的颜色进行了一次伽马校正,使采样画面中的像素值转换为sRGB线性空间下的像素值。
步骤二:对采样画面对应的像素数据进行平均化处理,得到采样画面的平均像素值。
可选地,对单个采样画面对应的像素数据进行平均化处理,得到单个采样画面对应的像素点在R色彩通道的像素值、像素点在G色彩通道的像素值,像素点在B色彩通道的像素值,由于单个采样画面的像素数据进行了加权平均处理,所以单个采样画面中的所有的像素点的R、G、B色彩通道的像素值是相同的。
可选地,上述平均化处理包括以下方式中的至少一种:
1、加权平均处理。
示意性的,计算出每个像素点在各个通道上的像素值,以单个通道为例进行说明,对单个通道上的每个像素点的像素值都赋予一个权重系数,将加权后的像素值相加然后处于总的像素点的数量,得到的平均数即为该通道上的像素点的平均像素值。
2、取中位数进行平均化处理。
示意性的,计算出每个像素点在各个通道上的像素值,对单个通道上的多个像素点的像素值,计算出多个像素值的中位数,将该中位数作为该通道上的像素点的平均像素值。
3、取最大值进行平均化处理。
示意性的,计算出每个像素点在各个通道上的像素值,对单个通道上的多个像素点的像素值,计算出多个像素值中的最大值,将该最大值作为该通道上的像素点的平均像素值。
可选地,若该最大值与多个像素值的平均值的差值大于预设阈值,则该最大值不能作为平均像素值,可以继续取比最大值小但是大于其他像素值的像素值与平均值进行比较,直到取得的目标像素值与平均值的差值小于阈值,则将该目标像素值作为平均像素值。
需要说明的是,上述对于平均化处理的举例仅为示意性的说明,本申请实施例对此不加以限定。
步骤三:将平均像素值映射到亮度-色度色彩空间中,得到采样画面对应亮度数据和色度数据作为虚拟灯光系统对应的光亮信息,亮度数据用于指示采样画面的明亮程度,色度数据用于指示采样画面的色调和饱和度。
示意性的,在得到采样画面对应的平均像素值后,需要对该像素值的单位进行转换,使其转换为匹配虚拟灯光的物理单位。
可选地,将得到的sRGB线性空间下的平均像素值转换到XYZ空间下的数据,XYZ色彩空间是一种更便于计算的色彩空间,它可以与sRGB色彩空间相互转换;转换到XYZ空间下的数据后,继续将该数据转换为Yxy空间下的色彩数据,其中xy值用于指示色度数据,Y值用于指示亮度数据。则上述转换的算法如下:
//首先,将sRGB色彩空间中每个像素点的各个色彩通道的像素值乘100,得到var_R、var_G、var_B三个分量。
var_R=R×100
var_G=G×100
var_B=B×100
//其次,用var_R、var_G和var_B做矩阵转换,得到XYZ空间下的数据。
X=var_R×0.4124+var_G×0.3576+var_B×0.1805
Y=var_R×0.2126+var_G×0.7152+var_B×0.0722
Z=var_R×0.0193+var_G×0.1192+var_B×0.9505
//最后,将XYZ空间下的数据转换到Yxy空间下的色彩数据。
Y=Y
x=X/(X+Y+Z)
y=Y/(X+Y+Z)
步骤504,基于虚拟灯光系统的光亮信息确定面光灯的灯光系数。
其中,面光灯的灯光系数包括面光灯的色温和亮度。可选地,将采样画面对应亮度数据和色度数据转换为对应的面光灯的亮度和色温。
可选地,在得到Yxy空间下的色彩数据后,还需要将Yxy空间下的色彩数据的单位进行转换,得到匹配虚拟灯光的物理单位。对于色度数据xy,转换为灯光物理单位的算法如下:
//将Yxy空间下的色彩数据中的xy色度数据转到CCT(correlated colourtemperature,相关色温)。
n=(x-0.3320)/(y-0.1858)
CCT=-437×n3+3601×n2-6831×n+5517
对于亮度数据Y,由于需要设置的灯光的亮度L和计算出来的Y在单位上不能统一,可选地,添加一个系数用于控制整体亮度比例,计算亮度L的公式一如下:
公式一:L=m×Y
其中,m即为额外添加的系数,可以对其做动态的调整,用于控制整体亮度比例。
可选地,基于上述步骤即得到了L值:用于可设置实体灯光系统中面光灯的灯光亮度;CCT值:用于设置实体灯光系统中的面光灯的灯光色温。
步骤505,以灯光系数控制面光灯对目标场景进行光照补偿。
可选地,基于预设偏移参数对面光灯的灯光系数进行调整;以调整后的灯光系数控制面光灯对目标场景进行光照补偿。
示意性的,若预设偏移参数实现为整体偏移系数,则调整面光灯的灯光亮度的公式二如下:
公式二:La=La×p、Lb=Lb×p......
其中p为亮度整体偏移系数,La、Lb......为面光灯的灯光亮度。
调整面光灯的灯光色温的公式三如下:
公式三:CCTa=CCTa+o、CCTb=CCTb+o......
其中o为色温整体偏移系数,CCTa、CCTb......为面光灯的灯光色温。
示意性的,若预设偏移参数实现为部分偏移系数,则预设偏移参数可以单独对某一个面光灯的灯光亮度和色温进行调整;或者,单独某一块区域内的面光灯的灯光亮度和色温进行调整。
综上所述,本申请实施例提供的灯光控制方法,通过获取目标场景中灯光系统的位置数据和虚拟灯光系统在目标场景中产生的光照情况,自动化的针对实体灯光系统中的实体灯光进行灯光系数的控制,一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
本申请实施例提供的方法,通过对目标场景进行图像采集的方式,得到虚拟灯光系统对应的光亮信息,从而确定面光灯的灯光系数,基于对目标场景的采样去设置面光灯,提高了面光灯与目标场景的匹配度。
本申请实施例提供的方法,通过对采样画面对应的像素数据进行平均化处理得到虚拟灯光系统对应的光亮信息,提高计算得到的光亮信息的准确度。
在一些可选的实施例中,实体灯光系统中包括聚光灯,可选地,通过实体灯光系统中的聚光灯发出的灯光模拟虚拟灯光系统中的方向光源,也即是虚拟场景中的对于某一物体在某方向上的主要光照。图8出了本申请一个示例性实施例提供的灯光控制方法的流程图,以该方法应用于如图1所示的计算机系统100中为例进行说明,该方法包括:
步骤801,获取目标场景中灯光系统的位置数据。
目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,灯光系统中包括虚拟场景中的虚拟灯光系统和处于现实前景中的实体灯光系统。
可选地,实体灯光系统中包括多个聚光灯,其中,聚光灯主要用于对拍摄场景的用于对拍摄物体在具体某一方向上的照明,例如:若拍摄物体为人物,则聚光灯可以提供对人物的正面光照、45度侧面光照、逆光光照等多个角度的照明。示意性的,聚光灯可以模拟虚拟场景中太阳光产生的光照效果。
示意性的,如图3所示,在拍摄场地的建模场景300中添加实体灯光系统中聚光灯的位置305。
可选地,上述位置数据的获取方式包括以下方式中的至少一种:
1、聚光灯的位置数据为预设的布局位置。
示意性的,聚光灯的位置数据为制作人员根据现场布置的实体灯光系统直接添加至建模场景中的位置数据。
2、聚光灯的位置数据为实时反馈到计算机设备中的位置数据。
示意性的,聚光灯的位置数据为实体灯光系统的控制台实时反馈至建模场景中的位置数据。
步骤802,获取虚拟背景显示屏中虚拟灯光系统的光亮信息。
可选地,虚拟灯光系统中包括虚拟平行光,虚拟平行光是指在虚拟场景中的一组平行的光线,光亮信息包括第一角度数据,第一角度数据用于指示虚拟平行光在预设方向上的旋转范围。
其中,虚拟平行光即为方向光,是一组平行的有固定照射方向的光线,类似太阳光的效果。
可选地,上述角度数据可实现为虚拟平行光的欧拉角数据,欧拉角包括三个角度(pitch,yaw,roll)。其中,pitch为俯仰角,表示虚拟平行光绕x轴旋转的角度;yaw为偏航角,表示虚拟平行光绕y轴旋转的角度;roll为翻滚角,表示虚拟平行光绕z轴旋转的角度,则第一角度数据实现为虚拟平行光的yaw角的数值,也即虚拟平行光绕y轴旋转的角度。
示意性的,请参考图9,在拍摄场地的建模场景900中,平行光线组901为在LED屏幕渲染的虚拟平行光的光线方向和角度,以A点为圆心,建立坐标系,基于此坐标系可确定虚拟平行光的欧拉角数据,其中包括虚拟平行光的yaw角的数值。
步骤803,获取聚光灯的第二角度数据。
第二角度数据用于指示聚光灯在目标场景中产生的灯光在预设方向上的旋转范围。
可选地,第二角度数据实现为聚光灯产生的灯光的yaw角的数值,也即聚光灯产生的灯光绕y轴旋转的角度。
示意性的,对于实体灯光系统中的聚光灯,以聚光灯发出的光线为z轴,向上垂直于该光线的直线为y轴,垂直于z轴且垂直于y轴的直线为x轴,建立三维空间内的空间直角坐标系,以该空间直角坐标系为参考坐标系,确定聚光灯产生的灯光的yaw角的数值。
步骤804,基于第一角度数据和第二角度数据,确定聚光灯的灯光系数。
可选地,聚光灯中包括多个候选聚光灯,则确定聚光灯的灯光系数的方法,还包括以下步骤:
步骤一:将第一角度数据与多个候选聚光灯分别对应的第二角度数据的差值中最小差值对应的候选聚光灯确定为聚光灯。
示意性的,分别计算多个候选聚光灯对应的yaw角的数值,将虚拟平行光对应的yaw角的数值与多个候选聚光灯对应的yaw角的数值进行差值计算,将其中差值最小的候选聚光灯确定为聚光灯,也即,与此次用于差值计算的虚拟平行光匹配的聚光灯。
请参考图10,其示出了虚拟平行光和实体灯光系统的位置关系的平面示意图,如图10所示,计算得到虚拟平行光1001对应的yaw角的数值后,分别计算1-8号聚光灯对应的yaw角的数值,将其中与虚拟平行光1001对应的yaw角的数值最为接近的8号聚光灯1002作为虚拟平行光1001在现实前景中的模拟灯光,用于对虚拟平行光1001进行灯光补偿。
步骤二:基于虚拟灯光系统和聚光灯之间的距离,确定调整系数。
其中,距离与调整系数呈负相关。
可选地,物理世界中,光照的亮度是会随着被照射的物体和光源的距离的增加而较少的,示意性的,请参考图11,若在虚拟灯光系统中,与虚拟平行光1101匹配的聚光灯为1102,若要模拟虚拟平行光1101对物体C的光照效果,则需要获取虚拟平行光为1101在位置B点的灯光亮度,而不是虚拟平行光1101的初始亮度,也即在位置A点的灯光亮度。
可选地,基于A点到B点的距离,计算调整系数的公式四如下:
公式四:i=1/(1+dist2)
其中,dist为A点到B点的距离,i为调整系数。
步骤三:基于调整系数,确定聚光灯的灯光系数。
步骤805,以灯光系数控制聚光灯对目标场景进行光照补偿。
可选地,基于预设偏移参数对聚光灯的灯光系数进行调整;以调整后的灯光系数控制聚光灯对目标场景进行光照补偿。
示意性的,若预设偏移参数实现为整体偏移系数,则预设偏移参数可以整体对聚光灯的灯光亮度和色温进行调整,调整公式可参考公式二和公式三,此处不再赘述。
示意性的,若预设偏移参数实现为部分偏移系数,则预设偏移参数可以单独对某一个聚光灯的灯光亮度和色温进行调整;或者,单独某一块区域内的聚光灯的灯光亮度和色温进行调整。
综上所述,本申请实施例提供的灯光控制方法,通过获取目标场景中灯光系统的位置数据和虚拟灯光系统在目标场景中产生的光照情况,自动化的针对实体灯光系统中的实体灯光进行灯光系数的控制,一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
本申请实施例提供的方法,根据对虚拟灯光的第一角度数据和聚光灯的第二角度数据的分析,从而得到聚光灯的灯光系数,基于对角度数据的分析去设置聚光灯,提高了聚光灯与目标场景的匹配度。
本申请实施例提供的方法,通过虚拟灯光的第一角度数据和聚光灯的第二角度数据的差值确定与目标聚光灯最匹配的虚拟灯光,提高了聚光灯和虚拟灯光匹配的准确度。
本申请实施例提供的方法,基于虚拟灯光和聚光灯之间的距离对聚光灯的灯管亮度进行调整,提高了聚光灯在对目标场景进行灯光补偿时的融合效果,进一步的提高了聚光灯与目标场景的匹配度。
在一些可选的实施例中,上述实体灯光系统中同时包括面光灯和聚光灯,可选地,在预设的灯光布局中,面光灯和聚光灯均匀分布在现实前景中,且使用面光灯用来模拟虚拟场景中的环境照明,使用聚光灯来模拟虚拟场景中的方向光源。图12示出了本申请实施例提供的灯光控制方法的整体流程图,该方法包括:
S1201:在目标场景中,确定摄像机拍摄的范围和拍摄角度。
示意性的,如图3所示,对目标场景(即为拍摄场景)进行建模,并在建模场景300中添加摄像机303,从而确定摄像机拍摄的范围和拍摄角度。
S1202:在目标场景中,添加实体灯光系统的位置。
示意性的,如图3所示,在建模场景300中添加实体灯光系统的位置数据,其中,实体灯光系统中包括多个面光灯和多个聚光灯。
可选地,虚拟制片的制作人员可以根据拍摄现场的多个面光灯和多个聚光灯的布局,直接在建模场景300中添加实体灯光系统的位置数据;或者,拍摄现场的实体灯光系统的控制台可以直接将多个面光灯和多个聚光灯上传到计算机设备中,计算机将根据接收到的位置数据自动在建模场景300的相应位置添加多个面光灯和多个聚光灯的标识。
S1203:获取面光灯在目标场景中的方向信息。
可选地,基于步骤1203中获取到的面光灯的位置数据,和建模场景300中LED屏幕的位置,可以得到面光灯在目标场景中的方向信息,该方向信息用于指示面光灯的灯光照射的方向。可选地,获取在建模场景300中每一个面光灯在目标场景中的方向信息,从而计算它们的灯光系数。
S1204:从面光灯的反方向对目标场景进行画面采样。
示意性的,请参考图7,面光灯701的灯光方向为方向702,则将通过摄像机703从方向702的反方向704拍摄画面,拍摄此时目标场景的画面,值得注意的是,面光灯701仅为位置标识,用于定位灯的位置,并不代表此时目标场景中有一盏面光灯在发光。
可选地,在对目标场景中的画面进行采样时,采样画面使用sRGB线性空间下的数据,这样能够得到一个亮度上范围更广的亮度信息,同时采样画面的像素精度可以设置比较低,比如16×16像素,这样能够间接得到一个模糊平均的数值。
S1205:对采样画面进行平均化处理,得到面光灯的色度和亮度信息。
可选地,对得到的采样画面还需要进行平均化处理,并对单个灯光得到的画面中的16×16的像素进行加权平均,最终得到一个RGB数值;然后,将该RGB数值转换为XYZ空间下的数据,最后,将XYZ空间下的数据转换为Yxy空间下的数据,其中,Y就是得到的单个面光灯的亮度信息,xy则是单个面光灯的色度信息。具体的算法可参考步骤503,此处不再赘述。
S1206:将面光灯的色度和亮度信息,从引擎的单位转换为灯光物理单位。
其中,灯光物理单位是指灯光的CCT数值和灯光的亮度L。
可选地,对于面光灯的色度信息,需要将Yxy空间下的数据xy转换为CCT数值,转换算法可参考步骤504;对于面光灯的亮度数据,需要在灯光的亮度L和面光灯的亮度信息Y之间添加一个系数,用以控制整体亮度比例,具体公式为公式一(参考步骤504)。
则基于上述步骤可以得到L值,用于设置单个面光灯的灯光亮度;CCT值,用于设置单个面光灯的灯光色温。
S1207:获取虚拟灯光系统中虚拟灯光的方向信息。
示意性的,获取虚拟灯光系统中的平行光源的位置信息,从而得到它的角度,即为虚拟灯光的方向信息。可选地,用实体灯光系统中的聚光灯来模拟虚拟灯光系统中的平行光产生的主光效果,从而对虚拟灯光系统中的平行光源产生的光照进行补偿。
可选地,上述角度是指平行光源的欧拉角(roll、pitch、yaw),本申请中主要关注平行光源对应的yaw角的值。
S1208:根据虚拟灯光的方向信息,从多个聚光灯中确定最匹配这个方向的聚光灯。
示意性的,请参考图10,每一个聚光灯都摆放平面圆弧线上,有其对应的yaw角的数值,将其中与虚拟平行光1001对应的yaw角的数值最为接近的8号聚光灯1002作为虚拟平行光1001在现实前景中的模拟灯光,用于对虚拟平行光1001进行灯光补偿。
S1209:根据虚拟灯光和聚光灯的距离,确定聚光灯的色度和亮度信息。
可选地,对于聚光灯的色度信息,将虚拟灯光对应的色度数据确定为与其匹配的聚光灯的色度信息,虚拟灯光对应的色度数据为制作人员在计算机设备中的渲染引擎中设置的。
可选地,对于聚光灯的亮度信息,则需要考虑到虚拟灯光的位置到实体灯光系统中的聚光灯的距离的衰减模拟。示意性的,首先计算虚拟灯光与聚光灯的距离,根据公式四(步骤804)从而确定衰减系数,用虚拟灯光的原始亮度值乘以该衰减系数,即得到了经过衰减的灯光的亮度值,该亮度值即为聚光灯的亮度信息。
S1210:将聚光灯的色度和亮度信息,从引擎的单位转换为灯光物理单位。
同样,对于聚光灯的色度和亮度信息,也要将其转换为灯光的CCT数值和灯光的亮度L,转换的步骤可参考步骤504。
S1211:通过DMX协议传输控制信息到实体灯光系统。
示意性的,实体灯光系统和计算机设备基于DMX协议进行通信连接,则在计算设备中获取得到实体灯光系统中各个灯的灯光系数后,可以将其传输到实体灯光系统,从而对实体灯光系统中各个灯进行控制。
S1212:提供第一接口,整体控制灯光的亮度、色温偏移。
可选地,在DMX协议中对灯光系数进行二次加工,整体的灯光控制,在亮度上进行加权,在色温上进行偏移,方便后期通过第一接口对实体灯光系统整体进行调试。
S1213:提供第二接口,单独控制灯光的亮度、色温偏移。
可选地,计算机设备中还提供有第二接口,用于单独控制一盏或者部分灯光的亮度,色温偏移,方便制作人员根据现场的拍摄场景营造艺术氛围。
请参考图13,其示出了本申请一个示例性的实施例提供的灯光控制装置结构框图,该装置包括:
获取模块1300,用于获取目标场景中灯光系统的位置数据,所述目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,所述灯光系统中包括所述虚拟场景中的虚拟灯光系统和处于所述现实前景中的实体灯光系统;
所述获取模块1300,还用于获取所述虚拟背景显示屏中所述虚拟灯光系统的光亮信息,所述光亮信息用于指示所述虚拟背景显示屏中的所述虚拟灯光系统在所述目标场景中产生的光照情况;
确定模块1310,用于基于所述虚拟灯光系统的光亮信息确定所述实体灯光系统的灯光系数;
补偿模块1320,用于以所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
请参考图14,在一些可选的实施例中,所述实体灯光系统中包括面光灯;所述获取模块1300,还用于获取所述面光灯相对所述虚拟场景对应的光照方向;所述获取模块1300,还用于以所述光照方向的反方向进行图像采集,得到所述虚拟灯光系统对应的光亮信息。
在一些可选的实施例中,所述获取模块1300,包括:
采样单元1301,用于以所述光照方向的反方向,按照预设像素精度进行图像采集,得到所述目标场景的采样画面,所述采样画面对应有像素数据;
像素处理单元1302,用于对所述采样画面对应的像素数据进行平均化处理,得到所述采样画面的平均像素值;
转换单元1303,用于将所述平均像素值映射到亮度-色度色彩空间中,得到所述采样画面对应亮度数据和色度数据作为所述虚拟灯光系统对应的光亮信息,所述亮度数据用于指示所述采样画面的明亮程度,所述色度数据用于指示所述采样画面的色调和饱和度。
在一些可选的实施例中,所述实体灯光系统中包括聚光灯,所述虚拟灯光系统中包括虚拟平行光,所述虚拟平行光是指在所述虚拟场景中的一组平行的光线,所述光亮信息包括第一角度数据,所述第一角度数据用于指示所述虚拟平行光在预设方向上的旋转范围;所述确定模块1310,包括:
获取单元1311,用于获取所述聚光灯的第二角度数据,所述第二角度数据用于指示所述聚光灯在所述目标场景中产生的灯光在所述预设方向上的旋转范围;
所述确定模块1310,还用于基于所述第一角度数据和所述第二角度数据,确定所述聚光灯的灯光系数。
在一些可选的实施例中,所述聚光灯中包括多个候选聚光灯;所述确定模块1310,包括:
匹配单元1312,用于将所述第一角度数据与多个候选聚光灯分别对应的第二角度数据的差值中最小差值对应的候选聚光灯确定为所述聚光灯;
所述确定模块1310,还用于基于所述虚拟灯光系统和所述聚光灯之间的距离,确定调整系数,所述距离与所述调整系数呈负相关;
所述确定模块1310,还用于基于所述调整系数,确定所述聚光灯的灯光系数。
在一些可选的实施例中,所述光亮信息包括所述虚拟灯光系统对应的亮度数据和色度数据;所述确定模块1310,包括:
调整单元1313,用于基于所述调整系数,对所述亮度数据进行调整;
所述确定模块1310,还用于基于调整后的所述亮度数据和所述色度数据,确定所述聚光灯的灯光系数。
在一些可选的实施例中,所述补偿模块1320,还用于基于预设偏移参数对所述灯光系数进行调整;所述补偿模块1320,还用于以调整后的所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
在一些可选的实施例中,所述获取模块1300,还用于获取当前所述目标场景的拍摄画面;所述确定模块1310,还用于对所述拍摄画面的画面风格进行画面风格分析,确定所述预设偏移参数。
在一些可选的实施例中,所述获取模块1300,还用于获取所述虚拟灯光系统的在所述虚拟背景显示屏中的渲染位置;所述获取模块1300,还用于获取按照预设布局方式布局的所述实体灯光系统中所述面光灯和所述聚光灯的位置。
在一些可选的实施例中,所述预设布局方式用于指示所述面光灯和所述聚光灯以所述目标场景为中心,按照预设距离等间隔的排列在圆弧线上,且所述面光灯和所述聚光灯间隔排列。
综上所述,本申请实施例提供的灯光控制装置,通过获取目标场景中灯光系统的位置数据和虚拟灯光系统在目标场景中产生的光照情况,自动化的针对实体灯光系统中的实体灯光进行灯光系数的控制,一方面,不需要人工对实体灯光进行反复调整,提高了在虚拟制片中对于实体灯光的控制效率;另一方面,由于实体灯光的灯光系数是基于虚拟灯光的光照情况确定的,提高了实体灯光与虚拟场景的匹配度,从而提高了虚拟场景与现实前景的画面融合度。
需要说明的是:上述实施例提供的灯光控制装置,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的灯光控制装置与灯光控制方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图15示出了本申请一个示例性实施例提供的计算机设备1500的结构框图。该计算机设备1500可以是:智能手机、平板电脑、动态影像专家压缩标准音频层面3播放器(MovingPicture Experts Group Audio Layer III,MP3)、动态影像专家压缩标准音频层面4(Moving Picture Experts Group Audio Layer IV,MP4)播放器、笔记本电脑或台式电脑。计算机设备1500还可能被称为用户设备、便携式计算机设备、膝上型计算机设备、台式计算机设备等其他名称。
通常,计算机设备1500包括有:处理器1501和存储器1502。
处理器1501可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1501可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器1501也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称中央处理器(CentralProcessing Unit,CPU);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1501可以在集成有图像处理器(Graphics Processing Unit,GPU),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1501还可以包括人工智能(Artificial Intelligence,AI)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1502可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1502还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1502中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1501所执行以实现本申请中方法实施例提供的灯光控制方法。
示意性的,计算机设备1500还包括其他组件,本领域技术人员可以理解,图15中示出的结构并不构成对计算机设备1500的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,该计算机可读存储介质可以是上述实施例中的存储器中所包含的计算机可读存储介质;也可以是单独存在,未装配入计算机设备中的计算机可读存储介质。该计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述实施例中任一所述的灯光控制方法。
可选的,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、固态硬盘(SSD,Solid State Drives)或光盘等。其中,随机存取记忆体可以包括电阻式随机存取记忆体(ReRAM,Resistance RandomAccess Memory)和动态随机存取存储器(DRAM,Dynamic Random Access Memory)。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请实施例提供了一种计算机程序产品或计算机程序,所述计算机程序产品或计算机程序包括计算机指令,所述计算机指令存储在计算机可读存储介质中,处理器从所述计算机可读存储介质读取并执行所述计算机指令,以实现如上述实施例所述的灯光控制方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (10)
1.一种灯光控制方法,其特征在于,所述方法包括:
获取目标场景中灯光系统的位置数据,所述目标场景包括显示在虚拟背景显示屏中的虚拟场景和现实前景,所述灯光系统中包括所述虚拟场景中的虚拟灯光系统和处于所述现实前景中的实体灯光系统;
获取所述虚拟背景显示屏中所述虚拟灯光系统的光亮信息,所述光亮信息用于指示所述虚拟背景显示屏中的所述虚拟灯光系统在所述目标场景中产生的光照情况;
基于所述虚拟灯光系统的光亮信息确定所述实体灯光系统的灯光系数;
以所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
2.根据权利要求1所述的方法,其特征在于,所述实体灯光系统中包括面光灯;
所述获取所述虚拟背景显示屏中所述虚拟灯光系统的光亮信息,包括:
获取所述面光灯相对所述虚拟场景对应的光照方向;
以所述光照方向的反方向进行图像采集,得到所述虚拟灯光系统对应的光亮信息。
3.根据权利要求2所述的方法,其特征在于,所述以所述光照方向的反方向进行图像采集,得到所述虚拟灯光系统对应的光亮信息,包括:
以所述光照方向的反方向,按照预设像素精度进行图像采集,得到所述目标场景的采样画面,所述采样画面对应有像素数据;
对所述采样画面对应的像素数据进行平均化处理,得到所述采样画面的平均像素值;
将所述平均像素值映射到亮度-色度色彩空间中,得到所述采样画面对应亮度数据和色度数据作为所述虚拟灯光系统对应的光亮信息,所述亮度数据用于指示所述采样画面的明亮程度,所述色度数据用于指示所述采样画面的色调和饱和度。
4.根据权利要求1所述的方法,其特征在于,所述实体灯光系统中包括聚光灯,所述虚拟灯光系统中包括虚拟平行光,所述虚拟平行光是指在所述虚拟场景中的一组平行的光线,所述光亮信息包括第一角度数据,所述第一角度数据用于指示所述虚拟平行光在预设方向上的旋转范围;
所述基于所述虚拟灯光系统的光亮信息确定所述实体灯光系统的灯光系数,包括:
获取所述聚光灯的第二角度数据,所述第二角度数据用于指示所述聚光灯在所述目标场景中产生的灯光在所述预设方向上的旋转范围;
基于所述第一角度数据和所述第二角度数据,确定所述聚光灯的灯光系数。
5.根据权利要求4所述的方法,其特征在于,所述聚光灯中包括多个候选聚光灯;
所述基于所述第一角度数据和所述第二角度数据,确定所述聚光灯的灯光系数,包括:
将所述第一角度数据与多个候选聚光灯分别对应的第二角度数据的差值中最小差值对应的候选聚光灯确定为所述聚光灯;
基于所述虚拟灯光系统和所述聚光灯之间的距离,确定调整系数,所述距离与所述调整系数呈负相关;
基于所述调整系数,确定所述聚光灯的灯光系数。
6.根据权利要求5所述的方法,其特征在于,所述光亮信息包括所述虚拟灯光系统对应的亮度数据和色度数据;
所述基于所述调整系数,确定所述聚光灯的灯光系数,包括:
基于所述调整系数,对所述亮度数据进行调整;
基于调整后的所述亮度数据和所述色度数据,确定所述聚光灯的灯光系数。
7.根据权利要求1至6任一所述的方法,其特征在于,所述以所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿,包括:
基于预设偏移参数对所述灯光系数进行调整;
以调整后的所述灯光系数控制所述实体灯光系统对所述目标场景进行光照补偿。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
获取当前所述目标场景的拍摄画面;
对所述拍摄画面的画面风格进行画面风格分析,确定所述预设偏移参数。
9.根据权利要求1至6任一所述的方法,其特征在于,所述获取目标场景中灯光系统的位置数据,包括:
获取所述虚拟灯光系统的在所述虚拟背景显示屏中的渲染位置;
获取按照预设布局方式布局的所述实体灯光系统中所述面光灯和所述聚光灯的位置。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行以实现如权利要求1至9任一所述的灯光控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211105415.6A CN116506993A (zh) | 2022-09-09 | 2022-09-09 | 灯光控制方法及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211105415.6A CN116506993A (zh) | 2022-09-09 | 2022-09-09 | 灯光控制方法及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116506993A true CN116506993A (zh) | 2023-07-28 |
Family
ID=87325487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211105415.6A Pending CN116506993A (zh) | 2022-09-09 | 2022-09-09 | 灯光控制方法及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116506993A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117354439A (zh) * | 2023-10-31 | 2024-01-05 | 神力视界(深圳)文化科技有限公司 | 光强处理方法、装置、电子设备和计算机存储介质 |
CN117424970A (zh) * | 2023-10-23 | 2024-01-19 | 神力视界(深圳)文化科技有限公司 | 灯光控制方法、装置、移动终端及存储介质 |
CN117422844A (zh) * | 2023-10-27 | 2024-01-19 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
CN117496095A (zh) * | 2023-10-27 | 2024-02-02 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
CN117858312A (zh) * | 2024-01-15 | 2024-04-09 | 西南科大四川天府新区创新研究院 | 智慧球场的控制方法、系统以及可读存储介质 |
CN117496095B (zh) * | 2023-10-27 | 2024-10-25 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
-
2022
- 2022-09-09 CN CN202211105415.6A patent/CN116506993A/zh active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117424970A (zh) * | 2023-10-23 | 2024-01-19 | 神力视界(深圳)文化科技有限公司 | 灯光控制方法、装置、移动终端及存储介质 |
CN117424970B (zh) * | 2023-10-23 | 2024-09-17 | 神力视界(深圳)文化科技有限公司 | 灯光控制方法、装置、移动终端及存储介质 |
CN117422844A (zh) * | 2023-10-27 | 2024-01-19 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
CN117496095A (zh) * | 2023-10-27 | 2024-02-02 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
CN117496095B (zh) * | 2023-10-27 | 2024-10-25 | 神力视界(深圳)文化科技有限公司 | 一种虚实灯光对齐方法、装置、电子设备及介质 |
CN117354439A (zh) * | 2023-10-31 | 2024-01-05 | 神力视界(深圳)文化科技有限公司 | 光强处理方法、装置、电子设备和计算机存储介质 |
CN117858312A (zh) * | 2024-01-15 | 2024-04-09 | 西南科大四川天府新区创新研究院 | 智慧球场的控制方法、系统以及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN116506993A (zh) | 灯光控制方法及存储介质 | |
CN106548455B (zh) | 用于调整图像的亮度的设备和方法 | |
CN110009720B (zh) | Ar场景中的图像处理方法、装置、电子设备及存储介质 | |
US8928662B2 (en) | Apparatus, method, and system for demonstrating a lighting solution by image rendering | |
JP3995016B2 (ja) | 仮想3次元照明シーンを作成するためのシミュレーション方法、およびプログラム、システム | |
US20200019041A1 (en) | Lighting assembly for producing realistic photo images | |
CN115526976A (zh) | 虚拟场景渲染方法、装置、存储介质和电子设备 | |
US10621769B2 (en) | Simplified lighting compositing | |
CN113648652B (zh) | 对象渲染方法和装置、存储介质及电子设备 | |
US20200257831A1 (en) | Led lighting simulation system | |
US20230171508A1 (en) | Increasing dynamic range of a virtual production display | |
US20080247727A1 (en) | System for creating content for video based illumination systems | |
WO2023094870A1 (en) | Increasing dynamic range of a virtual production display | |
KR102677114B1 (ko) | 인카메라 시각 효과 기반의 실제 환경과 가상 환경의 조명 매칭 시스템 | |
CN117424970B (zh) | 灯光控制方法、装置、移动终端及存储介质 | |
CN117424969A (zh) | 灯光控制方法、装置、移动终端及存储介质 | |
Dorsey | Computer Graphics Techniques for Opera Lighting Design and Simulation | |
WO2023094872A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023094882A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023094881A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023094873A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023094875A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023232525A1 (en) | Illumination adapting method and picture recording arrangement | |
WO2023094880A1 (en) | Increasing dynamic range of a virtual production display | |
WO2023094877A1 (en) | Increasing dynamic range of a virtual production display |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40090125 Country of ref document: HK |