CN117424970A - 灯光控制方法、装置、移动终端及存储介质 - Google Patents
灯光控制方法、装置、移动终端及存储介质 Download PDFInfo
- Publication number
- CN117424970A CN117424970A CN202311387260.4A CN202311387260A CN117424970A CN 117424970 A CN117424970 A CN 117424970A CN 202311387260 A CN202311387260 A CN 202311387260A CN 117424970 A CN117424970 A CN 117424970A
- Authority
- CN
- China
- Prior art keywords
- virtual
- light
- screen
- adjusting
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000003860 storage Methods 0.000 title claims abstract description 15
- 230000002452 interceptive effect Effects 0.000 claims abstract description 37
- 230000000694 effects Effects 0.000 claims description 41
- 230000001795 light effect Effects 0.000 claims description 23
- 238000013507 mapping Methods 0.000 claims description 22
- 230000008859 change Effects 0.000 claims description 20
- 238000005286 illumination Methods 0.000 claims description 19
- 238000004891 communication Methods 0.000 claims description 13
- 238000009877 rendering Methods 0.000 description 31
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 9
- 230000004044 response Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 238000007654 immersion Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 4
- 238000010899 nucleation Methods 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001427 coherent effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Circuit Arrangement For Electric Light Sources In General (AREA)
- Processing Or Creating Images (AREA)
Abstract
本说明书一个或多个实施例提供一种针对虚拟拍摄系统的灯光控制方法、装置、移动终端及存储介质。虚拟拍摄系统包括至少一个屏幕,方法应用于移动终端,方法包括:在移动终端的交互界面中,展示用于调节在屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;调节控件用于调节第一虚拟灯光的至少一种灯光参数;响应于调节控件被触发,获取第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。用户可以操作调节控件以实现控制虚拟灯光,操作简单便捷,调节灵活度高。
Description
技术领域
本说明书一个或多个实施例涉及虚拟拍摄技术领域,尤其涉及一种针对虚拟拍摄系统的灯光控制方法、装置、移动终端及计算机可读存储介质。
背景技术
传统影视制作为了满足拍摄需求,需要花费大量的时间和人力来挑选拍摄地点,制作道具,搭建拍摄场景。而虚拟拍摄(或虚拟制片)技术,通过在搭建的LED屏幕上渲染出的视效画面代替真实置景,减小了影视拍摄对地点和布景的依赖,降低了影视拍摄的成本和制作周期,具体来说,虚拟拍摄(或虚拟制片)技术是指一系列计算机辅助制片和可视化电影制作方法,在虚拟制片的拍摄现场,有至少一个屏幕用于显示虚拟场景,在屏幕前方有实际的制景道具,虚拟拍摄中的摄像机会同时拍摄屏幕和屏幕前制景,得到融合了屏幕和屏幕前制景的画面的视频。
在虚拟拍摄中,虚拟灯光的设计尤为重要,它是视效资产中的一个关键组成部分。虚拟灯光通常需要由具备图形渲染知识的专业人员利用相关渲染软件进行开发,而影视制作中的负责拍摄现场灯光效果的灯光师大多不具备图形渲染知识,在对虚拟灯光进行调节时,需要由灯光师与负责虚拟灯光的专业人员进行沟通,再由专业人员在电脑中操作以对虚拟灯光进行控制,该种灯光控制方式的控制效率较低,不够灵活也不够便捷。
发明内容
有鉴于此,本说明书一个或多个实施例提供一种针对虚拟拍摄系统的灯光控制方法、装置、移动终端及计算机可读存储介质。
为实现上述目的,本说明书一个或多个实施例提供技术方案如下:
根据本说明书一个或多个实施例的第一方面,提出了一种针对虚拟拍摄系统的灯光控制方法,所述虚拟拍摄系统包括至少一个屏幕,所述方法应用于移动终端,所述方法包括:
在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数;
响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一种实现方式中,在所述屏幕显示的虚拟场景中的所有第一虚拟灯光能够被划分为至少两组;
所述调节控件包括针对于各个第一虚拟灯光的第一调节控件和针对于各组第一虚拟灯光的第二调节控件;
其中,所述第一调节控件用于对单个第一虚拟灯光的灯光参数进行调节;
所述第二调节控件用于对一组第一虚拟灯光的灯光参数进行调节。
在一种实现方式中,对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
响应于针对在所述屏幕显示的虚拟场景中的第一虚拟灯光的分组指令,将被选中的至少一个第一虚拟灯光划分为一组。
在一种实现方式中,对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
按照所述屏幕被划分后的至少两个显示区域,对在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。
在一种实现方式中,对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
按照在所述屏幕显示的虚拟场景中的各个虚拟对象,对在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。
在一种实现方式中,所述移动终端预存摄像机的不同位姿信息与所述虚拟场景中的第一虚拟灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致;
所述方法还包括:
响应于所述摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述虚拟场景中的第一虚拟灯光的目标灯光参数;所述目标灯光参数用于使所述屏幕显示融合有与摄像机的变化后的位姿适配的第一虚拟灯光的虚拟场景。
在一种实现方式中,所述移动终端还用于与所述虚拟拍摄系统所在的现实场景中的实体灯光通信连接;
所述方法还包括:
获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;
根据所述屏幕的位姿信息以及所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第二虚拟灯光,并确定所述第二虚拟灯光的灯光参数,所述第二虚拟灯光的灯光参数用于使所述屏幕显示融合有所述第二虚拟灯光的虚拟场景。
在一种实现方式中,所述灯光参数包括位姿信息和显示属性中的至少一种;
所述位姿信息包括光源位置、光源角度中的至少一种,所述显示属性光源类型、颜色、光照强度以及亮度中的至少一种。
根据本说明书一个或多个实施例的第二方面,提出了一种针对虚拟拍摄系统的灯光控制装置,所述虚拟拍摄系统包括至少一个屏幕,所述装置应用于移动终端,所述装置包括:
控件展示模块,用于在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数;
灯光调节模块,用于响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
根据本说明书实施例的第三方面,提供一种移动终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器执行所述可执行指令时,用于实现第一方面所述的方法。
根据本说明书实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述任一项所述方法的步骤。
本说明书的实施例提供的技术方案可以包括以下有益效果:
本说明书实施例中,灯光师可以通过移动终端的交互界面中展示的调节控件来对第一虚拟灯光进行控制,以灵活地调节虚拟场景在屏幕中的显示效果,操作简单便捷,无需经过灯光师与负责虚拟灯光的专业人员进行沟通再由专业人员在电脑中操作以对虚拟灯光进行控制的繁琐过程,调节灵活度高,减少了灯光师和负责虚拟灯光的专业人员之间的沟通成本,有利于提高灯光控制效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本说明书。
附图说明
图1A是一示例性实施例提供的虚拟拍摄系统、以及移动终端的示意图。
图1B是一示例性实施例提供的虚拟拍摄系统、以及移动终端的另一示意图。
图2是一示例性实施例提供的另一种虚拟拍摄系统的结构示意图。
图3是一示例性实施例提供的一种灯光控制方法的流程示意图。
图4是一示例性实施例提供的关于第一虚拟灯光的第一种交互界面的示意图。
图5是一示例性实施例提供的关于第一虚拟灯光的第二种交互界面的示意图。
图6是一示例性实施例提供的关于第一虚拟灯光的第三种交互界面的示意图。
图7是一示例性实施例提供的关于第一虚拟灯光的第四种交互界面的示意图。
图8是一示例性实施例提供的虚拟拍摄系统中的屏幕及实体灯光的示意图。
图9是一示例性实施例提供的关于实体灯光的第一种交互界面的示意图。
图10是一示例性实施例提供的关于实体灯光的第二种交互界面的示意图。
图11是一示例性实施例提供的关于实体灯光的第三种交互界面的示意图。
图12是一示例性实施例提供的一种移动终端的结构示意图。
图13是一示例性实施例提供的一种灯光控制装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书一个或多个实施例相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本说明书一个或多个实施例的一些方面相一致的装置和方法的例子。
需要说明的是:在其他实施例中并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中,其方法所包括的步骤可以比本说明书所描述的更多或更少。此外,本说明书中所描述的单个步骤,在其他实施例中可能被分解为多个步骤进行描述;而本说明书中所描述的多个步骤,在其他实施例中也可能被合并为单个步骤进行描述。
图1A示出根据本说明书实施例的一种应用场景的示意图,如图1A所示,虚拟拍摄系统包括至少一个屏幕02,其中,移动终端00可以与屏幕02通信连接,移动终端00可以执行本说明书实施例的灯光控制方法,对在所述屏幕02显示的虚拟场景中的第一虚拟灯光进行调节,使得屏幕02可以显示融合有调节后的第一虚拟灯光的虚拟场景。
示例性的,如图1B所示,虚拟拍摄系统可以包括渲染设备01及至少一个屏幕02,移动终端00可以与渲染设备01之间建立有通信连接,渲染设备01与屏幕02之间建立有通信连接;其中,移动终端00可以执行本说明书实施例的灯光控制方法,获取第一虚拟灯光的被调节后的灯光参数,将第一虚拟灯光的被调节后的灯光参数发送给渲染设备01,渲染设备01可以根据第一虚拟灯光的被调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕02显示融合有调节后的第一虚拟灯光的虚拟场景。其中,渲染设备01及屏幕02可以集成为一体,也可以分别独立设置。
在上述应用场景中,灯光师可以手持移动终端00位于屏幕02前,基于屏幕02中实时显示的虚拟场景的显示效果,通过移动终端00来实时对第一虚拟灯光进行控制,以灵活地调节虚拟场景在屏幕中的显示效果,操作简单便捷,无需经过灯光师与负责虚拟灯光的专业人员进行沟通再由专业人员在电脑中操作以对虚拟灯光进行控制的繁琐过程,调节灵活度高,减少了灯光师和负责虚拟灯光的专业人员之间的沟通成本,有利于提高灯光控制效率。
其中,虚拟拍摄系统中使用的屏幕02可以是LED屏幕、液晶屏幕等类型,可以是曲面屏或平面屏等结构,应理解,本领域技术人员可以根据实际需求自定义设置虚拟拍摄系统中屏幕02的类型、数量、尺寸、分辨率等,对此本说明书实施例不作限制。应理解,本说明书实施例对于设备之间的通信连接方式不作限制。
可选地,当屏幕02采用LED屏幕时,本说明书实施例还提供图2示出的一种虚拟拍摄系统,如图2所示,该虚拟拍摄系统可以包括LED屏幕101、服务器集群102(包括主服务器1021及多个服务器1022)、LED播控处理器103、摄像机104、位姿追踪器105、网络交换机106、同步信号发生器107;本说明书实施例的渲染设备01可以包括服务器集群102以及LED播控处理器103;其中,移动终端00可以与主服务器1021之间建立通信连接,这样移动终端00可以将相关数据(如第一虚拟灯光的被调节后的灯光参数)发送至主服务器1021,主服务器1021可以将相关数据(如第一虚拟灯光的被调节后的灯光参数)同步给其它的多个服务器1022。
其中,服务器集群102中的各个服务器可以根据第一虚拟灯光的被调节后的灯光参数渲染出调节后的第一虚拟灯光,并将渲染结果发送给对应的LED播控处理器103。由于LED屏幕101是由多个LED箱体构成的,一个服务器可以对应一个或多个LED箱体,也即一个服务器可以渲染出与其相对应的一个或多个LED箱体所需显示的画面。LED播控处理器103是用于控制LED屏幕101的硬件设备,一个LED播控处理器可以对应一个或多个LED箱体,或者说一个LED播控处理器可以控制与其相对应的一个或多个LED箱体进行画面的显示。
其中,位姿追踪器105绑定于摄像机104上,位姿追踪器105可以实时追踪摄像机104的位置和姿态,并通过网络将追踪的位姿信息广播到现场局域网中。网络交换机106可以搭建现场局域网,实现现场局域网内各设备之间的通信。例如,网络交换机106可以接收位姿追踪器105广播的位姿信息,并将位姿信息发送给服务器集群102。同步信号发生器107可以产生同步信号脉冲,并将同步信号发送给摄像机104、位姿追踪器105、服务器集群102和LED播控处理器103,使摄像机104、位姿追踪器105、服务器集群102和LED播控处理器103实现同步。其中,摄像机104会同时拍摄屏幕和现实场景(也即屏幕前制景),得到融合了屏幕和屏幕前制景的画面的视频。
本说明书实施例的针对虚拟拍摄系统的灯光控制方法可以通过软件或硬件改造部署在各种移动终端上,本说明书实施例涉及的移动终端可以是能够提供交互界面的移动终端,例如,移动终端可以包括但不限于手持设备、平板电脑、掌上电脑、笔记本电脑、智能手机、可穿戴式设备(例如,手表、眼镜、手套、头饰(例如,帽子、头盔、虚拟现实头戴耳机、增强现实头戴耳机、头装式装置(HMD)、头带)、挂件、臂章、腿环、鞋子、马甲)等。本说明书实施例涉及的移动终端可以是指具有无线连接功能和/或有线连接功能的设备,无线连接的功能是指可以通过wifi、蓝牙等无线连接方式与其他设备进行连接,本说明书实施例涉及的移动终端也可以与其他设备通过有线连接功能进行通信连接。本说明书实施例涉及的移动终端可以是触屏的、也可以是非触屏的,触屏的可以通过手指、触控笔等在显示器上点击、滑动等方式对移动终端进行控制,非触屏的移动终端可以连接鼠标、键盘、触控面板等输入设备,通过输入设备对移动终端进行控制等,对此本说明书实施例不作限制。
请参阅图3,图3示出了一种针对虚拟拍摄系统的灯光控制方法的流程图。虚拟拍摄系统包括至少一个屏幕,所述方法应用于移动终端,所述方法包括:
在S101中,在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数。
如上所述,本说明书实施例的灯光控制方法可以通过软件部署在移动终端中,例如可以以应用程序APP的形式部署于移动终端中,当用户期望对在所述屏幕显示的虚拟场景中的第一虚拟灯光进行调节控制时,可以打开上述应用程序以进入用于调节第一虚拟灯光的交互界面,该交互界面可以展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件,从而用户可以根据实际需求操作交互界面中的调节控件,以调节第一虚拟灯光的至少一种灯光参数。
其中,灯光参数包括位姿信息和显示属性中的至少一种。位姿信息包括光源位置、光源角度中的至少一种。显示属性光源类型、颜色、光照强度以及亮度中的至少一种。其中,光源类型包括但不限于点光源、平行光源、聚光灯等,不同光源类型会产生不同的光线效果。
在S102中,响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
示例性的,在图1A所示的应用场景中,在屏幕内部集成有渲染设备的情况下,移动终端可以将第一虚拟灯光的被调节后的灯光参数发送给屏幕,以使屏幕中的渲染设备根据第一虚拟灯光的被调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的被调节后的灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的被调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
可以理解的是,用户对第一虚拟灯光的灯光参数的调节可以执行一次或者一次以上,用户一次可以调节至少一个第一虚拟灯光的至少一种灯光参数,移动终端可以将每执行一次调节操作所得到的第一虚拟灯光的被调节后的灯光参数发送至渲染设备,这样可以使渲染设备根据实时调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕显示融合有调节后的第一虚拟灯光的虚拟场景,以便于用户能够基于屏幕中实时显示的虚拟场景画面的效果作为反馈,用户可以选择继续调节第一虚拟灯光的灯光参数,直到满足用户的需求。其中,渲染设备可以采用本领域已知的渲染技术,实现根据第一虚拟灯光的被调节后的灯光参数渲染出调节后的第一虚拟灯光,对此本说明书实施例不作限制。
本实施例中,不具备图形渲染知识的灯光师也可以通过移动终端来实时对第一虚拟灯光进行控制,以灵活地调节虚拟场景在屏幕中的显示效果,操作简单便捷,无需经过灯光师与负责虚拟灯光的专业人员进行沟通再由专业人员在电脑中操作以对虚拟灯光进行控制的繁琐过程,调节灵活度高,减少了灯光师和负责虚拟灯光的专业人员之间的沟通成本,有利于提高灯光控制效率。
在一些实施例中,为了进一步提高调节效率,本说明书实施例实现在屏幕显示的虚拟场景中的所有第一虚拟灯光能够被划分为至少两组。通过分组第一虚拟灯光,用户可以一次性对整个第一虚拟灯光组进行设置和控制,而不需要逐个调整每个第一虚拟灯光,这样可以节省用户的时间和精力,提高工作效率。
示例性的,调节控件包括针对于各个第一虚拟灯光的第一调节控件和针对于各组第一虚拟灯光的第二调节控件。其中,第一调节控件用于对单个第一虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的至少一种灯光参数进行调节。第二调节控件用于对一组第一虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的以及显示属性中的至少一种灯光参数进行批量调节。
其中,对于分组后的各组第一虚拟灯光,可以通过该组第一虚拟灯光对应的第二调节控件对其进行批量调节,并且对于该组第一虚拟灯光中的各个第一虚拟灯光,也可以通过该第一虚拟灯光对应的第一调节控件对其进行单独调节。
可以理解的是,各个第一虚拟灯光对应的第一调节控件可以有一个或多于一个,比如各个第一虚拟灯光对应的第一调节控件的数量有多个,每个第一调节控件用于调节该第一虚拟灯光的其中一种灯光参数。以及,各组第一虚拟灯光对应的第二调节控件可以有一个或多于一个,比如各组第一虚拟灯光对应的第二调节控件的数量有多个,每个第二调节控件用于批量调节该组第一虚拟灯光的其中一种灯光参数。本说明书对于第一调节控件和第二调节控件的具体操作形式也不做任何限制,可以是点击、滑动、拖动或者长按等操作,但不限于此。
在一个例子中,请参阅图4、图5以及图6所示的交互界面,图4和图5的交互界面中的左侧展示有虚拟场景中的所有第一虚拟灯光,可以看到,有些第一虚拟灯光以灯光组的形式展示,有些第一虚拟灯光未被分组,以单个第一虚拟灯光进行展示。
请参阅图4,当用户选中未被分组的“第一虚拟灯光A”之后,交互界面的右侧展示用于调节“第一虚拟灯光A”的第一调节控件,从而可以对“第一虚拟灯光A”的光照强度、光照颜色和光源位置等灯光参数进行调节。
请参阅图5,当用户选中“灯光组-1”之后,交互界面的右侧展示用于调节“灯光组-1”的第二调节控件,从而可以对“灯光组-1”中的所有第一虚拟灯光的光照强度、光照颜色和光源位置等灯光参数进行批量调节。比如当用户调节图5中的交互界面的右侧中的光照强度时,“灯光组-1”中的所有第一虚拟灯光的光照强度均被调节,从而有利于简化用户的操作步骤,提高操作效率。
请参阅图6,图6的交互界面中的左侧展示“灯光组-1”中的所有第一虚拟灯光,当用户选中“灯光组-1”中的“第一虚拟灯光-1-c”时,交互界面的右侧展示用于调节“第一虚拟灯光-1-c”的第一调节控件,从而可以对“第一虚拟灯光-1-c”的光照强度、光照颜色和光源位置等灯光参数进行调节。
这里对第一虚拟灯光的分组进行示例性说明:
在第一种可能的实现方式中,可以由用户根据实际需求对当前在屏幕显示的虚拟场景中的第一虚拟灯光进行分组,移动终端可以响应于针对在屏幕显示的虚拟场景中的第一虚拟灯光的分组指令,将被选中的至少一个第一虚拟灯光划分为一组。本实施例通过移动终端来进行第一虚拟灯光的分组,可以增加用户与虚拟场景之间的交互性和易用性,用户可以直接选中第一虚拟灯光,将其划分为不同的组别,而无需复杂的操作步骤或者专业的技能要求。并且用户可以根据实际需要定制化场景效果,可以将多个第一虚拟灯光组合成一个特定的场景效果;例如,可以创建一个室内照明场景、舞台演出效果或者夜景模拟等,通过第一虚拟灯光组的设置和调整,使得虚拟场景更符合用户的要求。
举个例子,比如请参阅图7所示的交互界面,用户可以在该交互界面中对在屏幕显示的虚拟场景中的第一虚拟灯光进行选择,例如,用户可以根据所需数量,任意选择可选的第一虚拟灯光,用户选中的第一虚拟灯光会显示“√”符号,并在确认无误之后,点击分组控件,进而移动终端可以基于分组控件被触发而生成分组指令,进而响应于针对在屏幕显示的虚拟场景中的第一虚拟灯光的分组指令,将被选中的至少一个第一虚拟灯光划分为一组。
在第二种可能的实现方式中,如请参阅图2所示的虚拟拍摄系统,屏幕可以是分区域由多个服务器进行管理的,因此,移动终端可以按照屏幕被划分后的至少两个显示区域,自动对当前在屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。例如,可以根据第一虚拟灯光的当前位置,将位于同一显示区域内的第一虚拟灯光自动分为一组,或者,也可以根据用户的选择操作,由用户根据需要的数量任意选择第一虚拟灯光分为一组,并关联至对应的显示区域。
本实施例中,通过将第一虚拟灯光按照屏幕被划分后的显示区域进行分组,可以更好地控制和调整照明效果,每组第一虚拟灯光只需要聚焦于特定的显示区域,就可以为该区域提供最佳的照明效果,从而增强视觉体验。并且,可以增加用户与虚拟场景之间的交互性,用户可以更直观地看到各组第一虚拟灯光影响的范围和效果,从而更容易调整和控制第一虚拟灯光,能够提高用户的参与度和使用体验。另外,可以减少用户的操作步骤和学习成本,降低使用门槛,无需手动设置每个第一虚拟灯光的灯光参数,移动终端可以根据屏幕的各个显示区域自动调整第一虚拟灯光的分组和属性,从而提高虚拟灯光调整的自动化程度。
可以理解的是,后续如果用户在移动终端中通过调节控件对第一虚拟灯光的位姿信息进行调节导致第一虚拟灯光照射的显示区域有所变化,则移动终端可以按照调节后的第一虚拟灯光照射的显示区域,重新对调节后的第一虚拟灯光进行分组,使得每组第一虚拟灯光对应屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。
在第三种可能的实现方式中,虚拟场景包含虚拟对象,虚拟对象是指通过计算机生成的、不存在于现实世界中的物体或实体;可以是虚拟世界中的角色、道具、建筑物、动物以及景观等。考虑到对于虚拟场景中的不同虚拟对象的光影需求也有所不同,因此,移动终端可以按照在屏幕显示的虚拟场景中的各个虚拟对象,对当前在屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。例如,可以根据第一虚拟灯光的当前位置和当前角度,将照射同一虚拟对象的第一虚拟灯光自动分为一组,或者,也可以根据用户的选择操作,由用户根据需要的数量任意选择第一虚拟灯光分为一组,并关联至对应的虚拟对象。
本实施例中,按照虚拟对象对第一虚拟灯光进行分组的方式,可以增强虚拟场景的视觉效果和沉浸感,每个虚拟对象都能够获得最佳的照明效果和光影表现,从而更加逼真和生动;可以让用户更直观地感受到虚拟场景中的每个虚拟对象的特点和特色,有助于提高用户的参与度和使用体验,让用户更加容易理解虚拟场景中的信息和效果;可以实现精细化的灯光控制,用户可以更具体地调整和优化每个虚拟对象的照明效果和光影表现,以满足各种不同的需求和场景;自动根据虚拟对象进行灯光分组和光影效果的分配,可以减轻用户的设置负担,提高灯光调整的便利性和自动化程度。
可以理解的是,后续如果用户在移动终端中通过调节控件对第一虚拟灯光的位姿信息进行调节导致第一虚拟灯光照射的虚拟对象发生了变更,则移动终端可以按照调节后的第一虚拟灯光照射的虚拟对象,重新对调节后的第一虚拟灯光进行分组,使得每组第一虚拟灯光对应虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。
在一些实施例中,考虑到虚拟拍摄中的摄像机的位姿(位置和姿态)发生变化时,可能会使得摄像机在位姿变化前后拍摄得到的图像帧的光影效果不一致。这是因为虚拟场景中由第一虚拟灯光形成的光影效果是根据摄像机所处的位置和方向进行计算和渲染的,当摄像机的位姿发生变化时,原本适用于旧位姿的灯光参数可能无法适用于新位姿,从而导致光影效果出现不一致的情况。
为了适应于摄像机的位姿变化,可以在移动终端中预存摄像机的不同位姿信息与虚拟场景中的第一虚拟灯光的灯光参数之间的第一映射关系,第一映射关系用于使摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。通过建立摄像机位姿与第一虚拟灯光参数之间的第一映射关系,可以确保在不同位姿下拍摄得到的图像帧的光影效果保持一致,这样可以提高虚拟场景的真实感和连贯性,使用户在移动终端上观看时获得更加一致的视觉体验。
示例性的,移动终端能够与摄像机通信连接,摄像机安装有位姿传感器(如图2所示的位姿追踪器),用于检测摄像机的位姿并将其反馈给移动终端。
则在摄像机的位姿发生变化时,移动终端可以响应于摄像机的位姿发生变化,根据摄像机的变化后的位姿信息和第一映射关系,获取虚拟场景中的第一虚拟灯光的目标灯光参数;所述目标灯光参数用于使所述屏幕显示融合有所述与摄像机的变化后的位姿适配的第一虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的目标灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的目标灯光参数渲染出与摄像机的变化后的位姿适配的第一虚拟灯光,并控制屏幕显示融合有与摄像机的变化后的位姿适配的第一虚拟灯光的虚拟场景。
本实施例中,当摄像机的位姿发生变化时,根据新的位姿信息和第一映射关系,可以实时获取虚拟灯光的目标参数,可以使渲染设备根据新的位姿适配灯光效果,实现灯光的实时变化和调整,用户无需等待重新计算光影效果,即可获得适应新位姿的光影渲染结果。并且通过预存摄像机位姿信息和第一虚拟灯光的灯光参数之间的第一映射关系,可以减少运行时的计算复杂度和资源消耗,只需根据位姿变化获取第一虚拟灯光的目标灯光参数并发送给渲染设备,无需每次都重新计算光影信息,从而提高系统的效率和性能。
其中,“响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数”的步骤和“响应于所述摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述虚拟场景中的第一虚拟灯光的目标灯光参数”的执行顺序不做限制,例如,可在用户通过交互界面调节第一虚拟灯光的灯光参数之前、之后或同时,根据摄像机的变化后的位姿信息确定第一虚拟灯光的目标灯光参数,可将目标灯光参数与用户调节后的灯光参数相融合,比如,利用目标灯光参数来修正或替代用户调节后的灯光参数,或者利用用户调节后的灯光参数来修正或替代目标灯光参数,或者基于预设算法利用二者计算出融合后的灯光参数,本申请对此不做限制。
在一些实施例中,移动终端预存有不同虚拟场景对应的第一虚拟灯光的灯光参数。用户可以根据实际拍摄需要进行选择。例如移动终端上有三种不同的虚拟场景:室内场景、户外白天场景和夜晚场景。(1)室内场景:第一虚拟灯光的灯光参数可以设置为柔和而均匀的光线。(2)户外白天场景:第一虚拟灯光的灯光参数可以设置为强烈而明亮的光线。(3)夜晚场景:第一虚拟灯光的灯光参数可以设置为柔和的背景灯光。
在移动终端预存有不同虚拟场景对应的第一虚拟灯光的灯光参数的情况下,可以在移动终端的交互界面中,展示用于选择虚拟场景的选择控件。例如可以一个虚拟场景对应一个选择控件,某个选择控件被触发则表示该选择控件对应的虚拟场景被选中。例如也可以是多个虚拟场景对应一个选择控件,该选择控件为输入控件,用户可以根据实际需要输入选中的虚拟场景对应的标识信息,例如编号或者名称。
进而移动终端响应于选择控件被触发,获取选中的虚拟场景对应的第一虚拟灯光的目标灯光参数。示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的目标灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的目标灯光参数渲染出第一虚拟灯光,并控制屏幕显示融合有第一虚拟灯光的虚拟场景。本实施例中,通过预存不同虚拟场景对应的第一虚拟灯光的灯光参数,移动终端可以根据拍摄环境的需求,自动选择适合的灯光参数进行调节,从而获得更好的拍摄效果。这样,即使在不同的虚拟场景下,用户也可以方便地获得所需的光影效果,提升拍摄的质量和体验,无需用户从零开始调节第一虚拟灯光的灯光参数,能够大大减少人工调节的工作量,不仅提高了拍摄效率,还减少了用户负担。
在一些实施例中,请参阅图8(图8示出了虚拟拍摄系统包括三块屏幕),考虑除了虚拟场景中的第一虚拟灯光之后,虚拟拍摄系统所在的现实场景也会布置一些实体灯光,而实体灯光也会对虚拟场景中的光影效果造成影响。可以理解的是,实体灯光可以是固定设置在某一位置处的灯光设备和由用户(比如说演员)手持的灯光设备中的至少一种,本实施例对此不做任何限制。
举个例子,如果虚拟场景为黑夜或者昏暗环境,在现实场景中演员手持手电筒照射到虚拟场景中,那么虚拟场景中对应的区域会出现光斑、阴影等光影效果。
因此,为了提高虚拟场景的真实感和沉浸感,移动终端还用于与虚拟拍摄系统所在的现实场景中的实体灯光通信连接。移动终端可以获取虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;然后根据屏幕的位姿信息以及实体灯光的位姿信息和显示属性,创建至少一个用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光,并确定第二虚拟灯光的灯光参数,所述第二虚拟灯光的灯光参数用于以使所述屏幕显示融合有所述第二虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第二虚拟灯光的灯光参数发送给渲染设备,以使渲染设备根据第二虚拟灯光的灯光参数渲染出第二虚拟灯光,并控制屏幕显示融合有第二虚拟灯光的虚拟场景。本实施例中,现实场景中的实体灯光与虚拟场景中的光影效果相结合,可以提高虚拟拍摄中的摄像机所拍摄的图像帧的真实感,增强用户的沉浸感。并且通过移动终端与现实场景中的实体灯光通信连接,并在虚拟场景中模拟实体灯光的光影效果,可以实现对虚拟场景中的光影效果进行更加细致的调整和控制,从而满足不同用户的需求。
具体来说,移动终端在获取虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性之后,首先基于屏幕的位姿信息以及实体灯光的位姿信息之间的差异,确定屏幕与实体灯光之间的距离以及实体灯光相对于屏幕的角度,进而基于屏幕与实体灯光之间的距离、实体灯光相对于屏幕的角度、以及实体灯光的显示属性,确定用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的至少一种灯光参数。其中,可预设屏幕与实体灯光之间的距离、实体灯光相对于屏幕的角度、以及实体灯光的显示属性中的一个或多个,与第二虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的一个或多个之间的对应关系,从而根据上述角度、距离、显示属性等,得到第二虚拟灯光的灯光参数。示例性的,为了进一步提高虚拟场景的真实感和沉浸感,当实体灯光的灯光参数发生变化时,则虚拟场景中用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光也应相应的变化,以保持与现实场景的一致性。
延用上例,在现实场景中演员手持手电筒照射到虚拟场景中并且逐渐走进用于展示虚拟场景的屏幕时,虚拟场景中用于模拟手电筒在虚拟场景中的光影效果的第二虚拟灯光会更亮,反之,在现实场景中演员手持手电筒照射到虚拟场景中并且逐渐远离用于展示虚拟场景的屏幕时,虚拟场景中用于模拟手电筒在虚拟场景中的光影效果的第二虚拟灯光会更暗。
在另一个例子中,对于放置在固定位置处的实体灯光,如果改变该实体灯光的颜色,虚拟场景中用于模拟该实体灯光在虚拟场景中的光影效果的第二虚拟灯光也会相应地改变。
也就是说,移动终端可以响应于虚拟拍摄系统所在的现实场景中的实体灯光的灯光参数发生变化,获取实体灯光的变化后的灯光参数;根据实体灯光的变化后的灯光参数,对第二虚拟灯光的灯光参数进行调节,第二虚拟灯光的调节后的灯光参数用于使屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第二虚拟灯光的调节后的灯光参数发送给渲染设备,以使渲染设备根据第二虚拟灯光的调节后的参数渲染出调节后的第二虚拟灯光,并控制屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。本实施例中,按照现实场景中灯光参数发生变化的实体灯光来同步调节虚拟场景中的第二虚拟灯光,能够更准确地模拟真实光照条件,使得虚拟场景更好地配合现场场景的实际情况,从而增强虚拟场景的真实感;虚拟场景中的光影变化与现实场景中的实体灯光保持一致,这种一致性可以提供更加自然和连贯的视觉体验,提升沉浸感。
可利用渲染设备,基于第二虚拟灯光的灯光参数和第一虚拟灯光的灯光参数分别独立地进行渲染,使得第二虚拟灯光的灯光参数和第一虚拟灯光的灯光参数带来的光影效果在屏幕展现的虚拟场景中相互叠加。
示例性的,实体灯光的灯光参数包括位姿信息和显示属性中的至少一种,位姿信息包括光源位置和/或光源角度,显示属性包括光源类型、颜色、光照强度以及亮度中的至少一种;可依据实际应用场景进行具体设置,本实施例对此不做任何限制。
示例性,若实体灯光的灯光参数包括位姿信息,实体灯光可以搭载有驱动装置,用户可以通过移动终端来控制驱动装置运动,从而调节实体灯光的光源位置和光源角度中的至少一种。
示例性的,若实体灯光的灯光参数包括显示属性,实体灯光可以搭载用于调节显示属性的处理器,如中央处理单元(Central Processing Unit,CPU)、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific IntegratedCircuit,ASIC)或者现成可编程门阵列(Field-Programmable Gate Array,FPGA)等,可以通过移动终端来向实体灯光中的处理器发送相关调节或控制指令,以使得处理器对实体灯光中的颜色、光照强度以及亮度等显示属性进行调节。
这里对实体灯光的灯光参数发生变化的可能情况进行示例性说明:
在第一种可能的实现方式中,用户可以对实体灯光的灯光参数进行调节。为了便于用户操作,可以在移动终端的交互界面中,展示用于调节虚拟拍摄系统所在的现实场景中的实体灯光的第三调节控件,第三调节控件用于调节实体灯光的至少一种灯光参数,用户可以根据实际需要操作第三调节控件;进而移动终端响应于第三调节控件被触发,获取实体灯光的被调节后的灯光参数,并按照实体灯光的被调节后的灯光参数对实体灯光进行调节。并且按照上述方式同步调节虚拟场景中用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光,从而增强虚拟场景的真实感。
可以理解的是,每个实体灯光对应的第三调节控件可以有一个或者多个一个。比如各个实体灯光对应的第三调节控件的数量有多个,每个第三调节控件用于调节该实体灯光的其中一种灯光参数。本说明书对于第三调节控件的具体操作形式也不做任何限制,可以是点击、滑动、拖动或者长按等操作,但不限于此。
举个例子,请参阅图9、图10和图11示出的交互界面,图9、图10和图11所示的交互界面中的左侧示出了虚拟拍摄系统所在的现实场景中的所有实体灯光,当用户选中其中一个实体灯光后,交互界面的右侧会展示用于调节该实体灯光的第三调节控件,从而用于调节该实体灯光的至少一种灯光参数。不同的实体灯光可对应有不同的需要调节的灯光参数,相应地,对应有不同的第三调节控件。
请参阅图9,在用户选中“实体灯光-1”时,交互界面右侧展示了用于调节“实体灯光-1”的第三调节控件,可以从HSI模式下调节实体灯光的色调和饱和度。HSI(HueSatrationntenst HSI)模型用H、S、I三参数描述颜色特性,其中H定义颜色的波长,称为色调;S表示颜色的深浅程度,称为饱和度;I表示强度或亮度。
请参阅图10,在用户选中“实体灯光-2”时,交互界面右侧展示了用于调节“实体灯光-2”的第三调节控件,可以从RGBW模式下调节实体灯光的红色、绿色、蓝色和白色强度级别。RGBW是一种颜色模式,它将红、绿、蓝和白四种颜色的光谱组合在一起,以形成更丰富的色彩。
请参阅图11,在用户选中“实体灯光-3”时,交互界面右侧展示了用于调节“实体灯光-3”的第三调节控件,可以调节实体灯光的色温。色温度在3000K左右时,光色偏黄。色温度在5000K以上时,光色偏蓝。
可以理解的是,图9、图10以及图11中的第三调节控件用于调节的灯光参数仅为举例说明,并不构成对灯光参数的限制。
在另一种可能的实现方式中,考虑到实体灯光的灯光参数是根据摄像机所处的位置和方向进行设置的,当摄像机的位姿发生变化时,原本适用于旧位姿的实体灯光的灯光参数可能无法适用于新位姿,从而导致摄像机在位姿变化前后拍摄得到的图像帧的光影效果不一致。
因此,为了适应于摄像机的位姿变化,可以在移动终端中预存摄像机的不同位姿信息与实体灯光的灯光参数之间的第二映射关系,第二映射关系用于使摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。
则在虚拟拍摄中的摄像机的位姿(位置和姿态中的至少一种)发生变化时,移动终端响应于拍摄屏幕的成像装置摄像机的位姿发生变化,根据成像装置摄像机的变化后的位姿信息和第二映射关系,获取实体灯光的目标灯光参数,根据实体灯光的目标灯光参数对实体灯光进行调节。并且按照上述方式同步调节虚拟场景中用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光,从而增强虚拟场景的真实感。本实施例中,通过上述调节方式,使得摄像机在不同的角度或位置拍摄时,实体灯光的亮度、颜色和投射效果等都能够保持一致性,提供更加真实和统一的光照效果。并且通过预存第二映射关系并自动调节实体灯光,可以简化用户的操作流程,用户无需手动调节实体灯光的参数,也不需要针对不同位姿进行反复试错调整,移动终端能够自动根据摄像机位姿变化和第二映射关系计算出目标灯光参数,并直接调节实体灯光,减轻了用户的操作负担,并提高了操作的便捷性和效率。
在第三种可能的实现方式中,考虑到拍摄对象的位姿发生变化,原本适用于拍摄对象的旧位姿的实体灯光的灯光参数可能无法适用于拍摄对象(例如屏幕前的演员)的新位姿,也会使得摄像机在拍摄对象的位姿变化前后拍摄得到的图像帧的光影效果不一致。
示例性的,拍摄对象可以携带有位姿传感器,用于检测拍摄对象的位姿信息。该位姿传感器与移动终端通信连接,并将检测到的拍摄对象的位姿信息发送给移动终端,从而可以让移动终端获知拍摄对象的位姿是否发生变化,并相应地对实体灯光和第二虚拟灯光进行控制。
在拍摄对象的位姿(位置和姿态中的至少一种)发生变化时,移动终端可以响应于拍摄对象的位姿发生变化,根据拍摄对象的变化后的位姿信息和实体灯光的位姿信息,确定拍摄对象与实体灯光之间的距离和相对角度;根据拍摄对象与实体灯光之间的距离和相对角度,获取实体灯光的第二目标灯光参数,根据实体灯光的第二目标灯光参数对实体灯光进行调节。并且按照上述方式同步调节虚拟场景中用于模拟实体灯光在虚拟场景中的光影效果的第二虚拟灯光,从而增强虚拟场景的真实感。
其中,拍摄对象与实体灯光之间的距离和相对角度与第二目标灯光参数之间可建立有预设对应关系(例如映射表或函数关系),从而可根据该对应关系,确定与距离和相对角度对应的第二目标灯光参数。
本实施例中,在拍摄对象的位姿发生变化时相应地对实体灯光和第二虚拟灯光进行调节,能够使不同位姿的拍摄对象在图像帧中的光影效果保持一致,有助于增强观看体验,使得拍摄结果更加自然和连贯。通过移动终端在感知到拍摄对象的位姿变化时,自动调节实体灯光和第二虚拟灯光,能够大大减少人工干预和调节的工作量,不仅提高了拍摄效率,还减少了操作人员的负担。
以上实施方式中的各种技术特征可以任意进行组合,只要特征之间的组合不存在冲突或矛盾,但是限于篇幅,未进行一一描述,因此上述实施方式中的各种技术特征的任意进行组合也属于本说明书公开的范围。
图12是一示例性实施例提供的一种移动终端的示意结构图。请参考图12,在硬件层面,该移动终端包括处理器202、内部总线204、网络接口206、内存208以及非易失性存储器210,当然还可能包括其他业务所需要的硬件。本说明书一个或多个实施例可以基于软件方式来实现,比如由处理器202从非易失性存储器210中读取对应的计算机程序到内存208中然后运行。当然,除了软件实现方式之外,本说明书一个或多个实施例并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
请参考图13,针对虚拟拍摄系统的灯光控制装置可以应用于如图12所示的移动终端中,以实现本说明书的技术方案。其中,虚拟拍摄系统包括至少一个屏幕,该灯光控制装置可以包括:
控件展示模块301,用于在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数。
灯光调节模块302,用于响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一些实施例中,在所述屏幕显示的虚拟场景中的所有第一虚拟灯光能够被划分为至少两组;所述调节控件包括针对于各个第一虚拟灯光的第一调节控件和针对于各组第一虚拟灯光的第二调节控件;其中,所述第一调节控件用于对单个第一虚拟灯光的灯光参数进行调节节;所述第二调节控件用于对一组第一虚拟灯光的灯光参数进行调节。
在一些实施例中,所述装置还包括分组模块,用于响应于针对当前在所述屏幕显示的虚拟场景中的第一虚拟灯光的分组指令,将被选中的至少一个第一虚拟灯光划分为一组。
在一些实施例中,所述装置还包括分组模块,用于按照所述屏幕被划分后的至少两个显示区域,对当前在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。
在一些实施例中,所述装置还包括分组模块,用于对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
按照在所述屏幕显示的虚拟场景中的各个虚拟对象,对当前在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。
在一些实施例中,所述移动终端预存摄像机的不同位姿信息与所述虚拟场景中的第一虚拟灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。
所述灯光调节模块302还用于:响应于所述摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述虚拟场景中的第一虚拟灯光的目标灯光参数;所述目标灯光参数用于使所述屏幕显示融合有所述与摄像机的变化后的位姿适配的第一虚拟灯光的虚拟场景。
在一些实施例中,所述移动终端还用于与所述虚拟拍摄系统所在的现实场景中的实体灯光通信连接。
所述装置还包括第二虚拟灯光创建模块,用于获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;根据所述屏幕的位姿信息以及所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第二虚拟灯光,并确定所述第二虚拟灯光的灯光参数,所述第二虚拟灯光的灯光参数用于以使所述屏幕显示融合有所述第二虚拟灯光的虚拟场景。
在一些实施例中,所述灯光参数包括位姿信息和显示属性中的至少一种;
所述位姿信息包括光源位置、光源角度中的至少一种,所述显示属性光源类型、颜色、光照强度以及亮度中的至少一种。
上述装置中各个模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
在一些实施例中,本说明书实施例还提供了一种移动终端,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器通过运行所述可执行指令以实现上述中任一项所述的方法。
在一些实施例中,本说明书实施例还提供了一种计算机可读存储介质,其上存储有计算机指令,该指令被处理器执行时实现如上述任一项所述方法的步骤。
需要说明的是,本说明书所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
在一个典型的配置中,计算机包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带、磁盘存储、量子存储器、基于石墨烯的存储介质或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
在本说明书一个或多个实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
以上所述仅为本说明书一个或多个实施例的较佳实施例而已,并不用以限制本说明书一个或多个实施例,凡在本说明书一个或多个实施例的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本说明书一个或多个实施例保护的范围之内。
Claims (10)
1.一种针对虚拟拍摄系统的灯光控制方法,其特征在于,所述虚拟拍摄系统包括至少一个屏幕,所述方法应用于移动终端,所述方法包括:
在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数;
响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
2.根据权利要求1所述的方法,其特征在于,在所述屏幕显示的虚拟场景中的所有第一虚拟灯光能够被划分为至少两组;
所述调节控件包括针对于各个第一虚拟灯光的第一调节控件和针对于各组第一虚拟灯光的第二调节控件;
其中,所述第一调节控件用于对单个第一虚拟灯光的灯光参数进行调节;
所述第二调节控件用于对一组第一虚拟灯光的灯光参数进行调节。
3.根据权利要求2所述的方法,其特征在于,对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
按照所述屏幕被划分后的至少两个显示区域,对当前在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。
4.根据权利要求2所述的方法,其特征在于,对所述屏幕显示的虚拟场景中的所有第一虚拟灯光进行分组,包括:
按照在所述屏幕显示的虚拟场景中的各个虚拟对象,对当前在所述屏幕显示的虚拟场景中的第一虚拟灯光进行分组;每组第一虚拟灯光对应所述虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。
5.根据权利要求1所述的方法,其特征在于,所述移动终端预存摄像机的不同位姿信息与所述虚拟场景中的第一虚拟灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致;
所述方法还包括:
响应于所述摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述虚拟场景中的第一虚拟灯光的目标灯光参数;所述目标灯光参数用于使所述屏幕显示融合有与摄像机的变化后的位姿适配的第一虚拟灯光的虚拟场景。
6.根据权利要求1所述的方法,其特征在于,所述移动终端还用于与所述虚拟拍摄系统所在的现实场景中的实体灯光通信连接;
所述方法还包括:
获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;
根据所述屏幕的位姿信息以及所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第二虚拟灯光,并确定所述第二虚拟灯光的灯光参数,所述第二虚拟灯光的灯光参数用于使所述屏幕显示融合有所述第二虚拟灯光的虚拟场景。
7.根据权利要求1-6中任一项所述的方法,其特征在于,所述灯光参数包括位姿信息和显示属性中的至少一种;
所述位姿信息包括光源位置、光源角度中的至少一种,所述显示属性光源类型、颜色、光照强度以及亮度中的至少一种。
8.一种针对虚拟拍摄系统的灯光控制装置,其特征在于,所述虚拟拍摄系统包括至少一个屏幕,所述装置应用于移动终端,所述装置包括:
控件展示模块,用于在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第一虚拟灯光的调节控件;所述调节控件用于调节第一虚拟灯光的至少一种灯光参数;
灯光调节模块,用于响应于所述调节控件被触发,获取所述第一虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
9.一种移动终端,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器通过运行所述可执行指令以实现如权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,该指令被处理器执行时实现如权利要求1至7中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311387260.4A CN117424970B (zh) | 2023-10-23 | 2023-10-23 | 灯光控制方法、装置、移动终端及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311387260.4A CN117424970B (zh) | 2023-10-23 | 2023-10-23 | 灯光控制方法、装置、移动终端及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117424970A true CN117424970A (zh) | 2024-01-19 |
CN117424970B CN117424970B (zh) | 2024-09-17 |
Family
ID=89522420
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311387260.4A Active CN117424970B (zh) | 2023-10-23 | 2023-10-23 | 灯光控制方法、装置、移动终端及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117424970B (zh) |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030202120A1 (en) * | 2002-04-05 | 2003-10-30 | Mack Newton Eliot | Virtual lighting system |
KR20110107545A (ko) * | 2010-03-25 | 2011-10-04 | 에스케이텔레콤 주식회사 | 광원 인식을 이용한 증강현실 시스템 및 그 방법과, 이를 구현하기 위한 증강현실 처리 장치 |
JP2013003848A (ja) * | 2011-06-16 | 2013-01-07 | Nippon Telegr & Teleph Corp <Ntt> | 仮想物体表示装置 |
US20200271922A1 (en) * | 2017-03-20 | 2020-08-27 | Chengdu Idealsee Technology Co., Ltd. | Projection device and spatial imaging method |
CN112040092A (zh) * | 2020-09-08 | 2020-12-04 | 杭州时光坐标影视传媒股份有限公司 | 一种实时虚拟场景led拍摄系统及方法 |
JP2022030844A (ja) * | 2020-08-07 | 2022-02-18 | 株式会社スクウェア・エニックス | 情報処理プログラム、情報処理装置及び情報処理方法 |
CN114913310A (zh) * | 2022-06-10 | 2022-08-16 | 广州澄源电子科技有限公司 | 一种led虚拟场景灯光控制方法 |
CN114915699A (zh) * | 2022-05-13 | 2022-08-16 | 上海傲驰广告文化集团有限公司 | 一种基于ue系统的虚拟影棚模拟方法及系统 |
CN115970274A (zh) * | 2022-11-30 | 2023-04-18 | 网易(杭州)网络有限公司 | 灯光参数调整方法、装置、存储介质及电子设备 |
CN116127124A (zh) * | 2022-12-30 | 2023-05-16 | 腾讯音乐娱乐科技(深圳)有限公司 | 虚拟场景下的灯光动态显示方法、计算机设备和产品 |
WO2023116396A1 (zh) * | 2021-12-23 | 2023-06-29 | 北京字跳网络技术有限公司 | 一种渲染显示方法、装置、计算机设备及存储介质 |
CN116506993A (zh) * | 2022-09-09 | 2023-07-28 | 腾讯科技(深圳)有限公司 | 灯光控制方法及存储介质 |
US20230289049A1 (en) * | 2020-11-16 | 2023-09-14 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for displaying virtual prop in real environment image, and storage medium |
CN116912817A (zh) * | 2023-05-30 | 2023-10-20 | 神力视界(深圳)文化科技有限公司 | 三维场景模型拆分方法、装置、电子设备和存储介质 |
-
2023
- 2023-10-23 CN CN202311387260.4A patent/CN117424970B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030202120A1 (en) * | 2002-04-05 | 2003-10-30 | Mack Newton Eliot | Virtual lighting system |
KR20110107545A (ko) * | 2010-03-25 | 2011-10-04 | 에스케이텔레콤 주식회사 | 광원 인식을 이용한 증강현실 시스템 및 그 방법과, 이를 구현하기 위한 증강현실 처리 장치 |
JP2013003848A (ja) * | 2011-06-16 | 2013-01-07 | Nippon Telegr & Teleph Corp <Ntt> | 仮想物体表示装置 |
US20200271922A1 (en) * | 2017-03-20 | 2020-08-27 | Chengdu Idealsee Technology Co., Ltd. | Projection device and spatial imaging method |
JP2022030844A (ja) * | 2020-08-07 | 2022-02-18 | 株式会社スクウェア・エニックス | 情報処理プログラム、情報処理装置及び情報処理方法 |
CN112040092A (zh) * | 2020-09-08 | 2020-12-04 | 杭州时光坐标影视传媒股份有限公司 | 一种实时虚拟场景led拍摄系统及方法 |
US20230289049A1 (en) * | 2020-11-16 | 2023-09-14 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for displaying virtual prop in real environment image, and storage medium |
WO2023116396A1 (zh) * | 2021-12-23 | 2023-06-29 | 北京字跳网络技术有限公司 | 一种渲染显示方法、装置、计算机设备及存储介质 |
CN114915699A (zh) * | 2022-05-13 | 2022-08-16 | 上海傲驰广告文化集团有限公司 | 一种基于ue系统的虚拟影棚模拟方法及系统 |
CN114913310A (zh) * | 2022-06-10 | 2022-08-16 | 广州澄源电子科技有限公司 | 一种led虚拟场景灯光控制方法 |
CN116506993A (zh) * | 2022-09-09 | 2023-07-28 | 腾讯科技(深圳)有限公司 | 灯光控制方法及存储介质 |
CN115970274A (zh) * | 2022-11-30 | 2023-04-18 | 网易(杭州)网络有限公司 | 灯光参数调整方法、装置、存储介质及电子设备 |
CN116127124A (zh) * | 2022-12-30 | 2023-05-16 | 腾讯音乐娱乐科技(深圳)有限公司 | 虚拟场景下的灯光动态显示方法、计算机设备和产品 |
CN116912817A (zh) * | 2023-05-30 | 2023-10-20 | 神力视界(深圳)文化科技有限公司 | 三维场景模型拆分方法、装置、电子设备和存储介质 |
Non-Patent Citations (1)
Title |
---|
温广权;: "基于AI技术的增强型虚拟演播室应用", 广播与电视技术, no. 01, 15 January 2020 (2020-01-15) * |
Also Published As
Publication number | Publication date |
---|---|
CN117424970B (zh) | 2024-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104113688B (zh) | 一种图像处理方法及其电子设备 | |
CN108525298B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
JP5825561B2 (ja) | インタラクティブな照明制御システム及び方法 | |
CN108693967A (zh) | 虚拟现实与现实世界之间的转变 | |
AU2014202744A1 (en) | System and method for re-configuring a lighting arrangement | |
CN111869330B (zh) | 基于一种或多种灯光设置渲染动态灯光场景 | |
CN116506993A (zh) | 灯光控制方法及存储介质 | |
JP2014176080A (ja) | 照明装置の制御方法及びそのコンピュータプログラム | |
US11887251B2 (en) | System and techniques for patch color correction for an immersive content production system | |
CN114882167B (zh) | 一种基于关联元素的鞋体logo设计方法及装置 | |
WO2023116396A1 (zh) | 一种渲染显示方法、装置、计算机设备及存储介质 | |
KR101791603B1 (ko) | 잡음을 이용하여 컬러 객체를 검출하는 방법 및 잡음을 이용하여 발광 장치를 검출하는 시스템 | |
CN111340684B (zh) | 一种游戏中图形处理的方法和装置 | |
US11978154B2 (en) | System and techniques for lighting adjustment for an immersive content production system | |
CN116485704A (zh) | 光照信息处理方法、装置、电子设备及存储介质 | |
CN117424970B (zh) | 灯光控制方法、装置、移动终端及存储介质 | |
US20200257831A1 (en) | Led lighting simulation system | |
AU2022202424B2 (en) | Color and lighting adjustment for immersive content production system | |
US20220342488A1 (en) | Light capture device | |
CN117424969A (zh) | 灯光控制方法、装置、移动终端及存储介质 | |
CN116310052A (zh) | 基于多光源的画面渲染方法及相关设备 | |
CN112040596B (zh) | 虚拟空间灯光控制方法、计算机可读存储介质和系统 | |
CN108604427A (zh) | 控制方法、计算机可读介质和控制器 | |
US20220343562A1 (en) | Color and lighting adjustment for immersive content production system | |
CN113645737B (zh) | 一种控制方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |