CN117424969A - 灯光控制方法、装置、移动终端及存储介质 - Google Patents

灯光控制方法、装置、移动终端及存储介质 Download PDF

Info

Publication number
CN117424969A
CN117424969A CN202311383078.1A CN202311383078A CN117424969A CN 117424969 A CN117424969 A CN 117424969A CN 202311383078 A CN202311383078 A CN 202311383078A CN 117424969 A CN117424969 A CN 117424969A
Authority
CN
China
Prior art keywords
light
virtual
entity
lamplight
parameters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311383078.1A
Other languages
English (en)
Inventor
曹祎冰
范文龄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenli Vision Shenzhen Cultural Technology Co ltd
Original Assignee
Shenli Vision Shenzhen Cultural Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenli Vision Shenzhen Cultural Technology Co ltd filed Critical Shenli Vision Shenzhen Cultural Technology Co ltd
Priority to CN202311383078.1A priority Critical patent/CN117424969A/zh
Publication of CN117424969A publication Critical patent/CN117424969A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)

Abstract

本说明书一个或多个实施例提供一种灯光控制方法、装置、移动终端及存储介质。虚拟拍摄系统包括至少一个屏幕,屏幕用于显示虚拟场景;方法包括:在移动终端的交互界面中,展示用于调节实体灯光的第一调节控件;响应于第一调节控件被触发,获取实体灯光的被调节后的灯光参数,并按照实体灯光的被调节后的参数对实体灯光进行调节;以及根据实体灯光的被调节后的灯光参数,对用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,第一虚拟灯光的调节后的灯光参数用于使屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。实现在调节实体灯光时,自动联动调节第一虚拟灯光,提升虚拟场景的真实性。

Description

灯光控制方法、装置、移动终端及存储介质
技术领域
本说明书一个或多个实施例涉及虚拟拍摄技术领域,尤其涉及一种针对虚拟拍摄系统的灯光控制方法、装置、移动终端及计算机可读存储介质。
背景技术
传统影视制作为了满足拍摄需求,需要花费大量的时间和人力来挑选拍摄地点,制作道具,搭建拍摄场景。而虚拟拍摄(或虚拟制片)技术,通过在搭建的LED屏幕上渲染出的视效画面代替真实置景,减小了影视拍摄对地点和布景的依赖,降低了影视拍摄的成本和制作周期,具体来说,虚拟拍摄(或虚拟制片)技术是指一系列计算机辅助制片和可视化电影制作方法,在虚拟制片的拍摄现场,有至少一个屏幕用于显示虚拟场景,在屏幕前方有实际的制景道具,虚拟拍摄中的摄像机会同时拍摄屏幕和屏幕前制景,得到融合了屏幕和屏幕前制景的画面的视频。
在虚拟拍摄中的光影效果是影响拍摄成片的重要因素之一,因此,有必要提供一种灯光控制方法,以实现对虚拟制片的拍摄现场的灯光进行控制。
发明内容
有鉴于此,本说明书一个或多个实施例提供一种针对虚拟拍摄系统的灯光控制方法、装置、移动终端及计算机可读存储介质。
为实现上述目的,本说明书一个或多个实施例提供技术方案如下:
根据本说明书一个或多个实施例的第一方面,提出了一种针对虚拟拍摄系统的灯光控制方法,所述虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;所述方法应用于移动终端,所述方法包括:
在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节所述实体灯光的至少一种灯光参数;
响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及
根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一种实现方式中,所述灯光参数包括位姿信息和显示属性中的至少一种;
所述位姿信息包括光源位置和/或光源角度;所述显示属性包括光源类型、颜色、光照强度以及亮度中的至少一种。
在一种实现方式中,在所述移动终端的交互界面中,还包括:
获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;
据所述屏幕的位姿信息、所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光,并确定所述第一虚拟灯光的灯光参数,所述第一虚拟灯光的灯光参数用于使所述屏幕显示融合有所述第一虚拟灯光的虚拟场景。
在一种实现方式中,所述移动终端预存摄像机的不同位姿信息与所述实体灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致;
所述方法还包括:
响应于拍摄所述屏幕的摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述实体灯光的第一目标灯光参数;
根据所述实体灯光的第一目标灯光参数对所述实体灯光进行调节;以及
根据所述实体灯光的第一目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一种实现方式中,所述方法还包括:
响应于拍摄对象的位姿发生变化,根据所述拍摄对象的变化后的位姿信息和所述实体灯光的位姿信息,确定所述拍摄对象与所述实体灯光之间的距离和角度;
根据拍摄对象与所述实体灯光之间的距离和角度,获取所述实体灯光的第二目标灯光参数;
根据所述实体灯光的第二目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第二目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景;
其中,所述第二目标灯光参数用于使摄像机对处于不同位姿的拍摄对象进行拍摄时得到的不同图像帧的光影效果保持一致。
在一种实现方式中,所述移动终端预存有不同拍摄场景对应的实体灯光的灯光参数;
所述方法还包括:
响应于对所述不同拍摄场景的选择指令,获取选中的拍摄场景对应的实体灯光的第三目标灯光参数;
根据所述实体灯光的第三目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第三目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一种实现方式中,还包括:
在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第二虚拟灯光的第二调节控件;所述第二调节控件用于调节第二虚拟灯光的至少一种灯光参数;
响应于所述调节控件被触发,获取所述第二虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。
根据本说明书一个或多个实施例的第二方面,提出了一种针对虚拟拍摄系统的灯光控制装置,所述虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;所述装置应用于移动终端,所述装置包括:
控件展示模块,用于在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节实体灯光的至少一种灯光参数;
灯光调节模块,用于响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
根据本说明书实施例的第三方面,提供一种移动终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器执行所述可执行指令时,用于实现第一方面所述的方法。
根据本说明书实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述任一项所述方法的步骤。
本说明书的实施例提供的技术方案可以包括以下有益效果:
本说明书实施例中,实现用户可以通过操作移动终端的交互界面中的第一调节控件,以实现对实体灯光进行控制,操作简单便捷,移动终端可以基于实体灯光的被调节后的灯光参数对实体灯光进行调节,考虑到实体灯光也会对虚拟场景中的光影效果造成影响,同时联动调节用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光的灯光参数,从而能够更准确地模拟真实光照条件,使得虚拟场景更好地配合现场场景的实际情况,从而增强虚拟场景的真实感;虚拟场景中的光影变化与现实场景中的实体灯光保持一致,这种一致性可以提供更加自然和连贯的视觉体验,提升沉浸感。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本说明书。
附图说明
图1A是一示例性实施例提供的虚拟拍摄系统、虚拟拍摄系统所在的现实场景中的实体灯光以及移动终端的示意图。
图1B是一示例性实施例提供的虚拟拍摄系统、虚拟拍摄系统所在的现实场景中的实体灯光、以及移动终端的另一示意图。
图2是一示例性实施例提供的另一种虚拟拍摄系统的结构示意图。
图3是一示例性实施例提供的一种灯光控制方法的流程示意图。
图4是一示例性实施例提供的关于实体灯光的第一种交互界面的示意图。
图5是一示例性实施例提供的关于实体灯光的第二种交互界面的示意图。
图6是一示例性实施例提供的关于实体灯光的第三种交互界面的示意图。
图7是一示例性实施例提供的关于第二虚拟灯光的第一种交互界面的示意图。
图8是一示例性实施例提供的关于第二虚拟灯光的第二种交互界面的示意图。
图9是一示例性实施例提供的关于第二虚拟灯光的第三种交互界面的示意图。
图10是一示例性实施例提供的关于第二虚拟灯光的第四种交互界面的示意图。
图11是一示例性实施例提供的一种移动终端的结构示意图。
图12是一示例性实施例提供的一种灯光控制装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书一个或多个实施例相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本说明书一个或多个实施例的一些方面相一致的装置和方法的例子。
需要说明的是:在其他实施例中并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中,其方法所包括的步骤可以比本说明书所描述的更多或更少。此外,本说明书中所描述的单个步骤,在其他实施例中可能被分解为多个步骤进行描述;而本说明书中所描述的多个步骤,在其他实施例中也可能被合并为单个步骤进行描述。
图1A示出根据本说明书实施例的一种应用场景的示意图,如图1A所示,虚拟拍摄系统包括至少一个屏幕02(图1A中以3块屏幕02进行示例说明),屏幕02用于展示虚拟场景。虚拟拍摄系统所在的现实场景也会布置实体灯光03。移动终端00可以分别与屏幕02和实体灯光03通信连接,移动终端00可以执行本说明书实施例的灯光控制方法,对实体灯光03和屏幕02显示的虚拟场景中的虚拟灯光进行控制。
示例性的,请参阅图1B,可以虚拟拍摄系统包括渲染设备01及至少一个屏幕02(图1B中以3块屏幕进行示例说明),移动终端00可以与渲染设备01之间建立有通信连接,渲染设备01与屏幕02之间建立有通信连接。屏幕02用于展示虚拟场景。虚拟拍摄系统所在的现实场景也会布置实体灯光03,移动终端00也可以与实体灯光03之间建立通信连接。实体灯光03可以是固定设置在某一位置处的灯光设备(如图1B所示的在屏幕上方设置的吊灯),也可以是由用户(比如说演员)手持的灯光设备(比如古装戏中的灯笼、火把;昏暗环境中的手电筒等等)中的至少一种,本实施例对此不做任何限制。渲染设备01及屏幕02可以集成为一体,也可以分别独立设置。
其中,移动终端00执行本说明书实施例的灯光控制方法,在用户操作移动终端00中的第一调节控件时,获取实体灯光03的被调节后的灯光参数,并按照实体灯光03的被调节后的参数对实体灯光03进行调节,同时考虑到实体灯光03也会对虚拟场景中的光影效果造成影响,因此移动终端00还会根据实体灯光03的被调节后的灯光参数,对用于模拟实体灯光03在虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,并将第一虚拟灯光的调节后的灯光参数发送给渲染设备01,渲染设备01可以根据第一虚拟灯光的调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕02显示融合有调节后的第一虚拟灯光的虚拟场景。
在上述应用场景中,灯光师可以手持移动终端00,通过移动终端00来实时对虚拟拍摄系统所在的现实场景中的实体灯光03进行控制,操作简单便捷,移动终端00可以基于实体灯光03的被调节后的灯光参数对实体灯光03进行调节,同时联动调节用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光,能够更准确地模拟真实光照条件,使得虚拟场景更好地配合现场场景的实际情况,从而增强虚拟场景的真实感;虚拟场景中的光影变化与现实场景中的实体灯光保持一致,这种一致性可以提供更加自然和连贯的视觉体验,提升沉浸感。
其中,虚拟拍摄系统中使用的屏幕02可以是LED屏幕、液晶屏幕等类型,可以是曲面屏或平面屏等结构,应理解,本领域技术人员可以根据实际需求自定义设置虚拟拍摄系统中屏幕02的类型、数量、尺寸、分辨率等,对此本说明书实施例不作限制。应理解,本说明书实施例对于设备之间的通信连接方式不作限制。
可选地,当屏幕02采用LED屏幕时,本说明书实施例还提供图2示出的一种虚拟拍摄系统,如图2所示,该虚拟拍摄系统可以包括LED屏幕101、服务器集群102(包括主服务器1021及多个服务器1022)、LED播控处理器103、摄像机104、位姿追踪器105、网络交换机106、同步信号发生器107;本说明书实施例的渲染设备01可以包括服务器集群102以及LED播控处理器103;其中,移动终端00可以与主服务器1021之间建立通信连接,这样移动终端00可以将相关数据(如第一虚拟灯光的调节后的灯光参数)发送至主服务器1021,主服务器1021可以将相关数据(如第一虚拟灯光的调节后的灯光参数)同步给其它的多个服务器1022。
其中,服务器集群102中的各个服务器可以根据第一虚拟灯光的调节后的灯光参数渲染出调节后的第一虚拟灯光,并将渲染结果发送给对应的LED播控处理器103。由于LED屏幕101是由多个LED箱体构成的,一个服务器可以对应一个或多个LED箱体,也即一个服务器可以渲染出与其相对应的一个或多个LED箱体所需显示的画面。LED播控处理器103是用于控制LED屏幕101的硬件设备,一个LED播控处理器可以对应一个或多个LED箱体,或者说一个LED播控处理器可以控制与其相对应的一个或多个LED箱体进行画面的显示。
其中,位姿追踪器105绑定于摄像机104上,位姿追踪器105可以实时追踪摄像机104的位置和姿态,并通过网络将追踪的位姿信息广播到现场局域网中。网络交换机106可以搭建现场局域网,实现现场局域网内各设备之间的通信。例如,网络交换机106可以接收位姿追踪器105广播的位姿信息,并将位姿信息发送给服务器集群102。同步信号发生器107可以产生同步信号脉冲,并将同步信号发送给摄像机104、位姿追踪器105、服务器集群102和LED播控处理器103,使摄像机104、位姿追踪器105、服务器集群102和LED播控处理器103实现同步。其中,摄像机104会同时拍摄屏幕和现实场景(也即屏幕前制景),得到融合了屏幕和屏幕前制景的画面的视频。
本说明书实施例的针对虚拟拍摄系统的灯光控制方法可以通过软件或硬件改造部署在各种移动终端上,本说明书实施例涉及的移动终端可以是能够提供交互界面的移动终端,例如,移动终端可以包括但不限于手持设备、平板电脑、掌上电脑、笔记本电脑、智能手机、可穿戴式设备(例如,手表、眼镜、手套、头饰(例如,帽子、头盔、虚拟现实头戴耳机、增强现实头戴耳机、头装式装置(HMD)、头带)、挂件、臂章、腿环、鞋子、马甲)等。本说明书实施例涉及的移动终端可以是指具有无线连接功能和/或有线连接功能的设备,无线连接的功能是指可以通过wifi、蓝牙等无线连接方式与其他设备进行连接,本说明书实施例涉及的移动终端也可以与其他设备通过有线连接功能进行通信连接。本说明书实施例涉及的移动终端可以是触屏的、也可以是非触屏的,触屏的可以通过手指、触控笔等在显示器上点击、滑动等方式对移动终端进行控制,非触屏的移动终端可以连接鼠标、键盘、触控面板等输入设备,通过输入设备对移动终端进行控制等,对此本说明书实施例不作限制。
请参阅图3,图3示出了一种针对虚拟拍摄系统的灯光控制方法的流程图。虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;所述方法应用于移动终端,所述方法包括:
在S101中,在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节所述实体灯光的至少一种灯光参数。
如上所述,本说明书实施例的灯光控制方法可以通过软件部署在移动终端中,例如可以以应用程序APP的形式部署于移动终端中,当用户期望对虚拟拍摄系统所在的现实场景中的实体灯光进行调节控制时,可以打开上述应用程序以进入用于调节实体灯光的交互界面,该交互界面可以展示用于调节所述实体灯光的第一调节控件,从而用户可以根据实际需求操作交互界面中的第一调节控件,以调节实体灯光的至少一种灯光参数。
其中,实体灯光的灯光参数包括位姿信息和显示属性中的至少一种;所述位姿信息包括光源位置和/或光源角度;所述显示属性包括光源类型、颜色、光照强度以及亮度中的至少一种。
示例性,若实体灯光的灯光参数包括位姿信息,实体灯光可以搭载有驱动装置,可以通过移动终端来控制驱动装置运动,从而调节实体灯光的光源位置和光源角度中的至少一种。
示例性的,若实体灯光的灯光参数包括显示属性,实体灯光可以搭载用于调节显示属性的处理器,如中央处理单元(Central Processing Unit,CPU)、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific IntegratedCircuit,ASIC)或者现成可编程门阵列(Field-Programmable Gate Array,FPGA)等,可以通过移动终端来向实体灯光中的处理器发送相关调节或控制指令,以使得处理器对实体灯光中的颜色、光照强度以及亮度等显示属性进行调节。
在S102中,响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的调节后的灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
可以理解的是,用户对实体灯光的灯光参数的调节可以执行一次或者一次以上,用户一次可以调节至少一个实体灯光的至少一种灯光参数,移动终端可以根据用户每执行一次调节操作所得到的实体灯光的被调节后的灯光参数来调节实体灯光,以及联动调节用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光。其中,渲染设备可以采用本领域已知的渲染技术,实现根据第一虚拟灯光的调节后的灯光参数渲染出调节后的第一虚拟灯光,对此本说明书实施例不作限制。
本实施例中,实现用户可以通过操作移动终端的交互界面中的第一调节控件,以实现对实体灯光进行控制,操作简单便捷,移动终端可以基于实体灯光的被调节后的灯光参数对实体灯光进行调节,考虑到实体灯光也会对虚拟场景中的光影效果造成影响,因此同时联动调节用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光的灯光参数,从而能够更准确地模拟真实光照条件,使得虚拟场景更好地配合现场场景的实际情况,从而增强虚拟场景的真实感;虚拟场景中的光影变化与现实场景中的实体灯光保持一致,这种一致性可以提供更加自然和连贯的视觉体验,提升沉浸感。
可以理解的是,每个实体灯光对应的第一调节控件可以有一个或者多个一个。比如各个实体灯光对应的第一调节控件的数量有多个,每个第一调节控件用于调节该实体灯光的其中一种灯光参数。本说明书对于第一调节控件的具体操作形式也不做任何限制,可以是点击、滑动、拖动或者长按等操作,但不限于此。
举个例子,请参阅图4、图5和图6示出的交互界面,图4、图5和图6所示的交互界面中的左侧示出了虚拟拍摄系统所在的现实场景中的所有实体灯光,当用户选中其中一个实体灯光后,交互界面的右侧会展示用于调节该实体灯光的第一调节控件,从而用于调节该实体灯光的至少一种灯光参数。不同的实体灯光可对应有不同的需要调节的灯光参数,相应地,对应有不同的第一调节控件。
请参阅图4,在用户选中“实体灯光-1”时,交互界面右侧展示了用于调节“实体灯光-1”的第一调节控件,可以从HSI模式下调节实体灯光的色调和饱和度。HSI(HueSatrationntenst HSI)模型用H、S、I三参数描述颜色特性,其中H定义颜色的波长,称为色调;S表示颜色的深浅程度,称为饱和度;I表示强度或亮度。
请参阅图5,在用户选中“实体灯光-2”时,交互界面右侧展示了用于调节“实体灯光-2”的第一调节控件,可以从RGBW模式下调节实体灯光的红色、绿色、蓝色和白色强度级别。RGBW是一种颜色模式,它将红、绿、蓝和白四种颜色的光谱组合在一起,以形成更丰富的色彩。
请参阅图6,在用户选中“实体灯光-3”时,交互界面右侧展示了用于调节“实体灯光-3”的第一调节控件,可以调节实体灯光的色温。色温度在3000K左右时,光色偏黄。色温度在5000K以上时,光色偏蓝。
可以理解的是,图4、图5以及图6中的第一调节控件用于调节的灯光参数仅为举例说明,并不构成对灯光参数的限制。
在一些实施例中,这里对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的创建过程进行示例性说明:
移动终端可以获取虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;然后根据屏幕的位姿信息、实体灯光的位姿信息和显示属性,创建至少一个用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光,并确定第一虚拟灯光的灯光参数;所述第一虚拟灯光的灯光参数用于使所述屏幕显示融合有第一虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的灯光参数渲染出第一虚拟灯光,并控制屏幕显示融合有第一虚拟灯光的虚拟场景。本实施例中,现实场景中的实体灯光与虚拟场景中的光影效果相结合,可以提高虚拟拍摄中的摄像机所拍摄的图像帧的真实感,增强用户的沉浸感。并且通过移动终端与现实场景中的实体灯光通信连接,并在虚拟场景中模拟实体灯光的光影效果,可以实现对虚拟场景中的光影效果进行更加细致的调整和控制,从而满足不同用户的需求。
具体来说,移动终端在获取虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性之后,首先基于屏幕的位姿信息以及实体灯光的位姿信息之间的差异,确定屏幕与实体灯光之间的距离以及实体灯光相对于屏幕的角度,进而基于屏幕与实体灯光之间的距离、实体灯光相对于屏幕的角度、以及实体灯光的显示属性,确定用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的至少一种灯光参数。
在一些实施例中,第一虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的一种或多种灯光参数,可以与实体灯光的灯光参数中的一种或多种存在预设的对应关系,从而可以根据实体灯光的灯光参数构建第一虚拟灯光。在实体灯光的灯光参数发生改变时,也可根据该对应关系,相应地调整第一虚拟灯光的灯光参数。
在一些实施例中,考虑到实体灯光的灯光参数是根据摄像机所处的位置和方向进行设置的,当摄像机的位姿发生变化时,原本适用于旧位姿的实体灯光的灯光参数可能无法适用于新位姿,从而导致摄像机在位姿变化前后拍摄得到的图像帧的光影效果不一致。
因此,为了适应于摄像机的位姿变化,可以在移动终端中预存摄像机的不同位姿信息与实体灯光的灯光参数之间的第一映射关系,第一映射关系用于使摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。
则在虚拟拍摄中的摄像机的位姿(位置和姿态中的至少一种)发生变化时,移动终端响应于拍摄屏幕的成像装置摄像机的位姿发生变化,根据成像装置摄像机的变化后的位姿信息和第一映射关系,获取实体灯光的第一目标灯光参数,根据实体灯光的第一目标灯光参数对实体灯光进行调节;以及根据实体灯光的第一目标灯光参数,对第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第一虚拟灯光的调节后的灯光参数发送给渲染设备,以使渲染设备根据第一虚拟灯光的调节后的灯光参数渲染出调节后的第一虚拟灯光,并控制屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
本实施例中,通过上述调节方式,使得摄像机在不同的角度或位置拍摄时,实体灯光的亮度、颜色和投射效果等都能够保持一致性,提供更加真实和统一的光照效果。并且通过预存第一映射关系并自动调节实体灯光,可以简化用户的操作流程,用户无需手动调节实体灯光的参数,也不需要针对不同位姿进行反复试错调整,移动终端能够自动根据摄像机位姿变化和第一映射关系计算出目标灯光参数,并直接调节实体灯光,减轻了用户的操作负担,并提高了操作的便捷性和效率。同步调节虚拟场景中用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光,使得虚拟场景中的光影变化与现实场景中的实体灯光保持一致,从而增强虚拟场景的真实感和沉浸感。
在一些实施例中,考虑到拍摄对象的位姿发生变化,原本适用于拍摄对象的旧位姿的实体灯光的灯光参数可能无法适用于拍摄对象(例如屏幕前的演员)的新位姿,也会使得摄像机在拍摄对象的位姿变化前后拍摄得到的图像帧的光影效果不一致。
示例性的,拍摄对象可以携带有位姿传感器,用于检测拍摄对象的位姿信息。该位姿传感器与移动终端通信连接,并将检测到的拍摄对象的位姿信息发送给移动终端,从而可以让移动终端获知拍摄对象的位姿是否发生变化,并相应地对实体灯光和第一虚拟灯光进行控制。
在拍摄对象的位姿(位置和姿态中的至少一种)发生变化时,移动终端可以响应于拍摄对象的位姿发生变化,根据拍摄对象的变化后的位姿信息和实体灯光的位姿信息,确定拍摄对象与实体灯光之间的距离和相对角度;根据拍摄对象与实体灯光之间的距离和相对角度,获取实体灯光的第二目标灯光参数,第二目标灯光参数用于使摄像机对处于不同位姿的拍摄对象进行拍摄时得到的不同图像帧的光影效果保持一致;然后根据实体灯光的第二目标灯光参数对实体灯光进行调节;以及,根据实体灯光的第二目标灯光参数,对用于模拟实体灯光在虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,第一虚拟灯光的调节后的灯光参数用于使屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
其中,拍摄对象与实体灯光之间的距离和相对角度与第二目标灯光参数之间可建立有预设对应关系(例如映射表或函数关系),从而可根据该对应关系,确定与距离和相对角度对应的第二目标灯光参数。
本实施例中,在拍摄对象的位姿发生变化时相应地对实体灯光和第一虚拟灯光进行调节,能够使不同位姿的拍摄对象在图像帧中的光影效果保持一致,有助于增强观看体验,使得拍摄结果更加自然和连贯。通过移动终端在感知到拍摄对象的位姿变化时,自动调节实体灯光和第一虚拟灯光,能够大大减少人工干预和调节的工作量,不仅提高了拍摄效率,还减少了操作人员的负担。
在一些实施例中,移动终端预存有不同拍摄场景对应的实体灯光的灯光参数。用户可以根据实际拍摄需要进行选择。例如移动终端上有三种不同的拍摄场景:室内场景、户外白天场景和夜晚场景。(1)室内场景:实体灯光的灯光参数可以设置为柔和而均匀的光线,从而使拍摄对象呈现出自然、柔和的光影效果。(2)户外白天场景:实体灯光的灯光参数可以设置为强烈而明亮的光线;可以突出拍摄对象的轮廓,并增加画面的亮度和鲜明度。(3)夜晚场景:实体灯光的灯光参数可以设置为柔和的背景灯光,以及适当的补光灯光;在保持夜晚氛围的同时,可以确保拍摄对象有足够的明亮度,避免画面过暗或产生严重的噪点。
在移动终端预存有不同拍摄场景对应的实体灯光的灯光参数的情况下,可以在移动终端的交互界面中,展示用于选择拍摄场景的选择控件。例如可以一个拍摄场景对应一个选择控件,某个选择控件被触发则表示该选择控件对应的拍摄场景被选中。例如也可以是多个拍摄场景对应一个选择控件,该选择控件为输入控件,用户可以根据实际需要输入选中的拍摄场景对应的标识信息,例如编号或者名称。
进而移动终端响应于选择控件被触发,获取选中的拍摄场景对应的实体灯光的第三目标灯光参数,根据实体灯光的第三目标灯光参数对实体灯光进行调节;以及,根据实体灯光的第三目标灯光参数,对第一虚拟灯光的灯光参数进行调节,第一虚拟灯光的调节后的灯光参数用于使屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。本实施例中,通过预存不同拍摄场景对应的实体灯光的灯光参数,移动终端可以根据拍摄环境的需求,自动选择适合的灯光参数进行调节,从而获得更好的拍摄效果。这样,即使在不同的拍摄场景下,用户也可以方便地获得所需的光影效果,提升拍摄的质量和体验,无需用户从零开始调节实体灯光的灯光参数,能够大大减少人工调节的工作量,不仅提高了拍摄效率,还减少了用户负担。
在一些实施例中,虚拟场景中除了用于模拟实体灯光的第一虚拟灯光,还存在不受实体灯光影响的可独立控制的第二虚拟灯光。
示例性的,为方便用户对第二虚拟灯光的控制,可以在移动终端的交互界面中,展示用于调节在屏幕显示的虚拟场景中的第二虚拟灯光的第二调节控件;第二调节控件用于调节第二虚拟灯光的至少一种灯光参数。灯光参数包括但不限于光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的至少一种。光源类型包括但不限于点光源、平行光源、聚光灯等,不同光源类型会产生不同的光线效果。
用户可以根据实际需求操作各个第二虚拟灯光对应的第二调节控件,移动终端响应于第二调节控件被触发,获取第二虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第二虚拟灯光的被调节后的灯光参数发送给渲染设备,以使渲染设备根据第二虚拟灯光的被调节后的灯光参数渲染出调节后的第二虚拟灯光,并控制屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。本实施例中,不具备图形渲染知识的灯光师也可以通过移动终端来实时对第二虚拟灯光进行控制,以灵活地调节虚拟场景在屏幕中的显示效果,操作简单便捷,无需经过灯光师与负责虚拟灯光的专业人员进行沟通再由专业人员在电脑中操作以对虚拟灯光进行控制的繁琐过程,调节灵活度高,减少了灯光师和负责虚拟灯光的专业人员之间的沟通成本,有利于提高灯光控制效率。
在一些实施例中,为了进一步提高调节效率,本说明书实施例实现在屏幕显示的虚拟场景中的所有第二虚拟灯光能够被划分为至少两组。通过分组第二虚拟灯光,用户可以一次性对整个第二虚拟灯光组进行设置和控制,而不需要逐个调整每个第二虚拟灯光,这样可以节省用户的时间和精力,提高工作效率。
示例性的,第二调节控件包括针对于各个第二虚拟灯光的第一子调节控件和针对于各组第二虚拟灯光的第二子调节控件。其中,第一子调节控件用于对单个第二虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的至少一种灯光参数进行调节。第二子调节控件用于对一组第二虚拟灯光的光源类型、光源位置、光源角度、颜色、光照强度以及亮度中的以及显示属性中的至少一种灯光参数进行批量调节。
其中,对于分组后的各组第二虚拟灯光,可以通过该组第二虚拟灯光对应的第二子调节控件对其进行批量调节,并且对于该组第二虚拟灯光中的各个第二虚拟灯光,也可以通过该第二虚拟灯光对应的第一子调节控件对其进行单独调节。
可以理解的是,各个第二虚拟灯光对应的第一子调节控件可以有一个或多于一个,比如各个第二虚拟灯光对应的第一子调节控件的数量有多个,每个第一子调节控件用于调节该第二虚拟灯光的其中一种灯光参数。以及,各组第二虚拟灯光对应的第二子调节控件可以有一个或多于一个,比如各组第二虚拟灯光对应的第二子调节控件的数量有多个,每个第二子调节控件用于批量调节该组第二虚拟灯光的其中一种灯光参数。本说明书对于第二调节控件的具体操作形式也不做任何限制,可以是点击、滑动、拖动或者长按等操作,但不限于此。
在一个例子中,请参阅图7、图8以及图9所示的交互界面,图7和图8的交互界面中的左侧展示有虚拟场景中的所有第二虚拟灯光,可以看到,有些第二虚拟灯光以灯光组的形式展示,有些第二虚拟灯光未被分组,以单个第二虚拟灯光进行展示。
请参阅图7,当用户选中未被分组的“第二虚拟灯光A”之后,交互界面的右侧展示用于调节“第二虚拟灯光A”的第一子调节控件,从而可以对“第二虚拟灯光A”的光照强度、光照颜色和光源位置等灯光参数进行调节。
请参阅图8,当用户选中“灯光组-1”之后,交互界面的右侧展示用于调节“灯光组-1”的第二子调节控件,从而可以对“灯光组-1”中的所有第二虚拟灯光的光照强度、光照颜色和光源位置等灯光参数进行批量调节。比如当用户调节图8中的交互界面的右侧中的光照强度时,“灯光组-1”中的所有第二虚拟灯光的光照强度均被调节,从而有利于简化用户的操作步骤,提高操作效率。
请参阅图9,图9的交互界面中的左侧展示“灯光组-1”中的所有第二虚拟灯光,当用户选中“灯光组-1”中的“第二虚拟灯光-1-c”时,交互界面的右侧展示用于调节“第二虚拟灯光-1-c”的第一子调节控件,从而可以对“第二虚拟灯光-1-c”的光照强度、光照颜色和光源位置等灯光参数进行调节。
这里对第二虚拟灯光的分组进行示例性说明:
在第二种可能的实现方式中,可以由用户根据实际需求对当前在屏幕显示的虚拟场景中的第二虚拟灯光进行分组,移动终端可以响应于针对在屏幕显示的虚拟场景中的第二虚拟灯光的分组指令,将被选中的至少一个第二虚拟灯光划分为一组。本实施例通过移动终端来进行第二虚拟灯光的分组,可以增加用户与虚拟场景之间的交互性和易用性,用户可以直接选中第二虚拟灯光,将其划分为不同的组别,而无需复杂的操作步骤或者专业的技能要求。并且用户可以根据实际需要定制化场景效果,可以将多个第二虚拟灯光组合成一个特定的场景效果;例如,可以创建一个室内照明场景、舞台演出效果或者夜景模拟等,通过第二虚拟灯光组的设置和调整,使得虚拟场景更符合用户的要求。
举个例子,比如请参阅图10所示的交互界面,用户可以在该交互界面中对在屏幕显示的虚拟场景中的第二虚拟灯光进行选择,例如,用户可以根据所需数量,任意选择可选的第二虚拟灯光,用户选中的第二虚拟灯光会显示“√”符号,并在确认无误之后,点击分组控件,进而移动终端可以基于分组控件被触发而生成分组指令,进而响应于针对在屏幕显示的虚拟场景中的第二虚拟灯光的分组指令,将被选中的至少一个第二虚拟灯光划分为一组。
在第二种可能的实现方式中,如请参阅图2所示的虚拟拍摄系统,屏幕可以是分区域由多个服务器进行管理的,因此,移动终端可以按照屏幕被划分后的至少两个显示区域,自动对当前在屏幕显示的虚拟场景中的第二虚拟灯光进行分组;每组第二虚拟灯光对应屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。例如,可以根据第二虚拟灯光的当前位置,将位于同一显示区域内的第二虚拟灯光自动分为一组,或者,也可以根据用户的选择操作,由用户根据需要的数量任意选择第二虚拟灯光分为一组,并关联至对应的显示区域。
本实施例中,通过将第二虚拟灯光按照屏幕被划分后的显示区域进行分组,可以更好地控制和调整照明效果,每组第二虚拟灯光只需要聚焦于特定的显示区域,就可以为该区域提供最佳的照明效果,从而增强视觉体验。并且,可以增加用户与虚拟场景之间的交互性,用户可以更直观地看到各组第二虚拟灯光影响的范围和效果,从而更容易调整和控制第二虚拟灯光,能够提高用户的参与度和使用体验。另外,可以减少用户的操作步骤和学习成本,降低使用门槛,无需手动设置每个第二虚拟灯光的灯光参数,移动终端可以根据屏幕的各个显示区域自动调整第二虚拟灯光的分组和属性,从而提高虚拟灯光调整的自动化程度。
可以理解的是,后续如果用户在移动终端中通过调节控件对第二虚拟灯光的位姿信息进行调节导致第二虚拟灯光照射的显示区域有所变化,则移动终端可以按照调节后的第二虚拟灯光照射的显示区域,重新对调节后的第二虚拟灯光进行分组,使得每组第二虚拟灯光对应屏幕中的一个显示区域,用于为在该显示区域中显示的虚拟场景提供光影效果。
在第三种可能的实现方式中,虚拟场景包含虚拟对象,虚拟对象是指通过计算机生成的、不存在于现实世界中的物体或实体;可以是虚拟世界中的角色、道具、建筑物、动物以及景观等。考虑到对于虚拟场景中的不同虚拟对象的光影需求也有所不同,因此,移动终端可以按照在屏幕显示的虚拟场景中的各个虚拟对象,对当前在屏幕显示的虚拟场景中的第二虚拟灯光进行分组;每组第二虚拟灯光对应虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。例如,可以根据第二虚拟灯光的当前位置和当前角度,将照射同一虚拟对象的第二虚拟灯光自动分为一组,或者,也可以根据用户的选择操作,由用户根据需要的数量任意选择第二虚拟灯光分为一组,并关联至对应的虚拟对象。
本实施例中,按照虚拟对象对第二虚拟灯光进行分组的方式,可以增强虚拟场景的视觉效果和沉浸感,每个虚拟对象都能够获得最佳的照明效果和光影表现,从而更加逼真和生动;可以让用户更直观地感受到虚拟场景中的每个虚拟对象的特点和特色,有助于提高用户的参与度和使用体验,让用户更加容易理解虚拟场景中的信息和效果;可以实现精细化的灯光控制,用户可以更具体地调整和优化每个虚拟对象的照明效果和光影表现,以满足各种不同的需求和场景;自动根据虚拟对象进行灯光分组和光影效果的分配,可以减轻用户的设置负担,提高灯光调整的便利性和自动化程度。
可以理解的是,后续如果用户在移动终端中通过调节控件对第二虚拟灯光的位姿信息进行调节导致第二虚拟灯光照射的虚拟对象发生了变更,则移动终端可以按照调节后的第二虚拟灯光照射的虚拟对象,重新对调节后的第二虚拟灯光进行分组,使得每组第二虚拟灯光对应虚拟场景中的一个虚拟对象,用于为该虚拟对象提供光影效果。
在一些实施例中,考虑到虚拟拍摄中的摄像机的位姿(位置和姿态)发生变化时,可能会使得摄像机在位姿变化前后拍摄得到的图像帧的光影效果不一致。这是因为虚拟场景中由第二虚拟灯光形成的光影效果是根据摄像机所处的位置和方向进行计算和渲染的,当摄像机的位姿发生变化时,原本适用于旧位姿的灯光参数可能无法适用于新位姿,从而导致光影效果出现不一致的情况。
为了适应于摄像机的位姿变化,可以在移动终端中预存摄像机的不同位姿信息与虚拟场景中的第二虚拟灯光的灯光参数之间的第二映射关系,第二映射关系用于使摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。通过建立摄像机位姿与第二虚拟灯光参数之间的第二映射关系,可以确保在不同位姿下拍摄得到的图像帧的光影效果保持一致,这样可以提高虚拟场景的真实感和连贯性,使用户在移动终端上观看时获得更加一致的视觉体验。
示例性的,移动终端能够与摄像机通信连接,摄像机安装有位姿传感器(如图2所示的位姿追踪器),用于检测摄像机的位姿并将其反馈给移动终端。
则在摄像机的位姿发生变化时,移动终端可以响应于摄像机的位姿发生变化,根据摄像机的变化后的位姿信息和第二映射关系,获取虚拟场景中的第二虚拟灯光的目标灯光参数;所述第二虚拟灯光的目标灯光参数用于使所述屏幕显示融合有所述与摄像机的变化后的位姿适配的第二虚拟灯光的虚拟场景。示例性的,在图1B所示的应用场景中,移动终端可以将第二虚拟灯光的目标灯光参数发送给渲染设备,以使渲染设备根据第二虚拟灯光的目标灯光参数渲染出与摄像机的变化后的位姿适配的第二虚拟灯光,并控制屏幕显示融合有与摄像机的变化后的位姿适配的第二虚拟灯光的虚拟场景。本实施例中,当摄像机的位姿发生变化时,根据新的位姿信息和第二映射关系,可以实时获取虚拟灯光的目标参数,可以使渲染设备根据新的位姿适配灯光效果,实现灯光的实时变化和调整,用户无需等待重新计算光影效果,即可获得适应新位姿的光影渲染结果。并且通过预存摄像机位姿信息和第二虚拟灯光的灯光参数之间的第二映射关系,可以减少运行时的计算复杂度和资源消耗,只需根据位姿变化获取第二虚拟灯光的目标灯光参数并发送给渲染设备,无需每次都重新计算光影信息,从而提高系统的效率和性能。
其中,“响应于所述第二调节控件被触发,获取所述第二虚拟灯光的被调节后的灯光参数”的步骤和“响应于所述摄像机的位姿发生变化,根据摄像机的变化后的位姿信息和第二映射关系,获取虚拟场景中的第二虚拟灯光的目标灯光参数”的执行顺序不做限制,例如,可在用户通过交互界面调节第二虚拟灯光的灯光参数之前、之后或同时,根据摄像机的变化后的位姿信息确定第二虚拟灯光的目标灯光参数,可将目标灯光参数与用户调节后的灯光参数相融合,比如,利用目标灯光参数来修正或替代用户调节后的灯光参数,或者利用用户调节后的灯光参数来修正或替代目标灯光参数,或者基于预设算法利用二者计算出融合后的灯光参数,本申请对此不做限制。
可利用渲染设备,基于第二虚拟灯光的灯光参数和第一虚拟灯光的灯光参数分别独立地进行渲染,使得第二虚拟灯光的灯光参数和第一虚拟灯光的灯光参数带来的光影效果在屏幕展现的虚拟场景中相互叠加。
以上实施方式中的各种技术特征可以任意进行组合,只要特征之间的组合不存在冲突或矛盾,但是限于篇幅,未进行一一描述,因此上述实施方式中的各种技术特征的任意进行组合也属于本说明书公开的范围。
图11是一示例性实施例提供的一种移动终端的示意结构图。请参考图11,在硬件层面,该移动终端包括处理器202、内部总线204、网络接口206、内存208以及非易失性存储器210,当然还可能包括其他业务所需要的硬件。本说明书一个或多个实施例可以基于软件方式来实现,比如由处理器202从非易失性存储器210中读取对应的计算机程序到内存208中然后运行。当然,除了软件实现方式之外,本说明书一个或多个实施例并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
请参考图12,针对虚拟拍摄系统的灯光控制装置可以应用于如图11所示的移动终端中,以实现本说明书的技术方案。其中,虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;该灯光控制装置可以包括:
控件展示模块301,用于在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节所述实体灯光的至少一种灯光参数。
灯光调节模块302,用于响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一些实施例中,所述灯光参数包括位姿信息和显示属性中的至少一种;所述位姿信息包括光源位置和/或光源角度;所述显示属性包括光源类型、颜色、光照强度以及亮度中的至少一种。
在一些实施例中,装置还包括第一虚拟灯光创建模块,用于获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;根据所述屏幕的位姿信息、所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光,并确定所述第一虚拟灯光的灯光参数,所述第一虚拟灯光的灯光参数用于使所述屏幕显示融合有所述第一虚拟灯光的虚拟场景。
在一些实施例中,所述移动终端预存摄像机的不同位姿信息与所述实体灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致。
所述灯光调节模块302还用于:响应于拍摄所述屏幕的摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述实体灯光的第一目标灯光参数;根据所述实体灯光的第一目标灯光参数对所述实体灯光进行调节;以及根据所述实体灯光的目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一些实施例中,所述灯光调节模块302还用于:响应于拍摄对象的位姿发生变化,根据所述拍摄对象的变化后的位姿信息和所述实体灯光的位姿信息,确定所述拍摄对象与所述实体灯光之间的距离和相对角度;根据拍摄对象与所述实体灯光之间的距离和相对角度,获取所述实体灯光的第二目标灯光参数,所述第二目标灯光参数用于使摄像机对处于不同位姿的拍摄对象进行拍摄时得到的不同图像帧的光影效果保持一致;根据所述实体灯光的第二目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第二目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一些实施例中,所述移动终端预存有不同拍摄场景对应的实体灯光的灯光参数。
所述灯光调节模块302还用于:在移动终端的交互界面中,展示用于选择拍摄场景的选择控件;响应于所述选择控件被触发,获取选中的拍摄场景对应的实体灯光的第三目标灯光参数;根据所述实体灯光的第三目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第三目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
在一些实施例中,控件展示模块301,还用于在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第二虚拟灯光的第二调节控件;所述第二调节控件用于调节第二虚拟灯光的至少一种灯光参数。
灯光调节模块302还用于:响应于所述调节控件被触发,获取所述第二虚拟灯光的被调节后的灯光参数,所述第二虚拟灯光的被调节后的灯光参数用于使所述屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。
上述装置中各个模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
在一些实施例中,本说明书实施例还提供了一种移动终端,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器通过运行所述可执行指令以实现上述中任一项所述的方法。
在一些实施例中,本说明书实施例还提供了一种计算机可读存储介质,其上存储有计算机指令,该指令被处理器执行时实现如上述任一项所述方法的步骤。
需要说明的是,本说明书所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
在一个典型的配置中,计算机包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带、磁盘存储、量子存储器、基于石墨烯的存储介质或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
在本说明书一个或多个实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
以上所述仅为本说明书一个或多个实施例的较佳实施例而已,并不用以限制本说明书一个或多个实施例,凡在本说明书一个或多个实施例的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本说明书一个或多个实施例保护的范围之内。

Claims (10)

1.一种针对虚拟拍摄系统的灯光控制方法,其特征在于,所述虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;所述方法应用于移动终端,所述方法包括:
在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节所述实体灯光的至少一种灯光参数;
响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及
根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
2.根据权利要求1所述的方法,其特征在于,所述灯光参数包括位姿信息和显示属性中的至少一种;
所述位姿信息包括光源位置和/或光源角度;所述显示属性包括光源类型、颜色、光照强度以及亮度中的至少一种。
3.根据权利要求1或2所述的方法,其特征在于,还包括:
获取所述虚拟拍摄系统所在的现实场景中的实体灯光的位姿信息和显示属性;
根据所述屏幕的位姿信息、所述实体灯光的位姿信息和显示属性,创建至少一个用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光,并确定所述第一虚拟灯光的灯光参数,所述第一虚拟灯光的灯光参数用于使所述屏幕显示融合有所述第一虚拟灯光的虚拟场景。
4.根据权利要求1所述的方法,其特征在于,所述移动终端预存摄像机的不同位姿信息与所述实体灯光的灯光参数之间的第一映射关系,所述第一映射关系用于使所述摄像机以不同的位姿进行拍摄时得到的不同图像帧的光影效果保持一致;
所述方法还包括:
响应于拍摄所述屏幕的摄像机的位姿发生变化,根据所述摄像机的变化后的位姿信息和所述第一映射关系,获取所述实体灯光的第一目标灯光参数;
根据所述实体灯光的第一目标灯光参数对所述实体灯光进行调节;以及
根据所述实体灯光的第一目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于拍摄对象的位姿发生变化,根据所述拍摄对象的变化后的位姿信息和所述实体灯光的位姿信息,确定所述拍摄对象与所述实体灯光之间的距离和相对角度;
根据拍摄对象与所述实体灯光之间的距离和相对角度,获取所述实体灯光的第二目标灯光参数,所述第二目标灯光参数用于使摄像机对处于不同位姿的拍摄对象进行拍摄时得到的不同图像帧的光影效果保持一致;
根据所述实体灯光的第二目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第二目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
6.根据权利要求1所述的方法,其特征在于,所述移动终端预存有不同拍摄场景对应的实体灯光的灯光参数;
所述方法还包括:
在移动终端的交互界面中,展示用于选择拍摄场景的选择控件;
响应于所述选择控件被触发,获取选中的拍摄场景对应的实体灯光的第三目标灯光参数;
根据所述实体灯光的第三目标灯光参数对所述实体灯光进行调节;以及,根据所述实体灯光的第三目标灯光参数,对所述第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
7.根据权利要求1所述的方法,其特征在于,还包括:
在所述移动终端的交互界面中,展示用于调节在所述屏幕显示的虚拟场景中的第二虚拟灯光的第二调节控件;所述第二调节控件用于调节第二虚拟灯光的至少一种灯光参数;
响应于所述第二调节控件被触发,获取所述第二虚拟灯光的被调节后的灯光参数,被调节后的灯光参数用于使所述屏幕显示融合有调节后的第二虚拟灯光的虚拟场景。
8.一种针对虚拟拍摄系统的灯光控制装置,其特征在于,所述虚拟拍摄系统包括至少一个屏幕,所述屏幕用于显示虚拟场景;所述装置应用于移动终端,所述装置包括:
控件展示模块,用于在所述移动终端的交互界面中,展示用于调节所述虚拟拍摄系统所在的现实场景中的实体灯光的第一调节控件;所述第一调节控件用于调节实体灯光的至少一种灯光参数;
灯光调节模块,用于响应于所述第一调节控件被触发,获取所述实体灯光的被调节后的灯光参数,并按照所述实体灯光的被调节后的参数对所述实体灯光进行调节;以及根据所述实体灯光的被调节后的灯光参数,对用于模拟所述实体灯光在所述虚拟场景中的光影效果的第一虚拟灯光的灯光参数进行调节,所述第一虚拟灯光的调节后的灯光参数用于使所述屏幕显示融合有调节后的第一虚拟灯光的虚拟场景。
9.一种移动终端,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器通过运行所述可执行指令以实现如权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,该指令被处理器执行时实现如权利要求1至7中任一项所述方法的步骤。
CN202311383078.1A 2023-10-23 2023-10-23 灯光控制方法、装置、移动终端及存储介质 Pending CN117424969A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311383078.1A CN117424969A (zh) 2023-10-23 2023-10-23 灯光控制方法、装置、移动终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311383078.1A CN117424969A (zh) 2023-10-23 2023-10-23 灯光控制方法、装置、移动终端及存储介质

Publications (1)

Publication Number Publication Date
CN117424969A true CN117424969A (zh) 2024-01-19

Family

ID=89525946

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311383078.1A Pending CN117424969A (zh) 2023-10-23 2023-10-23 灯光控制方法、装置、移动终端及存储介质

Country Status (1)

Country Link
CN (1) CN117424969A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113706719A (zh) * 2021-08-31 2021-11-26 广州博冠信息科技有限公司 虚拟场景的生成方法及装置、存储介质、电子设备
CN114022646A (zh) * 2021-11-10 2022-02-08 浙江博采传媒有限公司 虚拟制片灯光同步方法、装置、存储介质及电子设备
JP2022030844A (ja) * 2020-08-07 2022-02-18 株式会社スクウェア・エニックス 情報処理プログラム、情報処理装置及び情報処理方法
WO2022100712A1 (zh) * 2020-11-16 2022-05-19 Oppo广东移动通信有限公司 真实环境画面中虚拟道具的显示方法、系统及存储介质
CN115761103A (zh) * 2022-11-14 2023-03-07 北京字跳网络技术有限公司 基于虚拟现实的控制方法、装置、电子设备和存储介质
CN116132566A (zh) * 2022-11-28 2023-05-16 广州彩熠灯光股份有限公司 灯具控制方法、装置、计算机设备和存储介质
CN116486048A (zh) * 2022-11-14 2023-07-25 腾讯科技(深圳)有限公司 虚实融合画面的生成方法、装置、设备及系统
CN116685028A (zh) * 2023-08-03 2023-09-01 武汉艺起科技有限公司 一种虚拟环境数字人场景灯光智能控制系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022030844A (ja) * 2020-08-07 2022-02-18 株式会社スクウェア・エニックス 情報処理プログラム、情報処理装置及び情報処理方法
WO2022100712A1 (zh) * 2020-11-16 2022-05-19 Oppo广东移动通信有限公司 真实环境画面中虚拟道具的显示方法、系统及存储介质
CN113706719A (zh) * 2021-08-31 2021-11-26 广州博冠信息科技有限公司 虚拟场景的生成方法及装置、存储介质、电子设备
CN114022646A (zh) * 2021-11-10 2022-02-08 浙江博采传媒有限公司 虚拟制片灯光同步方法、装置、存储介质及电子设备
CN115761103A (zh) * 2022-11-14 2023-03-07 北京字跳网络技术有限公司 基于虚拟现实的控制方法、装置、电子设备和存储介质
CN116486048A (zh) * 2022-11-14 2023-07-25 腾讯科技(深圳)有限公司 虚实融合画面的生成方法、装置、设备及系统
CN116132566A (zh) * 2022-11-28 2023-05-16 广州彩熠灯光股份有限公司 灯具控制方法、装置、计算机设备和存储介质
CN116685028A (zh) * 2023-08-03 2023-09-01 武汉艺起科技有限公司 一种虚拟环境数字人场景灯光智能控制系统

Similar Documents

Publication Publication Date Title
CN108525298B (zh) 图像处理方法、装置、存储介质及电子设备
KR20220045977A (ko) 3차원 환경들과의 상호작용을 위한 디바이스들, 방법들 및 그래픽 사용자 인터페이스들
WO2023134743A1 (zh) 调节智能灯光设备的方法、机器人、电子设备、存储介质及计算机程序
US20240103707A1 (en) Methods for time of day adjustments for environments and environment presentation during communication sessions
CN103988234A (zh) 经由透视显示器来显示阴影
CN108693967A (zh) 虚拟现实与现实世界之间的转变
CN116506993A (zh) 灯光控制方法及存储介质
US11887251B2 (en) System and techniques for patch color correction for an immersive content production system
CN108604046A (zh) 摄影支持装置及其工作方法、以及工作程序
US11978154B2 (en) System and techniques for lighting adjustment for an immersive content production system
WO2023116396A1 (zh) 一种渲染显示方法、装置、计算机设备及存储介质
CN111340684B (zh) 一种游戏中图形处理的方法和装置
JP6624541B2 (ja) 光投影装置及びそれを用いた照明装置
US20220366615A1 (en) See-through display, method for operating a see-through display and computer program
US20200257831A1 (en) Led lighting simulation system
US11022802B2 (en) Dynamic ambient lighting control
CN117424970B (zh) 灯光控制方法、装置、移动终端及存储介质
US10089767B2 (en) Simplified lighting compositing
CN116055800A (zh) 一种移动端获得定制背景实时舞蹈视频的方法
AU2022202424B2 (en) Color and lighting adjustment for immersive content production system
US11762481B2 (en) Light capture device
CN117424969A (zh) 灯光控制方法、装置、移动终端及存储介质
CN108604427A (zh) 控制方法、计算机可读介质和控制器
CN112040596A (zh) 虚拟空间灯光控制方法、计算机可读存储介质和系统
US20220343562A1 (en) Color and lighting adjustment for immersive content production system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination