CN115866160A - 一种低成本的电影虚拟化制作系统及方法 - Google Patents

一种低成本的电影虚拟化制作系统及方法 Download PDF

Info

Publication number
CN115866160A
CN115866160A CN202211408364.4A CN202211408364A CN115866160A CN 115866160 A CN115866160 A CN 115866160A CN 202211408364 A CN202211408364 A CN 202211408364A CN 115866160 A CN115866160 A CN 115866160A
Authority
CN
China
Prior art keywords
real
time
virtual
camera
host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211408364.4A
Other languages
English (en)
Inventor
赵建军
耿天乐
鲁梦河
程绪琪
陈军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING FILM ACADEMY
Original Assignee
BEIJING FILM ACADEMY
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING FILM ACADEMY filed Critical BEIJING FILM ACADEMY
Priority to CN202211408364.4A priority Critical patent/CN115866160A/zh
Publication of CN115866160A publication Critical patent/CN115866160A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明公开的一种低成本的电影虚拟化制作系统及方法,属于影视制作领域。本发明同时使用绿幕和LED背景墙作为拍摄背景,采用绿幕扩充拍摄背景,能够根据拍摄需求选择拍摄背景,降低背景的制作成本;加入数字资产建设模块,能够使用移动设备快速地制作数字资产并将其置入场景,缩短场景制作周期,降低制作成本;该系统具有模块化的特点,能够将系统中的模块进行快速替换,而不会影响该系统的整体功能,有利于搭建预算较低的电影虚拟化制作系统;能够使用手机、平板等设备进行拍摄,并进行实时直播,可快速运用于直播等新媒体行业,降低成本投入。本发明适用于影视制作、视频直播等领域,大幅降低影视虚拟化制作的成本。

Description

一种低成本的电影虚拟化制作系统及方法
技术领域
本发明涉及一种低成本的电影虚拟化制作系统及方法,属于影视制作领域。
背景技术
制作传统视效镜头的内容时,往往需要先在现场运用绿幕进行拍摄,再将拍摄后的绿幕画面进行后期制作。这导致现场拍摄与后期制作在一定程度上相互割裂,演员在现场拍摄时只能面对绿幕进行表演,这使得表演的难度较大;主创们在进行现场拍摄的过程中并不能实时观看到视觉特效制作完成后的效果,因此无法对现场拍摄进行完美的把控,这在一定程度上会降低电影制作的效率。
为了解决这一问题,绿幕实时抠像合成技术应运而生,这种技术大大地提升了现场拍摄的把控性,但也依然存在着溢色、反射/透射材质的物体难以合成、光照难以匹配的问题。最新的基于LED背景墙的电影虚拟化制作技术成功地解决了这一问题,该技术将LED背景墙作为拍摄背景,利用摄影机跟踪系统与实时渲染引擎,生成与真实摄影机运动相匹配的虚拟画面,并实时映射在LED背景墙上,有效地解决了绿幕实时抠像合成技术的问题。但基于LED背景墙的电影虚拟化制作技术的成本较高,大部分影视公司难以负担起其前期的搭建成本。
发明内容
针对目前电影虚拟化成本较高的问题,本发明的主要目的是提供一种低成本的电影虚拟化制作系统及方法,在满足虚拟化制作效果的情况下大幅降低影视虚拟化制作的成本。
本发明的目的是通过下述技术方案实现的:
本发明公开的一种低成本的电影虚拟化制作系统包括LED背景墙、绿幕、数字灯光、摄影机、实时合成主机、实时渲染主机、摄影机跟踪系统、后台控制系统、动捕系统、面捕系统、前景合成模块、虚拟场景工程模块、数字资产建设模块、信号监看系统、交互控制系统。
绿幕与LED背景墙相连,作为实时合成背景;渲染主机与LED墙连接,在实时渲染引擎中重构出虚拟的LED背景墙;交互控制系统,通过网络与实时渲染主机连接;数字灯光位于背景和被摄物前面,为背景和被摄物提供光照;摄影机拍摄现实场景和绿幕、LED背景墙共同构成的场景,拍摄的内容进入实时合成主机;摄影机跟踪系统与摄影机连接,实时捕捉摄影机的位置以及姿态,并传输至实时渲染主机;动捕系统、面捕系统能够对人体的肢体动作和面部表情进行捕捉,并将数据传入实时渲染主机;后台控制系统,对虚拟场景工程进行实时的操作和调整;信号监看系统,对现场拍摄素材进行处理、存储和图像分发。
所述LED背景墙,接收所述实时渲染主机传输的视频流信号并进行显示和播放;
所述数字灯光,由若干数字照明设备组成,为绿幕、被摄物等提供光照,并能够通过数据调光信号进行控制;
所述实时合成主机,对现场拍摄的画面进行抠像,并将抠像后的画面与实时渲染画面进行合成,然后将合成后的画面输出至信号监看系统;
所述实时渲染主机,根据LED背景墙的形状及特性,在实时渲染引擎中重构出虚拟的LED背景墙,提供内外视锥的映射渲染;将摄影机跟踪系统获取的摄影机实时的位置以及姿态信息与虚拟摄影机绑定,以控制虚拟摄影机的位置以及姿态;实时渲染引擎根据当前虚拟摄影机的内参和外参数据在虚拟LED背景墙上投射渲染画面;实时渲染引擎将虚拟LED背景墙上的渲染画面转换成现实LED背景墙可用的视频流信号进行输出;
所述的摄影机跟踪系统,通过软件实时调用手机的陀螺仪数据,以此得到摄影机的位置和姿态信息,并实时传输至实时渲染主机;
所述动捕系统,通过摄像头和算法获取人体运动状态的数据,并加以分析,捕捉演员的肢体动作,并与实时渲染引擎中的虚拟角色进行绑定;
所述面捕系统,通过摄像头和算法实时捕捉演员的面部表情,并与实时渲染引擎中的虚拟角色进行绑定;
所述前景合成模块,为LED虚拟化制作拍摄的画面合成前景效果,该前景效果与LED虚拟化制作的摄影机运动和透视变化相匹配。
所述虚拟场景工程模块,包含满足实时渲染需求的虚拟场景,以及虚拟化制作的核心功能即虚拟LED背景墙的构建、多屏多机渲染配置、摄影机跟踪数据与虚拟摄影机的绑定;
所述数字资产建设模块,通过移动设备快速地将物体建立为数字资产,并将其添加到虚拟场景工程之中;
所述后台控制系统,对虚拟场景工程进行实时的操作和调整,以达到对所述LED背景墙上的渲染画面进行修改、控制和调整的目的;
所述信号监看系统,由视频处理系统和若干监视器组成,对现场拍摄素材进行处理和存储,并将实时拍摄画面、内视锥绿幕合成画面、现场调色画面分发到不同的监视器上;
所述交互控制系统,与所述实时渲染主机通过网络连接,远程对所述实时渲染主机中虚拟场景工程的参数进行调整和控制。
本发明公开的一种低成本的电影虚拟化制作方法,基于所述一种低成本的电影虚拟化制作系统实现。所述一种低成本的电影虚拟化制作方法,包括如下步骤:
步骤1、搭建绿幕,并在绿幕旁边搭建LED背景墙;
步骤2、根据LED背景墙和绿幕的形状和尺寸,在实时渲染引擎中重构出虚拟LED背景墙和绿幕,并将LED背景墙的内容和绿幕的内容分为不同的渲染子节点;
步骤3、将符合影视制作质量要求、满足实时渲染需求的高质量、高性能数字资产在实时渲染主机的实时渲染引擎中进行整合、优化,形成实时渲染引擎中的高质量场景。再结合镜头设计和制作需要,在实时渲染引擎中制作需要的交互控制功能,并将电影虚拟化制作核心功能迁移至虚拟场景工程中;
步骤4,结合镜头设计,在前景进行置景,并布置数字灯光,该数字灯光能够通过后台控制系统对灯光的亮度、色彩等进行实时调整;
步骤5、摄影机跟踪系统将摄影机的位置与姿态信息传入实时渲染主机的实时渲染引擎中并与虚拟摄影机绑定;虚拟摄影机根据摄影机的靶面大小和焦距调整内视锥的大小。
步骤6、实时渲染引擎进行多屏多机分布式实时渲染,在实时渲染引擎中的虚拟LED背景墙上投射渲染画面;并将虚拟LED背景墙上的渲染画面,转换成现实LED背景墙和实时渲染主机的显示器可用的视频流信号进行输出,LED背景墙的渲染内容在LED背景墙上实时显示、绿幕部分的渲染内容在实时渲染主机的显示器上实时显示;
步骤7、将摄影机拍摄画面通过视频线采集至实时合成主机,或通过OBS将拍摄画面传入实时合成主机。与此同时,将实时渲染主机显示器的渲染画面采集至实时合成主机。在实时合成主机中打开虚拟场景工程,通过Composure插件;将摄影机拍摄的带有绿幕的画面与实时渲染主机显示器采集的画面进行实时合成。在合成的过程中,通过前景合成模块对画面进行实时的前景合成;
步骤8、根据拍摄需要,通过动捕系统或面捕系统对演员进行动作捕捉或面部捕捉,并与实时渲染引擎中的虚拟人进行绑定;
步骤9、利用后台控制系统和交互控制系统对虚拟场景工程中的场景进行更改,根据需要在数字资产建设模块中使用移动设备快速地将生活中常见的物体建立为数字资产,并将其添加到虚拟场景工程之中;
步骤10、将实时拍摄画面、实时合成画面、现场调色画面分发到信号监看系统之中,完成低成本的虚拟化影视制作。
有益效果:
1、本发明公开的一种低成本的电影虚拟化制作系统与方法,同时使用绿幕和LED背景墙作为拍摄背景,采用绿幕扩充拍摄背景,能够根据拍摄需求进行拍摄背景的选择,降低背景制作成本。
2、本发明公开的一种低成本的电影虚拟化制作系统与方法,与常见的基于LED背景墙的电影虚拟化制作系统相比,加入数字资产建设模块,能够使用移动设备快速地制作日常中常见的数字资产并将其置入场景,缩短场景制作周期,降低制作成本。
3、本发明公开的一种低成本的电影虚拟化制作系统与方法,该系统具有模块化的特点,能够将系统中的模块进行快速替换,譬如摄影机跟踪系统和动捕系统可以快速地替换成其他不同的摄影机跟踪方案和动捕方案,而不会影响该系统的整体功能,有利于搭建不用预算的电影虚拟化制作系统。
4、本发明公开的一种低成本的电影虚拟化制作系统与方法,与常见的基于LED背景墙的电影虚拟化制作系统相比,能够使用手机、平板等设备进行拍摄,并进行实时直播,可快速运用于直播等新媒体行业,降低成本投入。
5、本发明公开的一种低成本的电影虚拟化制作系统与方法,采用软件实时调用手机的陀螺仪数据,以此得到摄影机实时的位置以及姿态信息,能大幅降低摄影机跟踪定位的成本投入。
6、本发明公开的一种低成本的电影虚拟化制作系统与方法,使用摄像头和算法获取人体运动状态的数据,并加以分析,得到动作捕捉演员的肢体动作,能大幅降低购买动作捕捉设备的成本投入。
附图说明
图1为本发明公开的一种低成本的电影虚拟化制作系统与方法的结构示意图;
图2为本实施例公开的一种低成本的电影虚拟化制作系统的示意图;
具体实施方式
下面将结合附图和实施例对本发明加以详细说明。同时也叙述了本发明技术方案解决的技术问题及有益效果,需要指出的是,所描述的实施例仅旨在便于对本发明的理解,而对其不起任何限定作用。
本实施例公开的一种低成本的电影虚拟化制作系统包括LED背景墙、绿幕、数字灯光、摄影机、实时合成主机、实时渲染主机、摄影机跟踪系统、后台控制系统、动捕系统、面捕系统、前景合成模块、虚拟场景工程模块、数字资产建设模块、信号监看系统、交互控制系统。
LED背景墙由若干LED屏幕单元组成,每个LED屏幕单元则是由若干LED像素阵列与驱动芯片、PCB电路板共同构成。
绿幕位于LED背景墙左侧,与LED背景墙相连,LED背景墙和绿幕共同构成一个平面的拍摄空间,具体排列方式如图2所示;在不同的实施例中,绿幕和LED背景墙的大小和位置都可以根据需求和条件任意调整。
在常见的基于LED背景墙的电影虚拟化制作系统中,耗费成本最高的部分就是LED背景墙这个部分,本方案提供了一种低成本的电影虚拟化制作系统,可以根据自身的需求和条件调整LED背景墙和绿幕的大小和排列方式。
数字灯光由若干支持Art-Net协议的数字照明设备组成,光源分布在由LED背景墙和绿幕构成的拍摄空间中,主要负责为场景提供照明。当虚拟场景中为晴天环境时,数字灯光模拟出强度较强的暖色光;当虚拟场景中为阴天时,数字灯光模拟出强度较弱的冷色光。此外,数字灯光设备的位置并不固定,可以根据拍摄光线需要进行调整。此外,数字灯光设备还通过DMX512协议与实时渲染引擎进行了联动,制作团队能够通过后台控制系统对每个照明设备的色彩、亮度等进行实时控制和调整;
摄影机为iPhone手机,利用iPhone手机自带的摄像头进行虚拟化制作的拍摄。与此同时,我们既可以使用iPhone手机进行拍摄素材的存储,也可以直接利用直播软件,在拍摄时进行虚拟化制作的直播。与传统的虚拟化制作方法相比,这种方式进一步降低了成本,并且与如今受众较广的直播行业完美结合。此外,也可以根据拍摄需求和预算任意选择摄影机;
实时渲染主机为一台性能较好的个人计算机,搭配两个显示器;
实时合成主机为一台性能较好的个人计算机,搭配一个显示器;实时合成方法如图2所示,实时渲染主机将绿幕部分的内容渲染至一台显示器中,并通过采集卡将绿幕的内容采集至实时合成主机,手机则与计算机接入同一局域网,通过OBS将拍摄内容传输至实时合成主机,实时合成主机在实时渲染引擎中将画面内容进行实时合成。
摄影机跟踪系统可以使用iPhone手机进行虚拟摄影机的控制;相比传统的虚拟化制作摄影机跟踪方案,该方案节省了大量的成本。此外,所述的摄影机跟踪系统也可以随时更换为Optitrack、HTC Vive等其他摄影机跟踪设备;
后台控制系统由制作团队进行控制,该模块主要通过对实时渲染引擎中的工程进行调整和修改,达到实时修改虚拟场景画面、数字灯光的色彩和亮度的目的;
动捕系统通过摄像头进行动作捕捉。将摄像头与实时渲染主机进行连接,动作捕捉演员需要使自己的全身都位于摄像头的拍摄范围内。动作捕捉演员的动作通过Radical软件进行分析,并实时地通过Live Link进入实时渲染引擎并与虚拟角色进行绑定。与目前常见的动作捕捉方案相比,本结构的动作捕捉方案可以做到零成本,这也大大降低了虚拟化制作公司的前期投入成本;
面捕系统通过iPhone手机进行面部捕捉。在iPhone手机中安装Live Link Face软件,面部捕捉演员需要使自己的面部都位于手机摄像头的拍摄范围内,面部捕捉数据将通过Live Link实时传入实时渲染主机,并与虚拟角色的面部进行绑定。与目前常见的面部捕捉方案相比,本结构的面部捕捉方案可以做到零成本,这也大大降低了虚拟化制作公司的前期投入成本;
前景合成模块内嵌在实时合成主机的实时渲染引擎中,通过实时渲染引擎中的Composure插件,将拍摄的画面作为背景层,将需要进行合成的物体或动画作为前景层进行合成。
虚拟场景工程模块包含了满足实时渲染需求的虚拟场景,以及虚拟化制作的核心功能,即虚拟LED背景墙的构建、多屏多机渲染配置、摄影机跟踪数据与虚拟摄影机的绑定以及摄影机内参同步等功能;
数字资产建设模块使用实时渲染引擎的RealityScan功能进行资产建设,该功能能够通过图像或激光扫描重建任何大小的物体和场景,生成高精度高品质的3D扫描资产,并且速度远超同类软件;
信号监看系统的核心为QTake实时视频处理系统,该系统具有记录、回放、处理2D/3D实时信号画面、记录和剪辑代理文件、含有Metadata记录功能的电子场记、特效合成和预览、现场调色等现场制作功能,并可以通过网络或视频线将各种数据分发给现场的不同设备;
交互控制系统在Web端上运行,数字灯光设备、虚拟场景工程中的部分参数都可以开放到交互控制系统中,主创团队可以使用极为便捷的智能设备对现场的一些场景参数、灯光参数进行调整。
在这个具体实施例中,实时渲染引擎使用的是Unreal Engine,该引擎中具有很强的实时渲染功能。此外,该引擎的Composure插件可以用来进行实时抠像合成,Live Link插件可以用来进行面部捕捉、动作捕捉和摄影机跟踪数据的接入,RealityScan功能可以通过拍摄图片生成高品质的3D资产,此外该引擎还可以通过发送DMX、Art-Net等信号驱动数字灯光,并且我们可以通过其开放的接口在Web端驱动引擎的参数,
本实施例利用公开的一种低成本的电影虚拟化制作方法拍摄一个低成本的短片的步骤如下;
步骤一、场景的布置。将绿幕布置在LED背景墙左侧,与LED背景墙相连,LED背景墙和绿幕共同构成一个平面的拍摄空间;数字灯光布置在拍摄空间的两侧,并可以通过后台控制系统进行控制;在前景根据拍摄需要进行美术置景;实时渲染主机和实时合成主机布置在拍摄区域的旁边,并通过视频线与显示器和屏幕进行连接,设备的具体排列方式和连接方式如图2所示。
步骤二、在实时渲染主机的实时渲染引擎中打开制作好的资产,并进行多屏多机分布式实时渲染,在实时渲染引擎中的虚拟LED背景墙上投射渲染画面;并将虚拟LED背景墙上的渲染画面,转换成现实LED背景墙和实时渲染主机的显示器可用的视频流信号进行输出,LED背景墙的渲染内容在LED背景墙上实时显示,绿幕部分的渲染内容在实时渲染主机的显示器上实时显示。
步骤三、使用iPhone手机进行拍摄,并实时通过手机的陀螺仪获取手机的实时位置和姿态并传入实时渲染引擎,并根据手机的靶面大小和焦距调整内视锥的大小。
步骤四、将iPhone手机拍摄的画面通过OBS传入实时合成主机。与此同时,将实时渲染主机显示器的渲染画面采集至实时合成主机。在实时合成主机中打开虚拟场景工程,通过Composure插件;将摄影机拍摄的带有绿幕的画面与实时渲染主机显示器采集的画面进行实时合成,并通过前景合成模块对画面进行实时的前景合成。
步骤五、在拍摄区域外通过Live Link Face和Radical软件对动捕演员进行面部捕捉和动作捕捉,并将数据传入实时渲染主机的实时渲染引擎,并与实时渲染引擎中的虚拟角色进行绑定。
步骤六、利用数字资产建设模块添加一些场景中缺少的物体,并通过后台控制系统和交互控制系统对实时渲染主机中的实时渲染引擎参数进行调整。
步骤七、将实时合成画面接入信号监看系统,并正式开始使用iPhone手机进行短片拍摄。
步骤八、被摄者进入场景中,具体位置如图2所示,它可以和场景中的动捕虚拟角色进行互动。被摄者、LED背景墙、绿幕、前景置景和灯光共同构成了拍摄的画面。
以上所述的具体描述,对发明的目的、技术方案和有益效果进行进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (3)

1.一种低成本的电影虚拟化制作系统,其特征在于:包括LED背景墙、绿幕、数字灯光、摄影机、实时合成主机、实时渲染主机、摄影机跟踪系统、后台控制系统、动捕系统、面捕系统、前景合成模块、虚拟场景工程模块、数字资产建设模块、信号监看系统、交互控制系统;
绿幕与LED背景墙相连,作为实时合成背景;渲染主机与LED墙连接,在实时渲染引擎中重构出虚拟的LED背景墙;交互控制系统,通过网络与实时渲染主机连接;数字灯光位于背景和被摄物前面,为背景和被摄物提供光照;摄影机拍摄现实场景和绿幕、LED背景墙共同构成的场景,拍摄的内容进入实时合成主机;摄影机跟踪系统与摄影机连接,实时捕捉摄影机的位置以及姿态,并传输至实时渲染主机;动捕系统、面捕系统能够对人体的肢体动作和面部表情进行捕捉,并将数据传入实时渲染主机;后台控制系统,对虚拟场景工程进行实时的操作和调整;信号监看系统,对现场拍摄素材进行处理、存储和图像分发。
2.如权利要求1所述的一种低成本的电影虚拟化制作系统,其特征在于:
所述LED背景墙,接收所述实时渲染主机传输的视频流信号并进行显示和播放;
所述数字灯光,由若干数字照明设备组成,为绿幕、被摄物等提供光照,并能够通过数据调光信号进行控制;
所述实时合成主机,对现场拍摄的画面进行抠像,并将抠像后的画面与实时渲染画面进行合成,然后将合成后的画面输出至信号监看系统;
所述实时渲染主机,根据LED背景墙的形状及特性,在实时渲染引擎中重构出虚拟的LED背景墙,提供内外视锥的映射渲染;将摄影机跟踪系统获取的摄影机实时的位置以及姿态信息与虚拟摄影机绑定,以控制虚拟摄影机的位置以及姿态;实时渲染引擎根据当前虚拟摄影机的内参和外参数据在虚拟LED背景墙上投射渲染画面;实时渲染引擎将虚拟LED背景墙上的渲染画面转换成现实LED背景墙可用的视频流信号进行输出;
所述的摄影机跟踪系统,通过软件实时调用手机的陀螺仪数据,以此得到摄影机的位置和姿态信息,并实时传输至实时渲染主机;
所述动捕系统,通过摄像头和算法获取人体运动状态的数据,并加以分析,捕捉演员的肢体动作,并与实时渲染引擎中的虚拟角色进行绑定;
所述面捕系统,通过摄像头和算法实时捕捉演员的面部表情,并与实时渲染引擎中的虚拟角色进行绑定;
所述前景合成模块,为LED虚拟化制作拍摄的画面合成前景效果,该前景效果与LED虚拟化制作的摄影机运动和透视变化相匹配;
所述虚拟场景工程模块,包含满足实时渲染需求的虚拟场景,以及虚拟化制作的核心功能即虚拟LED背景墙的构建、多屏多机渲染配置、摄影机跟踪数据与虚拟摄影机的绑定;
所述数字资产建设模块,通过移动设备快速地将物体建立为数字资产,并将其添加到虚拟场景工程之中;
所述后台控制系统,对虚拟场景工程进行实时的操作和调整,以达到对所述LED背景墙上的渲染画面进行修改、控制和调整的目的;
所述信号监看系统,由视频处理系统和若干监视器组成,对现场拍摄素材进行处理和存储,并将实时拍摄画面、内视锥绿幕合成画面、现场调色画面分发到不同的监视器上;
所述交互控制系统,与所述实时渲染主机通过网络连接,远程对所述实时渲染主机中虚拟场景工程的参数进行调整和控制。
3.一种低成本的电影虚拟化制作方法,基于权利要求1及2所述的一种低成本的电影虚拟化制作系统实现,其特征在于:包括以下步骤,
步骤1、搭建绿幕,并在绿幕旁边搭建LED背景墙;
步骤2、根据LED背景墙和绿幕的形状和尺寸,在实时渲染引擎中重构出虚拟LED背景墙和绿幕,并将LED背景墙的内容和绿幕的内容分为不同的渲染子节点;
步骤3、将符合影视制作质量要求、满足实时渲染需求的高质量、高性能数字资产在实时渲染主机的实时渲染引擎中进行整合、优化,形成实时渲染引擎中的高质量场景;再结合镜头设计和制作需要,在实时渲染引擎中制作需要的交互控制功能,并将电影虚拟化制作核心功能迁移至虚拟场景工程中;
步骤4,结合镜头设计,在前景进行置景,并布置数字灯光,该数字灯光能够通过后台控制系统对灯光的亮度、色彩等进行实时调整;
步骤5、摄影机跟踪系统将摄影机的位置与姿态信息传入实时渲染主机的实时渲染引擎中并与虚拟摄影机绑定;虚拟摄影机根据摄影机的靶面大小和焦距调整内视锥的大小;
步骤6、实时渲染引擎进行多屏多机分布式实时渲染,在实时渲染引擎中的虚拟LED背景墙上投射渲染画面;并将虚拟LED背景墙上的渲染画面,转换成现实LED背景墙和实时渲染主机的显示器可用的视频流信号进行输出,LED背景墙的渲染内容在LED背景墙上实时显示、绿幕部分的渲染内容在实时渲染主机的显示器上实时显示;
步骤7、将摄影机拍摄画面通过视频线采集至实时合成主机,或通过OBS将拍摄画面传入实时合成主机;与此同时,将实时渲染主机显示器的渲染画面采集至实时合成主机;在实时合成主机中打开虚拟场景工程,通过Composure插件;将摄影机拍摄的带有绿幕的画面与实时渲染主机显示器采集的画面进行实时合成;在合成的过程中,通过前景合成模块对画面进行实时的前景合成;
步骤8、根据拍摄需要,通过动捕系统或面捕系统对演员进行动作捕捉或面部捕捉,并与实时渲染引擎中的虚拟人进行绑定;
步骤9、利用后台控制系统和交互控制系统对虚拟场景工程中的场景进行更改,根据需要在数字资产建设模块中使用移动设备快速地将生活中常见的物体建立为数字资产,并将其添加到虚拟场景工程之中;
步骤10、将实时拍摄画面、实时合成画面、现场调色画面分发到信号监看系统之中,完成低成本的虚拟化影视制作。
CN202211408364.4A 2022-11-10 2022-11-10 一种低成本的电影虚拟化制作系统及方法 Pending CN115866160A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211408364.4A CN115866160A (zh) 2022-11-10 2022-11-10 一种低成本的电影虚拟化制作系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211408364.4A CN115866160A (zh) 2022-11-10 2022-11-10 一种低成本的电影虚拟化制作系统及方法

Publications (1)

Publication Number Publication Date
CN115866160A true CN115866160A (zh) 2023-03-28

Family

ID=85663107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211408364.4A Pending CN115866160A (zh) 2022-11-10 2022-11-10 一种低成本的电影虚拟化制作系统及方法

Country Status (1)

Country Link
CN (1) CN115866160A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116843819A (zh) * 2023-07-10 2023-10-03 上海随幻智能科技有限公司 一种基于虚幻引擎的绿幕无限延展方法
CN117596349A (zh) * 2023-11-06 2024-02-23 中影电影数字制作基地有限公司 基于虚拟引擎进行空间虚拟拍摄的方法及系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116843819A (zh) * 2023-07-10 2023-10-03 上海随幻智能科技有限公司 一种基于虚幻引擎的绿幕无限延展方法
CN116843819B (zh) * 2023-07-10 2024-02-02 上海随幻智能科技有限公司 一种基于虚幻引擎的绿幕无限延展方法
CN117596349A (zh) * 2023-11-06 2024-02-23 中影电影数字制作基地有限公司 基于虚拟引擎进行空间虚拟拍摄的方法及系统

Similar Documents

Publication Publication Date Title
CN115866160A (zh) 一种低成本的电影虚拟化制作系统及方法
CN114051129A (zh) 一种基于led背景墙的电影虚拟化制作系统及方法
CN110866978A (zh) 一种实时混合现实视频拍摄中的相机同步方法
CN108234933A (zh) 基于多路图像信号处理的实时拼接全景影像的方法及系统
CN113115110B (zh) 视频合成方法、装置、存储介质与电子设备
CN105072314A (zh) 一种可自动跟踪目标的虚拟演播室实现方法
CN105938541B (zh) 利用数字内容增强现场表演的系统和方法
CN1477856A (zh) 真三维虚拟演播室系统及其实现方法
CN213461894U (zh) 一种xr-扩展现实系统
CN113923377A (zh) 一种led环幕虚拟制片系统
CN202455444U (zh) 360度取景摄像头装置
CN111698391B (zh) 通过仿真环境灯光参数控制真实灯光参数实时变化的方法
CN106657719A (zh) 一种智能虚拟演播室系统
US11615755B1 (en) Increasing resolution and luminance of a display
CN103841299A (zh) 虚拟演播室系统
US20090153550A1 (en) Virtual object rendering system and method
CN212519183U (zh) 一种用于摄像机器人的虚拟拍摄系统
CN213126145U (zh) 一种ar-虚拟互动系统
WO2023236656A1 (zh) 互动画面的渲染方法、装置、设备、存储介质及程序产品
CN202171927U (zh) 一种幻影成像系统
KR101273531B1 (ko) 모션 컨트롤 카메라를 이용한 실사와 cg 합성 애니메이션 제작 방법 및 시스템
CN110554556A (zh) 一种用于多屏幕的空间全息互动操控的方法及系统
CN215871598U (zh) 一种led环幕虚拟制片系统
CN112887653B (zh) 一种信息处理方法和信息处理装置
CN202872950U (zh) Led显示模组、led电视及led电视系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination