CN115580778A - 背景区域确定方法和装置、电子装置 - Google Patents

背景区域确定方法和装置、电子装置 Download PDF

Info

Publication number
CN115580778A
CN115580778A CN202211145809.4A CN202211145809A CN115580778A CN 115580778 A CN115580778 A CN 115580778A CN 202211145809 A CN202211145809 A CN 202211145809A CN 115580778 A CN115580778 A CN 115580778A
Authority
CN
China
Prior art keywords
image
virtual
virtual scene
background
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211145809.4A
Other languages
English (en)
Inventor
芦晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Hangzhou Network Co Ltd
Original Assignee
Netease Hangzhou Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netease Hangzhou Network Co Ltd filed Critical Netease Hangzhou Network Co Ltd
Priority to CN202211145809.4A priority Critical patent/CN115580778A/zh
Publication of CN115580778A publication Critical patent/CN115580778A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种背景区域确定方法和装置、电子装置。该方法包括:获取虚拟镜头的相机数据;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像;基于第一图像确定第一虚拟场景的背景区域。本发明解决了相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。

Description

背景区域确定方法和装置、电子装置
技术领域
本发明涉及计算机领域,具体而言,涉及一种背景区域确定方法和装置、电子装置。
背景技术
目前,在制作特定的虚拟背景,例如天空场景、海底场景、草地场景时,室外天空的形态对动画画面有着重大影响,但是在制作大多数天空贴图的时会存在大量的制作盲点,例如不清楚摄像机的透视、位置以及某个时间段内预演动画的画面布局构图,这也就导致需要花费大量的人力资源来确定制作程度和细节,导致整个动画场景的制作缓慢,制作盲点过多也导致最终的制作结果的准确率较差。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明至少部分实施例提供了一种背景区域确定方法和装置、电子装置,以至少解决相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。
根据本发明其中一实施例,提供了一种背景区域确定方法,包括:获取虚拟镜头的相机数据,其中,相机数据至少包括:虚拟镜头的运动轨迹;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,第一图像用于表征虚拟镜头在运动过程中的运动范围;基于第一图像确定第一虚拟场景的背景区域。
根据本发明其中一实施例,还提供了一种背景区域确定装置,包括:获取模块,用于获取虚拟镜头的相机数据,其中,相机数据至少包括:虚拟镜头的运动轨迹;生成模块,用于基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,第一图像用于表征虚拟镜头在运动过程中的运动范围;确定模块,用于基于第一图像确定第一虚拟场景的背景区域。
根据本发明其中一实施例,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,计算机程序被设置为运行时执行上述任一项中的背景区域确定方法。
根据本发明其中一实施例,还提供了一种电子装置,包括存储器和处理器,存储器中存储有计算机程序,处理器被设置为运行计算机程序以执行上述任一项中的背景区域确定方法。
在本发明至少部分实施例中,采用获取虚拟镜头的相机数据;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像;基于第一图像确定第一虚拟场景的背景区域的方式,通过利用目标视频中展示的初始虚拟场景的场景信息和虚拟镜头的运动轨迹,来确定需要用户绘制的背景区域的范围,不再对整体的虚拟背景进行绘制,能够提高用户绘制时的工作效率,同时,根据实际获取到的关于初始虚拟场景的目标视频来确定背景区域,不需要过多考虑在由虚拟镜头透视误差导致的图像精度差的问题,进一步的提高了确定出的背景区域的准确率,进而解决了相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例的一种背景区域确定方法的计算机终端的硬件结构框图;
图2是根据本发明其中一实施例的背景区域确定方法的流程图;
图3是根据本发明其中一实施例的第一图像的示意图;
图4是根据本发明其中一实施例的第二图像的示意图;
图5是根据本发明其中一实施例的关键图像帧选取的示意图;
图6是根据本发明其中一实施例的虚拟场景图像的示意图;
图7是根据本发明其中一实施例的目标虚拟背景图像的示意图
图8是根据本发明其中一实施例的背景区域确定装置的结构框图;
图9是根据本发明实施例的一种电子装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
目前,常见的生成虚拟天空背景的方法有两种,一种是使用天空HDR(HighDynamic Range Imaging,高动态范围成像)技术,对不同区域的天空图像进行拼接绘制,然后将拼接后的图像贴到三维网格体中进行渲染成像,但是由于在制作天空背景图像时,会存在无法直观的获取到虚拟镜头的位置、透视,以及当前帧的画面预演构图的情况,会导致用户在根据虚拟镜头绘制拼接天空图像时,产生较大的制作盲点,难以按照用户需求,同时若需要绘制拼接的天空背景图像较大,还可能会导致花费较高的时间成本,并且若存在图像细节需要修改时,还会耗费大量的人力资源来反复绘制判断修改制作范围,人力资源的消耗成本较大。
另一种方法是使用平面设计软件来绘制天空背景图像,然后以Nuke(一种数码合成软件)贴片的方式进行对图像进行跟踪处理,但是这种方法通常是用来按照单个虚拟镜头的位置、角度等信息来绘制天空背景图像的,其无法使用到其他场次的虚拟镜头中,并且在进行天空透视时也会存在透视误差,准确率较低。
根据本发明其中一实施例,提供了一种背景区域确定方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
该方法实施例可以在计算机终端或者类似的运算装置中执行。以运行在计算机终端上为例,该计算机终端可以是膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机和其他适合的计算机等终端设备。图1是本发明实施例的一种背景区域确定方法的计算机终端的硬件结构框图。如图1所示,计算机终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于中央处理器(CPU)、图形处理器(GPU)、数字信号处理(DSP)芯片、微处理器(MCU)、可编程逻辑器件(FPGA)、神经网络处理器(NPU)、张量处理器(TPU)、人工智能(AI)类型处理器等的处理装置)和用于存储数据的存储器104。可选地,上述计算机终端还可以包括用于通信功能的传输设备106、输入输出设备108以及显示设备110。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述计算机终端的结构造成限定。例如,计算机终端还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的背景区域确定方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的背景区域确定方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端的通信供应商提供的无线网络。在一个实例中,传输设备106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输设备106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
输入输出设备108中的输入可以来自多个人体学接口设备(Human InterfaceDevice,简称为HID)。例如:键盘和鼠标、游戏手柄、其他专用游戏控制器(如:方向盘、鱼竿、跳舞毯、遥控器等)。部分人体学接口设备除了提供输入功能之外,还可以提供输出功能,例如:游戏手柄的力反馈与震动、控制器的音频输出等。
显示设备110可以例如平视显示器(HUD)、触摸屏式的液晶显示器(LCD)和触摸显示器(也被称为“触摸屏”或“触摸显示屏”)。该液晶显示器可使得用户能够与计算机终端的用户界面进行交互。在一些实施例中,上述计算机终端具有图形用户界面(GUI),用户可以通过触摸触敏表面上的手指接触和/或手势来与GUI进行人机交互,此处的人机交互功能可选的包括如下交互:创建网页、绘图、文字处理、制作电子文档、游戏、视频会议、即时通信、收发电子邮件、通话界面、播放数字视频、播放数字音乐和/或网络浏览等、用于执行上述人机交互功能的可执行指令被配置/存储在一个或多个处理器可执行的计算机程序产品或可读存储介质中。
在本公开其中一种实施例中的背景区域确定方法可以运行于本地终端设备或者是服务器。当背景区域确定方法运行于服务器时,该方法则可以基于云交互系统来实现与执行,其中,云交互系统包括服务器和客户端设备。
在一种可能的实施方式中,本发明实施例提供了一种背景区域确定方法,通过终端设备提供图形用户界面,其中,终端设备可以是前述提到的本地终端设备,也可以是前述提到的云交互系统中的客户端设备。图2是根据本发明其中一实施例的背景区域确定方法的流程图,如图2所示,该方法包括如下步骤:
步骤S202,获取虚拟镜头的相机数据。
其中,相机数据至少包括:虚拟镜头的运动轨迹。
上述虚拟镜头可以是指用于获取虚拟场景内的图像的虚拟设备;上述相机数据可以是指虚拟镜头的拍摄参数,如实际生活中利用摄像机拍摄所需参数,上述的相机数据可以包括但不限于:虚拟镜头在虚拟场景中的运动轨迹、虚拟镜头的拍摄位置、拍摄角度等。
一般的,为了体现虚拟场景中一些场景特征,或者场景中的一些虚拟对象,例如草地场景中的建筑物、天空场景中的飞行物等,可以通过控制虚拟镜头按照预设的运动轨迹进行运动,来对建筑物或者飞行物进行拍摄。
步骤S204,基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像。
其中,第一图像用于表征虚拟镜头在运动过程中的运动范围。
上述的第一虚拟场景可以是指一种初始的虚拟场景,该场景中可以只有一个虚拟镜头的虚拟场景,也可以是只有背景模型,例如天空、草地模型的虚拟场景;上述的第一图像可以是指利用虚拟镜头按照前述的运动轨迹进行运动时,用户能够通过虚拟镜头获取到的关于第一虚拟场景的图像范围,即上述的运动范围。
在本实施例的一种可选方案中,在确定出预设的虚拟镜头的运动轨迹之后,便可以首先控制虚拟镜头按照前述的运动轨迹进行运动拍摄,以获取到一段关于第一虚拟场景的预演动画视频,也就是一段能够显示出虚拟镜头的拍摄以及运动范围的视频,然后根据实际需求从预演动画视频中获取多张视频图像,将每张视频图像在第一虚拟场景中对应的区域范围进行组合,以得到上述的第一图像。
举例来说,若上述的第一虚拟场景是天空背景,上述的运动轨迹是水平运动一段距离,以获取到天空背景中的云彩变化,则上述的预演动画视频便可以是利用虚拟镜头,按照预设的水平运动轨迹拍摄出的动画视频,该视频可以表现出一定范围的天空场景。此时,上述的第一图像便可以是指该动画视频中所呈现出的天空背景的图像范围。
可选地,相机数据还包括:运动轨迹对应的视野角度,基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像包括:控制虚拟镜头按照运动轨迹进行运动;控制虚拟镜头按照视野角度对第一虚拟场景进行拍摄,得到第一图像序列;对第一图像序列进行合并,生成第一图像。
上述的第一图像序列可以是指前述预演动画视频中不同时刻对应的视频图像。
考虑到直接按照前述的运动轨迹,利用虚拟镜头对第一虚拟场景进行拍摄时可能会存在误差,或者拍摄出的天空背景的云彩变化不明显,无法满足用户的预期要求,所以此时还可以对虚拟镜头设置其他相机数据,例如在不同运动时刻的虚拟镜头的焦距、虚拟镜头能够获取到的视野角度等,通过利用预设的视野角度来控制虚拟镜头对第一虚拟场景进行拍摄,能够很大程度上使获取到的第一图像更符合用户的预期要求。
以前述的拍摄天空背景继续说明,在控制虚拟镜头对天空背景进行水平运动拍摄时,还可以实时的改变虚拟镜头的视野角度,例如若获取第一图像是为了拍摄天空背景中的一朵云彩,而当前天空背景中的云彩图像较小,则此时可以控制虚拟镜头调整焦距来改变虚拟镜头的视野角度,放大拍摄到的天空背景以得到清晰明显的云彩图,从而使拍摄到的图像更符合用户的预期要求。
在本实施例的一种可选方案中,除了上述可以利用虚拟镜头拍摄关于第一虚拟场景的预演动画视频,然后从动画视频中确定出多张视频图像进行合并,生成第一图像,还可以在获取到虚拟镜头的运动轨迹之后,从运动轨迹上确定出多个轨迹点,当虚拟镜头按照运动轨迹运动之上述多个轨迹点时,自动获取虚拟镜头在该轨迹点处能够获取到的关于第一虚拟场景的虚拟图像,将多个虚拟图像确定为多个第一图像序列,合并生成上述的第一图像,相比于利用虚拟镜头获取动画视频来确定第一图像的准确率,直接利用虚拟镜头在预设轨迹点获取第一图像序列,能够很大程度上保证生成第一图像的效率,提高用户的绘制进度。
在利用虚拟镜头拍摄到多张关于第一虚拟场景的图像之后,便可以如前述所示,将这些图像进行合并,以得到前述的第一图像。
图3是根据本发明其中一实施例的第一图像的示意图,如图3所示,其中多个矩形代表的是在不同运动时刻,通过虚拟镜头能够获取到的关于第一虚拟场景的图像范围,即上述的第一图像序列,第一图像序列所对应的图像与其对应的相机数据一一对应,包括数据顺序、数据大小等,即将多张第一图像序列进行合并后生成上述的第一图像。
在本实施例的一种可选方案中,为了体现出虚拟镜头的运动轨迹,如图3所示,可以将通过虚拟镜头在第1帧时刻获取到的虚拟图像对应的矩形编号设置为①,将通过虚拟镜头在第2帧时刻获取到的虚拟图像对应的矩形编号设置为②,以此类推,将通过虚拟镜头在第n帧时刻获取到的虚拟图像对应的矩形编号设置为编号为n。
在图3中除了可以体现出虚拟镜头的运动轨迹,还可以直观的体现出虚拟镜头在不同运动时刻距离虚拟对象的距离大小,以使用户能够确定获取到的虚拟图像是否满足自己的预期要求,从而提高后续确定背景区域时的效率。具体的,虚拟镜头距离第一虚拟场景越近,其可以获取到的图像范围越小;虚拟镜头距离第一虚拟场景越远,其可以获取到的图像范围越大,例如图3中所示,获取编号为①的矩形时对应的虚拟镜头的位置距离第一虚拟场景的距离1,和获取编号为n的矩形时对应的虚拟镜头的位置距离第一虚拟场景的距离2相比,距离1要远于距离2。
步骤S206,基于第一图像确定第一虚拟场景的背景区域。
上述的背景区域可以是指用户需要手动绘制的区域,例如天空、草地等虚拟背景,由于整个第一虚拟场景较大,如果用户对整个场景逐点绘制,不仅会耗费大量的人力资源,还可能会因为绘制工作量过大而导致出现绘制错误的情况。
所以在本实施例的一种可选方案中,由于上述第一图像是通过虚拟镜头呈现出来的,而用户无法通过虚拟镜头获取除第一图像之外的其他图像,所以用户只需要对第一图像中呈现出的第一虚拟场景进行绘制即可,即可以将第一图像中每张图像对应的第一虚拟场景组合生成上述的背景区域,用户只需对该背景区域中的图像内容进行绘制,从而提高绘制效率,并且由于绘制工作量较小,用户可以花费更多的精力来提高绘制出的背景的准确率。
在本发明至少部分实施例中,采用获取虚拟镜头的相机数据;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像;基于第一图像确定第一虚拟场景的背景区域的方式,通过利用目标视频中展示的初始虚拟场景的场景信息和虚拟镜头的运动轨迹,来确定需要用户绘制的背景区域的范围,不再对整体的虚拟背景进行绘制,能够提高用户绘制时的工作效率,同时,根据实际获取到的关于初始虚拟场景的目标视频来确定背景区域,不需要过多考虑在由虚拟镜头透视误差导致的图像精度差的问题,进一步的提高了确定出的背景区域的准确率,进而解决了相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。
可选地,对第一图像序列进行合并,生成第一图像包括:对第一图像序列进行帧冻结操作,得到多张拍摄图像;确定多张拍摄图像在第一图像序列中的目标位置;基于目标位置对多张拍摄图像进行标记,得到多张标记图像;将多张标记图像进行合并,生成第一图像。
在本实施例的一种可选方案中,由于利用虚拟镜头对虚拟场景进行拍摄时,可能会出现图像模糊、障碍物遮挡等异常情况,所以在生成第一图像之前,还可以首先对第一图像序列进行帧冻结操作,将通过虚拟镜头获取到对应的背景图像,即上述的第一图像,进行定格处理,以得到多张连续的背景图像。然后可以按顺序,例如时间顺序,确定每张背景图像在第一图像序列中的目标位置,避免在后续进行图像渲染的过程中出现渲染错误的情况。在确定出每个背景图像的目标位置后,为了便于区分每张背景图像,还可以基于每张背景图像的目标位置对该背景图像进行标记,例如表上数字编号,或者对不同位置的背景图像赋予不同的颜色等,以得到方便用户观察的多张带有标记的标记图像,最后便可以将所有的标记图像按照其各自的目标位置进行组合,从而生成上述的第一图像,以便用户进行查看。最终生成的第一图像可以如图3所示,需要说明的是,图3中利用①、②等数字编号仅是方便区分按时间顺序获取到的背景图像,即上述的利用数字编号对不同位置的背景图像进行标记,用户可以根据实际情况做出标记选择,在此不做具体限定。
在本实施例的一种可选方案中,考虑到操作时的快捷性和便利性,可以直接利用Nuke软件中的Framehold(一种软件工具节点)节点对图像进行帧冻结的操作。通过帧冻结后,对不同位置的背景图像进行编号合并,能够很好的表现出摄像机的运动状态,从而使用户能够更加快捷方便的确定自身需要的背景图像所在位置。
可选地,基于目标位置对多张拍摄图像进行标记,得到多张标记图像包括:确定目标位置对应的目标颜色;采用目标颜色的颜色信息对多张拍摄图像进行标记,得到多张标记图像。
考虑到图像显示时的直观性,在对背景图像进行标记时,可以选择利用不同的颜色来作为标记方式,即可以对不同目标位置对应的背景图像设置不同的目标颜色,考虑到目标颜色可能会与背景颜色相冲突,所以可以先确定背景颜色,在确定目标颜色。
举例来说,若背景为蓝色的天空,则上述的目标颜色可以是除蓝色和接近蓝色以外的其他颜色,具体的颜色判定标准可以参考相关资料,在此不再赘述。
可选地,确定目标位置对应的目标颜色包括:获取预设色轮,其中,预设色轮包含的颜色逐渐变化;按照预设间隔对预设色轮进行采样,得到目标颜色。
上述的预设间隔可以是指时间间隔,也可以是指图像之间的为位置间隔,需要说明的是,上述的预设间隔仅是示例性说明,用户可以根据实际情况选择所需要的预设间隔,或者间隔大小,在此不做具体限定。在确定不同的第一图像的目标颜色时,可以根据上述的预设间隔来一一确定。
举例来说,用户可以首先确定需要选择的目标颜色的预设色轮范围,例如由红色到绿色,其预设色轮中会包括黄色。若上述的预设间隔为时间间隔,则此时可以根据获取到的第一图像的数量,对该预设色轮进行均匀划分,以使不同的第一图像可以对应有不同的目标颜色,即第一帧对应的第一图像的颜色可以设置为红色,最后一帧对应的第一图像的颜色可以设置为绿色,其余的第一图像的颜色在红色和绿色中对应设置;若上述的预设间隔为位置间隔,则此时可以先将第一帧的第一图像设置为红色,最后一帧的第一图像设置为绿色,然后将预设色轮中的其他颜色均匀分布在第一帧和最后一帧的第一图像之间,其余帧的第一图像便可以根据其具体位置来确定其对应的目标颜色。
需要说明的时,上述的预设色轮是逐渐变化的,且预设色轮中的每个颜色仅对应一个第一图像。
通过利用不同的颜色来确定出不同的第一图像的位置,以得到明显的第一图像序列,能够清晰的确定出虚拟镜头的运动范围,即通过虚拟镜头能够获取到的背景图像的范围,进一步的能够精确的确定出需要进行背景渲染的图像区域,即上述第一虚拟场景的背景区域,例如若背景图像是天空背景,则可以有针对性的确定出待渲染的天空背景范围,从而以保证渲染结果的准确性。
可选地,在基于第一图像确定第一虚拟场景的背景区域之后,方法包括:基于相机数据控制虚拟镜头对第二虚拟场景进行拍摄,得到第二图像序列,其中,第二虚拟场景和第一虚拟场景均包含背景模型;将第二图像序列与第一图像进行合并,得到第二图像;基于第二图像确定第二虚拟场景的背景区域。
上述的第二虚拟场景可以是指包含虚拟对象虚拟场景;上述的背景模型可以是指用来渲染虚拟场景背景的模型,例如天空球背景、草地球背景等。需要说明的是,第二虚拟场景与第一虚拟场景均包含上述的背景模型,二者区别在于第二虚拟场景中包含虚拟对象,例如建筑物、虚拟生物的模型,而第一虚拟场景只是一个空白场景,或者只有上述的背景模型,例如天空,草地的模型。
在本实施例的一种可选方案中,由于一些虚拟场景中不仅仅有背景图像,还会存在虚拟对象,例如城市场景中存在建筑物、海洋场景中存在海洋生物等,而利用虚拟镜头对虚拟场景进行拍摄时,会因建筑物、海洋生物等虚拟模型而导致无法拍摄到部分背景区域,也就是说,这部分无法拍摄到的背景区域可以不用绘制渲染出来,所以用户在对背景区域进行绘制时,只需要绘制虚拟镜头能够拍摄到的背景区域即可,也就是上述的第二图像在第二虚拟场景中对应的背景区域。
在本实施例的一种可选方案中,在利用虚拟镜头获取到第一虚拟场景的第一图像之后,可以选择将多个虚拟对象,例如建筑物、虚拟生物等对应的虚拟模型显现出来,将此时的虚拟场景作为第二虚拟场景,然后利用虚拟镜头按照拍摄第一虚拟场景时的预设条件,对第二虚拟场景进行拍摄,来获取到上述的第二图像序列。
在本实施例的一种可选方案中,在获取到第二图像序列之后,可以利用图像提取的方法,将第二图像序列与第一图像进行合并,来得到第二图像。具体的,可以首先获取第一图像中每个图像对应的图像信息,例如虚拟镜头的轨迹位置、视野角度等,然后从第二图像序列中,选取与该轨迹位置和视野角度相同的图像,从而确定出第一图像中每个图像对应的第二图像序列中的图像,以此来组合生成上述的第二图像,最后根据第二图像从第二虚拟场景中确定出上述的背景区域。
图4是根据本发明其中一实施例的第二图像序列的示意图,如图4所示,第二图像是与第一图像相对应的具有方向的连续虚拟图像,其主要展示的是虚拟场景的虚拟对象。
在本实施例的一种可选方案中,在确定第二虚拟场景中的背景区域时,若第一虚拟场景是空白场景,即第一图像中没有背景元素,则在根据第一图像确定出第二图像之后,可以利用扫描线渲染的方式获取到背景区域,例如图4中每张矩形框的阴影部分;若第一虚拟场景是具有背景模型的虚拟场景,则可以将第一图像与第二图像进行图像提取,对应后的图像中相同部分保留,不同部分去除,从而得到上述的第二虚拟场景的背景区域,例如图4中每张矩形框的阴影部分。具体的获取两张图像中相同部分的方法可以参考相关文献。
在本实施例的一种可选方案中,由于第二图像中会存在多张具有相同背景要素的图像,用户只需要对相同背景要素进行一次绘制即可,不用每有一张第二图像就绘制一次,所以在得到第二图像之后,可以首先确定第二图像中每张图像对应的背景要素,然后将这些背景要素在第二虚拟场景中的背景模型中确定出来,即确定出上述的背景区域。
举例来说,以上述的背景模型是包含太阳的天空模型为例,若第二图像中有多张图像中均包含太阳部分,则用户只需要对太阳部分绘制一次即可,不需要每切换一次虚拟镜头就重新绘制一次太阳部分。若第二图像中的图像对应的背景要素一共只有太阳及其周围部分的云彩、天空部分,则可以直接在第二虚拟场景的背景模型中确定出太阳及其周围的云彩、天空部分即可,从而将这些部分确定出上述的第二虚拟场景的背景区域。
可选地,将第二图像序列与第一图像进行合并,得到第二图像包括:对第二图像序列进行采样,得到关键帧图像;将关键帧图像与第一图像进行合并,得到第二图像。
上述的关键帧图像可以是指具有明显背景要素的第二图像序列中的图像,可以是存在需要绘制背景区域的图像帧,也可以是用于过渡提示用户当前工作进展的图像帧。
在本实施例的一种可选方案中,用户可以根据实际情况选择关键帧,去除对绘制背景区域无用的图像帧,例如可以保留能够展现虚拟背景的结构布局的图像帧,可以舍弃目标视频中的没有背景图像的图像帧,虚拟镜头的位置未发生改变时拍摄到的图像帧等,确定关键帧的情况可以由用户决定,在此不做具体限定。
图5是根据本发明其中一实施例的关键图像帧选取的示意图,如图5所示,在多张图像帧中,可以选择与虚拟背景的结构布局相关性强,并且能够帮助用户确定待绘制背景区域的关键图像帧,例如图5中⑴和⑹分别仅展示了虚拟背景部分和建筑物部分,用户难以根据这两部分确定出需要绘制的背景区域,所以可以舍弃⑴和⑹,将⑵、⑶、⑷、⑸确定为关键图像帧。
在本实施例的一种可选方案中,在用户选择出关键图像帧后,为了便于用户查看,如图5所示,还可以利用一个矩形框将用户选择的关键图像帧框出,以便用户判断是否选择正确,需要说明的是,图5中的矩形框仅作示例性展示,除此以外还可以对用户选择出的图像关键帧赋予颜色,或者在关键图像帧下方用图书符号标记出等,具体的提醒用户的方式不做限定。
在本实施例的一种可选方案中,在用户选择出关键图像帧后,便可以直接将这些关键帧进行渲染输出。考虑到输出的关键帧图像的连续性和便利性,可以选取exr的图片格式,以多通道合并输出用户选择出的多张关键图像帧。
可选地,在基于第二图像确定第二虚拟场景的背景区域之后,方法还包括:获取第二虚拟场景的背景区域对应的背景图像;基于背景图像对第二虚拟场景中的背景模型进行渲染,得到目标虚拟场景;在交互界面中显示目标虚拟场景。
在本实施例的一种可选方案中,在确定出上述的背景图像,即上述第二虚拟场景的背景区域之后,便可以利用该图像对初始的背景模型进行渲染,生成用户所需的虚拟背景,以简化整个渲染流程,避免利用整体背景图像对背景模型渲染时造成的占用系统内存资源过多的问题。
举例来说,若是第二虚拟场景是天空场景,场景中的虚拟对象是建筑物,则上述的第二虚拟场景对应的背景图像就是指在不同位置、角度拍摄到的除去目标建筑的阴影部分,用户需要对该阴影部分对应的天空背景进行绘制。图6是根据本发明其中一实施例的虚拟场景图像的示意图,如图6所示,其中,整个图片代表的是存在目标对象的虚拟场景图像,图像右下角的1042代表的是这是第1042帧对应的第二图像,图中目标建筑部分代表的是上述的目标对象,则此时图6中由阴影区域,便可以是指上述的背景区域,也就是说,可以对上述阴影区域进行绘制处理,以得到背景区域。
为便于比对确定出的背景区域和原有的虚拟场景图像,图7是根据本发明其中一实施例的目标虚拟背景图像的示意图,如图7所示,通过上述方法确定出的背景区域的范围较小,用户只需要对背景区域进行绘制即可,无需对整个虚拟背景进行绘制,能够很大程度上提高渲染背景时的速度,而且不会涉及被目标建筑遮盖住的背景区域,不存在透视误差,其确定出的背景区域的精度也较高。
在生成最终的虚拟背景后,便可以将该虚拟背景与初始的第二虚拟场景相结合,例如将图7中的阴影区域,与其原有的包括建筑物的第二虚拟场景相结合,来得到上述的目标虚拟场景,并在交互界面中向用户展示该目标虚拟场景。
通过只生成特定区域的虚拟背景,很大程度上降低了系统对背景模型进行渲染时占用的内存资源,在提高渲染速度的同时,还提高了渲染的精度,提高了用户的使用体验。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例的方法。
在本实施例中还提供了一种背景区域确定装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“单元”、“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图8是根据本发明其中一实施例的背景区域确定装置的结构框图,通过终端设备提供一图形用户界面,图形用户界面所显示的内容包括触控区域,如图8所示,该装置包括:获取模块802,用于获取虚拟镜头的相机数据,其中,相机数据至少包括:虚拟镜头的运动轨迹;生成模块804,用于基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,第一图像用于表征虚拟镜头在运动过程中的运动范围;确定模块806,用于基于第一图像确定第一虚拟场景的背景区域。
可选地,相机数据还包括:运动轨迹对应的视野角度,生成模块804包括:运动单元,用于控制虚拟镜头按照运动轨迹进行运动;第一拍摄单元,用于控制虚拟镜头按照视野角度对第一虚拟场景进行拍摄,得到第一图像序列;第一合并单元,用于对第一图像序列进行合并,生成第一图像。
可选地,生成单元还用于:对第一图像序列进行帧冻结操作,得到多张拍摄图像;确定多张拍摄图像在第一图像序列中的目标位置;基于目标位置对多张拍摄图像进行标记,得到多张标记图像;将多张标记图像进行合并,生成第一图像。
可选地,生成单元还用于:确定目标位置对应的目标颜色;采用目标颜色的颜色信息对多张拍摄图像进行标记,得到多张标记图像。
可选地,生成单元还用于:获取预设色轮,其中,预设色轮包含的颜色逐渐变化;按照预设间隔对预设色轮进行采样,得到目标颜色。
可选地,该装置还包括:第二拍摄单元,用于基于相机数据控制虚拟镜头对第二虚拟场景进行拍摄,得到第二图像序列,其中,第二虚拟场景和第一虚拟场景均包含背景模型;第二合并单元,用于将第二图像序列与第一图像进行合并,得到第二图像;确定单元,用于基于第二图像确定第二虚拟场景的背景区域。
可选地,第二合并单元还用于:对第二图像序列进行采样,得到关键帧图像;将关键帧图像与第一图像进行合并,得到第二图像。
可选地,该装置还包括:背景图像获取模块,用于获取第二虚拟场景的背景区域对应的背景图像;渲染模块,用于基于背景图像对第二虚拟场景中的背景模型进行渲染,得到目标虚拟场景;显示模块,用于在交互界面中显示目标虚拟场景。
需要说明的是,上述各个单元、模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述单元、模块均位于同一处理器中;或者,上述各个单元、模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述计算机可读存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
可选地,在本实施例中,上述计算机可读存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中。
可选地,在本实施例中,上述计算机可读存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1:用于获取虚拟镜头的相机数据,其中,相机数据至少包括:虚拟镜头的运动轨迹;
S2:用于基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,第一图像用于表征虚拟镜头在运动过程中的运动范围;
S3:用于基于第一图像确定第一虚拟场景的背景区域
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:相机数据还包括:运动轨迹对应的视野角度,基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像包括:控制虚拟镜头按照运动轨迹进行运动;控制虚拟镜头按照视野角度对第一虚拟场景进行拍摄,得到第一图像序列;对第一图像序列进行合并,生成第一图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:对第一图像序列进行合并,生成第一图像包括:对第一图像序列进行帧冻结操作,得到多张拍摄图像;确定多张拍摄图像在第一图像序列中的目标位置;基于目标位置对多张拍摄图像进行标记,得到多张标记图像;将多张标记图像进行合并,生成第一图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:
基于目标位置对多张拍摄图像进行标记,得到多张标记图像包括:确定目标位置对应的目标颜色;采用目标颜色的颜色信息对多张拍摄图像进行标记,得到多张标记图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:确定目标位置对应的目标颜色包括:获取预设色轮,其中,预设色轮包含的颜色逐渐变化;按照预设间隔对预设色轮进行采样,得到目标颜色。。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:在基于第一图像确定第一虚拟场景的背景区域之后,方法包括:基于相机数据控制虚拟镜头对第二虚拟场景进行拍摄,得到第二图像序列,其中,第二虚拟场景和第一虚拟场景均包含背景模型;将第二图像序列与第一图像进行合并,得到第二图像;基于第二图像确定第二虚拟场景的背景区域。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:将第二图像序列与第一图像进行合并,得到第二图像包括:对第二图像序列进行采样,得到关键帧图像;将关键帧图像与第一图像进行合并,得到第二图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:在基于第二图像确定第二虚拟场景的背景区域之后,方法还包括:获取第二虚拟场景的背景区域对应的背景图像;基于背景图像对第二虚拟场景中的背景模型进行渲染,得到目标虚拟场景;在交互界面中显示目标虚拟场景。
在本发明至少部分实施例中,采用获取虚拟镜头的相机数据;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像;基于第一图像确定第一虚拟场景的背景区域的方式,通过利用目标视频中展示的初始虚拟场景的场景信息和虚拟镜头的运动轨迹,来确定需要用户绘制的背景区域的范围,不再对整体的虚拟背景进行绘制,能够提高用户绘制时的工作效率,同时,根据实际获取到的关于初始虚拟场景的目标视频来确定背景区域,不需要过多考虑在由虚拟镜头透视误差导致的图像精度差的问题,进一步的提高了确定出的背景区域的准确率,进而解决了相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本发明实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个计算机可读存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本发明实施方式的方法。
在本申请的示例性实施例中,计算机可读存储介质上存储有能够实现本实施例上述方法的程序产品。在一些可能的实施方式中,本发明实施例的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在终端设备上运行时,程序代码用于使终端设备执行本实施例上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的步骤。
根据本发明的实施方式的用于实现上述方法的程序产品,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明实施例的程序产品不限于此,在本发明实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
上述程序产品可以采用一个或多个计算机可读介质的任意组合。该计算机可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列举)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
需要说明的是,计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1:用于获取虚拟镜头的相机数据,其中,相机数据至少包括:虚拟镜头的运动轨迹;
S2:用于基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,第一图像用于表征虚拟镜头在运动过程中的运动范围;
S3:用于基于第一图像确定第一虚拟场景的背景区域
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:相机数据还包括:运动轨迹对应的视野角度,基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像包括:控制虚拟镜头按照运动轨迹进行运动;控制虚拟镜头按照视野角度对第一虚拟场景进行拍摄,得到第一图像序列;对第一图像序列进行合并,生成第一图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:对第一图像序列进行合并,生成第一图像包括:对第一图像序列进行帧冻结操作,得到多张拍摄图像;确定多张拍摄图像在第一图像序列中的目标位置;基于目标位置对多张拍摄图像进行标记,得到多张标记图像;将多张标记图像进行合并,生成第一图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:
基于目标位置对多张拍摄图像进行标记,得到多张标记图像包括:确定目标位置对应的目标颜色;采用目标颜色的颜色信息对多张拍摄图像进行标记,得到多张标记图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:确定目标位置对应的目标颜色包括:获取预设色轮,其中,预设色轮包含的颜色逐渐变化;按照预设间隔对预设色轮进行采样,得到目标颜色。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:在基于第一图像确定第一虚拟场景的背景区域之后,方法包括:基于相机数据控制虚拟镜头对第二虚拟场景进行拍摄,得到第二图像序列,其中,第二虚拟场景和第一虚拟场景均包含背景模型;将第二图像序列与第一图像进行合并,得到第二图像;基于第二图像确定第二虚拟场景的背景区域。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:将第二图像序列与第一图像进行合并,得到第二图像包括:对第二图像序列进行采样,得到关键帧图像;将关键帧图像与第一图像进行合并,得到第二图像。
可选地,上述计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码:在基于第二图像确定第二虚拟场景的背景区域之后,方法还包括:获取第二虚拟场景的背景区域对应的背景图像;基于背景图像对第二虚拟场景中的背景模型进行渲染,得到目标虚拟场景;在交互界面中显示目标虚拟场景。
在本发明至少部分实施例中,采用获取虚拟镜头的相机数据;基于相机数据控制虚拟镜头对第一虚拟场景进行拍摄,生成第一图像;基于第一图像确定第一虚拟场景的背景区域的方式,通过利用目标视频中展示的初始虚拟场景的场景信息和虚拟镜头的运动轨迹,来确定需要用户绘制的背景区域的范围,不再对整体的虚拟背景进行绘制,能够提高用户绘制时的工作效率,同时,根据实际获取到的关于初始虚拟场景的目标视频来确定背景区域,不需要过多考虑在由虚拟镜头透视误差导致的图像精度差的问题,进一步的提高了确定出的背景区域的准确率,进而解决了相关技术中确定虚拟场景中的待用户手动绘制背景区域的准确度差的技术问题。
图9是根据本发明实施例的一种电子装置的示意图。如图9所示,电子装置900 仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图9所示,电子装置900以通用计算设备的形式表现。电子装置900的组件可以包括但不限于:上述至少一个处理器910、上述至少一个存储器920、连接不同系统组件(包括存储器920和处理器910)的总线930和显示器940。
其中,上述存储器920存储有程序代码,程序代码可以被处理器910执行,使得处理器910执行本申请实施例的上述方法部分中描述的根据本发明各种示例性实施方式的步骤。
存储器920可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)9201和/或高速缓存存储单元9202,还可以进一步包括只读存储单元(ROM) 9203,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。
在一些实例中,存储器920还可以包括具有一组(至少一个)程序模块9205的程序/实用工具9204,这样的程序模块9205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。存储器920可进一步包括相对于处理器910远程设置的存储器,这些远程存储器可以通过网络连接至电子装置900。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
总线930可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理器910或者使用多种总线结构中的任意总线结构的局域总线。
显示器940可以例如触摸屏式的液晶显示器(LCD),该液晶显示器可使得用户能够与电子装置900的用户界面进行交互。
可选地,电子装置900也可以与一个或多个外部设备1000(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子装置900交互的设备通信,和/或与使得该电子装置900能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口950进行。并且,电子装置900还可以通过网络适配器960与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图9所示,网络适配器960通过总线930与电子装置900的其它模块通信。应当明白,尽管图9中未示出,可以结合电子装置900使用其它硬件和/或软件模块,可以包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
上述电子装置900还可以包括:键盘、光标控制设备(如鼠标)、输入/输出接口 (I/O接口)、网络接口、电源和/或相机。
本领域普通技术人员可以理解,图9所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,电子装置900还可包括比图9中所示更多或者更少的组件,或者具有与图1所示不同的配置。存储器920可用于存储计算机程序及对应的数据,如本发明实施例中的背景区域确定方法对应的计算机程序及对应的数据。处理器910 通过运行存储在存储器920内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的背景区域确定方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (11)

1.一种背景区域确定方法,其特征在于,包括:
获取虚拟镜头的相机数据,其中,所述相机数据至少包括:所述虚拟镜头的运动轨迹;
基于所述相机数据控制所述虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,所述第一图像用于表征所述虚拟镜头在运动过程中的运动范围;
基于所述第一图像确定所述第一虚拟场景的背景区域。
2.根据权利要求1所述的方法,其特征在于,所述相机数据还包括:所述运动轨迹对应的视野角度,基于所述相机数据控制所述虚拟镜头对第一虚拟场景进行拍摄,生成第一图像包括:
控制所述虚拟镜头按照所述运动轨迹进行运动;
控制所述虚拟镜头按照所述视野角度对所述第一虚拟场景进行拍摄,得到第一图像序列;
对所述第一图像序列进行合并,生成所述第一图像。
3.根据权利要求2所述的方法,其特征在于,对所述第一图像序列进行合并,生成所述第一图像包括:
对所述第一图像序列进行帧冻结操作,得到多张拍摄图像;
确定所述多张拍摄图像在所述第一图像序列中的目标位置;
基于所述目标位置对所述多张拍摄图像进行标记,得到多张标记图像;
将所述多张标记图像进行合并,生成所述第一图像。
4.根据权利要求3所述的方法,其特征在于,基于所述目标位置对所述多张拍摄图像进行标记,得到多张标记图像包括:
确定所述目标位置对应的目标颜色;
采用所述目标颜色的颜色信息对所述多张拍摄图像进行标记,得到所述多张标记图像。
5.根据权利要求4所述的方法,其特征在于,确定所述目标位置对应的目标颜色包括:
获取预设色轮,其中,所述预设色轮包含的颜色逐渐变化;
按照预设间隔对所述预设色轮进行采样,得到所述目标颜色。
6.根据权利要求1所述的方法,其特征在于,在基于所述第一图像确定所述第一虚拟场景的背景区域之后,所述方法包括:
基于所述相机数据控制所述虚拟镜头对第二虚拟场景进行拍摄,得到第二图像序列,其中,所述第二虚拟场景和所述第一虚拟场景均包含背景模型;
将所述第二图像序列与所述第一图像进行合并,得到第二图像;
基于所述第二图像确定所述第二虚拟场景的背景区域。
7.根据权利要求6所述的方法,其特征在于,将所述第二图像序列与所述第一图像进行合并,得到第二图像包括:
对所述第二图像序列进行采样,得到关键帧图像;
将所述关键帧图像与所述第一图像进行合并,得到所述第二图像。
8.根据权利要求6所述的方法,其特征在于,在基于所述第二图像确定所述第二虚拟场景的背景区域之后,所述方法还包括:
获取所述第二虚拟场景的背景区域对应的背景图像;
基于所述背景图像对所述第二虚拟场景中的所述背景模型进行渲染,得到目标虚拟场景;
在交互界面中显示所述目标虚拟场景。
9.一种背景区域确定装置,其特征在于,包括:
获取模块,用于获取虚拟镜头的相机数据,其中,所述相机数据至少包括:所述虚拟镜头的运动轨迹;
生成模块,用于基于所述相机数据控制所述虚拟镜头对第一虚拟场景进行拍摄,生成第一图像,其中,所述第一图像用于表征所述虚拟镜头在运动过程中的运动范围;
确定模块,用于基于所述第一图像确定所述第一虚拟场景的背景区域。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为被处理器运行时执行权利要求1至8任一项中所述的背景区域确定方法。
11.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至8任一项中所述的背景区域确定方法。
CN202211145809.4A 2022-09-20 2022-09-20 背景区域确定方法和装置、电子装置 Pending CN115580778A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211145809.4A CN115580778A (zh) 2022-09-20 2022-09-20 背景区域确定方法和装置、电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211145809.4A CN115580778A (zh) 2022-09-20 2022-09-20 背景区域确定方法和装置、电子装置

Publications (1)

Publication Number Publication Date
CN115580778A true CN115580778A (zh) 2023-01-06

Family

ID=84580900

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211145809.4A Pending CN115580778A (zh) 2022-09-20 2022-09-20 背景区域确定方法和装置、电子装置

Country Status (1)

Country Link
CN (1) CN115580778A (zh)

Similar Documents

Publication Publication Date Title
WO2021258994A1 (zh) 虚拟场景的显示方法、装置、设备及存储介质
CN112148189A (zh) 一种ar场景下的交互方法、装置、电子设备及存储介质
CN111556278A (zh) 一种视频处理的方法、视频展示的方法、装置及存储介质
CN111368137A (zh) 视频的生成方法、装置、电子设备及可读存储介质
CN109840946B (zh) 虚拟对象显示方法及装置
US20240078703A1 (en) Personalized scene image processing method, apparatus and storage medium
CN105389074A (zh) 一种智能手表的控制方法及智能手表
CN112492215B (zh) 拍摄控制方法、装置和电子设备
CN110544315A (zh) 虚拟对象的控制方法及相关设备
CN113680054A (zh) 基于计算机视觉库的游戏交互方法及装置
CN113269781A (zh) 数据生成方法、装置及电子设备
CN112612463A (zh) 一种图形化编程控制方法、系统及装置
CN112437231A (zh) 图像拍摄方法和装置、电子设备及存储介质
CN109841196B (zh) 一种基于透明液晶显示屏的虚拟偶像演播系统
CN115379195B (zh) 视频生成方法、装置、电子设备和可读存储介质
CN109829958B (zh) 一种基于透明液晶显示屏的虚拟偶像演播方法和装置
CN115580778A (zh) 背景区域确定方法和装置、电子装置
CN102880288A (zh) 一种3d显示的人机交互的方法、装置以及设备
CN113031846B (zh) 用于展示任务的描述信息的方法、装置及电子设备
CN114266305A (zh) 对象识别方法及装置、电子设备和存储介质
CN114742970A (zh) 虚拟三维模型的处理方法、非易失性存储介质及电子装置
CN113489920A (zh) 一种视频合成方法、装置及电子设备
KR20180053494A (ko) 모바일 환경에서의 증강현실 게임공간 구축방법
JP2022543510A (ja) 撮影方法、装置、電子機器及び記憶媒体
CN114422697B (zh) 基于光学捕捉的虚拟拍摄方法、系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination