CN117835002A - 一种虚拟场景的渲染方法、装置、计算机设备及存储介质 - Google Patents
一种虚拟场景的渲染方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN117835002A CN117835002A CN202410014844.5A CN202410014844A CN117835002A CN 117835002 A CN117835002 A CN 117835002A CN 202410014844 A CN202410014844 A CN 202410014844A CN 117835002 A CN117835002 A CN 117835002A
- Authority
- CN
- China
- Prior art keywords
- weather
- virtual
- virtual scene
- room
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009877 rendering Methods 0.000 title claims abstract description 89
- 238000000034 method Methods 0.000 title claims abstract description 64
- 230000000694 effects Effects 0.000 claims abstract description 310
- 230000003993 interaction Effects 0.000 claims abstract description 104
- 239000000463 material Substances 0.000 claims description 16
- 230000004044 response Effects 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 6
- 230000009471 action Effects 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 claims 1
- 230000008859 change Effects 0.000 abstract description 15
- 238000013507 mapping Methods 0.000 description 19
- 239000002245 particle Substances 0.000 description 17
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 8
- 230000000386 athletic effect Effects 0.000 description 6
- 238000013515 script Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000001556 precipitation Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- SNICXCGAKADSCV-UHFFFAOYSA-N nicotine Chemical compound CN1CCCC1C1=CC=CN=C1 SNICXCGAKADSCV-UHFFFAOYSA-N 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000003595 mist Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004576 sand Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000000149 argon plasma sintering Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 239000005441 aurora Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000011010 flushing procedure Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000012925 reference material Substances 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4781—Games
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请实施例公开了一种虚拟场景的渲染方法、装置、计算机设备及存储介质。本方案通过获取虚拟直播间对应的真实地理位置的天气数据,根据天气数据渲染虚拟直播间中虚拟场景的天气特效,可以将实时的气象数据映射到虚拟场景的天气特效上,使得虚拟场景能够随着实际天气的变化而变化,然后,当检测到观众与虚拟直播间的交互事件,可以获取观众与虚拟直播间的交互信息,进而可以基于交互信息更新虚拟直播间的虚拟场景的天气特效。可以实现虚拟直播间的观众与虚拟场景之间的互动,从而可以提高虚拟直播间的观众的直播观看体验。
Description
技术领域
本申请涉及计算机技术领域,具体涉及一种虚拟场景的渲染方法、装置、计算机设备及存储介质。
背景技术
随着互联网技术的发展,直播应用范围越来越广,电竞赛事的直播越来越受欢迎。在众多的直播方式中,AR(Augmented Reality,增强显示)虚拟直播则是一种热门的表现形式,它可以实时呈现虚拟效果,丰富直播画面的环境表现。其中,直播间的气候环境的呈现对电竞赛事的直播表现也有重要的影响。
相关技术中,虚拟直播中显示的天气特效大多是预设的,如虚拟场景下的天气通常是固定的,或者是根据节目需要提前设定的,无法实时反应真实世界的天气变化,导致观众在观看赛事直播时感到缺乏真实感,而且,观众与虚拟直播间的交互方式较少,从而影响观众的直播观看体验。
发明内容
本申请实施例提供一种虚拟场景的渲染方法、装置、计算机设备及存储介质,可以提高虚拟直播间的观众的直播观看体验。
本申请实施例提供了一种虚拟场景的渲染方法,包括:
获取虚拟直播间对应的真实地理位置的天气数据;
根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;
响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;
基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。
相应的,本申请实施例还提供了一种虚拟场景的渲染装置,包括:
第一获取单元,用于获取虚拟直播间对应的真实地理位置的天气数据;
渲染单元,用于根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;
第二获取单元,用于响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;
更新单元,用于基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。
相应的,本申请实施例还提供了一种计算机设备,包括存储器,处理器及存储在储存器上并可在处理器上运行的计算机程序,其中,处理器执行本申请实施例任一提供的虚拟场景的渲染方法。
相应的,本申请实施例还提供了一种存储介质,存储介质存储有多条指令,指令适于处理器进行加载,以执行如上的虚拟场景的渲染方法。
本申请实施例通过获取虚拟直播间对应的真实地理位置的天气数据,根据天气数据渲染虚拟直播间中虚拟场景的天气特效,可以将实时的气象数据映射到虚拟场景的天气特效上,使得虚拟场景能够随着实际天气的变化而变化,然后,当检测到观众与虚拟直播间的交互事件,可以获取观众与虚拟直播间的交互信息,进而可以基于交互信息更新虚拟直播间的虚拟场景的天气特效。可以实现虚拟直播间的观众与虚拟场景之间的互动,从而可以提高虚拟直播间的观众的直播观看体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种虚拟场景的渲染方法的应用场景示意图。
图2为本申请实施例提供的一种虚拟场景的渲染方法的流程示意图。
图3为本申请实施例提供的另一种虚拟场景的渲染方法的流程示意图。
图4为本申请实施例提供的另一种虚拟场景的渲染方法的流程示意图。
图5为本申请实施例提供的另一种虚拟场景的渲染方法的流程示意图。
图6为本申请实施例提供的另一种虚拟场景的渲染方法的流程示意图。
图7为本申请实施例提供的另一种虚拟场景的渲染方法的流程示意图。
图8为本申请实施例提供的一种虚拟场景的渲染装置的结构框图。
图9为本申请实施例提供的计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种虚拟场景的渲染方法、装置、存储介质及计算机设备。具体地,本申请实施例的虚拟场景的渲染方法可以由计算机设备执行,其中,该计算机设备可以为服务器等设备。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。
例如,请参阅图1,图1为本申请实施例提供的一种虚拟场景的渲染方法的应用场景示意图。图1中提供的虚拟场景的渲染系统,包括服务器、主播端以及观众端,主播端与服务通过网络进行连接,观众端与服务器通过网络进行连接。其中,网络中包括路由器、网关等网络实体。
具体的,主播端可以采集进行直播的音视频数据,将音视频数据发送至服务器,服务器可以对音视频数据进行处理,结合AR技术生成直播虚拟场景,将音视频数据与直播虚拟场景结合得到直播视频流,进而将直播视频流推送至观众端,以使观众端的观众观看直播。
上述图1的例子只是实现本发明实施例的一个系统架构实例,本发明实施例不限于上述图1所示的系统结构,基于该系统架构,提出本发明各个实施例。
例如,该计算机设备可以是服务器,该服务器可以获取虚拟直播间对应的真实地理位置的天气数据;根据天气数据渲染虚拟直播间中虚拟场景的天气特效;响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息;基于交互信息更新虚拟直播间的虚拟场景的天气特效。
基于上述问题,本申请实施例提供第一种虚拟场景的渲染方法、装置、计算机设备及存储介质,可以提高虚拟直播间的观众的直播观看体验。
以下分别进行详细说明。需说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
本申请实施例提供一种虚拟场景的渲染方法,该方法可以由终端或服务器执行,本申请实施例以虚拟场景的渲染方法由服务器执行为例来进行说明。
请参阅图2,图2为本申请实施例提供的一种虚拟场景的渲染方法的流程示意图。该虚拟场景的渲染方法的具体流程可以如下:
101、获取虚拟直播间对应的真实地理位置的天气数据。
在本申请实施例中,虚拟直播间指的是通过搭建虚拟的场景作为直播场景的直播间。虚拟直播间中的主播可以为真实用户或者虚拟对象。
在一些实施例中,虚拟直播间中的主播可以为真实用户,则虚拟直播间可以使用AR直播方式进行直播,将真实用户与虚拟场景相结合。
其中,AR直播是一种结合了现实世界和虚拟世界的直播形式。使用AR技术,可以在真实环境中加入虚拟元素。观众可以通过终端观看这些直播内容,也即可以看到现实世界中的主播和虚拟元素,这种直播形式也拓展了直播的应用场景。
其中,真实地理位置可以为虚拟直播间中的主播所在的地理位置,真实地理位置也可以是搭建虚拟直播间的现实场所所在的地理位置。
其中,天气数据包括真实地理位置的实时天气信息。天气数据的获取方式可以包括多种,比如,可以通过接入天气应用软件,从天气应用软件中获取该真实地理位置的天气数据,或者可以通过天气传感器采集天气数据。
具体的,天气传感器是一种用于监测和记录天气情况的设备。天气传感器可以记录多个天气参数,如温度、湿度、气压、风速、降水量、辐射强度等,并利用先进的传感器技术、数据分析和人工智能算法提高天气预测的准确性和精度。
在一些实施例中,虚拟直播间可以直播电竞赛事的直播间,则虚拟直播间中可以包括多个参与电竞比赛的参赛用户以及主持电竞比赛的主持用户等,这些用户可以作为虚拟直播间的主播用户,可以将电竞赛事的举办点作为虚拟直播间的真实地理位置,获取该真实地理位置的天气数据。
102、根据天气数据渲染虚拟直播间中虚拟场景的天气特效。
其中,虚拟直播间的虚拟场景可以为通过虚拟场景的搭建平台进行设计,比如,虚拟场景的搭建平台可以包括三维软件(如3dsmax)、虚幻引擎等,首先可以通过搭建平台设计一个初始的虚拟场景,作为虚拟直播间的虚拟场景。
具体的,虚幻引擎是一款强大的游戏引擎,可以用于虚拟场景的设计和构建,使得场景的搭建和渲染变得更加高效和逼真,使用虚幻引擎,可以轻松地搭建超写实场景,并使用其强大的渲染能力和快速迭代能力,实现实时效果合成,打造超逼真场景。此外,虚幻引擎还可以与虚拟拍摄技术相结合,通过搭建虚拟三维场景与真实拍摄进行合成,实现更加逼真的场景效果。
在本申请实施例中,获取真实地理位置的实时天气数据后可以根据实时天气数据渲染虚拟直播间的虚拟场景的天气环境,以在虚拟直播间展现实时天气表现。
在一些实施例中,步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”,可以包括以下操作:
对天气数据进行识别处理,得到天气数据中包括的目标气象要素,以及目标气象要素对应的属性参数;
获取目标气象要素对应的预设天气特效;
根据属性参数调整预设天气特效,得到目标天气特效;
基于目标天气特效渲染虚拟场景。
其中,气象要素指的是表明大气物理状态、物理现象的各项要素。比如,气象要素可以包括:气温、气压、风、湿度、云、降水以及各种天气现象等。
在本申请实施例中,目标气象要素指的是天气数据中包括的天气现象,其中,目标气象要素的属性参数指的是天气现象的表现程度。比如,目标气象要素可以为下雨,则目标气象要素的属性参数可以包括雨量,雨量越大,表示下雨程度越高等。
其中,对天气数据进行识别处理可以天气识别模块对天气数据进行识别。
在本申请实施例,预先训练一个天气识别模块,通过训练后的天气识别模块可以准确识别天气数据中的天气信息。
其中,训练天气识别模块的步骤可以包括:采集多个样本天气数据,通过人工标记个样本天气数据中包括的真实气象要素,以及气象要素对应的真实属性参数。然后,可以将样本天气数据、真实气象要素以及真实属性参数输入预设的天气识别模块(可以为一个深度学习网络),通过预设的天气识别模块识别对样本天气数据进行识别,得到样本天气数据的预测气象要素以及预测属性参数,进一步的,计算真实气象要素与预测气象要素之间的第一差异,以及真实属性参数与预测属性参数之间的第二差异,基于第一差异与第二差异对预设的天气识别模块中的模块参数进行调整,以得到可以准确识别天气数据的训练后的天气识别模块。
例如,可以将天气数据输入训练后的天气识别模块,通过天气识别模块对天气数据进行识别,输出天气数据对应的目标气象要素,以及目标气象要素对应的属性参数。
在一些实施例中,天气数据中可以包括至少一种气象要素。
例如,请参阅图3,图3为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。通过对天气数据进行气象识别,可以得到天气数据对应的目标气象要素,以及目标气象要素对应的属性参数。
其中,目标气象要素包括多种,分别可以为:雨、风、云、闪电以及雾,其中,雨对应的属性参数包括:雨量:8;风对应的属性参数包括:风向:东,风力:4;云对应的属性参数包括:云范围:8;闪电对应的属性参数包括:闪电数量:8;雾对应的属性参数包括:雾浓度:1。
进一步的,可以将目标气象要素以及对应的属性参数通过脚本链接到虚拟场景中,通过虚拟场景中的接收蓝图根据目标气象要素以及对应的属性参数以及预设天气特效,生成天气数据对应的天气特效蓝图,该天气特效蓝图中可以包括:雨特效-雨量:8;风特效-风向:
东,风力:4;云特效-云覆盖范围:8;闪电特效-闪电数量:8;雾特效-物浓度:1。其中,若不存在某一类天气要素,或者该天气要素的属性参数为0,则不触发该天气要素的天气特效。
在本申请实施例中,可以预先在虚幻引擎中制作不同气象要素对应的天气特效,具体的,可以在虚幻引擎中通过Niagara插件制作天气特效。其中,Niagara也即粒子系统,通过在粒子系统中添加粒子发射器(Niagara Emitter)来实现粒子效果,其中,粒子系统可包含一个或多个粒子发射器,粒子系统中可以新建粒子发射器。
其中,粒子发射器用于发射一组粒子,对粒子进行控制以实现粒子效果,可以用于制作特效,具体的,粒子发射器可以用来限定粒子活动范围的,以及给定随机产生的粒子一个初始位移和速度。通过粒子发射器控制粒子实现粒子效果可以通过对粒子的不同参数进行设置。
在本申请实施例中,可以在天气插件中预先设置有多个天气要素,天气要素可以包括:闪电、雨、雷电雨、冰雹、尘土、沙尘暴、彩虹、极光、雪等。其中,预设的天气要素具体包括哪些可以根据实际需求确定。每种天气要素都对应有相应的天气效果,例如,雨对应的天气效果是降雨,雪对应的天气效果是降雪等。
其中,对于每个天气要素,设定用于实现其对应的天气效果的材质信息和/或网格信息,具体地,天气要素可以仅对应有材质信息,也可以仅对应有网格信息,还可以既对应有材质信息又对应有网格信息。其中,材质信息用于指示天气要素的材质属性、在天气要素对应的天气效果下,虚拟场景中的模型的材质属性等;网格信息用于指示天气要素的形态和大小,以及天气要素对应的天气效果的形态等。
进一步的,根据天气要素对应的预设天气特效,材质信息等,确定目标天气要素对应的目标天气蓝图,该目标天气蓝图用于指示目标天气要素对应的目标天气效果在虚拟场景中的生成时间和生成位置等。该目标天气蓝图中包含有实现目标天气要素的目标天气效果的逻辑。
其中,在天气蓝图中可以根据目标天气元素的属性参数对天气特效进行调整,以得到目标天气特效,然后可以通过执行目标天气蓝图的逻辑,将目标天气特效叠加到虚拟场景中显示。
其中,蓝图(BluePrint)是虚幻引擎开发的可视化脚本语言。蓝图是一种允许以可视化的方式创建内容的系统,所构建的内容通常称作“蓝图文件”。使用蓝图的时候,采用更加可视化的方法,通过将不同功能的蓝图节点连接起来,即可以实现想要的功能。
例如,请参阅图4,图4为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。可以将不同天气特效进行模块化集成整理,以方便虚拟场景中的天气蓝图后续重复调用实现虚拟场景的天气特效,可以节省下一次使用的复用迭代成本。比如,可以将雨特效封装为雨特效模块、风特效模块、云特效模块,闪电特效模块等。其中,雨特效模块中可以包括雨的属性参数为:雨量、雨滴速度、雨滴大小;风特效模块中可以包括风的属性参数为:风向、风力;云特效模块中可以包括云的属性参数为:云覆盖范围、云透明度、云细节程度;闪电特效模块中可以包括闪电的属性参数为:闪电数量、闪电大小、闪电亮度。将属性参数接口(如雨量大小,风力方向)暴露出来,供引擎蓝图进行调用。
在一些实施例中,还可以针对虚拟场景的布局,单独设计天气特效的范围和与场景交互表现方式,以提高虚拟场景的局部天气环境表现。
其中,当目标天气要素包括多种时,需要将多个目标天气要素分别对应的天气特效的参数串联,以实现虚拟场景的多个天气特效的叠加。
在一些实施例中,为了提高虚拟场景的天气表现的真实效果,步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”,可以包括以下操作:
基于天气数据提取天气描述文本;
根据天气描述文本生成天气特效贴图,并基于天气特效贴图渲染虚拟场景。
其中,天气描述文本可以包括与天气数据相关的气象关键词,比如,天气数据的目标气象要素可以包括:雨、雪,则从天气数据中提取的气象描述文本可以为“雨”“雪”。
其中,根据天气描述文本生成天气特效贴图可以使用图片生成工具自动生成与天气描述文本对应的天气特效贴图。
在本申请实施例中,可以通过Sunshine Flow美术工具封装成一个独立的生产管线,针对不同天气训练氛围HDRI(High Dynamic Range Imaging,高动态范围成像)贴图模型,如多云、阴天、晴天。
其中,SunshineFlow工具是一款图片处理工具,能够无损放大图片尺寸大小,同时去除噪点,非常实用。该工具的工作原理借助神经网络技术,可以在放大的同时去除图片噪点。此外,SunshineFlow还提供各种有用工具和延伸产品,将机器学习任务的各种有用工具和参考资料收集在一起,方便用户查找和使用。
在一些实施例中,图片生成工具可以为HDRI贴图模型,通过将天气描述文本输入HDRI贴图模型中,通过HDRI贴图模型生成与天气描述文本对应的天气特效贴图。
在本申请实施例中,可以预先训练一个HDRI贴图模型,通过训练后的HDRI贴图模型可以根据气象关键词生成对应的天气特效贴图。
其中,训练HDRI贴图模型的步骤可以包括:采集多个样本天气描述文本以及与样本天气描述文本对应的样本天气特效贴图。然后,可以根据样本天气描述文本以及样本天气特效贴图对预设的HDRI贴图模型进行训练,包括将样本天气描述文本输入预设的HDRI贴图模型中,通过预设的HDRI贴图模型生成的初始的天气特效贴图,进一步的,计算样本天气特效贴图与生成的初始的天气特效贴图之间的差异,基于该差异调整HDRI贴图模型的参数,直至生成的天气特效贴图与样本天气特效贴图相似度高于预设值,从而得到可以准确生成与天气描述文本对应的天气特效贴图。
例如,可以将天气描述文本输入训练后的HDRI贴图模型中,通过HDRI贴图模型根据天气描述文本生成对应的天气特效贴图,得到天气数据对应的天气特效贴图,然后可以根据该天气特效贴图对虚拟场景进行渲染,以展示虚拟场景的天气特效。
其中,在将天气描述文本输入HDRI贴图模型之前,为了提高天气特效贴图生成的准确性,还可以加入Chat-GPT(Chat Generative Pre-trained Transformer,聊天生成预训练转换器)辅助细化描述关键词。也即通过Chat-GPT完善天气描述文本,以得到具体的天气效果描述,比如,从天气数据中提取到的天气描述文本可以为“雨”,通过“雨”生成的天气特效图片范围太广,因此可以将该天气描述文本“雨”输入Chat-GPT,通过Chat-GPT加入关键词,补充天气描述,比如,补充后的天气描述可以为“大雨”等。
其中,ChatGPT是OpenAI研发的聊天机器人程序,ChatGPT是人工智能技术驱动的自然语言处理工具,它能够通过理解和学习人类的语言来进行对话,还能根据聊天的上下文进行互动,真正像人类一样来聊天交流,甚至能完成撰写邮件、视频脚本、文案、翻译、代码,写论文等任务。
在本申请实施例中,HDRI贴图模型生成图片可以由DreamMaker进行AI绘制,最后导出为HDRI格式图像资源。其中,DreamMaker是一个人工智能绘制工具,它可以帮助用户快速绘制出各种形状和图案。通过DreamMaker,用户可以轻松地创建出具有高度创意的艺术作品和设计作品。DreamMaker的绘制功能包括涂鸦、绘图、形状绘制、文字编辑等多种功能,可以帮助用户快速地创作出具有独特风格的艺术作品。同时,DreamMaker还提供了丰富的素材库和模板,用户可以根据自己的需求选择不同的素材和模板进行创作。
在一些实施例中,当真实地理位置的天气数据发生变化后,可以根据变化后的天气数据重新生成新的天气特效贴图,替换之前的天气特效贴图,以实现虚拟场景的天气效果跟随实时天气数据的变化而变化。
例如,请参阅图5,图5为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。通过对天气数据进行气象识别,可以得到天气数据中天气描述文本,也即气象识别关键词,然后可以通过ChatGPT辅助细化描述关键词,在天气描述文本中加入预设抬手式正/反向关键词,得到细化后的天气描述文本。
进一步的,可以将细化后的天气描述文本输入HDRI贴图模型,使用DreamMaker根据细化后的天气描述文本生成图片,然后将生成的图片进行调整,比如,根据虚拟场景的尺寸调整图片的尺寸,以及进行裁剪等,将处理后的图片保存为天气特效的HDRI贴图。
然后,可以通过脚本将天气特效的HDRI贴图输入虚拟场景中,通过虚拟场景中的接收蓝图根据接收的HDRI贴图生成HDRI蓝图,运行HDRI蓝图以实现虚拟场景的天气特效。
其中,当天气数据发生变化后,可以根据变化后的天气数据重新生成新的天气特效贴图,替换之前的天气特效贴图,以实现虚拟场景的天气效果跟随实时天气数据的变化而变化。
具体的,贴图的替换流程可以包括:新的HDRI资源后通过编写脚本自动导入到虚幻引擎中,通过引擎蓝图中的Timeline节点控制新旧两张HDRI贴图之间的混合的权重和时长,实现无感衔接。根据天气变化,实时改变环境HDRI贴图,可以提供更多的动态范围和图像细节,进一步丰富场景中反射物体的细节转换和丰富程度。
在一些实施例中,为了提高虚拟场景与天气特效环境的融合效果,在步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”之后,还可以包括以下步骤:
根据天气数据确定虚拟场景的灯光调节信息;
基于灯光调节信息对虚拟场景的灯光进行调整。
在本申请实施例中,可以将虚拟场景中的关键灯光与辅助氛围灯光通过虚幻引擎蓝图分别管理,根据天气变化,对灯光的强弱颜色表现进行变化,侧重对氛围光源进行调整,从而既能保留虚拟电竞场景主要部分自身的光源颜色,又能适当地与周围天气环境进行融合。
其中,可以预先设置不同天气特效对应的灯光调节信息。灯光调节信息可以包括调整灯光亮度,比如调高亮度、调低亮度等。
例如,天气特效为雨特效,且雨特效中的雨量小于预设标准雨量时,设置对应的灯光调节信息可以为调高亮度。
具体的,根据天气数据确定虚拟场景的灯光调节信息,可以包括根据天气数据对应的目标天气特效获取对应的灯光调节信息,然后根据灯光调节信息对虚拟场景的灯光进行调整。
例如,请参阅图6,图6为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。通过对天气数据进行气象识别,可以得到天气数据对应的目标气象要素,以及目标气象要素对应的属性参数。
其中,目标气象要素可以包括:雨、云,其中,雨对应的属性参数包括:雨量:8;云对应的属性参数包括:云浓度:8。进一步的,可以将目标气象要素以及对应的属性参数通过脚本链接到虚拟场景中,通过虚拟场景中的接收蓝图根据目标气象要素以及对应的属性参数,生成对应的灯光蓝图,该灯光蓝图的预设逻辑可以包括:雨量>默认标准值时,降低场景灯光亮度;云浓度>默认标准值时,降低场景灯光亮度;雨量<默认标准值时,提高场景灯光亮度;云浓度<默认标准值时,提高场景灯光亮度。
其中,在根据目标气象要素以及对应的属性参数判定灯光调节信息时,若目标气象要素包括多种,则可以取其中一至两种气象要素进行判定即可。
具体的,灯光蓝图可以根据目标气象要素以及对应的属性参数对应的灯光调整逻辑进行虚拟场景的灯光调整。
在一些实施例中,为了进一步提高天气特效的表现效果,在步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”之后,还可以包括以下操作:
根据天气数据生成天气音效;
将天气音效叠加至虚拟场景的场景音效。
在本申请实施例中,可以预先制作不同天气特效对应的天气音效,存储为音效资源。则根据天气数据生成天气音效,可以包括根据天气数据对应的目标天气特效,获取该目标天气特效对应的预设天气音效,进而可以通过音效引擎蓝图控制天气音效的播放。
例如,天气特效可以为雨特效,且雨特效中的雨量大于预设标准雨量时,设置对应的音效可以为:下雨音效,且音量对应雨量设置。比如,雨量可以为:8,则对应设置下雨音效的音量为:8。
例如,请参阅图7,图7为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。通过对天气数据进行气象识别,可以得到天气数据对应的目标气象要素,以及目标气象要素对应的属性参数。
其中,目标气象要素包括多种,分别可以为:雨、风、闪电,其中,雨对应的属性参数包括:雨量:8;风对应的属性参数包括:风向:东,风力:4;闪电对应的属性参数包括:闪电数量:8。进一步的,可以将目标气象要素以及对应的属性参数通过脚本链接到虚拟场景中,通过虚拟场景中的接收蓝图根据目标气象要素以及对应的属性参数,生成对应的音效蓝图。
其中,音效蓝图的预设逻辑可以包括:雨量:8>0时,设置雨音量为8;闪电:8>0时,设置雷音量为8;风力:4>0时,设置风音量为4;雨量:0=0时,设置雨音量为0;闪电:0=0时,设置雷音量为0;风力:0=0时,设置风音量为0。具体的,音效蓝图可以根据目标气象要素以及对应的属性参数对应的音效逻辑进行虚拟场景的音效配置。
在一些实施例中,为了提现虚拟场景中的物体与目标天气特效的交互效果,在步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”之后,还可以包括以下步骤:
根据虚拟场景的天气特效,调整虚拟场景中的场景模型的材质参数。
其中,在场景模型母材质中需要互动变化的属性上预留参数节点(例如粗糙、反射、AO(Ambient Occlusion环境光散射)、基础颜色等,根据需求优先级决定是否加入更加复杂的节点),然后通过控制动态材质实例中这些材质属性的参数值,来对应场景中的天气变化。
具体的,可以修改材质的PBR(Physicallly-Based-Rendering,基于物理渲染)属性,来营造受天气影响的虚拟物体的表面效果。例如,降水打湿的物体表面、降雪落在物体上的堆积。
在一些实施例中,为了提现虚拟场景中的物体与目标天气特效的交互效果,在步骤“根据天气数据渲染虚拟直播间中虚拟场景的天气特效”之后,还可以包括以下操作:
根据虚拟场景的天气特效,控制虚拟场景中的场景模型的动作状态。
具体的,当天气特效中存在风特效时,需要实现虚拟场景中的场景模型跟随风运动,比如树梢摇摆、烛火摇曳、旗帜飘舞等。
在本申请实施例中,场景模型的动态可以通过控制材质UV中的Normal贴图流动和顶点偏移速度来呈现,改变顶点偏移的速度,可以还原风力大小变化的效果。通过将这些参数接口暴露出来供引擎蓝图对天气特效进行一个耦合性关联匹配即可。
103、响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息。
其中,观众与虚拟直播间的交互事件可以包括观众与虚拟直播间之间的各种互动,比如,点赞、投票、送礼,发送弹幕消息等等。
在一些实施例中,步骤“响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息”,可以包括以下操作:
响应于观众与虚拟直播间之间的互动,获取观众与虚拟直播间的互动次数。
其中,观众与虚拟直播间之间的互动可以为观众对虚拟直播间进行投票,则观众与虚拟直播间的互动次数可以为投票次数。进而可以根据投票次数更新虚拟直播间的天气特效。
在一些实施例中,虚拟直播间可以为赛事竞技直播间,该赛事竞技直播间中包括至少两方战队阵营,不同战队阵营可以位于不同的真实地理位置,则赛事竞技直播间中不同战队阵营对应的虚拟场景的天气特效可以不相同。
例如,赛事竞技直播间中可以包括战队A和战队B,战队A所在的真实地理位置可以为:位置a,战队B所在的真实地理位置可以为:位置b。在该赛事竞技直播间中,划分两个展示区域,一个展示区域用于展示战队A的画面,一个展示区域用于展示战队B的画面,其中,可以为战队A和战队B设置不同的虚拟场景。
进一步的,获取位置a的实时天气数据,根据位置a的实时天气数据渲染战队A的虚拟场景的天气特效;以及获取位置b的实时天气数据,根据位置b的实时天气数据渲染战队B的虚拟场景的天气特效。
其中,该赛事竞技直播间中的观众可以选择喜欢的战队阵营进行投票,通过投票方式改变战队阵营对应的虚拟场景的天气特效,则观众与虚拟直播间之间的互动可以包括观众对虚拟直播间中的各个战队阵营的投票,观众与虚拟直播间的互动次数可以包括观众对各个战队阵营的投票次数,比如,有5个观众对战队阵营A进行投票,则战队阵营A收到的投票次数为:5。
在一些实施例中,步骤“响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息”,可以包括以下操作:
响应于观众对虚拟直播间的礼物赠送事件,获取观众赠送的目标虚拟礼物。
其中,观众与虚拟直播间的交互事件可以为观众对直播间进行礼物赠送。观众与虚拟直播间的交互信息也即观众对虚拟直播间赠送的虚拟礼物。
在本申请实施例中,可以预先设计多个与天气相关的虚拟礼物,该天气相关的虚拟礼物可以触发更新虚拟直播间中的虚拟场景的天气特效。
具体的,可以提前在引擎中或直播平台服务器中制作好对应天气的AR礼物特效/直播礼物资产,(假设a礼物的一级分类编号为A,则根据天气再细化设计的礼物效果为二级分类,如晴天状态效果为A1,雨天效果为A2,雪天效果为A3)。
例如,请参阅图7,图7为本申请实施例提供的另一种虚拟场景的渲染方法的应用场景示意图。设置a礼物时,设定一级分类编号为A,进一步根据常规天气划分不同的天气效果,包括A1,雨天效果;A2,晴天效果;A3,黄沙天效果,A4,雪天效果。
例如,可以预先设计多个天气特效礼物,可以包括:天气特效礼物1,天气特效礼物2,天气特效礼物3,天气特效礼物4等。对于每一天气礼物特效,设定多个天气效果,分别对应不同的天气特效。比如,天气特效可以包括晴天、雨天、雪天、雷电等,则对于天气特效礼物1,可以设定第一晴天效果、第一雨天效果、第一雷电效果;对于天气特效礼物2,可以设定第二晴天效果、第二雨天效果、第二雷电效果;对于天气特效礼物3,可以设定第三晴天效果、第三雨天效果、第三雷电效果;对于天气特效礼物4,可以设定第四晴天效果、第四雨天效果、第四雷电效果等等。
在一些实施例中,步骤“响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息”,可以包括以下操作:
响应于观众对虚拟直播间的消息发送事件,获取观众发送的消息内容。
其中,观众对虚拟直播间的消息发送事件可以包括观众在虚拟直播间发送弹幕消息,则观众发送的消息内容可以为观众在虚拟直播间发送的弹幕消息内容。进而可以根据观众发送的弹幕消息内容触发更新虚拟直播间的虚拟场景的天气特效的更新。
在一些实施例中,为了提高虚拟直播间的观众用户与虚拟直播间的互动,在步骤“响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息”之前,还可以包括以下步骤:
基于虚拟场景的天气特效,生成与天气特效相关的至少一个候选消息内容。
具体的,基于虚拟场景天气变化基础,服务器可以利用ChatGPT实时创作与天气特效相关的词条,作为候选消息内容,并将生成的候选消息内容上传到线上直播平台服务器,以同步更新到观众端,可以方便用户快捷选取天气特效相关的词条进行弹幕发送。
在一些实施例中,当虚拟直播间为赛事竞技直播间时,可以根据虚拟直播间的虚拟场景的天气特效,实时生成与天气特效相关的应援词条,观众可以选择应用词条发送至虚拟直播间,以支持某一战队阵营。
例如,当前虚拟直播间的天气特效可以为雨天特效,则利用ChatGPT生成与雨天特效相关的应援词条可以包括:“风雨交加,战队势不可挡!”,“暴雨冲刷,必将夺魁!”,“雨幕飘飘,战队绝不退缩!”,“风雨同行,必定问鼎!”,“暴雨倾城,战队队所向披靡!”等等。这些应援词条可以显示在观众端的界面,从而方便观众快速选择应援词条支持所选战队。
在一些实施例中,步骤“响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息”,可以包括以下操作:
响应于观众对虚拟直播间的消息发送事件,从至少一个候选消息内容中获取观众发送的消息内容。
其中,观众对虚拟直播间的消息发送事件还可以包括观众在虚拟直播间发送应援词条,观众可以从自动生成的多个应援词条中选择一个应援词条发送在虚拟直播间,则观众发送的消息内容可以为选择的应援词条的内容。
104、基于交互信息更新虚拟直播间的虚拟场景的天气特效。
在一些实施例中,若交互信息为投票次数,步骤“基于交互信息更新虚拟直播间的虚拟场景的天气特效”,可以包括以下操作:
根据互动次数确定天气特效强度;
基于天气特效强度调整虚拟场景的天气特效,得到更新后的虚拟场景的天气特效。
其中,根据互动次数确定天气特效强度可以为根据投票次数确定天气特效强度。
在本申请实施例中,可以预先设定不同投票次数对应的天气特效强度,其中,投票次数越多,天气特效强度越高。比如,天气特效为雨特效,投票次数越多,雨量越大等。
其中,天气特效强度可以通过数值表示,比如:1、2、3、4、5,...,数值越大表示天气特效强度越高。
例如,获取到的投票次数可以为:100,根据该投票次数100确定的天气特效强度可以为:5,进而可以将当前虚拟直播间的虚拟场景的天气特效的强度调整为5,以实现根据用户投票控制虚拟直播间的天气特效更新。
在一些实施例中,当虚拟直播间为赛事竞技直播间时,交互信息可以包括不同战队收到的投票次数,则基于交互信息更新虚拟直播间的虚拟场景的天气特效可以包括:根据不同战队收到的投票次数确定需要更新天气特效的战队的虚拟场景的天气特效。
例如,战队阵营A收到的投票次数为:158,战队阵营B收到的投票次数可以为:200,通过将两方战队营造收到的投票次数进行比较,可以确定战队阵营A收到的投票次数小于战队阵营B收到的投票次数,则可以确定需要更新天气特效的虚拟场景为战队阵营B对应的虚拟场景。
进一步的,根据战队阵营B收到的投票次数确定天气特效强度,进而根据天气特效强度更新战队阵营B对应的虚拟场景的天气特效。
在一些实施例中,若交互信息为虚拟礼物赠送信息,步骤“基于交互信息更新虚拟直播间的虚拟场景的天气特效”,可以包括以下操作:
获取目标虚拟礼物对应的天气特效;
基于目标虚拟礼物对应的天气特效更新虚拟场景的天气特效。
例如,观众向虚拟直播间赠送的目标虚拟礼物为天气特效礼物3,当前虚拟场景的天气特效可以为雨特效,则可以将天气特效礼物3对应雨特效的第一雨天效果作为目标虚拟礼物对应的天气特效,进一步的,基于该第一雨天效果更新虚拟场景当前的天气特效,以实现根据观众赠礼方式触发切换虚拟直播间的虚拟场景的天气特效的更新。
在一些实施例中,若交互信息为弹幕信息,步骤“基于交互信息更新虚拟直播间的虚拟场景的天气特效”,可以包括以下操作:
获取消息内容对应的天气特效;
基于消息内容对应的天气特效更新虚拟场景的天气特效。
其中,获取消息内容对应的天气特效,可以通过识别消息内容的中天气关键词,根据该天气关键词确定天气特效,作为消息内容对应的天气特效,然后可以将该消息内容对应的天气特效切换为虚拟场景的当前天气特效,以实现根据观众发送的弹幕消息切换虚拟直播间的虚拟场景的天气特效。
本申请实施例公开了一种虚拟场景的渲染方法,该方法包括:获取虚拟直播间对应的真实地理位置的天气数据;根据天气数据渲染虚拟直播间中虚拟场景的天气特效;响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息;基于交互信息更新虚拟直播间的虚拟场景的天气特效。以此,可以提高观众观看直播的真实感与沉浸感。
为便于更好的实施本申请实施例提供的虚拟场景的渲染方法,本申请实施例还提供一种基于上述虚拟场景的渲染方法的虚拟场景的渲染装置。其中名词的含义与上述虚拟场景的渲染方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图8,图8为本申请实施例提供的一种虚拟场景的渲染装置的结构框图,该装置包括:
第一获取单元301,用于获取虚拟直播间对应的真实地理位置的天气数据;
渲染单元302,用于根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;
第二获取单元303,用于响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;
更新单元304,用于基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。
在一些实施例中,第二获取单元303可以包括:
第一获取子单元,用于响应于所述观众与所述虚拟直播间之间的互动,获取所述观众与所述虚拟直播间的互动次数。
在一些实施例中,更新单元304可以包括:
第一确定子单元,用于根据所述互动次数确定天气特效强度;
第一更新子单元,用于基于所述天气特效强度调整所述虚拟场景的天气特效,得到更新后的所述虚拟场景的天气特效。
在一些实施例中,第二获取单元303可以包括:
第二获取子单元,用于响应于所述观众对所述虚拟直播间的礼物赠送事件,获取所述观众赠送的目标虚拟礼物。
在一些实施例中,更新单元304可以包括:
第三获取子单元,用于获取所述目标虚拟礼物对应的天气特效;
第二更新子单元,用于基于所述目标虚拟礼物对应的天气特效更新所述虚拟场景的天气特效。
在一些实施例中,第二获取单元303可以包括:
第四获取子单元,用于响应于所述观众对所述虚拟直播间的消息发送事件,获取所述观众发送的消息内容。
在一些实施例中,更新单元304可以包括:
第四获取子单元,用于获取所述消息内容对应的天气特效;
第三更新子单元,用于基于所述消息内容对应的天气特效更新所述虚拟场景的天气特效。
在一些实施例中,该装置还可以包括:
生成单元,用于基于所述虚拟场景的天气特效,生成与天气特效相关的至少一个候选消息内容。
在一些实施例中,第二获取单元303可以包括:
第五获取子单元,用于响应于所述观众对所述虚拟直播间的消息发送事件,从所述至少一个候选消息内容中获取所述观众发送的消息内容。
在一些实施例中,渲染单元302可以包括:
处理子单元,用于对所述天气数据进行识别处理,得到所述天气数据中包括的目标气象要素,以及所述目标气象要素对应的属性参数;
第六获取子单元,用于获取所述目标气象要素对应的预设天气特效;
第一调整子单元,用于根据所述属性参数调整所述预设天气特效,得到目标天气特效;
第一渲染子单元,用于基于所述目标天气特效渲染所述虚拟场景。
在一些实施例中,渲染单元302可以包括:
提取子单元,用于基于所述天气数据提取天气描述文本;
第二渲染子单元,用于根据所述天气描述文本生成天气特效贴图,并基于所述天气特效贴图渲染所述虚拟场景。
在一些实施例中,该装置还可以包括:
确定单元,用于根据所述天气数据确定所述虚拟场景的灯光调节信息;
第一调整单元,用于基于所述灯光调节信息对所述虚拟场景的灯光进行调整。
在一些实施例中,该装置还可以包括:
生成单元,用于根据所述天气数据生成天气音效;
叠加单元,用于将所述天气音效叠加至所述虚拟场景的场景音效。
在一些实施例中,该装置还可以包括:
第二调整单元,用于根据所述虚拟场景的天气特效,调整所述虚拟场景中的场景模型的材质参数。
在一些实施例中,该装置还可以包括:
控制单元,用于根据所述虚拟场景的天气特效,控制所述虚拟场景中的场景模型的动作状态。
本申请实施例公开了一种虚拟场景的渲染装置,通过第一获取单元301获取虚拟直播间对应的真实地理位置的天气数据;渲染单元302根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;第二获取单元303响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;更新单元304基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。以此,可以提高虚拟直播间的观众的直播观看体验。
相应的,本申请实施例还提供一种计算机设备,该计算机设备可以为服务器。如图9所示,图9为本申请实施例提供的计算机设备的结构示意图。该计算机设备400包括有一个或者一个以上处理核心的处理器401、有一个或一个以上计算机可读存储介质的存储器402及存储在存储器402上并可在处理器上运行的计算机程序。其中,处理器401与存储器402电性连接。本领域技术人员可以理解,图中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
处理器401是计算机设备400的控制中心,利用各种接口和线路连接整个计算机设备400的各个部分,通过运行或加载存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行计算机设备400的各种功能和处理数据,从而对计算机设备400进行整体监控。
在本申请实施例中,计算机设备400中的处理器401会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能:
获取虚拟直播间对应的真实地理位置的天气数据;根据天气数据渲染虚拟直播间中虚拟场景的天气特效;响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息;基于交互信息更新虚拟直播间的虚拟场景的天气特效。
本申请实施例通过获取虚拟直播间对应的真实地理位置的天气数据,根据天气数据渲染虚拟直播间中虚拟场景的天气特效,可以将实时的气象数据映射到虚拟场景的天气特效上,使得虚拟场景能够随着实际天气的变化而变化,然后,当检测到观众与虚拟直播间的交互事件,可以获取观众与虚拟直播间的交互信息,进而可以基于交互信息更新虚拟直播间的虚拟场景的天气特效。可以实现虚拟直播间的观众与虚拟场景之间的互动,从而可以提高虚拟直播间的观众的直播观看体验。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
可选的,如图9所示,计算机设备400还包括:触控显示屏403、射频电路404、音频电路405、输入单元406以及电源407。其中,处理器401分别与触控显示屏403、射频电路404、音频电路405、输入单元406以及电源407电性连接。本领域技术人员可以理解,图9中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
触控显示屏403可用于显示图形用户界面以及接收用户作用于图形用户界面产生的操作指令。触控显示屏403可以包括显示面板和触控面板。其中,显示面板可用于显示由用户输入的信息或提供给用户的信息以及计算机设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。可选的,可以采用液晶显示器(LCD,Liquid Crystal Display)、有机发光二极管(OLED,Organic Light-EmittingDiode)等形式来配置显示面板。触控面板可用于收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作),并生成相应的操作指令,且操作指令执行对应程序。可选的,触控面板可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器401,并能接收处理器401发来的命令并加以执行。触控面板可覆盖显示面板,当触控面板检测到在其上或附近的触摸操作后,传送给处理器401以确定触摸事件的类型,随后处理器401根据触摸事件的类型在显示面板上提供相应的视觉输出。在本申请实施例中,可以将触控面板与显示面板集成到触控显示屏403而实现输入和输出功能。但是在某些实施例中,触控面板与触控面板可以作为两个独立的部件来实现输入和输出功能。即触控显示屏403也可以作为输入单元406的一部分实现输入功能。
在本申请实施例中,通过处理器401执行游戏应用程序在触控显示屏403上生成图形用户界面,图形用户界面上的虚拟场景中包含至少一个技能控制区域,技能控制区域中包含至少一个技能控件。该触控显示屏403用于呈现图形用户界面以及接收用户作用于图形用户界面产生的操作指令。
射频电路404可用于收发射频信号,以通过无线通信与网络设备或其他计算机设备建立无线通讯,与网络设备或其他计算机设备之间收发信号。
音频电路405可以用于通过扬声器、传声器提供用户与计算机设备之间的音频接口。音频电路405可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路405接收后转换为音频数据,再将音频数据输出处理器401处理后,经射频电路404以发送给比如另一计算机设备,或者将音频数据输出至存储器402以便进一步处理。音频电路405还可能包括耳塞插孔,以提供外设耳机与计算机设备的通信。
输入单元406可用于接收输入的数字、字符信息或用户特征信息(例如指纹、虹膜、面部信息等),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
电源407用于给计算机设备400的各个部件供电。可选的,电源407可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源407还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图9中未示出,计算机设备400还可以包括摄像头、传感器、无线保真模块、蓝牙模块等,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
由上可知,本实施例提供的计算机设备,可以获取虚拟直播间对应的真实地理位置的天气数据;根据天气数据渲染虚拟直播间中虚拟场景的天气特效;响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息;基于交互信息更新虚拟直播间的虚拟场景的天气特效。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种虚拟场景的渲染方法中的步骤。例如,该计算机程序可以执行如下步骤:
获取虚拟直播间对应的真实地理位置的天气数据;
根据天气数据渲染虚拟直播间中虚拟场景的天气特效;
响应于虚拟直播间的观众与虚拟直播间的交互事件,获取观众与虚拟直播间的交互信息;
基于交互信息更新虚拟直播间的虚拟场景的天气特效。
本申请实施例通过获取虚拟直播间对应的真实地理位置的天气数据,根据天气数据渲染虚拟直播间中虚拟场景的天气特效,可以将实时的气象数据映射到虚拟场景的天气特效上,使得虚拟场景能够随着实际天气的变化而变化,然后,当检测到观众与虚拟直播间的交互事件,可以获取观众与虚拟直播间的交互信息,进而可以基于交互信息更新虚拟直播间的虚拟场景的天气特效。可以实现虚拟直播间的观众与虚拟场景之间的互动,从而可以提高虚拟直播间的观众的直播观看体验。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种虚拟场景的渲染方法中的步骤,因此,可以实现本申请实施例所提供的任一种虚拟场景的渲染方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种虚拟场景的渲染方法、装置、存储介质及计算机设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (17)
1.一种虚拟场景的渲染方法,其特征在于,所述方法包括:
获取虚拟直播间对应的真实地理位置的天气数据;
根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;
响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;
基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。
2.根据权利要求1所述的方法,其特征在于,所述响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息,包括:
响应于所述观众与所述虚拟直播间之间的互动,获取所述观众与所述虚拟直播间的互动次数。
3.根据权利要求2所述的方法,其特征在于,所述基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效,包括:
根据所述互动次数确定天气特效强度;
基于所述天气特效强度调整所述虚拟场景的天气特效,得到更新后的所述虚拟场景的天气特效。
4.根据权利要求1所述的方法,其特征在于,所述响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息,包括:
响应于所述观众对所述虚拟直播间的礼物赠送事件,获取所述观众赠送的目标虚拟礼物。
5.根据权利要求4所述的方法,其特征在于,所述基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效,包括:
获取所述目标虚拟礼物对应的天气特效;
基于所述目标虚拟礼物对应的天气特效更新所述虚拟场景的天气特效。
6.根据权利要求1所述的方法,其特征在于,所述响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息,包括:
响应于所述观众对所述虚拟直播间的消息发送事件,获取所述观众发送的消息内容。
7.根据权利要求6所述的方法,其特征在于,所述基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效,包括:
获取所述消息内容对应的天气特效;
基于所述消息内容对应的天气特效更新所述虚拟场景的天气特效。
8.根据权利要求1所述的方法,其特征在于,在所述响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息之前,还可以包括:
基于所述虚拟场景的天气特效,生成与天气特效相关的至少一个候选消息内容;
所述响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息,包括:
响应于所述观众对所述虚拟直播间的消息发送事件,从所述至少一个候选消息内容中获取所述观众发送的消息内容。
9.根据权利要求1所述的方法,其特征在于,所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效,包括:
对所述天气数据进行识别处理,得到所述天气数据中包括的目标气象要素,以及所述目标气象要素对应的属性参数;
获取所述目标气象要素对应的预设天气特效;
根据所述属性参数调整所述预设天气特效,得到目标天气特效;
基于所述目标天气特效渲染所述虚拟场景。
10.根据权利要求1所述的方法,其特征在于,所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效,包括:
基于所述天气数据提取天气描述文本;
根据所述天气描述文本生成天气特效贴图,并基于所述天气特效贴图渲染所述虚拟场景。
11.根据权利要求1所述的方法,其特征在于,在所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效之后,还包括:
根据所述天气数据确定所述虚拟场景的灯光调节信息;
基于所述灯光调节信息对所述虚拟场景的灯光进行调整。
12.根据权利要求1所述的方法,其特征在于,在所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效之后,还包括:
根据所述天气数据生成天气音效;
将所述天气音效叠加至所述虚拟场景的场景音效。
13.根据权利要求1所述的方法,其特征在于,在所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效之后,还包括:
根据所述虚拟场景的天气特效,调整所述虚拟场景中的场景模型的材质参数。
14.根据权利要求1所述的方法,其特征在于,在所述根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效之后,还包括:
根据所述虚拟场景的天气特效,控制所述虚拟场景中的场景模型的动作状态。
15.一种虚拟场景的渲染装置,其特征在于,所述装置包括:
第一获取单元,用于获取虚拟直播间对应的真实地理位置的天气数据;
渲染单元,用于根据所述天气数据渲染所述虚拟直播间中虚拟场景的天气特效;
第二获取单元,用于响应于所述虚拟直播间的观众与所述虚拟直播间的交互事件,获取所述观众与所述虚拟直播间的交互信息;
更新单元,用于基于所述交互信息更新所述虚拟直播间的虚拟场景的天气特效。
16.一种计算机设备,包括存储器,处理器及存储在存储器上并在处理器上运行的计算机程序,其中,所述处理器执行所述程序时实现如权利要求1至14任一项所述的虚拟场景的渲染方法。
17.一种存储介质,其特征在于,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至14任一项所述的虚拟场景的渲染方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410014844.5A CN117835002A (zh) | 2024-01-03 | 2024-01-03 | 一种虚拟场景的渲染方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410014844.5A CN117835002A (zh) | 2024-01-03 | 2024-01-03 | 一种虚拟场景的渲染方法、装置、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117835002A true CN117835002A (zh) | 2024-04-05 |
Family
ID=90505896
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410014844.5A Pending CN117835002A (zh) | 2024-01-03 | 2024-01-03 | 一种虚拟场景的渲染方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117835002A (zh) |
-
2024
- 2024-01-03 CN CN202410014844.5A patent/CN117835002A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7408048B2 (ja) | 人工知能に基づくアニメキャラクター駆動方法及び関連装置 | |
US11748950B2 (en) | Display method and virtual reality device | |
CN111914523B (zh) | 基于人工智能的多媒体处理方法、装置及电子设备 | |
CN108984169B (zh) | 一种跨平台多元集成开发系统 | |
CN114372356B (zh) | 基于数字孪生的人工增强方法、装置及介质 | |
CN103984553A (zh) | 一种3d桌面显示方法和系统 | |
CN108846886B (zh) | 一种ar表情的生成方法、客户端、终端和存储介质 | |
CN113709543B (zh) | 基于虚拟现实的视频处理方法、装置、电子设备和介质 | |
CN113766296A (zh) | 直播画面的展示方法和装置 | |
CN112199534A (zh) | 贴纸推荐方法、装置、电子设备及存储介质 | |
CN114245099A (zh) | 视频生成方法、装置、电子设备以及存储介质 | |
CN117934718A (zh) | 一种多种气象虚拟场景构建平台及构建方法 | |
CN116982087A (zh) | 构建和配置三维空间场景的模型的方法、装置及计算机程序产品 | |
Zhang et al. | The Application of Folk Art with Virtual Reality Technology in Visual Communication. | |
DE112021004816T5 (de) | Ton-emulation | |
CN112206519B (zh) | 实现游戏场景环境变化的方法、装置、存储介质及计算机设备 | |
CN117173285A (zh) | 图像生成方法、装置、设备及存储介质 | |
CN112750182A (zh) | 一种动效实现方法、装置和计算机可读存储介质 | |
CN117835002A (zh) | 一种虚拟场景的渲染方法、装置、计算机设备及存储介质 | |
CN115168547A (zh) | 场景构建方法、装置、设备和存储介质 | |
CN112717395B (zh) | 音频绑定方法、装置、设备以及存储介质 | |
Ling et al. | The design and implementation of the 3D virtual campus models | |
KR20230008365A (ko) | 스토리텔링 등의 프레젠테이션을 실행할 수 있는 멀티미디어 프레젠테이션 방법과 이를 위한 컴퓨터용 입력장치 및 컴퓨터시스템 | |
Dowling | Place-based journalism, aesthetics, and branding | |
Wangi et al. | Augmented Reality Technology for Increasing the Understanding of Traffic Signs |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |