CN105763885B - 一种三维图文信息实时发布的方法及装置 - Google Patents

一种三维图文信息实时发布的方法及装置 Download PDF

Info

Publication number
CN105763885B
CN105763885B CN201410806460.3A CN201410806460A CN105763885B CN 105763885 B CN105763885 B CN 105763885B CN 201410806460 A CN201410806460 A CN 201410806460A CN 105763885 B CN105763885 B CN 105763885B
Authority
CN
China
Prior art keywords
dimensional
frame data
rendering
image frame
text
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410806460.3A
Other languages
English (en)
Other versions
CN105763885A (zh
Inventor
魏小帆
陈忠会
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aidipu Technology Co., Ltd
Original Assignee
Ideapool Beijing Culture And Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ideapool Beijing Culture And Technology Co ltd filed Critical Ideapool Beijing Culture And Technology Co ltd
Priority to CN201410806460.3A priority Critical patent/CN105763885B/zh
Publication of CN105763885A publication Critical patent/CN105763885A/zh
Application granted granted Critical
Publication of CN105763885B publication Critical patent/CN105763885B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及通信领域,具体公开了一种三维图文信息实时发布的方法及装置,用于实现三维场景实时的显示。该方法为:本发明实施例中,图文渲染系统根据预设的多个三维场景素材生成多个三维图文模板,对各个三维图文模板中的待替换项进行标记,根据预设的信息发布顺序,获取信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据,并将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。这样,不仅能够降低工作站的负荷,而且能够实现三维场景的实时渲染。

Description

一种三维图文信息实时发布的方法及装置
技术领域
本发明涉及通信领域,特别涉及一种三维图文信息实时发布的方法及装置。
背景技术
随着网络化、信息化的飞速发展,各行业对实时信息的发布需求不断增长,各类信息发布系统也随之飞速发展,信息发布系统具有在特定的时间、特定的地点,对特定的人群进行信息资讯发布的作用,为社会提供更好的信息宣传与展示手段。
现有技术中,信息发布系统是基于网络来运行的,由服务器、网络、工作站、显示设备组成。服务器将控制指令信息和素材信息(包括音频、视频、图片、文字等)通过网络(广域网、局域网、专用网等)发送给工作站,再由工作站根据既定的排列模式组合音频、视频、图片、文字等素材信息(包括播放位置和播放内容等),输送给液晶电视等显示设备,这样,就形成了一套可以通过网络将所有服务器信息发送到终端的链路,实现了一种信息发布的技术方案。通过此技术方案可实现信息的实时发布,即时发布紧急信息、突发事件,实现银行外汇、基金利率、政策法规、促销活动、天气预报、时钟等即时信息的同步发布。
但是,由于大部分素材信息(包括音频、视频、图片、文字等)都是通过网络进行传输,由服务器下发至工作站,才能在工作站的显示设备进行播放,目前,对这些素材信息的要求越来越高,比如高清化显示,这样会使素材信息占用的磁盘空间较大,所以在信息发布的内容进行更新时,素材信息的替换和传输会占用大量的网络开销,且耗费大量时间,由此可知,现有技术的信息发布系统存在内容更新困难的问题;
另外,根据现有技术部署的系统中存在大量的工作站,各个工作站的硬件性能不一,有的配置高,有的配置低,并且系统成本有限,这样无法保证在每台工作站中都能实现素材信息清晰流畅地在终端进行显示,无法实现真正的三维场景实时渲染,并进行三维动画播放和内容的替换。
发明内容
本发明实施例提供一种三维图文信息实时发布的方法及装置,用以降低工作站的负荷,实现三维场景的实时渲染。
本发明实施例提供的具体技术方案如下:
一种三维图文信息实时发布的方法,包括:
根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记;
根据预设的信息发布顺序,获取所述信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据;
将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。
这样,不仅能够降低工作站的负荷,而且能够实现三维场景的实时渲染。
较佳地,在按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染之前,进一步包括:
对三维图文模板中的待替换项进行解析,以及针对所述播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的三维场景素材和播出替换内容。
这样,不仅可以降低资源的开销,还能够保证渲染速率,保证播放的流畅。
较佳地,针对所述播出顺序中涉及的三维图文模板进行预先加载,具体包括:
对所述播出顺序中涉及的三维图文模板的构成进行解析,在确定至少两个三维图文模板中的构成元素相同时,只对其中一个所述三维图文模板中的构成元素进行加载。
这样,可以避免在多个三维场景中调用已加载过的三维场景内容时进行重复加载,从而有效避免了由于过量加载导致的内存溢出的问题。
较佳地,对三维图文模板进行实时渲染,具体包括:
将生成的三维图文模板中包含的三维图文场景和贴面纹理内容实时进行叠加后进行渲染。
较佳地,对三维图文模板进行实时渲染,具体包括:
仅针对预计输出区域进行渲染,获得渲染区域;
根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留所述三维场景虚拟摄像机视角之内的渲染区域。
这样,避免了由于渲染内容过多而影响信息发布的实时性。
较佳地,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布,具体包括:
向工作站发送芯跳讯号,并接收工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小;
根据计算获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到所述缓冲队列;
根据预设的时间间隔,将所述缓冲队列中含有三维场景渲染结果的图像帧数据依次进行发送。
较佳地,进一步包括:
若所述缓冲队列已满,则根据当前缓冲队列中图像帧数据的时间戳,丢弃缓冲队列居中的图像帧数据,所述居中的图像帧数据用于指示除缓冲队列中位于首部和位于尾部的图像帧数据之外的其他图像帧数据;
若所述缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到所述缓冲队列包含的图像帧数据数目不小于预设门限为止。
这样,可以消除由于工作站接收与服务器的发送不同步导致的跳播或者卡顿,有效实现远端移动终端的三维场景的实时显示。
较佳地,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布,具体包括:
分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多个图像帧数据依次发往相应的工作站。
这样,可实现与多个工作站的压缩能力相匹配,进行图像帧数据的传输,有效实现三维场景的实时显示。
一种三维图文信息实时发布的装置,包括:
预处理单元,用于根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记;
渲染单元,用于根据预设的信息发布顺序,获取所述信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据;
发送单元,用于将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。
这样,不仅能够降低工作站的负荷,而且能够实现三维场景的实时渲染。
较佳地,在按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染之前,进一步包括:
解析单元,用于对三维图文模板中的待替换项进行解析;以及,
加载单元,用于针对所述播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的三维场景素材和播出替换内容。
这样,不仅可以降低资源的开销,还能够保证渲染速率,保证播放的流畅。
较佳地,在针对所述播出顺序中涉及的三维图文模板进行预先加载,所述加载单元具体用于:
对所述播出顺序中涉及的三维图文模板的构成进行解析,在确定至少两个三维图文模板中的构成元素相同时,只对其中一个所述三维图文模板中的构成元素进行加载。
这样,可以避免在多个三维场景中调用已加载过的三维场景内容时进行重复加载,从而有效避免了由于过量加载导致的内存溢出的问题。
较佳地,在对三维图文模板进行实时渲染时,所述渲染单元具体用于:
将生成的三维图文模板中包含的三维图文场景和贴面纹理内容实时进行叠加后进行渲染。
较佳地,在对三维图文模板进行实时渲染时,所述渲染单元具体用于:
仅针对预计输出区域进行渲染,获得渲染区域;
根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留所述三维场景虚拟摄像机视角之内的渲染区域。
较佳地,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,所述发送单元具体用于:
向工作站发送芯跳讯号,并接收工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小;
根据计算获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到所述缓冲队列;
根据预设的时间间隔,将所述缓冲队列中含有三维场景渲染结果的图像帧数据依次进行发送。
较佳地,进一步包括判断单元,所述判断单元具体用于:
若所述缓冲队列已满,则根据当前缓冲队列中图像帧数据的时间戳,丢弃缓冲队列居中的图像帧数据,所述居中的图像帧数据用于指示除缓冲队列中位于首部和位于尾部的图像帧数据之外的其他图像帧数据;
若所述缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到所述缓冲队列包含的图像帧数据数目不小于预设门限为止。
这样,可以消除由于工作站接收与服务器的发送不同步导致的跳播或者卡顿,有效实现远端移动终端的三维场景的实时显示。
较佳地,在将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,所述发送单元具体用于:
分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多个图像帧数据依次发往相应的工作站。
这样,可实现与多个工作站的压缩能力相匹配,进行图像帧数据的传输,有效实现三维场景的实时显示。
附图说明
图1为本发明实施例中三维图文信息实时发布流程图;
图2为本发明实施例中图文渲染系统结构图。
具体实施方式
本发明实施例设计了一种三维图文信息实时发布的方法及装置,预先根据三维场景素材生成三维图文模板,通过将预发布的图文内容填充到三维图文模板的待替换项中,并针对生成的三维图文模板进行实时渲染,生成多帧含有三维场景渲染结果的图像帧数据,并依次添加到缓冲队列中,按照先进先出的规则向工作站发送进行广播,这样能够减轻工作站的工作负荷,减小网络开销,在三维图文信息实时发布系统中实现对三维场景的实时渲染。
其中,渲染即系统按照内置的规则,将三维图文模板加载到内存,继而按照特定格式加载到显卡的显存,并由显卡计算后显示的过程。
下面参阅附图对本发明实施例优选的方案进行详细说明。
本发明实施例中,将进行三维场景实时渲染的装置称为三维图文渲染系统,该系统可以通过计算机应用程序实现,也可以是一个硬件装置,例如,可以是服务器。
参阅附图1所示,本发明实施例中,进行信息发布的主要步骤如下:
步骤100:根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记。
预先制作三维图文模板,根据三维场景的构成,将三维图文模板分为场景内容和替换项,其中,场景内容是指三维场景创作后的基本构成,例如,简单三维模型(包括三角形、圆形、多边形等),导入的三维模型,三维模型的运动轨迹动画,三维模型的参数配置(例如圆形半径等内置三维物件的参数),模型的纹理贴面和材质;替换项是指播出时替换的内容,包括图片、文字、各类音频视频文件、实时视频信号以及SDI(Serial DigitalInterface),VGA(Video Graphics Array,视频图形阵列)和DVI(Digital VisualInterface,数字视频接口)信号输入等,例如,三维图文模板中部分需要替换的图片纹理,视频纹理,部分需要整体替换的三维模型等等。替换项由唯一ID,数据类型,替换类型等关键数据组成。系统通过对三维场景的参数化,建立替换项到参数的一对一映射,并生成三维图文模板。一个三维图文模板可由多个三维场景素材构成,三维图文模板主要的功能为组合多个三维场景素材,以及对三维场景素材中的动画段进行组合,同时生成替换项。
这样,播出内容,动画和特效以三维图文模板为基本播出框架,在信息播出时,就可以按照替换规则只需要对替换项进行替换。
将所有制作完成的三维图文模板通过场景文件上传至三维图文渲染系统进行统一管理,例如,可通过数据库等方式进行统一管理,其中,场景文件中包含所有三维图文模板中的内容信息以及引用的文件位置等。
步骤110:根据预设的信息发布顺序,获取该信息发布所涉及的三维图文模板的播出顺序,按照该播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据。
具体地,获取待发布的信息,对信息中包含的图文内容进行解析,采用生成的三维图文模板中包含的场景内容和替换项实时进行叠加后进行渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据。
首先,图文渲染系统接收播出单,对播出单中的待发布的信息进行解析,获取待发布的三维图文模板的播出顺序;
接着,按照播出顺序,对三维图文模板中的需要进行替换的替换项进行解析,获取待替换的替换项,以及,针对播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的三维场景素材和播出替换内容。在进行预先加载的过程中,对三维图文模板的内容中所包含的素材信息进行统一管理,在播放时进行调用,其中,多个三维图文模板中包含的重复三维纹理使用相同的ID进行管理,即引用文件的位置相同。
具体为:在预加载的过程中,遍历所有根据播出顺序中涉及的三维图文模板,根据场景文件的指向进行重新整理和排序,在确定至少两个图文模板中的构成元素(例如三维模型,图片,视频等)相同时,只对其中一个三维图文模板的构成元素进行加载,这样,可以避免在多个三维场景中调用已加载过的三维图文模板的构成元素时进行重复加载,从而有效避免了由于过量加载导致的内存溢出的问题。
例如,在三维图文模板中包含内容为光效的图片序列,大小为1G,该文件序列在两个三维场景中都会被调用,若根据此次播出单获得的三维图文模板中会涉及这两个图片序列,那么,假设在预加载的过程中依次加载这两个三维场景中的该文件序列,则需要耗费2G大小的内存空间,并且如果该图片序列文件集合被多次复用的话,会耗费大量资源,很容易达到当前服务器内存容量的上限,造成加载故障,从而无法实现实时渲染,无法流畅播放;但是,通过相同的三维图文模板的内容使用同一ID处理,只加载一次,就可降低资源消耗,保证最终展示结果的流畅。
通过对三维图文模板的内容执行预加载,能够保证在播放时三维场景之间能够无时延切换,从而保证播放的流畅程度。如果将获得的所有的三维图文模板的内容在播出时才进行加载和读取工作,则很容易因读取带宽不足导致卡顿,从而无法完成实时渲染的帧精度要求。
其中,在对三维图文模板的内容进行预加载的过程中,对重复加载的内容引用计数进行去除,即,如果发现当前加载的内容已经加载过,那么,不对当前加载的内容重复加载,这样,不仅可以降低资源的开销,还能够保证渲染速率,保证播放的流畅。
再接着,针对加载完成的三维图文模板进行渲染,生成多个含有三维场景渲染结果的图像帧数据。
具体地,按照内部编排的播出列表时序组合播出指令,,根据预加载步骤所加载完成的三维图文模板的内容,调取所需的三维图文模板,进行三维图文模板的实时渲染,生成多个含有三维场景的图像帧数据。在渲染过程中,如果下一帧三维场景中的内容需要替换,则仅针对替换内容进行渲染,这样,能够减少渲染内容,从而增加渲染速率,有利于实现渲染的实时性。
其中,每一个包含三维场景渲染结果的图像帧由当前的替换内容结合预加载的三维图文模板生成。
实际应用中,渲染工具几乎可以模拟无限大范围的三维场景内容,但是由于图像显示和人类视觉都有一定的约束范围,因此,在渲染的过程中,仅对预计输出区域进行渲染,获得渲染区域,根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留所述三维场景虚拟摄像机视角之内的渲染区域,对预计渲染区域外部的三维物件不予以保留。
这样,避免因渲染内容过多而造成渲染速率过慢,从而影响渲染的实时性。
步骤120:将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。
具体地,向各个工作站发送芯跳讯号,并接收各个工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小。
根据获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到所述缓冲队列,并按照固定的时间间隔,根据先入先出的策略对缓冲队列中的单帧数据,通过网络接口进行发送操作。
其中,可根据缓冲队列的大小和网络传输速率控制图像帧数据的发送速率。
具体地,由于渲染需要占用一定的时间间隔,发送高清图像帧数据(即占用内存较大的三维场景帧,三维场景帧即含有三维场景渲染结果的图像帧)也需要占用一定的时间间隔,因此,可根据渲染三维场景帧的复杂程度和网络环境的变化,相应地调整三维场景帧的发送速率。具体调整过程如下所述。
根据图文渲染系统的渲染速率为25帧每秒,即向缓冲队列中每增加一图像帧的用时为40ms,在播放过程中,可能有以下情况:
若当前缓冲队列已满,说明网络发送速率小于渲染及增加图像帧的速率,这样为避免缓冲队列囤积图像帧,则根据当前缓冲队列中图像帧数据的时间戳,保留队列首部和尾部,丢弃缓冲队列中居中的图像帧数据。
保留缓冲队列首部,是因为首部的图像帧数据是当前将要发送的数据,为了避免由于数据发送不完整而导致的显示出错,因此不能丢弃缓冲队列首部图像帧数据;
保留缓冲队列尾部,是因为,若网络发送数据持续过慢,则持续丢弃队列尾部图像帧数据,这样就会导致一段连续的图像帧数据丢失,从而导致显示出错,因此不能丢弃缓冲队列尾部图像帧数据;
而丢弃缓冲队列居中的图像帧数据,对整个信息的显示的影响会很小。
若当前缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或/和待发送的图像帧数据进行重复发送。
具体地,若当前缓冲队列中的图像帧数据数目小于预设门限,说明网络发送速率大于渲染及增加图像帧数据的速率,即发送快,渲染慢,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到所述缓冲队列包含的图像帧数据数目不小于预设门限为止。具体地,按照缓冲策略要求,重复发送当前帧一定次数,重复发送下一个图像帧数据一定次数,进行缓冲,这样避免由于渲染及增加图像帧数据过慢而导致的黑场图像显示。
其中,若当前缓冲队列为空,说明网络发送速率远大于渲染及增加图像帧数据的速率,则重复发送当前帧,进行缓冲。实际应用中,在当前缓冲队列中的图像帧数据过少时,就采取缓冲策略,避免当前缓冲队列为空的情况出现。
至此,图文渲染系统对三维场景实时渲染的过程介绍完毕,将生成的多帧三维场景依次发往工作站以后,工作站进行发布流程,具体过程为:
图文渲染系统通过网络接口将图像帧数据依次发往工作站,其中,在压缩的过程中,分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的多帧含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多帧三维场景依次发往相应的工作站。工作站在接收到图像帧数据以后,对包含的内容进行解压,进一步对解压的内容进行解析,实现内容渲染和画面输出,并通过高清晰度多媒体接口(High DefinitionMultimedia Interface,HDMI)接口输出至显示终端,实现三维图文信息的发布。
基于上述实施例,参阅2所示,本发明实施例中,图文渲染系统包括:预处理单元200、渲染单元210、发送单元220、解析加载单元230。
预处理单元200,用于根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记;
渲染单元210,用于根据预设的信息发布顺序,获取信息发布所涉及的三维图文模板的播出顺序,按照播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据;
发送单元220,用于将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。
这样,不仅能够降低工作站的负荷,而且能够实现三维场景的实时渲染。
较佳地,在按照播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染之前,进一步包括解析加载单元230:
用于对三维图文模板中的待替换项进行解析,以及针对播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的场景内容和替换项。
这样,不仅可以降低资源的开销,还能够保证渲染速率,保证播放的流畅。
较佳地,在针对播出顺序中涉及的三维图文模板进行预先加载,解析加载单元230具体用于:
对播出顺序中涉及的三维图文模板的构成进行解析,在确定至少两个三维图文模板中的构成元素相同时,只对其中一个三维图文模板中的构成元素进行加载。
这样,可以避免在多个三维场景中调用已加载过的三维图文模板的内容时进行重复加载,从而有效避免了由于过量加载导致的内存溢出的问题。
较佳地,在对三维图文模板进行实时渲染时,渲染单元210具体用于:
将生成的三维图文模板中包含的场景内容和替换项实时进行叠加后进行渲染。
较佳地,在对三维图文模板进行实时渲染时,渲染单元210具体用于:
仅针对预计输出区域进行渲染,获得渲染区域;
根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留三维场景虚拟摄像机视角之内的渲染区域。
较佳地,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,发送单元220具体用于:
向工作站发送芯跳讯号,并接收工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小;
根据计算获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到缓冲队列;
根据预设的时间间隔,将缓冲队列中含有三维场景渲染结果的图像帧数据依次进行发送。
较佳地,发送单元220进一步用于:
若缓冲队列已满,则根据当前缓冲队列中图像帧数据的时间戳,丢弃缓冲队列居中的图像帧数据,居中的图像帧数据用于指示除缓冲队列中位于首部和位于尾部的图像帧数据之外的其他图像帧数据;
若缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到缓冲队列包含的图像帧数据数目不小于预设门限为止。
这样,可以消除由于工作站接收与服务器的发送不同步导致的跳播或者卡顿,有效实现远端移动终端的三维场景的实时显示。
较佳地,在将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,发送单元220具体用于:
分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多个图像帧数据依次发往相应的工作站。
这样,可实现与多个工作站的压缩能力相匹配,进行图像帧数据的传输,有效实现三维场景的实时显示。
综上所述,本发明实施例中,图文渲染系统根据预设的多个三维场景素材生成多个三维图文模板,对各个三维图文模板中的待替换项进行标记,根据预设的信息发布顺序,获取信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据,并将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布。这样,不仅能够降低工作站的负荷,而且能够实现三维场景的实时渲染。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样,倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (14)

1.一种三维图文信息实时发布的方法,其特征在于,包括:
根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记;
根据预设的信息发布顺序,获取所述信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据;
将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布;
在按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染之前,进一步包括:
对三维图文模板中的待替换项进行解析,以及针对所述播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的三维场景素材和播出替换内容。
2.如权利要求1所述的方法,其特征在于,针对所述播出顺序中涉及的三维图文模板进行预先加载,具体包括:
对所述播出顺序中涉及的三维图文模板的构成进行解析,在确定至少两个三维图文模板中的构成元素相同时,只对其中一个所述三维图文模板中的构成元素进行加载。
3.如权利要求1或2所述的方法,其特征在于,对三维图文模板进行实时渲染,具体包括:
将生成的三维图文模板中包含的场景内容和替换项实时进行叠加后进行渲染。
4.如权利要求3所述的方法,其特征在于,对三维图文模板进行实时渲染,具体包括:
仅针对预计输出区域进行渲染,获得渲染区域;
根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留所述三维场景虚拟摄像机视角之内的渲染区域。
5.如权利要求1或2所述的方法,其特征在于,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布,具体包括:
向工作站发送芯跳讯号,并接收工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小;
根据计算获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到所述缓冲队列;
根据预设的时间间隔,将所述缓冲队列中含有三维场景渲染结果的图像帧数据依次进行发送。
6.如权利要求5所述的方法,其特征在于,进一步包括:
若所述缓冲队列已满,则根据当前缓冲队列中图像帧数据的时间戳,丢弃缓冲队列居中的图像帧数据,所述居中的图像帧数据用于指示除缓冲队列中位于首部和位于尾部的图像帧数据之外的其他图像帧数据;
若所述缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到所述缓冲队列包含的图像帧数据数目不小于预设门限为止。
7.如权利要求1或2所述的方法,其特征在于,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布,具体包括:
分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多个图像帧数据依次发往相应的工作站。
8.一种三维图文信息实时发布的装置,其特征在于,包括:
预处理单元,用于根据预设的多个三维场景素材生成多个三维图文模板,并对各个三维图文模板中的待替换项进行标记;
渲染单元,用于根据预设的信息发布顺序,获取所述信息发布所涉及的三维图文模板的播出顺序,按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染,按固定时序和间隔生成含有三维场景渲染结果的图像帧数据;
发送单元,用于将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布;
进一步包括:
解析加载单元,用于在所述渲染单元按照所述播出顺序,依次对三维图文模板中的待替换项进行替换,以及对三维图文模板进行实时渲染之前,对三维图文模板中的待替换项进行解析;以及针对所述播出顺序中涉及的三维图文模板的内容进行预先加载,其中,任意一个三维图文模板的内容至少包括解析结果涉及的场景内容和替换项。
9.如权利要求8所述的装置,其特征在于,在针对所述播出顺序中涉及的三维图文模板进行预先加载时,所述解析加载单元具体用于:
对所述播出顺序中涉及的三维图文模板的构成进行解析,在确定至少两个三维图文模板中的构成元素相同时,只对其中一个所述三维图文模板中的构成元素进行加载。
10.如权利要求8或9所述的装置,其特征在于,在对三维图文模板进行实时渲染时,所述渲染单元具体用于:
将生成的三维图文模板中包含的场景内容和替换项实时进行叠加后进行渲染。
11.如权利要求10所述的装置,其特征在于,在对三维图文模板进行实时渲染时,所述渲染单元具体用于:
仅针对预计输出区域进行渲染,获得渲染区域;
根据当前预设的三维场景虚拟摄像机视角,对渲染区域进行裁剪,仅保留所述三维场景虚拟摄像机视角之内的渲染区域。
12.如权利要求8或9所述的装置,其特征在于,将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,所述发送单元具体用于:
向工作站发送芯跳讯号,并接收工作站的反馈,根据反馈速度,计算当前系统反应和传输速度,以确定缓冲队列的大小;
根据计算获得的缓冲队列大小,将获得的含有三维场景渲染结果的图像帧数据标记时间戳后,按照时间戳的先后顺序增加到所述缓冲队列;
根据预设的时间间隔,将所述缓冲队列中含有三维场景渲染结果的图像帧数据依次进行发送。
13.如权利要求12所述的装置,其特征在于,所述发送单元进一步用于:
若所述缓冲队列已满,则根据当前缓冲队列中图像帧数据的时间戳,丢弃缓冲队列居中的图像帧数据,所述居中的图像帧数据用于指示除缓冲队列中位于首部和位于尾部的图像帧数据之外的其他图像帧数据;
若所述缓冲队列包含的图像帧数据数目小于预设门限,则按照预设的缓冲策略对已发送或待发送的图像帧数据进行复制,将复制的图像帧数据进行多次发送,直到所述缓冲队列包含的图像帧数据数目不小于预设门限为止。
14.如权利要求8或9所述的装置,其特征在于,在将获得的含有三维场景渲染结果的图像帧数据依次发往各个工作站进行发布时,所述发送单元具体用于:
分别根据每一个工作站的性能配置参数,采用相应的数据编码方式对生成的含有三维场景渲染结果的图像帧数据进行编码,并将编码后获得的多个图像帧数据依次发往相应的工作站。
CN201410806460.3A 2014-12-19 2014-12-19 一种三维图文信息实时发布的方法及装置 Active CN105763885B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410806460.3A CN105763885B (zh) 2014-12-19 2014-12-19 一种三维图文信息实时发布的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410806460.3A CN105763885B (zh) 2014-12-19 2014-12-19 一种三维图文信息实时发布的方法及装置

Publications (2)

Publication Number Publication Date
CN105763885A CN105763885A (zh) 2016-07-13
CN105763885B true CN105763885B (zh) 2020-05-12

Family

ID=56341134

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410806460.3A Active CN105763885B (zh) 2014-12-19 2014-12-19 一种三维图文信息实时发布的方法及装置

Country Status (1)

Country Link
CN (1) CN105763885B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108540849A (zh) * 2018-03-20 2018-09-14 厦门星罗网络科技有限公司 视频相册的生成方法及装置
CN108986017B (zh) * 2018-06-29 2023-06-20 北京微播视界科技有限公司 图像特效处理方法、装置和计算机可读存储介质
CN109920056B (zh) * 2019-03-18 2023-08-01 阿波罗智联(北京)科技有限公司 建筑物渲染方法、装置、设备和介质
CN111192353B (zh) * 2019-12-30 2023-08-25 珠海金山数字网络科技有限公司 一种材质生成方法及装置
CN111935528B (zh) * 2020-06-22 2022-12-16 北京百度网讯科技有限公司 视频生成方法和装置
CN112465953A (zh) * 2020-12-02 2021-03-09 杭州群核信息技术有限公司 一种基于模板的快速参数化建模方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10269377A (ja) * 1997-03-27 1998-10-09 Toshiba Corp 表示制御システムおよび3次元グラフィクスデータの表示制御方法
CN101617343A (zh) * 2007-12-21 2009-12-30 工作室图形处理器公司 快速渲染三维场景的方法和系统
CN102789348A (zh) * 2011-05-18 2012-11-21 北京东方艾迪普科技发展有限公司 交互式三维图形视频可视化系统
CN102831209A (zh) * 2012-08-13 2012-12-19 优视科技有限公司 网页浏览的渲染处理方法及装置和移动终端
CN103021259A (zh) * 2012-12-11 2013-04-03 广东威创视讯科技股份有限公司 地图移动的渲染方法和系统
CN103390288A (zh) * 2012-05-09 2013-11-13 上海幻维数码创意科技有限公司 三维渲染文件批量拆分渲染层处理系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10269377A (ja) * 1997-03-27 1998-10-09 Toshiba Corp 表示制御システムおよび3次元グラフィクスデータの表示制御方法
CN101617343A (zh) * 2007-12-21 2009-12-30 工作室图形处理器公司 快速渲染三维场景的方法和系统
CN102789348A (zh) * 2011-05-18 2012-11-21 北京东方艾迪普科技发展有限公司 交互式三维图形视频可视化系统
CN103390288A (zh) * 2012-05-09 2013-11-13 上海幻维数码创意科技有限公司 三维渲染文件批量拆分渲染层处理系统
CN102831209A (zh) * 2012-08-13 2012-12-19 优视科技有限公司 网页浏览的渲染处理方法及装置和移动终端
CN103021259A (zh) * 2012-12-11 2013-04-03 广东威创视讯科技股份有限公司 地图移动的渲染方法和系统

Also Published As

Publication number Publication date
CN105763885A (zh) 2016-07-13

Similar Documents

Publication Publication Date Title
CN105763885B (zh) 一种三维图文信息实时发布的方法及装置
US10491711B2 (en) Adaptive streaming of virtual reality data
US10210907B2 (en) Systems and methods for adding content to video/multimedia based on metadata
CN105915937B (zh) 一种全景视频播放方法及设备
KR100929073B1 (ko) 휴대 방송 시스템에서 다중 스트림 수신 장치 및 방법
CN109565620A (zh) 低延迟http实时流传输
US10419826B2 (en) Using a webpage to insert graphical elements into a video program stream
CN108282449B (zh) 一种应用于虚拟现实技术的流媒体的传输方法和客户端
US6727915B2 (en) Interactive streaming media production tool using communication optimization
CN103533363A (zh) 视频编码装置和方法以及视频解码装置和方法
US11303942B2 (en) System and method for handling video data
US9693095B2 (en) Device and method for composing programmes from different sources in baseband
CN103716621A (zh) 视频编码设备和解码设备、视频编码方法和解码方法
WO2023202095A1 (zh) 点云媒体的编解码方法、装置、电子设备和存储介质
CN114450966A (zh) 用于异构沉浸式媒体的表示和流式传输的数据模型
CN105898373A (zh) 视频切片方法和装置
CN113438495A (zh) Vr直播方法、装置、系统、设备及存储介质
CN115802076A (zh) 一种三维模型分布式云端渲染方法、系统及电子设备
CN112262570B (zh) 实时地自动修改高分辨率视频数据的方法和计算机系统
CA3051671A1 (en) Just in time content conditioning
CN113691862B (zh) 视频处理方法、用于视频播放的电子设备和视频播放系统
CN111314777B (zh) 视频生成方法及装置、计算机存储介质、电子设备
CN115428416A (zh) 沉浸式媒体的设置和沉浸式媒体到异构客户端端点的分发
WO2024114519A1 (zh) 点云封装与解封装方法、装置、介质及电子设备
CN117998034A (zh) 一种视频转码处理方法、装置及相关设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 100101 Beijing city Chaoyang District District three building 10, building 1, Hui Li two

Patentee after: Aidipu Technology Co., Ltd

Address before: 100101 Beijing city Chaoyang District District three building 10, building 1, Hui Li two

Patentee before: IDEAPOOL (BEIJING) CULTURE AND TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder