CN108833892A - 一种vr直播系统 - Google Patents

Abstract

本发明公开了一种VR直播系统，包括：信息采集系统、信息传输系统、信息转换系统和信息播放系统。本发明有益效果是：本发明能够让人们以主人翁的角色进入到一种由计算机图形技术构成的、具有感知的虚拟空间环境中,用户通过借助VR设备对虚拟环境中的对象进行一系列的交互操作,以获知的图形信息数据,达到对三维虚拟空间环境更全面的体验；本发明具有多感知性、沉浸性、交互性和构想性这四个方面。

Description

一种VR直播系统

技术领域

本发明涉及视频直播技术领域，具体涉及一种VR直播系统。

背景技术

随着信息化技术的普及，越来越多的人们通过视频来汲取信息、获取新闻资讯或休闲娱乐，人们对视频的依赖程度也越来越高。

直播的简单定义为：在现场随着事件的发生、发展进程同步制作和发布信息，具有双向流通过程的信息网络发布方式，分为现场直播、演播室访谈式直播、文字图片直播、视音频直播或由电视(第三方)提供信源的直播，而且具备海量便捷的功能。

与电影单一的过去时空相比，电视直播可显现的时空既有现在时又有过去时，而网络直播除具备电视的两大时空压缩时空的功能。如同步的文字直播、图片直播、赛事直播、手机直播和比分直播等等各种直播频道和样式。随着社会的发展效率，大家越来越看清了直播的好处，直播有利于减少成本、加快信息的传播。

随着互联网络技术的发展，直播的概念有了新的拓展和发展，现在更多的人关注网络直播，特别是网络视频直播更受关注。通过网络信号，在线收看赛事、体育赛事、重大活动和新闻等，这样，让大众有了广阔且自由的选择空间。当然，直播技术随着移动互联技术的发展，还会有新的进度。

随着互联网应用的兴起，用户越来越倾向于选择在线视频实时直播的方式，与他人分享一些趣闻或进行现场个人才艺表演。为了使在线实时谁聘接收用户获得良好的视觉效果，如何进行视频直播，成了一个关键问题。

现有技术进行视频直播时，视频接收用户的客户端仅对视频数据进行播放，因此视频接收用户获得的视觉效果形式较为单一，不能够在视频直播用户和视频接收用户之间进行互动，使得视频直播的用户粘性较低。

发明内容

为解决上述问题，尤其是针对现有技术所存在的不足，本发明提供了一种VR直播系统能够解决上述问题。

为实现上述目的，本发明采用以下技术手段：

一种VR直播系统，包括：信息采集系统、信息传输系统、信息转换系统和信息播放系统，所述信息采集系统包括信息捕捉装置、三维场景创建装置和实时三维图像拼接装置，所述信息传输系统包括编码推流装置、终端播放装置和云端存储服务器，所述信息转换系统包括提取云端存储服务器视频数据装置和云端服务器，所述信息播放系统包括提取云端互动数据装置、实时三维互动图像装置和三维互动图像反馈装置；

所述信息捕捉装置用于采集视频信息；所述三维场景创建装置用于对所述信息捕捉装置采集到的视频信息进行处理以生成三维全景视频；所述实时三维图像拼接装置用于处理所述三维场景创建装置产生的视屏并发送给编码推流装置；所述编码推流装置把所述实时三维图像拼接装置传送来的视频信息编码成网络可传输的数据码流，然后在终端播放装置播放，同时，再将这些信息传送至云端存储服务器内存储；所述提取云端存储服务器视频数据装置提取所述云端存储服务器内的信息并发送给云端服务器；所述提取云端互动数据装置提取所述云端服务器内的信息并传递给实时三维互动图像装置和三维互动图像反馈装置。

进一步的，所述信息捕捉装置包括多个全景视频相机和多个音频采集器，所述多个全景视频相机和多个音频采集器用于对不同角度的视频和音频进行采集以保证视场的全方位覆盖。

进一步的，所述实时三维图像拼接装置采用校验算法筛选出数据内容发生变化的网格,采用多线程技术,使用UDP协议对筛选出的数据进行网络广播传输。

进一步的，所述三维互动图像反馈装置包括触觉反馈装置和手势跟踪装置。

进一步的，所述触觉反馈装置为虚拟现实手柄。

进一步的，所述手势跟踪装置为数据手套。

本发明有益效果是：本发明能够让人们以主人翁的角色进入到一种由计算机图形技术构成的、具有感知的虚拟空间环境中,用户通过借助VR设备对虚拟环境中的对象进行一系列的交互操作,以获知的图形信息数据,达到对三维虚拟空间环境更全面的体验。

本发明具有多感知性、沉浸性、交互性和构想性这四个方面,多感知性主要表现在它对人的听觉、视觉、嗅觉和触觉等有感知能力；沉浸性,即用户在数字化展示中所勾勒的虚拟环境,勾勒出极度逼真的虚拟环境是虚拟交互技术最高目标,使用户看到此类展品就如同身临其境一般；交互性,在虚拟环境中的用户能够实现操作物体以及得到反馈结果的特性；构想性,即有空间可以使用户发散思维,使人们的认知范畴进一步扩大，既可以虚拟现实环境，也可以虚拟不存在的环境。

附图说明

图1是本发明的系统分布图。

具体实施方式

下面结合附图对本发明做进一步说明，其中相同的零部件用相同的附图标记表示。需要说明的是，下面描述中使用的词语“前”、“后”、“左”、“右”、“上”和“下”指的是附图中的方向，词语“内”和“外”分别指的是朝向或远离特定部件几何中心的方向。

如图1所示，本发明提供一种VR直播系统，包括：信息采集系统1、信息传输系统2、信息转换系统3和信息播放系统4，所述信息采集系统1包括信息捕捉装置101、三维场景创建装置102和实时三维图像拼接装置103，所述信息传输系统2包括编码推流装置201、终端播放装置202和云端存储服务器203，所述信息转换系统3包括提取云端存储服务器视频数据装置301和云端服务器302，所述信息播放系统4包括提取云端互动数据装置401、实时三维互动图像装置402和三维互动图像反馈装置403；

所述信息捕捉装置101用于采集视频信息；所述三维场景创建装置102用于对所述信息捕捉装置101采集到的视频信息进行处理以生成三维全景视频；所述实时三维图像拼接装置103用于处理所述三维场景创建装置102产生的视屏并发送给编码推流装置201；所述编码推流装置201把所述实时三维图像拼接装置103传送来的视频信息编码成网络可传输的数据码流，然后在终端播放装置202播放，同时，再将这些信息传送至云端存储服务器203内存储；所述提取云端存储服务器视频数据装置301提取所述云端存储服务器203内的信息并发送给云端服务器302；所述提取云端互动数据装置401提取所述云端服务器302内的信息并传递给实时三维互动图像装置402和三维互动图像反馈装置403。

信息捕捉装置101包括多个全景视频相机和多个音频采集器，所述多个全景视频相机和多个音频采集器用于对不同角度的视频和音频进行采集以保证视场的全方位覆盖。

VR直播的实时效果主要跟帧率有关，帧率越高，显示越流畅。通常帧率低于24帧/秒时人眼就会感觉到有滞后现象。但是帧率越高，对系统资源以及网络带宽的消耗也越大。要实时地将VR眼镜上的图像信息传送到直播用户的屏幕上显示出来，就需要在网络上用较短的时间传输大量的数据。用软件来实现的VR直播功能就必须在保证传输质量的基础上解决有限的网络带宽与大数据量传输之间的矛盾。在VR直播中，VR眼镜通过将要传送的屏幕图像先进行网格化区域分割后,再进行数据采集,采用校验算法筛选出数据内容发生变化的网格,采用多线程技术，使用UDP协议对筛选出的数据进行网络广播传输，在保证VR眼镜内容实时反馈到直播用户屏幕的基础上，可以有效解决屏幕广播时占用大量网络带宽及系统资源的问题。

三维互动图像反馈装置403包括触觉反馈装置404和手势跟踪装置405。触觉反馈装置404为虚拟现实手柄，虚拟现实手柄能够通过手柄的按钮和震动完成交互。这种高度简化的交互设备优势在于能够自如地在游戏中使用；手势跟踪装置405为数据手套，数据手套集成了惯性传感器来跟踪用户的手指乃至手臂的运动。它优势在于没有视场限制，且完全在设备上集成反馈机制(例震动，按钮和触摸)。

此外，直播用户的屏幕上还有另外一个窗口，是对于玩家本人动作的实时投影。这样直播用户能同时看见玩家所处的环境和玩家的行为动作。在直播玩家动作的屏幕中，能实时反馈玩家的动作以及系统对玩家此次动作的规范性评判。

直播用户在终端发送交互信息至云端服务器302(直播玩家可以将自己的评论，以弹幕类的形式反馈到玩家VR眼睛的屏幕图像上)。玩家提取云端互动数据，形成实时三维互动图像并将三维互动图像反馈给计算机，形成玩家与用户数据信息的实时交互。

上述具体实施方式仅仅是为清楚地说明本发明所作的举例，而并非对实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动，这里无需也无法对所有的实施方式予以穷举，而由此所引申出的显而易见的变化或变动仍处于本发明的保护范围中。

Claims (6)

1.一种VR直播系统，其特征在于，包括：信息采集系统(1)、信息传输系统(2)、信息转换系统(3)和信息播放系统(4)，所述信息采集系统(1)包括信息捕捉装置(101)、三维场景创建装置(102)和实时三维图像拼接装置(103)，所述信息传输系统(2)包括编码推流装置(201)、终端播放装置(202)和云端存储服务器(203)，所述信息转换系统(3)包括提取云端存储服务器视频数据装置(301)和云端服务器(302)，所述信息播放系统(4)包括提取云端互动数据装置(401)、实时三维互动图像装置(402)和三维互动图像反馈装置(403)；

所述信息捕捉装置(101)用于采集视频信息；所述三维场景创建装置(102)用于对所述信息捕捉装置(101)采集到的视频信息进行处理以生成三维全景视频；所述实时三维图像拼接装置(103)用于处理所述三维场景创建装置(102)产生的视屏并发送给编码推流装置(201)；所述编码推流装置(201)把所述实时三维图像拼接装置(103)传送来的视频信息编码成网络可传输的数据码流，然后在终端播放装置(202)播放，同时，再将这些信息传送至云端存储服务器(203)内存储；所述提取云端存储服务器视频数据装置(301)提取所述云端存储服务器(203)内的信息并发送给云端服务器(302)；所述提取云端互动数据装置(401)提取所述云端服务器(302)内的信息并传递给实时三维互动图像装置(402)和三维互动图像反馈装置(403)。

2.根据权利要求1所述的一种VR直播系统，其特征在于，所述信息捕捉装置(101)包括多个全景视频相机和多个音频采集器，所述多个全景视频相机和多个音频采集器用于对不同角度的视频和音频进行采集以保证视场的全方位覆盖。

3.根据权利要求1所述的一种VR直播系统，其特征在于，所述实时三维图像拼接装置(103)采用校验算法筛选出数据内容发生变化的网格,采用多线程技术,使用UDP协议对筛选出的数据进行网络广播传输。

4.根据权利要求1所述的一种VR直播系统，其特征在于，所述三维互动图像反馈装置(403)包括触觉反馈装置(404)和手势跟踪装置(405)。

5.根据权利要求4所述的一种VR直播系统，其特征在于，所述触觉反馈装置(404)为虚拟现实手柄。

6.根据权利要求4所述的一种VR直播系统，其特征在于，所述手势跟踪装置(405)为数据手套。