CN112004030A - 一种用于会场控制的可视化vr导播系统 - Google Patents
一种用于会场控制的可视化vr导播系统 Download PDFInfo
- Publication number
- CN112004030A CN112004030A CN202010643874.4A CN202010643874A CN112004030A CN 112004030 A CN112004030 A CN 112004030A CN 202010643874 A CN202010643874 A CN 202010643874A CN 112004030 A CN112004030 A CN 112004030A
- Authority
- CN
- China
- Prior art keywords
- module
- video
- audio
- data
- visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 16
- 238000012544 monitoring process Methods 0.000 claims abstract description 15
- 230000003139 buffering effect Effects 0.000 claims description 10
- 238000000034 method Methods 0.000 claims description 5
- 238000004806 packaging method and process Methods 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 abstract description 9
- 238000004519 manufacturing process Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000011217 control strategy Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种用于会场控制的可视化VR导播系统，具体涉及VR导播领域，包括解复用模块、音视频缓存模块、视频解码模块、监看模块、切换逻辑模块和推流复用模块，包括以下操作步骤：S1：将rtmp拉流输入解复用模块，然后解复用模块拉取8Krtmp直播流并进行解复用；S2：将S1解复用的数据导入音视频缓存模块，然后利用音视频频缓存模块从缓存中读取，相应的视频，然后解码。本发明通过加入解复用模块将原有的8k视频分辨率缩放到2K或较低的视频分辨率进行预览切换，云端部署减少前端硬件成本，降低前期制作难度，通过设置监看模块，使得每次视频传输都是经过稳定监看，极大的保证远程导播精确度，也缩减了直播事故带来的的播放不便的问题。
Description
技术领域
本发明涉及VR导播技术领域，更具体地说，本发明涉及一种用于会场控制的可视化VR导播系统。
背景技术
现有直播技术是根据4K多路信号之间的切换和自动返回控制策略，迅速发出相应的指令，指挥对应的摄像球来捕获相应的视频，高速定位摄像机摄拍摄下来的视频可通过直播服务器进行播放，也可通过点播服务器进行存储，使输出的画面场景切换灵活、画面配合流畅。当前，在4KVR直播过程中，往往需要在演播室或者在实际的外景中进行拍摄，然而，现有的这种4KVR直播方式往往存在诸多缺陷。
首先在现有的4KVR直播之前，往往需要投入大笔费用采购专业的硬件设备和搭建演播室。在直播时，传统的节目内容采集都来自于本地现场，对于异地画面的采集需要依靠专业的卫星广播车进行传输。卫星广播车不仅数量有限，而且单次的使用成本高达10万以上，同时还需要配合专业的硬件设备一起使用，导致录制电视节目VR直播的成本非常巨大。
因此亟需提供一种云端操作简单并且能够实现8KVR视频源多种格式输入。
发明内容
为了克服现有技术的上述缺陷，本发明的实施例提供一种用于会场控制的可视化VR导播系统，通过加入解复用模块将原有的8k视频分辨率缩放到2K或较低的视频分辨率进行预览切换，云端部署减少前端硬件成本，降低前期制作难度，通过设置监看模块，使得每次视频传输都是经过稳定监看，极大的保证远程导播精确度，也缩减了直播事故带来的的播放不便的问题，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种用于会场控制的可视化VR导播系统，包括解复用模块、音视频缓存模块、解码视频模块、监看模块、切换逻辑模块和推流复用模块，包括以下操作步骤：S1：将rtmp拉流输入解复用模块，然后解复用模块拉取8Krtmp直播流并进行解复用；
S2：将S1解复用的数据导入音视频缓存模块，然后利用频缓存模块从缓存中读取，相应的视频，然后解码；
S3：将S2中的解码视频输入到监看模块，进行缩放并显示到指定的窗口显示，并发出切换指令，通知切换模块进行切换；
S4：进入切换逻辑模块，通过S3中接收切换指令，以音频时间轴作为基准，进行直播流切换；
S5：进入推流复用模块，对输出音视频数据进行打包复用，然后推送到指定的推流地址。
在一个优选地实施方式中，所述S1中解复用模块拉取的8Krtmp直播流为三路数据流。
在一个优选地实施方式中，所述音视频缓存模块的缓存长度以时间为单位，且可以调整。
在一个优选地实施方式中，所述音视频缓存模块缓存中第一个包的时间应该大于等于当前输出的时间值。
5、根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述音视频切换模块的逻辑为：
A1：导播程序接收到切换指令；
A2：查找切换后视频的关键帧；
A3：如果没有找到，则继续转发原来的音频数据，但不转发视频数据，如果找到，则转发切换后的音视频数据。
在一个优选地实施方式中，所述音视频缓存模块中的音频数据包括视频缓存数据和声音缓存数据。
在一个优选地实施方式中，所述S1至S2的数据输出是将压缩后的音视频重新打包复用，并发送到推流地址
在一个优选地实施方式中，所述监看模块将解码压缩后的视频数据，根据不同的预览需求，进行缩放，并在指定窗口显示。
本发明的技术效果和优点：
1、本发明通过加入解复用模块将原有的8k视频分辨率缩放到2K或较低的视频分辨率进行预览切换，云端部署减少前端硬件成本，降低前期制作难度；
2、本发明通过设置监看模块，使得每次视频传输都是经过稳定监看，极大的保证远程导播精确度，也缩减了直播事故带来的的播放不便的问题。
附图说明
图1为本发明的整体流程系统框图。
图2为本发明的音频模块结构系统框图。
图3为本发明的数据流程结构系统框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例1
如附图1、附图2和附图3所示的一种用于会场控制的可视化VR导播系统，包括包括解复用模块、音视频缓存模块、解码视频模块、监看模块、切换逻辑模块和推流复用模块，包括以下操作步骤：
S1：将rtmp拉流输入解复用模块，然后解复用模块拉取8Krtmp直播流并进行解复用；
S2：将S1解复用的数据导入音视频缓存模块，然后利用频缓存模块从缓存中读取，相应的视频，然后解码；
S3：将S2中的解码视频输入到监看模块，进行缩放并显示到指定的窗口显示，并发出切换指令，通知切换模块进行切换；
S4：进入切换逻辑模块，通过S3中接收切换指令，以音频时间轴作为基准，进行直播流切换；
S5：进入推流复用模块，对输出音视频数据进行打包复用，然后推送到指定的推流地址。
具体实施方式为：通过加入解复用模块将原有的8k视频分辨率缩放到2K或较低的视频分辨率进行预览切换，云端部署减少前端硬件成本，降低前期制作难度，通过设置监看模块，使得每次视频传输都是经过稳定监看，极大的保证远程导播精确度，也缩减了直播事故带来的的播放不便的问题。
其中，所述S1中解复用模块拉取的8Krtmp直播流为三路数据流，利用三路8Krtmp直播流的设定保证了数据传输的稳定，为8k显示提供了基础；
其中，所述音视频缓存模块的缓存长度以时间为单位，且可以调整，所述音视频缓存模块缓存中第一个包的时间应该大于等于当前输出的时间值，增加了音频缓冲的整体数据量，保证了音频缓冲的灵活性。其中，述音视频切换模块的逻辑为：
A1：导播程序接收到切换指令；
A2：查找切换后视频的关键帧；
A3：如果没有找到，则继续转发原来的音频数据，但不转发视频数据，如果找到，则转发切换后的音视频数；
采用上述技术手段：保证了音频数据传输的精准，避免了直播事故带来的的播放不便的问题
其中，所述音视频缓存模块中的音频数据包括视频缓存数据和声音缓存数据，其中，所述S1至S2的数据输出是将压缩后的音视频重新打包复用，并发送到推流地址；加入解复用模块将原有的8k视频分辨率缩放到2K或较低的视频分辨率进行预览切换，云端部署减少前端硬件成本，降低前期制作难度。
其中，所述监看模块将解码压缩后的视频数据，根据不同的预览需求，进行缩放，并在指定窗口显示；，使得每次视频传输都是经过稳定监看，极大的保证远程导播精确度，也缩减了直播事故带来的的播放不便的问题。
实施例2
具体与实施例1的局别与其中所述音频模块中的初始数据流为四组；实施例3
具体与实施例1的局别与其中所述音频模块中的初始数据流为二组；实验例
采用三组设备，分别安装实施例1、2、3中的技术手段，然后记录四组操作过程中每秒数据输送量。
| 实施例1 | 实施例2 | 实施例3 | |
| 数据传输量/秒 | 92.2M | 176.4M | 160.3M |
综上所述：在同样的成本预算过程中，现有的三组数据流供给的效率最佳。
最后应说明的几点是：首先，在本申请的描述中，需要说明的是，除非另有规定和限定，术语“安装”、“相连”、“连接”应做广义理解，可以是机械连接或电连接，也可以是两个元件内部的连通，可以是直接相连，“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变，则相对位置关系可能发生改变；
其次：本发明公开实施例附图中，只涉及到与本公开实施例涉及到的结构，其他结构可参考通常设计，在不冲突情况下，本发明同一实施例及不同实施例可以相互组合；
最后：以上所述仅为本发明的优选实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.一种用于会场控制的可视化VR导播系统，包括解复用模块、音视频缓存模块、解码视频模块、监看模块、切换逻辑模块和推流复用模块，其特征在于：包括以下操作步骤：
S1：将rtmp拉流输入解复用模块，然后解复用模块拉取8Krtmp直播流并进行解复用；
S2：将S1解复用的数据导入音视频缓存模块，然后利用频缓存模块从缓存中读取，相应的视频，然后解码；
S3：将S2中的解码视频输入到监看模块，进行缩放并显示到指定的窗口显示，并发出切换指令，通知切换模块进行切换；
S4：进入切换逻辑模块，通过S3中接收切换指令，以音频时间轴作为基准，进行直播流切换；
S5：进入推流复用模块，对输出音视频数据进行打包复用，然后推送到指定的推流地址。
2.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述S1中解复用模块拉取的8Krtmp直播流为三路数据流。
3.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述音视频缓存模块的缓存长度以时间为单位，且可以调整。
4.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述音视频缓存模块缓存中第一个包的时间应该大于等于当前输出的时间值。
5.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述音视频切换模块的逻辑为：
A1：导播程序接收到切换指令；
A2：查找切换后视频的关键帧；
A3：如果没有找到，则继续转发原来的音频数据，但不转发视频数据，如果找到，则转发切换后的音视频数据。
6.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述音视频缓存模块中的音频数据包括视频缓存数据和声音缓存数据。
7.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述S1至S2的数据输出是将压缩后的音视频重新打包复用，并发送到推流地址。
8.根据权利要求1所述的一种用于会场控制的可视化VR导播系统，其特征在于：所述监看模块将解码压缩后的视频数据，根据不同的预览需求，进行缩放，并在指定窗口显示。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010643874.4A CN112004030A (zh) | 2020-07-08 | 2020-07-08 | 一种用于会场控制的可视化vr导播系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010643874.4A CN112004030A (zh) | 2020-07-08 | 2020-07-08 | 一种用于会场控制的可视化vr导播系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112004030A true CN112004030A (zh) | 2020-11-27 |
Family
ID=73466437
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010643874.4A Pending CN112004030A (zh) | 2020-07-08 | 2020-07-08 | 一种用于会场控制的可视化vr导播系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112004030A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113453086A (zh) * | 2021-03-29 | 2021-09-28 | 北京国际云转播科技有限公司 | 多机位同步云导播方法、系统、存储介质和视频编码器 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107888953A (zh) * | 2016-09-29 | 2018-04-06 | 上海禾鸟电子科技有限公司 | 一种新型直播系统的实现方法 |
| CN108200358A (zh) * | 2018-03-20 | 2018-06-22 | 网宿科技股份有限公司 | 一种音视频导播方法、系统及控制服务器 |
| CN108243345A (zh) * | 2017-06-20 | 2018-07-03 | 广州华多网络科技有限公司 | 一种视频推流方法 |
| CN109714634A (zh) * | 2018-12-29 | 2019-05-03 | 青岛海信电器股份有限公司 | 一种直播数据流的解码同步方法、装置及设备 |
| CN109819234A (zh) * | 2019-02-01 | 2019-05-28 | 广州卓远虚拟现实科技有限公司 | 一种基于h.265的虚拟现实视频传输与播放方法、系统 |
| WO2019169682A1 (zh) * | 2018-03-05 | 2019-09-12 | 网宿科技股份有限公司 | 一种音视频的合成方法及系统 |
-
2020
- 2020-07-08 CN CN202010643874.4A patent/CN112004030A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107888953A (zh) * | 2016-09-29 | 2018-04-06 | 上海禾鸟电子科技有限公司 | 一种新型直播系统的实现方法 |
| CN108243345A (zh) * | 2017-06-20 | 2018-07-03 | 广州华多网络科技有限公司 | 一种视频推流方法 |
| WO2019169682A1 (zh) * | 2018-03-05 | 2019-09-12 | 网宿科技股份有限公司 | 一种音视频的合成方法及系统 |
| CN108200358A (zh) * | 2018-03-20 | 2018-06-22 | 网宿科技股份有限公司 | 一种音视频导播方法、系统及控制服务器 |
| CN109714634A (zh) * | 2018-12-29 | 2019-05-03 | 青岛海信电器股份有限公司 | 一种直播数据流的解码同步方法、装置及设备 |
| CN109819234A (zh) * | 2019-02-01 | 2019-05-28 | 广州卓远虚拟现实科技有限公司 | 一种基于h.265的虚拟现实视频传输与播放方法、系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113453086A (zh) * | 2021-03-29 | 2021-09-28 | 北京国际云转播科技有限公司 | 多机位同步云导播方法、系统、存储介质和视频编码器 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2021179783A1 (zh) | 基于自由视点的视频直播处理方法、设备、系统、芯片及介质 | |
| US7145947B2 (en) | Video data processing apparatus and method, data distributing apparatus and method, data receiving apparatus and method, storage medium, and computer program | |
| CN108900857B (zh) | 一种多视角视频流处理方法和装置 | |
| US10542058B2 (en) | Methods and systems for network based video clip processing and management | |
| CN101917568A (zh) | 一种基于流媒体技术的网络视频播放器及播放系统 | |
| KR101528863B1 (ko) | 파노라마 영상의 스트리밍 서비스 제공 시스템에서 타일링 영상 동기화 방법 | |
| CN107211081B (zh) | 基于独立编码的背景更新的视频传输 | |
| CN107454438B (zh) | 全景视频制作方法 | |
| CN107835435B (zh) | 一种赛事宽视角直播设备和相关联的直播系统和方法 | |
| CN110913273A (zh) | 视频直播方法及装置 | |
| CN112004030A (zh) | 一种用于会场控制的可视化vr导播系统 | |
| CN114727126A (zh) | 一种将图像缝合应用于多机位vr导播台的实现方法 | |
| US20090153550A1 (en) | Virtual object rendering system and method | |
| CN1427618A (zh) | 基于多进程的多视角视频节目网络转播方法 | |
| CN106791902A (zh) | 对移动互联网设备的音视频切换方法及其切换台 | |
| CN111385590A (zh) | 直播数据处理方法、装置及终端 | |
| CN213342434U (zh) | 一种多机位视频切画系统 | |
| CN115665493A (zh) | 支持录播的大屏拼接装置、拼接器、播放控制方法及系统 | |
| CN114745501A (zh) | 一种基于以太网网络拓扑结构的数据采集方法及系统 | |
| CN113395527A (zh) | 一种基于vr技术的远程直播虚拟背景云合成系统 | |
| CN107835433B (zh) | 一种赛事宽视角直播系统、相关联的设备和直播方法 | |
| CN112738609A (zh) | 一种多路视频流传输方法、装置及多路视频流播放系统 | |
| CN112261422A (zh) | 适用于广电领域的仿真远程直播流数据处理方法 | |
| JP2015084478A (ja) | リターン映像の配信装置 | |
| CN214381148U (zh) | 全媒体直播车 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20201127 |
|
| WD01 | Invention patent application deemed withdrawn after publication |