CN107592550A

CN107592550A - 影院直播同步传输方法

Info

Publication number: CN107592550A
Application number: CN201710871450.1A
Authority: CN
Inventors: 丁锋
Original assignee: Shaanxi State Wide Digital Technology Co Ltd
Current assignee: Xi'an Yiying culture media Co.,Ltd.
Priority date: 2017-09-25
Filing date: 2017-09-25
Publication date: 2018-01-16
Anticipated expiration: 2037-09-25
Also published as: CN107592550B

Abstract

本发明涉及一种影院直播同步传输方法，包括：在直播现场数据采集前通过测试以获取视频数据、音频数据及灯光控制指令数据的相对延迟时间；在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码并将编码后的数据包通过卫星链路发送至影院直播控制器。本发明实施例通过将视频、音频及灯光控制指令数据的相对延迟时间封装在视频数据包、音频数据包及灯光控制指令数据包中，并统一打包传输至影院系统，解决了由于视频、音频及灯光控制指令在直播现场采集、播放时的时间差导致的音视频及灯光信号不同步的问题，保证影院直播时的同步播放。

Description

影院直播同步传输方法

技术领域

本发明涉及多媒体播放技术领域，特别涉及一种影院直播同步传输方法。

背景技术

随着电子信息技术和声学技术的发展，人们对声学及光学体验要求越来越高。有很多广播电视节目、网络直播节目等，用于节日庆典活动、体育比赛、知识竞赛、文艺演出等活动。现场直播脱离了播音室和演播室，在演唱会或其他事件现场，随着事件的发展，把现场图像、声音、灯光和现场解说组合成节目，并同时播送出去。现场直播要求采、编、播系统密切有效地进行合作。现有移动终端及家庭，无论是音视频设备配置，还是现场氛围等，远不如影院，无法给人们提供更真实强悍的视听体验。所以，走进影院看直播必然是市场趋势。

现在影院系统的形体、尺寸、比例和声学技术、画面清晰度以及灯光、座椅等使观众的视觉、听觉及触觉作用接近实际现场，有助于使观众产生真实感和临场感，让观众有良好视觉和听觉效果，真真正正感触到比现场还要震撼的体验效果。光是一种无从捉摸的表现手段，它能够起美化作用，也能够起丑化作用。如果将光恰到好处地应用，可以使影像产生的艺术魅力与观众共鸣。在影院导入直播，要实现影院与现场相同效果，就要使影院模仿相同的现场，才能使人有身临其境的感觉。

现有音视频及灯光技术，因工作原理不同，使音视频及灯光信号的编解码或显示时间会有差异，导致音视频或灯光信号传输不同步。如：摄像机是一种把景物光像转变为电信号的装置，摄像系统把被摄对象的光学图像转变成相应的电信号后形成信号源，即摄像机的工作原理是一个光电转换过程；传声器是将声音信号转换为电信号后，经IC音频放大后，推动喇叭发音的能量转换器件，即声音通过空气使震膜震动，然后在震膜上的线圈绕组和环绕在动圈麦头的磁铁形成磁力场切割(或上震膜和下金属铁片的距离产生变化)，形成微弱的电流；灯光用继电器作为控制开关，利用继电器机械触点的串联或并联等组合成逻辑控制，当电源接通时,电路中所有继电器都处于制约状态，即该吸合的继电器同时吸合，不该吸合的继电器受限制而不能吸合。视频与声音信号传输及灯光开关控制原理不同，使音视频与灯光信号传输或显示时间不同，导致音视频与灯光信号不同步。

发明内容

因此，为解决现有技术存在的技术缺陷和不足，本发明提出一种影院直播同步传输方法。

具体地，本发明实施例提出的一种影院直播同步传输方法，包括：

在直播现场数据采集前通过测试以获取视频数据、音频数据及灯光控制指令数据的相对延迟时间；

在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码并将编码后的数据包通过卫星链路发送至影院直播控制器。

在上述实施例的基础上，所述相对延迟时间包括数据采集相对延迟时间；若视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r+n+m，音频解码时间戳为T_audio＝r+n，灯光控制指令解码时间戳为T_light＝r。

在上述实施例的基础上，所述相对延迟时间包括数据采集相对延迟时间；若视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r，音频解码时间戳为T_audio＝r-n，灯光控制指令解码时间戳为T_light＝r-n-m。

在上述实施例的基础上，在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码，包括：

在直播现场数据采集时将所述数据采集相对延迟时间转换为解码时间戳，所述解码时间戳包括所述视频解码时间戳、所述音频解码时间戳及所述灯光控制指令解码时间戳；

将所述视频解码时间戳与对应的视频数据、所述音频解码时间戳与对应的音频数据、所述灯光控制指令解码时间戳与对应的灯光控制指令数据分别封装形成视频数据包、音频数据包及灯光控制指令数据包；

将视频数据包、音频数据包及灯光控制指令数据包统一编码形成影院直播数据包。

在上述实施例的基础上，所述相对延迟时间还包括播放相对延迟时间；若视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`+n`+m`，音频数据播放时间戳为T`_audio＝r`+n`，灯光控制指令数据播放时间戳为T`_light＝r`。

在上述实施例的基础上，所述相对延迟时间还包括播放相对延迟时间；若视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`，音频数据播放时间戳为T`_audio＝r`-n`，灯光控制指令数据播放时间戳为T`_light＝r`-n`-m`。

在直播现场数据采集时将所述数据采集相对延迟时间转换为解码时间戳，所述数据播放相对延迟时间转换为播放时间戳；所述解码时间戳包括所述视频解码时间戳、所述音频解码时间戳及所述灯光控制指令解码时间戳；所述播放时间戳包括视频播放时间戳、音频播放时间戳及灯光控制指令播放时间戳；

将所述视频播放时间戳、所述视频解码时间戳与对应的视频数据封装形成所述视频数据包，将所述音频播放时间戳、所述音频解码时间戳与对应的音频数据封装形成所述音频数据包，将所述灯光控制指令播放时间戳、所述灯光控制指令解码时间戳与对应的灯光控制指令数据封装形成所述灯光控制指令数据包；

将所述视频数据包、所述音频数据包及所述灯光控制指令数据包统一编码形成所述影院直播数据包。

在上述实施例的基础上，还包括：

影院直播控制器接收所述编码后的数据包进行解码并根据所述解码时间戳和所述播放时间戳将所述音频数据、所述视频数据及所述灯光控制指令数据输出至视频播放设备、音频播放设备及灯光显示设备以供播放。

在上述实施例的基础上，所述视频播放设备为投影仪系统或者LED显示屏系统。

本发明提供的一种影院直播同步传输方法，通过将视频、音频及灯光控制指令数据的相对延迟时间封装在视频数据包、音频数据包及灯光控制指令数据包中，并统一打包传输至影院系统，解决了由于视频、音频及灯光控制指令在直播现场采集、播放时的时间差导致的音视频及灯光信号不同步的问题，保证影院直播时的同步播放，实现影院直播的精确度，最大限度地克服了时间和空间的限制，给受众带来身临其境的现场感。

通过以下参考附图的详细说明，本发明的其它方面和特征变得明显。但是应当知道，该附图仅仅为解释的目的设计，而不是作为本发明的范围的限定，这是因为其应当参考附加的权利要求。还应当知道，除非另外指出，不必要依比例绘制附图，它们仅仅力图概念地说明此处描述的结构和流程。

附图说明

下面将结合附图，对本发明的具体实施方式进行详细的说明。

图1为本发明实施例的影院直播同步传输系统的结构示意图；

图2为本发明实施例的一种影院直播同步传输方法的流程示意图；

图3为本发明实施例的影院直播同步传输方法的编码示意图；以及

图4为本发明实施例的影院直播同步传输方法的数据采集时间差的时序示意图；

图5为本发明实施例的影院直播同步传输方法的数据播放时间差的时序示意图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。

实施例一

请参见图1，图1为本发明实施例的影院直播同步传输系统的结构示意图，该影院直播同步传输系统10可以包括视频采集设备11、音频采集设备12、灯光控制指令采集设备13、数据编码设备14、卫星链路15、影院直播控制器16、视频播放设备17、音频播放设备18及灯光显示设备19。其中，在数据编码设备14与卫星链路15之间还可以包括顺次信号连接调制器、上变频器、功率放大器；卫星链路15可以包括卫星发射天线、卫星转发器和卫星接收天线；影院直播控制器16为星院互动独立开发的播放设备，具体设备结构详见专利申请号201620115115.X，主要用于对影院直播数据包进行解码并获取相应的视频数据、音频数据及灯光控制指令数据；视频播放设备17可以为投影仪系统或者LED显示屏系统。

请参见图2，图2为本发明实施例的一种影院直播同步传输方法的流程示意图。该影院直播同步传输方法包括如下步骤：

其中，数据采集相对延迟时间会影响到数据解码时间。由此，相对延迟时间可以包括解码相对延迟时间，对于视频数据、音频数据及灯光控制指令数据进行编码时对时间戳的处理，可以按照如下两种方式处理：

请参见图4，图4为本发明实施例的影院直播同步传输方法的数据采集时间差的时序示意图。若延迟视频解码时间，则假设视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r+n+m，音频解码时间戳为T_audio＝r+n，灯光控制指令解码时间戳为T_light＝r；其中，n、m为实数。

相反地，若提前灯光解码时间，则假设视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r，音频解码时间戳为T_audio＝r-n，灯光控制指令解码时间戳为T_light＝r-n-m；其中，n、m为实数。

相应地，步骤“在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码”包括：

步骤a1、在直播现场数据采集时将所述数据采集相对延迟时间转换为解码时间戳，所述解码时间戳包括所述视频解码时间戳、所述音频解码时间戳及所述灯光控制指令解码时间戳；

步骤a2、将所述视频解码时间戳与对应的视频数据、所述音频解码时间戳与对应的音频数据、所述灯光控制指令解码时间戳与对应的灯光控制指令数据分别封装形成视频数据包、音频数据包及灯光控制指令数据包；

步骤a3、将视频数据包、音频数据包及灯光控制指令数据包统一编码形成影院直播数据包。

另外，相对延迟时间还影响到数据显示时间。由此，相对延迟时间还可以包括播放相对延迟时间；同样，对于时间戳的处理，可以对应包括两种方式：

第一种(延迟解码视频数据)：请参见图5，图5为本发明实施例的影院直播同步传输方法的数据播放时间差的时序示意图，假设视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`+n`+m`，音频数据播放时间戳为T`_audio＝r`+n`，灯光控制指令数据播放时间戳为T`_light＝r`。其中，n`、m`为实数。

第二种(提前解码灯光控制指令数据)：若视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`，音频数据播放时间戳为T`_audio＝r`-n`，灯光控制指令数据播放时间戳为T`_light＝r`-n`-m`。其中，n`、m`为实数。

步骤b1、在直播现场数据采集时将所述数据采集相对延迟时间转换为解码时间戳，所述数据播放相对延迟时间转换为播放时间戳；所述解码时间戳包括所述视频解码时间戳、所述音频解码时间戳及所述灯光控制指令解码时间戳；所述播放时间戳包括视频播放时间戳、音频播放时间戳及灯光控制指令播放时间戳；

步骤b2、将所述视频播放时间戳、所述视频解码时间戳与对应的视频数据封装形成所述视频数据包，将所述音频播放时间戳、所述音频解码时间戳与对应的音频数据封装形成所述音频数据包，将所述灯光控制指令播放时间戳、所述灯光控制指令解码时间戳与对应的灯光控制指令数据封装形成所述灯光控制指令数据包；

步骤b3、将所述视频数据包、所述音频数据包及所述灯光控制指令数据包统一编码形成所述影院直播数据包。

进一步地，该方法还可以包括如下步骤：

其中，所述视频播放设备可以为投影仪系统或者LED显示屏系统。

在本实施例中，通过将视频、音频及灯光控制指令数据的相对延迟时间封装在视频数据包、音频数据包及灯光控制指令数据包中，并统一打包传输至影院系统，解决了由于视频、音频及灯光控制指令在直播现场采集、播放时的时间差导致的音视频及灯光信号不同步的问题，保证影院直播时的同步播放，实现影院直播的精确度，最大限度地克服了时间和空间的限制，给受众带来身临其境的现场感。

实施例二

请一并参见图1、图3、图4及图5，图3为本发明实施例的影院直播同步传输方法的编码示意图。通过本实施例对上述影院直播同步传输方法的具体实现方式进行详细说明。

在数据编码设备14对采集到的视频数据、音频数据及灯光控制指令数据进行编码前，需要对直播现场的视频采集设备、音频采集设备及灯光控制指令采集设备进行现场设置，并对摆放完毕的设备的相对延迟时间进行测试。

具体地，对于编码端：

编码器理论提供视频信号解码时间戳r，音频信号较视频信号延迟时间n，灯光信号较音频信号延迟时间m；视频信号播放时间戳为r`，音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`；

编码器打时间戳方式1(延迟视频，如图4及图5所示)：视频信号解码时间戳：r+n+m；音频信号解码时间戳：r+n，灯光信号解码时间戳：r；视频信号显示时间戳：T`_video＝r`+n`+m`；音频信号解码时间戳：T`_audio＝r`+n`，灯光信号解码时间戳：T`_light＝r`。

编器打时间戳方式2(提前灯光)：视频信号解码时间戳r；音频信号解码时间戳r-n，灯光信号解码时间戳r-n-m；视频信号显示时间戳：T`_video＝r`；音频信号解码时间戳：T`_audio＝r`-n`，灯光信号解码时间戳：T`_light＝r`-n`-m`。

对于解码端：

将由卫星链路发送来的高频信号进行接收，先转化为中频信号，然后再经过一个高速的A/D转换成数字信号，接着经过一个解调程序，得到TS码流。

解码器解码方式1：解码器系统时钟STC等于信号解码时间时(视频信号解码时间：r+n+m；音频信号解码时间：r+n，灯光信号解码时间：r)，开始解码。

解码器解码方式2：解码器系统时钟STC等于信号解码时间时(视频信号解码时间：r；音频信号解码时间：r-n，灯光信号解码时间：r-n-m，开始解码。

每一显示单元开始显示前，用其寄存器当前图像对应的PTS与STC进行比较，当解码器STC与PTS相等时开始显示。

解码器显示方式1：解码器系统时钟STC等于信号显示时间(视频信号显示时间：r`+n`+m`；音频显示解码时间r`+n`，灯光显示解码时间：r`时，开始显示。

解码器显示方式2：解码器系统时钟STC等于信号显示时间(视频信号显示时间：r`；音频信号显示时间：r`-n`，灯光信号显示时间：r`-n`-m`时，开始显示。

本发明最大限度地克服了时间和空间的限制，通过图象、声音和灯光，真实的展现场景场景，使受众身临其境的现场感与参与感更强。

综上，本文中应用了具体个例对本发明影院直播同步传输方法的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制，本发明的保护范围应以所附的权利要求为准。

Claims

1.一种影院直播同步传输方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，所述相对延迟时间包括数据采集相对延迟时间；若视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r+n+m，音频解码时间戳为T_audio＝r+n，灯光控制指令解码时间戳为T_light＝r。

3.如权利要求1所述的方法，其特征在于，所述相对延迟时间包括数据采集相对延迟时间；若视频数据原始解码时间戳为r，若音频数据较视频数据采集的延迟时间为n，灯光控制指令数据较音频数据采集的延迟时间为m，则视频解码时间戳为T_video＝r，音频解码时间戳为T_audio＝r-n，灯光控制指令解码时间戳为T_light＝r-n-m。

4.如权利要求2或3所述的方法，其特征在于，在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码，包括：

5.如权利要求2所述的方法，其特征在于，所述相对延迟时间还包括播放相对延迟时间；若视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`+n`+m`，音频数据播放时间戳为T`_audio＝r`+n`，灯光控制指令数据播放时间戳为T`_light＝r`。

6.如权利要求3所述的方法，其特征在于，所述相对延迟时间还包括播放相对延迟时间；若视频数据原始播放时间戳为r`，若音频数据较视频数据的播放延迟时间为n`，灯光控制指令数据较音频数据的播放延迟时间为m`，则视频数据播放时间戳为T`_video＝r`，音频数据播放时间戳为T`_audio＝r`-n`，灯光控制指令数据播放时间戳为T`_light＝r`-n`-m`。

7.如权利要求5或6所述的方法，其特征在于，在直播现场数据采集时根据相对延迟时间对音频数据、视频数据及灯光控制指令数据进行统一编码，包括：

8.如权利要求1所述的方法，其特征在于，还包括：

9.如权利要求8所述的方法，其特征在于，所述视频播放设备可以为投影仪系统或者LED显示屏系统。