CN113473163B - 网络直播过程中的数据传输方法、装置、设备及存储介质 - Google Patents
网络直播过程中的数据传输方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113473163B CN113473163B CN202110566357.6A CN202110566357A CN113473163B CN 113473163 B CN113473163 B CN 113473163B CN 202110566357 A CN202110566357 A CN 202110566357A CN 113473163 B CN113473163 B CN 113473163B
- Authority
- CN
- China
- Prior art keywords
- stream
- data
- live
- streaming
- interactive data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
- H04N21/64784—Data processing by the network
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Databases & Information Systems (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及大数据技术领域，公开了一种网络直播过程中的数据传输方法、装置、设备及存储介质，用于提高直播流和直播流以外的互动数据之间的同步性和安全性。所述方法包括：获取直播过程中的直播流，并获取与直播流对应的互动数据；按照预置字符长度，对互动数据进行分割，得到多个互动数据片段；根据预置的流媒体格式，分别将各互动数据片段封装为脚本流数据包，得到多个脚本流数据包；基于预置的流媒体传输协议，对直播流进行封包处理，得到初始流媒体数据包，并将多个脚本流数据包植入初始流媒体数据包中，得到目标流媒体数据包；将目标流媒体数据包下发至直播流接收终端。此外，本发明还涉及区块链技术，互动数据可存储于区块链节点中。
Description
技术领域
本发明涉及增量同步领域，尤其涉及一种网络直播过程中的数据传输方法、装置、设备及存储介质。
背景技术
网络直播是一种新型社交方式，主播终端通过现场架设的独立信号采集设备，向网络上传直播内容，观众端通过拉取网络上的直播内容，从而观看主播终端的实时状态。
目前，网络直播过程中，主播与观众之间有多种互动形式，例如主播与观众的问答互动、主播向观众发送购物信息等，这些互动形式不同于直播流中通过信号采集设备录制的实时状态，是在录制的直播画面之外设置的互动形式，观众能够对主播终端发送的互动数据进行相关的操作，并将操作结果反馈给主播终端，从而达到互动的目的。
现有技术中，由于直播流和直播流以外的互动数据是分开获取的，当服务器或终端的网络环境不佳时，互动数据和直播流所获取到的时间可能不同，因此，互动数据和直播流之间存在播放不同步的问题。
发明内容
本发明提供了一种网络直播过程中的数据传输方法、装置、设备及存储介质，用于提高直播流和直播流以外的互动数据之间的同步性和安全性。
本发明第一方面提供了一种网络直播过程中的数据传输方法，包括：
获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，在本发明第一方面的第一种实现方式中，所述获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流包括：
接收直播过程中的直播流，并启动互动数据获取进程，所述直播流包括视频流和音频流；
通过所述互动数据获取进程，定时轮询互动数据；
当接收到所述互动数据时，记录所述互动数据和所述互动数据对应的时间戳，所述时间戳用于判断所述互动数据与所述直播流是否同步。
可选的，在本发明第一方面的第二种实现方式中，所述按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段包括：
对所述互动数据进行数据类型识别，得到数据类型识别结果，并根据所述数据类型识别结果对所述互动数据进行数据类型标记，得到数据类型标记结果；
计算互动数据的字符长度，并判断所述互动数据的字符长度是否大于预置阈值；
若所述互动数据的字符长度大于预置阈值，则按照预置字符长度，将所述互动数据分割为多个互动数据片段；
按照互动数据的分割顺序对各所述互动数据片段进行序号标记，并记录分割片段数量和各所述互动数据片段对应的有序标识符。
可选的，在本发明第一方面的第三种实现方式中，所述根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包包括：
分别对各所述互动数据片段、所述数据类型标记结果、所述有序标识符、所述分割片段数量以及所述时间戳进行二进制模式编码，得到各所述互动数据片段对应的编码数据；
按照预置的流媒体格式，分别将各所述编码数据封装为对应的脚本流数据包，得到多个脚本流数据包。
可选的，在本发明第一方面的第四种实现方式中，所述基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包包括：
解析所述直播流，并提取所述直播流中的视频流和音频流；
基于预置的流媒体传输协议，将所述视频流和所述音频流封装为流媒体传输协议格式的初始流媒体数据包；
将各所述脚本流数据包拷贝到所述初始流媒体数据包中，得到目标流媒体数据包。
可选的，在本发明第一方面的第五种实现方式中，所述通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放包括：
分别检测所述目标流媒体数据包中的视频流对应的时间戳、与所述脚本流数据包对应的时间戳之间是否存在差异；
若所述视频流对应的时间戳与所述脚本流数据包对应的时间戳之间存在差异，则以所述视频流的时间戳为基准，对所述脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；
通过流媒体传输协议的推流函数，将所述校正后的目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，在本发明第一方面的第六种实现方式中，在所述通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放之后，所述网络直播过程中的数据传输方法还包括：
接收所述直播流接收终端提交的互动数据处理结果，并提取所述互动数据处理结果中的有效参数；
按照预置的数据校验规则，对所述有效参数进行参数校验，得到参数校验结果，并将所述参数校验结果返回至所述直播流接收终端，以实现与所述直播流接收终端之间的数据互动。
本发明第二方面提供了一种网络直播过程中的数据传输装置，包括：
获取模块，用于获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
分割模块，用于按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
封装模块，用于根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
植入模块，用于基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
下发模块，用于通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，在本发明第二方面的第一种实现方式中，所述获取模块具体用于：
接收直播过程中的直播流，并启动互动数据获取进程，所述直播流包括视频流和音频流；
通过所述互动数据获取进程，定时轮询互动数据；
当接收到所述互动数据时，记录所述互动数据和所述互动数据对应的时间戳，所述时间戳用于判断所述互动数据与所述直播流是否同步。
可选的，在本发明第二方面的第二种实现方式中，所述分割模块具体用于：
对所述互动数据进行数据类型识别，得到数据类型识别结果，并根据所述数据类型识别结果对所述互动数据进行数据类型标记，得到数据类型标记结果；
计算互动数据的字符长度，并判断所述互动数据的字符长度是否大于预置阈值；
若所述互动数据的字符长度大于预置阈值，则按照预置字符长度，将所述互动数据分割为多个互动数据片段；
按照互动数据的分割顺序对各所述互动数据片段进行序号标记，并记录分割片段数量和各所述互动数据片段对应的有序标识符。
可选的，在本发明第二方面的第三种实现方式中，所述封装模块具体用于：
分别对各所述互动数据片段、所述数据类型标记结果、所述有序标识符、所述分割片段数量以及所述时间戳进行二进制模式编码，得到各所述互动数据片段对应的编码数据；
按照预置的流媒体格式，分别将各所述编码数据封装为对应的脚本流数据包，得到多个脚本流数据包。
可选的，在本发明第二方面的第四种实现方式中，所述植入模块具体用于：
解析所述直播流，并提取所述直播流中的视频流和音频流；
基于预置的流媒体传输协议，将所述视频流和所述音频流封装为流媒体传输协议格式的初始流媒体数据包；
将各所述脚本流数据包拷贝到所述初始流媒体数据包中，得到目标流媒体数据包。
可选的，在本发明第二方面的第五种实现方式中，所述下发模块具体用于：
分别检测所述目标流媒体数据包中的视频流对应的时间戳、与所述脚本流数据包对应的时间戳之间是否存在差异；
若所述视频流对应的时间戳与所述脚本流数据包对应的时间戳之间存在差异，则以所述视频流的时间戳为基准，对所述脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；
通过流媒体传输协议的推流函数，将所述校正后的目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，在本发明第二方面的第六种实现方式中，所述网络直播过程中的数据传输装置还包括：
接收模块，用于接收所述直播流接收终端提交的互动数据处理结果，并提取所述互动数据处理结果中的有效参数；
校验模块，用于按照预置的数据校验规则，对所述有效参数进行参数校验，得到参数校验结果，并将所述参数校验结果返回至所述直播流接收终端，以实现与所述直播流接收终端之间的数据互动。
本发明第三方面提供了一种网络直播过程中的数据传输设备，包括：存储器和至少一个处理器，所述存储器中存储有指令；所述至少一个处理器调用所述存储器中的所述指令，以使得所述网络直播过程中的数据传输设备执行上述的网络直播过程中的数据传输方法。
本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的网络直播过程中的数据传输方法。
本发明提供的技术方案中，获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。本发明实施例中，为了使直播流和直播流之外的互动数据同步播放，通过对互动数据进行多段分割之后，将各段互动数据封装为和直播流中的脚本流相同格式的脚本流数据包，再将脚本流数据包植入直播流对应的初始流媒体数据包中，得到目标流媒体数据包，最后将目标流媒体数据包下发到直播流接收终端。从而提高直播流和直播流以外的互动数据之间的同步性和安全性。
附图说明
图1为本发明实施例中网络直播过程中的数据传输方法的一个实施例示意图；
图2为本发明实施例中网络直播过程中的数据传输方法的另一个实施例示意图；
图3为本发明实施例中网络直播过程中的数据传输装置的一个实施例示意图；
图4为本发明实施例中网络直播过程中的数据传输装置的另一个实施例示意图；
图5为本发明实施例中网络直播过程中的数据传输设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种网络直播过程中的数据传输方法、装置、设备及存储介质，用于通过将互动数据转换为直播流对应的脚本流数据包之后，将脚本流数据包植入到直播流中，以提高直播流和直播流以外的互动数据之间的同步性和安全性。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中网络直播过程中的数据传输方法的一个实施例包括：
101、获取直播过程中的直播流，并获取与直播流对应的互动数据，直播流包括视频流和音频流；
需要说明的是，本发明的执行主体可以为网络直播过程中的数据传输装置，还可以是终端或者服务器，具体此处不做限定。本发明实施例以服务器为执行主体为例进行说明。
本实施例中，服务器通过流媒体的流式传输方式，可以将主播终端录制的音视频以流的形式传送给直播流接收终端，直播流接收终端通过流媒体播放器播放接收到的直播流，从而实现网络直播。从直播流发送端获取直播流可以称为拉流，而将直播流推送到直播流接收终端可以称为推流，直播流发送端和直播流接收终端所传输的流媒体格式可能不同。以直播过程中常用的流媒体格式为FLV(flash video，动画视频)格式为例进行说明，FLV是一个二进制文件，由文件头和多个标签流组成，其中，多个标签流又可以分为视频流、音频流和脚本流，脚本流可以携带不同的关键字或者文件信息等，本发明将以脚本流作为互动数据的载体，进行互动数据的同步传输。
本实施例中，互动数据是指独立于直播间实时状态以外的非被动采集的数据，直播过程中通过直播间现场架设的信号采集设备(如手机或录像机)，就能录制直播间的实时状态，这些实时状态通过设备就能被动采集，而互动数据则需要主动发送，例如主播下发问答题给观众，或者主播下发购物链接给观众等场景，其中的问答题和购物链接则属于互动数据，互动数据可以是文本、动画、语音等格式。进一步地，服务器将互动数据存储于区块链数据库中，具体此处不做限定。
本实施例中，与直播流时刻对应的互动数据可以根据定时轮询的接口获取，服务器通过定时调用互动数据获取接口，如每隔一秒调用互动数据获取接口，当互动数据获取接口获取到互动数据时，服务器记录互动数据和获取时刻的时间戳，并持续地进行互动数据获取接口轮询，以使得持续接收互动数据。
102、按照预置字符长度，对互动数据进行分割，得到多个互动数据片段；
本实施例中，由于终端播放器对流媒体的解析有最大字符长度限制，如多媒体视频处理工具(fast forward mpeg，FFMPEG)的最大解析长度为64字节，因此，服务器在将互动数据和直播流进行合流之前，服务器按照预置字符长度将互动数据分割为多个符合预置字符长度的片段，并记录分割的片段数量，用于直播流接收终端进行片段拼接时识别。
本实施例中，服务器获取多个互动数据片段之后，还可以对各个互动数据片段进行加密处理，以提高互动数据的安全性，并满足私有数据发送的使用场景，例如主播与观众的问答互动竞赛，服务器将主播发送的答案进行加密能够防止泄题，从而提高竞赛的公平性。
103、根据预置的流媒体格式，分别将各互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
本实施例中，为了使互动数据与直播流合流，服务器以直播流的流媒体格式，封装各个互动数据片段，而流媒体格式中的脚本流适用于承载互动数据片段。具体的，服务器提取直播流中的脚本流，并在脚本流中添加多个脚本流字段AMF(action message format,动作消息格式)，再将各个互动数据片段封装进对应的各个AMF中，从而得到符合预置的流媒体格式的脚本流数据包(AMF包)，每个互动数据片段对应一个脚本流数据包，各个脚本流数据包为符合直播流中的脚本流的数据格式的数据包。
104、基于预置的流媒体传输协议，对直播流进行封包处理，得到初始流媒体数据包，并将多个脚本流数据包植入初始流媒体数据包中，得到目标流媒体数据包；
本实施例中，优选的，本发明采用的流媒体传输协议为实时消息传输协议(realtime messaging protocol，RTMP)，服务器还可以将各个脚本流数据包融合到直播流中之后，服务器再将融合之后的直播流封装为目标流媒体数据包(rtmp-packet)，最后服务器通过RTMP对目标流媒体数据包进行推流操作，将携带互动数据的目标流媒体数据包推送到直播流接收终端。
本实施例中，服务器在将脚本流数据包植入目标流媒体数据包之前，服务器还对直播流和脚本流数据包的时间戳进行匹配，具体的，服务器提取脚本流数据包对应的第一时间戳，以第一时间戳为关键词，遍历直播流对应的第二时间戳，得到与第一时间戳相同的第二时间戳，服务器再将与第二时间戳相同的脚本流数据包插入到直播流相同第一时间戳对应的直播流部分中，最后服务器将携带了脚本流数据包的直播流植入到目标流媒体数据包中。
105、通过流媒体传输协议，将目标流媒体数据包下发至直播流接收终端，以使得直播流接收终端解析脚本流数据包中的互动数据，并将互动数据与直播流同步播放。
本实施例中，服务器通过推流的方式将流媒体数据包RTMPPacket推送到直播流接收终端，服务器推送的过程中会经过内容分发网络CDN，服务器通过CDN会将RTMPPacket转化为直播流接收终端所兼容的流媒体格式，例如.flv、.m3u8等，从而使得直播流接收终端能够解析目标流媒体数据包中的互动数据，并与对应的音视频同步播放。
本发明实施例中，为了使直播流和直播流之外的互动数据同步播放，通过对互动数据进行多段分割之后，将各段互动数据封装为和直播流中的脚本流相同格式的脚本流数据包，再将脚本流数据包植入直播流对应的初始流媒体数据包中，得到目标流媒体数据包，最后将目标流媒体数据包下发到直播流接收终端。从而提高直播流和直播流以外的互动数据之间的同步性和安全性。
请参阅图2，本发明实施例中网络直播过程中的数据传输方法的另一个实施例包括：
201、获取直播过程中的直播流，并获取与直播流对应的互动数据，直播流包括视频流和音频流；
具体的，服务器接收直播过程中的直播流，并启动互动数据获取进程，直播流包括视频流和音频流；服务器通过互动数据获取进程，定时轮询互动数据；服务器当接收到互动数据时，记录互动数据和互动数据对应的时间戳，时间戳用于判断互动数据与直播流是否同步。
本实施例中，为了提高互动数据和音视频的吻合度，服务器通过高频率的轮询来获取互动数据，当直播开始推流时，服务器启动互动数据获取进程，通过互动数据获取进程，服务器进行高频率地调用互动数据获取接口，当服务器接通过互动数据获取接口接收到互动数据时，服务器记录当前的时间戳和对应的互动数据，并将时间戳和互动数据传入直播流中，以将互动数据植入到直播流中。
202、按照预置字符长度，对互动数据进行分割，得到多个互动数据片段；
具体的，服务器对互动数据进行数据类型识别，得到数据类型识别结果，并根据数据类型识别结果对互动数据进行数据类型标记，得到数据类型标记结果；服务器计算互动数据的字符长度，并判断互动数据的字符长度是否大于预置阈值；若互动数据的字符长度大于预置阈值，则服务器按照预置字符长度，将互动数据分割为多个互动数据片段；服务器按照互动数据的分割顺序对各互动数据片段进行序号标记，并记录分割片段数量和各互动数据片段对应的有序标识符。
本实施例中，由于终端播放器对流媒体的解析有最大字符长度限制，因此服务器通过多段分割来增加互动数据的最大传输大小，而为了便于直播流接收终端识别，服务器对互动数据的数据类型进行标注，并记录分割片段数量，直播流接收终端接收到携带互动数据的流媒体数据之后，只需解析脚本流中的分割片段数量和每个片段对应的有序标识符，就能对互动数据片段进行有序的拼接和组装，从而读取到完整的互动数据。
203、根据预置的流媒体格式，分别将各互动数据片段封装为多个脚本流数据包；
具体的，服务器分别对各互动数据片段、数据类型标记结果、有序标识符、分割片段数量以及时间戳进行二进制模式编码，得到各互动数据片段对应的编码数据；服务器按照预置的流媒体格式，分别将各编码数据封装为对应的脚本流数据包，得到多个脚本流数据包。
本实施例中，为了便于直播流接收终端读取和解析互动数据，服务器将互动数据对应的互动数据片段、数据类型标记结果、有序标识符、分割片段数量和时间戳按照预置的流媒体格式封装进脚本流数据包中，其中预置的流媒体格式包括.flv、.m3u8等。
204、解析直播流，并提取直播流中的视频流和音频流；
本实施例中，由于互动数据已经是按照预置的流媒体格式进行封装的脚本流数据包，能够直接作为直播流的一部分进行进一步的推流，因此，服务器在进行流媒体传输协议的转换之前，只需提取直播流中的视频流和音频流，也就是剔除直播流中的脚本流部分的数据，只保留直播过程中的画面和声音部分，脚本流中的数据将被重新定义和赋值，用于承载互动数据。
本实施例中，服务器对直播流的解析可以按照预置的直播流媒体格式进行解析，如果直播流为FLV格式，那么服务器则按照FLV格式对直播流的结构进行拆分，得到文件头和多个标签流，然后服务器在多个标签流中提取视频流和音频流即可。本步骤为可选步骤，也就是服务器还可以跳过本步骤，直接将直播流封装为基于预置的流媒体传输协议的流媒体数据包，而无需将直播流中的视频流和音频流提取出来，服务器在后续脚本流的植入中直接覆盖直播流中的脚本流即可。
205、基于预置的流媒体传输协议，将视频流和音频流封装为流媒体传输协议格式的初始流媒体数据包；
本实施例中，流媒体传输协议包括：流媒体传输协议RTMP、实时流传输协议(RealTime Streaming Protocol，RTSP)，其中，RTMP能够通过网络在播放器和服务器之间传输音频、视频和数据。除了流媒体传输协议，本发明还能基于其它的数据传输协议，此处不做具体限定。传统的推流操作是服务器先将视频流、音频流和携带互动数据的脚本流封装为流媒体格式后，服务器再将流媒体格式的数据流封装为目标流媒体数据包，而本发明为了减少封包操作，服务器可以先将直播流封装为初始流媒体数据包之后，服务器将多个脚本流数据包拷贝到初始流媒体数据包中，得到目标流媒体数据包，以覆盖直播流中的原始的脚本流，服务器再将包括脚本流数据包的目标流媒体数据包通过RTMP发送到直播流接收终端。
206、将各脚本流数据包拷贝到初始流媒体数据包中，得到目标流媒体数据包；
本实施例中，由于各脚本流数据包已经为符合预置的流媒体格式的数据包，因此，服务器只需通过简单的拷贝操作，就能将脚本流数据包注入到初始流媒体数据包中，具体的，若初始流媒体数据包中仍包含直播流的脚本流，那么，服务器先识别到初始流媒体数据包对应的脚本流起始点，服务器再将拷贝的脚本流数据包从脚本流起始点开始覆盖直播流中的脚本流，从而得到目标流媒体数据包，若初始流媒体数据包中不包含直播流的脚本流，那么，服务器则识别初始流媒体数据包对应的脚本流起始点，服务器再将拷贝的脚本流数据包从脚本流起始点开始粘贴到初始流媒体数据包中，从而得到目标流媒体数据包。
207、通过流媒体传输协议，将目标流媒体数据包下发至直播流接收终端，以使得直播流接收终端解析脚本流数据包中的互动数据，并将互动数据与直播流同步播放。
具体的，服务器分别检测目标流媒体数据包中的视频流对应的时间戳、与脚本流数据包对应的时间戳之间是否存在差异；若视频流对应的时间戳与脚本流数据包对应的时间戳之间存在差异，则服务器以视频流的时间戳为基准，对脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；服务器通过流媒体传输协议的推流函数，将校正后的目标流媒体数据包下发至直播流接收终端，以使得直播流接收终端解析脚本流数据包中的互动数据，并将互动数据与直播流同步播放。
本实施例中，为了使互动数据与音画同步，服务器在推流之前，对视频流和脚本流对应的时间戳进行检测，如果二者之间存在差异，那么则以视频流为基准，调整脚本流的时间戳，从而校正时间戳，使得互动数据与视频同步播放。而推流函数是基于预置的流媒体传输协议RTMP的推流函数，用于将最终的目标流媒体数据包推送到直播流接收终端。
优选的，服务器通过流媒体传输协议，将目标流媒体数据包下发至直播流接收终端，以使得直播流接收终端解析多个脚本流数据包中的互动数据，并将互动数据与直播流同步播放之后，还包括：服务器接收直播流接收终端提交的互动数据处理结果，并提取互动数据处理结果中的有效参数；服务器按照预置的数据校验规则，对有效参数进行参数校验，得到校验结果，并将参数校验结果返回至直播流接收终端，以实现与直播流接收终端之间的数据互动。
本实施例中，直播流接收终端也就是直播流接收终端接收到推流数据之后，可能会返回互动数据处理结果给服务器，例如互动数据为主播下发的问答题，那么观众在回答完问题后，将答卷提交，服务器收到答卷，也就是互动数据处理结果时，提取到互动数据处理结果中的有效参数，例如为答卷中具体的选项，服务器再按照对应问答题的标准答案，对观众提交的答卷进行校验，最后将校验结果，也就是正确答案返回给观众，从而达到主播与观众进行数据互动的目的。
本发明实施例中，为了提高直播流和直播流以外的互动数据之间的同步性，首先提取直播流中的视频流和音频流，再将视频流和音频流封装为初始流媒体协议数据包，最后再将携带互动数据的脚本流数据包拷贝到初始流媒数据包中，得到目标流媒体数据包，从而使互动数据和目标流媒体数据包互相融合，进而直播流和互动数据之间的同步性。
上面对本发明实施例中网络直播过程中的数据传输方法进行了描述，下面对本发明实施例中网络直播过程中的数据传输装置进行描述，请参阅图3，本发明实施例中网络直播过程中的数据传输装置一个实施例包括：
获取模块301，用于获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
分割模块302，用于按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
封装模块303，用于根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
植入模块304，用于基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
下发模块305，用于通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
进一步地，服务器将互动数据存储于区块链数据库中，具体此处不做限定。
本发明实施例中，为了使直播流和直播流之外的互动数据同步播放，通过对互动数据进行多段分割之后，将各段互动数据封装为和直播流中的脚本流相同格式的脚本流数据包，再将脚本流数据包植入直播流对应的初始流媒体数据包中，得到目标流媒体数据包，最后将目标流媒体数据包下发到直播流接收终端。从而提高直播流和直播流以外的互动数据之间的同步性和安全性。
请参阅图4，本发明实施例中网络直播过程中的数据传输装置的另一个实施例包括：
获取模块301，用于获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
分割模块302，用于按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
封装模块303，用于根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
植入模块304，用于基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
下发模块305，用于通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，所述获取模块301具体用于：
接收直播过程中的直播流，并启动互动数据获取进程，所述直播流包括视频流和音频流；
通过所述互动数据获取进程，定时轮询互动数据；
当接收到所述互动数据时，记录所述互动数据和所述互动数据对应的时间戳，所述时间戳用于判断所述互动数据与所述直播流是否同步。
可选的，所述分割模块302具体用于：
对所述互动数据进行数据类型识别，得到数据类型识别结果，并根据所述数据类型识别结果对所述互动数据进行数据类型标记，得到数据类型标记结果；
计算互动数据的字符长度，并判断所述互动数据的字符长度是否大于预置阈值；
若所述互动数据的字符长度大于预置阈值，则按照预置字符长度，将所述互动数据分割为多个互动数据片段；
按照互动数据的分割顺序对各所述互动数据片段进行序号标记，并记录分割片段数量和各所述互动数据片段对应的有序标识符。
可选的，所述封装模块303具体用于：
分别对各所述互动数据片段、所述数据类型标记结果、所述有序标识符、所述分割片段数量以及所述时间戳进行二进制模式编码，得到各所述互动数据片段对应的编码数据；
按照预置的流媒体格式，分别将各所述编码数据封装为对应的脚本流数据包，得到多个脚本流数据包。
可选的，所述植入模块304具体用于：
解析所述直播流，并提取所述直播流中的视频流和音频流；
基于预置的流媒体传输协议，将所述视频流和所述音频流封装为流媒体传输协议格式的初始流媒体数据包；
将各所述脚本流数据包拷贝到所述初始流媒体数据包中，得到目标流媒体数据包。
可选的，所述下发模块305具体用于：
分别检测所述目标流媒体数据包中的视频流对应的时间戳、与所述脚本流数据包对应的时间戳之间是否存在差异；
若所述视频流对应的时间戳与所述脚本流数据包对应的时间戳之间存在差异，则以所述视频流的时间戳为基准，对所述脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；
通过流媒体传输协议的推流函数，将所述校正后的目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
可选的，所述网络直播过程中的数据传输装置还包括：
接收模块306，用于接收所述直播流接收终端提交的互动数据处理结果，并提取所述互动数据处理结果中的有效参数；
校验模块307，用于按照预置的数据校验规则，对所述有效参数进行参数校验，得到参数校验结果，并将所述参数校验结果返回至所述直播流接收终端，以实现与所述直播流接收终端之间的数据互动。
本发明实施例中，为了提高直播流和直播流以外的互动数据之间的同步性，首先提取直播流中的视频流和音频流，再将视频流和音频流封装为初始流媒体协议数据包，最后再将携带互动数据的脚本流数据包拷贝到初始流媒数据包中，得到目标流媒体数据包，从而使互动数据和目标流媒体数据包互相融合，进而直播流和互动数据之间的同步性。
上面图3和图4从模块化功能实体的角度对本发明实施例中的网络直播过程中的数据传输装置进行详细描述，下面从硬件处理的角度对本发明实施例中网络直播过程中的数据传输设备进行详细描述。
图5是本发明实施例提供的一种网络直播过程中的数据传输设备的结构示意图，该网络直播过程中的数据传输设备500可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)510(例如，一个或一个以上处理器)和存储器520，一个或一个以上存储应用程序533或数据532的存储介质530(例如一个或一个以上海量存储设备)。其中，存储器520和存储介质530可以是短暂存储或持久存储。存储在存储介质530的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对网络直播过程中的数据传输设备500中的一系列指令操作。更进一步地，处理器510可以设置为与存储介质530通信，在网络直播过程中的数据传输设备500上执行存储介质530中的一系列指令操作。
网络直播过程中的数据传输设备500还可以包括一个或一个以上电源540，一个或一个以上有线或无线网络接口550，一个或一个以上输入输出接口560，和/或，一个或一个以上操作系统531，例如Windows Serve，Mac OS X，Unix，Linux，FreeBSD等等。本领域技术人员可以理解，图5示出的网络直播过程中的数据传输设备结构并不构成对网络直播过程中的数据传输设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
本发明还提供一种网络直播过程中的数据传输设备，所述计算机设备包括存储器和处理器，存储器中存储有计算机可读指令，计算机可读指令被处理器执行时，使得处理器执行上述各实施例中的所述网络直播过程中的数据传输方法的步骤。
本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行所述网络直播过程中的数据传输方法的步骤。
进一步地，所述计算机可读存储介质可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据区块链节点的使用所创建的数据等。
本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (9)
1.一种网络直播过程中的数据传输方法，其特征在于，所述网络直播过程中的数据传输方法包括：
获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放；
所述通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放，包括：
分别检测所述目标流媒体数据包中视频流对应的时间戳与所述脚本流数据包对应的时间戳之间是否存在差异；
若所述视频流对应的时间戳与所述脚本流数据包对应的时间戳之间存在差异，则以所述视频流的时间戳为基准，对所述脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；
通过流媒体传输协议的推流函数，将所述校正后的目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
2.根据权利要求1所述的网络直播过程中的数据传输方法，其特征在于，所述获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流，包括：
接收直播过程中的直播流，并启动互动数据获取进程，所述直播流包括视频流和音频流；
通过所述互动数据获取进程，定时轮询互动数据；
当接收到所述互动数据时，记录所述互动数据和所述互动数据对应的时间戳，所述时间戳用于判断所述互动数据与所述直播流是否同步。
3.根据权利要求2所述的网络直播过程中的数据传输方法，其特征在于，所述按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段，包括：
对所述互动数据进行数据类型识别，得到数据类型识别结果，并根据所述数据类型识别结果对所述互动数据进行数据类型标记，得到数据类型标记结果；
计算互动数据的字符长度，并判断所述互动数据的字符长度是否大于预置阈值；
若所述互动数据的字符长度大于预置阈值，则按照预置字符长度，将所述互动数据分割为多个互动数据片段；
按照互动数据的分割顺序对各所述互动数据片段进行序号标记，并记录分割片段数量和各所述互动数据片段对应的有序标识符。
4.根据权利要求3所述的网络直播过程中的数据传输方法，其特征在于，所述根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包，包括：
分别对各所述互动数据片段、所述数据类型标记结果、所述有序标识符、所述分割片段数量以及所述时间戳进行二进制模式编码，得到各所述互动数据片段对应的编码数据；
按照预置的流媒体格式，分别将各所述编码数据封装为对应的脚本流数据包，得到多个脚本流数据包。
5.根据权利要求1所述的网络直播过程中的数据传输方法，其特征在于，所述基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包，包括：
解析所述直播流，并提取所述直播流中的视频流和音频流；
基于预置的流媒体传输协议，将所述视频流和所述音频流封装为流媒体传输协议格式的初始流媒体数据包；
将各所述脚本流数据包拷贝到所述初始流媒体数据包中，得到目标流媒体数据包。
6.根据权利要求1-5中任一项所述的网络直播过程中的数据传输方法，其特征在于，在所述通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放之后，所述网络直播过程中的数据传输方法还包括：
接收所述直播流接收终端提交的互动数据处理结果，并提取所述互动数据处理结果中的有效参数；
按照预置的数据校验规则，对所述有效参数进行参数校验，得到参数校验结果，并将所述参数校验结果返回至所述直播流接收终端，以实现与所述直播流接收终端之间的数据互动。
7.一种网络直播过程中的数据传输装置，其特征在于，所述网络直播过程中的数据传输装置包括：
获取模块，用于获取直播过程中的直播流，并获取与所述直播流对应的互动数据，所述直播流包括视频流和音频流；
分割模块，用于按照预置字符长度，对所述互动数据进行分割，得到多个互动数据片段；
封装模块，用于根据预置的流媒体格式，分别将各所述互动数据片段封装为脚本流数据包，得到多个脚本流数据包；
植入模块，用于基于预置的流媒体传输协议，对所述直播流进行封包处理，得到初始流媒体数据包，并将所述多个脚本流数据包植入所述初始流媒体数据包中，得到目标流媒体数据包；
下发模块，用于通过所述流媒体传输协议，将所述目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述多个脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放；
所述下发模块具体用于：
分别检测所述目标流媒体数据包中的视频流对应的时间戳、与所述脚本流数据包对应的时间戳之间是否存在差异；
若所述视频流对应的时间戳与所述脚本流数据包对应的时间戳之间存在差异，则以所述视频流的时间戳为基准，对所述脚本流数据包对应的时间戳进行校正处理，得到校正后的目标流媒体数据包；
通过流媒体传输协议的推流函数，将所述校正后的目标流媒体数据包下发至直播流接收终端，以使得所述直播流接收终端解析所述脚本流数据包中的互动数据，并将所述互动数据与所述直播流同步播放。
8.一种网络直播过程中的数据传输设备，其特征在于，所述网络直播过程中的数据传输设备包括：存储器和至少一个处理器，所述存储器中存储有指令；
所述至少一个处理器调用所述存储器中的所述指令，以使得所述网络直播过程中的数据传输设备执行如权利要求1-6中任意一项所述的网络直播过程中的数据传输方法。
9.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现如权利要求1-6中任一项所述网络直播过程中的数据传输方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110566357.6A CN113473163B (zh) | 2021-05-24 | 2021-05-24 | 网络直播过程中的数据传输方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110566357.6A CN113473163B (zh) | 2021-05-24 | 2021-05-24 | 网络直播过程中的数据传输方法、装置、设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113473163A CN113473163A (zh) | 2021-10-01 |
| CN113473163B true CN113473163B (zh) | 2023-04-07 |
Family
ID=77871213
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110566357.6A Active CN113473163B (zh) | 2021-05-24 | 2021-05-24 | 网络直播过程中的数据传输方法、装置、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113473163B (zh) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109068147A (zh) * | 2018-09-18 | 2018-12-21 | 腾讯科技（深圳）有限公司 | 一种多媒体数据传输方法、装置以及相关设备 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101742246B (zh) * | 2009-12-01 | 2012-12-12 | 中广传播集团有限公司 | 实现移动多媒体广播互动业务的系统及方法 |
| WO2012094974A1 (zh) * | 2011-01-11 | 2012-07-19 | 中兴通讯股份有限公司 | 一种多个媒体流同步的方法、装置及系统 |
| US10440436B1 (en) * | 2015-06-26 | 2019-10-08 | Amazon Technologies, Inc. | Synchronizing interactive content with a live video stream |
| CN108521584B (zh) * | 2018-04-20 | 2020-08-28 | 广州虎牙信息科技有限公司 | 互动信息处理方法、装置、主播侧设备和介质 |
| CN110475159A (zh) * | 2018-05-10 | 2019-11-19 | 中兴通讯股份有限公司 | 多媒体信息的传输方法及装置、终端 |
| CN111385588A (zh) * | 2018-12-28 | 2020-07-07 | 广州市百果园信息技术有限公司 | 音视频播放与主播发送信息同步方法、介质及计算机设备 |
| CN111669605B (zh) * | 2019-03-06 | 2021-10-26 | 腾讯科技（深圳）有限公司 | 多媒体数据与其关联互动数据的同步方法和装置 |
| CN110035311A (zh) * | 2019-04-04 | 2019-07-19 | 网宿科技股份有限公司 | 一种同步播放消息流与音视频流的方法、装置和系统 |
-
2021
- 2021-05-24 CN CN202110566357.6A patent/CN113473163B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109068147A (zh) * | 2018-09-18 | 2018-12-21 | 腾讯科技（深圳）有限公司 | 一种多媒体数据传输方法、装置以及相关设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113473163A (zh) | 2021-10-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10715844B2 (en) | Method and apparatus for transceiving data for multimedia transmission system | |
| US10911511B2 (en) | Carriage of ISO-BMFF event boxes in an MPEG-2 transport stream | |
| CN110933449B (zh) | 一种外部数据与视频画面的同步方法、系统及装置 | |
| US20060184790A1 (en) | Protecting elementary stream content | |
| EP1913727A1 (en) | Protecting elementary stream content | |
| CN103385008A (zh) | 使用http实况流传输协议的定向广告插入的方法 | |
| US10015530B2 (en) | Extracting data from advertisement files for ad insertion | |
| US9641877B2 (en) | System and method for conveying session information for use in forensic watermarking | |
| US11356749B2 (en) | Track format for carriage of event messages | |
| US11218784B1 (en) | Method and system for inserting markers in a media presentation | |
| US20100262492A1 (en) | Method and arrangement relating to a media structure | |
| US10878076B2 (en) | Receiving apparatus, transmitting apparatus, and data processing method | |
| CN114040255A (zh) | 直播字幕生成方法、系统、设备及存储介质 | |
| CN113473163B (zh) | 网络直播过程中的数据传输方法、装置、设备及存储介质 | |
| CN113099282A (zh) | 一种数据处理方法、装置及设备 | |
| TWI782322B (zh) | 在媒體客戶端重新整合元資料與媒體流內容，以促進媒體客戶端的動作的方法和系統 | |
| US11445000B2 (en) | Multicast to unicast conversion | |
| US20220131921A1 (en) | Multicast to unicast conversion | |
| CN112187778B (zh) | Flv数据传输方法、系统、设备及可读存储介质 | |
| CN114731452B (zh) | 向终端发出替换信号的方法、由终端进行替换的方法，对应的计算机程序产品、系统和终端 | |
| CN115412741A (zh) | 数据封装、解析方法、装置、电子设备及可读存储介质 | |
| CN114554256A (zh) | 媒体流播放、媒体流处理方法、装置、设备和存储介质 | |
| Atzori et al. | Transmission of hypertextual information using MPEG-2 private data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |