CN112187778B - Flv数据传输方法、系统、设备及可读存储介质 - Google Patents

Flv数据传输方法、系统、设备及可读存储介质 Download PDF

Info

Publication number
CN112187778B
CN112187778B CN202011018732.5A CN202011018732A CN112187778B CN 112187778 B CN112187778 B CN 112187778B CN 202011018732 A CN202011018732 A CN 202011018732A CN 112187778 B CN112187778 B CN 112187778B
Authority
CN
China
Prior art keywords
tag
data
rtp packet
rtp
new
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011018732.5A
Other languages
English (en)
Other versions
CN112187778A (zh
Inventor
陈鹤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fiberhome Telecommunication Technologies Co Ltd
Original Assignee
Fiberhome Telecommunication Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fiberhome Telecommunication Technologies Co Ltd filed Critical Fiberhome Telecommunication Technologies Co Ltd
Priority to CN202011018732.5A priority Critical patent/CN112187778B/zh
Publication of CN112187778A publication Critical patent/CN112187778A/zh
Application granted granted Critical
Publication of CN112187778B publication Critical patent/CN112187778B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08Protocols for interworking; Protocol conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供一种FLV数据传输方法、系统、设备及可读存储介质。该方法包括:发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;发送端基于组播传输的方式,将RTP包传输到接收端;接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。通过本发明,将FLV数据包括的TAG封装至RTP后以组播传输的方式进行传输,即实现了通过组播的方式传输FLV数据,所占用的网络带宽资源较小,且在接收端对丢失的RTP包进行修复处理,使得最终得到的新的FLV数据能被正确解析,保证了通过组播方式传输的FLV数据的可靠性。

Description

FLV数据传输方法、系统、设备及可读存储介质
技术领域
本发明涉及通信技术领域,尤其涉及一种FLV数据传输方法、系统、设备及可读存储介质。
背景技术
随着电信运营商对减少直播时延的需求日渐增加,导致FLV数据的使用频率也越来越高。
但是由于FLV数据其格式的特殊性,目前只能使用TCP传输,属于单播模式。而观看直播的用户往往数以万计,若通过单播模式为这些用户传输FLV数据,需要占用巨大的网络带宽资源,给现有的网络带宽资源带来严重冲击。
发明内容
本发明的主要目的在于提供一种FLV数据传输方法、系统、设备及可读存储介质,旨在解决现有技术中通过单播模式传输FLV数据,需要占用巨大的网络带宽资源的技术问题。
第一方面,本发明提供一种FLV数据传输方法,所述FLV数据传输方法包括:
发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;
发送端基于组播传输的方式,将RTP包传输到接收端;
接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。
可选的,所述分别将每个TAG封装至RTP包的步骤包括:
当一TAG的数据长度小于m时,将所述TAG封装至一个RTP包中;
当一TAG的数据长度大于n倍的m时,将所述TAG封装至n+1个RTP包中;
当一TAG的数据长度等于n倍的m时,将所述TAG封装至n个RTP包中;
其中,n为正整数,m为一个RTP包可承载的最大数据长度。
可选的,RTP包的扩展字节中填充有所封装的TAG的关键信息,所述关键信息包括TAG序号、TAG数据类型、TAG的时间戳、TAG的数据长度,且当RTP包为封装开始和/或封装结束包时,在其扩展字节中填充开始和/或结束标记,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据;
基于所述TAG新的部分数据以及所述TAG其他部分数据,得到新的TAG。
可选的,所述若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据的步骤包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据包括TAGheader参数;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
以所述TAG其他部分数据的数据长度,替换所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度,得到新的关键数据;
以所述新的关键数据构建所述TAG新的部分数据。
可选的,在所述得到所述TAG其他部分数据的数据长度的步骤之后,还包括:
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第一差值;
计算第一差值与TAG header参数所对应的固定数据长度的差,得到第二差值;
以所述关键信息以及所述第二差值对应个数的预设字符,构建所述TAG新的部分数据。
可选的,所述若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据的步骤还包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据仅包括TAGdata;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第三差值;
以所述第三差值对应个数的预设字符,构建所述TAG新的部分数据。
可选的,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤还包括:
若丢失的RTP包为封装有一TAG全部数据的RTP包,则检测是否存在所述丢失的RTP包对应的冗余包;
若存在,则根据所述丢失的RTP包对应的冗余包得到新的TAG;
若不存在,则基于所述丢失的RTP包的RTP编号,发送重传请求至发送端,以供发送端重传所述丢失的RTP包;
接收发送端重传的RTP包,并基于所述重传的RTP包得到新的TAG。
第二方面,本发明还提供一种FLV数据传输系统,所述FLV数据传输系统包括:
发送端,用于将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;基于组播传输的方式,将RTP包传输到接收端;
接收端,用于接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。
第三方面,本发明还提供一种FLV数据传输设备,所述FLV数据传输设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的FLV数据传输程序,其中所述FLV数据传输程序被所述处理器执行时,实现如上所述的FLV数据传输方法的步骤。
第四方面,本发明还提供一种可读存储介质,所述可读存储介质上存储有FLV数据传输程序,其中所述FLV数据传输程序被处理器执行时,实现如上所述的FLV数据传输方法的步骤。
本发明中,发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;发送端基于组播传输的方式,将RTP包传输到接收端;接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。通过本发明,将FLV数据包括的TAG封装至RTP后以组播传输的方式进行传输,即实现了通过组播的方式传输FLV数据,所占用的网络带宽资源较小,且在接收端对丢失的RTP包进行修复处理,使得最终得到的新的FLV数据能被正确解析,保证了通过组播方式传输的FLV数据的可靠性。
附图说明
图1为本发明实施例方案中涉及的FLV数据传输设备的硬件结构示意图;
图2为本发明FLV数据传输方法一实施例的流程示意图;
图3为FLV数据的格式示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
第一方面,本发明实施例提供一种FLV数据传输设备。
参照图1,图1为本发明实施例方案中涉及的FLV数据传输设备的硬件结构示意图。本发明实施例中,FLV数据传输设备可以包括处理器1001(例如中央处理器CentralProcessing Unit,CPU),通信总线1002,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信;用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard);网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity,WI-FI接口);存储器1005可以是高速随机存取存储器(random access memory,RAM),也可以是稳定的存储器(non-volatile memory),例如磁盘存储器,存储器1005可选的还可以是独立于前述处理器1001的存储装置。本领域技术人员可以理解,图1中示出的硬件结构并不构成对本发明的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
继续参照图1,图1中作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及FLV数据传输程序。其中,处理器1001可以调用存储器1005中存储的FLV数据传输程序,并执行本发明实施例提供的FLV数据传输方法。
第二方面,本发明实施例提供了一种FLV数据传输方法。
参照图2,图2为本发明FLV数据传输方法一实施例的流程示意图。如图2所示,一实施例中,FLV数据传输方法包括:
步骤S10,发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;
本实施例中,FLV(FlashVideo)是现在非常流行的流媒体格式,由于其视频文件体积轻巧、封装播放简单等特点,使其很适合在网络上进行应用,目前主流的视频网站无一例外地使用了FLV格式。FLV数据即FLV格式的数据。FLV是流媒体封装格式,参照图3,图3为FLV数据的格式示意图。如图3所示,FLV包括文件头(Header)和文件体(Body)两部分,其中文件体由一系列的Tag及Previous TagSize对组成。对FLV数据进行解析,即可得到TAG1、TAG2、......、TAGn。然后分别将每个TAG封装至RTP包,封装的原则是一个RTP包中只能包含一个TAG的全部数据,或一个TAG的部分数据,封装时具体根据TAG的大小选择是将TAG封装至一个RTP包或是封装至多个RTP包。RTP即Real-time Transport Protocol,实时传输协议。
具体的,一实施例中,所述分别将每个TAG封装至RTP包的步骤包括:
当一TAG的数据长度小于m时,将所述TAG封装至一个RTP包中;当一TAG的数据长度大于n倍的m时,将所述TAG封装至n+1个RTP包中;当一TAG的数据长度等于n倍的m时,将所述TAG封装至n个RTP包中;其中,n为正整数,m为一个RTP包可承载的最大数据长度。
本实施例中,若网络传输的最大传输单元为1500字节,由于RTP自己的格式需要占用60字节,则一个RTP包可承载的最大数据长度为1440(单位:字节)。若一TAG的数据长度小于1440,则将其封装至一个RTP包中;若一TAG的数据长度为1600字节,其大于一倍的1440,则将其封装至两个RTP包中,其中第一个RTP包封装该TAG前面的1440字节的数据,第二个RTP包封装该TAG后160字节的数据;同理,若一TAG的数据长度为3000字节,其大于两倍的1440,则将其封装至三个RTP包中;若一TAG的数据长度刚好等于n倍的1440,则将其封装至n个RTP包中。
步骤S20,发送端基于组播传输的方式,将RTP包传输到接收端;
本实施例中,组播又称多目标广播、多播。网络中使用的一种传输方式,它允许把所发消息传送给所有可能目的地中的一个经过选择的子集,即向明确指出的多种地址输送信息。是一种在一个发送者和多个接收者之间进行通信的方法。组播传输为现有技术,在此不做赘述。通过组播传输的方式,即可将RTP包传输到多个接收端。
步骤S30,接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。
本实施例中,发送端基于组播传输的方式,可将RTP包传输到多个接收端,在此以多个接收端中的任一个为例进行说明。
接收端接收RTP包,而根据RTP标准协议规范,RTP包的发送编号是连续的,接收端根据接收到的RTP包的编号是否连续,即可确定是否发生了RTP包丢失的情况。容易理解的是,若接收端接收到的RTP包的编号连续,则说明未发生RTP包丢失,即TAG数据未丢失,则可直接根据收到的RTP包中所封装的TAG还原得到FLV数据,且后续能对FLV数据正确解析。
但是由于在传输过程中丢失RTP包也是很常见的情况,若接收端接收到的RTP包的编号不连续,则说明发生了RTP包丢失的情况,即丢失的RTP包所封装的TAG丢失了,这种情况下,必须对丢失的RTP包进行恢复,即对丢失的TAG进行恢复,得到新的TAG,才能保证最终得到的新的FLV数据能被正确解析。其中,恢复的手段包括:重构TAG,重发RTP包等手段。
本实施例中,发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;发送端基于组播传输的方式,将RTP包传输到接收端;接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。通过本实施例,将FLV数据包括的TAG封装至RTP后以组播传输的方式进行传输,即实现了通过组播的方式传输FLV数据,所占用的网络带宽资源较小,且在接收端对丢失的RTP包进行修复处理,使得最终得到的新的FLV数据能被正确解析,保证了通过组播方式传输的FLV数据的可靠性。
进一步地,一实施例中,RTP包的扩展字节中填充有所封装的TAG的关键信息,所述关键信息包括TAG序号、TAG数据类型、TAG的时间戳、TAG的数据长度,且当RTP包为封装开始和/或封装结束包时,在其扩展字节中填充开始和/或结束标记。
本实施例中,例如将TAG1封装到RTP包1中,则将TAG1的关键信息填充至RTP包1的扩展字节中;同理,若将TAG1封装到RTP包1、RTP包2和RTP包3,则分别将TAG1的关键信息填充至RTP包1、RTP包2、以及RTP包3的扩展字节中。且当RTP包为封装开始和/或封装结束包时,例如,一TAG由RTP包1、RTP包2、RTP包3封装,则在RTP包1对应的扩展字节中除了填充所封装的TAG的关键信息外,在扩展字节中还填充开始标记,用于表示RTP包1是TAG对应的第一个RTP包;在RTP包3对应的扩展字节中除了填充所封装的TAG的关键信息外,还填充结束标记,用于表示RTP包3是TAG对应的最后一个RTP包;在RTP包2对应的扩展字节中仅填充所封装的TAG的关键信息。若一TAG由一个RTP包封装,则在该RTP包的扩展字节中除了填充所封装TAG的关键信息外,还同时填充开始标记和结束标记。
可选地,扩展字节的定义如下:
typedefstruct
{
unsigned inttag_id;
unsigned int data_size;
unsigned int data_type;
unsigned inttime_stamp;
chartag_head_flag;
}ext_flv_rtp_hdr_t;
其中,tag_id记录TAG序号,data_size记录TAG的数据长度(这个数据长度指的是TAG header+TAG data的总长度),data_type记录TAG数据类型,time_stamp记录TAG的时间戳。tag_head_flag用于表示RTP封装TAG的开始或结束时用标记,例如若tag_head_flag为1,则表示对应的RTP为封装开始包;若为2,则表示对应的RTP为封装结束包;若为12,则表示对应的RTP为封装开始和结束包,若不为封装开始包和/或封装结束包,tag_head_flag字段为空。
当然,可根据实际需要对扩展字节进行定义,扩展字节中还可以包括关键帧标记,用于标记所封装的TAG是否为关键帧。例如,TAG3为关键帧,则在封装TAG3的RTP包的扩展字节中除了封装TAG3的关键信息外,还封装关键帧标记。另一扩展字节的定义如下:
Figure BDA0002699973180000081
其中,tag_id记录TAG序号,data_size记录TAG的数据长度(这个数据长度指的是TAG header+TAG data的总长度),data_type记录TAG数据类型,time_stamp记录TAG的时间戳,当RTP封装TAG数据的开始或结束时用tag_head_flag标记,TAG的中的数据为视频关键帧时用frame_key标记。
在上一实施例的基础上,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤包括:
步骤S301,若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据;
本实施例中,若一TAG是由多个RTP包封装的,当多个RTP包在传输过程中一个或多个RTP包发生丢失,即TAG部分数据丢失,接收端即可根据多个RTP包中未丢失的其他RTP包的扩展字节中填充的关键信息,以及其他RTP包所封装的TAG其他部分数据的数据长度,重新构建丢失的TAG部分数据。
步骤S302,基于所述TAG新的部分数据以及所述TAG其他部分数据,得到新的TAG。
本实施例中,基于重新构建得到的TAG新的部分数据以及未发生丢失的RTP包中封装的TAG其他部分数据,即可得到新的TAG。
进一步地,一实施例中,步骤S301包括:
步骤S3011,若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据包括TAG header参数;
本实施例中,若TAG1由RTP包34封装,则在RTP包34的扩展字节中填充有开始和结束标记,TAG2由RTP包35、RTP包36和RTP包37封装,则在RTP包35的扩展字节中填充有开始标记,在RTP包37的扩展字节中填充有结束标记。RTP包34、RTP包35、RTP包36和RTP包37由发送端发出后,若接收端只收到RTP包34、RTP包36和RTP包37。由于接收到收到的RTP包的编号不连续,则确定当前发生了RTP包丢失的情况。且在RTP包34的扩展字节中填充有开始和结束标记,在RTP包37的扩展字节中填充有结束标记,中间缺失了开始标记,则说明丢失的RTP包35为封装开始包,封装开始包中封装有TAG的TAG header参数。且RTP包36和RTP包37的扩展字节中填充的TAG序号相同,均是TAG2的序号,而RTP包34的扩展字节中填充的TAG序号是TAG1的序号,则说明丢失的RTP包35为封装有TAG2部分数据的RTP包。综合上述分析,即可确定丢失的RTP包35封装有TAG2的TAG header参数。
步骤S3012,根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
本实施例中,当确定丢失的RTP包35封装有TAG2的TAG header参数时,计算RTP包36封装的TAG2其他部分数据的数据长度与RTP包37封装的TAG2其他部分数据的数据长度之和S,即当前实际接收到的TAG2其他部分数据的数据长度为S。
步骤S3013,以所述TAG其他部分数据的数据长度,替换所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度,得到新的关键数据;
本实施例中,RTP包36和37的扩展字节中填充的关键信息中记录的TAG的数据长度为完整的TAG2的数据长度,而现在只接收到的TAG2的部分数据,且部分数据的长度为S,则以S替换RTP包36和37的扩展字节中填充的关键信息中记录的TAG的数据长度,得到新的关键数据。
步骤S3014,以所述新的关键数据构建所述TAG新的部分数据。
本实施例中,新的关键信息包括TAG2的TAG序号、TAG2的TAG数据类型、TAG2的TAG的时间戳、TAG2的TAG的数据长度S,而TAG header包括:Type(1字节),表示TAG类型,包括音频(0x08),视频(0x09)和script data(0x12),其他类型值被保留;Datasize(3字节),表示TAG的data部分数据长度;Timestamp(3字节)表示该TAG的时间戳;Timestamp_ex(1字节)表示时间戳的扩展字节;StreamID(3字节)表示stream id,总是0。则根据新的关键数据可构建得到新的TAG header,例如:以新的关键信息中的data_type对应的值,作为新的TAGheader中的Type对应的值;以新的关键信息中的数据长度S减去TAG header参数所对应的固定数据长度,以得到的差作为新的TAG header中的Datasize的值;以新的关键信息中的time_stamp的值,作为新的TAG header中的Timestamp的值;根据TAG header的定义,得到新的TAG header中的Timestamp的值后,便可得到新的TAG header中的Timestamp_ex的值;新的TAG header中的StreamID,为0。综上,即可得到新的TAG header。后续,根据新的TAGheader和RTP包36以及RTP包37封装的数据,即可得到新的TAG2。
进一步地,一实施例中,在步骤S3012之后,还包括:
步骤S3015,计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第一差值;
本实施例中,当确定丢失的RTP包35封装有TAG2的TAG header参数时,计算RTP包36封装的TAG2其他部分数据的数据长度与RTP包37封装的TAG2其他部分数据的数据长度之和S,即当前实际接收到的TAG2其他部分数据的数据长度为S。RTP包36和37的扩展字节中填充的关键信息中记录的TAG的数据长度,即为L,L为完整的TAG2的数据长度,计算L与S的差,得到第一差值,第一差值即丢失的部分TAG2的数据长度。
步骤S3016,计算第一差值与TAG header参数所对应的固定数据长度的差,得到第二差值;
本实施例中,丢失的部分TAG2包括TAG header参数,还必然包括TAG data,TAGheader参数的数据长度与TAG data的数据长度之和,而TAG header参数的数据长度一般为固定值11,则计算第一差值与TAG header参数所对应的固定数据长度11的差,得到第二差值。第二差值即丢失的RTP包35中TAG data部分的数据长度。
步骤S3017,以所述关键信息以及所述第二差值对应个数的预设字符,构建所述TAG新的部分数据。
本实施例中,丢失的RTP包35封装有TAG2的TAG header参数,和TAG data部分,且TAG data部分的数据长度为第二差值。当前RTP包35丢失了,而根据RTP包36和37的扩展字节中填充的关键信息可直接得到TAG2的TAG header参数,上文中已详细说明了如何根据关键信息得到TAG header参数,在此不做赘述。在此基础上,再补充第二差值对应个数的预设字符(预设字符例如0),即可得到TAG2新的部分数据。TAG2新的部分数据与丢失的TAG新的部分数据,仅TAG data部分的具体字符不同。
进一步地,一实施例中,步骤S301还包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据仅包括TAGdata;根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第三差值;以所述第三差值对应个数的预设字符,构建所述TAG新的部分数据。
本实施例中,TAG1由RTP包35、RTP包36和RTP包37封装,则在RTP包35的扩展字节中填充有开始标记,在RTP包37的扩展字节中填充有结束标记。TAG2由RTP包38封装,则在RTP包38的扩展字节中填充有开始和结束标记。RTP包35、RTP包36、RTP包37以及RTP包38由发送端发出后,若接收端只接收到RTP包35、以及RTP包38,由于接收到收到的RTP包的编号不连续,则确定当前发生了RTP包丢失的情况。且在RTP包35的扩展字节中填充有开始标记,在RTP包38的扩展字节中填充有开始和结束标记,中间缺失了结束标记,则说明丢失的RTP包36和37不是封装开始包,而只有在封装开始包中才封装有TAG的TAG header参数。则确定当前丢失的RTP包36和37封装的部分数据仅包括TAG data部分。且根据RTP包35的扩展字节中填充的TAG1的序号、开始标记,以及RTP包38的扩展字节中填充的TAG2的序号、开始和结束标记,可以确定丢失的RTP包36和37封装有TAG1部分数据。综合上述分析,即可确定丢失的RTP包36和37封装有TAG1部分数据,且RTP包36和37封装的TAG1部分数据仅包括TAG data。
接收到的封装有TAG1其他部分数据的其他RTP包只有RTP包35,则RTP包35所封装的TAG1其他部分数据的长度即当前实际接收到的TAG1的长度。而RTP包35的扩展字节中填充的关键信息中记录的TAG1的数据长度即完整的TAG1的数据长度,用完整的TAG1的数据长度减去当前实际接收到的TAG1的长度,得到的第三差值,第三差值即当前丢失的RTP包36和37封装的TAG1部分数据的数据长度。故直接以第三差值对应个数的预设字符,作为丢失的TAG1部分数据,即得到TAG1新的部分数据。后续,根据TAG1新的部分数据和RTP包35所封装的TAG1其他部分数据,即可得到新的TAG1。
进一步地,一实施例中,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤还包括:
若丢失的RTP包为封装有一TAG全部数据的RTP包,则检测是否存在所述丢失的RTP包对应的冗余包;若存在,则根据所述丢失的RTP包对应的冗余包得到新的TAG;若不存在,则基于所述丢失的RTP包的RTP编号,发送重传请求至发送端,以供发送端重传所述丢失的RTP包;接收发送端重传的RTP包,并基于所述重传的RTP包得到新的TAG。
本实施例中,发送端在发送RTP包时,还发送该RTP包对应的冗余包。或是,当TAG中的数据为视频关键帧时,且该TAG通过一个RTP包封装,在RTP包的扩展字节中便会填充有frame_key标记,针对带有frame_key标记的RTP包,发送端在发送该RTP包时,还发送该RTP包对应的冗余包。
例如,TAG1由RTP包35封装,TAG2由RTP包36封装,TAG3由RTP包37和38封装,RTP包35、RTP包35的冗余包、RTP包36、RTP包36的冗余包、RTP包37以及RTP包38由发送端发出后,若接收端未收到RTP包36,由于RTP包35的扩展字节中填充有TAG1的序号,在RTP包37的扩展字节中填充有TAG3的序号,则说明TAG2由RTP包36封装,且当前RTP包36丢失了,则从收到的冗余包中查找是否存在RTP包36对应的冗余包,若存在,则基于冗余包得到RTP包36。
若发送端在发送RTP包36时,由于RTP包36的扩展字节中未封装有关键帧标记,则不发送RTP包36。则接收端未收到RTP包36时,也查找不到对应的冗余包,则接收端基于丢失的RTP包36的RTP编号,发送重传请求至发送端,以供发送端重传丢失的RTP包36,并接收发送端重传的RTP包36,并基于重传的RTP包36得到新的TAG。容易理解的是,基于冗余包或重传的RTP包得到的新的TAG与原先发送的TAG是完全一样的。
容易理解的是,若丢失的RTP包为封装有一TAG部分数据的RTP包,也可以通过冗余包或重传的方式对丢失的TAG部分数据进行恢复。在无法通过冗余包或重传的方式对丢失的TAG部分数据进行恢复时,再按照上述实施例中重构TAG的方式对丢失的TAG部分数据进行恢复。
第三方面,本发明实施例还提供一种FLV数据传输系统。
一实施例中,FLV数据传输系统包括:
发送端,用于将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;基于组播传输的方式,将RTP包传输到接收端;
接收端,用于接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据。
进一步地,一实施例中,发送端具体用于:
当一TAG的数据长度小于m时,将所述TAG封装至一个RTP包中;
当一TAG的数据长度大于n倍的m时,将所述TAG封装至n+1个RTP包中;
当一TAG的数据长度等于n倍的m时,将所述TAG封装至n个RTP包中;
其中,n为正整数,m为一个RTP包可承载的最大数据长度。
进一步地,一实施例中,RTP包的扩展字节中填充有所封装的TAG的关键信息,所述关键信息包括TAG序号、TAG数据类型、TAG的时间戳、TAG的数据长度,且当RTP包为封装开始和/或封装结束包时,在其扩展字节中填充开始和/或结束标记,接收端具体用于:
若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据;
基于所述TAG新的部分数据以及所述TAG其他部分数据,得到新的TAG。
进一步地,一实施例中,接收端具体用于:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据包括TAGheader参数;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
以所述TAG其他部分数据的数据长度,替换所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度,得到新的关键数据;
以所述新的关键数据构建所述TAG新的部分数据。
进一步地,一实施例中,接收端具体用于:
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第一差值;
计算第一差值与TAG header参数所对应的固定数据长度的差,得到第二差值;
以所述关键信息以及所述第二差值对应个数的预设字符,构建所述TAG新的部分数据。
进一步地,一实施例中,接收端具体用于:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据仅包括TAGdata;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第三差值;
以所述第三差值对应个数的预设字符,构建所述TAG新的部分数据。
进一步地,一实施例中,接收端具体用于:
若丢失的RTP包为封装有一TAG全部数据的RTP包,则检测是否存在所述丢失的RTP包对应的冗余包;
若存在,则根据所述丢失的RTP包对应的冗余包得到新的TAG;
若不存在,则基于所述丢失的RTP包的RTP编号,发送重传请求至发送端,以供发送端重传所述丢失的RTP包;
接收发送端重传的RTP包,并基于所述重传的RTP包得到新的TAG。
其中,上述FLV数据传输系统中发送端、接收端的功能实现与上述FLV数据传输方法实施例中各步骤相对应,其功能和实现过程在此处不再一一赘述。
第四方面,本发明实施例还提供一种可读存储介质。
本发明可读存储介质上存储有FLV数据传输程序,其中所述FLV数据传输程序被处理器执行时,实现如上述的FLV数据传输方法的步骤。
其中,FLV数据传输程序被执行时所实现的方法可参照本发明FLV数据传输方法的各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种FLV数据传输方法,其特征在于,所述FLV数据传输方法包括:
发送端将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;
发送端基于组播传输的方式,将RTP包传输到接收端;
接收端接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据;
所述分别将每个TAG封装至RTP包的步骤包括:
当一TAG的数据长度小于m时,将所述TAG封装至一个RTP包中;
当一TAG的数据长度大于n倍的m时,将所述TAG封装至n+1个RTP包中;
当一TAG的数据长度等于n倍的m时,将所述TAG封装至n个RTP包中;
其中,n为正整数,m为一个RTP包可承载的最大数据长度;
RTP包的扩展字节中填充有所封装的TAG的关键信息,所述关键信息包括TAG序号、TAG数据类型、TAG的时间戳、TAG的数据长度,且当RTP包为封装开始和/或封装结束包时,在其扩展字节中填充开始和/或结束标记,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据;
基于所述TAG新的部分数据以及所述TAG其他部分数据,得到新的TAG。
2.如权利要求1所述的FLV数据传输方法,其特征在于,所述若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据的步骤包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据包括TAG header参数;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
以所述TAG其他部分数据的数据长度,替换所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度,得到新的关键数据;
以所述新的关键数据构建所述TAG新的部分数据。
3.如权利要求2所述的FLV数据传输方法,其特征在于,在所述得到所述TAG其他部分数据的数据长度的步骤之后,还包括:
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第一差值;
计算第一差值与TAG header参数所对应的固定数据长度的差,得到第二差值;
以所述关键信息以及所述第二差值对应个数的预设字符,构建所述TAG新的部分数据。
4.如权利要求1所述的FLV数据传输方法,其特征在于,所述若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据的步骤还包括:
若丢失的RTP包为封装有一TAG部分数据的RTP包,且所述TAG部分数据仅包括TAGdata;
根据接收到的封装有所述TAG其他部分数据的其他RTP包,得到所述TAG其他部分数据的数据长度;
计算所述其他RTP包的扩展字节中填充的关键信息中记录的TAG的数据长度与所述TAG其他部分数据的数据长度的差,得到第三差值;
以所述第三差值对应个数的预设字符,构建所述TAG新的部分数据。
5.如权利要求1至4中任一项所述的FLV数据传输方法,其特征在于,所述对丢失的RTP包所封装的TAG进行恢复,得到新的TAG的步骤还包括:
若丢失的RTP包为封装有一TAG全部数据的RTP包,则检测是否存在所述丢失的RTP包对应的冗余包;
若存在,则根据所述丢失的RTP包对应的冗余包得到新的TAG;
若不存在,则基于所述丢失的RTP包的RTP编号,发送重传请求至发送端,以供发送端重传所述丢失的RTP包;
接收发送端重传的RTP包,并基于所述重传的RTP包得到新的TAG。
6.一种FLV数据传输系统,其特征在于,所述FLV数据传输系统包括:
发送端,用于将FLV数据解析成多个TAG,并分别将每个TAG封装至RTP包;基于组播传输的方式,将RTP包传输到接收端;
接收端,用于接收RTP包,并在RTP包丢失时,对丢失的RTP包所封装的TAG进行恢复,得到新的TAG,并基于未丢失的RTP包所封装的TAG以及所述新的TAG,得到新的FLV数据;
发送端具体用于:
当一TAG的数据长度小于m时,将所述TAG封装至一个RTP包中;
当一TAG的数据长度大于n倍的m时,将所述TAG封装至n+1个RTP包中;
当一TAG的数据长度等于n倍的m时,将所述TAG封装至n个RTP包中;
其中,n为正整数,m为一个RTP包可承载的最大数据长度;
RTP包的扩展字节中填充有所封装的TAG的关键信息,所述关键信息包括TAG序号、TAG数据类型、TAG的时间戳、TAG的数据长度,且当RTP包为封装开始和/或封装结束包时,在其扩展字节中填充开始和/或结束标记,接收端具体用于:
若丢失的RTP包为封装有一TAG部分数据的RTP包,则基于接收到的封装有所述TAG其他部分数据的其他RTP包的扩展字节中填充的关键信息,以及所述TAG其他部分数据的数据长度,构建所述TAG新的部分数据;
基于所述TAG新的部分数据以及所述TAG其他部分数据,得到新的TAG。
7.一种FLV数据传输设备,其特征在于,所述FLV数据传输设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的FLV数据传输程序,其中所述FLV数据传输程序被所述处理器执行时,实现如权利要求1至5中任一项所述的FLV数据传输方法的步骤。
8.一种可读存储介质,其特征在于,所述可读存储介质上存储有FLV数据传输程序,其中所述FLV数据传输程序被处理器执行时,实现如权利要求1至5中任一项所述的FLV数据传输方法的步骤。
CN202011018732.5A 2020-09-24 2020-09-24 Flv数据传输方法、系统、设备及可读存储介质 Active CN112187778B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011018732.5A CN112187778B (zh) 2020-09-24 2020-09-24 Flv数据传输方法、系统、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011018732.5A CN112187778B (zh) 2020-09-24 2020-09-24 Flv数据传输方法、系统、设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN112187778A CN112187778A (zh) 2021-01-05
CN112187778B true CN112187778B (zh) 2022-07-08

Family

ID=73943436

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011018732.5A Active CN112187778B (zh) 2020-09-24 2020-09-24 Flv数据传输方法、系统、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN112187778B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109275044A (zh) * 2018-11-02 2019-01-25 广州珠江数码集团股份有限公司 一种实现ip组播流灵活调度的系统
CN110519641A (zh) * 2019-09-10 2019-11-29 深圳市同洲电子股份有限公司 一种多源多协议的视频融合传输交换系统及方法
CN210129959U (zh) * 2019-06-17 2020-03-06 江苏巨数智能科技有限公司 一种无线局域网络音频流传输系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011068784A1 (en) * 2009-12-01 2011-06-09 Azuki Systems, Inc. Method and system for secure and reliable video streaming with rate adaptation
CN103581699B (zh) * 2013-11-04 2015-01-21 广州华工信元通信技术有限公司 视频播放方法、流媒体服务器及流媒体播放系统
US11057446B2 (en) * 2015-05-14 2021-07-06 Bright Data Ltd. System and method for streaming content from multiple servers
CN111246222B (zh) * 2020-03-20 2022-04-08 深圳宇翊技术股份有限公司 一种实现pis在录播和垫播状态下多播控音视频同步方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109275044A (zh) * 2018-11-02 2019-01-25 广州珠江数码集团股份有限公司 一种实现ip组播流灵活调度的系统
CN210129959U (zh) * 2019-06-17 2020-03-06 江苏巨数智能科技有限公司 一种无线局域网络音频流传输系统
CN110519641A (zh) * 2019-09-10 2019-11-29 深圳市同洲电子股份有限公司 一种多源多协议的视频融合传输交换系统及方法

Also Published As

Publication number Publication date
CN112187778A (zh) 2021-01-05

Similar Documents

Publication Publication Date Title
US11381625B2 (en) Apparatus and method for transmitting multimedia data in hybrid network
US10911511B2 (en) Carriage of ISO-BMFF event boxes in an MPEG-2 transport stream
US8239558B2 (en) Transport mechanisms for dynamic rich media scenes
US20140317664A1 (en) Method and apparatus for transmitting media data in multimedia transport system
CN104247436A (zh) 在数字广播系统中用于发送和接收的信令信息的装置和方法
CN108200447A (zh) 直播数据传输方法、装置、电子设备、服务器及存储介质
CN112636880B (zh) 侧信道重传高可靠超高清视频卫星传输系统
JP5011239B2 (ja) 放送用パケット生成装置、データ補完サーバ、受信端末、および、それらのプログラム
CN107181971A (zh) 一种iptv终端的升级方法及相关设备
CN105635802A (zh) 一种数字媒体数据的传输方法及装置
CN112187778B (zh) Flv数据传输方法、系统、设备及可读存储介质
CN104904170B (zh) 有效地对用于低带宽传送的视频流中的要素进行优先化的方法和装置
US11196792B2 (en) Method, device and system for transmitting data
CN101426005B (zh) 一种无线广播系统的ip数据包封装、发送及接收方法
KR102208814B1 (ko) 통신 시스템에서 패킷 송수신 방법 및 장치
CN113473163B (zh) 网络直播过程中的数据传输方法、装置、设备及存储介质
CN116232710B (zh) 网络流量采集设备日志消息发送、传输方法以及系统
CN113489718B (zh) 一种针对dicom协议传输流量重组生成图像的方法
CN108174282A (zh) 纠错方法、装置、电子设备和计算机存储介质
KR101955690B1 (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
KR102207453B1 (ko) Mmt 패킷 구성 장치 및 mmt 패킷 구성 방법
CN116527787A (zh) 音视频数据的传输方法和系统
KR101855327B1 (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
CN116527949A (zh) 一种媒体流的转发方法和转发装置
CN117692528A (zh) 数据传输方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant