CN106911699A - 一种基于rtp协议实现i帧重传的方法 - Google Patents

一种基于rtp协议实现i帧重传的方法 Download PDF

Info

Publication number
CN106911699A
CN106911699A CN201710124632.2A CN201710124632A CN106911699A CN 106911699 A CN106911699 A CN 106911699A CN 201710124632 A CN201710124632 A CN 201710124632A CN 106911699 A CN106911699 A CN 106911699A
Authority
CN
China
Prior art keywords
data
frames
rtp
transmission
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710124632.2A
Other languages
English (en)
Other versions
CN106911699B (zh
Inventor
戴林
范宇超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tiandi Weiye Technology Co Ltd
Original Assignee
Tianjin Tiandy Information Systems Integration Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Tiandy Information Systems Integration Co ltd filed Critical Tianjin Tiandy Information Systems Integration Co ltd
Priority to CN201710124632.2A priority Critical patent/CN106911699B/zh
Publication of CN106911699A publication Critical patent/CN106911699A/zh
Application granted granted Critical
Publication of CN106911699B publication Critical patent/CN106911699B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6375—Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746—Control signals issued by the network directed to the server or the client
    • H04N21/64761—Control signals issued by the network directed to the server or the client directed to the server
    • H04N21/64776—Control signals issued by the network directed to the server or the client directed to the server for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Communication Control (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供了一种基于RTP协议实现I帧重传的方法，包括如下步骤：（1）定义RTP扩展协议，将RTP原协议中固定头的扩展标志位写为“1”，启用扩展头，并在扩展头中将Header Extension扩展三个字段：包括帧类型字段，重传起始包号字段，重传结束包号字段；（2）视频发送端创建重传缓存区，缓存I帧数据；（3）视频接收端每组装一个I帧数据时，检查是否有缺失的数据包，及时回传RTP扩展协议，请求视频数据发送端重传数据；（4）发送端收到重传请求后，解析协议，获取需要重传的包号；从所述重传缓存区中，根据包号检索出重传的数据，发给接收端；（5）接收端三次发出重传请求，但仍收不到重传的数据，则丢弃当前要拼装的I帧。

Description

一种基于RTP协议实现I帧重传的方法
技术领域
本发明涉及视频监控领域的视频传输方法，尤其涉及一种基于RTP协议实现视频流I帧重传的方法。
背景技术
实时传输协议RTP（Real-time Transport Protocol）是一个网络传输协议，它是由IETF的多媒体传输工作小组1996年在RFC 1889中公布的，后在RFC3550中进行更新，RTP协议常用于流媒体系统，为数据提供了具有实时特征的端对端传送服务，如在组播或单播网络服务下的交互式视频音频或模拟数据。
RTP协议固定头数据结构如下表所示
其中，X表示扩展标志，占1位，如果X=1，则在RTP固定头后跟有一个扩展报头。RTP协议扩展头数据结构如下表所示，
视频监控应用中，视频流的数据量很大，为缓解传输和存储的压力，往往需要对其进行压缩编码。H.264是一种视频编码标准，其特点是高压缩比，高质量，且支持多种网络的流媒体传输。其理论依据是，大多数情况下，摄像机拍摄的实际场景的视频流中，每一个图像帧与其相邻帧的平均差别约为10%，因而传输视频流时，可将该视频流分为多个序列，每个序列里面包含多帧差别很小而且连续的图像帧；其中第一帧图像称为I帧，其压缩比最低，压缩后可以在不借助其他帧的情况下，恢复成原始状态；同一序列中，除了I帧之外，还有P帧和B帧，其压缩编码时记录了该帧与I帧或其他P帧或B帧的差异情况，对其做解压缩过程，都需要直接或间接参考I帧才能实现，因此如果I帧丢失，将无法恢复该序列时间内的视频数据，造成视频丢失。
当今的视频监控系统越来越复杂， 网络视频传输过程中，网络传输错误或丢包的现象无法完全避免，而且RTP协议底层是基于UDP，天然具备不可靠性，复杂网络环境下，适应性不佳。如果网络传输错误或网络丢包造成B帧或者P帧丢失，对视频流的影响尚且不大，但如果丢失的是I帧，将造成一段视频序列的丢失。因此，需要设计一种视频流的I帧重传方法，保证视频流传输到目的端之后能得到最大程度的还原。
发明内容
本发明旨在提供一种基于RTP协议实现I帧重传的方法，防止网络传输错误或丢包造成视频流传输过程中关键视频片段的丢失。
为了实现上述目的，本发明提供了一种基于RTP协议实现I帧重传的方法，包括如下步骤：
（1）定义RTP扩展协议，将RTP原协议中固定头的扩展标志位写为“1”，启用扩展头，并在扩展头中将Header Extension扩展三个字段：包括长度为16bit的帧类型（frame type）字段，长度为8bit的重传起始包号（seq start）字段，长度为8bit的重传结束包号（seq end）字段；
（2）视频数据发送端创建重传缓存区，缓存I帧数据，随时准备重传数据；
（3）视频数据接收端每组装一个I帧数据时，检查是否有缺失的数据包，及时回传（1）中定义的RTP扩展协议，请求视频数据发送端重传数据；
（4）发送端收到重传请求后，解析协议，获取需要重传的包号；从所述重传缓存区中，根据包号检索出重传的数据，回发给接收端；
（5）接收端三次发出重传请求，但仍收不到重传的数据，则丢弃当前要拼装的I帧。
所述RTP扩展头部的帧类型字段，用于区分I帧、P帧、B帧三种不同的帧类型。
所述发送端重传缓存区的数据结构为平衡二叉树。
所述发送端重传缓存区的大小，依据不同型号设备的性能做不同的设置。
本发明的有益效果是，很大程度上解决了视频码流在公网传输中，丢包和视频流乱序现象频发，造成视频卡顿、观看体验变差的问题；以及在极端弱网络环境下(带宽窄、延时高)，视频无法解码播放的问题。
附图说明
图1是本发明所述RTP扩展头部的数据结构；
图2是本发明所述方法的数据流传输示意图。
具体实施方式
下面结合附图对本发明作进一步描述：
如图1所示，一种基于RTP协议实现I帧重传的方法，包括如下步骤：
（1）定义RTP扩展协议，将RTP原协议中固定头的扩展标志位写为“1”，启用扩展头，并在扩展头中将Header Extension扩展三个字段：包括长度为16bit的帧类型（frame type）字段，长度为8bit的重传起始包号（seq start）字段，长度为8bit的重传结束包号（seq end）字段；
（2）视频数据发送端创建重传缓存区，缓存I帧数据，随时准备重传数据；
（3）视频数据接收端每组装一个I帧数据时，检查是否有缺失的数据包，及时回传（1）中定义的RTP扩展协议，请求视频数据发送端重传数据；
（4）发送端收到重传请求后，解析协议，获取需要重传的包号；从所述重传缓存区中，根据包号检索出重传的数据，回发给接收端；
（5）接收端三次发出重传请求，但仍收不到重传的数据，则丢弃当前要拼装的I帧。
所述RTP扩展头部的帧类型字段，用于区分I帧、P帧、B帧三种不同的帧类型。
所述发送端重传缓存区的数据结构为平衡二叉树。
所述发送端重传缓存区的大小，依据不同型号设备的性能做不同的设置。

Claims (4)

1.一种基于RTP协议实现I帧重传的方法，其特征在于，包括如下步骤：
（1）定义RTP扩展协议，将RTP原协议中固定头的扩展标志位写为“1”，启用扩展头，并在扩展头中将Header Extension扩展三个字段：包括长度为16bit的帧类型（Frame Type）字段，长度为8bit的重传起始包号（seq start）字段，长度为8bit的重传结束包号（seq end）字段；
（2）视频数据发送端创建重传缓存区，缓存I帧数据，随时准备重传数据；
（3）视频数据接收端每组装一个I帧数据时，检查是否有缺失的数据包，及时回传（1）中定义的RTP扩展协议，请求视频数据发送端重传数据；
（4）发送端收到重传请求，解析协议，获取需要重传的包号；从所述重传缓存区中，根据包号检索出重传的数据，重新发送给接收端；
（5）接收端三次发出重传请求，但仍收不到重传的数据，则丢弃当前要拼装的I帧。
2.根据权利要求1所述的一种基于RTP协议实现I帧重传的方法，其特征在于，所述RTP扩展头部的帧类型字段，长度为4个字节；用于区分I帧、P帧、B帧三种不同的帧类型。
3.根据权利要求1所述的一种基于RTP协议实现I帧重传的方法，其特征在于，所述发送端重传缓存区的数据结构为平衡二叉树。
4.根据权利要求1所述的一种基于RTP协议实现I帧重传的方法，其特征在于，所述发送端重传缓存区的大小，依据不同型号设备的性能做不同的设置。
CN201710124632.2A 2017-03-03 2017-03-03 一种基于rtp协议实现i帧重传的方法 Active CN106911699B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710124632.2A CN106911699B (zh) 2017-03-03 2017-03-03 一种基于rtp协议实现i帧重传的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710124632.2A CN106911699B (zh) 2017-03-03 2017-03-03 一种基于rtp协议实现i帧重传的方法

Publications (2)

Publication Number Publication Date
CN106911699A true CN106911699A (zh) 2017-06-30
CN106911699B CN106911699B (zh) 2020-02-11

Family

ID=59186890

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710124632.2A Active CN106911699B (zh) 2017-03-03 2017-03-03 一种基于rtp协议实现i帧重传的方法

Country Status (1)

Country Link
CN (1) CN106911699B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109257772A (zh) * 2017-07-13 2019-01-22 普天信息技术有限公司 一种rtp数据的发送、接收方法及用户设备
CN109274980A (zh) * 2018-09-19 2019-01-25 北京文香信息技术有限公司 一种用于快速直播的数据传输方法
CN109862400A (zh) * 2019-02-18 2019-06-07 苏州长风航空电子有限公司 一种流媒体传输方法、装置及其系统
CN110876091A (zh) * 2020-01-20 2020-03-10 翱捷科技(上海)有限公司 一种利用rtp扩展头部解决视频帧丢包的方法及装置
CN111163362A (zh) * 2019-12-30 2020-05-15 北京佳讯飞鸿电气股份有限公司 一种自适应重传等待时间的视频接收方法及系统
CN111885027A (zh) * 2020-07-10 2020-11-03 北京百家视联科技有限公司 一种在弱网条件下的语音传输方法
CN112702411A (zh) * 2020-12-21 2021-04-23 上汽大通汽车有限公司 一种解决cantp多帧丢包重传的方法
CN114173181A (zh) * 2021-12-13 2022-03-11 天地伟业技术有限公司 一种视频传输方法及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030098992A1 (en) * 2001-10-31 2003-05-29 Samsung Electronics Co., Ltd. Data transmitting/receiving system and method thereof
CN101114987A (zh) * 2006-07-25 2008-01-30 中兴通讯股份有限公司 语音前向纠错信息传输在cdma2000系统中的实现方法
CN101656747A (zh) * 2009-09-25 2010-02-24 深圳创维数字技术股份有限公司 流媒体数据的传输方法及系统
CN101707551A (zh) * 2009-10-30 2010-05-12 杭州华三通信技术有限公司 一种数据的传输方法及装置
CN101867453A (zh) * 2010-06-04 2010-10-20 北京佳讯飞鸿电气股份有限公司 一种rtp抗丢包的方法
CN102595251A (zh) * 2011-01-11 2012-07-18 中兴通讯股份有限公司 流媒体丢包重传实现方法和系统
CN106131710A (zh) * 2016-07-14 2016-11-16 天彩电子（深圳）有限公司 一种视频数据重传的方法及其系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030098992A1 (en) * 2001-10-31 2003-05-29 Samsung Electronics Co., Ltd. Data transmitting/receiving system and method thereof
CN101114987A (zh) * 2006-07-25 2008-01-30 中兴通讯股份有限公司 语音前向纠错信息传输在cdma2000系统中的实现方法
CN101656747A (zh) * 2009-09-25 2010-02-24 深圳创维数字技术股份有限公司 流媒体数据的传输方法及系统
CN101707551A (zh) * 2009-10-30 2010-05-12 杭州华三通信技术有限公司 一种数据的传输方法及装置
CN101867453A (zh) * 2010-06-04 2010-10-20 北京佳讯飞鸿电气股份有限公司 一种rtp抗丢包的方法
CN102595251A (zh) * 2011-01-11 2012-07-18 中兴通讯股份有限公司 流媒体丢包重传实现方法和系统
CN106131710A (zh) * 2016-07-14 2016-11-16 天彩电子（深圳）有限公司 一种视频数据重传的方法及其系统

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109257772A (zh) * 2017-07-13 2019-01-22 普天信息技术有限公司 一种rtp数据的发送、接收方法及用户设备
CN109274980A (zh) * 2018-09-19 2019-01-25 北京文香信息技术有限公司 一种用于快速直播的数据传输方法
CN109862400A (zh) * 2019-02-18 2019-06-07 苏州长风航空电子有限公司 一种流媒体传输方法、装置及其系统
CN111163362A (zh) * 2019-12-30 2020-05-15 北京佳讯飞鸿电气股份有限公司 一种自适应重传等待时间的视频接收方法及系统
CN111163362B (zh) * 2019-12-30 2021-12-24 北京佳讯飞鸿电气股份有限公司 一种自适应重传等待时间的视频接收方法及系统
CN110876091A (zh) * 2020-01-20 2020-03-10 翱捷科技(上海)有限公司 一种利用rtp扩展头部解决视频帧丢包的方法及装置
CN111885027A (zh) * 2020-07-10 2020-11-03 北京百家视联科技有限公司 一种在弱网条件下的语音传输方法
CN112702411A (zh) * 2020-12-21 2021-04-23 上汽大通汽车有限公司 一种解决cantp多帧丢包重传的方法
CN112702411B (zh) * 2020-12-21 2023-01-17 上汽大通汽车有限公司 一种解决cantp多帧丢包重传的方法
CN114173181A (zh) * 2021-12-13 2022-03-11 天地伟业技术有限公司 一种视频传输方法及计算机可读存储介质

Also Published As

Publication number Publication date
CN106911699B (zh) 2020-02-11

Similar Documents

Publication Publication Date Title
CN106911699A (zh) 一种基于rtp协议实现i帧重传的方法
CN105357592B (zh) 一种流媒体自适应传输选择性丢帧方法
US11621984B2 (en) Interface apparatus and method for transmitting and receiving media data
JP6419235B2 (ja) デジタル放送システムにおけるデータを受信する装置
US11374681B2 (en) Video quality assessment method and device
JP4414311B2 (ja) マルチメディアストリーミングサービスシステム及びその方法
CN101945427B (zh) 一种高效的流媒体传输方法
US9781488B2 (en) Controlled adaptive rate switching system and method for media streaming over IP networks
CN101174995B (zh) 一种多媒体服务性能监测的方法和系统
US20170034589A1 (en) Adaptive profile switching system and method for media streaming over ip networks
US20020152440A1 (en) Apparatus and method for improving the quality of video communication over a packet-based network
US11363085B2 (en) In-band quality data
CN110876091B (zh) 一种利用rtp扩展头部解决视频帧丢包的方法及装置
CN103414956A (zh) 基于传输控制协议的实时数据传输方法及其系统
CN113315823A (zh) 一种低延迟音视频传输方法
JP4564782B2 (ja) データ受信装置およびデータ受信プログラム
US20090268730A1 (en) Data transmitting apparatus and method and program for controlling transmission rate
CN106790030B (zh) 多屏协同音频传输服务端、客户端、系统及其处理方法
CN107197392B (zh) 在弹幕视频流传输过程中的丢包方法及丢包装置
WO2010054551A1 (zh) 视频流传输的方法、装置和系统
Zink et al. LC-RTP (loss collection RTP): reliability for video caching in the Internet
CN101645903A (zh) 一种多媒体数据的传输方法及装置
CN110602452A (zh) 一种保障全球udp音视频流远距离实时传输流畅的方法
KR100793862B1 (ko) 트리구조의 서버 토폴로지상에서 컨텐츠 전송 방법
KR100720592B1 (ko) 인트라 프레임의 전송오류 복구 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200103

Address after: 300384 Huayuan Industrial Zone, Xiqing District, Tianjin, No. 8, Huake No. 2 Road, Haitai

Applicant after: Tiandi Weiye Technology Co., Ltd.

Address before: 300384 in Tianjin Binhai Huayuan Industrial Zone (outer ring) two Road branch No. 8 Haitai building 4 room A310

Applicant before: Tianjin Tiandi Weiye information system integration Co., Ltd.

GR01 Patent grant
GR01 Patent grant