CN112165655A - 基于视联网的数据传输方法、装置、设备及介质 - Google Patents

基于视联网的数据传输方法、装置、设备及介质 Download PDF

Info

Publication number
CN112165655A
CN112165655A CN202010839942.4A CN202010839942A CN112165655A CN 112165655 A CN112165655 A CN 112165655A CN 202010839942 A CN202010839942 A CN 202010839942A CN 112165655 A CN112165655 A CN 112165655A
Authority
CN
China
Prior art keywords
packet loss
error correction
audio
correction mode
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010839942.4A
Other languages
English (en)
Inventor
韩杰
杨春晖
王艳辉
张召
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visionvera Information Technology Co Ltd
Original Assignee
Visionvera Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visionvera Information Technology Co Ltd filed Critical Visionvera Information Technology Co Ltd
Priority to CN202010839942.4A priority Critical patent/CN112165655A/zh
Publication of CN112165655A publication Critical patent/CN112165655A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784Data processing by the network
    • H04N21/64792Controlling the complexity of the content stream, e.g. by dropping packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

本发明实施例提供了一种基于视联网的数据传输方法、装置、设备及介质,所述方法应用于发送端,旨在提高实时传输的音视频数据的流畅性、减少音视频的卡顿,包括:按照当前丢包纠错模式,向接收端发送音视频数据;响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;按照切换后的丢包纠错模式,向所述接收端发送音视频数据;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。

Description

基于视联网的数据传输方法、装置、设备及介质
技术领域
本发明涉及网络通信技术领域,特别是涉及一种基于视联网的数据传输方法、装置、设备及介质。
背景技术
视联网采用全球最先进的VisionVera实时高清视频交换技术,实现了目前互联网无法实现的全网高清视频实时传输,将高清视频会议、视频监控、远程培训、智能化监控分析、应急指挥、视频电话、现场直播、电视邮件、信息发布等数十种视频、语音、图片、文字、通讯、数据等服务全部整合在一个系统平台,通过多种终端设备实现高清品质视频通信实时互联互通。
相关技术中,一般在视联网中传输数据时,会不可避免地出现数据丢包的情况,特别是对于音视频数据的传输而言,如果数据丢包,会导致视频画面出现卡顿、音频出现丢音的问题。
发明内容
鉴于上述问题,提出了本发明实施例提供一种基于视联网的数据传输方法、装置、电子设备及存储介质,旨在降低在视联网络环境中的音视频数据丢包率,提高音视频的流畅度。
本发明实施例的第一方面,公开了一种基于视联网的数据传输方法,所述方法应用于发送端,包括:
按照当前丢包纠错模式,向接收端发送音视频数据;
响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;
按照切换后的丢包纠错模式,向所述接收端发送音视频数据;
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。
可选地,按照切换后的丢包纠错模式,向所述接收端发送音视频数据,包括:
按照视联网协议,将待发送的音视频数据封装为多个音视频数据包;
在所述多个音视频数据包各自的帧头数据中增加纠错协议帧,得到多个第一音视频数据包;所述纠错协议帧包括纠错类型帧头和数据传输帧头,所述纠错类型帧头用于表征当前所采用的丢包纠错模式,所述数据传输帧头用于表征当前传输的音视频数据包的属性;
按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包;
将所述多个第二音视频数据包发送给接收端。
可选地,按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包,包括:
在所述切换后的丢包纠错模式为所述第一丢包纠错模式的情况下,确定所述多个第一音视频数据包的总长度、总数量以及每个音视频数据包的长度;
将所述第一丢包纠错模式写进所述多个第一音视频数据包各自的纠错类型帧头,以及将所述总长度、所述总数量以及所述每个音视频数据包的长度写进所述多个第一音视频数据包各自的数据传输帧头中,得到所述多个第二音视频数据包。
可选地,按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包,包括:
在所述切换后的丢包纠错模式为所述第二丢包纠错模式的情况下,按照与所述第二丢包纠错模式对应的默认协议头,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,得到所述多个第二音视频数据包。
可选地,所述纠错类型帧头中包括编码类型,所述方法还包括:
在所述切换后的丢包纠错模式为所述第二丢包纠错模式的情况下,按照当前启用的编码协议,对所述多个第一音视频数据包中的音视频数据进行编码,得到待封装的多个第一视频数据包;
按照与所述第二丢包纠错模式对应的默认协议头,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,包括:
按照与所述第二丢包纠错模式对应的默认协议头,设置所述待封装的多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,以及,将所述编码协议的类型写进所述待封装的多个第一音视频数据包各自的编码类型中。
本发明实施例的第二方面,提供一种基于视联网的数据传输方法,所述方法应用于接收端,包括:
接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式;
确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式;
在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换;
接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
可选地,根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式,包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,若所述丢包率小于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式;
在所述当前丢包纠错模式为第二丢包纠错模式的情况下,若所述丢包率大于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式。
可选地,述音视频数据的包头中包括纠错类型帧头和数据传输帧头,对所述音视频数据进行解析,以确定当前丢包纠错模式,包括:
对所述音视频数据的纠错类型帧头进行解析,以确定当前丢包纠错模式;
确定所述音视频数据的丢包率,包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,对所述音视频数据的数据传输帧头进行解析,得到数据期望总长度,所述数据期望总长度用于表征所述发送端所发送的音视频数据的总长度;
根据当前实际接收到的音视频数据的总长度和所述预设数据期望总长度,确定所述音视频数据的丢包率;
所述方法还包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,向所述发送端请求重传丢失的音视频数据。
可选地,所述纠错类型帧头还包括编码类型,所述方法还包括:
按照当前启用的编码协议,对所述多个第一音视频数据包中的音视频数据进行编码,得到待封装的多个第一视频数据包;
所述纠错类型帧头中包括编码类型,根据所述第二丢包纠错模式,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头的同时,还包括:
将所述编码协议的类型写进所述待封装的多个第一音视频数据包各自的编码类型中。
本发明实施例的第三方面,提供一种基于视联网的数据传输装置,所述装置位于发送端,包括:
第一数据发送模块,用于按照当前丢包纠错模式,向接收端发送音视频数据;
切换模块,用于响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;
第二数据发送模块,用于按照切换后的丢包纠错模式,向所述接收端发送音视频数据;
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议。
本发明实施例的第四方面,提供一种基于视联网的数据传输装置,所述装置位于接收端,包括:
第一接收模块,用于接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式;
确定模块,用于确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式;
指令发送模块,用于在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换;
第二接收模块,用于接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
本发明实施例的第五方面,还公开了一种电子设备,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当由所述一个或多个处理器执行时,使得所述设备执行如本发明实施例第一方面所述的基于视联网的数据传输方法。
本发明实施例的第六方面,还公开了一种计算机可读存储介质,其存储的计算机程序使得处理器执行如本发明实施例第一方面所述的基于视联网的数据传输方法。
本实施例中,发送端可以按照当前丢包纠错模式,向接收端发送音视频数据;并响应于接收端发送的模式切换指令,对当前丢包纠错模式进行切换,其中,模式切换指令由接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;之后,按照切换后的丢包纠错模式,向接收端发送音视频数据。其中,当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。
与现有技术相比,本发明实施例至少包括以下优点:
一方面,由于发送端在向接收端发送音视频数据的过程中,接收端可以根据音视频数据时的丢包率和预设丢包率阈值的大小关系生成模式切换指令,即接收端可以根据音视频数据的丢包率情况,决定是否触发发送端切换当前丢包纠错模式。这样,接收端可以依据模式切换指令在第一丢包纠错模式和第二丢包纠错模式之间进行切换,从而使得发送在发送音视频数据的过程中,可以动态变更丢包纠错模式,提高在音视频数据传输过程中对数据包丢失时的响应的灵活性。
另一方面,可以在不同的丢包纠错模式下,启用发送端和接收端之间的对数据包丢失时的不同响应机制。如,在第一丢包纠错模式下,重传丢失的数据包,这样可以提高接收端接收的数据包的完整性,从而避免音视频的卡顿。又如,在第二丢包纠错模式下,可以不重传丢失的数据包,这样避免频繁重传所造成的网络拥堵,从而可以提高接收端与发送端之间的数据传输效率,提高音视频的流畅度。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例的通信环境图;
图2是本发明实施例的一种基于视联网的数据传输方法的步骤流程图;
图3是本发明实施例的按照切换后的丢包纠错模式,向所述接收端发送音视频数据的步骤流程图;
图4是本发明实施例的音视频数据包所包括的数据内容的示意图;
图5是本发明实施例的又一种基于视联网的数据传输方法的步骤流程图;
图6本发明实施例的一种基于视联网的数据传输装置的结构示意图;
图7本发明实施例的又一种基于视联网的数据传输装置的结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
在视联网中传输音视频数据时,一般是按照视联网传输协议传输数据,视联网传输协议一般是在数据具有传统的以太网协议头的基础上,增加了视联网中独有的V2V协议头,以保证视联网中的设备能解析V2V协议头,从而能正常使用数据。
虽然视联网是实时高清传输的网络,视联网网络中的网络带宽和网络资源是整体可控、提前划分预约的,即,在视联网中设备需要使用视联网资源时,需要提前申请预约,以获得视联网所分配的带宽资源,从而在使用时能保证有带宽资源。
然而,随着视联网中业务量的激增,以及与互联网之间的互通,即使视联网采用上述带宽资源分配方式的情况下,仍然不能避免设备的激增所造成的网络带宽压力,这样,导致视联网的网络环境可能会出现不稳定的问题。由此,在视联网中传输音视频数据时,便会面临网络环境不稳定所导致的音视频数据丢包的问题。
而一旦音视频数据丢包,便可能导致对端的接收设备出现视频画面卡顿、音频丢失的问题,因而无法保证视联网内的实时音视频业务具有较高的业务质量,例如,视频会议。
有鉴于此,本申请人鉴于视联网中传输数据的特性,提出了以下核心技术构思:从视联网传输协议框架出发,设计一种基于L2层网络的丢包纠错机制,使得发送端和接收端之间在传输音视频数据的过程中,根据音视频数据的丢包率,可以协商更改丢包纠错机制,以提高在视联网络环境不佳情况下,音视频数据传输的流畅性,在网络环境较佳的情况下,降低丢包率,以减少音视频的卡顿,从而提高视联网内实时业务的质量。其中,L2层网络是指OSI七层模型中第2层,即数据链路层。
参照图1所示,示出了本申请实施例的通信环境图,该通信环境位于视联网中,包括接收端和发送端,其中,接收端和发送端之间通过视联网协议进行通信。其中,接收端和发送端均可以是智能设备。
结合图1所示的实施环境,对本申请实施例的基于视联网的数据传输方法的整体构思进行介绍。如图1所示,其中,接收端可以在接收音视频数据的过程中,对接收到的音视频数据的纠错类型进行解码,以确定当前的丢包纠错模式,并根据丢包率以及网络拥塞程度,确定是否对当前丢包纠错模式进行应答。具体而言,应答包括了在不切换当前丢包纠错模式时,按照当前丢包纠错模式进行丢包处理的响应;以及包括了在切换当前丢包纠错模式时,向发送端发送模式切换指令的响应。
其中,发送端在发送音视频数据的过程中,可以响应于接收端所发送的模式切换指令,在第一丢包纠错模式和第二丢包纠错模式之间进行切换,例如,将第一丢包纠错模式切换为第二丢包纠错模式,或者,将第二丢包纠错模式切换为第一丢包纠错模式,然后按照切换后的丢包纠错模式发送音视频数据。
下面结合图1所示的通信环境,分别从发送端和接收端对本申请的基于视联网的数据传输方法进行详细介绍。
参照图2所示,示出了本发明实施例的基于视联网的数据传输方法的步骤流程图,所述方法应用于发送端,具体可以包括以下步骤:
步骤S201:按照当前丢包纠错模式,向接收端发送音视频数据。
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。
本实施例中,丢包纠错模式可以理解为是视联网内在发送端和接收端之间传输数据时,对于数据丢包的问题所采取的处理机制。其中,第一丢包纠错模式可以认为是:数据丢包时,接收端向发送端请求丢失的数据的处理机制。而第二丢包纠错模式可以认为是:数据丢包时,接收端无需向发送端请求重传丢失的数据的处理机制。
其中,发送端所发送的音视频数据可以是实时采集的音视频数据,在发送端发送音视频数据时,可以按照当前被启用的丢包纠错模式发送音视频数据。具体实施时,音视频数据的数据包头中可以设置数据传输协议,该数据传输协议可以用于指示发送端和接收端之间的丢包传输机制,因此,发送端可以根据当前被启用的丢包纠错模式对音视频数据的数据包头进行设置,从而接收端可以对数据包头进行解析,以明确发发送端所使用的丢包纠错模式。
步骤S202:响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成。
本实施例中,预设丢包率阈值可以理解为是决定是否切换丢包纠错模式的阈值节点。其中,接收端可以根据音视频数据的丢包率、预设丢包率阈值以及当前所使用的丢包纠错模式,确定是否需要切换当前丢包纠错模式。
其中,预设丢包率阈值可以设置为10%,当音视频数据的丢包率大于或等于10%,则表示丢包较多,在接收端可能不能正常解码出音视频数据,从而播放正常的音视频,此种情况下,则可以开启第一丢包纠错模式,即若当前丢包纠错模式不为第一丢包纠错模式时,接收端生成模式切换指令以使发送端将当前丢包纠错模式切换为第一丢包纠错模式,发送端进而向接收端重传丢失的数据,以使接收端可以解码完整的音视频数据。
当音视频数据的丢包率小于10%,则表示丢包较少,在接收端一般不影响音视频数据的正常解码,此种情况下,为了提高音视频数据的传输效率和实时性,可以开启第二丢包纠错模式,即若当前丢包纠错模式不为第二丢包纠错模式时,接收端生成模式切换指令以使发送端将当前丢包纠错模式切换为第二丢包纠错模式,此时,发送端无需向接收端重传丢失的数据,以提高与接收端之间的音视频数据传输效率。
其中,在接收端确定需要切换当前丢包纠错模式时,可以生成模式切换指令,并将模式切换指令发送给发送端,从而发送端响应于模式切换指令,将对当前丢包纠错模式进行切换。具体而言,在当前丢包纠错模式为第一丢包纠错模式时,根据模式切换指令,可以将第一丢包纠错模式切换为第二丢包纠错模式。在当前丢包纠错模式为第二丢包纠错模式时,根据模式切换指令,可以将第二丢包纠错模式切换为第一丢包纠错模式。
步骤S203:按照切换后的丢包纠错模式,向所述接收端发送音视频数据。
本实施例中,发送端可以按照切换后的丢包纠错模式,对待发送的音视频数据的数据包头中的数据传输协议进行设置,即采用与切换后的丢包纠错模式对应的数据传输协议封装音视频数据,从而将封装后的音视频数据以数据包的形式发送给接收端。
采用本发明实施例的技术方案,由于发送端在向接收端发送音视频数据的过程中,接收端可以根据音视频数据时的丢包率和预设丢包率阈值的大小关系决定是否对当前丢包纠错模式进行切换,在需要切换时,生成模式切换指令,以使发送端可以依据模式切换指令将当前丢包纠错模式切换为第一丢包纠错模式或第二丢包纠错模式,从而使得发送端在发送音视频数据的过程中,可以动态变更丢包纠错模式,提高在音视频数据传输过程中对数据包丢失时的响应的灵活性。
另一方面,由于在不同的丢包纠错模式下,对数据包丢失时的响应机制不同,因此可以动态适应当前的视联网网络环境,以适配当前的视联网网络环境的丢包响应机制,减小音视频数据的丢包率以提高音视频数据的流畅性。如,在第一丢包纠错模式下,重传丢失的数据包,这样可以提高接收端接收的数据包的完整性,减小丢包率,从而避免音视频的卡顿。又如,在第二丢包纠错模式下,即丢失的数据包的数量较小的情况下,可以不重传丢失的数据包,这样避免频繁重传所造成的网络拥堵,从而可以提高接收端与发送端之间的数据传输效率,提高音视频的流畅度。
下面,对本申请如何按照切换后的丢包纠错模式,向接收端发送音频数据的具体实施方式说明如下:
在一种实施方式中,一般而言,可以先按照视联网协议封装音视频数据,得到多个可以用于视联网中传输的音视频数据包,然后再基于L2层网络的丢包纠错机制,为每个音视频数据包的包头中设置与切换后的丢包纠错模式对应的协议头,从而完成对音视频数据包的重新封装。参照图3所示,示出了本实施方式中按照切换后的丢包纠错模式,向所述接收端发送音视频数据的步骤流程图,如图3所示,具体可以包括以下步骤:
步骤S2021:按照视联网协议,将待发送的音视频数据封装为多个音视频数据包。
本实施例中,一个音视频数据的数据包包括了帧头部分和协议载荷部分,其中协议载荷中包括原始的音视频数据。帧头部分包括了以太网头、视联网交换协议头、纠错协议帧。在发送音视频数据时,发送端可以将实时采集的音视频数据封装为多个音视频数据包,每个音视频数据包的帧头中包括了以太网头和视联网交换协议头。
步骤S2022:在所述多个音视频数据包各自的帧头数据中增加纠错协议帧,得到多个第一音视频数据包;所述纠错协议帧包括纠错类型帧头和数据传输帧头,所述纠错类型帧头用于表征当前所采用的丢包纠错模式,所述数据传输帧头用于表征当前传输的音视频数据包的属性。
本实施例中,在得到多个音视频数据后,可以在每个音视频数据包的帧头中增加纠错协议帧,该纠错协议帧头可以位于音视频数据包包头中的预设字段中,即在采用视联网协议封装音视频数据得到多个音视频数据包时,音视频数据包的预设字段可以先空置,然后在预设字段中添加纠错协议帧,得到第一音视频数据包。
步骤S2023:按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包。
本实施例中,在得到多个第一音视频数据包后,可以分别设置多个第一音视频数据包各自的纠错类型帧头和数据传输帧头。
其中,纠错类型帧头可以采用不同的编码表征切换后的丢包纠错模式,例如“0”表示第二丢包纠错模式,“1”表示第一丢包纠错模式。数据传输帧头中的不同字段可以表征数据包的不同属性,例如,在数据传输帧头中的第一个字段的数值可以表征要发送的数据包的总长度、第二个字段的数值可以表征数据包的序号。设置完成后,便得到了第二音视频数据包,进而,将第二音视频数据包发送给接收端。
其中,参照图4所示,示出了一实施例中一个音视频数据包所包括的数据内容的示意图,如图4所示,一个音视频数据包包括了帧头部分和载荷部分,其中,帧头部分包括了以太网头、视联网交换协议头、纠错类型头和V2V协议载荷。其中,帧头部分包括了消息类型头、纠错类型头和数据传输头,V2V协议载荷中携带的是原始音视频数据。
其中,消息类型头是用于表征当前所采用的丢包纠错模式的应答相应机制、纠错类型头用于表征当前所采用的丢包纠错模式,数据传输头则用于表征当前所传输的音视频数据包的属性,其中,数据传输头主要是为了在需要重传丢失的数据包的情况下,为接收端确认重传的数据包而服务的。
结合图4所示,在一些具体示例中,依据不同的丢包纠错模式,可以为音视频数据包设置不同的协议头,具体地:
在所述切换后的丢包纠错模式为所述第一丢包纠错模式的情况下,可以确定所述多个第一音视频数据包的总长度、总数量以及每个音视频数据包的长度;将所述第一丢包纠错模式写进所述多个第一音视频数据包各自的纠错类型帧头,以及将所述总长度、所述总数量以及所述每个音视频数据包的长度写进所述多个第一音视频数据包各自的数据传输帧头中,得到所述多个第二音视频数据包。
本实施例中,第一丢包纠错模式为丢包时需要重传丢包的数据包的模式,因此,可以在纠错类型头的相应字段中设置与第一丢包纠错模式对应的编码类型,以使接收端按照第一丢包纠错模式启动丢包时的重传机制。并且,由于第一丢包纠错模式为丢包时需要重传丢包的数据包的模式,因此,可以在数据传输帧头中的相应字段设置要发送的多个音视频数据包的总长度、当前音视频数据包的包序列号以及当前音视频数据包的长度,以接收端根据数据传输帧头确定丢包率,以及确定丢失的数据包的包序列号,从而重传丢失的数据包。
在所述切换后的丢包纠错模式为所述第二丢包纠错模式的情况下,可以根据所述第二丢包纠错模式,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,得到所述多个第二音视频数据包。
本实施例中,第二丢包纠错模式为丢包时无需重传的机制,因此,可以在纠错类型头的相应字段中设置与第二丢包纠错模式对应的编码类型,以使接收端按照第二丢包纠错模式接收音视频数据,并在确定丢包时,无需启动重传机制。且由于第二丢包纠错模式为丢包时无需重传的机制,则可以将音视频数据包的数据传输帧头的相应字段设置为默认值,例如都设置为0,此种情况下,接收端无需确定所丢包的包序列号。
需要说明的是,本申请实施例的第二丢包纠错模式可以为前向纠错((ForwardError Correction,简称FEC),前向纠错是一种差错控制方式,是指信号在被送入传输信道之前预先按一定的算法进行编码处理,加入带有信号本身特征的冗码,在接收端按照相应算法对接收到的信号进行解码,从而找出在传输过程中产生的错误码并将其纠正的技术。因此,采用前向纠错作为第二丢包纠错模式时,接收端可以自动对接收到的音视频数据进行解码,并对错误进行纠正,在丢包率较小的情况下,接收端可以无需向发送端请求重传丢失的数据。
如图4所示,在一种具体示例中,所述纠错类型帧头中还可以包括编码类型,该纠错编码类型可以用于表征当前编码所述音视频数据的编码协议。
则在得到多个第一音视频数据包时,可以按照当前启用的编码协议,对所述多个第一音视频数据包中的音视频数据进行编码,得到待封装的多个第一视频数据包。进而,在设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头的同时,还可以将所述编码协议的类型写进所述待封装的多个第一音视频数据包各自的编码类型中,从而得到第二音视频数据包。
本实施例中,纠错类型帧头中相应字段的数值或符号表征音视频数据的编码协议,其中,不同的编码协议可以对应不同的数值或不同的符号。例如,如图4所示,“0”标识Turbo编码,“1”标识LDPC编码,“2”表示RA编码。
步骤S2024:将所述多个第二音视频数据包发送给接收端。
本实施例中,在通过上述示例,得到切换后的丢包纠错模式所对应的多个第二音视频数据包后,发送端可以将多个第二音视频数据包发送给接收端,以使接收端按照切换后的丢包纠错模式确定丢包率以及对丢包进行不同的处理。接收端在接收到音视频数据包时,可以按照纠错类型帧头中的编码类型,采用相应的编解码协议,解码音视频数据,从而进行正常的播放。
当然,在实际中,在发送端按照第一丢包纠错模式向接收端发送音视频数据包时,发送端还可以响应接收端发送的重传请求,其中,该重传请求中可以携带被丢失的数据包的包序号,则发送端可以依据重传请求中的数据包的包序号,向接收端重传相应的被丢失的音视频数据包。
基于相同的发明构思,参照图5所示,示出了又一实施例中的基于视联网的数据传输方法的步骤流程图,应用于接收端,如图5所示,具体可以包括以下步骤:
步骤S501:接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式。
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。
本实施例中,发送端可以以数据包的形式向接收端发送实时采集的音视频数据,进而,接收端可以对接收到的音视频数据包的帧头进行解析,以确定当前丢包纠错模式。
在一种示例中,所述音视频数据的包头中包括纠错类型帧头和数据传输帧头,则可以对所述音视频数据的纠错类型帧头进行解析,以确定当前丢包纠错模式。
如图4所示,每个音视频数据包均可以包括纠错类型帧头和数据传输帧头,其中,纠错类型帧头用于标识当前丢包纠错模式,数据传输帧头用于标识音视频数据包的属性。其中,接收端可以对音视频数据包的纠错类型帧头中相应字段的数值进行解析,以确定当前丢包纠错模式。例如,如图4所示,接收端对纠错类型头中的第一个字段的数值进行解析,确定数值为“0”,则表示当前丢包纠错模式为第二丢包纠错模式。
步骤S502:确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式。
本实施例中,接收端可以依据当前丢包纠错模式,确定音视频数据的丢包率。其中,在当前丢包纠错模式为第二丢包纠错模式时,即可以是前向纠错时,按照前向纠错的丢包确认手段,确定音视频数据的丢包率。在当前丢包纠错模式为第一丢包纠错模式时,可以根据数据传输帧头所表征的数据包的属性,确定音视频数据的丢包率。
具体地,在所述当前丢包纠错模式为第一丢包纠错模式的情况下,可以对所述音视频数据的数据传输帧头进行解析,得到数据期望总长度,所述数据期望总长度用于表征所述发送端所发送的音视频数据的总长度;并根据当前实际接收到的音视频数据的总长度和所述预设数据期望总长度,确定所述音视频数据的丢包率。
其中,音视频数据的总长度是指发送端要发送的多个音视频数据包的长度之和,例如,发送端要发送100个音视频数据包,总长度为1MB,则预设数据期望总长度为1MB,接收端实际接收到75个音视频数据包,总长度为785kb,则丢包率为:实际接收到的数据包的总长度与预设数据期望总长度之间的差值与预设数据期望总长度的比值,为22%。
当然,实际中,丢包率也可以是要发送的音视频数据包与实际接收到的数据包的数量之差,与所要发送的音视频数据包的总数量之间的比值,例如,接收到75个数据包,实际要发送10个数据包,则丢包率为25。
其中,预设丢包率阈值可以根据经验或实际需求预先设置,例如,可以设置为10%。进而,接收端可以依据音视频数据的丢包率与预设丢包率阈值之间的大小关系是否匹配当前丢包纠错模式,确定是否切换所述当前丢包纠错模式。
其中,音视频数据的丢包率与预设丢包率阈值之间的大小关系可以反映当前视联网网络环境的质量,则实际中,接收端可以根据当前视联网网络环境的质量,动态变更与当前视联网网络环境相适配的丢包纠错模式。
具体实施时,在所述当前丢包纠错模式为第一丢包纠错模式的情况下,若所述丢包率小于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式;在所述当前丢包纠错模式为第二丢包纠错模式的情况下,若所述丢包率大于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式。
其中,当音视频数据的丢包率大于或等于预设丢包率阈值,则表示丢包较多,在接收端可能不能正常解码出音视频数据,从而播放正常的音视频,此种情况下,则可以开启第一丢包纠错模式,即若当前丢包纠错模式不为第一丢包纠错模式(实际中即为在第二丢包纠错模式下工作)时,接收端生成模式切换指令以使发送端将当前丢包纠错模式切换为第一丢包纠错模式,发送端进而向接收端重传丢失的数据,以使接收端可以解码完整的音视频数据。
其中,接收端在第一丢包纠错模式的情况下,向发送端请求重传丢失的音视频数据时,可以根据接收到的数据包的包序号,确定丢失的数据包的包序号,进而向发送端发送重传请求,重传请求中可以携带需要重传的数据包的包序号,以使发送端重传这些丢失的数据包。
其中,当音视频数据的丢包率小于预设丢包率阈值,则表示丢包较少,在接收端一般不影响音视频数据的正常解码,此种情况下,为了提高音视频数据的传输效率和实时性,可以开启第二丢包纠错模式,即若当前丢包纠错模式不为第二丢包纠错模式时,接收端生成模式切换指令以使发送端将当前丢包纠错模式切换为第二丢包纠错模式,此时,发送端无需向接收端重传丢失的数据,以提高与接收端之间的音视频数据传输效率。
当然,在所述当前丢包纠错模式为第一丢包纠错模式的情况下,接收端还可以向所述发送端请求重传丢失的音视频数据。
此种情况下,由于发送端对将要发送的音视频数据包可以按照顺序编号,因此,接收端可以根据实际接收到的音视频数据包的包序号,确定未接收到的音视频数据包的包序号,从而向发送端请求丢失的数据包。
在一种可选的示例中,接收端可以根据丢包率和预设丢包率阈值之间的大小关系以及当前视联网的网络拥塞状态,确定是否切换当前丢包纠错模式。
具体实施时,若丢包率大于或等于预设丢包率阈值且网络拥塞程度较高的情况下,则表示丢包较多且网络环境不好,此时,若当前丢包纠错模式为第一丢包纠错模式,则表示网络拥塞并不能保证重传数据包的效率,此时可以切换为第二丢包纠错模式进行音视频数据的传输。当然,若丢包率大于或等于预设丢包率阈值且网络拥塞程度较低的情况下,若当前丢包纠错模式为第一丢包纠错模式,则不用切换模式,若当前丢包纠错模式为第二丢包纠错模式,则确定切换为第一丢包纠错模式。
具体地,若丢包率小于预设丢包率阈值的情况,则无论网络拥塞程度是较高还是较低,实际中,都可以采用第二丢包纠错模式进行音视频数据的传输,即在此种情况下,当前丢包纠错模式为第一丢包纠错模式时,确定将第一丢包纠错模式切换为第二丢包纠错模式。
步骤S503:在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换。
本实施例中,接收端在确定要切换当前丢包纠错模式时,可以向发送端发送模式切换指令,以使发送端对所述当前丢包纠错模式进行切换。
例如,当音视频数据的丢包率小于预设丢包率阈值,且当前丢包纠错模式为第一丢包纠错模式时,可以向发送端发送模式切换指令,以使发送端将第一丢包纠错模式切换为第二丢包纠错模式,以提高传输效率。当音视频数据的丢包率大于或等于预设丢包率阈值,且当前丢包纠错模式为第二丢包纠错模式时,可以向发送端发送模式切换指令,以使发送端将第二丢包纠错模式切换为第一丢包纠错模式,以降低丢包率。
步骤S504:接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
本实施例中,发送端按照切换后的丢包纠错模式发送音视频数据的过程可以参照上述步骤S2021至步骤S2023的过程进行。
本实施例中,所述纠错类型帧头还包括编码类型,在当前丢包纠错模式为第二丢包纠错模式,或者,在切换后的丢包纠错模式为第二丢包纠错模式的情况下,可以对所述音视频数据的纠错类型帧头中的编码类型进行解析,以确定所述音视频数据对应的编码协议;并按照所述编码协议对所述音视频数据进行解码,以播放所述音视频数据。
其中,每个音视频数据包的纠错类型帧头中还可以包括编码类型,一般而言,在第二丢包纠错模式下,即前向纠错模式下,会采取相应的编码协议编码音视频数据,以使接收端可以对传输过程中的错误码进行纠正。因此,在此种模式下,接收端会对音视频数据的编码类型进行解析,以得到编码音视频数据所使用的编码协议,从而利用相应的解码协议进行解码,以实现在第二丢包纠错模式下音视频数据的播放。
其中,发送端在通过第一丢包纠错模式发送音视频数据时,由于接收端需要向发送端请求重传丢失的数据,因此,可以采用任一编码协议对音视频数据进行编码,此种情况下,接收端可以对音视频数据进行逆向解码即可。当然,实际中,接收端也可以在第一丢包纠错模式下,对音视频数据的编码类型进行解析,以利用相应的解码协议对音视频数据进行解码即可。
采用本发明实施例的技术方案,接收端可以对发送端所发送的音视频数据进行解析,以确定当前丢包纠错模式,并根据音视频数据的丢包率和预设丢包率阈值之间的关系,确定是否向发送端发送模式切换指令,若是,则发送端根据模式切换指令,对当前丢包纠错模式进行切换,从而按照切换后的丢包纠错模式发送音视频数据。
与现有技术相比,本发明实施例的技术方案至少具有以下优点:
第一,由于接收端在接收音视频数据的过程中,可以确定音视频数据的丢包率,并根据丢包率和预设丢包率阈值的大小关系决定是否对当前丢包纠错模式进行切换,在需要切换时,向发送端发送模式切换指令,以使发送端可以依据模式切换指令将当前丢包纠错模式切换为第一丢包纠错模式或第二丢包纠错模式,从而使得在接收音视频数据的过程中,可以动态变更丢包纠错模式,提高在音视频数据传输过程中对数据包丢失时的响应的灵活性。
第二,由于在不同的丢包纠错模式下,对数据包丢失时的响应机制不同,因此可以动态适应当前的视联网网络环境,以适配当前的视联网网络环境的丢包响应机制,减小音视频数据的丢包率以提高音视频数据的流畅性。如,在第一丢包纠错模式下,重传丢失的数据包,这样可以提高接收端接收的数据包的完整性,减小丢包率,从而避免音视频的卡顿。又如,在第二丢包纠错模式下,即丢失的数据包的数量较小的情况下,可以不重传丢失的数据包,这样避免频繁重传所造成的网络拥堵,从而可以提高接收端与发送端之间的数据传输效率,提高音视频的流畅度。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参考图6,示出了一种基于视联网的数据传输装置,应用于发送端,具体可以包括以下模块:
第一数据发送模块601,用于按照当前丢包纠错模式,向接收端发送音视频数据;
切换模块602,用于响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;
第二数据发送模块603,用于按照切换后的丢包纠错模式,向所述接收端发送音视频数据;
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议。
可选地,所述切换模块602具体可以包括以下单元:
封装单元,用于按照视联网协议,将待发送的音视频数据封装为多个音视频数据包;
协议添加单元,用于在所述多个音视频数据包各自的帧头数据中增加纠错协议帧,得到多个第一音视频数据包;所述纠错协议帧包括纠错类型帧头和数据传输帧头,所述纠错类型帧头用于表征当前所采用的丢包纠错模式,所述数据传输帧头用于表征当前传输的音视频数据包的属性;
设置单元,用于按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包;
发送单元,用于将所述多个第二音视频数据包发送给接收端。
可选地,所述设置单元,具体可以包括以下子单元:
确定子单元,用于在所述切换后的丢包纠错模式为所述第一丢包纠错模式的情况下,确定所述多个第一音视频数据包的总长度、总数量以及每个音视频数据包的长度;
写入单元,用于将所述第一丢包纠错模式写进所述多个第一音视频数据包各自的纠错类型帧头,以及将所述总长度、所述总数量以及所述每个音视频数据包的长度写进所述多个第一音视频数据包各自的数据传输帧头中,得到所述多个第二音视频数据包。
可选地,所述设置单元,具体可以包括以下子单元:
设置子单元,用于在所述切换后的丢包纠错模式为所述第二丢包纠错模式的情况下,按照与所述第二丢包纠错模式对应的默认协议头,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,得到所述多个第二音视频数据包。
可选地,所述纠错类型帧头中包括编码类型,所述装置还可以包括以模块:
编码模块,用于按照当前启用的编码协议,对所述多个第一音视频数据包中的音视频数据进行编码,得到待封装的多个第一视频数据包;
所述设置子单元,具体还可以用于将所述编码协议的类型写进所述待封装的多个第一音视频数据包各自的编码类型中。
参照图7所示,示出了又一实施例中的一种基于视联网的数据传输装置的结构框图,所述装置位于接收端,具体可以包括以下模块:
第一接收模块701,用于接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式;
确定模块702,用于确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式;
指令发送模块703,用于在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换;
第二接收模块704,用于接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
可选地,第一接收模块701具体可以包括以下单元:
第一单元,用于在所述当前丢包纠错模式为第一丢包纠错模式的情况下,若所述丢包率小于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式;
第二单元,用于在所述当前丢包纠错模式为第二丢包纠错模式的情况下,若所述丢包率大于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式。
可选地,所述音视频数据的包头中包括纠错类型帧头和数据传输帧头,所述确定模块701,具体可以用于对所述音视频数据的纠错类型帧头进行解析,以确定当前丢包纠错模式;
确定模块702具体可以包括以下单元:
长度确定单元,用于在所述当前丢包纠错模式为第一丢包纠错模式的情况下,对所述音视频数据的数据传输帧头进行解析,得到数据期望总长度,所述数据期望总长度用于表征所述发送端所发送的音视频数据的总长度;
确定单元,用于根据当前实际接收到的音视频数据的总长度和所述预设数据期望总长度,确定所述音视频数据的丢包率;
所述装置还可以包括以下模块:
重传模块,用于在所述当前丢包纠错模式为第一丢包纠错模式的情况下,向所述发送端请求重传丢失的音视频数据。
可选地,所述纠错类型帧头还包括编码类型,所述装置还可以包括以下模块:
解析模块,用于在所述当前丢包纠错模式为所述第二丢包纠错模式的情况下,对所述音视频数据的纠错类型帧头中的编码类型进行解析,以确定所述音视频数据对应的编码协议;
解码模块,用于按照所述编码协议对所述音视频数据进行解码,以播放所述音视频数据。
需要说明的是,装置实施例与方法实施例相近,故描述的较为简单,相关之处参见方法实施例即可。
本发明实施例还提供了一种电子设备,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当由所述一个或多个处理器执行时,使得所述设备执行如本发明上述任一实施例所述的基于视联网的数据传输方法。
本发明实施例还提供了一种计算机可读存储介质,其存储的计算机程序使得处理器执行如本发明上述任一实施例所述的基于视联网的数据传输方法。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种基于视联网的数据传输方法、装置、设备和存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (13)

1.一种基于视联网的数据传输方法,其特征在于,所述方法应用于发送端,包括:
按照当前丢包纠错模式,向接收端发送音视频数据;
响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;
按照切换后的丢包纠错模式,向所述接收端发送音视频数据;
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式。
2.根据权利要求1所述的方法,其特征在于,按照切换后的丢包纠错模式,向所述接收端发送音视频数据,包括:
按照视联网协议,将待发送的音视频数据封装为多个音视频数据包;
在所述多个音视频数据包各自的帧头数据中增加纠错协议帧,得到多个第一音视频数据包;所述纠错协议帧包括纠错类型帧头和数据传输帧头,所述纠错类型帧头用于表征当前所采用的丢包纠错模式,所述数据传输帧头用于表征当前传输的音视频数据包的属性;
按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包;
将所述多个第二音视频数据包发送给接收端。
3.根据权利要求2所述的方法,其特征在于,按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包,包括:
在所述切换后的丢包纠错模式为所述第一丢包纠错模式的情况下,确定所述多个第一音视频数据包的总长度、总数量以及每个音视频数据包的长度;
将所述第一丢包纠错模式写进所述多个第一音视频数据包各自的纠错类型帧头,以及将所述总长度、所述总数量以及所述每个音视频数据包的长度写进所述多个第一音视频数据包各自的数据传输帧头中,得到所述多个第二音视频数据包。
4.根据权利要求2所述的方法,其特征在于,按照所述切换后的丢包纠错模式,对所述多个第一音视频数据包各自所包括的纠错类型帧头和数据传输帧头进行设置,得到多个第二音视频数据包,包括:
在所述切换后的丢包纠错模式为所述第二丢包纠错模式的情况下,根据所述第二丢包纠错模式,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头,得到所述多个第二音视频数据包。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
按照当前启用的编码协议,对所述多个第一音视频数据包中的音视频数据进行编码,得到待封装的多个第一视频数据包;
所述纠错类型帧头中包括编码类型,根据所述第二丢包纠错模式,设置所述多个第一音视频数据包各自的纠错类型帧头和数据传输帧头的同时,还包括:
将所述编码协议的类型写进所述待封装的多个第一音视频数据包各自的编码类型中。
6.一种基于视联网的数据传输方法,其特征在于,所述方法应用于接收端,包括:
接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式;
确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式;
在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换;
接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
7.根据权利要求6所述的方法,其特征在于,根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式,包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,若所述丢包率小于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式;
在所述当前丢包纠错模式为第二丢包纠错模式的情况下,若所述丢包率大于或等于所述预设丢包率阈值,则确定切换所述当前丢包纠错模式。
8.根据权利要求6所述的方法,其特征在于,所述音视频数据的包头中包括纠错类型帧头和数据传输帧头,对所述音视频数据进行解析,以确定当前丢包纠错模式,包括:
对所述音视频数据的纠错类型帧头进行解析,以确定当前丢包纠错模式;
确定所述音视频数据的丢包率,包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,对所述音视频数据的数据传输帧头进行解析,得到数据期望总长度,所述数据期望总长度用于表征所述发送端所发送的音视频数据的总长度;
根据当前实际接收到的音视频数据的总长度和所述预设数据期望总长度,确定所述音视频数据的丢包率;
所述方法还包括:
在所述当前丢包纠错模式为第一丢包纠错模式的情况下,向所述发送端请求重传丢失的音视频数据。
9.根据权利要求8所述的方法,其特征在于,所述纠错类型帧头还包括编码类型,所述方法还包括:
在所述当前丢包纠错模式为所述第二丢包纠错模式的情况下,对所述音视频数据的纠错类型帧头中的编码类型进行解析,以确定所述音视频数据对应的编码协议;
按照所述编码协议对所述音视频数据进行解码,以播放所述音视频数据。
10.一种基于视联网的数据传输装置,其特征在于,所述装置位于发送端,包括:
第一数据发送模块,用于按照当前丢包纠错模式,向接收端发送音视频数据;
切换模块,用于响应于所述接收端发送的模式切换指令,对所述当前丢包纠错模式进行切换,所述模式切换指令由所述接收端依据接收音视频数据时的丢包率和预设丢包率阈值之间的大小关系生成;
第二数据发送模块,用于按照切换后的丢包纠错模式,向所述接收端发送音视频数据;
其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一丢包纠错模式为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议。
11.一种基于视联网的数据传输装置,其特征在于,所述装置位于接收端,包括:
第一接收模块,用于接收发送端发送的音视频数据,并对所述音视频数据进行解析,以确定当前丢包纠错模式;其中,所述当前丢包纠错模式为第一丢包纠错模式或第二丢包纠错模式,所述第一协议为丢包时需要重传的协议模式,第二丢包纠错模式为丢包时不需要重传的协议模式;
确定模块,用于确定所述音视频数据的丢包率,并根据所述丢包率和预设丢包率阈值之间的大小关系,确定是否切换所述当前丢包纠错模式;
指令发送模块,用于在确定切换所述当前丢包纠错模式的情况下,向所述发送端发送模式切换指令,以使所述发送端对所述当前丢包纠错模式进行切换;
第二接收模块,用于接收所述发送端按照切换后的丢包纠错模式所发送的音视频数据。
12.一种电子设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行时实现如权利要求1-5任一或6-9任一所述的基于视联网的数据传输方法。
13.一种计算机可读存储介质,其特征在于,其存储的计算机程序使得处理器执行如权利要求1-5任一或6-9任一所述的基于视联网的数据传输方法。
CN202010839942.4A 2020-08-19 2020-08-19 基于视联网的数据传输方法、装置、设备及介质 Pending CN112165655A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010839942.4A CN112165655A (zh) 2020-08-19 2020-08-19 基于视联网的数据传输方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010839942.4A CN112165655A (zh) 2020-08-19 2020-08-19 基于视联网的数据传输方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN112165655A true CN112165655A (zh) 2021-01-01

Family

ID=73859617

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010839942.4A Pending CN112165655A (zh) 2020-08-19 2020-08-19 基于视联网的数据传输方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN112165655A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117354585A (zh) * 2023-12-06 2024-01-05 深圳感臻智能股份有限公司 一种针对视频网络丢包的优化方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101656597A (zh) * 2009-09-14 2010-02-24 中兴通讯股份有限公司 数据接收和发送方法、装置及数据传输系统
CN107483144A (zh) * 2016-06-07 2017-12-15 中兴通讯股份有限公司 前向纠错反馈信息传输方法、装置
CN107888342A (zh) * 2016-09-30 2018-04-06 瞬已网络科技(上海)有限公司 一种网络实时视频传输方法及装置
CN108234080A (zh) * 2018-01-12 2018-06-29 苏州汇万家数字科技有限公司 一种音视频传输方法
CN108667563A (zh) * 2018-01-19 2018-10-16 唐桥科技(杭州)有限公司 一种前向纠错包个数获取方法及装置
CN109379165A (zh) * 2018-09-13 2019-02-22 宁波菊风系统软件有限公司 一种适用视频通信的丢包处理方法
CN109412753A (zh) * 2018-10-25 2019-03-01 网易(杭州)网络有限公司 数据传输方法及装置、电子设备以及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101656597A (zh) * 2009-09-14 2010-02-24 中兴通讯股份有限公司 数据接收和发送方法、装置及数据传输系统
CN107483144A (zh) * 2016-06-07 2017-12-15 中兴通讯股份有限公司 前向纠错反馈信息传输方法、装置
CN107888342A (zh) * 2016-09-30 2018-04-06 瞬已网络科技(上海)有限公司 一种网络实时视频传输方法及装置
US20200044787A1 (en) * 2016-09-30 2020-02-06 Caton Technology (Shanghai) Limited Network-based real-time video transmission method and device
CN108234080A (zh) * 2018-01-12 2018-06-29 苏州汇万家数字科技有限公司 一种音视频传输方法
CN108667563A (zh) * 2018-01-19 2018-10-16 唐桥科技(杭州)有限公司 一种前向纠错包个数获取方法及装置
CN109379165A (zh) * 2018-09-13 2019-02-22 宁波菊风系统软件有限公司 一种适用视频通信的丢包处理方法
CN109412753A (zh) * 2018-10-25 2019-03-01 网易(杭州)网络有限公司 数据传输方法及装置、电子设备以及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117354585A (zh) * 2023-12-06 2024-01-05 深圳感臻智能股份有限公司 一种针对视频网络丢包的优化方法及装置

Similar Documents

Publication Publication Date Title
US9763131B2 (en) Method and system for transmitting data packet, sending end device and receiving end device
KR100680671B1 (ko) 에러 정정용 데이터의 생성 방법 및 생성 장치와 생성 프로그램을 저장한 컴퓨터 판독가능한 기록 매체
US6891799B1 (en) Data transmission method
EP2437421B1 (en) Method, device and communication system for retransmitting based on forward error correction
JP4198741B2 (ja) 通信機器、通信システム、通信方法、通信プログラム、通信回路
US7584404B2 (en) Method and apparatus for multimedia communication over packet channels
US20090103635A1 (en) System and method of unequal error protection with hybrid arq/fec for video streaming over wireless local area networks
CN105704580B (zh) 一种视频传输方法
CN101707551B (zh) 一种数据的传输方法及装置
CN108174234A (zh) 一种流媒体传输方法及系统
US20100125768A1 (en) Error resilience in video communication by retransmission of packets of designated reference frames
CN111741248B (zh) 一种数据传输方法、装置、终端设备和存储介质
CN105681342A (zh) 一种基于h264的多路视频会议系统的抗误码方法及系统
KR102002939B1 (ko) 주문형 파일 복구 방법 및 시스템
CN114221909B (zh) 数据传输方法、装置、终端及存储介质
Wu et al. TCP-oriented raptor coding for high-frame-rate video transmission over wireless networks
CN105049862A (zh) 用于传输编码媒体数据的方法和设备
CN112165655A (zh) 基于视联网的数据传输方法、装置、设备及介质
CN105611424A (zh) 基于rudp的音视频可靠传输qos方法、系统
CN116318545A (zh) 视频数据传输方法、装置、设备及存储介质
Phung et al. Enhancing rest http with random linear network coding in dynamic edge computing environments
CN116800371A (zh) 一种数据处理方法、装置、设备及可读存储介质
JP2008079330A (ja) 通信機器、通信方法、通信プログラム、通信回路、携帯電話、表示装置、印刷装置、記録装置
WO2021164405A1 (zh) 数据编解码方法、相关设备及系统
CN112243160A (zh) 一种数据传输方法、装置、终端设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination