CN100459695C - 视频数据传输方法及其传输系统 - Google Patents
视频数据传输方法及其传输系统 Download PDFInfo
- Publication number
- CN100459695C CN100459695C CNB2005100908811A CN200510090881A CN100459695C CN 100459695 C CN100459695 C CN 100459695C CN B2005100908811 A CNB2005100908811 A CN B2005100908811A CN 200510090881 A CN200510090881 A CN 200510090881A CN 100459695 C CN100459695 C CN 100459695C
- Authority
- CN
- China
- Prior art keywords
- video data
- frame
- transfer server
- data frame
- recipient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频数据传输方法,应用在包括视频数据发送方、中转服务器和视频数据接收方的视频通信系统,包括所述发送方从第一个视频数据帧开始,每隔N帧发送一个完整的视频数据帧到中转服务器,并且将其余的视频数据帧以缺省帧头形式发送到中转服务器;所述中转服务器分别对所述发送方发来的视频数据帧进行缓存;中转服务器在每次接收到所述接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到接收方。相应的,本发明还公开了一种视频数据传输系统。本发明可以避免由于移动网络空口承载带宽不稳定而导致的拥堵现象,提高了视频通信的实时性和稳定性。
Description
技术领域
本发明涉及多媒体通信技术领域,尤其涉及一种视频数据传输方法及其传输系统。
背景技术
目前,利用PC终端上的摄像设备(如摄像头)基于计算机网络实现PC终端用户之间的视频通信,使通信双方能够进行可视化交流已经成为现有即时通信软件所能提供的基本服务之一。但是随着移动通信技术的蓬勃发展,特别是3G技术的提出,移动终端的处理能力和移动网络的传输带宽都得到了极大的提高,从而使得PC终端和移动终端之间、以及移动终端和移动终端之间进行实时可视化视频通信成为可能,由此基于移动终端不可比拟的灵活性和便携性,实现了随时随地的进行可视化视频通信的目标。
请参照图1,该图是现有技术中PC终端和移动终端之间实现可视化视频通信的系统组成拓扑图,其中:
终端的作用是用于完成视频数据的采集和回放,及其视频数据编解码处理及视频数据传输处理等任务,包括PC终端10和移动终端20,移动终端20使用自身的摄像头201(该摄像头201可以内置在移动终端20内部,也可以外置于移动终端20)进行视频数据的采集,并将采集的视频数据进行编码发送,同时对PC终端10发来的视频数据进行解码显示处理;PC终端10使用自身的摄像头101进行视频数据的采集,并将采集的视频数据进行编码发送,同时对移动终端20发来的视频数据进行解码显示处理;
中转服务器30主要用于完成两个任务:视频数据的转发控制和用户终端信息的保存,其中用户终端信息是整个视频通信过程中非常重要的数据信息,包括终端类型、终端屏幕大小、终端所能支持的图像编解码格式和终端的处理能力参数等。中转服务器30根据存储的用户终端信息,在需要时对转发的视频数据进行相应的调整。
中转服务器30根据发送方指定的一个或多个接收方的用户终端信息,将发送方发来的视频数据进行相应的调整和转换,然后将处理后的视频数据发送至指定的接收方。
目前,在基于上述的视频通信系统进行视频数据传输过程中,特别是在接收方是移动终端时,常常会存在如下问题:
由于移动网络的空中接口传输带宽的限制,使得在多个发送方同时向一个接收方发送数据帧时,可能会由于空中接口传输带宽的限制造成接收方的传输数据产生拥堵的现象,从而可能影响到视频通信的稳定性和实时性。
同时,在现有移动通信网络中实现视频通信过程中,移动终端一般都是采用运动图像专家组(MPEG,Moving Picture Experts Group)编解码协议来对视频数据进行编解码处理的,由于MPEG编解码协议规定的编解码过程较为复杂,且使用MPEG协议实现的编解码处理过程会占用终端较多的处理能力资源,因此MPEG协议的这些特点其实并不是很适合于移动终端对视频数据的编解码处理。
此外,基于计算机网络实现PC终端之间的视频通信过程中,现在一般会采用实时传输协议(RTP,Real-Time Transport Protocol)和实时传输控制协议(RTCP,Real-time Transport Control Protocol)来进行传输视频数据帧,但是由于RTP/RTCP协议一般比较适用于计算机网络中的视频通信,对于移动网络系统而言并不完全适用。
发明内容
本发明要解决的技术问题在于提出一种视频数据传输方法及其传输系统,以使在移动终端作为视频数据接收方时,可以避免由于移动网络空口承载带宽不稳定而导致的拥堵现象,提高了视频通信的实时性和稳定性。
为解决上述问题,本发明提出的技术方案如下:
一种视频数据传输方法,应用在包括视频数据发送方、中转服务器和视频数据接收方的视频通信系统,包括步骤:
A.所述发送方从第一个视频数据帧开始,每隔N帧发送一个完整的视频数据帧到中转服务器,并且将其余的视频数据帧以缺省帧头形式发送到中转服务器;
B.所述中转服务器分别对所述发送方发来的视频数据帧进行缓存;
C.中转服务器在每次接收到所述接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到所述接收方。
较佳地,所述步骤A中,所述发送方分别在预先设置的一周期规则规定的每个周期时间点,发送一个视频数据帧到中转服务器。
较佳地,所述方法还包括步骤:
D.所述接收方在第一次接收到中转服务器发来的完整视频数据帧时,将该接收的完整视频数据帧的帧头数据保存到本地;并
E.根据本地保存的帧头数据对后续接收的缺省帧头的视频数据帧进行解码处理;
F.所述接收方在下一次接收到中转服务器发来的完整视频数据帧时,使用接收的该完整视频数据帧的帧头数据更新本地上一次保存的帧头数据,然后返回步骤E。
较佳地,接收方在对中转服务器当前发来的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
较佳地,所述发送方为移动终端或PC终端;所述接收方为移动终端。
较佳地,所述发送方为移动终端时,所述发送方使用联合图片专家组JPEG协议对视频数据进行编解码处理;并
所述接收方为移动终端时,所述接收方使用联合图片专家组JPEG协议对视频数据进行编解码处理。
较佳地,所述视频通信系统采用TCP/IP协议或UDP协议对视频数据帧进行传输。
相应的,本发明还提出了一种视频数据传输系统,包括视频数据发送方、中转服务器和视频数据接收方,所述发送方具体包括:
第一发送单元,用于发送视频数据帧到中转服务器;
计数单元,用于对所述第一发送单元已发送的视频数据帧个数进行计数;
完整帧发送触发单元,用于从第一发送单元发送的第一个视频数据帧开始,分别在所述计数单元计数到达n×N时,触发第一发送单元发送一个完整的视频数据帧到中转服务器;所述第一发送单元在得不到所述完整帧发送触发单元的触发时,将视频数据帧以缺省帧头形式发送到中转服务器,其中n为自然数,N为规定的间隔帧数;
所述中转服务器包括:
缓存单元,用于分别对所述发送方发来的视频数据帧进行缓存;
数据帧提取单元,用于在每次接收到所述接收方发来的请求消息时,在所述缓存单元当前缓存的视频数据帧中提取最先接收的一个视频数据帧;
第二发送单元,用于分别将所述数据帧提取单元提取的每一视频数据帧发送到接收方。
较佳地,所述发送方还包括:
周期触发单元,用于预先存储一周期规则,在到达所述周期规则规定的每个周期时间点时,生成一触发信号,所述第一发送单元分别在所述周期触发单元每次发来触发信号时,发送一个视频数据帧到中转服务器。
较佳地,所述接收方具体包括:
接收单元,用于分别接收中转服务器发来的每一视频数据帧;
帧头提取单元,用于对所述接收单元接收的每一个完整的视频数据帧进行提取帧头数据处理;
帧头缓存单元,用于对所述帧头提取单元最近一次提取的帧头数据进行缓存;
解码单元,用于根据所述帧头缓存单元中当前缓存的帧头数据,分别对所述接收单元接收的每一视频数据帧进行解码处理;
请求消息发送单元,用于在解码单元对当前接收的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
较佳地,所述发送方为移动终端或PC终端;所述接收方为移动终端。
较佳地,所述移动终端支持对视频数据进行联合图片专家组JPEG协议的编解码处理。
本发明还提供一种视频数据传输方法,应用在包括视频数据发送方、中转服务器和视频数据接收方的视频通信系统,包括步骤:
A.所述发送方从第一个视频数据帧开始,在每个规定间隔时间点发送一个完整的视频数据帧到中转服务器,并且将其余时间的视频数据帧分别以缺省帧头形式发送到中转服务器;
B.所述中转服务器分别对所述发送方发来的视频数据帧进行缓存;
C.中转服务器在每次接收到所述接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到所述接收方。
较佳地,所述步骤A中,所述发送方分别在预先设置的一周期规则规定的周期时间点,发送一个视频数据帧到中转服务器。
较佳的,所述方法还包括步骤:
D.所述接收方在第一次接收到中转服务器发来的完整视频数据帧时,将该接收的完整视频数据帧的帧头数据保存到本地;并
E.根据本地保存的帧头数据对后续接收的缺省帧头的视频数据帧进行解码处理;
F.所述接收方在下一次接收到中转服务器发来的完整视频数据帧时,使用接收的该完整视频数据帧的帧头数据更新本地上一次保存的帧头数据,然后返回步骤E。
较佳地,接收方在对中转服务器当前发来的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
相应的,本发明还提出了一种视频数据传输系统,包括视频数据发送方、中转服务器和视频数据接收方,所述发送方具体包括:
第一发送单元,用于发送视频数据帧到中转服务器;
间隔时间点触发单元,用于预先存储一间隔时间规则,在从第一个视频数据帧开始,在所述间隔时间规则所规定的每个间隔时间点,触发第一发送单元发送一个完整的视频数据帧到中转服务器;所述第一发送单元在得不到所述间隔时间点触发单元的触发时,将视频数据帧以缺省帧头形式发送到中转服务器;
所述中转服务器包括:
缓存单元,用于分别对所述发送方发来的视频数据帧进行缓存;
数据帧提取单元,用于在每次接收到所述接收方发来的请求消息时,在所述缓存单元当前缓存的视频数据帧中提取最先接收的一个视频数据帧;
第二发送单元,用于分别将所述数据帧提取单元提取的每一视频数据帧发送到接收方。
较佳地,所述发送方还包括:
周期触发单元,用于预先存储一周期规则,在到达所述周期规则规定的每个周期时间点时,生成一触发信号,所述第一发送单元分别在所述周期触发单元每次发来触发信号时,发送一个视频数据帧到中转服务器。
较佳地,所述接收方具体包括:
接收单元,用于分别接收中转服务器发来的每一视频数据帧;
帧头提取单元,用于对所述接收单元接收的每一个完整的视频数据帧进行提取帧头数据处理;
帧头缓存单元,用于对所述帧头提取单元最近一次提取的帧头数据进行缓存;
解码单元,用于根据所述帧头缓存单元中当前缓存的帧头数据,分别对所述接收单元接收的每一视频数据帧进行解码处理;
请求消息发送单元,用于在解码单元对当前接收的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
本发明能够达到的有益效果如下:
本发明视频数据传输方法及其传输系统提出由中转服务器对视频数据发送方发送来的视频数据帧进行缓存,并且同时视频数据接收方在每次对当前接收的视频数据帧进行解码处理前,会向中转服务器请求发送下一视频数据帧,中转服务器响应接收方发来的请求,将缓存的视频数据帧中最先接收的一个视频数据帧发送给接收方,这样就可避免现有技术中由于移动网络空口承载带宽不稳定而产生的拥堵现象,也可避免现有技术中进行视频数据的发送和接收处理所导致的视频通信实效性较差的弊端,因此可以提高视频通信的实时性和稳定性。
同时,本发明还提出发送方以规定间隔时间或规定间隔帧数,发送一个完整的视频数据帧,对于其余的视频数据帧只以缺省帧头的形式进行发送,因此可以减小传输的视频数据帧对移动网络空口承载带宽的占用,进一步减小了由于移动网络空口承载带宽不足问题而引起的拥堵现象发生几率,因此也可以进而提高视频通信的实时性和稳定性。
同时本发明还提出发送方或接收方若为移动终端时,采用联合图片专家组(JPEG,Joint Photographic Experts Group)协议对视频数据进行编解码处理,以满足现有移动终端的处理能力。
此外,本发明还提出使用TCP/IP协议或UDP协议来进行视频通信过程中的视频数据传输,因此可以完全适用于计算机网络和移动通信网络。
附图说明
图1为现有技术中PC终端和移动终端之间实现可视化视频通信的系统组成拓扑图;
图2为本发明视频数据传输方法的主要实现原理流程图;
图3为本发明方法中视频数据帧的传输状态示意图;
图4为本发明方法的整个处理过程示意图;
图5为本发明方法原理所应用在的网络系统拓扑图;
图6为本发明视频数据传输系统的主要组成结构框图;
图7为本发明系统中发送方的主要组成结构框图;
图8为本发明系统中发送方的第一实施例组成结构框图;
图9为本发明系统中发送方的第二实施例组成结构框图;
图10为本发明系统中接收方的第一实施例主要组成结构框图;
图11为本发明系统中接收方的第二实施例主要组成结构框图。
具体实施方式
针对现有在移动通信网络进行即时视频通信时的表现能力不足问题,本发明提出一种可以在不同移动终端之间或移动终端与PC终端之间进行点对点或点对多点的实时视频数据传输方法及其传输系统。
请参照图2,该图是本发明视频数据传输方法的主要实现原理流程图,其主要实现过程包括:
步骤S10,视频通信系统中的中转服务器分别对发送方发来的视频数据帧进行缓存;
其中,考虑到若视频通信系统中的接收方为移动终端时,将不得不对移动终端(如手机)的编解码处理能力及其移动通信网的网络传输速率进行考虑,因此这里需要对发送方对视频数据采集的帧速率及其每一帧视频数据的尺寸大小加以权衡,在考虑到这些因素的情况下,经过反复的试验并且考虑到在一般情况下,正常的视频交互过程中,交互双方的影像不会有非常频繁以及快速的位移变化,因此可以保证发送方以每秒发送一帧视频数据,且每帧视频数据的尺寸大小为80×60pixels,就可以完全满足正常的视频通信交流。
因此,发送方可以选择以周期规律来发送自身采集的每一帧视频数据,具体过程可以如下:
预先设置一个周期规则,如周期间隔为1S;
发送方分别在该设置的周期规则规定的每个周期时间点,发送一个视频数据帧到中转服务器,如按照上述设置的周期间隔时间,以每秒发送一个视频数据帧的规律进行发送;
这样,中转服务器就可以分别对接收的每一视频数据帧进行缓存了。
其中在基于移动网络实现视频通信的过程中,应该考虑如何有效地减小每一帧视频数据的大小,以减小每一帧视频数据在移动网络中所占用的传输带宽,本发明通过对实际的视频数据传输过程进行观察,发现终端通过摄像头摄取的视频数据在尺寸大小没有发生变化的情况下,其连续每一帧视频数据都有相同长度(0x26f)的帧头数据,因此本发明这里提出可以采用以下方法来对视频数据帧进行处理:
视频数据帧的发起方从第一个视频数据帧开始每间隔一定的时间(如10s、20s等)或每间隔一定的帧数(如10帧、20帧等)后,发送一个带帧头数据的完整视频数据帧,在此之间所发送的视频数据帧都是去掉该长度(0x26f)帧头数据的视频数据帧,接收方在第一次接收到完整的视频数据帧后,保存该完整视频数据帧的帧头,并在后续每次接收到完整的视频数据帧后,使用新接收到的视频数据帧的帧头更新本地保存的帧头数据,接收方在收到下一个完整的视频数据帧之前,使用本地当前保存的帧头数据来完成后续不带有帧头数据的视频数据帧的解码处理,其视频数据帧的传输过程如图3所示,即发送方只在第1帧、第n+1帧、第2n+1帧.....传送完整的视频数据帧,在其余帧只传送不带帧头数据的视频数据帧。
实验证明,经过以上方法的处理后,对于一般的尺寸大小为80×60pixels的视频数据帧,在保证影像质量中等的情况下可以把去掉帧头数据的视频数据帧所占用传输带宽的大小控制在0.6~1.1K左右,这样的传输带宽大小占用在现今的GPRS网络或CDMA1X网络的传输速率下,完全能够满足正常的视频通信交流。
基于上述,发送方可以按照下述过程来传送每一个视频数据帧:
发送方从第一个视频数据帧开始,每隔N帧(N可以为10或20)发送一个完整的视频数据帧到中转服务器;
然后对于每两个完整的视频数据帧之间分别间隔的N帧,发送方分别将其以缺省帧头形式发送到中转服务器。如发送方可以将第1帧发送为完整的视频数据帧,在此后将第2帧至第11帧分别发送缺省帧头形式的视频数据帧;在第12帧发送为完整的视频数据帧,在此后将第13帧至第22帧分别发送缺省帧头形式的视频数据帧......依次类推。
此外,发送方还可以按照下述过程来传送每一个视频数据帧:
发送方从第一个视频数据帧开始,在每个规定间隔时间点(间隔时间可以为10s或20s)发送一个完整的视频数据帧到中转服务器;
对于规定间隔时间点之间的时间内,发送方将视频数据帧分别以缺省帧头形式发送到中转服务器;如发送方可以在第1秒发送完整的视频数据帧,在此后的10秒间隔内分别发送缺省帧头形式的视频数据帧;在第11秒发送完整的视频数据帧,在此后的10秒间隔内分别发送缺省帧头形式的视频数据帧......依次类推。
步骤S20,中转服务器在接收并缓存发送方发来的每个视频数据帧的同时,在每次接收到接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到接收方,其中接收方可以在对中转服务器当前发来的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。当中转服务器接收到发送方发来的第一个视频数据帧时,可以不进行缓存处理,直接转发给接收方,然后继续接收后续发送方发来的视频数据帧,接收方接收到中转服务器发来的第一个视频数据帧时,在对该视频数据帧进行解码处理前,向中转服务器请求发送下一视频数据帧;后续接收方在每次接收到中转服务器发来的视频数据帧时,在对当前接收的视频数据帧进行解码处理前,都会向中转服务器请求发送下一视频数据帧,如此往复。
由于上述发送方会以一定的间隔时间或以一定的间隔帧数发送一个完整的视频数据帧,所以接收方也会相应的接收到大部分不带帧头的视频数据帧,因此如何对不完整的视频数据帧进行解码处理是必须应该考虑的问题,因为帧头数据是在视频数据帧中解码出真正需要的视频数据所不可缺少的重要信息,本发明这里提出接收方采用如下过程来实现分别对接收的每个视频数据帧进行解码处理:
S1.接收方在第一次接收到中转服务器发来的完整视频数据帧时,将该接收的完整视频数据帧的帧头数据保存到本地;
S2.接收方根据本地保存的帧头数据对后续接收的缺省帧头的视频数据帧进行解码处理;
S3.接收方在下一次接收到中转服务器发来的完整视频数据帧时,使用接收的该完整视频数据帧的帧头数据更新本地上一次保存的帧头数据,然后返回继续执行步骤S2;这样通过步骤S2和步骤S3之间的循环反复,就可以实现接收方分别对接收的每个视频数据帧进行解码处理,无论接收的视频数据帧是完整的,还是不完整的。
其中上述所提及的发送方可以为PC终端或为移动终端,而接收方为移动终端;如发送方为移动终端时,发送方移动终端可以使用JPEG协议对视频数据进行编解码处理,因为JPEG编解码协议相对于MPEG协议而言编解码过程较为简单,并且占用终端处理资源较小;同理接收方移动终端也使用JPEG协议对视频数据进行编解码处理。其中对于支持JPEG编解码协议的移动终端(如手机等)可直接调用自身相应的JPEG编解码功能完成编解码处理,而对于不支持JPEG编解码功能的移动终端可以通过移植现有的JPEG编解码程序库来实现,即把现有的在PC终端上运行的JPEG编解码程序经过改造,使其能运行在移动终端上,来达到移动终端支持处理JPEG编解码的功能。
由此可见,本发明上述提出的视频数据传输方法提出以“拉”的视频数据传输方式为主,并在中转服务器中增加数据缓冲的方法。基于这些特点,本发明视频数据传输方法的简要实现过程就是:
视频数据发送方以一定的时间间隔(如10s、20s)发送每一帧视频数据到中转服务器,中转服务器对每一帧视频数据进行缓存;同时,视频数据接收方在接收到每一帧的视频数据后(及在开始解码前),向中转服务器请求下一帧视频数据,中转服务器响应接收方发来的请求,从缓存中读取相应的视频数据帧发送到视频数据接收方,这样就可以使得发送方视频数据帧的发送过程与接收方视频数据帧的接收过程之间的影响降到了最小,提高了视频通信的实效性,具体请参照图4,该图是本发明方法的整个处理过程示意图。
同时本发明方法提出在视频通信系统中采用TCP/IP协议或UDP协议来实现对视频数据帧进行传输,因为TCP/IP协议或UDP协议是网络通用的数据传输协议,可以使统一的网络传输协议屏蔽互联网和移动通信网的底层传输协议得差异,能够实现视频通信系统将互联网和移动通信网看作一个统一的通信网络,采用统一的网络传输协议,不必再过多考虑网络接入的问题。
如图5所示,是本发明方法原理所应用在的网络系统拓扑图,如图所示,通过在该系统中实施本发明方法,可以实现通过IP网络由PC终端10向移动终端20进行即时的视频数据传输,使得用户可以通过移动终端(如手机)20即时看到PC终端10上采集的视频影像。
综上可见,本发明视频数据传输方法实现原理简单,易于实现,采用本发明视频数据传输方法后,可以使用户通过移动终端,随时随地的看到PC终端用户采集的视频数据,增强了视频通信的时效性。同时,本发明视频数据传输方法提出所承载的视频通信系统采用TCP/IP传输协议或UDP传输协议来实现视频数据的传输,使得统一的网络传输协议屏蔽了互联网和移动通信网的底层协议差异;由此将互联网和移动通信网看作统一的网络,可以实现采用统一的网络处理方式,不必过多考虑网络接入问题,降低了视频通信系统的复杂性。
相应的,本发明参照上述的视频数据传输方法还提出了一种视频数据传输系统,请参照图6,该图是本发明视频数据传输系统的主要组成结构框图,其主要包括视频数据发送方110、中转服务器30和视频数据接收方210,其中中转服务器30主要包括缓存单元301、数据帧提取单元302和第一发送单元303,各个组成部分的作用及其相互连接关系如下:
缓存单元301,用于分别对发送方110发来的视频数据帧进行缓存;
数据帧提取单元302,与缓存单元301存在逻辑连接,用于在每次接收到接收方210发来的请求消息时,在缓存单元301中当前缓存的视频数据帧中提取最先接收的一个视频数据帧;
第一发送单元303,与数据帧提取单元302存在逻辑连接,用于分别将数据帧提取单元302提取的每一视频数据帧发送到接收方210。
请参照图7,该图是本发明系统中发送方的主要组成结构框图,其发送方110主要包括周期触发单元1101和第二发送单元1102,其中这两个组成单元的作用及其连接关系如下:
周期触发单元1101,用于预先存储一周期规则,在到达该周期规则规定的每个周期时间点时,生成一个触发信号;
第二发送单元1102,与周期触发单元1101存在逻辑连接,用于分别在周期触发单元1101每次发来触发信号时,发送一个视频数据帧到中转服务器30中的缓存单元301进行缓存。
请参照图8,该图是本发明系统中发送方的第一实施例组成结构框图,其发送方110在图7组成结构的基础上,进而还包括计数单元1103和完整帧发送触发单元1104,其中计数单元1103和完整帧发送触发单元1104的主要作用及其相互之间的连接关系如下:
计数单元1103,与第二发送单元1102存在逻辑连接,用于对第二发送单元1102已经发送的视频数据帧个数进行计数处理;
完整帧发送触发单元1104,与计数单元1103存在逻辑连接,用于从第一个视频数据帧开始,分别在计数单元1103计数到达n×N时(其中n为自然数,N为规定的间隔帧数),触发第二发送单元1102发送一个完整的视频数据帧到中转服务器30中的缓存单元301进行缓存;并第二发送单元1102在得不到完整帧发送触发单元1104的触发时,分别将视频数据帧以缺省帧头形式发送到中转服务器30中的缓存单元301进行缓存。
请参照图9,该图是本发明系统中发送方的第二实施例组成结构框图,其发送方110在图7组成结构的基础上,进而还包括间隔时间点触发单元1105,与第二发送单元1102存在逻辑连接,用于预先存储一间隔时间规则,以在从第一个视频数据帧开始,在该间隔时间规则所规定的每个间隔时间点,触发第二发送单元1102发送一个完整的视频数据帧到中转服务器30中缓存单元301进行缓存;并第二发送单元1102在得不到间隔时间点触发单元1105的触发时,分别将视频数据帧以缺省帧头形式发送到中转服务器30中缓存单元301进行缓存。
请参照图10,该图是本发明系统中接收方的第一实施例主要组成结构框图,其接收方210主要包括第一接收单元2101、第一解码单元2102和第一请求消息发送单元2103三个部分,其各个组成部分的作用及其相互连接关系如下:
第一接收单元2101,与中转服务器30中的第一发送单元303存在逻辑连接,用于分别接收中转服务器30中的第一发送单元303发来的每一视频数据帧;
第一解码单元2102,与第一接收单元2101存在逻辑连接,用于分别对第一接收单元2101接收的每一视频数据帧进行解码处理;
第一请求消息发送单元2103,分别与第一解码单元2102和中转服务器30中的数据帧提取单元302存在逻辑连接,用于在第一解码单元2102对当前接收的视频数据帧进行解码处理前,向中转服务器30中的数据帧提取单元302发送用于请求中转服务器30中的数据帧提取单元302发送下一视频数据帧的请求消息。
请参照图11,该图是本发明系统中接收方的第二实施例主要组成结构框图,其接收方210主要包括第二接收单元2104、帧头提取单元2105、帧头缓存单元2106、第二解码单元2107和第二请求消息发送单元2108,其中各个组成部分的作用及其相互之间的连接关系如下:
第二接收单元2104,与中转服务器30中的第一发送单元303存在逻辑连接,用于分别接收中转服务器30中的第一发送单元303发来的每一视频数据帧;
帧头提取单元2105,与第二接收单元2104存在逻辑连接,用于对第二接收单元2104接收的每一个完整的视频数据帧进行提取帧头数据处理;
帧头缓存单元2106,与帧头提取单元2105存在逻辑连接,用于对帧头提取单元2105最近一次提取的帧头数据进行缓存;
第二解码单元2107,分别与帧头缓存单元2106和第二接收单元2104存在逻辑连接,用于根据帧头缓存单元2106中当前缓存的帧头数据,分别对第二接收单元2104接收的每一视频数据帧进行解码处理;
第二请求消息发送单元2108,分别与第二解码单元2107和中转服务器30中的数据帧提取单元302存在逻辑连接,用于在第二解码单元2107对当前接收的视频数据帧进行解码处理前,向中转服务器30中的数据帧提取单元302发送用于请求中转服务器30中的数据帧提取单元302发送下一视频数据帧的请求消息。
其中上述系统中所提及的发送方可以为PC终端或为移动终端,接收方为移动终端,若发送方为移动终端或接收方为移动终端时,则要求该移动终端支持JPEG协议的编解码处理能力。
其中上述本发明视频数据传输系统中的各个功能单元的具体实现原理与本发明上述提出的视频数据传输方法的相应部分的实现原理相同或相似,请具体参照之,这里不再过多赘述。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (19)
1、一种视频数据传输方法,应用在包括视频数据发送方、中转服务器和视频数据接收方的视频通信系统,其特征在于,包括步骤:
A.所述发送方从第一个视频数据帧开始,每隔N帧发送一个完整的视频数据帧到中转服务器,并且将其余的视频数据帧以缺省帧头形式发送到中转服务器;
B.所述中转服务器分别对所述发送方发来的视频数据帧进行缓存;
C.中转服务器在每次接收到所述接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到所述接收方。
2、如权利要求1所述的方法,其特征在于,所述步骤A中,所述发送方分别在预先设置的一周期规则规定的每个周期时间点,发送一个视频数据帧到中转服务器。
3、如权利要求1所述的方法,其特征在于,还包括步骤:
D.所述接收方在第一次接收到中转服务器发来的完整视频数据帧时,将该接收的完整视频数据帧的帧头数据保存到本地;并
E.根据本地保存的帧头数据对后续接收的缺省帧头的视频数据帧进行解码处理;
F.所述接收方在下一次接收到中转服务器发来的完整视频数据帧时,使用接收的该完整视频数据帧的帧头数据更新本地上一次保存的帧头数据,然后返回步骤E。
4、如权利要求1所述的方法,其特征在于,所述步骤C中,接收方在对中转服务器当前发来的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
5、如权利要求1、2、3或4所述的方法,其特征在于,所述发送方为移动终端或PC终端;所述接收方为移动终端。
6、如权利要求5所述的方法,其特征在于,所述发送方为移动终端时,所述发送方使用联合图片专家组JPEG协议对视频数据进行编解码处理;并
所述接收方为移动终端时,所述接收方使用联合图片专家组JPEG协议对视频数据进行编解码处理。
7、如权利要求1、2、3或4所述的方法,其特征在于,所述视频通信系统采用TCP/IP协议或UDP协议对视频数据帧进行传输。
8、一种视频数据传输系统,包括视频数据发送方、中转服务器和视频数据接收方,其特征在于,所述发送方具体包括:
第一发送单元,用于发送视频数据帧到中转服务器;
计数单元,用于对所述第一发送单元已发送的视频数据帧个数进行计数;
完整帧发送触发单元,用于从第一发送单元发送的第一个视频数据帧开始,分别在所述计数单元计数到达n×N时,触发第一发送单元发送一个完整的视频数据帧到中转服务器;所述第一发送单元在得不到所述完整帧发送触发单元的触发时,将视频数据帧以缺省帧头形式发送到中转服务器,其中n为自然数,N为规定的间隔帧数;
所述中转服务器包括:
缓存单元,用于分别对所述发送方发来的视频数据帧进行缓存;
数据帧提取单元,用于在每次接收到所述接收方发来的请求消息时,在所述缓存单元当前缓存的视频数据帧中提取最先接收的一个视频数据帧;
第二发送单元,用于分别将所述数据帧提取单元提取的每一视频数据帧发送到接收方。
9、如权利要求8所述的系统,其特征在于,所述发送方还包括:
周期触发单元,用于预先存储一周期规则,在到达所述周期规则规定的每个周期时间点时,生成一触发信号,所述第一发送单元分别在所述周期触发单元每次发来触发信号时,发送一个视频数据帧到中转服务器。
10、如权利要求8所述的系统,其特征在于,所述接收方具体包括:
接收单元,用于分别接收中转服务器发来的每一视频数据帧;
帧头提取单元,用于对所述接收单元接收的每一个完整的视频数据帧进行提取帧头数据处理;
帧头缓存单元,用于对所述帧头提取单元最近一次提取的帧头数据进行缓存;
解码单元,用于根据所述帧头缓存单元中当前缓存的帧头数据,分别对所述接收单元接收的每一视频数据帧进行解码处理;
请求消息发送单元,用于在解码单元对当前接收的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
11、如权利要求8、9或10所述的系统,其特征在于,所述发送方为移动终端或PC终端;所述接收方为移动终端。
12、如权利要求11所述的系统,其特征在于,所述移动终端支持对视频数据进行联合图片专家组JPEG协议的编解码处理。
13、一种视频数据传输方法,应用在包括视频数据发送方、中转服务器和视频数据接收方的视频通信系统,其特征在于,包括步骤:
A.所述发送方从第一个视频数据帧开始,在每个规定间隔时间点发送一个完整的视频数据帧到中转服务器,并且将其余时间的视频数据帧分别以缺省帧头形式发送到中转服务器;
B.所述中转服务器分别对所述发送方发来的视频数据帧进行缓存;
C.中转服务器在每次接收到所述接收方发来的请求消息时,将当前缓存的视频数据帧中最先接收的一个视频数据帧发送到所述接收方。
14、如权利要求13所述的方法,其特征在于,所述步骤A中,所述发送方分别在预先设置的一周期规则规定的周期时间点,发送一个视频数据帧到中转服务器。
15、如权利要求13所述的方法,其特征在于,还包括步骤:
D.所述接收方在第一次接收到中转服务器发来的完整视频数据帧时,将该接收的完整视频数据帧的帧头数据保存到本地;并
E.根据本地保存的帧头数据对后续接收的缺省帧头的视频数据帧进行解码处理;
F.所述接收方在下一次接收到中转服务器发来的完整视频数据帧时,使用接收的该完整视频数据帧的帧头数据更新本地上一次保存的帧头数据,然后返回步骤E。
16、如权利要求13所述的方法,其特征在于,所述步骤E中,接收方在对中转服务器当前发来的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
17、一种视频数据传输系统,包括视频数据发送方、中转服务器和视频数据接收方,其特征在于,所述发送方具体包括:
第一发送单元,用于发送视频数据帧到中转服务器;
间隔时间点触发单元,用于预先存储一间隔时间规则,在从第一个视频数据帧开始,在所述间隔时间规则所规定的每个间隔时间点,触发第一发送单元发送一个完整的视频数据帧到中转服务器;所述第一发送单元在得不到所述间隔时间点触发单元的触发时,将视频数据帧以缺省帧头形式发送到中转服务器;
所述中转服务器包括:
缓存单元,用于分别对所述发送方发来的视频数据帧进行缓存;
数据帧提取单元,用于在每次接收到所述接收方发来的请求消息时,在所述缓存单元当前缓存的视频数据帧中提取最先接收的一个视频数据帧;
第二发送单元,用于分别将所述数据帧提取单元提取的每一视频数据帧发送到接收方。
18、如权利要求17所述的系统,其特征在于,所述发送方还包括:
周期触发单元,用于预先存储一周期规则,在到达所述周期规则规定的每个周期时间点时,生成一触发信号,所述第一发送单元分别在所述周期触发单元每次发来触发信号时,发送一个视频数据帧到中转服务器。
19、如权利要求17所述的系统,其特征在于,所述接收方具体包括:
接收单元,用于分别接收中转服务器发来的每一视频数据帧;
帧头提取单元,用于对所述接收单元接收的每一个完整的视频数据帧进行提取帧头数据处理;
帧头缓存单元,用于对所述帧头提取单元最近一次提取的帧头数据进行缓存;
解码单元,用于根据所述帧头缓存单元中当前缓存的帧头数据,分别对所述接收单元接收的每一视频数据帧进行解码处理;
请求消息发送单元,用于在解码单元对当前接收的视频数据帧进行解码处理前,向中转服务器发送用于请求中转服务器发送下一视频数据帧的请求消息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2005100908811A CN100459695C (zh) | 2005-08-18 | 2005-08-18 | 视频数据传输方法及其传输系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2005100908811A CN100459695C (zh) | 2005-08-18 | 2005-08-18 | 视频数据传输方法及其传输系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1917618A CN1917618A (zh) | 2007-02-21 |
CN100459695C true CN100459695C (zh) | 2009-02-04 |
Family
ID=37738492
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2005100908811A Active CN100459695C (zh) | 2005-08-18 | 2005-08-18 | 视频数据传输方法及其传输系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100459695C (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101184112B (zh) * | 2007-12-20 | 2010-12-29 | 腾讯科技(深圳)有限公司 | 多媒体信息传输发布系统及其传输发布多媒体信息的方法 |
CN101184195B (zh) * | 2007-12-25 | 2010-04-14 | 腾讯科技(深圳)有限公司 | 音/视频直播系统和直播方法 |
CN102790710B (zh) * | 2011-05-16 | 2016-04-20 | 北京新媒传信科技有限公司 | Pc终端和手机的音视频通信方法及装置 |
KR101905621B1 (ko) * | 2012-02-16 | 2018-10-11 | 삼성전자 주식회사 | 카메라의 프레임 이미지 전송 장치 및 방법 |
CN108806146A (zh) * | 2018-06-06 | 2018-11-13 | 合肥嘉仕诚能源科技有限公司 | 一种安防监控动态目标锁定追踪方法及系统 |
CN110149480A (zh) * | 2019-05-27 | 2019-08-20 | 南昌大学 | 一种视频图像处理及传输系统 |
CN111479355B (zh) * | 2020-04-17 | 2021-08-13 | 深圳爱克莱特科技股份有限公司 | 一种用于led播放系统的三缓存的帧保护方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040063449A1 (en) * | 2002-09-30 | 2004-04-01 | Comverse Network Systems, Ltd. | Multimedia messaging method and system for transferring multimedia content |
CN1505344A (zh) * | 2002-12-04 | 2004-06-16 | ��ʽ����Ntt����Ħ | 中继设备、控制内容传送的方法、以及内容传送系统 |
WO2004068880A1 (en) * | 2003-01-29 | 2004-08-12 | Hinet Advanced Technology & Information Inc. | Method of providing multimedia messaging service |
CN1522535A (zh) * | 2002-04-03 | 2004-08-18 | 三菱电机株式会社 | 视频中继装置及视频分布系统及视频中继方法 |
CN1536911A (zh) * | 2003-04-10 | 2004-10-13 | ��������ķ������ | 基于推技术发送视频信息到移动电话的方法 |
EP1482748A2 (en) * | 2003-05-30 | 2004-12-01 | Openwave Systems Inc. | Inbox caching of messages on a mobile terminal |
-
2005
- 2005-08-18 CN CNB2005100908811A patent/CN100459695C/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1522535A (zh) * | 2002-04-03 | 2004-08-18 | 三菱电机株式会社 | 视频中继装置及视频分布系统及视频中继方法 |
US20040063449A1 (en) * | 2002-09-30 | 2004-04-01 | Comverse Network Systems, Ltd. | Multimedia messaging method and system for transferring multimedia content |
CN1505344A (zh) * | 2002-12-04 | 2004-06-16 | ��ʽ����Ntt����Ħ | 中继设备、控制内容传送的方法、以及内容传送系统 |
WO2004068880A1 (en) * | 2003-01-29 | 2004-08-12 | Hinet Advanced Technology & Information Inc. | Method of providing multimedia messaging service |
CN1536911A (zh) * | 2003-04-10 | 2004-10-13 | ��������ķ������ | 基于推技术发送视频信息到移动电话的方法 |
EP1482748A2 (en) * | 2003-05-30 | 2004-12-01 | Openwave Systems Inc. | Inbox caching of messages on a mobile terminal |
Also Published As
Publication number | Publication date |
---|---|
CN1917618A (zh) | 2007-02-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100459695C (zh) | 视频数据传输方法及其传输系统 | |
CN102075728B (zh) | 一种共享音频和/或视频的方法及系统 | |
CN111246284B (zh) | 视频流播放方法、系统、终端及存储介质 | |
CN103248939B (zh) | 一种实现多屏同步显示的方法及系统 | |
CN108848060B (zh) | 一种多媒体文件处理方法、处理系统及计算机可读存储介质 | |
CN102025965B (zh) | 视频通话方法及可视电话 | |
CN110430441B (zh) | 一种云手机视频采集方法、系统、装置及存储介质 | |
AU2017254981A1 (en) | Reduced latency server-mediated audio-video communication | |
CN108347580B (zh) | 一种处理视频帧数据的方法及电子设备 | |
CN108200447A (zh) | 直播数据传输方法、装置、电子设备、服务器及存储介质 | |
CN110771160A (zh) | 视频均匀显示方法、终端设备、机器可读存储介质 | |
CN113727185B (zh) | 视频帧播放方法及系统 | |
CN103986646A (zh) | 一种消息传输方法、系统及终端设备 | |
CN103916620A (zh) | 视频通话方法及装置、移动终端 | |
CN102959955A (zh) | 共享图像 | |
CN108282685A (zh) | 一种音视频同步的方法及监控系统 | |
CN107801049A (zh) | 一种实时视频传送、播放方法及装置 | |
CN110024395A (zh) | 图像数据处理、传输的方法以及控制终端 | |
CN110996122B (zh) | 视频帧传输方法、装置、计算机设备及存储介质 | |
CN113973224B (zh) | 媒体信息的传输方法、计算设备及存储介质 | |
CN112929704B (zh) | 数据传输方法、装置、电子设备以及存储介质 | |
CN110413240A (zh) | 一种交互式会议系统及多终端设备同屏显示的方法 | |
CN103929682A (zh) | 一种在视频直播系统中设置关键帧的方法及装置 | |
CN111918142B (zh) | 国标视频码流转rtp流的平顺方法、装置、设备及介质 | |
CN104580289B (zh) | 一种对用户设备进行控制的方法、装置和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |