CN113891043A - 视频传输方法和装置 - Google Patents
视频传输方法和装置 Download PDFInfo
- Publication number
- CN113891043A CN113891043A CN202111146772.2A CN202111146772A CN113891043A CN 113891043 A CN113891043 A CN 113891043A CN 202111146772 A CN202111146772 A CN 202111146772A CN 113891043 A CN113891043 A CN 113891043A
- Authority
- CN
- China
- Prior art keywords
- video
- transmission bandwidth
- target
- level
- video recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
- H04N21/2743—Video hosting of uploaded data from client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频传输方法和装置。其中,该方法包括:获取第一视频录制设备录制的第一视频;在第一视频录制设备和视频监控平台之间的第一剩余传输带宽不足以传输第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备;在第一目标设备和视频监控平台之间的第一目标剩余传输带宽不足以传输第一视频的情况下,将第一目标设备录制的第二视频中的第一等级视频帧删除,并确定第一目标设备和视频监控平台之间的第二目标剩余传输带宽;在第二目标剩余传输带宽能够传输第一视频的情况下,使用第二目标剩余传输带宽传输第一视频。本发明解决了视频上传时,由于传输带宽不够造成的上传效率低的技术问题。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种视频传输方法和装置。
背景技术
现有技术中,在摄像头监控一定的区域的过程中,可以将监控的视频上传。然而,由于基站同时服务于基站内的用户,因此,在摄像头上传视频时,基站的传输带宽可能不够。而现有技术中,如果基站的传输带宽不够,则需要将摄像头拍摄的视频保存,等待基站的传输带宽足够时,才能上传,造成视频的上传效率低。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种视频传输方法和装置,以至少解决视频上传时,由于传输带宽不够造成的上传效率低的技术问题。
根据本发明实施例的一个方面,提供了一种视频传输方法,包括:获取第一视频录制设备录制的第一视频,其中,上述第一视频录制设备用于向视频监控平台传输上述第一视频;在上述第一视频录制设备和上述视频监控平台之间的第一剩余传输带宽不足以传输上述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽最大;在上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽不足以传输上述第一视频的情况下,将上述第一目标设备录制的第二视频中的第一等级视频帧删除,并确定上述第一目标设备和上述视频监控平台之间的第二目标剩余传输带宽,其中,上述第二视频中至少包括上述第一等级视频帧和第二等级视频帧;在上述第二目标剩余传输带宽能够传输上述第一视频的情况下,使用上述第二目标剩余传输带宽传输上述第一视频。
根据本发明实施例的另一方面,还提供了一种视频传输装置,包括:获取单元,用于获取第一视频录制设备录制的第一视频,其中,上述第一视频录制设备用于向视频监控平台传输上述第一视频;第一确定单元,用于在上述第一视频录制设备和上述视频监控平台之间的第一剩余传输带宽不足以传输上述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽最大;第二确定单元,用于在上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽不足以传输上述第一视频的情况下,将第二视频中的第一等级视频帧删除,并确定上述第一目标设备和上述视频监控平台之间的第二目标剩余传输带宽,其中,上述第一视频中至少包括上述第一等级视频帧和第二等级视频帧;第一传输单元,用于在上述第二目标剩余传输带宽能够传输上述第一视频的情况下,使用上述第二目标剩余传输带宽传输上述第一视频。
根据本发明实施例的又一方面,还提供了一种计算机可读的存储介质,该计算机可读的存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述视频传输方法。
根据本发明实施例的又一方面,还提供了一种电子设备,包括存储器和处理器,上述存储器中存储有计算机程序,上述处理器被设置为通过上述计算机程序执行上述的视频传输方法。
在本发明实施例中,获取第一视频录制设备录制的第一视频,其中,上述第一视频录制设备用于向视频监控平台传输上述第一视频;在上述第一视频录制设备和上述视频监控平台之间的第一剩余传输带宽不足以传输上述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽最大;在上述第一目标设备和上述视频监控平台之间的第一目标剩余传输带宽不足以传输上述第一视频的情况下,将上述第一目标设备录制的第二视频中的第一等级视频帧删除,并确定上述第一目标设备和上述视频监控平台之间的第二目标剩余传输带宽,其中,上述第二视频中至少包括上述第一等级视频帧和第二等级视频帧;在上述第二目标剩余传输带宽能够传输上述第一视频的情况下,使用上述第二目标剩余传输带宽传输上述第一视频,由于在上述方法中,在上传视频录制设备录制的第一视频的时候,如果第一视频录制设备的第一传输带宽不够,则可以通过其他视频录制设备来传输第一视频。且如果其他视频录制设备的传输带宽也不够,则可以由其他视频录制设备上传到视频监控平台,此外,在其他视频录制设备的传输宽带也不够的情况下,还可以将其他视频录制设备中的部分不重要内容删除,从而可以提高视频上传的效率,进而解决了视频上传时,由于传输带宽不够造成的上传效率低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种可选的视频传输方法的应用环境的示意图;
图2是根据本发明实施例的一种可选的视频传输方法的流程的示意图;
图3是根据本发明实施例的一种可选的视频传输方法的正常情况下的监控系统的示意图;
图4是根据本发明实施例的一种可选的视频传输方法的人群聚集情况下的监控系统的示意图;
图5是根据本发明实施例的一种可选的视频传输方法的余量带宽反馈系统的示意图;
图6是根据本发明实施例的一种可选的视频传输方法的申请方处理流程示意图;
图7是根据本发明实施例的一种可选的视频传输方法的反馈余量带宽的流程示意图;
图8是根据本发明实施例的一种可选的视频传输方法的步长低等级视频帧的流程示意图;
图9是根据本发明实施例的一种可选的视频传输装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例的一个方面,提供了一种视频传输方法,可选地,作为一种可选的实施方式,上述视频传输方法可以但不限于应用于如图1所示的环境中。
如图1的步骤S102到S110所示,第一视频录制设备102包括了存储器104,用于存储第一视频录制设备102运行过程中录制的第一视频、处理器106,用于上传第一视频、显示器108,用于显示第一视频。第一视频录制设备102可以通过自身上传第一视频。如果自身的传输带宽不够,则可以使用第一目标设备110上传第一视频,如果第一目标设备110的传输带宽也不够,则可以删除第二目标设备112的第一等级视频帧。然后使用第二目标设备112上传第一视频到视频传输平台114。
可选地,在本实施例中,上述第一视频录制设备可以包括携带有摄像头的智能设备或者摄像机,可以包括但不限于以下至少之一:手机(如Android手机、iOS手机等)、平板电脑、掌上电脑、MID(Mobile Internet Devices,移动互联网设备)、PAD等。上述仅是一种示例,本实施例中对此不作任何限定。
可选地,作为一种可选的实施方式,如图2所示,上述视频传输方法包括:
S202,获取第一视频录制设备录制的第一视频,其中,第一视频录制设备用于向视频监控平台传输第一视频;
S204,在第一视频录制设备和视频监控平台之间的第一剩余传输带宽不足以传输第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,第一目标设备和视频监控平台之间的第一目标剩余传输带宽最大;
S206,在第一目标设备和视频监控平台之间的第一目标剩余传输带宽不足以传输第一视频的情况下,将第一目标设备录制的第二视频中的第一等级视频帧删除,并确定第一目标设备和视频监控平台之间的第二目标剩余传输带宽,其中,第二视频中至少包括第一等级视频帧和第二等级视频帧;
S208,在第二目标剩余传输带宽能够传输第一视频的情况下,使用第二目标剩余传输带宽传输第一视频。
可选地,本申请实施例中,上述视频传输方法可以但不限于应用于摄像头通过视频录制设备上传视频的过程中。摄像头拍摄视频之后,拍摄的视频可以通过自身或者自身所在的程序、硬件来上传。而如果上传时,剩余传输带宽不足,则摄像头可以通过其他摄像头上传视频。而如果其他摄像头的剩余传输带宽也不足,则可以将其他摄像头拍摄的视频中的一部分视频帧删除保存到存储器中,然后利用删除而得到的传输宽带以将摄像头所拍摄的视频视频帧上传。等其他摄像头的剩余传输带宽足够时,再上传被删除保存到存储器中的视频帧。
可选地,本实施例中,摄像头在上传第一视频到视频监控平台时,可以通过基站上传。每一个摄像头都可以对应一个基站,每一个基站传输一个摄像头拍摄的视频。如果一个基站的传输带宽不够,则可以使用其他基站辅助传输本基站对应的摄像头拍摄的视频。
可选地,本申请实施例中的第一视频录制设备可以为摄像头或者其他包括有摄像头的设备。
可选地,本申请实施例中,第二等级视频帧与第一等级视频帧可以为将第一视频中的视频帧进行拆分得到的视频帧。拆分方法有多种。例如,可以随机进行拆分,可以按照比例进行拆分,可以按照重要性进行拆分等。以按照重要性为例进行拆分,则可以将第一视频拆分成关键帧如关键I帧和非关键帧,而非关键帧又可以进行拆分,得非关键帧中的关键P帧和非关键P帧。也就是将第一视频拆分成了关键帧、非关键帧类型I和非关键帧类型II。关键帧即为关键I帧,非关键帧包括了非关键帧类型I也就是关键P帧和非关键帧类型II也就是非关键P帧。非关键帧中的非关键帧类型I和非关键帧类型II的比例可以根据实际情况进行调整。在上传第一视频时,可以将非关键帧类型II的视频帧删除。
可选地,本申请实施例中,以第一视频录制设备为摄像头为例,可以包括1个摄像头,一个摄像头在多个基站的覆盖范围内,也可以包括多个摄像头,每一个摄像头在一个基站的范围下。多个摄像头之间可以进行数据的交互。如果第一摄像头传输第一视频的第一基站的剩余传输带宽不够,则可以使用第一摄像头的其他基站传输第一视频。或者由第二摄像头对应的第二基站传输第一视频。
如果第二基站的剩余传输带宽也不足以传输第一视频,则删除第二基站本要传输的视频中不重要的视频帧,例如第二基站本要传输的第二视频中的非关键帧类型II的视频帧。然后由第二基站传输第一视频的视频帧。
本实施例中被删除的视频帧会被保存到存储器中,以便后续上传。
通过本申请实施例,获取第一视频录制设备录制的第一视频,其中,第一视频录制设备用于向视频监控平台传输第一视频;在第一视频录制设备和视频监控平台之间的第一剩余传输带宽不足以传输第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,第一目标设备和视频监控平台之间的第一目标剩余传输带宽最大;在第一目标设备和视频监控平台之间的第一目标剩余传输带宽不足以传输第一视频的情况下,将第一目标设备录制的第二视频中的第一等级视频帧删除,并确定第一目标设备和视频监控平台之间的第二目标剩余传输带宽,其中,第二视频中至少包括第一等级视频帧和第二等级视频帧;在第二目标剩余传输带宽能够传输第一视频的情况下,使用第二目标剩余传输带宽传输第一视频,由于在上述方法中,在上传视频录制设备录制的第一视频的时候,如果第一视频录制设备的第一传输带宽不够,则可以通过其他视频录制设备来传输第一视频。且如果其他视频录制设备的传输带宽也不够,则可以由其他视频录制设备上传到视频监控平台,此外,在其他视频录制设备的传输宽带也不够的情况下,还可以将其他视频录制设备中的部分不重要内容删除,从而可以提高视频上传的效率
作为一种可选的示例,上述方法还包括:
S1,在第二目标剩余传输带宽不足以传输第二等级视频帧的情况下,从多个第三视频录制设备中确定第二目标设备;
S2,在第三目标设备和视频监控平台之间的第三目标剩余传输带宽能够传输第一视频的情况下,使用第三目标剩余传输带宽传输第二等级视频帧。
需要说明的是,如果在删除了第二视频中不重要的视频帧后,第二目标剩余传输带宽还不足传输第一视频的情况下,还可以再次确定另一目标设备,即第二目标设备,并采用相同逻辑的方式对第二目标设备进行处理,直至完成第一视频的传输。
作为一种可选的示例,上述方法还包括:
在第三目标剩余传输带宽不足以传输第一视频的情况下,将第一等级视频帧与第二等级视频帧保存到存储器中;或者
在第三目标剩余传输带宽能够传输第二等级视频帧的情况下,将第一等级视频帧保存到存储器中。
也就是说,如果在将第一等级视频帧删除之后,第一视频也不能被上传,则将第一视频保存到存储器中,等待后续上传。如果第一视频帧删除后,可以传输第一视频,则上传第一视频以及第二等级视频帧,并将第一等级视频帧保存到存储器中。
作为一种可选的示例,在将第一等级视频帧和第二等级视频帧保存到存储器中之后,或将第一等级视频帧保存到存储器中后,方法还包括:
S1,在第一剩余传输带宽能够传输目标视频的情况下,使用第一剩余传输带宽传输目标视频,并通过第一剩余传输带宽传输存储器中的第一等级视频帧和第二等级视频帧,其中,目标视频为第一视频录制设备录制的第一视频后的视频;或者
S2,在第一剩余传输带宽能够传输目标视频的情况下,使用第一剩余传输带宽传输目标视频,并使用第一剩余传输带宽传输存储器中的第一等级视频帧,其中,目标视频为第一视频录制设备录制的第一视频后的视频。
也就是说,当第一等级视频帧和第二等级视频帧被保存到存储器或者第一视频帧被保存到存储器之后,如果第一基站的剩余传输带宽足够了,能够传输目标视频了,也就是能够传输第一视频后的视频了,则此时可以施工第一基站将保存的第一等级视频帧和第二等级视频帧或者单独的第一等级视频帧上传。即,第一基站的剩余传输带宽足够的情况下,将保存到存储器中的视频帧上传。
作为一种可选的示例,上述方法还包括:
在第一目标剩余传输带宽能够传输第一视频的情况下,使用第一目标剩余传输带宽传输第一视频。
如果第一目标基站的剩余传输带宽能够传输第一视频,则不再需要删除第一等级视频帧,直接传输第一视频即可。
作为一种可选的示例,在第一视频录制设备和视频监控平台之间的第一剩余传输带宽不足以传输第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备包括:
获取每一个第二视频录制设备的当前剩余传输带宽,其中,当前剩余传输带宽为第二视频录制设备传输录制的当前视频时,剩余的传输带宽;
将当前剩余传输带宽最大的第二视频录制设备确定为第一目标设备。
可选地,在第二视频录制设备使用的第二基站中确定第一目标视频录制设备的第一目标基站需要确定出每一个第二基站的剩余传输带宽。确定第二基站的剩余带宽可以根据第二基站目前正在服务的用户和目前需要上传的视频来确定第二基站的剩余传输带宽。可以接收第二基站发送的第二基站自身的剩余传输带宽。然后,将剩余传输带宽最大的基站确定为第一目标基站。
作为一种可选的示例,从多个第三视频录制设备中确定第二目标设备包括:
S1,获取每一个第三视频录制设备的当前剩余传输带宽,其中,第三视频录制设备的当前剩余传输带宽为第三视频录制设备传输录制的当前视频时剩余的传输带宽;
S2,将第三视频录制设备的当前剩余传输带宽最大的第二视频录制设备确定为第二目标设备。
可选地,在第二视频录制设备的第二基站中确定第二目标设备的第二目标基站需要确定出每一个第二基站的剩余传输带宽。确定第二基站的剩余带宽可以根据第二基站目前正在服务的用户和目前需要上传的视频来确定第二基站的剩余传输带宽。可以接收第二基站发送的第二基站自身的剩余传输带宽。然后,将剩余传输带宽最大的基站确定为第二目标基站。在确定第二目标基站的过程中,第二基站还可以但不限于需要对自身正在传输的当前视频执行删除部分视频帧的操作。以提供更多的剩余传输带宽。
作为一种可选的示例,获取每一个第三视频录制设备的当前剩余传输带宽包括:
将每一个第三视频录制设备确定为当前视频录制设备,对当前视频录制设备执行如下操作:
获取当前视频录制设备录制的当前视频;
将当前视频中的第一等级视频帧删除;
由当前视频录制设备将当前视频中的第二等级视频帧上传到视频监控平台;
将当前视频录制设备上传第二等级视频帧时,剩余的传输带宽确定为当前视频录制设备的当前剩余传输带宽。
结合一个具体的示例进行说明。
正常网络环境下的监控系统如下图3所示,前端设备(也就是摄像头,即本申请中的第一视频录制设备)A,B,C(前端设备A,B,C之间省略其他的中继前端设备)分别接入各自临近的基站接入点,即图3中的基站1到基站3。正常情况下,前端设备和普通用户都能够共用一个基站资源进行网络访问。前端设备A,B,C分别监控各自区域的人流量情况,通过人流量的密度评估当前监控区域的风险等级,按照风险等级进行监控视频帧传输等级调整,保证高风险监控区域视频高质量传输至视频监控平台。当人流量密度越大,监控区域风险越高时,需要进行高等级视频传输,要优先保障监控视频的网络资源。当人流量密度越小,监控区域风险越低时,可以进行低等级视频传输,并通过主动丢弃低等级视频帧传输,让出部分网络资源供其它重点监控区域设备使用。
本申请的监控区域等级分配依据以人流量密度参数举例,但不限于这种依据,还包括车流量密度,事故现场发生情况,自然灾害发生情况等。人流量越大,则监控等级越高,如发生自然灾害、事故等,则监控等级提高。人流量越小,或无灾害、事故等,监控等级越低。
在图4中,基站1出现人群聚集,由于人数较多,使用基站1的用户数较多,基站1的剩余的传输带宽不足以供给前端设备A进行录制的视频的网络传输。同时该基站1所在的区域又属于一个高风险监控区域,需要足够的带宽来传输当前的监控画面。此时设备A通过终端直通(device to device,简称为D2D)技术发起D2D组网,并从D2D网络中挑选出监控平台下的前端设备B。前端设备A通过前端设备B将前端设备A编码的监控画面转发传输到视频监控平台,同时设备B根据自身的监控区域的风险等级评估是否丢弃自身低等级视频帧传输来保证设备A的带宽需求。通过此种方法,保障监控网络在4G/5G环境下的健壮性以及重点监控区域的网络传输资源,降低基站部署数目,提升基站的负载均衡能力。当基站1的人群聚集消失,基站网络能力恢复后,监控设备A恢复原来的状态通过基站1继续传输监控画面,并将本地存储卡缓存的低等级视频帧补偿传输至视频监控平台。
视频编码器按照设定好的编码类型占比,将视频帧中非关键帧按照关键P帧和非关键P帧进行标识,每个GOP(Group Of Picture,指两个I帧之间的间隔)编码帧类型占比如下表1所示,表1为视频帧等级和每个编码GOP帧类型占比关系。其中,关键P帧和非关键P帧的标识可以按照人流量密度或者其他智能检测事件进行提前检测标记,编码输出的非关键帧类型I和II的比例可以根据监控区域风险等级和视频帧传输策略进行自动调节。
表1
视频帧等级 | 视频帧类型 | 每个编码GOP帧类型比例 |
高等级帧 | 关键帧,比如I帧 | 编码输出1个 |
中等级帧 | 非关键帧类型I,比如关键P帧 | 编码输出比例a,比如占非关键帧的40% |
低等级帧 | 非关键帧类型II,比如非关键P帧 | 编码输出比例b,比如占非关键帧的60% |
监控设备每个GOP传输视频帧总数Fout满足下面关系:
Fout=1+a*N+(1-δ)*b*N
其中,N表示一个GOP中非关键帧总数,a表示一个GOP中非关键帧类型I百分比,b表示一个GOP中非关键帧类型II百分比,δ表示视频帧传输丢帧因子,满足0≤δ≤1。
监控区域等级和视频帧传输等级关系如下表2所示,表2表示监控区域等级和视频帧传输等级关系。监控区域等级越高,则传输的非关键帧比例也越高,视频质量越好,需要的网络带宽也越大。本方案以三个监控等级和三个视频帧传输等级进行示例说明。
表2
监控区域等级 | 视频帧传输等级 | 帧类型编码输出比例 | 画面质量和带宽占用 |
高风险监控区 | 高(至少包含中等级帧) | a=80%,b=20% | 质量高,带宽占用大 |
低风险监控区 | 中(至少包含中等级帧) | a=60%,b=40% | 质量中,带宽占用中 |
正常监控区 | 低(至少包含中等级帧) | a=40%,b=60% | 质量低,带宽占用小 |
在余量带宽也就是剩余传输带宽的反馈系统中,对于有余量带宽需求的前端监控设备,通过D2D组网的监控设备余量带宽反馈系统进行处理,如下图5所示。当前端设备A接入基站的带宽不足时,会向视频监控平台获取所有接入该平台的前端设备IP,序列号和MAC地址信息等信息,同时视频监控平台授权设备A允许通过其他前端监控设备转发接入。通过D2D网络搜索出与设备A最匹配的同一个视频监控平台下的前端设备B,还可以匹配其他的监控设备C,后面步骤以设备A和设备B之间的协商为例进行说明。
设备A(申请方)向设备B(反馈方)发起余量带宽申请,并携带自身的监控区域等级和视频帧传输等级以及自身设备IP,序列号和MAC地址等信息进行校验。如果设备A未携带授权信息,则通过设备B向视频监控平台进行校验授权,避免设备A因基站1网络异常无法向视频监控平台获取授权。设备B获取平台校验成功后,返回自身评估后的余量带宽反馈给设备A,具体设备B的余量带宽的评估方法见后面说明。前端设备A根据设备B反馈的余量带宽,评估是否通过设备B进行视频转发,具体设备A如何选择最佳设备转发视频的方法见后面说明,这里只说明选择设备B的后续流程。如果设备A通过设备B转发视频,则设备A需要通知设备B将进行视频转发。如果设备A检测到与视频监控平台之间网络恢复正常,设备A恢复向监控平台直接发送视频,通知设备B停止转发并结束向设备B发送视频。同时设备A和设备B也恢复到原来的视频传输状态,并从本地存储中补偿上传丢弃的低层级视频帧。
对于余量带宽申请方(比如设备A),当对端设备(其他设备,可能存在多个)返回自己的余量带宽,申请方按照下图6的策略进行余量带宽和视频帧传输等级调整处理。当单个转发设备的余量带宽足够的时候,选择其中1个转发传输所有等级视频帧。当单个设备余量带宽不足时,则申请方将传输丢帧因子设置为1,主动丢弃传输低等级帧,选择其中1个余量带宽匹配的转发设备进行高、中等级视频帧传输。另外,申请方实时检测和视频监控平台之间的网络状态,如果网络恢复则自身恢复向视频监控平台直接传输视频,并通知转发设备停止转发并结束向转发设备发送视频。同时,当监控设备存在本地存储卡时,将主动丢弃的低等级帧按照视频编码时间和帧序号缓存到本地存储中,待接入网络恢复正常时进行补偿发送给视频监控平台,避免视频监控平台录像缺失。
对于余量带宽反馈方(比如设备B),余量带宽和视频帧传输等级调整处理策略如下图7所示。反馈方通过自身的余量带宽、当前监控区域等级和待转发设备监控区域等级,最终评估出合适的余量带宽反馈给请求方。当余量带宽不足时,且反馈方当前监控区域等级低于申请方,则会评估出将丢帧因子设置为1(主动丢弃低等级帧传输)后新的余量带宽,让出一部分带宽给高风险监控区域的设备进行视频发送。当申请方通知进行转发视频时,反馈方才会真实调整自身监控设备的视频帧传输丢帧因子(如果需要)。当申请方通知进行停止转发视频时,反馈方则恢复原有的视频传输状态。同时,当监控设备存在本地存储卡时,主动丢弃的低等级帧按照视频编码时间和帧序号缓存到本地存储中,待收到申请方停止转发视频通知时,反馈方对自身主动丢弃的低等级帧进行补偿发送给视频监控平台,避免视频监控平台录像缺失。
视频监控平台接收处理补偿传输低层级视频帧的方法如下图8所示,其中帧序号在同个设备中保持不相等。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
根据本发明实施例的另一个方面,还提供了一种用于实施上述视频传输方法的视频传输装置。如图9所示,该装置包括:
获取单元902,用于获取第一视频录制设备录制的第一视频,其中,第一视频录制设备用于向视频监控平台传输第一视频;
第一确定单元904,用于在第一视频录制设备和视频监控平台之间的第一剩余传输带宽不足以传输第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,第一目标设备和视频监控平台之间的第一目标剩余传输带宽最大;
第二确定单元906,用于在第一目标设备和视频监控平台之间的第一目标剩余传输带宽不足以传输第一视频的情况下,将第二视频中的第一等级视频帧删除,并确定第一目标设备和视频监控平台之间的第二目标剩余传输带宽,其中,第一视频中至少包括第一等级视频帧和第二等级视频帧;
第一传输单元908,用于在第二目标剩余传输带宽能够传输第一视频的情况下,使用第二目标剩余传输带宽传输第一视频。
可选地,本申请实施例中,上述视频传输装置可以但不限于应用于摄像头通过视频录制设备上传视频的过程中。摄像头拍摄视频之后,拍摄的视频可以通过自身或者自身所在的程序、硬件来上传。而如果上传时,剩余传输带宽不足,则摄像头可以通过其他摄像头上传视频。而如果其他摄像头的剩余传输带宽也不足,则摄像头可以将拍摄的视频中的一部分视频帧删除保存到存储器中,然后将另一部分视频帧上传。等摄像头的剩余传输带宽足够时,再上传被删除保存到存储器中的视频帧。
可选地,本实施例中,摄像头在上传第一视频到视频监控平台时,可以通过基站上传。每一个摄像头都可以对应一个基站,每一个基站传输一个摄像头拍摄的视频。如果一个基站的传输带宽不够,则可以使用其他基站辅助传输本基站对应的摄像头拍摄的视频。
可选地,本申请实施例中的第一视频录制设备可以为摄像头或者其他包括有摄像头的设备。
可选地,本申请实施例中,第二等级视频帧与第一等级视频帧可以为将第一视频中的视频帧进行拆分得到的视频帧。拆分方法有多种。例如,可以随机进行拆分,可以按照比例进行拆分,可以按照重要性进行拆分等。以按照重要性为例进行拆分,则可以将第一视频拆分成关键帧如关键I帧和非关键帧,而非关键帧又可以进行拆分,得非关键帧中的关键P帧和非关键P帧。也就是将第一视频拆分成了关键帧、非关键帧类型I和非关键帧类型II。关键帧即为关键I帧,非关键帧包括了非关键帧类型I也就是关键P帧和非关键帧类型II也就是非关键P帧。非关键帧中的非关键帧类型I和非关键帧类型II的比例可以根据实际情况进行调整。在上传第一视频时,可以将非关键帧类型II的视频帧删除。
可选地,本申请实施例中,以第一视频录制设备为摄像头为例,可以包括1个摄像头,一个摄像头在多个基站的覆盖范围内,也可以包括多个摄像头,每一个摄像头在一个基站的范围下。多个摄像头之间可以进行数据的交互。如果第一摄像头传输第一视频的第一基站的剩余传输带宽不够,则可以使用第一摄像头的其他基站传输第一视频。或者由第二摄像头对应的第二基站传输第一视频。
如果第二基站的剩余传输带宽也不足以传输第一视频,则删除第二基站本要传输的视频中不重要的视频帧,例如第二基站本要传输的第二视频中的非关键帧类型II的视频帧。然后由第二基站传输第一视频的视频帧。
本实施例中被删除的视频帧会被保存到存储器中,以便后续上传。本实施例的其他示例请参见上述示例,在此不再赘述。
根据本发明实施例的又一个方面,还提供了一种用于实施上述视频传输方法的电子设备,该电子设备可以是终端设备或服务器。该电子设备包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为通过运行计算机程序执行上述任一项方法实施例中的步骤。
在其他实施例中,上述终端设备或者服务器可以是一个分布式系统中的一个节点,其中,该分布式系统可以为区块链系统,该区块链系统可以是由该多个节点通过网络通信的形式连接形成的分布式系统。其中,节点之间可以组成点对点(P2P,Peer To Peer)网络,任意形式的计算设备,比如服务器、终端等电子设备都可以通过加入该点对点网络而成为该区块链系统中的一个节点。
根据本发明的实施例的又一方面,还提供了一种计算机可读的存储介质,该计算机可读的存储介质中存储有计算机程序,其中,该计算机程序被处理器运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(Random Access Memory,RAM)、磁盘或光盘等。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取的存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在存储介质中,包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的客户端,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种视频传输方法,其特征在于,包括:
获取第一视频录制设备录制的第一视频,其中,所述第一视频录制设备用于向视频监控平台传输所述第一视频;
在所述第一视频录制设备和所述视频监控平台之间的第一剩余传输带宽不足以传输所述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,所述第一目标设备和所述视频监控平台之间的第一目标剩余传输带宽最大;
在所述第一目标设备和所述视频监控平台之间的第一目标剩余传输带宽不足以传输所述第一视频的情况下,将所述第一目标设备录制的第二视频中的第一等级视频帧删除,并确定所述第一目标设备和所述视频监控平台之间的第二目标剩余传输带宽,其中,所述第二视频中至少包括所述第一等级视频帧和第二等级视频帧;
在所述第二目标剩余传输带宽能够传输所述第一视频的情况下,使用所述第二目标剩余传输带宽传输所述第一视频。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第二目标剩余传输带宽不足以传输所述第一视频的情况下,从多个第三视频录制设备中确定第二目标设备;
在所述第三目标设备和所述视频监控平台之间的第三目标剩余传输带宽能够传输所述第二等级视频帧的情况下,使用所述第三目标剩余传输带宽传输所述第二等级视频帧。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
在所述第三目标剩余传输带宽不足以传输所述第一视频的情况下,将所述第一等级视频帧与所述第二等级视频帧保存到存储器中;或者
在所述第三目标剩余传输带宽能够传输所述第一视频的情况下,将所述第一等级视频帧保存到所述存储器中。
4.根据权利要求3所述的方法,其特征在于,在将所述第一等级视频帧和所述第二等级视频帧保存到所述存储器中之后,或将所述第一等级视频帧保存到所述存储器中后,所述方法还包括:
在所述第一剩余传输带宽能够传输目标视频的情况下,使用所述第一剩余传输带宽传输所述目标视频,并通过所述第一剩余传输带宽传输所述存储器中的所述第一等级视频帧和所述第二等级视频帧,其中,所述目标视频为所述第一视频录制设备录制的所述第一视频后的视频;或者
在所述第一剩余传输带宽能够传输所述目标视频的情况下,使用所述第一剩余传输带宽传输所述目标视频,并使用所述第一剩余传输带宽传输所述存储器中的所述第一等级视频帧,其中,所述目标视频为所述第一视频录制设备录制的所述第一视频后的视频。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第一目标剩余传输带宽能够传输所述第一视频的情况下,使用所述第一目标剩余传输带宽传输所述第一视频。
6.根据权利要求1所述的方法,其特征在于,所述在所述第一视频录制设备和所述视频监控平台之间的第一剩余传输带宽不足以传输所述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备包括:
获取每一个所述第二视频录制设备的当前剩余传输带宽,其中,所述当前剩余传输带宽为所述第二视频录制设备传输录制的当前视频时,剩余的传输带宽;
将所述当前剩余传输带宽最大的第二视频录制设备确定为所述第一目标设备。
7.根据权利要求2所述的方法,其特征在于,所述从多个第三视频录制设备中确定第二目标设备包括:
获取每一个所述第三视频录制设备的当前剩余传输带宽,其中,所述第三视频录制设备的当前剩余传输带宽为所述第三视频录制设备传输录制的当前视频时剩余的传输带宽;
将所述第三视频录制设备的当前剩余传输带宽最大的第二视频录制设备确定为所述第二目标设备。
8.根据权利要求7所述的方法,其特征在于,所述获取每一个所述第三视频录制设备的当前剩余传输带宽包括:
将每一个所述第三视频录制设备确定为当前视频录制设备,对所述当前视频录制设备执行如下操作:
获取所述当前视频录制设备录制的当前视频;
将所述当前视频中的第一等级视频帧删除;
由所述当前视频录制设备将所述当前视频中的第二等级视频帧上传到所述视频监控平台;
将所述当前视频录制设备上传所述第二等级视频帧时,剩余的传输带宽确定为所述当前视频录制设备的当前剩余传输带宽。
9.一种视频传输装置,其特征在于,包括:
获取单元,用于获取第一视频录制设备录制的第一视频,其中,所述第一视频录制设备用于向视频监控平台传输所述第一视频;
第一确定单元,用于在所述第一视频录制设备和所述视频监控平台之间的第一剩余传输带宽不足以传输所述第一视频的情况下,从多个第二视频录制设备中确定出第一目标设备,其中,所述第一目标设备和所述视频监控平台之间的第一目标剩余传输带宽最大;
第二确定单元,用于在所述第一目标设备和所述视频监控平台之间的第一目标剩余传输带宽不足以传输所述第一视频的情况下,将第二视频中的第一等级视频帧删除,并确定所述第一目标设备和所述视频监控平台之间的第二目标剩余传输带宽,其中,所述第一视频中至少包括所述第一等级视频帧和第二等级视频帧;
第一传输单元,用于在所述第二目标剩余传输带宽能够传输所述第一视频的情况下,使用所述第二目标剩余传输带宽传输所述第一视频。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
第三确定单元,用于在所述第二目标剩余传输带宽不足以传输所述第一视频的情况下,从多个第三视频录制设备中确定第二目标设备;
第二传输单元,用于在所述第三目标设备和所述视频监控平台之间的第三目标剩余传输带宽能够传输所述第二等级视频帧的情况下,使用所述第三目标剩余传输带宽传输所述第二等级视频帧。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111146772.2A CN113891043A (zh) | 2021-09-28 | 2021-09-28 | 视频传输方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111146772.2A CN113891043A (zh) | 2021-09-28 | 2021-09-28 | 视频传输方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113891043A true CN113891043A (zh) | 2022-01-04 |
Family
ID=79007635
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111146772.2A Pending CN113891043A (zh) | 2021-09-28 | 2021-09-28 | 视频传输方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113891043A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110505524A (zh) * | 2019-07-02 | 2019-11-26 | 中国联合网络通信集团有限公司 | 一种视频传输方法及装置 |
CN112055177A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频分层的协商传输方法、电子设备以及计存储介质 |
CN112055175A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频分区的协商传输方法、电子设备以及计存储介质 |
CN112055176A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频码流的协商传输方法、电子设备以及计存储介质 |
US10939120B1 (en) * | 2017-12-14 | 2021-03-02 | Amazon Technologies, Inc. | Video upload in limited bandwidth |
-
2021
- 2021-09-28 CN CN202111146772.2A patent/CN113891043A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10939120B1 (en) * | 2017-12-14 | 2021-03-02 | Amazon Technologies, Inc. | Video upload in limited bandwidth |
CN110505524A (zh) * | 2019-07-02 | 2019-11-26 | 中国联合网络通信集团有限公司 | 一种视频传输方法及装置 |
CN112055177A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频分层的协商传输方法、电子设备以及计存储介质 |
CN112055175A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频分区的协商传输方法、电子设备以及计存储介质 |
CN112055176A (zh) * | 2020-08-28 | 2020-12-08 | 浙江大华技术股份有限公司 | 基于视频码流的协商传输方法、电子设备以及计存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11284126B2 (en) | Method and system for streaming media live broadcast | |
CN104767782A (zh) | 一种关联照片事件的方法和装置 | |
US10681314B2 (en) | Moving image splitting device and monitoring method | |
CN112261353B (zh) | 一种视频监控分流方法、系统以及计算机可读存储介质 | |
US11528303B2 (en) | Method and system for responding to video call service | |
WO2018166415A1 (zh) | 云存储系统、媒体数据存储方法及系统 | |
CN108769805B (zh) | 数据传输方法、装置、计算机设备及存储介质 | |
CN110381160B (zh) | 通信信息交互方法、装置、存储介质及计算机设备 | |
CN113301299B (zh) | 一种多通道视频传输方法、系统、终端以及存储介质 | |
CN112055176A (zh) | 基于视频码流的协商传输方法、电子设备以及计存储介质 | |
US20140055627A1 (en) | Information processing apparatus, data distribution system, method of controlling information processing apparatus, and storage medium | |
CN112584194A (zh) | 视频码流的推送方法、装置、计算机设备和存储介质 | |
CN112055177A (zh) | 基于视频分层的协商传输方法、电子设备以及计存储介质 | |
CN112055175B (zh) | 基于视频分区的协商传输方法、电子设备以及计存储介质 | |
CN103475593A (zh) | 数据流的处理方法和装置 | |
CN111263113B (zh) | 数据包的发送方法及装置、数据包的处理方法及装置 | |
CN112866390A (zh) | 一种数据传输方法、装置、终端设备和存储介质 | |
CN111654526A (zh) | 一种流媒体服务器的负载均衡方法及系统 | |
CN113891043A (zh) | 视频传输方法和装置 | |
CN102387062B (zh) | 动态桥接点改善p2p节点在跨网络时的传输速度的方法 | |
TWI573448B (zh) | 串流連線管理方法及串流資料連線系統 | |
TWI680668B (zh) | 畫面影像傳輸方法、影像復原方法、畫面影像傳輸系統、影像復原系統、畫面影像傳輸程式、影像復原程式、影像壓縮方法、影像壓縮系統及影像壓縮程式 | |
CN107071038B (zh) | 一种传输多媒体数据的方法及装置 | |
JP7021842B2 (ja) | 映像配信システム及び映像配信方法 | |
WO2018012591A1 (ja) | アプリケーション層マルチキャスト配信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |