CN114520891B - 一种基于多个前端视频设备的数据传输方法及相关装置 - Google Patents

一种基于多个前端视频设备的数据传输方法及相关装置 Download PDF

Info

Publication number
CN114520891B
CN114520891B CN202011312570.6A CN202011312570A CN114520891B CN 114520891 B CN114520891 B CN 114520891B CN 202011312570 A CN202011312570 A CN 202011312570A CN 114520891 B CN114520891 B CN 114520891B
Authority
CN
China
Prior art keywords
key frame
end video
time
frame generation
period
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011312570.6A
Other languages
English (en)
Other versions
CN114520891A (zh
Inventor
张金玉
王飞
李翔
邓志吉
刘明
叶奇
方勇军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202011312570.6A priority Critical patent/CN114520891B/zh
Priority to EP21879311.5A priority patent/EP4205386A4/en
Priority to PCT/CN2021/122903 priority patent/WO2022078266A1/en
Publication of CN114520891A publication Critical patent/CN114520891A/zh
Priority to US18/192,665 priority patent/US20230262266A1/en
Application granted granted Critical
Publication of CN114520891B publication Critical patent/CN114520891B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种基于多个前端视频设备的数据传输方法及相关装置，该方法包括：获取当前已接入后端设备的所有前端视频设备的关键帧发送时间段，将关键帧发送时间段存在重叠的前端视频设备确定为碰撞前端视频设备；将至少部分碰撞前端视频设备的关键帧产生时间进行调整，以获得碰撞前端视频设备调整后的关键帧产生时间；根据调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备。通过上述方式，本申请能够简化检测发生关键帧碰撞的碰撞前端视频设备的流程，并对碰撞前端视频设备的关键帧产生时间调整，使前后端设备在预设周期内更均匀地发送和接收关键帧，降低关键帧碰撞的概率以提高发送和接收关键帧的稳定性。

Description

一种基于多个前端视频设备的数据传输方法及相关装置
技术领域
本申请涉及数据通信技术领域，特别是涉及一种基于多个前端视频设备的数据传输方法及相关装置。
背景技术
前端视频设备比如网络摄像机(IP Camera，IPC)已被广泛应用于安防领域，在当前的应用环境下，多个前端视频设备会接入到后端设备并向后端设备上传视频数据，其中，视频数据的一个画面组(Group of Pictures，GOP)包括一个关键帧(I帧)，而前端视频设备数量越多，多个关键帧同时经由网络到达后端设备的概率就越大，从而发生关键帧碰撞的情况，影响关键帧传输的实时性和稳定性。
其中，关键帧碰撞在网络上表现为瞬时的网络突发，具体如图1所示，图1为关键帧碰撞引起的瞬时网络突发一实施方式的效果示意图。由于无线上行链路空口资源有限，关键帧碰撞概率越大，无线上行链路发生拥塞、丢包甚至视频卡顿的概率就越大。
发明内容
本申请主要解决的技术问题是提供一种基于多个前端视频设备的数据传输方法及相关装置，能够简化检测发生关键帧碰撞的碰撞前端视频设备的流程，并对碰撞前端视频设备的关键帧产生时间调整，使前后端设备在预设周期内更均匀地发送和接收关键帧。
为解决上述技术问题，本申请第一方面提供一种基于多个前端视频设备的数据传输方法，该方法包括：获取当前已接入后端设备的所有前端视频设备的关键帧发送时间段，将所述关键帧发送时间段存在重叠的所述前端视频设备确定为碰撞前端视频设备；将至少部分所述碰撞前端视频设备的关键帧产生时间进行调整，以获得所述碰撞前端视频设备调整后的关键帧产生时间；根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备。
其中，所述将至少部分所述碰撞前端视频设备的关键帧产生时间进行调整，以获得所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：获取在预设周期中的各个空闲时间段；将至少部分所述碰撞前端视频设备的关键帧产生时间分别调整到至少部分所述空闲时间段中，以获得所述碰撞前端视频设备调整后的关键帧产生时间。
其中，所述获取在预设周期中的各个空闲时间段的步骤，包括：获取连接于所述后端设备的所有前端视频设备的参数信息，其中，所述参数信息包括所述前端视频设备的关键帧发送时间段和画面组时间；将所述关键帧发送时间段散列到以所述画面组时间为所述预设周期的时间范围中，以提取所述预设周期内的所有空闲时间段。
其中，所述将至少部分所述碰撞前端视频设备的关键帧产生时间分别调整到至少部分所述空闲时间段中，以获得所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：保持所述碰撞前端视频设备中的一个所述碰撞前端视频设备的关键帧产生时间不变，将其余所述碰撞前端视频设备的关键帧产生时间调整到至少部分所述空闲时间段的中点位置，以获得其余所述碰撞前端视频设备调整后的关键帧产生时间。
其中，所述将其余所述碰撞前端视频设备的关键帧产生时间调整到至少部分所述空闲时间段的中点位置，以获得其余所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：将所有所述空闲时间段按照时间长度进行递增排序；根据所述空闲时间段的时间长度调整并获得其余所述碰撞前端视频设备调整后的关键帧产生时间。
其中，所述根据所述空闲时间段的时间长度调整并获得其余所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：获得当前所有所述空闲时间段中时间长度最长的第一空闲时间段；将其中一个所述碰撞前端视频设备的关键帧产生时间调整至所述第一空闲时间段的中点位置；判断所述碰撞前端视频设备是否调整完毕；若否，进一步判断是否还有剩余的空闲时间段，若是，则回到所述获得当前所有所述空闲时间段中时间长度最长的第一空闲时间段的步骤，否则将剩余未做调整的所述碰撞前端视频设备的关键帧产生时间平均分配到所述预设周期中。
其中，所述根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备的步骤，包括：获得所述碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值；将包含所述时间差值的关键帧产生命令发送给对应的前端视频设备，以使所述前端视频设备延迟所述时间差值后产生关键帧。
其中，所述根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备的步骤，包括：获得所述碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值；延迟所述时间差值后将所述关键帧产生命令发送给对应的前端视频设备，以使所述前端视频设备接收到所述关键帧产生命令后立即产生关键帧。
为解决上述技术问题，本申请第二方面提供一种电子设备，该电子设备包括相互耦接的存储器和处理器，其中，所述存储器存储有程序数据，所述处理器调用所述程序数据以执行上述第一方面的基于多个前端视频设备的数据传输方法。
为解决上述技术问题，本申请第三方面提供一种计算机存储介质，该计算机存储介质上存储有程序数据，所述程序数据被处理器执行时实现上述第一方面的基于多个前端视频设备的数据传输方法。
本申请的有益效果是：本申请将关键帧发送时间段存在相互重叠的前端视频设备确定为碰撞前端视频设备，简化了关键帧碰撞检测流程，在判断到存在发生关键帧碰撞的碰撞前端视频设备后，对碰撞前端视频设备的关键帧产生时间进行调整，以获得部分碰撞前端视频设备调整后的关键帧产生时间，根据调整后的关键帧产生时间生成关键帧产生命令下发给对应的前端视频设备，以使前后端设备在预设周期内更均匀地发送和接收关键帧，进而降低关键帧碰撞的概率以提高前后端设备发送和接收关键帧的稳定性。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。其中：
图1是关键帧碰撞引起的瞬时网络突发一实施方式的效果示意图；
图2是本申请提供的基于多个前端视频设备的数据传输方法一实施方式的流程示意图；
图3是本申请提供的基于多个前端视频设备的数据传输方法另一实施方式的流程示意图；
图4是图3中步骤S202对应的一实施方式的流程示意图；
图5是调整碰撞前端设备关键帧发送时间一实施方式对应的流程示意图；
图6a是图5中步骤S401对应的一实施方式的应用场景示意图；
图6b是图5中步骤S402对应的一实施方式的应用场景示意图；
图6c是图5中步骤S404对应的一实施方式的应用场景示意图；
图7是本申请提供的电子设备一实施方式的结构示意图；
图8是本申请提供的计算机存储介质一实施方式的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性的劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本文中术语“系统”和“网络”在本文中常被可互换使用。本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。此外，本文中的“多”表示两个或者多于两个。
请参阅图2，图2是本申请提供的基于多个前端视频设备的数据传输方法一实施方式的流程示意图，该方法包括：
步骤S101：获取当前已接入后端设备的所有前端视频设备的关键帧发送时间段，将关键帧发送时间段存在重叠的前端视频设备确定为碰撞前端视频设备。
具体地，后端设备为区别于前端视频设备的其他设备，该后端设备可以是转发平台或网络平台，例如，NVR(Network Video Recorder)等；后端设备也可以是监视屏，或者转发平台与前端视频设备之间的网络节点，或者监视屏与转发平台之间的网络节点，例如，无线网元等。
进一步地，后端设备提供碰撞检测模块，后端设备向前端视频设备发起实时拉流，以点播前端视频设备已拍摄的视频数据，进而后端设备可获取到参数信息，其中，参数信息可由前端视频设备直接发送给碰撞检测模块，也可由无线网元或后端设备接收后转发给碰撞检测模块，该参数信息包括设备号、码流类型、码率、帧率、画面组时间和关键帧发送时间段，关键帧发送时间段包括关键帧发送起始时间和关键帧发送截止时间。
具体地，碰撞检测模块通过参数信息来判断在预设时间范围内是否发生了关键帧碰撞，将关键帧发送时间段存在相互重叠的前端视频设备确定为碰撞前端视频设备，若发生了关键帧碰撞则标记发生关键帧碰撞的前端视频设备为碰撞前端视频设备并记录相应的参数信息，若未发生，则前端视频设备发送关键帧的时间保持不变。该判断方法判断过程简便，在获取到前端视频设备的参数信息后即可立即做出判断，减轻后端设备的运算负担，提高关键帧碰撞检测的效率
在一具体应用场景中，前端视频设备连接有网元和服务器，服务器向前端视频设备发起实时拉流，前端视频设备向网元或服务器上传包括关键帧发送时间段的视频流，则网元或服务器通过前端视频设备的视频流中包含的关键帧发送时间段来判断发生关键帧碰撞的前端视频设备。
在另一具体应用场景中，前端视频设备连接有网元和服务器，服务器向前端视频设备发起实时拉流，前端视频设备向网元上传视频流，网元为视频流中的关键帧添加关键帧发送时间段并将视频流转发至服务器，服务器接收网元转发的视频流以及视频流中的关键帧发送时间段，进而判断发生关键帧碰撞的前端视频设备。
步骤S102：将至少部分碰撞前端视频设备的关键帧产生时间进行调整，以获得碰撞前端视频设备调整后的关键帧产生时间。
具体地，该预设周期可为传输视频流的整个或部分时间段，比如，将前端视频设备的视频流按照时间戳对齐，截取视频流中一个画面组时间的视频数据，该画面组时间为一组GOP对应的时间长度。以一个画面组时间作为预设周期，获取在预设周期中不包括关键帧且至少一个帧间隔时间长度的时间段记为空闲时间段。
进一步地，根据碰撞检测模块上传的碰撞前端视频设备的参数信息，确定碰撞前端视频设备的数量，从多个空闲时间段中选择与碰撞前端视频设备数量相等的空闲时间段，将所有碰撞前端视频设备的关键帧产生时间调整至对应的空闲时间段中，以使所有碰撞前端视频设备的关键帧产生时间得以优化，降低关键帧碰撞概率，进而提高关键帧传输的实时性和稳定性。
进一步地，当空闲时间段的数量少于碰撞前端视频设备的数量时，获取空闲时间段中时间长度最长的空闲时间段，以及碰撞前端视频设备的数量与空闲时间段数量的第一差值，将最长的空闲时间段等分为第一差值份以获得等分时间段，将第一差值数量的碰撞前端视频设备的关键帧产生时间调整至上述等分时间段中。
步骤S103：根据调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备。
具体地，获得碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值，将包含时间差值的关键帧产生命令发送给对应的前端视频设备，以使前端视频设备延迟时间差值后产生关键帧。
具体地，利用碰撞前端视频设备调整前的关键帧产生时间和调整后的关键帧产生时间，获取时间差值，后端设备生成包含该时间差值的关键帧产生命令并立即下发给前端视频设备，以使前端视频设备在接收到该关键帧产生命令后先计时上述时间差值后再进行关键帧发送，以使碰撞前端视频设备之间的关键帧发送时间错开，降低关键帧碰撞的概率。
本实施例所提供的基于多个前端视频设备的数据传输方法，将关键帧发送时间段存在相互重叠的前端视频设备确定为碰撞前端视频设备，简化了关键帧碰撞检测流程，在判断到存在发生关键帧碰撞的碰撞前端视频设备后，对碰撞前端视频设备的关键帧产生时间进行调整，以获得部分碰撞前端视频设备调整后的关键帧产生时间，根据调整后的关键帧产生时间生成关键帧产生命令下发给对应的前端视频设备，以使前后端设备在预设周期内更均匀地发送和接收关键帧，进而降低关键帧碰撞的概率以提高前后端设备发送和接收关键帧的稳定性。
请参阅图3，图3是本申请提供的基于多个前端视频设备的数据传输方法另一实施方式的流程示意图，该方法包括：
步骤S201：获取当前已接入后端设备的所有前端视频设备的关键帧发送时间段，将关键帧发送时间段存在重叠的前端视频设备确定为碰撞前端视频设备。
具体地，获取当前已接入后端设备的前端视频设备的关键帧发送时间段，该关键帧发送时间段包括关键帧发送起始时间和关键帧发送截止时间，任意两个前端视频设备中，其中一个前端视频设备的关键帧发送起始时间在另一前端视频设备的关键帧发送时间段内，则将两个前端视频设备均判断为碰撞前端视频设备，该判断方法在获取到前端视频设备的关键帧发送时间段后即可立即做出判断，提高了关键帧碰撞检测的效率。
步骤S202：获取在预设周期中的各个空闲时间段。
具体地，请参阅图4，图4是图3中步骤S202对应的一实施方式的流程示意图，该步骤S202包括：
步骤S301：获取连接于后端设备的所有前端视频设备的参数信息，其中，参数信息包括前端视频设备的关键帧发送时间段和画面组时间。
具体地，当存在关键帧碰撞的碰撞前端视频设备时，获取已接入后端设备的前端视频设备的参数信息，其中至少包括前端视频设备的关键帧发送时间段和画面组时间。
步骤S302：将关键帧发送时间段散列到以画面组时间为预设周期的时间范围中，以提取预设周期内的所有空闲时间段。
具体地，前端视频设备的一组GOP的时间固定的，将每一前端视频设备的视频流按时间戳对齐，进而将关键帧发送时间散列到画面组时间中，即可获得每一前端视频设备的关键帧相对画面组时间的发送时间，将预设周期内不包括关键帧且至少一个帧间隔时间长度的时间段记为空闲时间段，进而将空闲时间段提取出来。
进一步地，后端设备可对当前接入的前端视频设备发起同时拉流且拉流参数相同，则前端视频设备的视频流的时间戳为对齐的状态。假设前端视频设备的关键帧发送时间为time，画面组时间为HashTimeGop，则上述将关键帧发送时间段散列到以画面组时间为预设周期的时间范围中可用下列公式表示：
slots＝time％HashTimeGop；
其中，slots为散列后的关键帧发送时间。比如，画面组时间为2s，其中一个前端视频设备在第一个画面组时间中的关键帧产生时间为50ms，则该前端视频设备在后续的画面组时间中关键帧产生时间为50ms+n*2s，对于其他前端视频设备而言，其关键帧产生时间相对画面组时间散列后也可获得对应的在预设周期内的关键帧产生时间，以画面组时间为预设周期，并将关键帧发送时间段散列至画面组时间后，提取画面组组时间中的空闲时间段，可获得相对于画面组时间稳定且准确的空闲时间段，提高获取空闲时间段的准确率。
步骤S203：将至少部分碰撞前端视频设备的关键帧产生时间分别调整到至少部分空闲时间段中，以获得碰撞前端视频设备调整后的关键帧产生时间。
具体地，调整至少部分碰撞前端视频设备的关键帧产生时间到至少部分空闲时间段中，以使后端设备均匀收到关键帧。
在一应用方式中，保持碰撞前端视频设备中的一个碰撞前端视频设备的关键帧产生时间不变，将其余碰撞前端视频设备的关键帧产生时间调整到至少部分空闲时间段的中点位置，以获得其余碰撞前端视频设备调整后的关键帧产生时间。
具体地，获得碰撞前端视频设备的参数信息，在预设周期内定位所有碰撞前端视频设备发送关键帧的位置，将所有碰撞前端视频设备中的一个碰撞前端视频设备的关键帧产生时间保持不变，获取其余的碰撞前端视频设备的第一数量，从预设周期的所有空闲时间段中选择第一数量的空闲时间段，将其余的碰撞前端视频设备选择相应的空闲时间段，将其余的碰撞前端视频设备的关键帧发送时间调整至对应空闲时间段的中点位置。
可选地，当预设周期的所有空闲时间段的数量不足第一数量时，则先调整部分碰撞前端视频设备的关键帧发送时间后，重新获取当前预设周期内的空闲时间段，将未做调整的碰撞前端视频设备的关键帧发送时间调整至当前预设周期中的空闲时间段的中点位置，若仍有碰撞前端视频设备未做调整，则回到重新获取当前预设周期内的空闲时间段的步骤，直至其余碰撞前端视频设备的关键帧发送时间完成调整。
具体地，获取当前预设周期中最新的空闲时间段，以使关键帧发送时间的调整依据更新及时，根据当前预设周期中最新的空闲时间段对碰撞前端视频设备的关键帧发送时间进行调整，进而使得碰撞前端视频设备的关键帧发送时间得到合理调整，使关键帧发送在预设周期内更加均匀，降低上行链路发生拥塞、丢包的概率。
在另一应用方式中，将所有空闲时间段按照时间长度进行递增排序，根据空闲时间段的时间长度调整并获得其余碰撞前端视频设备调整后的关键帧产生时间。
具体地，获取到预设周期内所有空闲时间段后，按照空闲时间段的时间长度进行递增排序，以获得所有空闲时间段中时间长度较长的空闲时间段。当空闲时间段的数量大于等于待调整的碰撞前端视频设备第一数量时，则从空闲时间段中选择时间长度较长的第一数量的空闲时间段，将碰撞前端视频设备的关键帧发送时间分别调整至对应的空闲时间段的中点位置，进而在调整碰撞前端视频设备的关键帧发送时间时，能够将关键帧的发送时间优先调整至时间长度较长的空闲时间段，以增加关键帧之间的间隔，进而有效降低关键帧碰撞的概率。
进一步地，当空闲时间段的数量小于待调整的碰撞前端视频设备第一数量时，则先将与空闲时间段的数量相等的碰撞前端视频设备的关键帧发送时间分别调整至对应的空闲时间段的中点位置，进而获取当前预设周期中的空闲时间段，并进一步按照时间长度进行递增排序，重复上述步骤直至所有待调整的碰撞前端视频设备的关键帧发送时间调整完毕。
在一具体应用场景中，请参阅图5，图5是调整碰撞前端设备关键帧发送时间一实施方式对应的流程示意图，包括：
步骤S401：获得当前所有空闲时间段中时间长度最长的第一空闲时间段。
具体地，请参阅图6a，图6a是图5中步骤S401对应的一实施方式的应用场景示意图，空闲时间段的时间长度至少为一个帧间隔时间，否则视为不具有空闲时间段。通过递增或递减排序的方式，从预设周期中的空闲时间段中选出时间长度最长的第一空闲时间段，如图6a中，将1号前端视频设备和4号前端视频设备之间的空闲时间段作为第一空闲时间段。
步骤S402：将其中一个碰撞前端视频设备的关键帧产生时间调整至第一空闲时间段的中点位置。
具体地，请参阅图6b，图6b是图5中步骤S402对应的一实施方式的应用场景示意图，将其余碰撞前端视频设备中的一个碰撞前端视频设备的关键帧产生时间调整至第一空闲时间段。如图6b所示，将3号前端视频设备的关键帧产生时间调整至第一空闲时间段的中点位置处，以使其中一个碰撞前端视频设备获得最优的关键帧发送时间。
步骤S403：判断碰撞前端视频设备是否调整完毕。
具体地，判断是否还有未做调整的碰撞前端视频设备，比如图6b中还包括2号前端视频设备未做调整，则进入步骤S404。若所有碰撞前端视频设备已调整完毕，则进入步骤S406。
步骤S404：判断是否还有剩余的空闲时间段。
具体地，判断是否还有大于一个帧间隔时间的空闲时间段，比如前端视频设备的帧率为25fps，则空闲时间段需要大于等于40ms。若还有空闲时间段则回到步骤S401，获取当前所有空闲时间段中时间长度最长的第一空闲时间段，如图6b所示，则当前的第一空闲时间段为4号前端视频设备和5号前端视频设备之间的空闲时间段。进而将2号前端视频设备的关键帧发送时间调整至当前的第一空闲时间段的中点位置，以获得如图6c所示的关键帧发送时间调整后的排布图。
步骤S405：将剩余未做调整的碰撞前端视频设备的关键帧产生时间平均分配到预设周期中。
具体地，当前端视频设备的数量较多，导致在没有空闲时间段的情况下还有未做调整的前端视频设备，则将未做调整的前端视频设备的关键帧发送时间在预设周期内重新排布，以使预设周期内的关键帧发送时间相对均匀，如图6a所示，当预设周期为2000ms且还有3个未做调整的碰撞前端视频设备，则将未做调整的前端视频设备的关键帧发送时间分别调整至600ms、1200ms和1800ms的位置，以使预设周期中，即使关键帧发送时间已经不可避免发生碰撞时，将碰撞时间节点在预设周期内均衡地分配，以使发生关键帧碰撞的时间节点能够尽可能散开，降低上行链路发生拥塞、视频卡顿的概率。
步骤S406：从当前预设周期中获取碰撞前端视频设备对应的调整后的关键帧产生时间。
具体地，通过上述步骤S401-S405的调整，每调整一次碰撞前端视频设备，只要还具有空闲时间段，则获取一次最新的时间长度最长的第一空闲时间段，在每次调整碰撞前端视频设备的关键帧发送时间时，将关键帧发送时间设置在第一空闲时间段的中点位置，以使碰撞前端视频设备的关键帧发送时间在做调整时能够调整至当前预设周期中的最优位置。
进一步地，即使当前预设周期中没有剩余的空闲时间段，则将未做调整的碰撞前端视频设备在预设周期中散开，以减少短时间内多个关键帧重叠的情况。根据配置完成的调整关键帧发送时间的最新的预设周期，获取每个碰撞前端视频设备对应的调整后的关键帧产生时间。
步骤S303：根据调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备。
具体地，获得碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值，延迟时间差值后将关键帧产生命令发送给对应的前端视频设备，以使前端视频设备接收到关键帧产生命令后立即产生关键帧。
具体地，利用碰撞前端视频设备调整前的关键帧产生时间和调整后的关键帧产生时间，获取时间差值，后端设备延迟该时间差值后生成关键帧产生命令下发给前端视频设备，以使前端视频设备接收到该关键帧产生指令后立即开始编码并发送关键帧，进而使前端视频设备接收到命令后立即执行相应指令，减少前端视频设备的其他操作流程，减轻前端视频设备的负荷。
本实施例所提供的基于多个前端视频设备的数据传输方法，在判断到存在发生关键帧碰撞的碰撞前端视频设备后，从预设周期中获取各个空闲时间段，保持其中一个碰撞前端视频设备的关键帧发送时间不变，对其余碰撞前端视频设备的关键帧时间进行调整，以使关键帧发送时间在预设周期中错开，降低关键帧碰撞的概率。
请参阅图7，图7是本申请提供的电子设备一实施方式的结构示意图，该电子设备70包括相互耦接的存储器701和处理器702，其中，存储器701存储有程序数据(图未示)，处理器702调用程序数据以实现上述任一实施例中的基于多个前端视频设备的数据传输方法，相关内容的说明请参见上述方法实施例的详细描述，在此不再赘叙。
请参阅图8，图8是本申请提供的计算机存储介质一实施方式的结构示意图，该计算机存储介质80存储有程序数据800，该程序数据800被处理器执行时实现上述任一实施例中的基于多个前端视频设备的数据传输方法，相关内容的说明请参见上述方法实施例的详细描述，在此不再赘叙。
需要说明的是，作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本申请的实施方式，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利保护范围内。

Claims (8)

1.一种基于多个前端视频设备的数据传输方法，其特征在于，所述方法包括：
获取当前已接入后端设备的所有前端视频设备的关键帧发送时间段，将所述关键帧发送时间段存在重叠的所述前端视频设备确定为碰撞前端视频设备；
将至少部分所述碰撞前端视频设备的关键帧产生时间进行调整，以获得所述碰撞前端视频设备调整后的关键帧产生时间；
根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备；
所述将至少部分所述碰撞前端视频设备的关键帧产生时间进行调整，以获得所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：获取在预设周期中的各个空闲时间段；将至少部分所述碰撞前端视频设备的关键帧产生时间分别调整到至少部分所述空闲时间段中，以获得所述碰撞前端视频设备调整后的关键帧产生时间；
所述将至少部分所述碰撞前端视频设备的关键帧产生时间分别调整到至少部分所述空闲时间段中，以获得所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：保持所述碰撞前端视频设备中的一个所述碰撞前端视频设备的关键帧产生时间不变，将其余所述碰撞前端视频设备的关键帧产生时间调整到至少部分所述空闲时间段的中点位置，以获得其余所述碰撞前端视频设备调整后的关键帧产生时间；
其中，所述空闲时间段为所述预设周期中不包括关键帧且至少一个帧间隔时间长度的时间段。
2.根据权利要求1所述的方法，其特征在于，所述获取在预设周期中的各个空闲时间段的步骤，包括：
获取连接于所述后端设备的所有前端视频设备的参数信息，其中，所述参数信息包括所述前端视频设备的关键帧发送时间段和画面组时间；
将所述关键帧发送时间段散列到以所述画面组时间为所述预设周期的时间范围中，以提取所述预设周期内的所有空闲时间段。
3.根据权利要求1所述的方法，其特征在于，所述将其余所述碰撞前端视频设备的关键帧产生时间调整到至少部分所述空闲时间段的中点位置，以获得其余所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：
将所有所述空闲时间段按照时间长度进行递增排序；
根据所述空闲时间段的时间长度调整并获得其余所述碰撞前端视频设备调整后的关键帧产生时间。
4.根据权利要求3所述的方法，其特征在于，所述根据所述空闲时间段的时间长度调整并获得其余所述碰撞前端视频设备调整后的关键帧产生时间的步骤，包括：
获得当前所有所述空闲时间段中时间长度最长的第一空闲时间段；
将其中一个所述碰撞前端视频设备的关键帧产生时间调整至所述第一空闲时间段的中点位置；
判断所述碰撞前端视频设备是否调整完毕；
若否，进一步判断是否还有剩余的空闲时间段，若是，则回到所述获得当前所有所述空闲时间段中时间长度最长的第一空闲时间段的步骤，否则将剩余未做调整的所述碰撞前端视频设备的关键帧产生时间平均分配到所述预设周期中。
5.根据权利要求1所述的方法，其特征在于，所述根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备的步骤，包括：
获得所述碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值；
将包含所述时间差值的关键帧产生命令发送给对应的前端视频设备，以使所述前端视频设备延迟所述时间差值后产生关键帧。
6.根据权利要求1所述的方法，其特征在于，所述根据所述调整后的关键帧产生时间下发关键帧产生命令至对应的前端视频设备的步骤，包括：
获得所述碰撞前端视频设备调整前后的关键帧产生时间之间的时间差值；
延迟所述时间差值后将所述关键帧产生命令发送给对应的前端视频设备，以使所述前端视频设备接收到所述关键帧产生命令后立即产生关键帧。
7.一种电子设备，其特征在于，包括：相互耦接的存储器和处理器，其中，所述存储器存储有程序数据，所述处理器调用所述程序数据以执行如权利要求1-6中任一项所述的方法。
8.一种计算机存储介质，其上存储有程序数据，其特征在于，所述程序数据被处理器执行时实现如权利要求1-6中任一项所述的方法。
CN202011312570.6A 2020-10-16 2020-11-20 一种基于多个前端视频设备的数据传输方法及相关装置 Active CN114520891B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202011312570.6A CN114520891B (zh) 2020-11-20 2020-11-20 一种基于多个前端视频设备的数据传输方法及相关装置
EP21879311.5A EP4205386A4 (en) 2020-10-16 2021-10-09 SYSTEMS AND METHODS FOR DATA TRANSMISSION
PCT/CN2021/122903 WO2022078266A1 (en) 2020-10-16 2021-10-09 Systems and methods for data transmission
US18/192,665 US20230262266A1 (en) 2020-10-16 2023-03-30 Systems and methods for data transmission

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011312570.6A CN114520891B (zh) 2020-11-20 2020-11-20 一种基于多个前端视频设备的数据传输方法及相关装置

Publications (2)

Publication Number Publication Date
CN114520891A CN114520891A (zh) 2022-05-20
CN114520891B true CN114520891B (zh) 2023-06-20

Family

ID=81594474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011312570.6A Active CN114520891B (zh) 2020-10-16 2020-11-20 一种基于多个前端视频设备的数据传输方法及相关装置

Country Status (1)

Country Link
CN (1) CN114520891B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114980337A (zh) * 2022-05-23 2022-08-30 中国电信股份有限公司 网络峰值控制方法、装置、计算机存储介质及电子设备
CN115334307B (zh) * 2022-10-11 2023-02-10 浙江大华技术股份有限公司 一种数据传输方法、前端设备、视频采集系统和介质
CN115734009A (zh) * 2022-11-15 2023-03-03 深圳艾灵网络有限公司 视频流的碰撞消除方法、装置、设备及存储介质
CN115776601A (zh) * 2022-11-15 2023-03-10 深圳艾灵网络有限公司 视频流传输信息评估方法、装置、设备及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9544534B2 (en) * 2013-09-24 2017-01-10 Motorola Solutions, Inc. Apparatus for and method of identifying video streams transmitted over a shared network link, and for identifying and time-offsetting intra-frames generated substantially simultaneously in such streams
US20150312651A1 (en) * 2014-04-28 2015-10-29 Honeywell International Inc. System and method of optimized network traffic in video surveillance system
CN111741276B (zh) * 2020-08-28 2020-12-04 浙江大华技术股份有限公司 一种视频设备发送关键帧的方法、视频设备和存储装置
CN111787292B (zh) * 2020-09-04 2020-12-04 浙江大华技术股份有限公司 基于多个网络摄像机的数据传输方法及相关装置

Also Published As

Publication number Publication date
CN114520891A (zh) 2022-05-20

Similar Documents

Publication Publication Date Title
CN114520891B (zh) 一种基于多个前端视频设备的数据传输方法及相关装置
CN112399141B (zh) 基于多个前端视频设备的数据传输方法及相关装置
CN111787292B (zh) 基于多个网络摄像机的数据传输方法及相关装置
JP4854395B2 (ja) 向上した無線通信性能を提供する装置及び方法
CN104125429B (zh) 视频数据传输的调节方法及装置
US20170331757A1 (en) Traffic control method, traffic control apparatus and server
US7856031B2 (en) Method and apparatus for guaranteeing fairness regarding access to medium among stations in WLAN
US11159834B2 (en) Managing congestion response during content delivery
US20060045023A1 (en) Method for estimating available bandwidth of network
US8873590B2 (en) Apparatus and method for correcting jitter
CN106789886A (zh) 数据的传输方法及装置
CN104394421A (zh) 视频帧的处理方法及装置
Bui et al. Design and performance analysis of a novel distributed queue access protocol for cellular-based massive M2M communications
CN109428784A (zh) 网络探测方法及装置、计算机存储介质及设备
US8755281B2 (en) Constant window back-off method for multiple access in wireless local area networks
CN114501066A (zh) 视频流处理方法、系统、计算机设备和存储介质
Davis A wireless traffic probe for radio resource management and QoS provisioning in IEEE 802.11 WLANs
CN113364698B (zh) 带宽估计方法、系统、电子设备与存储介质
EP3286967A1 (en) Technique for scheduling transmission of content in an access network
CN114513651A (zh) 视频设备关键帧碰撞检测方法、数据传输方法及相关装置
US20140040495A1 (en) System and method for low delay fast update for video streaming
CN112383791A (zh) 一种媒体数据处理方法、装置、电子设备和存储介质
CN114679570A (zh) 视频传输方法和装置、存储介质及电子装置
CN107295667B (zh) 一种接入资源调整方法及装置
CN105490964B (zh) 一种服务质量的处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant