CN112887666A - 视频处理方法和装置、网络摄像头和服务器及存储介质 - Google Patents

视频处理方法和装置、网络摄像头和服务器及存储介质 Download PDF

Info

Publication number
CN112887666A
CN112887666A CN202110010106.XA CN202110010106A CN112887666A CN 112887666 A CN112887666 A CN 112887666A CN 202110010106 A CN202110010106 A CN 202110010106A CN 112887666 A CN112887666 A CN 112887666A
Authority
CN
China
Prior art keywords
video
sub
network camera
processing method
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110010106.XA
Other languages
English (en)
Other versions
CN112887666B (zh
Inventor
钱李勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202110010106.XA priority Critical patent/CN112887666B/zh
Publication of CN112887666A publication Critical patent/CN112887666A/zh
Application granted granted Critical
Publication of CN112887666B publication Critical patent/CN112887666B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本申请公开了一种视频处理方法和装置、网络摄像头和服务器及存储介质,所述视频处理方法中,主网络摄像头首先以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流;再对其本身采集获得的和来自从网络摄像头的所有压缩视频码流进行拼接处理,以形成最终视频码流;然后将最终视频码流传输至服务器。本申请可以在同一个监控视频中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,同时,提升检索视频关键信息的检索效率。

Description

视频处理方法和装置、网络摄像头和服务器及存储介质
技术领域
本申请涉及视频处理技术领域,特别是涉及一种视频处理方法和装置、网络摄像头和服务器及存储介质。
背景技术
随着网络技术普及,尤其是5G网络技术越来越成熟,同一个区域范围内可以方便灵活地部署多个不同角度的网络摄像头(IP Camera,IPC),对应产生了多个监控视频。后续可能需要依据这些监控视频在该区域范围内进行物品检索、轨迹查找等等,因此需要将这些监控视频传输并存储至预设的服务器。大量的监控视频的传输及存储对传输速率、存储空间以及检索效率均提出了较高的要求。
发明内容
本申请主要解决的技术问题是提供一种视频处理方法和装置、网络摄像头和服务器及存储介质,能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
为解决上述技术问题,本申请采用的一个技术方案是:
提供一种视频处理方法,包括:
主网络摄像头以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流;
对其本身采集获得的和来自所述从网络摄像头的所有所述压缩视频码流进行拼接处理,以形成最终视频码流;
将所述最终视频码流传输至服务器。
为解决上述技术问题,本申请采用的另一个技术方案是:
提供一种网络摄像头,包括相互耦接的存储器和处理器,所述存储器存储有程序指令,所述处理器能够执行所述程序指令以实现如上述技术方案所述的应用于主网络摄像头的视频处理方法。
为解决上述技术问题,本申请采用的另一个技术方案是:
提供一种视频处理方法,包括:
服务器接收用户下发的组网指令,并基于预设的选取规则从多个网络摄像头中选取一个作为主网络摄像头,将其余网络摄像头作为从网络摄像头;
将所述从网络摄像头的列表发送给所述主网络摄像头,以使所述主网络摄像头向所述从网络摄像头发送连接请求并将连接成功的信息反馈至所述服务器;
接收并存储所述主网络摄像头传输的最终视频码流,其中,所述最终视频码流是所述主网络摄像头以预设的时间间隔接收多个所述从网络摄像头分别传送的压缩视频码流,并对其本身采集获得的和来自所述从网络摄像头的所有所述压缩视频码流进行拼接处理形成的。
为解决上述技术问题,本申请采用的另一个技术方案是:
提供一种服务器,包括相互耦接的存储器和处理器,所述存储器存储有程序指令,所述处理器能够执行所述程序指令以实现如上述技术方案所述的应用于服务器的视频处理方法。
为解决上述技术问题,本申请采用的另一个技术方案是:
提供一种视频处理装置,包括:
如上述技术方案所述的服务器和多个如上述技术方案所述的网络摄像头;
其中,所述服务器和多个所述网络摄像头分别耦接,多个所述网络摄像头之间相互耦接,所述服务器可以从多个所述网络摄像头中选取出主网络摄像头,并配合所述主网络摄像头实现如上述技术方案所述的应用于主网络摄像头的视频处理方法,或者实现如上述技术方案所述的应用于服务器的视频处理方法。
为解决上述技术问题,本申请采用的另一个技术方案是:
提供一种计算可读存储介质,所述存储介质上存储有程序指令,所述程序指令能够被处理器执行以实现如上述技术方案所述的应用于主网络摄像头的视频处理方法,或者实现如上述技术方案所述的应用于服务器的视频处理方法。
本申请的有益效果是:区别于现有技术的情况,本申请提供的视频处理方法中,主网络摄像头首先以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流;再对其本身采集获得的和来自从网络摄像头的所有压缩视频码流进行拼接处理,以形成最终视频码流;然后将最终视频码流传输至服务器。主网络摄像头和从网络摄像头相互之间可以通信,则可以将主网络摄像头和从网络摄像头各自采集获得的压缩视频码流汇总至主网络摄像头,并由主网络摄像头将所有压缩视频码流拼接成一个监控视频,拼接成的监控视频中每个视频帧可以包括多个子图像。也就是说,本申请可以在同一个监控视频中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
附图说明
为了更清楚地说明本申请实施方式中的技术方案,下面将对实施方式描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。其中:
图1为本申请视频处理方法一实施方式的流程示意图;
图2为主网络摄像头分别与服务器和从网络摄像头之间的通信关系示例图;
图3为图1中步骤S12一实施方式的流程示意图;
图4为图3中步骤S22一实施方式的流程示意图;
图5为图4中步骤S32一实施方式的流程示意图;
图6为多个视频文件拼接一实施方式的示例图;
图7为拼接视频帧一实施方式的示例图;
图8为图3中步骤S22另一实施方式的流程示意图;
图9为多个视频文件拼接另一实施方式的示例图;
图10为图8中步骤S52一实施方式的流程示意图;
图11为本申请网络摄像头一实施方式的结构示意图;
图12为本申请视频处理方法另一实施方式的流程示意图;
图13为本申请视频处理方法另一实施方式的流程示意图;
图14为本申请服务器一实施方式的结构示意图;
图15为本申请视频处理装置一实施方式的结构示意图;
图16为本申请计算机可读存储介质一实施方式的结构示意图。
具体实施方式
下面将结合本申请实施方式中的附图,对本申请实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式仅仅是本申请一部分实施方式,而不是全部实施方式。基于本申请中的实施方式,本领域普通技术人员在没有做出创造性的劳动前提下所获得的所有其他实施方式,都属于本申请保护的范围。
请参阅图1,图1为本申请视频处理方法一实施方式的流程示意图,该视频处理方法应用于主网络摄像头,包括如下步骤。
步骤S11,主网络摄像头以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流。
网络摄像头是一种将传统摄像头和网络科技结合的产物,可以直接采集获得压缩视频码流,借助无线网络,尤其是借助5G网络的高带宽性和低延时性,网络摄像头可以与服务器进行高速通信,也可以相互之间端到端高速互联通信。在需要监控的区域范围内设置多个网络摄像头,并根据其地理位置、运算能力等信息选取出主网络摄像头,并将其他网络摄像头设置为从网络摄像头,也就是将多个网络摄像头组建成一个微集群,以使该微集群中的主网络摄像头集中处理所有网络摄像头采集获得的压缩视频码流。尤其是在5G网络的基础上,微集群内部的传输速率大大提升,使得主网络摄像头能够更高效地处理压缩视频码流。
具体请参阅图2,图2为主网络摄像头分别与服务器和从网络摄像头之间的通信关系示例图,一个微集群中的主网络摄像头1510与多个从网络摄像头1520进行通信,以使多个从网络摄像头1520传送压缩视频码流,其中,这些压缩视频码流是从网络摄像头1520直接采集获得的。
进一步地,主网络摄像头以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流之前,还可以包括如下步骤:
主网络摄像头采集获得一个视频码流;以及,主网络摄像头启动与从网络摄像头之间的同步机制,以使从网络摄像头将采集获得的压缩视频码流传送至主网络摄像头。
其中,主网络摄像头和从网络摄像头按照上述预设的时间间隔并基于预设的目标检测规则采集获得压缩视频码流。例如设置1小时或者2小时的时间间隔,当然也可以设置其他时间间隔,本申请对此不作限定。
具体地,上述基于预设的目标检测规则采集获得压缩视频码流的过程,包括如下步骤:
步骤一,主网络摄像头或者从网络摄像头在时间间隔范围内每获取到一个视频帧时,基于目标检测规则判断当前视频帧中是否存在预设的目标对象。
部分视频帧中存在预设的目标对象,例如行人、动物、机动车、非机动车等动态对象,例如刀具、贵重物品等静态对象,而部分视频帧中则不存在上述目标对象,例如仅包括静态的监控背景,例如仅包括动态的树叶飘动、路面反光、蚊虫飞舞等。本申请可在所有网络摄像头中均设置深度学习模块作为上述目标检测规则,使得主网络摄像头和从网络摄像头均可识别出预设的目标对象,从而判断当前视频帧中是否存在目标对象。
步骤二,如果当前视频帧中不存在目标对象,则将当前视频帧删除。
如果当前视频帧中不存在目标对象,则将当前视频帧删除,不进行保存例如时长1小时的时间间隔,可能得到对应时长20分钟的视频文件的压缩视频码流。
步骤三,如果当前视频帧中存在目标对象,则将当前视频帧进行编码压缩,时间间隔结束时得到对应这一时间段的压缩视频码流。
步骤S12,对其本身采集获得的和来自从网络摄像头的所有压缩视频码流进行拼接处理,以形成最终视频码流。
主网络摄像头接收到来自从网络摄像头的压缩视频码流之后,对其本身采集获得的和来自从网络摄像头的所有这些压缩视频码流进行拼接处理。其中,拼接成的视频中每个拼接视频帧可以包括多个子图像,每个子图像对应一个网络摄像头。具体过程将在下面描述。
步骤S13,将最终视频码流传输至服务器。
主网络摄像头形成最终视频码流之后,与服务器通信,将最终视频码流传输至服务器存储,供用户在具有物品检索、轨迹查找等需求时调用。可以理解的是,最终视频码流在被调用之后需要先经过被解码的过程才可以被用户观看。
本实施方式可以在同一个监控视频中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
在一些实施方式中,请参阅图3,图3为图1中步骤S12一实施方式的流程示意图,可以通过如下步骤对所有压缩视频码流进行拼接处理,以形成最终视频码流。
步骤S21,主网络摄像头对所有压缩视频码流进行解码,以得到多个视频文件。
主网络摄像头接收到多个压缩视频码流之后,需要先经过对所有压缩视频码流的解码过程,从而得到多个视频文件。
步骤S22,将解码得到的多个视频文件进行拼接处理,以得到拼接视频文件。
主网络摄像头对其本身采集获得的和来自从网络摄像头的所有压缩视频码进行解码得到多个视频文件之后,将所有这些视频文件进行拼接处理,以得到拼接视频文件。其中,拼接视频文件的每个拼接视频帧由多个子图像拼接形成,每个子图像来自于一个网络摄像头(主网络摄像头或者从网络摄像头)。具体的拼接过程将在下面描述。
步骤S23,将拼接视频文件进行编码,以得到最终视频码流。
主网络摄像头依据所有网络摄像头生成拼接视频文件之后,为了将其传输至服务器,需要对其进行编码,以得到最终视频码流,从而可以进一步传输至服务器存储,供用户调用。
本实施方式可以在同一个拼接视频文件中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
在一些实施方式中,请参阅图4,图4为图3中步骤S22一实施方式的流程示意图,可以通过如下步骤得到拼接视频文件。
步骤S31,主网络摄像头获取所有视频文件的最大帧数序号。
主网络摄像头对压缩视频码流进行解码得到的各个视频文件含有的视频帧的数量可能不一样,本实施方式中,主网络摄像头首先获取所有视频文件的最大帧数序号,也就是从所有视频文件中找到视频帧的数量最多的那个视频文件,例如最大帧数序号是X,则其他视频文件的视频帧数量可能都小于X,也可能或者部分等于X、部分小于X,还可能都等于X。
步骤S32,遍历从1至最大帧数序号之间的每一个帧数序号,从所有视频文件中分别获得与当前帧数序号对应的子图像。
以一个具体的应用场景为例说明步骤S32。例如视频文件有4个(A、B、C、D),最大帧数序号是X,其中,视频A和视频D均有X帧,视频B和视频C均小于X帧,且视频B的帧数为Y,视频C的帧数为Z,且Y<Z,即视频B是时长最短的视频文件。主网络摄像头遍历第1帧至第X帧,从所有4个视频文件A、B、C、D中分别获得与当前帧数序号对应的子图像。例如遍历至第m帧时,分别获得所有4个视频文件A、B、C、D的第m帧子图像,总共得到4个子图像。
进一步地,请参阅图5,图5为图4中步骤S32一实施方式的流程示意图,可以通过如下步骤从所有视频文件中分别获得与当前帧数序号对应的子图像。
步骤S41,判断所有视频文件中当前帧数序号对应的子图像是否都存在。
仍然沿用上面的应用场景,当遍历至第m帧时,首先判断所有4个视频文件A、B、C、D的第m帧子图像是否都存在。根据上述设定,当m≤Y时,4个第m帧子图像都存在,当Y<m≤X时,4个第m帧子图像只有部分存在,部分不存在。例如m=X时,只有视频A和视频D存在第X帧,视频B和视频C均不存在第X帧。
步骤S42,如果都存在,则从所有视频文件中分别获取当前帧数序号对应的子图像。
如果当前帧数序号对应的子图像都存在,则从所有视频文件中分别获取当前帧数序号对应的子图像。例如m≤Y时,直接从4个视频文件A、B、C、D分别获取第m帧子图像,得到4个第m帧子图像。
步骤S43,否则,将不存在当前帧数序号对应的子图像的视频文件的最后一帧子图像作为对应的视频文件中当前帧数序号对应的子图像,并从其他视频文件中分别获取当前帧数序号对应的子图像。
如果当前帧数序号对应的子图像不是都存在,将不存在当前帧数序号对应的子图像的视频文件的最后一帧子图像作为对应的视频文件中当前帧数序号对应的子图像,并从其他视频文件中分别获取当前帧数序号对应的子图像。
例如Y<m≤Z时,视频B中不存在第m帧子图像,则将视频B的最后一帧子图像(即第Y帧子图像)作为视频B的第m帧子图像,视频A、C、D中均存在第m帧子图像,则直接获取其第m帧子图像,最后总共也是得到4个第m帧子图像。
再例如Z<m≤X时,视频B和视频C中均不存在第m帧子图像,则将视频B的最后一帧子图像(即第Y帧子图像)作为视频B的第m帧子图像,将视频C的最后一帧子图像(即第Z帧子图像)作为视频C的第m帧子图像,视频A和D中均存在第m帧子图像,则直接获取其第m帧子图像,最后总共也是得到4个第m帧子图像。可选地,使用最后一帧子图像代替时,可在其中添加“已结束”等预设水印。
可具体可参阅图6,图6为多个视频文件拼接一实施方式的示例图,图6中4个柱形A、B、C、D的下方填充格式表示视频A、B、C、D的原有帧数,柱形B和C的上方填充格式表示使用各自对应的最后一帧子图像补齐至最大帧数序号对应的子图像。
步骤S33,将当前帧数序号对应的所有子图像拼接形成拼接视频帧,所有拼接视频帧形成拼接视频文件。
从所有视频文件中分别获得与当前帧数序号对应的子图像之后,将所有这些子图像拼接形成拼接视频帧,最终得到与最大帧数序号相同数量的拼接视频帧,例如上述应用场景中,最终得到X个拼接视频帧,每一个拼接视频帧均由4个子图像拼接形成,这X个拼接视频帧形成了拼接视频文件。具体的拼接形式(例如各个子图像的相对位置关系、相对大小关系等)可按照用户需求预先设定,本申请对此不作限定,可参阅图7,图7为拼接视频帧一实施方式的示例图,示意性画出由4个子图像拼接形成一个拼接视频帧的其中一种拼接形式,其中,子图像1、子图像2、子图像3、子图像4分别表示来自处视频文件A、B、C、D的第m帧子图像。
当用户调用观看上述拼接视频文件时,可在同一个拼接视频帧中看到4个不同的画面,且视频B对应的画面播放完成后,将停留在其最后一帧画面,并显示“已结束”,当视频C对应的画面播放完成后,亦将停留在其最后一帧画面,并显示“已结束”,当视频A和视频D播放完成时,整个拼接视频文件也播放完成。
本实施方式可以在同一个拼接视频文件中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
在一些实施方式中,请参阅图8,图8为图3中步骤S22另一实施方式的流程示意图,还可以通过如下步骤得到拼接视频文件。
步骤S51,主网络摄像头获取所有视频文件的最早时间戳和最晚时间戳。
主网络摄像头对压缩视频码流进行解码得到的各个视频文件含有的视频帧对应的时间戳可能不是连续的,本实施方式中,主网络摄像头首先获取所有视频文件的最早时间戳和最晚时间戳,这两个时间戳可能位于同一个视频文件中,也可能位于不同的视频文件中。仍然以4个视频文件A、B、C、D举例进行说明,最早时间戳x位于视频A中,最晚时间戳z位于视频D中。具体可参阅图9,图9为多个视频文件拼接另一实施方式的示例图。
步骤S52,遍历最早时间戳至最晚时间戳之间的每一个时间戳,从所有视频文件中分别获得当前时间戳下的子图像。
以所有视频文件中时间上最相邻的两个视频帧之间的时间差作为时间戳间隔,遍历最早时间戳至最晚时间戳之间的每一个时间戳,从所有视频文件中分别获得当前时间戳下的子图像。例如从所有4个视频文件A、B、C、D中分别获得当前时间戳下的子图像,总共获得4个子图像。
具体请参阅图10,图10为图8中步骤S52一实施方式的流程示意图,可以通过如下步骤从所有视频文件中分别获得当前时间戳下的子图像。
步骤S61,判断所有视频文件中当前时间戳下的子图像是否都存在。
因为各个视频文件的时间戳可能不是连续的,例如时间戳r1和时间戳r3之间的时间戳r2对应的子图像因为不存在目标对象而被删除,因此,需要先判断所有视频文件中当前时间戳下的子图像是否都存在,便于根据不同的情况按照不同的方式获取对应的子图像。
步骤S62,如果都存在,则从所有视频文件中分别获取当前时间戳下的子图像。
如果所有视频文件中当前时间戳下的子图像都存在,例如图9中上述4个视频文件A、B、C、D中,时间戳m下的子图像均存在,则直接从所有视频文件中分别获取当前时间戳下的子图像,总共得到4个子图像。
步骤S63,否则,进一步判断当前时间戳是否早于不存在当前时间戳下的子图像的视频文件中的第一个时间戳。
如果所有视频文件中当前时间戳下的子图像不是都存在,即有部分不存在,则可能需要使用其他时间戳下的子图像进行代替,此时,需要进一步判断当前时间戳是否早于不存在当前时间戳下的子图像的视频文件中的第一个时间戳,以根据不同的情况选择进行代替的子图像。
步骤S64,若是,则将预设视频帧作为对应的视频文件中当前时间戳下的子图像,并从其他视频文件中分别获取当前时间戳下的子图像。
如果当前时间戳早于不存在当前时间戳下的子图像的视频文件中的第一个时间戳,则使用预设视频帧(例如纯黑视频帧)进行代替,也就是将预设视频帧作为对应的视频文件中当前时间戳下的子图像,其他存在当前时间戳下的子图像的视频文件,则直接从中分别获取当前时间戳下的子图像。例如4个视频文件A、B、C、D中,最早时间戳x位于视频A中,以及位于视频文件C和D中,视频文件B中时间戳x下的子图像不存在,且时间戳x早于视频文件B中的第一个时间戳b,则将纯黑视频帧作为视频文件B中时间戳x下的子图像,并获取视频文件A、C和D中时间戳x下的子图像,即视频文件A、C和D中的第一帧子图像,总共得到4个子图像。从图9可知,时间戳x至时间戳b之间的所有当前时间戳,视频文件B中对应的子图像均用纯黑视频帧代替。
步骤S65,否则,将不存在当前时间戳下的子图像的视频文件中当前时间戳的前一时间戳下的子图像作为对应的视频文件中当前时间戳下的子图像,并从其他视频文件中分别获取当前时间戳下的子图像。
如果当前时间戳不早于不存在当前时间戳下的子图像的视频文件中的第一个时间戳,则将对应的视频文件中当前时间戳的前一时间戳下的子图像作为对应的子图像。请继续参阅图9,例如当前时间戳为时间戳y,视频文件A、B和D中时间戳y下的子图像均存在,而视频文件C中时间戳y下的子图像不存在,且时间戳Y不早于视频文件C中的第一个时间戳x,则将视频文件C中时间戳y的前一时间戳c下的子图像作为视频文件C中时间戳y下的子图像。对于视频文件A、B和D,则直接获取时间戳y下的子图像。最后总共也是得到4个子图像。也就是说,图9中,柱状图A下部的填充格式代表视频文件A、B、C、D原有的子图像,其他填充格式代表使用预设视频帧或者当前时间戳的前一时间戳下的子图像作为替代的情况。
步骤S53,将当前时间戳下的所有子图像拼接形成拼接视频帧,所有拼接视频帧形成拼接视频文件。
从所有视频文件中分别获得当前时间戳下的子图像之后,将所有这些子图像拼接形成拼接视频帧,所有这些拼接视频帧形成时长为最晚时间戳与最早时间戳之差的拼接视频文件。例如上述应用场景中,每一个拼接视频帧均由4个子图像拼接形成,多个拼接视频帧形成了拼接视频文件,且拼接视频文件的时长为最晚时间戳z与最早时间戳x之差。
本实施方式可以在同一个拼接视频文件中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
此外,本申请还提供一种网络摄像头,请参阅图11,图11为本申请网络摄像头一实施方式的结构示意图,该网络摄像头1100包括相互耦接的存储器1110和处理器1120,存储器1110存储有程序指令,处理器1120能够执行该程序指令以实现如上述任一实施方式所述的应用于主网络摄像头的视频处理方法。具体可参阅上述各实施方式,此处不再赘述。
请参阅图12,图12为本申请视频处理方法另一实施方式的流程示意图,该视频处理方法应用于服务器,包括如下步骤。
步骤S71,服务器接收用户下发的组网指令,并基于预设的选取规则从多个网络摄像头中选取一个作为主网络摄像头,将其余网络摄像头作为从网络摄像头。
用户首先圈定需要组成微集群的所有网络摄像头清单,并向服务器下发组网指令,以使服务器能够从多个网络摄像头中选取一个作为主网络摄像头,并将其余网络摄像头作为从网络摄像头。其中,服务器可以将网络摄像头的地理位置、运算能力等作为选取规则,并依据设定的选取规则选取出主网络摄像头。
步骤S72,将从网络摄像头的列表发送给主网络摄像头,以使主网络摄像头向从网络摄像头发送连接请求并将连接成功的信息反馈至服务器。
服务器选取出主网络摄像头之后,可以进一步将从网络摄像头的列表发送给主网络摄像头,使主网络摄像头激活与从网络摄像头之间的端到端互联通信,即向从网络摄像头发送连接请求,并在连接成功之后将信息反馈至服务器。
步骤S73,接收并存储主网络摄像头传输的最终视频码流,其中,最终视频码流是主网络摄像头以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流,并对其本身采集获得的和来自从网络摄像头的所有压缩视频码流进行拼接处理形成的。
主网络摄像头与从网络摄像头组建微集群成功之后,服务器可以进一步接收并存储主网络摄像头传输的最终视频码流,供用户有需求时调用。其中,最终视频码流是主网络摄像头配合从网络摄像头拼接形成的。具体过程可参阅上述任一实施方式所述的应用于主网络摄像头的视频处理方法,此处不再赘述。
可以理解的是,如果用户有新增的网络摄像头,且需要将其加入之前的微集群中,则需要更新所有网络摄像头清单,并重新执行上述步骤S71,以形成新的微集群,并重新选取出新的主网络摄像头。而且,网络传输速率越快,例如在5G网络的基础上,本实施方式能够获得越快的处理速率。
本实施方式将多个网络摄像头组建成一个微集群,例如通过5G端到端通信技术组建,并在主网络摄像头中集中处理所有的监视视频文件,使得视频处理过程更加高效。而且本实施方式可以在同一个拼接视频文件中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
在一些实施方式中,请参阅图13,图13为本申请视频处理方法另一实施方式的流程示意图,该视频处理方法应用于服务器,包括如下步骤。
步骤S81,服务器判断主网络摄像头是否下线。
服务器选取出主网络摄像头之后,需要相互之间持续通信,以接收主网络摄像头传输的最终视频码流。但是服务器与主网络摄像头之间的通信可能断开,即主网络摄像头可能下线,影响最终视频码流的传输。因此,服务器需要实时判断主网络摄像头是否下线,例如以预设的时间间隔向主网络摄像头发送验证指令,并判断能够及时收到反馈信息。
步骤S82,如果是,则基于选取规则从从网络摄像头中重新选取出主网络摄像头,并返回将从网络摄像头的列表发送给主网络摄像头的步骤。
如果服务器判断出主网络摄像头下线,则可以基于上述选取规则从多个从网络摄像头中重新选取出主网络摄像头,并返回将从网络摄像头的列表发送给主网络摄像头的步骤。即选取出新的网络摄像头之后,再执行上述步骤S72-S73,由新的主网络摄像头拼接形成最终视频码流,并传输至服务器。
如果主网络摄像头没有下线,则返回判断的步骤,另一方面,主网络摄像头执行拼接操作。
本实施方式将多个网络摄像头组建成一个微集群,例如通过5G端到端通信技术组建,并在主网络摄像头中集中处理所有的监视视频文件,且实时判断主网络摄像头是否下线,以及时选取出新的主网络摄像头,使得视频处理过程更加高效。而且本实施方式可以在同一个拼接视频文件中展示多个相关监控画面,一方面保留了监控视频中的有用信息,另一方面对多个视频文件进行了拼接整合,减少了监控视频的数量和大小。因此,本申请能够降低监控视频占用的存储空间,提高监控视频的传输速率,提高检索视频关键信息的检索效率。
此外,本申请还提供一种服务器,请参阅图14,图14为本申请服务器一实施方式的结构示意图,该服务器1400包括相互耦接的存储器1410和处理器1420,存储器1410存储有程序指令,处理器1420能够执行该程序指令以实现如上述任一实施方式所述的应用于服务器的视频处理方法。具体可参阅上述各实施方式,此处不再赘述。
此外,本申请还提供一种视频处理装置,请参阅图15,图15为本申请视频处理装置一实施方式的结构示意图,该视频处理装置1500包括:如上述实施方式的服务器1400和多个如上述实施方式所述的网络摄像头1100。其中,服务器1400和多个网络摄像头1100分别耦接,多个网络摄像头1100之间相互耦接。请结合参阅图15和图2,服务器1400可以从多个网络摄像头1100中选取出主网络摄像头1510,并将其他网络摄像头1100设置为从网络摄像头1520。服务器1400配合主网络摄像头1510和从网络摄像头1520可以实现如上述任一实施方式所述的应用于主网络摄像头的视频处理方法,或者实现如上述任一实施方式所述的应用于服务器的视频处理方法。具体可参阅上述各实施方式,此处不再赘述。
此外,本申请还提供一种计算可读存储介质,请参阅图16,图16为本申请计算机可读存储介质一实施方式的结构示意图,该存储介质1600上存储有程序指令1610,该程序指令1610能够被处理器执行以实现如上述任一实施方式所述的应用于主网络摄像头的视频处理方法,或者实现如上述任一实施方式所述的应用于服务器的视频处理方法。具体可参阅上述各实施方式,此处不再赘述。
以上所述仅为本申请的实施方式,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (13)

1.一种视频处理方法,其特征在于,包括:
主网络摄像头以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流;
对其本身采集获得的和来自所述从网络摄像头的所有所述压缩视频码流进行拼接处理,以形成最终视频码流;
将所述最终视频码流传输至服务器。
2.根据权利要求1所述的视频处理方法,其特征在于,所述对其本身采集获得的和来自所述从网络摄像头的所有所述压缩视频码流进行拼接处理,以形成最终视频码流的步骤,包括:
所述主网络摄像头对所有所述压缩视频码流进行解码,以得到多个视频文件;
将解码得到的所述多个视频文件进行拼接处理,以得到拼接视频文件;
将所述拼接视频文件进行编码,以得到所述最终视频码流。
3.根据权利要求2所述的视频处理方法,其特征在于,所述将解码得到的所述多个视频文件进行拼接处理,以得到拼接视频文件的步骤,包括:
所述主网络摄像头获取所有所述视频文件的最大帧数序号;
遍历从1至所述最大帧数序号之间的每一个帧数序号,从所有所述视频文件中分别获得与当前帧数序号对应的子图像;
将所述当前帧数序号对应的所有所述子图像拼接形成拼接视频帧,所有所述拼接视频帧形成所述拼接视频文件。
4.根据权利要求3所述的视频处理方法,其特征在于,所述从所有所述视频文件中分别获得与当前帧数序号对应的子图像的步骤,包括:
判断所有所述视频文件中所述当前帧数序号对应的所述子图像是否都存在;
如果都存在,则从所有所述视频文件中分别获取所述当前帧数序号对应的所述子图像;
否则,将不存在所述当前帧数序号对应的所述子图像的所述视频文件的最后一帧子图像作为对应的所述视频文件中所述当前帧数序号对应的所述子图像,并从其他所述视频文件中分别获取所述当前帧数序号对应的所述子图像。
5.根据权利要求2所述的视频处理方法,其特征在于,所述将解码得到的所述多个视频文件进行拼接处理,以得到拼接视频文件的步骤,包括:
所述主网络摄像头获取所有所述视频文件的最早时间戳和最晚时间戳;
遍历所述最早时间戳至所述最晚时间戳之间的每一个时间戳,从所有所述视频文件中分别获得当前时间戳下的子图像;
将所述当前时间戳下的所有所述子图像拼接形成拼接视频帧,所有所述拼接视频帧形成所述拼接视频文件。
6.根据权利要求5所述的视频处理方法,其特征在于,所述从所有所述视频文件中分别获得当前时间戳下的子图像的步骤,包括:
判断所有所述视频文件中当前时间戳下的所述子图像是否都存在;
如果都存在,则从所有所述视频文件中分别获取所述当前时间戳下的所述子图像;
否则,进一步判断所述当前时间戳是否早于不存在所述当前时间戳下的所述子图像的所述视频文件中的第一个时间戳;
若是,则将预设视频帧作为对应的所述视频文件中所述当前时间戳下的所述子图像,并从其他所述视频文件中分别获取所述当前时间戳下的所述子图像;
否则,将不存在所述当前时间戳下的所述子图像的所述视频文件中所述当前时间戳的前一时间戳下的所述子图像作为对应的所述视频文件中所述当前时间戳下的所述子图像,并从其他所述视频文件中分别获取所述当前时间戳下的所述子图像。
7.根据权利要求3-6任一项所述的视频处理方法,其特征在于,所述以预设的时间间隔接收多个从网络摄像头分别传送的压缩视频码流的步骤之前,还包括:
所述主网络摄像头采集获得一个所述压缩视频码流;以及,
启动与所述从网络摄像头之间的同步机制,以使所述从网络摄像头将采集获得的所述压缩视频码流传送至所述主网络摄像头;
其中,所述主网络摄像头和所述从网络摄像头按照所述时间间隔并基于预设的目标检测规则采集获得所述压缩视频码流。
8.一种网络摄像头,其特征在于,包括相互耦接的存储器和处理器,所述存储器存储有程序指令,所述处理器能够执行所述程序指令以实现如权利要求1-7任一项所述的视频处理方法。
9.一种视频处理方法,其特征在于,包括:
服务器接收用户下发的组网指令,并基于预设的选取规则从多个网络摄像头中选取一个作为主网络摄像头,将其余网络摄像头作为从网络摄像头;
将所述从网络摄像头的列表发送给所述主网络摄像头,以使所述主网络摄像头向所述从网络摄像头发送连接请求并将连接成功的信息反馈至所述服务器;
接收并存储所述主网络摄像头传输的最终视频码流,其中,所述最终视频码流是所述主网络摄像头以预设的时间间隔接收多个所述从网络摄像头分别传送的压缩视频码流,并对其本身采集获得的和来自所述从网络摄像头的所有所述压缩视频码流进行拼接处理形成的。
10.根据权利要求9所述的视频处理方法,其特征在于,还包括:
所述服务器判断所述主网络摄像头是否下线;
如果是,则基于所述选取规则从所述从网络摄像头中重新选取出主网络摄像头,并返回所述将所述从网络摄像头的列表发送给所述主网络摄像头的步骤。
11.一种服务器,其特征在于,包括相互耦接的存储器和处理器,所述存储器存储有程序指令,所述处理器能够执行所述程序指令以实现如权利要求9-10任一项所述的视频处理方法。
12.一种视频处理装置,其特征在于,包括:
如权利要求11所述的服务器和多个如权利要求8所述的网络摄像头;
其中,所述服务器和多个所述网络摄像头分别耦接,多个所述网络摄像头之间相互耦接,所述服务器可以从多个所述网络摄像头中选取出主网络摄像头,并配合所述主网络摄像头实现如权利要求1-7任一项所述的视频处理方法,或者实现如权利要求9-10任一项所述的视频处理方法。
13.一种计算可读存储介质,其特征在于,所述存储介质上存储有程序指令,所述程序指令能够被处理器执行以实现如权利要求1-7任一项所述的视频处理方法,或者实现如权利要求9-10任一项所述的视频处理方法。
CN202110010106.XA 2021-01-06 2021-01-06 视频处理方法和装置、网络摄像头和服务器及存储介质 Active CN112887666B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110010106.XA CN112887666B (zh) 2021-01-06 2021-01-06 视频处理方法和装置、网络摄像头和服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110010106.XA CN112887666B (zh) 2021-01-06 2021-01-06 视频处理方法和装置、网络摄像头和服务器及存储介质

Publications (2)

Publication Number Publication Date
CN112887666A true CN112887666A (zh) 2021-06-01
CN112887666B CN112887666B (zh) 2022-09-06

Family

ID=76047835

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110010106.XA Active CN112887666B (zh) 2021-01-06 2021-01-06 视频处理方法和装置、网络摄像头和服务器及存储介质

Country Status (1)

Country Link
CN (1) CN112887666B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113873295A (zh) * 2021-10-26 2021-12-31 北京金山云网络技术有限公司 多媒体信息处理方法、装置、设备及存储介质
CN114996518A (zh) * 2022-08-04 2022-09-02 深圳市稻兴实业有限公司 一种基于云平台的超高清视频数据存储分类管理系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000069458A (ja) * 1998-08-25 2000-03-03 Fujitsu General Ltd マルチカメラ監視システム
CN102158689A (zh) * 2011-05-17 2011-08-17 无锡中星微电子有限公司 视频监控系统及方法
KR20120044821A (ko) * 2010-10-28 2012-05-08 엘지이노텍 주식회사 복수의 네트워크 카메라로부터의 영상 제어 방법 및 네트워크 카메라
US20120314015A1 (en) * 2011-06-10 2012-12-13 Microsoft Corporation Techniques for multiple video source stitching in a conference room
CN103888735A (zh) * 2014-03-26 2014-06-25 龙迅半导体科技(合肥)有限公司 一种多路视频监控图像数据处理方法及系统
US20150326833A1 (en) * 2014-05-12 2015-11-12 Sony Corporation Image processing method, image processing device and monitoring system
CN106331650A (zh) * 2016-09-27 2017-01-11 北京乐景科技有限公司 一种视频数据传输方法和装置
CN206117890U (zh) * 2016-05-16 2017-04-19 深圳市小爱爱科技有限公司 一种全景360度虚拟现实成像系统
CN110278413A (zh) * 2019-06-28 2019-09-24 Oppo广东移动通信有限公司 图像处理方法、装置、服务器以及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000069458A (ja) * 1998-08-25 2000-03-03 Fujitsu General Ltd マルチカメラ監視システム
KR20120044821A (ko) * 2010-10-28 2012-05-08 엘지이노텍 주식회사 복수의 네트워크 카메라로부터의 영상 제어 방법 및 네트워크 카메라
CN102158689A (zh) * 2011-05-17 2011-08-17 无锡中星微电子有限公司 视频监控系统及方法
US20120314015A1 (en) * 2011-06-10 2012-12-13 Microsoft Corporation Techniques for multiple video source stitching in a conference room
CN103888735A (zh) * 2014-03-26 2014-06-25 龙迅半导体科技(合肥)有限公司 一种多路视频监控图像数据处理方法及系统
US20150326833A1 (en) * 2014-05-12 2015-11-12 Sony Corporation Image processing method, image processing device and monitoring system
CN206117890U (zh) * 2016-05-16 2017-04-19 深圳市小爱爱科技有限公司 一种全景360度虚拟现实成像系统
CN106331650A (zh) * 2016-09-27 2017-01-11 北京乐景科技有限公司 一种视频数据传输方法和装置
CN110278413A (zh) * 2019-06-28 2019-09-24 Oppo广东移动通信有限公司 图像处理方法、装置、服务器以及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113873295A (zh) * 2021-10-26 2021-12-31 北京金山云网络技术有限公司 多媒体信息处理方法、装置、设备及存储介质
CN113873295B (zh) * 2021-10-26 2024-05-28 北京金山云网络技术有限公司 多媒体信息处理方法、装置、设备及存储介质
CN114996518A (zh) * 2022-08-04 2022-09-02 深圳市稻兴实业有限公司 一种基于云平台的超高清视频数据存储分类管理系统
CN114996518B (zh) * 2022-08-04 2022-10-21 深圳市稻兴实业有限公司 一种基于云平台的超高清视频数据存储分类管理系统

Also Published As

Publication number Publication date
CN112887666B (zh) 2022-09-06

Similar Documents

Publication Publication Date Title
CN103650509B (zh) 基于照相机和背景运动的参考帧缓冲区的自适应配置
CN112887666B (zh) 视频处理方法和装置、网络摄像头和服务器及存储介质
US8798168B2 (en) Video telecommunication system for synthesizing a separated object with a new background picture
EP2724343B1 (en) Video remixing system
JP5731672B2 (ja) 暗黙基準フレームを用いる動画像符号化システム
CN100562121C (zh) 使静止图像与运动图像流同步的方法
CN1976447B (zh) 网络相机系统和网络相机控制方法
KR102014285B1 (ko) 다중 카메라를 이용하여 객체의 이동을 추적하는 객체 추적 시스템 및 객체 추적 방법
CN104137146A (zh) 用于利用前景对象分割的噪声过滤的视频编码的方法和系统
EP2816564B1 (en) Method and apparatus for smart video rendering
CN112203100A (zh) 降低上下行带宽需求的传输方法及系统
JP4959592B2 (ja) ネットワーク映像モニタリングシステム及びモニタ装置
CN102959955A (zh) 共享图像
CN111131817A (zh) 屏幕共享方法、设备、存储介质及屏幕共享系统
CN106331603A (zh) 视频监控方法、装置、服务器及系统
KR20140054650A (ko) 관심객체의 선택에 의한 영상 탐색장치 및 방법
JP2003061038A (ja) 映像コンテンツ編集支援装置および映像コンテンツ編集支援方法
JP4061821B2 (ja) ビデオサーバシステム
CN109417585B (zh) 图像传输、图像压缩和图像复原的方法、系统及计算机可读存储介质
CN112533029B (zh) 一种视频分时传输方法、摄像装置、系统和存储介质
CN112437332B (zh) 一种目标多媒体信息的播放方法和装置
CN112948046A (zh) 截屏方法、装置、设备及存储介质
CN110213344B (zh) 一种多中心远程手语在线翻译系统及方法
KR20190051924A (ko) 관심객체의 선택에 의한 영상 탐색장치 및 방법
CN112437278A (zh) 一种协同监控系统、装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant