CN114245033A - 视频合成方法及装置 - Google Patents
视频合成方法及装置 Download PDFInfo
- Publication number
- CN114245033A CN114245033A CN202111296378.7A CN202111296378A CN114245033A CN 114245033 A CN114245033 A CN 114245033A CN 202111296378 A CN202111296378 A CN 202111296378A CN 114245033 A CN114245033 A CN 114245033A
- Authority
- CN
- China
- Prior art keywords
- time
- server
- image pickup
- camera
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001308 synthesis method Methods 0.000 title abstract description 14
- 238000000034 method Methods 0.000 claims description 45
- 238000001514 detection method Methods 0.000 claims description 15
- 238000001914 filtration Methods 0.000 claims description 13
- 238000004891 communication Methods 0.000 claims description 12
- 230000015572 biosynthetic process Effects 0.000 abstract description 10
- 238000003786 synthesis reaction Methods 0.000 abstract description 10
- 230000001960 triggered effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 241000282326 Felis catus Species 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种视频合成方法及装置。其中,该视频合成方法包括:服务器通过摄像装置确定摄像装置的开始时间和结束时间,开始时间和结束时间分别为目标进入和离开摄像装置的关注区域的时间;服务器基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置对应的关注区域内的活动视频;服务器合成多个摄像装置拍摄的活动视频;或者,服务器将每个摄像装置拍摄的活动视频发送给用户终端,以使用户终端合成多个摄像装置拍摄的活动视频。本申请可以对多个摄像装置拍摄的视频进行自动合成,无需人工手动合成。
Description
技术领域
本申请涉及视频处理技术领域,特别是涉及一种视频合成方法及装置。
背景技术
在利用多个摄像装置对预设场所进行监控拍摄的场景中,往往需要对多个摄像装置拍摄的视频进行合成。目前一般通过人工手动将多个摄像装置拍摄的视频进行剪辑合成,耗费人力资源。
发明内容
本申请提供一种视频合成方法及装置,可以对多个摄像装置拍摄的视频进行自动合成,无需人工手动合成。
为达到上述目的,本申请提供一种视频合成方法,该方法应用于服务器,服务器与多个摄像装置通信连接,多个摄像装置的关注区域的交集覆盖预设场所,视频合成方法包括:
服务器通过摄像装置确定摄像装置的开始时间和结束时间,开始时间和结束时间分别为目标进入和离开摄像装置的关注区域的时间;
服务器基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置对应的关注区域内的活动视频;
服务器合成多个摄像装置拍摄的活动视频;或者,服务器将每个摄像装置拍摄的活动视频发送给用户终端,以使用户终端合成多个摄像装置拍摄的活动视频。
其中,开始时间是摄像装置利用绊线入侵检测算法记录的目标触发摄像装置的关注区域的开始边界的时间,结束时间是摄像装置利用绊线入侵检测算法记录的目标触发摄像装置的关注区域的结束边界的时间。
其中,服务器通过摄像装置确定摄像装置的开始时间和结束时间的步骤包括:
服务器从摄像装置获取摄像装置的多个开始时间和多个结束时间,多个开始时间分别是摄像装置记录目标触发摄像装置的多个开始边界的时间,多个结束时间分别是摄像装置记录目标触发摄像装置的多个结束边界的时间;
服务器对多个开始时间进行均值滤波,以得到摄像装置最终的开始时间;
服务器对多个结束时间进行均值滤波,以得到摄像装置最终的结束时间。
其中,目标的数量为多个,服务器通过摄像装置确定摄像装置的开始时间和结束时间的步骤包括:
服务器从摄像装置获取摄像装置的多个开始时间和多个结束时间,多个开始时间分别是摄像装置记录多个目标触发摄像装置的开始边界的时间,多个结束时间分别是摄像装置记录多个目标触发摄像装置的结束边界的时间;
服务器确认开始边界对应的开始时间中的最早时间,并将摄像装置的关注区域的所有开始边界的最早时间的均值滤波结果作为摄像装置最终的开始时间;
服务器确认结束边界对应的结束时间中的最晚时间,并将摄像装置的关注区域的所有结束边界的最晚时间的均值滤波结果作为摄像装置最终的结束时间。
其中,服务器基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置的关注区域内的活动视频的步骤包括:
服务器调取摄像装置拍摄的第一时间和第二时间之间的视频,第一时间为开始时间和第一预设时间的差值,第二时间为结束时间和第二预设时间的和。
其中,服务器通过摄像装置确定摄像装置的开始时间和结束时间的步骤包括:
在服务器从摄像装置获取不到摄像装置的开始时间的情况下,将摄像装置的前一摄像装置的结束时间作为摄像装置的开始时间;和/或,
在服务器从摄像装置获取不到摄像装置的结束时间的情况下,将摄像装置的后一个摄像装置的开始时间作为摄像装置的结束时间。
为达到上述目的,本申请还提供一种视频合成方法,该方法应用于第一摄像装置,第一摄像装置和第二摄像装置均与服务器通信连接,第一摄像装置和第二摄像装置的关注区域的交集覆盖预设场所,视频合成方法包括:
第一摄像装置记录目标进入其关注区域的时间,并记为开始时间,将开始时间发送给服务器;
第一摄像装置记录目标离开其关注区域的时间,并记为结束时间,将结束时间发送给服务器;
第一摄像装置与服务器交互,以使服务器基于开始时间和结束时间,调取到目标在第一摄像装置的关注区域内的活动视频,并使服务器或与服务器通信连接的用户终端将第一摄像装置和第二摄像装置拍摄的活动视频合成,以得到目标在预设场所内的活动视频。
其中,第一摄像装置记录目标进入其关注区域的时间的步骤包括:
第一摄像装置利用绊线入侵检测算法记录目标触发关注区域的开始边界的时间;
第一摄像装置记录目标离开其关注区域的时间的步骤包括:
第一摄像装置利用绊线入侵检测算法记录目标触发关注区域的结束边界的时间。
为达到上述目的,本申请还提供一种电子设备,该电子设备包括处理器;处理器用于执行指令以实现上述方法。
为达到上述目的,本申请还提供一种计算机可读存储介质,其用于存储指令/程序数据,指令/程序数据能够被执行以实现上述方法。
本申请视频合成方法中,服务器先通过摄像装置确定摄像装置的开始时间和结束时间,然后基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置对应的关注区域内的活动视频,接着将多个摄像装置拍摄的活动视频进行合成而得到目标在预设场所内的活动视频,这样对多个摄像装置拍摄的视频可进行自动合成,无需人工手动合成,节省人力资源。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是本申请视频合成系统一实施例的结构示意图;
图2是本申请视频合成方法一实施方式的流程示意图;
图3是本申请视频合成方法中摄像装置的摄像区域和关注区域的关系示意图;
图4是本申请视频合成方法中服务器的工作流程示意图;
图5是本申请视频合成方法中摄像装置的工作流程示意图;
图6是本申请电子设备一实施方式的结构示意图;
图7是本申请计算机可读存储介质一实施方式的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。另外,除非另外指明(例如,“或另外”或“或在替代方案中”),否则如本文所使用的术语“或”指代非排他性的“或”(即,“和/或”)。并且,本文所描述的各种实施例不一定相互排斥,因为一些实施例可以与一个或多个其它实施例组合以形成新的实施例。
具体如图1所示,本申请提供一种视频合成系统10,该视频合成系统10可包括服务器12(也可称为软件平台)和多个摄像装置11。其中,多个摄像装置11均与服务器12通信连接。
本视频合成系统10的服务器12通过摄像装置11确定目标进入和离开摄像装置11的关注区域的时间,并基于目标进入和离开摄像装置11的关注区域的时间调取到目标在摄像装置11的关注区域内的活动视频,然后服务器12可将多个摄像装置11的活动视频进行合成,以得到目标在预设场所内的活动视频,以在无法通过一个摄像装置11拍摄到目标在预设场所内的完整活动视频的情况下利用本申请的视频合成系统10得到目标在预设场所内的完整活动视频,且无需人工手动剪辑,本申请的视频合成系统10也可自动地合成多个摄像装置11的视频而得到目标在预设场所内的活动视频,方法简单,便于操作。
其中,多个摄像装置的关注区域的交集可覆盖预设场所,这样预设场所就没有死角,通过本申请视频合成系统10可知晓目标在预设场所内的所有活动情况。预设场所可为运动场地等,例如可为滑雪场地或跑道。
其中,相邻的关注区域可互不重合,以避免服务器12最终合成的预设场所内的活动视频存在重复无用帧。
另外,本申请的视频合成系统10可包括与服务器12通信连接的用户终端13。在视频合成系统10包括用户终端13的情况下,可由用户终端13下达视频合成指令(可包含目标标识或时间段等信息),然后服务器12响应于视频合成指令调取到目标在摄像装置11对应的关注区域内的活动视频,然后服务器12或用户终端13将多个摄像装置11的活动视频进行合成,以得到目标在预设场所内的活动视频。并且用户终端13可将获得的目标在预设场所内的活动视频存储在指定的文件夹路径下。该指定的文件夹路径可以在用户通过用户终端下达视频合成指令时由用户指定。
进一步地,本申请提供一种应用于上述视频合成系统的视频合成方法。如图2所示,具体如图2所示,本实施方式的视频合成方法包括以下步骤。需要注意的是,以下步骤编号仅用于简化说明,并不旨在限制步骤的执行顺序,本实施方式的各步骤可以在不违背本申请技术思想的基础上,任意更换执行顺序。
S101:摄像装置记录目标进入其关注区域的时间,并记为开始时间。
在摄像装置拍摄的过程中,可以感应确认目标是否进入其关注区域,若确认目标进入其关注区域,则可以记录目标进入其关注区域的时间,然后可以将该时间发送给服务器,以便服务器基于该开始时间截取到目标在摄像装置的关注区域内的活动视频。
本申请的目标可以为人、猫、狗、包等物体,具体不受限制。
其中,摄像装置的关注区域可以小于或等于摄像装置的拍摄区域,即摄像装置的关注区域在摄像装置的拍摄区域内。例如,如图3所示,摄像装置的关注区域可为摄像装置的圆形拍摄区域内的长方形区域。
摄像装置可通过多种方式确认目标是否进入其关注区域。
其一:摄像装置可以利用目标检测方法实时检测摄像装置的关注区域内是否有目标。若摄像装置的关注区域内的目标存在状态从无到有,则确认目标进入到摄像装置的关注区域内,并将“目标存在状态从无到有”涉及到的多张图像帧中的目标出现的第一张图像帧的时间记为目标进入其关注区域的时间。
进一步地,在目标存在状态为无的情况下,可以在连续拍摄到第一数量的有目标出现的图像帧时确认目标存在状态从无变为有,以避免摄像装置误检测导致视频剪辑合成错误。其中,第一数量可根据实际情况(例如关注区域面积大小等)进行设置,在此不做限制,例如可为2帧或3帧。
另外,在目标存在状态为有的情况下,可以在连续拍摄到第二数量的没有目标出现的图像帧时确认目标存在状态从有变为无,以避免目标只是短暂离开摄像装置的关注区域导致需要多次调取摄像装置拍摄的目标活动视频。其中,第二数量可根据实际情况进行设置,在此不做限制,例如可为5帧或10帧。
其二:摄像装置可利用绊线入侵检测算法确认目标是否触发关注区域的开始边界,若目标触发关注区域的开始边界,则确认目标进入关注区域内,并将目标触发关注区域的开始边界的时间记为目标进入摄像装置的关注区域内的时间(即摄像装置的开始时间),这样无需实时进行关注区域的目标检测,只需确认是否有目标触发关注区域的开始边界即可,降低了处理难度,提高了处理效率。
S102:摄像装置将开始时间发送给服务器。
摄像装置可将其记录的目标进入其关注区域的时间(即摄像装置的开始时间)发送给服务器,以便服务器基于该开始时间截取到目标在摄像装置的关注区域内的活动视频,进而便于视频合成系统合成得到目标在预设场所的活动视频。
在本实施例中,摄像装置可在记录到开始时间的情况下,主动将记录的开始时间上报给服务器。或者在其他实施例中,摄像装置可以先将记录到的开始时间存储到自身的存储器中,然后在接收到服务器下达的获取开始时间的指令下,将自身的开始时间发送给服务器。
其中,在摄像装置利用目标是否触发关注区域的开始边界确认开始时间的情况下,可在摄像装置的关注区域设置多个开始边界,且在步骤S101中,摄像装置可记录目标触发每个开始边界的时间。其中,开始边界的设置数量不受限制,具体可根据实际情况进行设定,例如为3个或5个。且相邻的开始边界之间的距离较短,例如为10cm或20cm。
在本实施例中,摄像装置可直接将其关注区域的多个开始边界被目标触发的时间(即多个开始时间)上传至服务器,然后服务器会对多个开始时间进行处理以得到摄像装置最终的开始时间。例如,服务器可对多个开始时间进行均值滤波或中值滤波等处理而得到摄像装置最终的开始时间。或者在其他实施例中,摄像装置自身可对其关注区域的多个开始时间进行均值滤波或中值滤波等处理而得到摄像装置最终的开始时间,然后摄像装置将自身最终的开始时间传输给服务器,这样服务器可直接利用接收到的开始时间调取到目标在摄像装置的关注区域内的活动视频。
其中,步骤S102的执行顺序不受限制,例如步骤S102可在步骤S103或S104之后执行。
S103:摄像装置记录目标离开其关注区域的时间,并记为结束时间。
在摄像装置拍摄的过程中,可以感应确认目标是否离开其关注区域,若确认目标离开其关注区域,则可以记录目标离开其关注区域的时间(摄像装置的结束时间),然后可以将该时间发送给服务器,以便服务器基于该结束时间截取到目标在摄像装置的关注区域内的活动视频。
其中,摄像装置可通过多种方式确认目标是否离开其关注区域。
其一:摄像装置可以利用目标检测方法实时检测摄像装置的关注区域内是否有目标,以便判断摄像装置的关注区域内的目标存在状态是否从有到无。若摄像装置的关注区域内的目标存在状态从有到无,则确认目标离开摄像装置的关注区域,并将“目标存在状态从有到无”涉及到的多张图像帧中的目标消失的第一张图像帧的时间记为目标离开其关注区域的时间。
其二:摄像装置可利用绊线入侵检测算法确认目标是否触发关注区域的结束边界,若目标触发关注区域的结束边界,则确认目标进入关注区域内,并将目标触发关注区域的结束边界的时间记为目标离开摄像装置的关注区域内的时间(即摄像装置的结束时间),这样无需实时进行关注区域的目标检测,只需确认是否有目标触发关注区域的边界即可,降低了处理难度,提高了处理效率。
其中,摄像装置的关注区域的开始边界和结束边界可均是用户根据实际情况进行配置的。具体地,用户可在服务器中配置摄像装置的关注区域的开始边界和结束边界。
S104:摄像装置将结束时间发送给服务器。
摄像装置可将其记录的目标离开其关注区域的时间(即摄像装置的结束时间)发送给服务器,以便服务器基于该结束时间截取到目标在摄像装置的关注区域内的活动视频,进而便于视频合成系统合成得到目标在预设场所的活动视频。
在本实施例中,摄像装置可在记录到结束时间的情况下,主动将记录的结束时间上报给服务器。或者在其他实施例中,摄像装置可以先将记录到的结束时间存储到自身的存储器中,然后在接收到服务器下达的获取结束时间的指令下,将自身的结束时间发送给服务器。
其中,在摄像装置利用目标是否触发关注区域的结束边界确认结束时间的情况下,可在摄像装置的关注区域设置多个结束边界,且在步骤S103中,摄像装置可记录目标触发每个结束边界的时间。其中,结束边界的设置数量不受限制,具体可根据实际情况进行设定,例如为3个或5个。且相邻的结束边界之间的距离较短,例如为10cm或20cm。
在本实施例中,摄像装置可直接将其关注区域的多个结束边界被目标触发的时间(即多个结束时间)上传至服务器,然后服务器会对多个结束时间进行处理以得到摄像装置最终的结束时间。例如,服务器可对多个结束时间进行均值滤波或中值滤波等处理而得到摄像装置最终的结束时间。或者在其他实施例中,摄像装置自身可对其关注区域的多个结束时间进行处理而得到摄像装置最终的结束时间,然后摄像装置将自身最终的结束时间传输给服务器,这样服务器可直接利用接收到的结束时间调取到目标在摄像装置的关注区域内的活动视频。
S105:服务器基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置的关注区域内的活动视频。
服务器基于上述步骤确定每个摄像装置的开始时间和结束时间后,服务器可基于每个摄像装置的开始时间和结束时间,调取到目标在每个摄像装置的关注区域内的活动视频,以便后续将多个摄像装置的活动视频合成而得到目标在预设场所内的活动视频。
其中,服务器可基于每个摄像装置的开始时间和结束时间,从每个摄像装置调取目标在每个摄像装置的关注区域内的活动视频,这样在摄像装置拍摄其关注区域的视频的过程中无需将其拍摄内容实时上传到服务器,也可节省服务器的存储资源。在其他实施例中,摄像装置拍摄其关注区域的视频的过程中,每隔一段时间服务器会将其拍摄内容上传至服务器,这样服务器确定每个摄像装置的开始时间和结束时间后,可直接从自身的存储设备中调取到目标在每个摄像装置的关注区域内的活动视频,可节省视频合成过程中的视频传输时间,提高视频合成效率。
为便于服务器获取到目标在摄像装置的关注区域内的完整活动视频,服务器可在调取目标在摄像装置内的活动视频时扩大视频截取时间段。具体地,服务器可调取摄像装置拍摄的第一时间和第二时间之间的视频,其中,第一时间为该摄像装置的开始时间和第一预设时间的差值,第二时间为该摄像装置的结束时间和第二预设时间的和。其中,第一预设时间和第二预设时间可根据实际情况进行设定,在此不做限定,例如第一预设时间为2s或5s,第二预设时间为2s或3s。
其中,由于关注区域边界被遮挡或检测出错等特殊原因服务器可能无法获得某个摄像装置的开始时间或结束时间,服务器可自行填充该摄像装置的开始时间或结束时间,以使得服务器可调取到目标在该摄像装置的关注区域内的活动视频。例如,假设服务器无法获得一摄像装置的开始时间,服务器可将缺失开始时间的摄像装置的前一摄像装置的结束时间作为该缺失开始时间的摄像装置的开始时间。又例如,假设服务器无法获得一摄像装置的结束时间,服务器可将缺失结束时间的摄像装置的后一摄像装置的开始时间作为该缺失结束时间的摄像装置的结束时间。为便于实施上述开始时间和结束时间填充方法,摄像装置可按照位置关系进行排序。例如按照位置前后关系将摄像装置从大到小排序,这样序号为n的摄像装置的前一摄像装置即为序号为n+1的摄像装置,序号为n的摄像装置的后一摄像装置即为序号为n-1的摄像装置。又例如可按照位置前后关系将摄像装置从小到大排序,这样序号为n的摄像装置的前一摄像装置即为序号为n-1的摄像装置,序号为n的摄像装置的后一摄像装置即为序号为n+1的摄像装置,从而便于确定摄像装置的前一摄像装置和后一摄像装置,有利于实施上述开始时间和结束时间填充方法。
S106:服务器或用户终端合成多个摄像装置拍摄的活动视频,以得到目标在预设场所内的活动视频。
服务器基于步骤S105获得多个摄像装置拍摄的活动视频后,服务器或与服务器通信连接的用户终端可合成多个摄像装置拍摄的活动视频,以得到目标在预设场所内的活动视频。
在本实施例中,服务器获得多个摄像装置拍摄的活动视频后,自身可直接合成多个摄像装置拍摄的活动视频而得到目标在所述预设场所内的活动视频。另外可将合成的目标在预设场所内的活动视频发送给用户终端,以让用户可在用户终端上浏览目标在预设场所内的活动视频。
在其他实施例中,服务器获得多个摄像装置拍摄的活动视频后,可将多个摄像装置拍摄的活动视频发送给用户终端,以使用户终端自己合成多个摄像装置拍摄的活动视频而得到目标在预设场所内的活动视频。
另外,为便于目标在预设场所内的活动视频中目标的行动轨迹清晰可见,服务器或用户终端可按照时间先后训练将多个摄像装置拍摄的活动视频进行排列合成。进一步地,服务器或用户终端可按照开始时间或结束时间的先后训练将多个摄像装置拍摄的活动视频进行排列合成。
此外,服务器或用户终端可将视频累加方式加入到合成的目标在预设场所内的活动视频名称中,以便用户知晓目标活动视频的合成方式。
在本实施方式中,服务器先通过摄像装置确定摄像装置的开始时间和结束时间,然后基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置对应的关注区域内的活动视频,接着将多个摄像装置拍摄的活动视频进行合成而得到目标在预设场所内的活动视频,这样对多个摄像装置拍摄的视频可进行自动合成,无需人工手动合成,节省人力资源。
在上述实施例视频合成方法中,可不区分不同的目标,即可将若干个目标作为一个整体,这样可将摄像装置的关注区域内第一个目标出现的时间作为摄像装置的开始时间,将所有目标离开摄像装置的关注区域的时间作为摄像装置的结束时间。
例如,在利用目标触发摄像装置的关注区域的边界的方式确定摄像装置的开始时间和结束时间的情况下,摄像装置可记录每一个边界被各个目标触发的时间,然后摄像装置或服务器基于所有开始边界被多个目标触发的时间确定摄像装置的开始时间,并基于所有结束边界被多个目标触发的时间确定摄像装置的结束时间。具体地,摄像装置可将每一个边界被各个目标触发的时间发送给服务器;服务器可确定每一个开始边界被触发的最早时间,继而计算所有开始边界被触发的最早时间的均值或中值而得到摄像装置的开始时间;服务器还可确定每一个结束边界被触发的最晚时间,继而计算所有结束边界被触发的最晚时间的均值或中值而得到摄像装置的结束时间。
或者在其他实施例中,可以区分不同的目标,每个目标均有各自的标识,服务器可基于目标标识确定每一目标在该摄像装置的开始时间和结束时间,然后基于每一目标对应于各个摄像装置的开始时间和结束时间调取到每一目标在各个摄像装置的关注区域内的活动视频,继而服务器或用户终端合成每一目标在多个摄像装置的关注区域内的活动视频而得到每一目标在预设场所内的活动视频。
具体地,在利用目标触发摄像装置的关注区域的边界的方式确定摄像装置的开始时间和结束时间的情况下,服务器可利用边界被触发时间以及触发该边界的目标标识的对应关系,确定每一目标在该摄像装置的开始时间和结束时间。
其中,服务器可通过多种方式确定边界被触发时间以及触发该边界的目标标识的对应关系,在此不做限定。
例如,在摄像装置的关注区域的开始边界和结束边界处设有读取装置,而目标上穿戴有含有目标标识信息的射频芯片,当目标运动到读取装置一定范围内,设在关注区域的开始边界或结束边界的读取装置可以读取到射频芯片的目标标识信息,读取装置可将感应到射频芯片的时间以及从射频芯片读取到的目标标识一同发送给服务器,这样服务器联合从摄像装置获得的边界被触发时间就可知晓边界被触发时间以及触发该边界的目标标识的对应关系。
又例如,摄像装置确定目标触发其关注区域的某一边界时,可对目标触发其边界的图像帧中的被触发边界区域处的目标进行目标检测,以确定触发该边界的目标标识,摄像装置可将边界被触发时间以及触发该边界的目标标识一同发送给服务器,这样服务器就可知晓边界被触发时间以及触发该边界的目标标识的对应关系。
对于服务器,其实现视频合成方法的步骤请参阅图4,图4是本申请视频合成方法中服务器的工作流程示意图。
S201:服务器通过摄像装置确定摄像装置的开始时间和结束时间。
开始时间和结束时间分别为目标进入和离开摄像装置的关注区域的时间。
服务器可按照摄像装置的标识将开始时间和结束时间两两记为一组,以便在步骤S202中基于摄像装置的标识准确调取到目标在摄像装置的关注区域内的活动视频。
S202:服务器基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置的关注区域内的活动视频。
S203:服务器合成多个摄像装置拍摄的活动视频,以得到目标在预设场所内的活动视频;或者,服务器将每个摄像装置拍摄的活动视频发送给用户终端,以使用户终端合成多个摄像装置拍摄的活动视频。
本实施方式中上述步骤与图2所示实施例中的相关步骤类似,具体不再赘述。服务器先通过摄像装置确定摄像装置的开始时间和结束时间,然后基于每个摄像装置的开始时间和结束时间,调取目标在每个摄像装置对应的关注区域内的活动视频,接着将多个摄像装置拍摄的活动视频进行合成而得到目标在预设场所内的活动视频,这样对多个摄像装置拍摄的视频可进行自动合成,无需人工手动合成,节省人力资源。
对于摄像装置,其实现视频合成方法的步骤请参阅图5,图5是本申请视频合成方法中摄像装置的工作流程示意图。其中,可将与服务器通信连接且用于拍摄预设场所的多个摄像装置中的一个摄像装置称为第一摄像装置,将与服务器通信连接且用于拍摄预设场所的多个摄像装置中的其余摄像装置称为第二摄像装置。
S301:第一摄像装置记录目标进入其关注区域的时间,并记为开始时间,将开始时间发送给服务器。
S302:第一摄像装置记录目标离开其关注区域的时间,并记为结束时间,将结束时间发送给服务器。
S303:第一摄像装置与服务器交互,以得到目标在预设场所内的活动视频。
具体地,第一摄像装置与服务器交互,以使服务器基于开始时间和结束时间,调取到目标在第一摄像装置对应的关注区域内的活动视频,并使服务器或与服务器通信连接的用户终端将第一摄像装置和第二摄像装置拍摄的活动视频合成,以得到目标在预设场所内的活动视频。
本实施方式中上述步骤与图2所示实施例中的相关步骤类似,具体不再赘述。摄像装置自行确认目标进入和离开其关注区域的时间(即开始时间和结束时间),并将该时间发送给服务器,以让服务器可基于每个摄像装置的开始时间和结束时间调取到目标在每个摄像装置的关注区域内的活动视频,进而便于服务器或用户终端合成多个摄像装置的活动视频而得到目标在预设场所内的活动视频,这样本申请的视频合成系统可自动合成多个摄像装置拍摄的视频,无需人工手动合成,节省人力资源,并且可得到目标在预设场所内的完整视频。
请参阅图6,图6是本申请电子设备20一实施方式的结构示意图。本申请电子设备20包括处理器22,处理器22用于执行指令以实现本申请上述任一实施方式的方法及任意不冲突的组合所提供的方法。
电子设备20可为摄像装置或服务器等设备,在此不做限定。
处理器22还可以称为CPU(Central Processing Unit,中央处理单元)。处理器22可能是一种集成电路芯片,具有信号的处理能力。处理器22还可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器,或者该处理器22也可以是任何常规的处理器等。
电子设备20还可进一步包括存储器21,用于存储处理器22运行所需的指令和数据。
请参阅图7,图7为本申请实施方式中计算机可读存储介质的结构示意图。本申请实施例的计算机可读存储介质30存储有指令/程序数据31,该指令/程序数据31被执行时实现本申请上述方法任一实施例以及任意不冲突的组合所提供的方法。其中,该指令/程序数据31可以形成程序文件以软件产品的形式存储在上述存储介质30中,以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质30包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质,或者是计算机、服务器、手机、平板等设备。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施方式,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种视频合成方法,其特征在于,应用于服务器,所述服务器与多个摄像装置通信连接,所述多个摄像装置的关注区域的交集覆盖预设场所,所述视频合成方法包括:
所述服务器通过所述摄像装置确定所述摄像装置的开始时间和结束时间,所述开始时间和所述结束时间分别为目标进入和离开所述摄像装置的关注区域的时间;
所述服务器基于每个所述摄像装置的开始时间和结束时间,调取目标在每个所述摄像装置的关注区域内的活动视频;
所述服务器合成所述多个摄像装置拍摄的活动视频;或者,所述服务器将每个所述摄像装置拍摄的活动视频发送给用户终端,以使所述用户终端合成所述多个摄像装置拍摄的活动视频。
2.根据权利要求1所述的视频合成方法,其特征在于,所述开始时间是所述摄像装置利用绊线入侵检测算法记录的所述目标触发所述摄像装置的关注区域的开始边界的时间,所述结束时间是摄像装置利用绊线入侵检测算法记录的所述目标触发所述摄像装置的关注区域的结束边界的时间。
3.根据权利要求2所述的视频合成方法,其特征在于,所述服务器通过所述摄像装置确定所述摄像装置的开始时间和结束时间的步骤包括:
所述服务器从所述摄像装置获取所述摄像装置的多个开始时间和多个结束时间,所述多个开始时间分别是所述摄像装置记录所述目标触发所述摄像装置的多个开始边界的时间,所述多个结束时间分别是所述摄像装置记录所述目标触发所述摄像装置的多个结束边界的时间;
所述服务器对所述多个开始时间进行均值滤波,以得到所述摄像装置最终的开始时间;
所述服务器对所述多个结束时间进行均值滤波,以得到所述摄像装置最终的结束时间。
4.根据权利要求2所述的视频合成方法,其特征在于,所述目标的数量为多个,所述服务器通过所述摄像装置确定所述摄像装置的开始时间和结束时间的步骤包括:
所述服务器从所述摄像装置获取所述摄像装置的多个开始时间和多个结束时间,所述多个开始时间分别是所述摄像装置记录多个目标触发所述摄像装置的开始边界的时间,所述多个结束时间分别是所述摄像装置记录多个目标触发所述摄像装置的结束边界的时间;
所述服务器确认所述开始边界对应的开始时间中的最早时间,并将所述摄像装置的关注区域的所有开始边界的最早时间的均值滤波结果作为所述摄像装置最终的开始时间;
所述服务器确认所述结束边界对应的结束时间中的最晚时间,并将所述摄像装置的关注区域的所有结束边界的最晚时间的均值滤波结果作为所述摄像装置最终的结束时间。
5.根据权利要求1所述的视频合成方法,其特征在于,所述服务器基于每个所述摄像装置的开始时间和结束时间,调取目标在每个所述摄像装置的关注区域内的活动视频的步骤包括:
所述服务器调取所述摄像装置拍摄的第一时间和第二时间之间的视频,所述第一时间为所述开始时间和第一预设时间的差值,所述第二时间为所述结束时间和第二预设时间的和。
6.根据权利要求1所述的视频合成方法,其特征在于,所述服务器通过所述摄像装置确定所述摄像装置的开始时间和结束时间的步骤包括:
在所述服务器从所述摄像装置获取不到所述摄像装置的开始时间的情况下,将所述摄像装置的前一摄像装置的结束时间作为所述摄像装置的开始时间;和/或,
在所述服务器从所述摄像装置获取不到所述摄像装置的结束时间的情况下,将所述摄像装置的后一个摄像装置的开始时间作为所述摄像装置的结束时间。
7.一种视频合成方法,其特征在于,应用于第一摄像装置,所述第一摄像装置和第二摄像装置均与服务器通信连接,所述第一摄像装置和所述第二摄像装置的关注区域的交集覆盖预设场所,所述视频合成方法包括:
所述第一摄像装置记录目标进入其关注区域的时间,并记为开始时间,将所述开始时间发送给所述服务器;
所述第一摄像装置记录所述目标离开其关注区域的时间,并记为结束时间,将所述结束时间发送给所述服务器;
所述第一摄像装置与所述服务器交互,以使所述服务器基于所述开始时间和所述结束时间,调取到所述目标在所述第一摄像装置的关注区域内的活动视频,并使所述服务器或与所述服务器通信连接的用户终端将所述第一摄像装置和所述第二摄像装置拍摄的活动视频合成,以得到所述目标在所述预设场所内的活动视频。
8.根据权利要求7所述的视频合成方法,其特征在于,所述第一摄像装置记录目标进入其关注区域的时间的步骤包括:
所述第一摄像装置利用绊线入侵检测算法记录所述目标触发所述关注区域的开始边界的时间;
所述第一摄像装置记录所述目标离开其关注区域的时间的步骤包括:
所述第一摄像装置利用绊线入侵检测算法记录所述目标触发所述关注区域的结束边界的时间。
9.一种电子设备,其特征在于,所述电子设备包括处理器,所述处理器用于执行指令以实现如权利要求1-8中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有程序和/或指令,其特征在于,所述程序和/或指令被执行时实现权利要求1-8中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111296378.7A CN114245033A (zh) | 2021-11-03 | 2021-11-03 | 视频合成方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111296378.7A CN114245033A (zh) | 2021-11-03 | 2021-11-03 | 视频合成方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114245033A true CN114245033A (zh) | 2022-03-25 |
Family
ID=80743734
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111296378.7A Pending CN114245033A (zh) | 2021-11-03 | 2021-11-03 | 视频合成方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114245033A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116074627A (zh) * | 2023-03-09 | 2023-05-05 | 广东德燊科技有限公司 | 一种基于监控的目标视频生成方法、装置、系统和介质 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0805405A2 (en) * | 1996-02-05 | 1997-11-05 | Texas Instruments Incorporated | Motion event detection for video indexing |
EP1184810A2 (en) * | 1996-02-05 | 2002-03-06 | Texas Instruments Incorporated | Improvements in or relating to motion event detection |
EP1489847A2 (en) * | 2003-06-18 | 2004-12-22 | Matsushita Electric Industrial Co., Ltd. | Video surveillance system, surveillance video composition apparatus, and video surveillance server |
CN101436337A (zh) * | 2008-12-23 | 2009-05-20 | 北京中星微电子有限公司 | 一种事件监测方法及装置 |
US20100157049A1 (en) * | 2005-04-03 | 2010-06-24 | Igal Dvir | Apparatus And Methods For The Semi-Automatic Tracking And Examining Of An Object Or An Event In A Monitored Site |
CN101867730A (zh) * | 2010-06-09 | 2010-10-20 | 马明 | 一种基于用户轨迹的多媒体合成方法 |
CN103379307A (zh) * | 2012-04-13 | 2013-10-30 | 何磊 | 基于无线定位的视频轨迹追踪监控与检索回放系统 |
CN103544806A (zh) * | 2013-10-31 | 2014-01-29 | 江苏物联网研究发展中心 | 基于视频绊线规则的重要物资运输车辆监控预警系统 |
CN104063883A (zh) * | 2014-07-07 | 2014-09-24 | 杭州银江智慧医疗集团有限公司 | 一种基于对象和关键帧相结合的监控视频摘要生成方法 |
CN104408942A (zh) * | 2014-11-27 | 2015-03-11 | 天津艾思科尔科技有限公司 | 车辆智能测速装置与方法 |
CN104968048A (zh) * | 2015-06-29 | 2015-10-07 | 华南理工大学 | 结合移动网络记录和视频监控数据的目标人物追踪方法 |
CN105763613A (zh) * | 2016-03-17 | 2016-07-13 | 浙江宇视科技有限公司 | 一种监控目标与监控录像关联备份方法及装置 |
CN108540754A (zh) * | 2017-03-01 | 2018-09-14 | 中国电信股份有限公司 | 用于视频监控中多视频拼接的方法、装置和系统 |
CN110915224A (zh) * | 2018-08-01 | 2020-03-24 | 深圳市大疆创新科技有限公司 | 视频剪辑方法、装置、设备及存储介质 |
CN111143504A (zh) * | 2019-12-31 | 2020-05-12 | 信阳师范学院 | 一种多摄像机室内视频地图构建方法 |
CN112544071A (zh) * | 2020-07-27 | 2021-03-23 | 华为技术有限公司 | 视频拼接的方法、装置及系统 |
CN113393629A (zh) * | 2021-05-25 | 2021-09-14 | 浙江大华技术股份有限公司 | 入侵行为检测方法、装置和多路视频监控系统 |
CN113556481A (zh) * | 2021-07-30 | 2021-10-26 | 北京达佳互联信息技术有限公司 | 视频特效的生成方法、装置、电子设备及存储介质 |
-
2021
- 2021-11-03 CN CN202111296378.7A patent/CN114245033A/zh active Pending
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0805405A2 (en) * | 1996-02-05 | 1997-11-05 | Texas Instruments Incorporated | Motion event detection for video indexing |
EP1184810A2 (en) * | 1996-02-05 | 2002-03-06 | Texas Instruments Incorporated | Improvements in or relating to motion event detection |
EP1489847A2 (en) * | 2003-06-18 | 2004-12-22 | Matsushita Electric Industrial Co., Ltd. | Video surveillance system, surveillance video composition apparatus, and video surveillance server |
US20100157049A1 (en) * | 2005-04-03 | 2010-06-24 | Igal Dvir | Apparatus And Methods For The Semi-Automatic Tracking And Examining Of An Object Or An Event In A Monitored Site |
CN101436337A (zh) * | 2008-12-23 | 2009-05-20 | 北京中星微电子有限公司 | 一种事件监测方法及装置 |
CN101867730A (zh) * | 2010-06-09 | 2010-10-20 | 马明 | 一种基于用户轨迹的多媒体合成方法 |
CN103379307A (zh) * | 2012-04-13 | 2013-10-30 | 何磊 | 基于无线定位的视频轨迹追踪监控与检索回放系统 |
CN103544806A (zh) * | 2013-10-31 | 2014-01-29 | 江苏物联网研究发展中心 | 基于视频绊线规则的重要物资运输车辆监控预警系统 |
CN104063883A (zh) * | 2014-07-07 | 2014-09-24 | 杭州银江智慧医疗集团有限公司 | 一种基于对象和关键帧相结合的监控视频摘要生成方法 |
CN104408942A (zh) * | 2014-11-27 | 2015-03-11 | 天津艾思科尔科技有限公司 | 车辆智能测速装置与方法 |
CN104968048A (zh) * | 2015-06-29 | 2015-10-07 | 华南理工大学 | 结合移动网络记录和视频监控数据的目标人物追踪方法 |
CN105763613A (zh) * | 2016-03-17 | 2016-07-13 | 浙江宇视科技有限公司 | 一种监控目标与监控录像关联备份方法及装置 |
CN108540754A (zh) * | 2017-03-01 | 2018-09-14 | 中国电信股份有限公司 | 用于视频监控中多视频拼接的方法、装置和系统 |
CN110915224A (zh) * | 2018-08-01 | 2020-03-24 | 深圳市大疆创新科技有限公司 | 视频剪辑方法、装置、设备及存储介质 |
CN111143504A (zh) * | 2019-12-31 | 2020-05-12 | 信阳师范学院 | 一种多摄像机室内视频地图构建方法 |
CN112544071A (zh) * | 2020-07-27 | 2021-03-23 | 华为技术有限公司 | 视频拼接的方法、装置及系统 |
CN113393629A (zh) * | 2021-05-25 | 2021-09-14 | 浙江大华技术股份有限公司 | 入侵行为检测方法、装置和多路视频监控系统 |
CN113556481A (zh) * | 2021-07-30 | 2021-10-26 | 北京达佳互联信息技术有限公司 | 视频特效的生成方法、装置、电子设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116074627A (zh) * | 2023-03-09 | 2023-05-05 | 广东德燊科技有限公司 | 一种基于监控的目标视频生成方法、装置、系统和介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106296724B (zh) | 一种目标人物的轨迹信息的确定方法、系统及处理服务器 | |
US9788065B2 (en) | Methods and devices for providing a video | |
CN112291520B (zh) | 异常事件识别方法、装置、存储介质及电子装置 | |
CN108062507B (zh) | 一种视频处理方法及装置 | |
US20160210516A1 (en) | Method and apparatus for providing multi-video summary | |
CN103988227A (zh) | 用于图像捕获目标锁定的方法和装置 | |
CN113628404A (zh) | 一种减少无效告警的方法及装置 | |
US20150116471A1 (en) | Method, apparatus and storage medium for passerby detection | |
CN106231265A (zh) | 一种图像采集方法及图像采集系统 | |
CN110267009B (zh) | 图像处理方法、装置、服务器及存储介质 | |
EP3635946A1 (en) | Object-tracking based slow-motion video capture | |
CN110191324B (zh) | 图像处理方法、装置、服务器及存储介质 | |
CN106537799A (zh) | 摄像头控制和图像流送 | |
CN114245033A (zh) | 视频合成方法及装置 | |
CN114500826B (zh) | 一种智能拍摄方法、装置及电子设备 | |
CN106126533A (zh) | 获取真实照片及对应的实时数据的拍照方法、装置及系统 | |
CN108540817B (zh) | 视频数据处理方法、装置、服务器及计算机可读存储介质 | |
CN104284125A (zh) | 一种多媒体拍摄处理方法、装置及系统 | |
CN105467741A (zh) | 一种全景拍照方法及终端 | |
EP3629577B1 (en) | Data transmission method, camera and electronic device | |
CN112165579A (zh) | 一种规范拍摄方法、系统、计算机设备及存储介质 | |
CN109698933B (zh) | 数据传输方法及摄像机、电子设备、计算机可读存储介质 | |
CN116017136A (zh) | 拍摄设备的控制方法和装置、存储介质及电子装置 | |
CN107979731B (zh) | 一种获取音视频数据的方法、装置及系统 | |
CN108540759B (zh) | 视频监控方法、装置和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |