CN115297342A - 多摄像头视频处理方法、装置、存储介质及计算机设备 - Google Patents

多摄像头视频处理方法、装置、存储介质及计算机设备 Download PDF

Info

Publication number
CN115297342A
CN115297342A CN202210928311.9A CN202210928311A CN115297342A CN 115297342 A CN115297342 A CN 115297342A CN 202210928311 A CN202210928311 A CN 202210928311A CN 115297342 A CN115297342 A CN 115297342A
Authority
CN
China
Prior art keywords
video
time
target
videos
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210928311.9A
Other languages
English (en)
Other versions
CN115297342B (zh
Inventor
王一炜
洪海滨
熊腾浩
黄锦东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Weride Technology Co Ltd
Original Assignee
Guangzhou Weride Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Weride Technology Co Ltd filed Critical Guangzhou Weride Technology Co Ltd
Priority to CN202210928311.9A priority Critical patent/CN115297342B/zh
Publication of CN115297342A publication Critical patent/CN115297342A/zh
Application granted granted Critical
Publication of CN115297342B publication Critical patent/CN115297342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本申请提供了一种多摄像头视频处理方法、装置、存储介质及计算机设备。该方法包括:获取视频数据;其中,视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息;根据每个视频的视频信息及其存储路径建立索引关系;基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;根据索引关系获取目标车辆在目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。本申请能够高效地处理多摄像头视频合成便于后续快速查找的多视角视频。

Description

多摄像头视频处理方法、装置、存储介质及计算机设备
技术领域
本申请涉及自动驾驶技术领域,尤其涉及一种多摄像头视频处理方法、装置、存储介质及计算机设备。
背景技术
自动驾驶车辆中会设有多个摄像头用于拍摄不同视角的视频,需要将视频上传至云端,运维人员能够从云端调取想要进行播放的视频进行观看,便于对自动驾驶车辆的运行进行分析。
但云端中会上传大量自动驾驶车辆在不同时间拍摄的不同视角的视频,运维人员难以快速地调取目标视频。
发明内容
本申请实施例提供了一种多摄像头视频处理方法、装置、存储介质及计算机设备,能够高效地处理多摄像头视频合成便于后续快速查找的多视角视频。
第一方面,本申请提供了一种多摄像头视频处理方法,所述方法包括:
获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
根据每个视频的视频信息及其存储路径建立索引关系;
基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
在其中一个实施例中,所述预设的优先级规则包括:
发生过故障的自动驾驶车辆的视频优先于未发生过故障的自动驾驶车辆的视频;
发生过故障的自动驾驶车辆的各视频中与发生故障的故障时间的时间差越小的时间片段对应的视频优先级越高;
对于优先级相同的视频,则根据视频所述时间片段的时间顺序进行处理。
在其中一个实施例中,所述根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,包括:
获取各自动驾驶车辆的故障信息;
若根据所述故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间;
将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段;
若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。
在其中一个实施例中,所述根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,包括:
若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段;
若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
在其中一个实施例中,所述基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段,包括:
若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理;
将分割处理得到的各子视频分配至对应的时间片段。
在其中一个实施例中,所述根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,包括:
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频;
根据预设的画面模板将各视频合并至同一画面并对齐时间;
保存合并生成的合成视频,所述合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
在其中一个实施例中,所述方法还包括:
若获取的任一视频为延迟上传视频,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;
其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
第二方面,本申请提供了一种多摄像头视频处理装置,包括:
数据获取模块,用于获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
索引建立模块,用于根据每个视频的视频信息及其存储路径建立索引关系;
视频分配模块,用于基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
确定模块,用于根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
合并处理模块,用于根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
第三方面,本申请提供了一种存储介质,所述存储介质中存储有计算机可读指令,所述计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行如上述任一项实施例所述多摄像头视频处理方法的步骤。
第四方面,本申请提供了一种计算机设备,包括:一个或多个处理器,以及存储器;
所述存储器中存储有计算机可读指令,所述一个或多个处理器执行时所述计算机可读指令时,执行如上述任一项实施例所述多摄像头视频处理方法的步骤。
从以上技术方案可以看出,本申请实施例具有以下优点:
本申请提供的多摄像头视频处理方法、装置、存储介质及计算机设备,对当前所获取的视频数据进行处理,获取的视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;根据每个视频的视频信息及其上传后存储的存储路径建立索引关系,并基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段,根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,根据索引关系获取目标车辆在目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成获取的所有视频的合并处理,通过对视频按照时间片段进行划分,能够以时间片段为单位进行视频处理,无需所有自动驾驶车辆的视频数据全部完成上传后再进行处理,也不会由于视频缺失影响处理进程,而且可以根据优先级规则灵活配置处理顺序,合成的视频也是以时间片段为单位,在需要调取播放时通过时间片段能够实现快速查找,即本申请能够高效地处理多摄像头视频合成便于后续快速查找的多视角视频。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
图1为一个实施例中,多摄像头视频处理方法的应用环境示意图;
图2为一个实施例中,多摄像头视频处理方法的流程图;
图3为一个实施例中,根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段步骤的流程图;
图4为一个实施例中,基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段步骤的流程图;
图5为一个实施例中,根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存步骤的流程图;
图6为一个实施例中,多摄像头视频处理装置的结构框图;
图7为一个实施例中,计算机设备的内部结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1为一个实施例中多摄像头视频处理方法的应用环境示意图。如图1所示,该应用环境包括自动驾驶车辆101和服务器102。其中,自动驾驶车辆101通过网络与服务器102进行通信。数据存储系统可以存储服务器102需要处理的数据。数据存储系统可以集成在服务器102上,也可以放在云上或其他网络服务器上。自动驾驶车辆101将其中的各摄像头拍摄的视频上传至服务器102,服务器102实时根据接收到的视频数据进行同步处理。其中,自动驾驶车辆101可以直接通过网络上传数据至服务器102,也可以在完成运行任务后由运维人员将自动驾驶车辆101用于存储数据的车载硬盘集中接入用于上传数据至服务器102的上传设备进行集中上传,上传设备与服务器102通过网络进行通信。服务器102可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
如图2所示,本申请实施例提供了一种多摄像头视频处理方法,以运行于图1中的服务器上为例进行描述,所述方法包括步骤S201-S205,其中:
步骤S201,获取视频数据。
其中,视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间。视频数据随着时间推移可能会增加,直至所有需要上传视频的自动驾驶车辆的视频全部完成上传。
在其中一个实施例中,视频的文件名包括视频信息的全部内容,根据文件名即可获取视频信息。
步骤S202,根据每个视频的视频信息及其存储路径建立索引关系。
索引关系即将每个视频的视频信息与存储路径建立对应的可查询关联关系,例如索引表,也可以采用其他形式保存索引关系。通过视频信息能够获取视频的存储路径,实现调用。
步骤S203,基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段。
其中,预设的时间片段是指将自然时间按照一定的间隔划分为时间片段,以5分钟为间隔为例,从00:00至00:10,划分为00:00-00:05和00:05-00:10两个时间片段。时间片段的开始时间和结束时间根据各自动驾驶车辆本次需要上传的视频的最早产生时间至昨晚结束时间确定。
将视频数据中的每个视频的视频开始时间及视频结束时间与各时间片段的起止时间比较,确定与其对应的时间片段,例如视频开始时间为00:02,视频结束时间为00:05,则将该视频分配至00:00-00:05时间片段。因为每个视频拍摄的起止时间会存在差异,若直接根据视频的起止时间进行查询处理效率较低,因此本实施通过对自然时间进行分段,将视频与时间片段相关联,进行初步整理,后续调取视频的灵活性更高,并且在实现这一步骤时不需要对视频内容进行处理,只需要读取视频信息即可,处理的数据量较小,能够快速处理,也不会占用太多计算资源。
在其中一个实施例中,分配时间片段可以是通过标记的方式完成分配,也可以是建立时间片段与视频信息的关联关系,只需要能够知道在每个时间片段中对应的视频即可,也可以通过为每个时间片段创建文件夹,将分配完成的视频移动至对应时间片段的文件夹保存。
步骤S204,根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段。
由于云端需要处理的数据量非常庞大,无法保证当前获取到的视频数据都能够同时进行处理,因此可以根据预设的优先级规则确定处理顺序,并根据当前处理顺序确定当前所要处理的目标车辆及目标时间片段,灵活性高。
步骤S205,根据索引关系获取目标车辆在目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
利用目标时间片段在索引关系先筛选出该时间片段下的视频,在根据目标车辆确定当前视频数据中已有的该目标车辆在目标时间片段下的视频,将目标时间片段中的各视频进行合并处理输出目标车辆在目标时间片段下的多摄像头拍摄的多角度视频,将生成的视频进行保存。随后重新确定下一处理顺序的目标车辆及目标时间片段获取对应视频进行合并处理和保存,重复这一过程,直至所有视频都完成合并处理。
本申请提供的多摄像头视频处理方法,对当前所获取的视频数据进行处理,获取的视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;根据每个视频的视频信息及其上传后存储的存储路径建立索引关系,并基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段,根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,根据索引关系获取目标车辆在目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成获取的所有视频的合并处理,通过对视频按照时间片段进行划分,能够以时间片段为单位进行视频处理,无需所有自动驾驶车辆的视频数据全部完成上传后再进行处理,也不会由于视频缺失影响处理进程,而且可以根据优先级规则灵活配置处理顺序,合成的视频也是以时间片段为单位,在需要调取播放时通过时间片段能够实现快速查找,即本申请能够高效地处理多摄像头视频合成便于后续快速查找的多视角视频。
在其中一个实施例中,所述预设的优先级规则包括:
发生过故障的自动驾驶车辆的视频优先于未发生过故障的自动驾驶车辆的视频;发生过故障的自动驾驶车辆的各视频中与发生故障的故障时间的时间差越小的时间片段对应的视频优先级越高;对于优先级相同的视频,则根据视频所述时间片段的时间顺序进行处理。
对于运维人员而言,故障分析是在保证自动驾驶安全运行中非常重要的工作,能够及时调取故障时间点附近的时间能够帮助运维人员快速实现故障分析,因此在本实施例中会优先处理发生过故障的自动驾驶车辆的与故障时间更近的视频。在处理视频时可以按照时间片段与故障时间的时间差进行排序,时间差越小,若时间片段在故障时间之前,则以时间片段的截止时间与故障时间的时间差进行判断;若时间片段在故障时间之后,则以时间片段的起始时间与故障时间的时间差进行判断。
如图3所示,在其中一个实施例中,所述根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,包括:
步骤S301,获取各自动驾驶车辆的故障信息。
其中,故障信息是云端根据自动驾驶车辆上传的故障记录或运行参数确定的,故障信息用于反映自动驾驶车辆是否发生过故障,以及发生故障的时间。本申请实施例中所指的故障可以是软件故障、硬件故障等等,本领域技术人员可以根据实际情况确定用于进行判断优先级的故障类型的范围。
步骤S302,根据各自动驾驶车辆的故障信息确定是否有自动驾驶车辆发生过故障。
步骤S303,若根据故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间。
步骤S304,将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段。
步骤S305,若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段。
本实施例中,在当前所需处理的视频数据中对应的自动驾驶车辆存在发生过故障的,则将发生过故障的自动驾驶车辆确定为目标车辆,该车辆的各视频中所属的时间片段与故障时间的时间差最小的时间片段确定为目标时间片段。若没有车辆发生过故障,则按照当前所需处理的视频数据中对应的各时间片段的时间顺序进行处理,时间最早的时间片段确定为目标时间片段。其中,若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
如图4所示,在其中一个实施例中,所述基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段,包括:
步骤S401,若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理。
步骤S402,将分割处理得到的各子视频分配至对应的时间片段。
本实施例中,对于一些视频较长且长于单个时间片段时长的情况,根据视频的持续时间跨越的时间片段对视频进行分割,分割为多个不大于单个时间片段时长的子视频,便于进行后续处理。例如视频开始时间为00:01,视频结束时间为00:11,该视频跨越了时间片段00:00-00:05、00:05-00:10、00:10-00:15,则将该视频分割为三个子视频,三个子视频的时间分别为00:01-00:05,00:05-00:10、00:10-00:11,并将三个子视频分别分配至对应的时间片段。
如图5所示,在其中一个实施例中,所述根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,包括:
步骤S501,根据索引关系获取目标车辆在目标时间片段的各视频。
步骤S502,根据预设的画面模板将各视频合并至同一画面并对齐时间。
步骤S503,保存合并生成的合成视频。
其中,合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
本实施例中,根据索引关系以及确定的目标车辆和目标时间片段,调取对应的视频,将目标车辆在目标时间片段下的各视频进行时间对齐以及画面拼接,将各摄像头拍摄的多角度视频合并至同一画面,完成合并后保存合并处理后生成的合成视频,并根据目标车辆的车号以及目标时间片段进行命名,便于快速查找调取。
在其中一个实施例中,所述方法还包括:
若获取的任一视频为延迟上传视频,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;
其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
在进行视频合并处理时,其对应车辆在当前处理的时间片段下的视频未必完全完成上传,此时则仅对已有视频进行合并处理,在后续接收到延迟上传的缺失视频时,再将延迟上传视频与对应时间片段的合成视频进行合并处理,保证视频处理的进程不会受到延迟上传的视频或丢失的视频影响。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
下面对本申请实施例提供的多摄像头视频处理装置进行描述,下文描述的多摄像头视频处理装置与上文描述的多摄像头视频处理方法可相互对应参照。
如图6所示,本申请实施例提供了一种多摄像头视频处理装置600,包括:
数据获取模块601,用于获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
索引建立模块602,用于根据每个视频的视频信息及其存储路径建立索引关系;
视频分配模块603,用于基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
确定模块604,用于根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
合并处理模块605,用于根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
在其中一个实施例中,确定模块被配置为用于执行以下步骤:
获取各自动驾驶车辆的故障信息;
若根据所述故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间;
将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段;
若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。
在其中一个实施例中,确定模块还被配置为用于执行以下步骤:
若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段;
若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
在其中一个实施例中,视频分配模块被配置为用于执行以下步骤:
若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理;
将分割处理得到的各子视频分配至对应的时间片段。
在其中一个实施例中,合并处理模块被配置为用于执行以下步骤:
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频;
根据预设的画面模板将各视频合并至同一画面并对齐时间;
保存合并生成的合成视频,所述合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
在其中一个实施例中,所述装置还包括:
二次合并模块,用于在获取的任一视频为延迟上传视频时,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
上述多摄像头视频处理装置中各个模块的划分仅仅用于举例说明,在其他实施例中,可将多摄像头视频处理装置按照需要划分为不同的模块,以完成上述多摄像头视频处理装置的全部或部分功能。上述多摄像头视频处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,本申请还提供了一种存储介质,所述存储介质中存储有计算机可读指令,所述计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行以下步骤:
获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
根据每个视频的视频信息及其存储路径建立索引关系;
基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
在其中一个实施例中,计算机可读指令被处理器执行时还实现以下步骤:
获取各自动驾驶车辆的故障信息;
若根据所述故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间;
将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段;
若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。
在其中一个实施例中,计算机可读指令被处理器执行时还实现以下步骤:
若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段;
若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
在其中一个实施例中,计算机可读指令被处理器执行时还实现以下步骤:
若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理;
将分割处理得到的各子视频分配至对应的时间片段。
在其中一个实施例中,计算机可读指令被处理器执行时还实现以下步骤:
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频;
根据预设的画面模板将各视频合并至同一画面并对齐时间;
保存合并生成的合成视频,所述合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
在其中一个实施例中,计算机可读指令被处理器执行时还实现以下步骤:
若获取的任一视频为延迟上传视频,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;
其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
在一个实施例中,本申请还提供了一种计算机设备,所述计算机设备中存储有计算机可读指令,所述一个或多个处理器执行所述计算机可读指令时,执行以下步骤:
获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
根据每个视频的视频信息及其存储路径建立索引关系;
基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
在其中一个实施例中,处理器执行计算机可读指令时还执行以下步骤:
获取各自动驾驶车辆的故障信息;
若根据所述故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间;
将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段;
若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。
在其中一个实施例中,处理器执行计算机可读指令时还执行以下步骤:
若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段;
若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
在其中一个实施例中,处理器执行计算机可读指令时还执行以下步骤:
若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理;
将分割处理得到的各子视频分配至对应的时间片段。
在其中一个实施例中,处理器执行计算机可读指令时还执行以下步骤:
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频;
根据预设的画面模板将各视频合并至同一画面并对齐时间;
保存合并生成的合成视频,所述合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
在其中一个实施例中,处理器执行计算机可读指令时还执行以下步骤:
若获取的任一视频为延迟上传视频,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;
其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
示意性地,在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种多摄像头视频处理方法。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间可以根据需要进行组合,且相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种多摄像头视频处理方法,其特征在于,所述方法包括:
获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
根据每个视频的视频信息及其存储路径建立索引关系;
基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
2.根据权利要求1所述的多摄像头视频处理方法,其特征在于,所述预设的优先级规则包括:
发生过故障的自动驾驶车辆的视频优先于未发生过故障的自动驾驶车辆的视频;
发生过故障的自动驾驶车辆的各视频中与发生故障的故障时间的时间差越小的时间片段对应的视频优先级越高;
对于优先级相同的视频,则根据视频所述时间片段的时间顺序进行处理。
3.根据权利要求2所述的多摄像头视频处理方法,其特征在于,所述根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,包括:
获取各自动驾驶车辆的故障信息;
若根据所述故障信息确定任一自动驾驶车辆发生过故障,则确定发生故障的自动驾驶车辆发生故障的故障时间;
将发生过故障的自动驾驶车辆确定为目标车辆,与发生故障的故障时间的时间差最小的时间片段确定为目标时间片段;
若存在时间差相同的时间片段,则将较早的时间片段确定为目标时间片段。
4.根据权利要求3所述的多摄像头视频处理方法,其特征在于,所述根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段,包括:
若根据所述故障信息确定全部自动驾驶车辆均未发生过故障,则将各视频中对应的时间片段较早的时间片段确定为目标时间片段;
若在同一时间片段中包括多个自动驾驶车辆的视频,则按照预设的车号顺序确定目标时间片段。
5.根据权利要求1所述的多摄像头视频处理方法,其特征在于,所述基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段,包括:
若视频的视频开始时间至视频结束时间跨越多个时间片段,则根据其跨越的多个时间片段对所述视频进行分割处理;
将分割处理得到的各子视频分配至对应的时间片段。
6.根据权利要求1所述的多摄像头视频处理方法,其特征在于,所述根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,包括:
根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频;
根据预设的画面模板将各视频合并至同一画面并对齐时间;
保存合并生成的合成视频,所述合成视频的名称包括所述目标车辆对应的车号及目标时间片段。
7.根据权利要求6所述的多摄像头视频处理方法,其特征在于,所述方法还包括:
若获取的任一视频为延迟上传视频,则根据所述延迟上传视频对应的时间片段获取对应时间片段的合成视频与所述延迟上传视频进行合并处理;
其中,所述延迟上传视频为其所属自动驾驶车辆中对应所述延迟上传视频的时间片段下已生成合成视频的未处理视频。
8.一种多摄像头视频处理装置,其特征在于,包括:
数据获取模块,用于获取视频数据;其中,所述视频数据包括至少一辆自动驾驶车辆中的多个摄像头拍摄的多个视频及每个视频的视频信息,视频信息包括自动驾驶车辆的车号、摄像头名称、视频开始时间及视频结束时间;
索引建立模块,用于根据每个视频的视频信息及其存储路径建立索引关系;
视频分配模块,用于基于预设的时间片段、每个视频的视频开始时间及视频结束时间,将每个视频分配至对应的时间片段;
确定模块,用于根据预设的优先级规则确定当前处理顺序所要处理的目标车辆及目标时间片段;
合并处理模块,用于根据所述索引关系获取所述目标车辆在所述目标时间片段的各视频进行合并处理并保存,按照处理顺序依次完成所有视频的合并处理。
9.一种存储介质,其特征在于:所述存储介质中存储有计算机可读指令,所述计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行如权利要求1至7中任一项所述多摄像头视频处理方法的步骤。
10.一种计算机设备,其特征在于,包括:一个或多个处理器,以及存储器;
所述存储器中存储有计算机可读指令,所述一个或多个处理器执行时所述计算机可读指令时,执行如权利要求1至7中任一项所述多摄像头视频处理方法的步骤。
CN202210928311.9A 2022-08-03 2022-08-03 多摄像头视频处理方法、装置、存储介质及计算机设备 Active CN115297342B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210928311.9A CN115297342B (zh) 2022-08-03 2022-08-03 多摄像头视频处理方法、装置、存储介质及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210928311.9A CN115297342B (zh) 2022-08-03 2022-08-03 多摄像头视频处理方法、装置、存储介质及计算机设备

Publications (2)

Publication Number Publication Date
CN115297342A true CN115297342A (zh) 2022-11-04
CN115297342B CN115297342B (zh) 2024-05-03

Family

ID=83826636

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210928311.9A Active CN115297342B (zh) 2022-08-03 2022-08-03 多摄像头视频处理方法、装置、存储介质及计算机设备

Country Status (1)

Country Link
CN (1) CN115297342B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130176425A1 (en) * 2012-01-05 2013-07-11 GM Global Technology Operations LLC System and method for estimating daytime visibility
US20130202265A1 (en) * 2012-02-08 2013-08-08 Nokia Corporation Video Viewing Angle Selection
CN106559634A (zh) * 2015-09-30 2017-04-05 杭州海康威视数字技术股份有限公司 用于交通卡口视频监控的数据存储方法及装置
CN107493458A (zh) * 2017-09-13 2017-12-19 郑州云海信息技术有限公司 一种存取监控视频的方法及系统
US20180025636A1 (en) * 2016-05-09 2018-01-25 Coban Technologies, Inc. Systems, apparatuses and methods for detecting driving behavior and triggering actions based on detected driving behavior
CN109842781A (zh) * 2017-11-29 2019-06-04 杭州海康威视系统技术有限公司 监控视频播放方法、装置、系统、媒体服务器及存储介质
CN110300285A (zh) * 2019-07-17 2019-10-01 北京智行者科技有限公司 基于无人驾驶平台的全景视频采集方法及系统
CN112544071A (zh) * 2020-07-27 2021-03-23 华为技术有限公司 视频拼接的方法、装置及系统
CN112751910A (zh) * 2020-12-14 2021-05-04 北京小马慧行科技有限公司 一种信息收集方法和装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130176425A1 (en) * 2012-01-05 2013-07-11 GM Global Technology Operations LLC System and method for estimating daytime visibility
US20130202265A1 (en) * 2012-02-08 2013-08-08 Nokia Corporation Video Viewing Angle Selection
CN106559634A (zh) * 2015-09-30 2017-04-05 杭州海康威视数字技术股份有限公司 用于交通卡口视频监控的数据存储方法及装置
US20180025636A1 (en) * 2016-05-09 2018-01-25 Coban Technologies, Inc. Systems, apparatuses and methods for detecting driving behavior and triggering actions based on detected driving behavior
CN107493458A (zh) * 2017-09-13 2017-12-19 郑州云海信息技术有限公司 一种存取监控视频的方法及系统
CN109842781A (zh) * 2017-11-29 2019-06-04 杭州海康威视系统技术有限公司 监控视频播放方法、装置、系统、媒体服务器及存储介质
CN110300285A (zh) * 2019-07-17 2019-10-01 北京智行者科技有限公司 基于无人驾驶平台的全景视频采集方法及系统
CN112544071A (zh) * 2020-07-27 2021-03-23 华为技术有限公司 视频拼接的方法、装置及系统
WO2022020996A1 (zh) * 2020-07-27 2022-02-03 华为技术有限公司 视频拼接的方法、装置及系统
CN112751910A (zh) * 2020-12-14 2021-05-04 北京小马慧行科技有限公司 一种信息收集方法和装置

Also Published As

Publication number Publication date
CN115297342B (zh) 2024-05-03

Similar Documents

Publication Publication Date Title
CN109739929B (zh) 数据同步方法、装置及系统
CN113111129B (zh) 数据同步方法、装置、设备及存储介质
CN109542330B (zh) 数据存储方法、数据查询方法及装置
CN106326292B (zh) 数据结构和文件聚合、读取方法及装置
CN111614733B (zh) 一种分布式多分片集群的部署方法、装置及存储介质
CN104537076A (zh) 一种文件读写方法及装置
CN107092686B (zh) 一种基于云存储平台的文件管理方法及装置
CN111552555B (zh) 一种点云的可视化方法和设备
CN108470028B (zh) 一种图片审核方法和装置
CN107194671B (zh) 一种影视剧制作全流程辅助管理系统
CN112311902B (zh) 基于微服务的文件发送方法及装置
CN105183585A (zh) 一种数据备份方法及装置
CN112788366A (zh) 视频处理的方法和装置
CN115756955A (zh) 一种数据备份、数据恢复的方法、装置及计算机设备
CN106354587A (zh) 镜像服务器以及导出虚拟机镜像文件的方法
CN113572834B (zh) 巡检数据上传方法、装置、系统及存储介质
CN115297342A (zh) 多摄像头视频处理方法、装置、存储介质及计算机设备
CN113568813A (zh) 一种海量网络性能数据采集方法、装置及系统
US11250001B2 (en) Accurate partition sizing for memory efficient reduction operations
CN112835978A (zh) 一种数据存储方法、装置及计算机设备
EP3349416A1 (en) Relationship chain processing method and system, and storage medium
CN109413381A (zh) 一种视频追溯系统及视频追溯方法
CN107688624B (zh) 一种日志索引构建方法及装置
CN116132630A (zh) 一种视频处理方法、装置、设备及存储介质
CN115412452A (zh) 一种基于物理层Fabric场景的配置导航方法、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant