CN109948574A - 视频检测方法及装置 - Google Patents
视频检测方法及装置 Download PDFInfo
- Publication number
- CN109948574A CN109948574A CN201910238028.1A CN201910238028A CN109948574A CN 109948574 A CN109948574 A CN 109948574A CN 201910238028 A CN201910238028 A CN 201910238028A CN 109948574 A CN109948574 A CN 109948574A
- Authority
- CN
- China
- Prior art keywords
- image
- queue
- processing chip
- video flowing
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明实施例提供一种视频检测方法及装置。本发明实施例,通过主控制器在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,N个处理芯片读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器,主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放,利用N个处理芯片并行进行目标检测,增加了相同时间内能够检测出的图像数量,因此提高了视频的目标检测速度,且避免了视频检测结果图像的乱序。
Description
技术领域
本发明涉及目标检测技术领域,尤其涉及一种视频检测方法及装置。
背景技术
当前,目标检测技术应用广泛,其最典型的应用是实时视频监控,即实时对图像采集设备采集的视频流中的每一帧图像进行目标检测。例如,从视频流的图像中识别出人、车等。
一方面,随着图像采集技术的进步,每秒钟的视频流中所包含的图像帧数越来越多。另一方面,目标检测的粒度越来越小。这些因素都使得对于视频的目标检测速度要求越来越高,以满足对视频检测的实时性要求。
发明内容
为克服相关技术中存在的问题,本发明提供了一种视频检测方法及装置,以提高对视频的目标检测速度。
第一方面,本发明提供一种视频检测方法,所述方法应用于图像处理设备,所述图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,所述方法包括:
所述主控制器在接收到视频流后,将所述视频流中的图像写入图像队列,并为所述图像设置图像标识,所述图像标识包括用于指示图像在所属视频流中位置的位置标识;
所述N个处理芯片读取所述图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出所述检测结果图像和对应的图像标识给所述主控制器;
所述主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到所述视频流的视频检测结果并播放。
结合第一方面,在第一种可能的实现方式中,所述将所述视频流中的图像写入图像队列,包括:将所述视频流中的图像全部写入同一图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片互斥地从所述图像队列中读取图像。
结合第一方面,在第二种可能的实现方式中,所述N个处理芯片读取所述图像队列中的图像及其对应的图像标识之前,还包括:
所述主控制器为所述图像分配处理芯片。
结合第一方面,在第三种可能的实现方式中,所述视频流来自至少一个图像采集设备;所述将所述视频流中的图像写入图像队列,包括:所述N个处理芯片中的每个处理芯片对应一个图像队列,将所述视频流中的图像写入分配给该图像的处理芯片对应的图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片并行从各自对应的图像队列中读取图像。
结合第一方面,在第四种可能的实现方式中,所述主控制器为所述图像分配处理芯片之后,还包括:
所述主控制器为所述图像设置处理芯片标识,所述图像的处理芯片标识与分配给该图像的处理芯片的处理芯片标识相匹配;
所述将所述视频流中的图像写入图像队列,包括:将所述视频流中的图像全部写入同一图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片并行对所述图像队列中的图像的处理芯片标识进行检测,在检测到图像的处理芯片标识与自身的处理芯片标识相匹配时,读取该图像。
结合第一方面,在第五种可能的实现方式中,所述主控制器为所述图像分配处理芯片,包括:
所述主控制器从所述N个处理芯片中查找出当前处于空闲状态的处理芯片,作为目标芯片,所述目标芯片的数量为M个;
所述主控制器将所述视频流中的前M个图像,分别分配给查找出的M个目标芯片。
结合第一方面,在第六种可能的实现方式中,所述视频流来自两个以上的图像采集设备,每个图像采集设备对应一个检测结果队列;所述图像标识还包括用于指示所述图像所属视频流来源的图像采集设备的来源标识;
所述主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置之前,还包括:
所述主控制器根据检测结果图像对应的图像标识包括的来源标识,确定检测结果图像对应的检测结果队列。
结合第一方面,在第七种可能的实现方式中,还包括:
若所述主控制器在预设时长内未接收到所述视频流中指定图像的检测结果图像,以当前检测结果队列作为所述视频流的视频检测结果进行播放。
第二方面,本发明提供一种视频检测装置,所述装置应用于图像处理设备,所述图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,所述装置包括:
写入模块,设置于所述主控制器中,用于在接收到视频流后,将所述视频流中的图像写入图像队列,并为所述图像设置图像标识,所述图像标识包括用于指示图像在所属视频流中位置的位置标识;
图像检测模块,设置于所述N个处理芯片中,用于读取所述图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出所述检测结果图像和对应的图像标识给所述主控制器;
结果写入模块,设置于所述主控制器中,用于根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到所述视频流的视频检测结果并播放。
结合第二方面,在第一种可能的实现方式中,所述写入模块具体用于:将所述视频流中的图像全部写入同一图像队列;
所述图像检测模块具体用于:互斥地从所述图像队列中读取图像。
结合第二方面,在第二种可能的实现方式中,还包括:
分配模块,设置于所述主控制器中,用于为所述图像分配处理芯片。
本发明实施例,通过主控制器在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,N个处理芯片读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器,主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放,利用N个处理芯片并行进行目标检测,增加了相同时间内能够检测出的图像数量,因此提高了视频的目标检测速度,并且保证了播放的视频检测结果中检测结果图像的顺序与对应的视频流中图像的顺序一致,避免了乱序。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本说明书。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本说明书的实施例,并与说明书一起用于解释本说明书的原理。
图1是本发明实施例提供的视频检测方法的流程示例图。
图2是本发明实施例提供的视频检测装置的功能方块图。
图3是本发明实施例提供的图像处理设备的功能方块图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明实施例的一些方面相一致的装置和方法的例子。
在本发明实施例使用的术语是仅仅出于描述特定本发明实施例的目的,而非旨在限制本发明实施例。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本发明实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本发明实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本发明实施例提供的视频检测方法可以应用于包括主控制器和N个处理芯片的图像处理设备,其中,N个处理芯片并行工作。
例如,在一个示例性的应用场景中,两个摄像头A、B分别被安装在需要监控的不同位置,采集视频。摄像头A、摄像头B在采集到视频后,将采集到的视频以视频流的形式发送给图像处理设备。图像处理设备上配置有主控制器和处理芯片a、处理芯片b、处理芯片c。图像处理设备应用本发明实施例提供的视频检测方法对图像处理设备接收到的视频流进行实时目标检测。
其中,视频流也可以称为视频片段,是指一段连续时间的视频数据。例如,将时长为1分钟的视频分割成60个1秒钟的视频片段,每个1秒钟的视频片段即为一个视频流。
其中,主控制器可以是在中央处理器(Central Processing Unit,CPU)上运行的主进程。
其中,处理芯片可以是现场可编程门阵列(Field-Programmable Gate Array,FPGA)、图形处理器(Graphics Processing Unit,GPU)等智能硬件芯片。处理芯片中运行目标检测进程。
其中,图像处理设备中所包括的处理芯片的数量可以根据具体的需求设定。例如,当至少配置3个处理芯片才可以满足实时性所要求的检测速度时,图像处理设备中可以配置3个处理芯片。
需要说明的是,本发明实施例提供的视频检测方法可以对来源于多个图像采集设备的视频(例如来自上述示例中摄像头A和摄像头B的视频)进行目标检测,也可以对来源于一个图像采集设备的视频进行目标检测。
下面通过实施例对本发明提供的视频检测方法作进一步详细说明。
图1是本发明实施例提供的视频检测方法的流程示例图。该视频检测方法应用于图像处理设备,该图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,如图1所示,该方法可以包括:
S101,主控制器在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,图像标识包括用于指示图像在所属视频流中位置的位置标识。
S102,N个处理芯片读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器。
S103,主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放。
在步骤S101中,主控制器接收的视频流可以来源于同一个图像采集设备,也可以来源于两个或两个以上同的图像采集设备。例如,在前述的应用场景中,摄像头A和摄像头B采集的视频都发送到图像处理设备,此时主控制器接收的视频流来源于两个图像采集设备,即摄像头A和摄像头B。
其中,图像标识可以用于指示图像所属视频流的来源的图像采集设备和/或图像在所属视频流中的位置。这样,各个处理芯片在获得图像的检测结果图像时,可以通过图像标识对检测结果图像进行标识,以便主控制器在获取各个处理芯片的检测结果图像后,能够通过图像标识确定检测结果图像所属的视频流以及在该视频流中的位置,从而按照主控制器接收的原始视频流中的图像顺序对来自同一图像采集设备的视频流中各图像的检测结果图像进行排序。
当主控制器接收的视频流全部来源于同一个图像采集设备时,图像标识可以只包括位置标识,不包括来源标识。
例如,当应用场景中只有一个图像采集设备时,图像的图像标识可以用1、2、3……等序号表示,这些序号表示该图像在视频流中的位置。
当主控制器接收的视频流来源于不同的图像采集设备时,图像标识包括位置标识和来源标识,其中来源标识用于指示图像所属视频流来源的图像采集设备。
例如,在前述所列举的应用场景中,来自摄像头A的1秒钟的视频流包括60帧图像,这60帧图像的图像标识可以分别是A1、A2、A3……A60,其中,以“A1”为例,“A1”中的“A”表示该图像来源于摄像头A,“A1”中的“1”表示该图像的位置是来自摄像头A的视频中的第一帧图像。
同理,来自摄像头B的1秒钟的视频流也包括60帧图像,这60帧图像的图像标识可以分别是B1、B2、B3……B60。B60表示该图像是来自摄像头B中的视频第六十帧图像。
在一个示例中,将视频流中的图像写入图像队列并为图像设置图像标识的方式可以是:为图像设置图像标识,将图像和对应的图像标识一起写入图像队列。这样处理芯片在读图像队列时,可以将图像和图像对应的图像标识一起读出。
通过步骤S101,主控制器将视频流中的图像写入图像队列,以便各个处理芯片能够从图像队列中分别读取图像进行目标检测。
并且主控制器还为图像设置了图像标识,这使得主控制器能够将各个处理芯片输出的检测结果图像按照图像标识进行排序,从而得到与视频流中图像顺序一致的视频检测结果,避免播放视频检测结果时乱序。
例如,来自摄像头A的视频中,图像标识A1对应的图像被处理芯片a读取到,A2对应的图像被处理芯片b读取到,A3对应的图像被处理芯片c读取到,主控制器先后接收到A3对应的检测结果图像、A1对应的检测结果图像、A2对应的检测结果图像,此时,主控制器可以根据图像标识A1、A2、A3对检测结果图像进行排序,使得在摄像头A对应的检测结果队列中,A1对应的检测结果图像排在第一位,A2对应的检测结果图像排在第二位,A3对应的检测结果图像排在第三位。
在步骤S102中,识别的目标可以是预先指定的物体,例如人、车等。其中,识别的方法可以是:将读取到的图像输入预先训练好的识别模型,识别模型输出检测结果图像。识别模型可以是采用深度学习算法的网络模型。
其中,检测结果图像可以是标示出目标所在区域的图像。例如,当目标为车辆时,检测结果图像可以是在原图像的基础上在图像中车辆所在区域添加方框所形成的图像。
其中,检测结果图像对应的图像标识与其对应的图像的图像标识一致。
N个处理芯片中的每个处理芯片的工作流程是:读取一帧图像及其图像标识,对读取到的图像进行目标检测(即识别出图像中的目标),输出检测结果图像和图像标识给主控制器,然后再进行下一帧图像的读取、检测和结果输出。
通过步骤S102,N个处理芯片并行进行目标检测,增加了相同时间内能够检测出的图像数量,因此提高了视频的目标检测速度。
在步骤S103中,视频流的视频检测结果包括各图像采集设备对应的检测结果队列。例如,在前述所列举的应用场景中,视频流的视频检测结果包括摄像头A的检测结果队列和摄像头B的检测结果队列,摄像头A的检测结果队列和摄像头B的检测结果队列分为两路输出,一路输出摄像头A的检测结果队列,另一路输出摄像头B的检测结果队列。
由于N个处理芯片并行对视频流中的多个图像进行目标检测,并且各个图像所需的检测时长会因图像中目标数量的多少而不同,因此会出现位置靠前的图像的检测结果图像晚于位置靠后的图像的检测结果图像输出的情况。在步骤S103中,主控制器根据检测结果图像对应的位置标识对检测结果图像进行排序,使得检测结果队列中检测结果图像的顺序与对应的视频流中图像的顺序一致,从而确保了视频流的视频检测结果能够按序播放,避免了乱序。
图1所示实施例,通过主控制器在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,N个处理芯片读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器,主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放,利用N个处理芯片并行进行目标检测,增加了相同时间内能够检测出的图像数量,因此提高了视频的目标检测速度,并且保证了播放的视频检测结果中检测结果图像的顺序与对应的视频流中图像的顺序一致,避免了乱序。
在本发明实施例中,主控制器可以主动为视频流中的图像分配处理芯片,也可以不为视频流中的图像分配处理芯片而由各处理芯片根据自身的处理情况主动读取图像。
在一个示例性的实现过程中,将视频流中的图像写入图像队列,包括:将视频流中的图像全部写入同一图像队列;N个处理芯片读取图像队列中的图像,包括:N个处理芯片互斥地从图像队列中读取图像。
本示例中,主控制器没有为视频流中的图像分配处理芯片,每个处理芯片在处理完读取的图像后,再向主控制器请求读取图像。此时,N个处理芯片不能同时读图像队列,而是互斥地从图像队列中读取图像。即,在同一时间内只允许一个处理芯片从图像队列读取图像,其他处理芯片在该处理芯片读取图像期间,不能对图像队列进行读操作。例如,为了防止多个处理芯片读图像队列中的同一帧图像,在任一个处理芯片读图像期间,可以对图像队列进行加锁。加锁期间,只允许当前获得互斥锁的处理芯片读图像队列,待读取完毕解锁。解锁后,等待读取图像的处理芯片根据预设原则获取互斥锁,获得互斥锁的处理芯片得到读图像队列权限,进行读图像操作。
例如,在前述所列举的应用场景中,处理芯片a、处理芯片b、处理芯片c在各读取一帧图像进行处理后,处理芯片b最对图像队列进行加锁。先处理完,首先向主控制器发出读取图像的请求,随后处理芯片c、处理芯片a先后向主控制器发出读取图像的请求,则三个处理芯片按照处理芯片b、处理芯片c、处理芯片a的顺序,从图像队列中读取图像,在任一处理芯片读图像队列期间,对图像队列进行加锁,并且在读取完毕后解锁。
在一个示例性的实现过程中,N个处理芯片读取图像队列中的图像及其对应的图像标识之前,还包括:主控制器为图像分配处理芯片。
本示例中,主控制器主动为图像分配处理芯片,即由主控制器确定每一帧图像由哪个处理芯片处理。这样,每一帧图像都被指定了具体的处理芯片,不同的处理芯片不会被分配给同一帧图像。因此,多个处理芯片可以同时读图像队列,不需要排队等待,从而能够缩短视频流的处理时间。
在上述主控制器主动为图像分配处理芯片的基础上,在一个示例性的实现过程中,视频流来自至少一个图像采集设备;将视频流中的图像写入图像队列,包括:N个处理芯片中的每个处理芯片对应一个图像队列,将视频流中的图像写入分配给该图像的处理芯片对应的图像队列;N个处理芯片读取图像队列中的图像,包括:N个处理芯片并行从各自对应的图像队列中读取图像。
本示例使得N个处理芯片可以同时读取图像,节省了读取等待的时间,因此能够提高处理速度。
例如,处理芯片a对应图像队列1,处理芯片b对应图像队列2,处理芯片c对应图像队列3。主控制器在将图像A1(指图像标识A1所表示的图像)、A2、A3……A60写入图像队列时,轮流向图像队列1、图像队列2、图像队列3写入图像,即向图像队列1写入图像A1,向图像队列2写入图像A2,向图像队列3写入图像A3,然后向图像队列1写入图像A4,向图像队列2写入图像A5,向图像队列3写入图像A6,……,直到全部写入完毕。处理芯片a从图像队列1读取图像,处理芯片b从图像队列2读取图像,处理芯片c从图像队列3读取图像。由于不在同一个图像队列读取图像,因此三个处理芯片的读图像操作可以同时进行而互不干扰,并且无需等待。
在上述主控制器主动为图像分配处理芯片的基础上,在一个示例性的实现过程中,主控制器为图像分配处理芯片之后,还包括:主控制器为图像设置处理芯片标识,图像的处理芯片标识与分配给该图像的处理芯片的处理芯片标识相匹配;将视频流中的图像写入图像队列,包括:将视频流中的图像全部写入同一图像队列;N个处理芯片读取图像队列中的图像,包括:N个处理芯片并行对图像队列中的图像的处理芯片标识进行检测,在检测到图像的处理芯片标识与自身的处理芯片标识相匹配时,读取该图像。
本示例中,由于处理芯片只读取具有匹配处理芯片标识的图像,而一帧图像对应一个处理芯片标识,因此不会出现多个处理芯片读取同一帧图像的情况,从而使得N个处理芯片可以同时读取图像,节省了读取等待的时间,因此能够提高处理速度。
在一个示例性的实现过程中,主控制器为图像分配处理芯片,包括:主控制器从N个处理芯片中查找指定处理芯片,指定处理芯片为当前已输出上一次读取到的图像的检测结果图像的处理芯片;主控制器将指定处理芯片分别分配给视频流中当前尚未分配处理芯片的前M个图像,M为指定处理芯片的数量。
本示例使得主控制器能够根据处理芯片对已读取图像的处理情况,动态地调节处理芯片的负载,优化整体的视频检测过程,从而节约检测时间,提高检测速度,并且减少由于处理芯片负载过大导致图像漏检的情况。
例如,主控制器在为图像A1~A60分配处理芯片时,在第一次分配时,将图像A1分配给处理芯片a,将图像A2分配给处理芯片b,将图像A3分配给处理芯片c。在接下来分配时,主控制器查找出当前处理芯片b和处理芯片c已经分别输出图像A2的检测结果图像和图像A3的检测结果图像,而处理芯片a尚未输出图像A1的检测结果图像,则主控制器将图像A3分配给处理芯片b,将图像A5分配给处理芯片c。
在一个示例性的实现过程中,视频流来自两个以上的图像采集设备,每个图像采集设备对应一个检测结果队列;图像标识还包括用于指示所述图像所属视频流来源的图像采集设备的来源标识;主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置之前,还包括:主控制器根据检测结果图像对应的图像标识包括的来源标识,确定检测结果图像对应的检测结果队列。
本示例中,当视频流来自两个以上的图像采集设备时,主控制器根据来源标识确定检测结果图像对应的检测结果队列,实现了多来源视频流的目标检测结果的分路输出。
在一个示例性的实现过程中,若主控制器在预设时长内未接收到视频流中指定图像的检测结果图像,以当前检测结果队列作为视频流的视频检测结果进行播放。
例如,假设预设时长到时,摄像头A的检测结果队列中已有A1~A50和A52~A60对应的检测结果图像,没有A51对应的检测结果图像,则以A1~A50和A52~A60对应的检测结果图像组成的检测结果队列播放摄像头A的视频检测结果。
本示例能够避免由于视频流中的个别图像处理时间过长导致视频结果播放不及时、从而影响实时性能的问题。
与前述方法的实施例相对应,本说明书还提供了相应的装置、设备的实施例。
图2是本发明实施例提供的视频检测装置的功能方块图。该装置应用于图像处理设备,图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,如图2所示,视频检测装置包括:
写入模块210,设置于主控制器中,用于在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,图像标识包括用于指示图像在所属视频流中位置的位置标识;
图像检测模块220,设置于处理芯片中,用于读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器;
结果写入模块230,设置于主控制器中,用于根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放。
在一个示例性的实现过程中,写入模块210具体用于将视频流中的图像全部写入同一图像队列;图像检测模块220具体用于互斥地从图像队列中读取图像。
在一个示例性的实现过程中,视频检测装置还包括:分配模块,设置于主控制器中,用于为图像分配处理芯片。
在视频检测装置包括分配模块的基础上,在一个示例性的实现过程中,视频流来自至少一个图像采集设备;N个处理芯片中的每个处理芯片对应一个图像队列,写入模块210具体用于将视频流中的图像写入分配给该图像的处理芯片对应的图像队列;图像检测模块220具体用于并行从各自对应的图像队列中读取图像。
在视频检测装置包括分配模块的基础上,在一个示例性的实现过程中,视频检测装置还包括:芯片标识设置模块,设置于主控制器中,用于为图像设置处理芯片标识,图像的处理芯片标识与分配给该图像的处理芯片的处理芯片标识相匹配;写入模块210具体用于将视频流中的图像全部写入同一图像队列;图像检测模块220具体用于并行对图像队列中的图像的处理芯片标识进行检测,在检测到图像的处理芯片标识与自身的处理芯片标识相匹配时,读取该图像。
在一个示例性的实现过程中,分配模块具体用于从所述N个处理芯片中查找出当前处于空闲状态的处理芯片,作为目标芯片,所述目标芯片的数量为M;以及用于将所述视频流中的前M个图像,分别分配给查找出的M个目标芯片。
在一个示例性的实现过程中,视频流来自两个以上的图像采集设备,每个图像采集设备对应一个检测结果队列;图像标识还包括用于指示图像所属视频流来源的图像采集设备的来源标识;视频检测装置还包括:队列确定模块,设置于主控制器中,用于根据检测结果图像对应的图像标识包括的来源标识,确定检测结果图像对应的检测结果队列。
在一个示例性的实现过程中,视频检测装置还包括:
若主控制器在预设时长内未接收到视频流中指定图像的检测结果图像,以当前检测结果队列作为视频流的视频检测结果进行播放。
图3是本发明实施例提供的图像处理设备的功能方块图。如图3所示,该图像处理设备包括主控制器和N个处理芯片,N大于1,其中:
主控制器包括:
写入模块,用于在接收到视频流后,将视频流中的图像写入图像队列,并为图像设置图像标识,图像标识包括用于指示图像在所属视频流中位置的位置标识;
结果写入模块,用于根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到视频流的视频检测结果并播放;
处理芯片包括:
图像检测模块,用于读取图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出检测结果图像和对应的图像标识给主控制器。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本说明书方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本领域技术人员在考虑说明书及实践这里申请的发明后,将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本说明书的真正范围和精神由下面的权利要求指出。
应当理解的是,本说明书并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。
以上所述仅为本说明书的较佳实施例而已,并不用以限制本说明书,凡在本说明书的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本说明书保护的范围之内。
Claims (10)
1.一种视频检测方法,其特征在于,所述方法应用于图像处理设备,所述图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,所述方法包括:
所述主控制器在接收到视频流后,将所述视频流中的图像写入图像队列,并为所述图像设置图像标识,所述图像标识包括用于指示图像在所属视频流中位置的位置标识;
所述N个处理芯片读取所述图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出所述检测结果图像和对应的图像标识给所述主控制器;
所述主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到所述视频流的视频检测结果并播放。
2.根据权利要求1所述的方法,其特征在于,所述将所述视频流中的图像写入图像队列,包括:将所述视频流中的图像全部写入同一图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片互斥地从所述图像队列中读取图像。
3.根据权利要求1所述的方法,其特征在于,所述N个处理芯片读取所述图像队列中的图像及其对应的图像标识之前,还包括:
所述主控制器为所述图像分配处理芯片。
4.根据权利要求3所述的方法,其特征在于,所述视频流来自至少一个图像采集设备;所述将所述视频流中的图像写入图像队列,包括:所述N个处理芯片中的每个处理芯片对应一个图像队列,将所述视频流中的图像写入分配给该图像的处理芯片对应的图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片并行从各自对应的图像队列中读取图像。
5.根据权利要求3所述的方法,其特征在于,所述主控制器为所述图像分配处理芯片之后,还包括:
所述主控制器为所述图像设置处理芯片标识,所述图像的处理芯片标识与分配给该图像的处理芯片的处理芯片标识相匹配;
所述将所述视频流中的图像写入图像队列,包括:将所述视频流中的图像全部写入同一图像队列;
所述N个处理芯片读取所述图像队列中的图像,包括:所述N个处理芯片并行对所述图像队列中的图像的处理芯片标识进行检测,在检测到图像的处理芯片标识与自身的处理芯片标识相匹配时,读取该图像。
6.根据权利要求1所述的方法,其特征在于,所述视频流来自两个以上的图像采集设备,每个图像采集设备对应一个检测结果队列;所述图像标识还包括用于指示所述图像所属视频流来源的图像采集设备的来源标识;
所述主控制器根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置之前,还包括:
所述主控制器根据检测结果图像对应的图像标识包括的来源标识,确定检测结果图像对应的检测结果队列。
7.根据权利要求1所述的方法,其特征在于,还包括:
若所述主控制器在预设时长内未接收到所述视频流中指定图像的检测结果图像,以当前检测结果队列作为所述视频流的视频检测结果进行播放。
8.一种视频检测装置,其特征在于,所述装置应用于图像处理设备,所述图像处理设备包括主控制器和N个处理芯片,所述N个处理芯片并行工作,N大于1,所述装置包括:
写入模块,设置于所述主控制器中,用于在接收到视频流后,将所述视频流中的图像写入图像队列,并为所述图像设置图像标识,所述图像标识包括用于指示图像在所属视频流中位置的位置标识;
图像检测模块,设置于所述处理芯片中,用于读取所述图像队列中的图像及其对应的图像标识,识别读取到的图像中的目标,得到对应的检测结果图像并输出所述检测结果图像和对应的图像标识给所述主控制器;
结果写入模块,设置于所述主控制器中,用于根据检测结果图像对应的图像标识包括的位置标识,将检测结果图像写入对应图像采集设备的检测结果队列的相应位置,得到所述视频流的视频检测结果并播放。
9.根据权利要求8所述的装置,其特征在于,所述写入模块具体用于:将所述视频流中的图像全部写入同一图像队列;
所述图像检测模块具体用于:互斥地从所述图像队列中读取图像。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括:
分配模块,设置于主控制器中,用于为图像分配处理芯片。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910238028.1A CN109948574A (zh) | 2019-03-27 | 2019-03-27 | 视频检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910238028.1A CN109948574A (zh) | 2019-03-27 | 2019-03-27 | 视频检测方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109948574A true CN109948574A (zh) | 2019-06-28 |
Family
ID=67011168
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910238028.1A Pending CN109948574A (zh) | 2019-03-27 | 2019-03-27 | 视频检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109948574A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111126317A (zh) * | 2019-12-26 | 2020-05-08 | 腾讯科技(深圳)有限公司 | 一种图像处理方法、装置、服务器及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105792021A (zh) * | 2014-12-26 | 2016-07-20 | 乐视网信息技术(北京)股份有限公司 | 一种视频流的传输方法及装置 |
CN105872589A (zh) * | 2016-03-29 | 2016-08-17 | 乐视控股(北京)有限公司 | 一种多路视频播放方法、服务器和终端 |
CN107273435A (zh) * | 2017-05-23 | 2017-10-20 | 北京环境特性研究所 | 基于MapReduce的视频人员模糊检索并行化方法 |
CN108683877A (zh) * | 2018-03-30 | 2018-10-19 | 中国科学院自动化研究所 | 基于Spark的分布式海量视频解析系统 |
-
2019
- 2019-03-27 CN CN201910238028.1A patent/CN109948574A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105792021A (zh) * | 2014-12-26 | 2016-07-20 | 乐视网信息技术(北京)股份有限公司 | 一种视频流的传输方法及装置 |
CN105872589A (zh) * | 2016-03-29 | 2016-08-17 | 乐视控股(北京)有限公司 | 一种多路视频播放方法、服务器和终端 |
CN107273435A (zh) * | 2017-05-23 | 2017-10-20 | 北京环境特性研究所 | 基于MapReduce的视频人员模糊检索并行化方法 |
CN108683877A (zh) * | 2018-03-30 | 2018-10-19 | 中国科学院自动化研究所 | 基于Spark的分布式海量视频解析系统 |
Non-Patent Citations (1)
Title |
---|
LEO BEAUCOURT,ET AL: "《如何使用Docker、TensorFlow目标检测API和OpenCV实现实时目标检测和视频处理》", 《BLOG.CSDN.NET/LIUJIANDU101/ARTICLE/DETAILS/80027244》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111126317A (zh) * | 2019-12-26 | 2020-05-08 | 腾讯科技(深圳)有限公司 | 一种图像处理方法、装置、服务器及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104732187B (zh) | 一种图像跟踪处理的方法及设备 | |
JP2019512769A5 (zh) | ||
CN109784217A (zh) | 一种监控方法及装置 | |
WO2021139728A1 (zh) | 全景视频处理方法、装置、设备及存储介质 | |
CN110443210A (zh) | 一种行人跟踪方法、装置以及终端 | |
CN104216764B (zh) | 一种基于多线程嵌入式系统并行程序跟踪与回放方法 | |
CN106446002A (zh) | 一种基于运动目标在地图中轨迹的视频检索方法 | |
CN109872541A (zh) | 一种车辆信息分析方法及装置 | |
CN104717573A (zh) | 一种视频摘要的生成方法 | |
CN109800668A (zh) | 一种归档方法及装置 | |
CN109800322A (zh) | 一种监控方法及装置 | |
CN113518130B (zh) | 一种基于多核处理器的分组突发负载均衡方法及系统 | |
CN103035003A (zh) | 一种实现增强现实的方法及装置 | |
CN105320708B (zh) | 车型数据库的建立方法及服务器 | |
CN109783672A (zh) | 一种归档方法及装置 | |
CN110443114A (zh) | 人脸识别方法、装置、计算机设备及可读存储介质 | |
CN114332169B (zh) | 基于行人重识别的行人跟踪方法、装置、存储介质及设备 | |
CN109948574A (zh) | 视频检测方法及装置 | |
CN107277557B (zh) | 一种视频分割方法及系统 | |
CN108921023A (zh) | 一种确定低质量人像数据的方法及装置 | |
CN109783663A (zh) | 一种归档方法及装置 | |
CN111061911B (zh) | 面向多视频监控数据的目标检测与追踪方法、装置及设备 | |
CN106454509B (zh) | 一种广告图像的检测方法及装置 | |
CN103116737A (zh) | 分布式视频图像识别系统及其图像识别方法 | |
CN112199885A (zh) | 一种分布式模型训练系统及应用方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190628 |
|
RJ01 | Rejection of invention patent application after publication |