CN109658434B - 一种目标跟踪的方法及装置 - Google Patents
一种目标跟踪的方法及装置 Download PDFInfo
- Publication number
- CN109658434B CN109658434B CN201811597721.XA CN201811597721A CN109658434B CN 109658434 B CN109658434 B CN 109658434B CN 201811597721 A CN201811597721 A CN 201811597721A CN 109658434 B CN109658434 B CN 109658434B
- Authority
- CN
- China
- Prior art keywords
- target
- image
- information
- area
- target information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000001514 detection method Methods 0.000 claims description 61
- 238000000605 extraction Methods 0.000 claims description 9
- 230000008569 process Effects 0.000 abstract description 8
- 238000003384 imaging method Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 13
- 238000012549 training Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/207—Analysis of motion for motion estimation over a hierarchy of resolutions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例提出一种目标跟踪的方法及装置。通过初始化基准目标信息，使得基准目标信息与目标的当前图像信息更贴合，解决在跟踪过程中由于目标转弯，目标的成像图像发生改变造成跟踪误差增大，长时间后即会丢失目标的问题。
Description
技术领域
本发明涉及目标跟踪技术领域，具体而言，涉及一种目标跟踪的方法及装置。
背景技术
随着社会的发展和人民生活水平的日益提升，无人机越来越广泛的出现在人们的生活中。其中，用于视频采集和目标跟踪的无人机越来越多。因此伴随无人机的广泛应用，也诞生了应用于无人机的目标跟踪的方法。
目前常用的目标跟踪算法都无法长时间稳定跟踪目标，无法稳定跟踪的原因有两点，在跟踪过程中由于目标转弯，目标的成像图像发生改变造成跟踪误差增大，长时间后即会丢失目标。
发明内容
有鉴于此，本发明的目的在于提供一种目标跟踪的方法及装置。
为了实现上述目的，本发明实施例采用的技术方案如下：
第一方面，本发明实施例提供了一种目标跟踪的方法，包括：
依据基准目标信息和待检测图像获取目标的跟踪目标信息；其中，所述基准目标信息包括基准帧图像中目标所在的基准区域以及所述基准区域内的图像信息，所述跟踪目标信息包括待检测图像中目标所在第一区域以及所述第一区域内的图像信息；
当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息；其中，所述待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及所述第二区域内的图像信息；
将所述待确认目标信息作为新的基准目标信息
第二方面，本发明实施例还提供了一种目标跟踪的方法装置，包括：
目标跟踪模块：用于依据基准目标信息和待检测图像获取目标的跟踪目标信息；其中，所述基准目标信息包括基准帧图像中目标所在的基准区域以及所述基准区域内的图像信息，所述跟踪目标信息包括待检测图像中目标所在第一区域以及所述第一区域内的图像信息；
目标检测模块：用于当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息；其中，所述待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及所述第二区域内的图像信息；
信息配置模块：用于将所述待确认目标信息作为新的基准目标信息。
本发明实施例提供的目标跟踪的方法及装置的有益效果：通过初始化基准目标信息，使得基准目标信息与目标的当前图像信息更贴合，解决在跟踪过程中由于目标转弯，目标的成像图像发生改变造成跟踪误差增大，长时间后即会丢失目标的问题。
为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本发明实施例提供的目标跟踪设备的连接框图；
图2示出了本发明实施例提供的目标跟踪的方法的流程示意图；
图3示出了本发明实施例提供了一种可能的基准区域与疑似目标区域的分布关系的示意图；
图4示出了本发明实施例提供了一种可能的基准区域在图像中的示意图；
图5示出了本发明实施例提供了一种可能的第一区域在图像中的示意图；
图6示出了本发明实施例提供了一种可能的第二区域在图像中的示意图；
图7示出了本发明实施例提供了一种可能的S20的子步骤示意图；
图8示出了本发明实施例提供了一种可能的S10的子步骤示意图；
图9示出了本发明实施例提供了一种可能的S20的子步骤示意图；
图10示出了本发明实施例提供了一种可能的S20的子步骤示意图；
图11示出了本发明实施例提供了另一种可能的目标跟踪的方法的流程示意图；
图12示出了本发明实施例提供的目标跟踪的装置的功能单元示意图。
图标：100-目标跟踪设备；101-处理器；102-存储器；103-总线；104-通信接口；105-图像采集装置；201-目标跟踪模块；202-目标检测模块；203-信息配置模块。
具体实施方式
下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，术语“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明实施例提供了一种目标跟踪的方法，应用于目标跟踪设备100，目标跟踪设备100例如为无人机。如图1所示，目标跟踪设备100包括处理器101，存储器102、总线103、通信接口104以及图像采集装置105。处理器101、存储器102、通信接口104、及图像采集装置105通过总线103连接，处理器101用于执行存储器102中存储的可执行模块，例如计算机程序。
处理器101可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，目标跟踪的方法的各步骤可以通过处理器101中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器101可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DigitalSignal Processor，简称DSP)、专用集成电路(Application Specific IntegratedCircuit，简称ASIC)、现成可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
存储器102可能包含高速随机存取存储器(RAM：Random Access Memory)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。
总线103可以是ISA(Industry Standard Architecture)总线、PCI(PeripheralComponent Interconnect)总线或EISA(Extended Industry Standard Architecture)总线等。图1中仅用一个双向箭头表示，但并不表示仅有一根总线103或一种类型的总线103。
目标跟踪设备100通过至少一个通信接口104(可以是有线或者无线)实现与外部的其它设备之间的通信连接。存储器102用于存储程序，例如目标跟踪的装置。目标跟踪的装置包括至少一个可以软件或固件(firmware)的形式存储于存储器102中或固化在目标跟踪设备100的操作系统(operating system，OS)中的软件功能模块。处理器101在接收到执行指令后，执行所述程序以实现目标跟踪的方法。
图像采集装置105可以是机载光电吊舱。图像采集装置105用于采集当前环境图像，并将采集到的当前环境图像传输给处理器101。在一种可实现的方式中，图像采集装置105还用于接收处理器101发出的控制指令，并依据该控制指令调整其姿态，姿态例如为图像采集装置105的水平视角和垂直视角。
应当理解的是，图1所示的结构仅为目标跟踪设备100的结构应用示意图，目标跟踪设备100还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
如图2所示，本发明实施例提供了一种应用于目标跟踪设备100的目标跟踪的方法。
S10：依据基准目标信息和待检测图像获取目标的跟踪目标信息。
具体地，在一种可实现的方式中，处理器101依据用户输入的指定区域和预设定的目标检测模型提取基准帧图像中的基准目标信息。在一种可能的实现方式中，目标检测模型可以采用目标检测SSD算法(Single Shot MultiBox Detector，SSD)或目标检测YOLO算法(You Only Look Once，YOLO)。基准目标信息包括基准帧图像中目标所在的基准区域以及基准区域内的图像信息。基准区域为如图3所示的黑色区域“E”。
其中，YOLO算法具体步骤包括：标注数据，在用于训练的图像中，框选出目标车辆，获取目标在图像中的左上坐标和右下坐标，以及目标的长度和宽度信息，为了防止训练过拟合，一般要求训练图像的数量超过1000张，并且越多越好，使用训练程序，对深度网络模型进行训练，当模型的损失函数输出的损失值低于要求时，即完成训练，完成训练后会得到检测网络的参数文件，该文件用于跟踪程序中的车辆检测功能。
处理器101基于目标跟踪算法，依据基准目标信息和待检测图像获取目标的跟踪目标信息。在一种可实现的方式中，目标跟踪算法采用鉴别式追踪方法(Kernelizedcorrelation filter，KCF)或特征检测算法(Histogram of Oriented Gridients，HOG)。跟踪目标信息包括待检测图像中目标所在第一区域以及第一区域内的图像信息，如图3所示，第一区域可能在图中灰色区域。其中，图像信息可以是跟踪目标的特征信息或者整个区域内的原始像素信息。
S20：当需要初始化基准目标信息时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息。
具体地，待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及第二区域内的图像信息。在一种另可能的实现方式中(区别于图3)，参见图4、图5及图6，图4中灰色区域为基准区域，图5中灰色区域为第一区域，第一区域和基准区域的轮廓是一样的，图6中的灰色区域为第二区域，第二区域和基准区域的轮廓有可能不一样。在一种可实现的方式中，当被跟踪目标转向时，依据目标检测模型在第一区域附近提取待检测图像中的待确认目标信息，以获取更贴合目标的图像信息和具体的位置。
S40：将待确认目标信息作为新的基准目标信息。
具体地，即将基准信息初始化为待确认目标信息。在一种可实现的方式中，可以用待确认目标信息替换在先的基准目标信息，以得到新的基准目标信息，即待确认目标信息。
本发明实施例提供的目标跟踪的方法中：处理器101通过初始化基准目标信息，使得基准目标信息与目标的当前图像信息更贴合，解决在跟踪过程中由于目标转弯，目标的成像图像发生改变造成跟踪误差增大，长时间后即会丢失目标的问题。
在图2的基础上，对于S20中“当需要初始化基准目标信息时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息”，本发明实施例提供了一种可实现的方式，具体请参见图7：
S201：判断获取待检测图像距离上一次初始化基准目标信息的时间差是否大于预设的第一阈值。若是，则执行S203；若否，则执行S50。
具体地，当获取待检测图像距离上一次初始化基准目标信息的时间差大于预设的第一阈值时，在此段时间内，被跟踪的目标有可能转向，被跟踪的目标当前的轮廓可能与基准区域的轮廓不一样，所以此时执行S203。当获取待检测图像距离上一次初始化基准目标信息的时间差小于或等于预设的第一阈值时，在此段时间内，被跟踪的目标转向的可能性较小，为了降低处理器101的负载，此时执行S50。
S203：依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息。
具体地，依据目标检测模型在第一区域附近提取待检测图像中的待确认目标信息，以获取更贴合目标的图像信息和具体的位置。
S50：将基准目标信息重新配置为跟踪目标信息。
具体地，即用跟踪目标信息替换基准目标信息。
在图2的基础上，对于S10中“依据基准目标信息和待检测图像获取目标的跟踪目标信息”，本发明实施例提供了一种可实现的方式，具体请参见图8：
S101：依据基准区域预估在待检测图像中多个疑似目标区域。
具体地，参见图3，基准区域为图中黑色区域，通过预估可以得到在待检测图像中灰色和黑色区域为疑似目标区域。在一种可实现的方式中疑似目标区域的数量和分布可以与图3中的不同，在此不做限定。
S102：将基准区域内的图像信息分别与多个疑似目标区域内的图像信息一一匹配，以得到一一对应匹配值。
具体地，继续参见图3，依据遍历算法将基准区域内的图像信息分别与多个疑似目标区域内的图像信息一一匹配，以得到一一对应匹配值。例如，基准目标信息分别与A、B、C、D、E、F、G、H、I区域内的图像信息一一匹配，以得到一一对应的匹配值，分别为0.88、0.12、0.13、0.14、0.22、0.32、0.22、0.12、0.19。
S103：将多个匹配值中的最大的匹配值对应的疑似目标区域认定为第一区域，以得到跟踪目标信息。
具体地，其中匹配值越大表征其对应的疑似目标区域中的图像信息与基准区域内的图像信息的相似度越高。参见上例，即将A区域认定为第一区域，并获取第一区域中的目标信息。
在图8的基础上，对于S20中“当需要初始化基准目标信息时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息”，本发明实施例提供了一种可实现的方式，具体请参见图9：
S202：依据多个匹配值和预设的遮挡检测模型，判断目标是否进入遮挡状态。若是，则执行S203；若否，则执行S50。
具体地，将上述的多个匹配值输入到预设的遮挡检测模型中，遮挡检测模型会输出一个表征被跟踪的目标是否进入遮挡状态的结果。当被跟踪的目标进入遮挡状态时，需要重新提取待确认目标信息，此时执行S203；反之，则执行S50。
在一种可实现的方式中，遮挡检测模型采用深度神经网络算法(Deep NeuralNetwork，DNN)实现。DNN网络的输入是跟踪模块输出的响应值，即多个匹配值。根据一个跟踪序列的响应值，能够判断当前是否进入了遮挡状态。训练数据的获取需要人工标记当前的跟踪响应值是否匹配遮挡状态。训练后得到DNN网络的参数，在遮挡检测模块使用。
在图9的基础上，对于S20中“当需要初始化基准目标信息时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息”，本发明实施例提供了一种可实现的方式，具体请参见图10：
S201：判断获取待检测图像距离上一次初始化基准目标信息的时间差是否大于预设的第一阈值。若是，则执行S203；若否则执行S202。
S202：依据多个匹配值和预设的遮挡检测模型，判断目标是否进入遮挡状态。若是，则执行S203；若否，则执行S50。
通过两次判断是否需要重新初始化基准目标信息，保证基准目标信息与目标当前的图像信息的匹配度，更利于跟踪，跟踪更稳定。
在图2的基础上，本发明实施例还提供了一种可实现的目标跟踪的方法，具体请参见图11：
S30：判断提取待确认目标信息是否成功。若是，则执行S40；若否，则执行S60。
具体地，当提取待确认目标信息不成功时，可能被跟踪的目标目前还处于遮挡状态，需要继续提取下一帧待检测图像中的待确认目标信息，此时执行S60；反之，则执行S40。
S60：依据待检测图像之前的n帧图像分析出目标的运动方向和运动速度。
具体地，n大于或等于2，依据待检测图像之前的n帧图像中被跟踪目标的轨迹和获取每一帧图像的时间间隔，可以分析得到目标的运动方向和运动速度。
S70：依据目标的运动方向和运动速度预估下一个待检测图像中目标所在的第三区域。
具体地，依据分析得到的目标的运动方向、运动速度以及获取下一帧待检测图像的时间间隔预估出在下一帧待检测图像中目标的位置所在的区域，即第三区域。
S80：依据第三区域和预设定的目标检测模型提取下一个待检测图像中的待确认目标信息。
具体地，依据预设定的目标检测模型提取下一帧待检测图像中第三区域附近的目标信息即待确认目标信息。在提取待确认目标信息的步骤后，执行S30，判断该次提取待确认目标信息是否成功，重复至提取所确认目标信息成功。
请参阅图12，图12为本发明较佳实施例提供的一种目标跟踪的装置。需要说明的是，本实施例所提供的目标跟踪的装置，其基本原理及产生的技术效果和上述实施例相同，为简要描述，本实施例部分未提及之处，可参考上述的实施例中相应内容。
目标跟踪的装置包括：目标跟踪模块201、目标检测模块202、信息配置模块203。
目标跟踪模块201：用于依据基准目标信息和待检测图像获取目标的跟踪目标信息；其中，基准目标信息包括基准帧图像中目标所在的基准区域以及基准区域内的图像信息，跟踪目标信息包括待检测图像中目标所在第一区域以及第一区域内的图像信息。可以理解地，目标跟踪模块201可以执行上述实施例中的S10。
在一种可实现的方式中，目标跟踪模块201具体用于依据基准区域预估在待检测图像中多个疑似目标区域；将基准区域内的图像信息分别与多个疑似目标区域内的图像信息一一匹配，以得到一一对应匹配值；将多个匹配值中的最大的匹配值对应的疑似目标区域认定为第一区域，以得到跟踪目标信息。可以理解地，目标跟踪模块201可以执行上述实施例中的S101、S102和S103。
目标检测模块202：用于当需要初始化基准目标信息时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息；其中，待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及第二区域内的图像信息。可以理解地，目标检测模块202可以执行上述实施例中的S20。
在一种可实现的方式中，目标检测模块202具体用于当获取待检测图像距离上一次初始化基准目标信息的时间差大于预设的第一阈值时，依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息。可以理解地，目标检测模块202可以执行上述实施例中的S201和S203。
在另一种可实现的方式中，目标检测模块202具体用于依据多个匹配值和预设的遮挡检测模型，判断目标是否进入遮挡状态；若是，则依据第一区域和预设定的目标检测模型提取待检测图像中的待确认目标信息。可以理解地，目标检测模块202可以执行上述实施例中的S202和S203。
目标检测模块202具体还用于判断提取待确认目标信息是否成功。可以理解地，目标检测模块202可以执行上述实施例中的S30。
目标检测模块202具体还用于若提取待确认目标信息不成功，则依据待检测图像之前的n帧图像分析出目标的运动方向和运动速度，其中，n大于等于2；依据目标的运动方向和运动速度预估下一个待检测图像中目标所在的第三区域；依据第三区域和预设定的目标检测模型提取下一个待检测图像中的待确认目标信息；直至提取待确认目标信息成功。可以理解地，目标检测模块202可以执行上述实施例中的S60、S70和S80。
在第三种可实现的方式中，可以理解地，目标检测模块202可以执行上述实施例中的S201、S202和S203。
信息配置模块203：用于将待确认目标信息作为新的基准目标信息。可以理解地，信息配置模块203可以执行上述实施例中的S40。在一种可实现的方式中，信息配置模块203还用于将基准目标信息重新配置为跟踪目标信息，可以理解地，信息配置模块203可以执行上述实施例中的S50。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.一种目标跟踪的方法，其特征在于，包括：
依据基准目标信息和待检测图像获取目标的跟踪目标信息；其中，所述基准目标信息包括基准帧图像中目标所在的基准区域以及所述基准区域内的图像信息，所述跟踪目标信息包括待检测图像中目标所在第一区域以及所述第一区域内的图像信息，所述第一区域为所述待检测图像中与所述基准区域的匹配值最大的疑似目标区域；
当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息；其中，所述待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及所述第二区域内的图像信息，当获取所述待检测图像距离上一次初始化所述基准目标信息的时间差大于预设的第一阈值时或者当所述目标进入遮挡状态时，确定需要初始化所述基准目标信息；
将所述待确认目标信息作为新的基准目标信息；
在所述依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息之后，还包括：
判断提取所述待确认目标信息是否成功；
若是，将所述待确认目标信息作为新的基准目标信息；
若否，则依据所述待检测图像之前的n帧图像分析出所述目标的运动方向和运动速度，其中，n大于等于2；
依据所述目标的运动方向和运动速度预估下一个待检测图像中目标所在的第三区域；
依据所述第三区域和预设定的目标检测模型提取下一个待检测图像中的待确认目标信息；
直至提取所述待确认目标信息成功。
2.根据权利要求1所述的目标跟踪的方法，其特征在于，所述当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息的步骤包括：
当获取所述待检测图像距离上一次初始化所述基准目标信息的时间差大于预设的第一阈值时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息。
3.根据权利要求1所述的目标跟踪的方法，其特征在于，所述依据基准目标信息和待检测图像获取目标的跟踪目标信息的步骤包括：
依据所述基准区域预估在所述待检测图像中多个疑似目标区域；
将基准区域内的图像信息分别与所述多个疑似目标区域内的图像信息一一匹配，以得到一一对应匹配值；
将多个匹配值中的最大的匹配值对应的疑似目标区域认定为所述第一区域，以得到所述跟踪目标信息。
4.根据权利要求3所述的目标跟踪的方法，其特征在于，所述当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息的步骤包括：
依据多个所述匹配值和预设的遮挡检测模型，判断所述目标是否进入遮挡状态；
若是，则依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息。
5.一种目标跟踪的装置，其特征在于，包括：
目标跟踪模块：用于依据基准目标信息和待检测图像获取目标的跟踪目标信息；其中，所述基准目标信息包括基准帧图像中目标所在的基准区域以及所述基准区域内的图像信息，所述跟踪目标信息包括待检测图像中目标所在第一区域以及所述第一区域内的图像信息，所述第一区域为所述待检测图像中与所述基准区域的匹配值最大的疑似目标区域；
目标检测模块：用于当需要初始化所述基准目标信息时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息；其中，所述待确认目标信息包括待检测图像中目标所在待检测图中的第二区域以及所述第二区域内的图像信息，当获取所述待检测图像距离上一次初始化所述基准目标信息的时间差大于预设的第一阈值时或者当所述目标进入遮挡状态时，确定需要初始化所述基准目标信息；
信息配置模块：用于将所述待确认目标信息作为新的基准目标信息；
所述目标检测模块具体还用于判断提取所述待确认目标信息是否成功；
所述信息配置模块具体用于若提取所述待确认目标信息成功，则将所述待确认目标信息作为新的基准目标信息；
所述目标检测模块具体还用于若提取所述待确认目标信息不成功，则依据所述待检测图像之前的n帧图像分析出所述目标的运动方向和运动速度，其中，n大于等于2；依据所述目标的运动方向和运动速度预估下一个待检测图像中目标所在的第三区域；依据所述第三区域和预设定的目标检测模型提取下一个待检测图像中的待确认目标信息；直至提取所述待确认目标信息成功。
6.根据权利要求5所述的目标跟踪的装置，其特征在于，
所述目标检测模块具体用于当获取所述待检测图像距离上一次初始化所述基准目标信息的时间差大于预设的第一阈值时，依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息。
7.根据权利要求5所述的目标跟踪的装置，其特征在于，
所述目标跟踪模块具体用于依据所述基准区域预估在所述待检测图像中多个疑似目标区域；将基准区域内的图像信息分别与所述多个疑似目标区域内的图像信息一一匹配，以得到一一对应匹配值；将多个匹配值中的最大的匹配值对应的疑似目标区域认定为所述第一区域，以得到所述跟踪目标信息。
8.根据权利要求7所述的目标跟踪的装置，其特征在于，
所述目标检测模块具体用于依据多个所述匹配值和预设的遮挡检测模型，判断所述目标是否进入遮挡状态；若是，则依据所述第一区域和预设定的目标检测模型提取所述待检测图像中的待确认目标信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811597721.XA CN109658434B (zh) | 2018-12-26 | 2018-12-26 | 一种目标跟踪的方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811597721.XA CN109658434B (zh) | 2018-12-26 | 2018-12-26 | 一种目标跟踪的方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109658434A CN109658434A (zh) | 2019-04-19 |
| CN109658434B true CN109658434B (zh) | 2023-06-16 |
Family
ID=66116760
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811597721.XA Active CN109658434B (zh) | 2018-12-26 | 2018-12-26 | 一种目标跟踪的方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109658434B (zh) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107255468A (zh) * | 2017-05-24 | 2017-10-17 | 纳恩博（北京）科技有限公司 | 目标跟踪方法、目标跟踪设备及计算机存储介质 |
| CN107481265A (zh) * | 2017-08-17 | 2017-12-15 | 成都通甲优博科技有限责任公司 | 目标重定位方法及装置 |
| CN107564034A (zh) * | 2017-07-27 | 2018-01-09 | 华南理工大学 | 一种监控视频中多目标的行人检测与跟踪方法 |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5912980A (en) * | 1995-07-13 | 1999-06-15 | Hunke; H. Martin | Target acquisition and tracking |
| CN101369346B (zh) * | 2007-08-13 | 2010-09-15 | 北京航空航天大学 | 一种视频运动目标自适应窗口的跟踪方法 |
| CN101127122A (zh) * | 2007-09-13 | 2008-02-20 | 复旦大学 | 一种内容自适应渐进式遮挡分析目标跟踪算法 |
| US7736000B2 (en) * | 2008-08-27 | 2010-06-15 | Locarna Systems, Inc. | Method and apparatus for tracking eye movement |
| JP5177068B2 (ja) * | 2009-04-10 | 2013-04-03 | 株式会社Ｊｖｃケンウッド | 目標追尾装置、目標追尾方法 |
| CN102324030B (zh) * | 2011-09-09 | 2013-11-06 | 广州灵视信息科技有限公司 | 一种基于图像块特征的目标跟踪方法及跟踪系统 |
| CN103268616B (zh) * | 2013-04-18 | 2015-11-25 | 北京工业大学 | 多特征多传感器的移动机器人运动人体跟踪方法 |
| CN103400157B (zh) * | 2013-07-23 | 2017-02-08 | 青岛海信网络科技股份有限公司 | 一种基于视频分析的道路行人及非机动车检测方法 |
| CN104424634B (zh) * | 2013-08-23 | 2017-05-03 | 株式会社理光 | 对象跟踪方法和装置 |
| CN105825524B (zh) * | 2016-03-10 | 2018-07-24 | 浙江生辉照明有限公司 | 目标跟踪方法和装置 |
| CN105931269A (zh) * | 2016-04-22 | 2016-09-07 | 海信集团有限公司 | 一种视频中的目标跟踪方法及装置 |
| CN106651908B (zh) * | 2016-10-13 | 2020-03-31 | 北京科技大学 | 一种多运动目标跟踪方法 |
| CN108985162B (zh) * | 2018-06-11 | 2023-04-18 | 平安科技（深圳）有限公司 | 目标实时跟踪方法、装置、计算机设备及存储介质 |
-
2018
- 2018-12-26 CN CN201811597721.XA patent/CN109658434B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107255468A (zh) * | 2017-05-24 | 2017-10-17 | 纳恩博（北京）科技有限公司 | 目标跟踪方法、目标跟踪设备及计算机存储介质 |
| CN107564034A (zh) * | 2017-07-27 | 2018-01-09 | 华南理工大学 | 一种监控视频中多目标的行人检测与跟踪方法 |
| CN107481265A (zh) * | 2017-08-17 | 2017-12-15 | 成都通甲优博科技有限责任公司 | 目标重定位方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109658434A (zh) | 2019-04-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107545262B (zh) | 一种在自然场景图像中检测文本的方法及装置 | |
| CN110781836A (zh) | 人体识别方法、装置、计算机设备及存储介质 | |
| CN106296725B (zh) | 运动目标实时检测与跟踪方法及目标检测装置 | |
| JP6330385B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| CN110070029B (zh) | 一种步态识别方法及装置 | |
| KR101747216B1 (ko) | 표적 추출 장치와 그 방법 및 상기 방법을 구현하는 프로그램이 기록된 기록 매체 | |
| TWI660326B (zh) | 用於更新背景模型之方法及裝置 | |
| US20130279758A1 (en) | Method and system for robust tilt adjustment and cropping of license plate images | |
| CN110097586B (zh) | 一种人脸检测追踪方法及装置 | |
| US8977060B2 (en) | Motion stabilization and detection of articulated objects | |
| CN108009466B (zh) | 行人检测方法和装置 | |
| CN108986125B (zh) | 物体边缘提取方法、装置及电子设备 | |
| EP2769335B1 (en) | Methods and apparatuses for gesture recognition | |
| JP2015082245A (ja) | 画像処理装置、画像処理方法及びプログラム | |
| CN114746898A (zh) | 用于生成图像抠图的三分图的方法和系统 | |
| US20180047271A1 (en) | Fire detection method, fire detection apparatus and electronic equipment | |
| CN111079613B (zh) | 姿势识别方法和装置、电子设备及存储介质 | |
| CN107133629B (zh) | 图片分类方法、装置和移动终端 | |
| JP2018124689A (ja) | 移動物体検出装置、移動物体検出システム、及び移動物体検出方法 | |
| CN111914762A (zh) | 基于步态信息的身份识别方法及装置 | |
| US20170186179A1 (en) | Detection system, detection method, and program storage medium | |
| CN113052019B (zh) | 目标跟踪方法及装置、智能设备和计算机存储介质 | |
| US20150350579A1 (en) | Image processing apparatus, image processing method, and storage medium | |
| CN107563257B (zh) | 视频理解方法及装置 | |
| CN109658434B (zh) | 一种目标跟踪的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 7 / F, area a, building 6, No. 200, Tianfu 5th Street, high tech Zone, Chengdu, Sichuan 610000 Patentee after: CHENGDU JOUAV AUTOMATION TECHNOLOGY Co.,Ltd. Country or region after: China Address before: 6a7 / F, Jingrong International Plaza, No.200, Tianfu Fifth Street, hi tech Zone, Chengdu, Sichuan 610000 Patentee before: CHENGDU JOUAV AUTOMATION TECHNOLOGY Co.,Ltd. Country or region before: China |
|
| CP03 | Change of name, title or address |