CN111047621B - 一种目标对象追踪方法、系统、设备及可读介质 - Google Patents
一种目标对象追踪方法、系统、设备及可读介质 Download PDFInfo
- Publication number
- CN111047621B CN111047621B CN201911119549.1A CN201911119549A CN111047621B CN 111047621 B CN111047621 B CN 111047621B CN 201911119549 A CN201911119549 A CN 201911119549A CN 111047621 B CN111047621 B CN 111047621B
- Authority
- CN
- China
- Prior art keywords
- pedestrian
- target object
- information
- target
- feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明提供的一种目标对象追踪方法、系统、设备及可读介质,所述目标对象追踪方法包括:通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;如此,实现对特定公共场合中人员的轨迹追踪,并结合航显设备在目标对象最后出现或者可能出现的目标搜索区域进行定向显示,可以实现精准寻人,且定向显示减少对公共场所内所有人员的影响。
Description
技术领域
本发明涉及图像处理领域,特别是涉及一种目标对象追踪方法、系统、设备及可读介质。
背景技术
通常来说,如果想在公共场所寻人,通常需要去广播站和工作人员说明情况,通过工作人员人工广播的方式向喇叭覆盖区域不断播报寻人启事,期待目标对象能够听见并作出响应。这种寻人方式至少存在以下问题:寻人方式比较被动,只能等目标对象听到并作出响应,无法追踪目标对象的行动轨迹并据此主动寻人;并且,广播向公共场所全区域不断广播寻人启事,会影响到公共场所内的所有人员。
发明内容
鉴于以上所述现有技术的缺点,本发明的目的在于提供一种目标对象追踪方法、系统、设备及可读介质,用于解决公共场所无法追踪目标对象的行动轨迹并据此主动寻人的问题。
为实现上述目的及其他相关目的,本发明提供一种目标对象追踪方法,包括:
通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;
根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
其中,在客运点,通过获取目标对象的生物特征信息,在客运点的视频监控系统中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;
通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域,触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
可选的,所述航显设备显示的方式包括:实时显示、间隔显示、滚动显示。
可选的,所述的目标对象追踪方法,还包括:
采集行人特征信息,根据所述行人特征信息建立行人数据库;
获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数;
通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;
根据所述匹配结果确定目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
可选的,所述的目标对象追踪方法,包括:
通过不同位置区域的图像采集装置采集图像信息;
对所述图像信息进行行人检测得到行人框;
对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
可选的,所述的目标对象追踪方法,包括:
通过卷积神经网络对所述行人框进行特征提取,得到各个所述行人框的行人特征信息。
可选的,所述的目标对象追踪方法,还包括:对所述图像信息标注时间信息和位置信息。
可选的,所述的目标对象追踪方法,包括:根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;根据所述行人标识集建立行人数据库。
可选的,所述的目标对象追踪方法,包括:
获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;
对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
可选的,所述目标对象的生物特征信息至少包括以下之一:人脸属性、身形属性、人体属性。
可选的,所述的目标对象追踪方法,包括:
对所述目标对象的生物特征信息进行特征处理得到目标对象的生物特征参数;
所述目标对象的生物特征参数至少包括以下之一:人脸特征图、身形关键点特征、人体特征。
可选的,所述的目标对象追踪方法,包括:
对所述目标对象的生物特征参数和所述行人数据库中的行人特征信息进行相似度计算,得到相似度参数;
若所述相似度参数大于阈值,得到目标对象匹配成功。
可选的,所述航显设备为客运点显示旅客出行相关信息的设备。
本发明还提供一种目标对象追踪系统,包括:
信息匹配模块,用于通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;以及根据所述匹配结果,确定对应的目标搜索区域;
执行模块,所述执行模块包括航显设备,用于根据所述信息匹配模块的指令触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
目标信息获取模块,用于通过获取目标对象的生物特征信息;
信息匹配模块在客运点的视频监控系统中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域;
执行模块,用于触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
可选的,所述的目标对象追踪系统,包括行人信息采集模块,用于采集行人特征信息,根据所述行人特征信息建立行人数据库;
行人信息处理模块,用于获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数。
可选的,所述信息匹配模块通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;并根据所述匹配结果确定目标搜索区域。
可选的,所述行人信息采集模块包括设置在不同位置区域的图像采集装置,用于采集图像信息;
所述行人信息处理模块包括:
行人检测单元,用于对所述图像信息进行行人检测得到行人框;
特征提取单元,用于对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
可选的,所述的目标对象追踪系统,通过所述行人信息处理模块根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;
根据所述行人标识集建立行人数据库。
可选的,所述的目标对象追踪系统,通过所述行人信息处理模块获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;以及对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
本发明还提供一种设备,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当所述一个或多个处理器执行时,使得所述设备执行上述的一个或多个所述的方法。
本发明还提供一个或多个机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得设备执行上述的一个或多个所述的方法。
如上所述,本发明提供的一种目标对象追踪方法、系统、设备及可读介质,通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;如此,实现对特定公共场合中人员的轨迹追踪,并结合航显设备在目标对象最后出现或者可能出现的目标搜索区域进行定向显示,可以实现精准寻人,且定向显示减少对公共场所内所有人员的影响。
附图说明
图1为一实施例的目标对象追踪方法的流程图。
图2为一实施例的目标对象追踪系统的框图。
图3为又一实施例的目标对象追踪系统的框图。
图4为一实施例提供的终端设备的硬件结构示意图。
图5为另一实施例提供的终端设备的硬件结构示意图。
元件标号说明
目标信息获取模块10、信息匹配模块20、视频监控系统30、执行模块40、行人信息采集模块50
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
需要说明的是,请参阅图1-5,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
请参阅图1,本发明提供一种目标对象追踪方法,包括:
S10:通过目标对象的生物特征信息,在视频监控系统30中进行检索匹配,获得匹配结果;
S20:根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
可以理解的,本发明的目标对象追踪方法可以应用在游乐园、公园、机场、火车站或者汽车客运站等人员流动大、人员易走失的公共场所。公共场所可以存在多个不同的区域,各个不同的区域可以安装至少一个图像装置来采集行人图像信息,以及航显设备来实现定向显示。诸如在由A、B、C、D、E、F和G区域组成的公共场所中,每个区域至少有一个图像采集装置和航显设备。
在客运点,通过获取目标对象的生物特征信息,在客运点的视频监控系统30中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;
通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域,触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
在某些实施方式中,所述航显设备显示的方式包括:实时显示、间隔显示、滚动显示。
在某些实施方式中,所述的目标对象追踪方法,还包括:
采集行人特征信息,根据所述行人特征信息建立行人数据库;
获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数;
通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;
根据所述匹配结果确定目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
在某些实施方式中,所述的目标对象追踪方法,包括:
通过不同位置区域的图像采集装置采集图像信息;
对所述图像信息进行行人检测得到行人框;
对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
可以理解的,可以通过训练好的卷积神经网络对行人框进行处理,具体可以是对行人框的图像分割得到多个反应局部特征的图像块,诸如将行人框分割成头部、上身和下身三个部分,整个网络使用堆叠的卷积神经网络(MSCAN)对整张图像进行特征提取,同时也将图像的部分作为一个输入进入这个MSCAN进行特征提取,最终将一个全局特征和三个局部潜在块特征级联起来进行最终的分类损失计算,最终得到行人特征信息。
在某些实施方式中,所述的目标对象追踪方法,包括:
通过卷积神经网络对所述行人框进行特征提取,得到各个所述行人框的行人特征信息。
在某些实施方式中,所述的目标对象追踪方法,还包括:对所述图像信息标注时间信息和位置信息。如此,可以通过采集的图像信息反映出行人的在具体时间点出现的具体位置,本发明的目标对象追踪方法中,可以对不同位置的图像采集装置的视频图像贴上时间信息、位置信息等标签,以便对进入该公共场所的行人的轨迹进行追踪。
在某些实施方式中,所述的目标对象追踪方法,包括:根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;根据所述行人标识集建立行人数据库。
在某些实施方式中,所述的目标对象追踪方法,包括:
获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;
对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
可以理解的,本发明的目标对象追踪方法可以应用在多种不同的场景中,具体应用时可以以最先采集到行人图像的为基准图像,对后续采集的行人图像与基准图像进行拟合,诸如通过相似度计算进行拟合,得到不同行人的行人轨迹,将同一行人的多个轨迹进行归类得到该行人的行人标识集。具体,可以以公共场所的安检口或者入口位置区域的图像采集装置采集的行人图像作为基准图像,对该基准图像进行行人检测处理得到预设行人框。
可以理解的,上述的预设规则可以是基于一类图像块的局部特征进行初步的相似度计算,诸如对上身部分的特征进行相似度计算,进行一个粗分类得到不同的组;再对每个组的各个行人特征信息进行相似度匹配得到至少一行人标识集,此处的相似度计算可以是基于整个行人特征信息进行计算,也可以是选择一类或者几类图像块的局部特征向量进行计算,此处选择可以与粗分类的选择不同也可以相同,在此不做限定。通过逐级分类,降低了对数据处理的复杂度,提高了分类的精准度。
本发明可以在一公共场所中追踪不同行人的行人标识集,建立的数据库包括多个行人标识集,获取要寻找的人员即目标对象的目标对象的生物特征信息后,可以根据目标对象的生物特征信息对应的目标对象的生物特征参数在行人数据库中匹配出该目标对象的行人轨迹,追踪出该目标对象最后出现在监控镜头的时间、最后出现的位置或者正在寻找的时刻目标对象出现的位置,从而确定目标搜索区域,在该目标搜索区域定向显示目标对象的相关信息,实现精准寻人的同时不打扰整个公共场所的其他无关区域的行人。
在某些实施方式中,所述目标对象的生物特征信息至少包括以下之一:人脸属性、身形属性、人体属性。
可以理解的,人脸属性即人脸图像,身形属性即反应行人的身形特征的关键点位置,人体属性即行人的性别、姓名、年龄、戴帽子、背包、上衣颜色、裤子颜色等特征信息。关键点位置又包括以下中的至少一项:头部位置、左肩位置、右肩位置、左膝位置、右膝位置、左脚位置、右脚位置。如此,多维度的采集行人信息可以实现后续对行人轨迹的精准追踪,提高了寻人的准确性。
在某些实施方式中,所述的目标对象追踪方法,包括:
对所述目标对象的生物特征信息进行特征处理得到目标对象的生物特征参数;
所述目标对象的生物特征参数至少包括以下之一:人脸特征图、身形关键点特征、人体特征。
可以理解的,目标对象的生物特征信息可以包括人脸图像、上衣颜色、裤子颜色、身高、性别、是否戴口罩、姓名或证件号等,获取这些信息的方式可以是通过要查找目标对象的亲朋好友提供的,或者是基于其提供的部分信息在监控中进行搜索得到的,诸如在机场中,行人进行安检口会采集人脸信息、身份证上的性别、姓名等一组关联的信息,后续系统中的图像采集装置会不间断的对各个区域的行人的图像进行采集,追踪出各个行人的运动轨迹,本发明的目标对象追踪方法可以基于部分目标对象的生物特征信息在目标对象追踪系统中实现对目标对象的追踪和查找,此处仅以机场的应用场景为例进行说明,在其他应用场景中的例子不再一一举例。
在某些实施方式中,所述的目标对象追踪方法,包括:
对所述目标对象的生物特征参数和所述行人数据库中的行人特征信息进行相似度计算,得到相似度参数;
若所述相似度参数大于阈值,得到目标对象匹配成功。
在某些实施方式中,所述航显设备为客运点显示旅客出行相关信息的设备。
在某些实施方式中,对所述目标对象的生物特征参数和所述行人数据库中的行人特征信息进行相似度计算可以得到多组相似度参数,可以对相似度参数的值从高到低进行排序,诸如第一行人标识集中的行人框匹配的相似度参数为88%,第二行人标识集中的行人框匹配的相似度参数为80%,则第一行人标识集中行人与目标对象最相似,则直接调取第一行人标识集来实现对目标对象的轨迹追踪。
可以理解的,本发明的相似度计算方法可以是闵可夫斯基距离、余弦相似度或者欧式距离等,在此不做限定。此处的阈值可以设定为一个范围,诸如80%--90%。在某些实施方式中,可以对目标对象的人脸特征向量于数据库中的行人框的人脸图像块的特征向量进行相似度计算,若数据库中某一行人框的人脸图像块的特征向量与目标对象的人脸特征向量的相似度参数为80%,则可以调取此行人的行人标识集,由此对该行人的行人轨迹进行追踪,追踪的结果可以是行人仍旧还在某个特定的区域,诸如在由A、B、C、D、E、F和G区域组成的公共场所中的A区域中,此时就可以开启A区域的航显设备显示目标对象的关联信息;或者,通过追踪结果可以确定目标对象最后一次出现的位置、轨迹方向、以及据今的时间依次扩大显示区域的范围。例如,目标对象最后一次出现在监控区域A,轨迹方向是朝监控区域B,且最后一次出现距今有3分钟了,那么就给监控区域A和B,以及其他邻近区域的航显设备定向显示寻人启事。又例如,目标对象最后一次出现在监控区域A,轨迹方向是公共场所以外,且最后一次出现距今有2个小时了,那么就有可能全区域显示寻人启事。可以理解,此处可以显示目标对象的生物特征信息的一个信息或者多个信息的组合来实现搜寻,诸如显示“张三”、“穿黄衣服的张三”或者“戴眼镜的张三”等等。如此,通过轨迹追踪结合定向显示,实现了精准寻人,同时不打扰其他区域的人员。此外,本发明应用在人员密集、喧闹的公共场所时,通过定向显示来实现精准寻人,避免了喧哗场景中语音寻人来人的识别灵敏度低的问题;本发明应用在安静的公共场所时,避免了语音寻人带来的噪音污染。
请参阅图2-3,本发明还提供一种目标对象追踪系统,包括:
信息匹配模块20,用于通过目标对象的生物特征信息,在视频监控系统30中进行检索匹配,获得匹配结果;以及根据所述匹配结果,确定对应的目标搜索区域;
执行模块40,所述执行模块40包括航显设备,用于根据所述信息匹配模块20的指令触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;
目标信息获取模块10,用于通过获取目标对象的生物特征信息;
信息匹配模块20在客运点的视频监控系统30中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域;
执行模块40,用于触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
在某些实施方式中,所述的目标对象追踪系统,包括行人信息采集模块50,用于采集行人特征信息,根据所述行人特征信息建立行人数据库;
行人信息处理模块,用于获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数。
在某些实施方式中,所述信息匹配模块20通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;并根据所述匹配结果确定目标搜索区域。
在某些实施方式中,所述行人信息采集模块50包括设置在不同位置区域的图像采集装置,用于采集图像信息;
所述行人信息处理模块包括:
行人检测单元,用于对所述图像信息进行行人检测得到行人框;
特征提取单元,用于对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
在某些实施方式中,所述的目标对象追踪系统,通过所述行人信息处理模块根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;
根据所述行人标识集建立行人数据库。
在某些实施方式中,所述的目标对象追踪系统,通过所述行人信息处理模块获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;以及对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
本发明的目标对象追踪系统的相关实施例可以参照上述本发明的目标对象追踪方法的相关实施例,在此不再赘述。
本发明还提供一种设备,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当所述一个或多个处理器执行时,使得所述设备执行上述的一个或多个所述的方法。
本发明还提供一个或多个机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得设备执行上述的一个或多个所述的方法。
如上所述,本发明提供的一种目标对象追踪方法、系统、设备及可读介质,通过目标对象的生物特征信息,在视频监控系统30中进行检索匹配,获得匹配结果;根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;如此,实现对特定公共场合中人员的轨迹追踪,并结合航显设备在目标对象最后出现或者可能出现的目标搜索区域进行定向显示,可以实现精准寻人,且定向显示减少对公共场所内所有人员的影响。
本申请实施例还提供了一种设备,该设备可以包括:一个或多个处理器;和其上存储有指令的一个或多个机器可读介质,当由所述一个或多个处理器执行时,使得所述设备执行图1所述的方法。在实际应用中,该设备可以作为终端设备,也可以作为服务器,终端设备的例子可以包括:智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准语音层面3,Moving Picture Experts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准语音层面4,Moving Picture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等,本申请实施例对于具体的设备不加以限制。
本申请实施例还提供了一种非易失性可读存储介质,该存储介质中存储有一个或多个模块(programs),该一个或多个模块被应用在设备时,可以使得该设备执行本申请实施例的图1中目标对象追踪方法所包含步骤的指令(instructions)。
图4为本申请一实施例提供的终端设备的硬件结构示意图。如图所示,该终端设备可以包括:输入设备1100、第一处理器1101、输出设备1102、第一存储器1103和至少一个通信总线1104。通信总线1104用于实现元件之间的通信连接。第一存储器1103可能包含高速RAM存储器,也可能还包括非易失性存储NVM,例如至少一个磁盘存储器,第一存储器1103中可以存储各种程序,用于完成各种处理功能以及实现本实施例的方法步骤。
在某些实施方式中,上述第一处理器1101例如可以为中央处理器(CentralProcessing Unit,简称CPU)、应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,该第一处理器1101通过有线或无线连接耦合到上述输入设备1100和输出设备1102。
在某些实施方式中,上述输入设备1100可以包括多种输入设备,例如可以包括面向用户的用户接口、面向设备的设备接口、软件的可编程接口、摄像头、传感器中至少一种。在某些实施方式中,该面向设备的设备接口可以是用于设备与设备之间进行数据传输的有线接口、还可以是用于设备与设备之间进行数据传输的硬件插入接口(例如USB接口、串口等);在某些实施方式中,该面向用户的用户接口例如可以是面向用户的控制按键、用于接收语音输入的语音输入设备以及用户接收用户触摸输入的触摸感知设备(例如具有触摸感应功能的触摸屏、触控板等);在某些实施方式中,上述软件的可编程接口例如可以是供用户编辑或者修改程序的入口,例如芯片的输入引脚接口或者输入接口等;输出设备1102可以包括显示器、音响等输出设备。
在本实施例中,该终端设备的处理器包括用于执行各设备中语音识别装置各模块的功能,具体功能和技术效果参照上述实施例即可,此处不再赘述。
图5为本申请的一个实施例提供的终端设备的硬件结构示意图。图4是对图5在实现过程中的一个具体的实施例。如图所示,本实施例的终端设备可以包括第二处理器1201以及第二存储器1202。
第二处理器1201执行第二存储器1202所存放的计算机程序代码,实现上述实施例中图1所述方法。
第二存储器1202被配置为存储各种类型的数据以支持在终端设备的操作。这些数据的示例包括用于在终端设备上操作的任何应用程序或方法的指令,例如消息,图片,行人图像信息等。第二存储器1202可能包含随机存取存储器(random access memory,简称RAM),也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
可选地,第二处理器1201设置在处理组件1200中。该终端设备还可以包括:通信组件1203,电源组件1204,多媒体组件1205,语音组件1206,输入/输出接口1207和/或传感器组件1208。终端设备具体所包含的组件等依据实际需求设定,本实施例对此不作限定。
处理组件1200通常控制终端设备的整体操作。处理组件1200可以包括一个或多个第二处理器1201来执行指令,以完成上述数据处理方法中的全部或部分步骤。此外,处理组件1200可以包括一个或多个模块,便于处理组件1200和其他组件之间的交互。例如,处理组件1200可以包括多媒体模块,以方便多媒体组件1205和处理组件1200之间的交互。
电源组件1204为终端设备的各种组件提供电力。电源组件1204可以包括电源管理系统,一个或多个电源,及其他与为终端设备生成、管理和分配电力相关联的组件。
多媒体组件1205包括在终端设备和用户之间的提供一个输出接口的显示屏。在一些实施例中,显示屏可以包括液晶显示器(LCD)和触摸面板(TP)。如果显示屏包括触摸面板,显示屏可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。
语音组件1206被配置为输出和/或输入语音信号。例如,语音组件1206包括一个麦克风(MIC),当终端设备处于操作模式,如语音识别模式时,麦克风被配置为接收外部语音信号。所接收的语音信号可以被进一步存储在第二存储器1202或经由通信组件1203发送。在一些实施例中,语音组件1206还包括一个扬声器,用于输出语音信号。
输入/输出接口1207为处理组件1200和外围接口模块之间提供接口,上述外围接口模块可以是点击轮,按钮等。这些按钮可包括但不限于:音量按钮、启动按钮和锁定按钮。
传感器组件1208包括一个或多个传感器,用于为终端设备提供各个方面的状态评估。例如,传感器组件1208可以检测到终端设备的打开/关闭状态,组件的相对定位,用户与终端设备接触的存在或不存在。传感器组件1208可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在,包括检测用户与终端设备间的距离。在一些实施例中,该传感器组件1208还可以包括摄像头等。
通信组件1203被配置为便于终端设备和其他设备之间有线或无线方式的通信。终端设备可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个实施例中,该终端设备中可以包括SIM卡插槽,该SIM卡插槽用于插入SIM卡,使得终端设备可以登录GPRS网络,通过互联网与服务器建立通信。
由上可知,在图5实施例中所涉及的通信组件1203、语音组件1206以及输入/输出接口1207、传感器组件1208均可以作为图4实施例中的输入设备的实现方式。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下,对上述实施例进行修饰或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。
Claims (20)
1.一种目标对象追踪方法,其特征在于,包括:
通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;
根据所述匹配结果,确定对应的目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;
其中,在客运点,通过获取目标对象的生物特征信息,在客运点的视频监控系统中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;
通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域,触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
2.根据权利要求1所述的目标对象追踪方法,其特征在于,
所述航显设备显示的方式包括:实时显示、间隔显示、滚动显示。
3.根据权利要求1所述的目标对象追踪方法,其特征在于,
采集行人特征信息,根据所述行人特征信息建立行人数据库;
获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数;
通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;
根据所述匹配结果确定目标搜索区域,并触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略。
4.根据权利要求3所述的目标对象追踪方法,其特征在于,包括:
通过不同位置区域的图像采集装置采集图像信息;
对所述图像信息进行行人检测得到行人框;
对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
5.根据权利要求4所述的目标对象追踪方法,其特征在于,包括:
通过卷积神经网络对所述行人框进行特征提取,得到各个所述行人框的行人特征信息。
6.根据权利要求4所述的目标对象追踪方法,其特征在于,包括:
对所述图像信息标注时间信息和位置信息。
7.根据权利要求4所述的目标对象追踪方法,其特征在于,包括:
根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;
根据所述行人标识集建立行人数据库。
8.根据权利要求5所述的目标对象追踪方法,其特征在于,包括:
获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;
对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
9.根据权利要求1所述的目标对象追踪方法,其特征在于,所述目标对象的生物特征信息至少包括以下之一:人脸属性、身形属性、人体属性。
10.根据权利要求9所述的目标对象追踪方法,其特征在于,包括:
对所述目标对象的生物特征信息进行特征处理得到目标对象的生物特征参数;
所述目标对象的生物特征参数至少包括以下之一:人脸特征图、身形关键点特征、人体特征。
11.根据权利要求3所述的目标对象追踪方法,其特征在于,包括:
对所述目标对象的生物特征参数和所述行人数据库中的行人特征信息进行相似度计算,得到相似度参数;
若所述相似度参数大于阈值,得到目标对象匹配成功。
12.根据权利要求1所述的目标对象追踪方法,其特征在于,所述航显设备为客运点显示旅客出行相关信息的设备。
13.一种目标对象追踪系统,其特征在于,包括:
信息匹配模块,用于通过目标对象的生物特征信息,在视频监控系统中进行检索匹配,获得匹配结果;以及根据所述匹配结果,确定对应的目标搜索区域;
执行模块,所述执行模块包括航显设备,用于根据所述信息匹配模块的指令触发所述目标搜索区域内的航显设备执行对应的目标对象搜索策略;
目标信息获取模块,用于通过获取目标对象的生物特征信息;
信息匹配模块在客运点的视频监控系统中进行检索匹配,输出与所述目标对象对应的行为轨迹,确定所述目标对象最后出现的行为轨迹点所在的目标位置;通过所述目标位置和/或所述目标对象的运动特征,确定对应的目标搜索区域;
执行模块,用于触发位于所述目标搜索区域内的航显设备显示与所述目标对象相关的关联信息。
14.根据权利要求13所述的目标对象追踪系统,其特征在于,包括行人信息采集模块,用于采集行人特征信息,根据所述行人特征信息建立行人数据库;
行人信息处理模块,用于获取目标对象的生物特征信息,对所述目标对象的生物特征信息进行处理以得到目标对象的生物参数。
15.根据权利要求14所述的目标对象追踪系统,其特征在于,所述信息匹配模块通过所述目标对象的生物特征参数在所述行人数据库进行匹配,得到匹配结果;并根据所述匹配结果确定目标搜索区域。
16.根据权利要求14所述的目标对象追踪系统,其特征在于,所述行人信息采集模块包括设置在不同位置区域的图像采集装置,用于采集图像信息;
所述行人信息处理模块包括:
行人检测单元,用于对所述图像信息进行行人检测得到行人框;
特征提取单元,用于对所述行人框进行特征提取得到各个所述行人框的行人特征信息。
17.根据权利要求14所述的目标对象追踪系统,其特征在于,通过所述行人信息处理模块根据预设规则对所述行人特征信息进行分类处理,得到多个行人标识集;
根据所述行人标识集建立行人数据库。
18.根据权利要求14所述的目标对象追踪系统,其特征在于,通过所述行人信息处理模块获取首次出现行人的预设行人框,对所述预设行人框进行特征提取得到预设行人特征信息,并建立预设特征集;以及对所述预设特征集和各个所述行人框的行人特征信息进行相似度匹配,得到多个行人标识集。
19.一种设备,其特征在于,包括:
一个或多个处理器;和
其上存储有指令的一个或多个机器可读介质,当所述一个或多个处理器执行时,使得所述设备执行如权利要求1-12中一个或多个所述的方法。
20.一个或多个机器可读介质,其特征在于,其上存储有指令,当由一个或多个处理器执行时,使得设备执行如权利要求1-12中一个或多个所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911119549.1A CN111047621B (zh) | 2019-11-15 | 2019-11-15 | 一种目标对象追踪方法、系统、设备及可读介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911119549.1A CN111047621B (zh) | 2019-11-15 | 2019-11-15 | 一种目标对象追踪方法、系统、设备及可读介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111047621A CN111047621A (zh) | 2020-04-21 |
CN111047621B true CN111047621B (zh) | 2021-04-09 |
Family
ID=70232128
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911119549.1A Active CN111047621B (zh) | 2019-11-15 | 2019-11-15 | 一种目标对象追踪方法、系统、设备及可读介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111047621B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111586367A (zh) * | 2020-06-02 | 2020-08-25 | 厦门中控智慧信息技术有限公司 | 空间区域内人员实时定位追踪方法、系统及终端设备 |
KR102450028B1 (ko) * | 2020-06-24 | 2022-10-05 | 한국과학기술연구원 | 객체 정보 및 지역 정보를 이용한 탐색 지역 결정 방법 및 이를 수행하는 시스템 |
CN111982293B (zh) * | 2020-07-20 | 2022-07-15 | 北京声智科技有限公司 | 体温测量方法、装置、电子设备及存储介质 |
CN113378621B (zh) * | 2021-04-06 | 2024-03-22 | 张沈莘 | 一种轨道交通信息化前端监控系统、监控方法及存储介质 |
CN113592910A (zh) * | 2021-07-29 | 2021-11-02 | 浙江大华技术股份有限公司 | 一种跨相机追踪方法及装置 |
CN114297534B (zh) * | 2022-02-28 | 2022-07-22 | 京东方科技集团股份有限公司 | 交互式寻找目标对象的方法、系统和存储介质 |
CN114860786A (zh) * | 2022-03-16 | 2022-08-05 | 北京旷视科技有限公司 | 轨迹显示方法、电子设备、存储介质和程序产品 |
CN115546710A (zh) * | 2022-08-09 | 2022-12-30 | 国网湖北省电力有限公司黄龙滩水力发电厂 | 水电厂的人员定位方法、装置、设备及可读存储介质 |
CN115620379B (zh) * | 2022-12-16 | 2023-04-07 | 广东汇通信息科技股份有限公司 | 一种基于计算机视觉的商场寻人方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109102531A (zh) * | 2018-08-21 | 2018-12-28 | 北京深瞐科技有限公司 | 一种目标轨迹追踪方法及装置 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8311292B2 (en) * | 2009-02-09 | 2012-11-13 | Cisco Technology, Inc. | Context aware, multiple target image recognition |
CN202190348U (zh) * | 2011-04-01 | 2012-04-11 | 天津长城科安电子科技有限公司 | 目标自动跟踪智能摄像机 |
CN102638675B (zh) * | 2012-04-01 | 2015-01-14 | 安科智慧城市技术(中国)有限公司 | 一种利用多视点视频进行目标跟踪的方法和系统 |
CN103679687A (zh) * | 2012-09-18 | 2014-03-26 | 杭州海康威视数字技术股份有限公司 | 一种智能跟踪高速球机的目标跟踪的方法 |
CN104182747A (zh) * | 2013-05-28 | 2014-12-03 | 株式会社理光 | 基于多个立体相机的对象检测跟踪方法及装置 |
CN103679155A (zh) * | 2013-12-30 | 2014-03-26 | 深圳锐取信息技术股份有限公司 | 多目标自动跟踪系统及方法 |
CN104092991A (zh) * | 2014-07-11 | 2014-10-08 | 金陵科技学院 | 针对目标跟踪控制的图像信号综合处理装置及实现方法 |
CN104125433A (zh) * | 2014-07-30 | 2014-10-29 | 西安冉科信息技术有限公司 | 基于多球机联动结构的视频运动目标监控方法 |
US11258985B2 (en) * | 2016-04-05 | 2022-02-22 | Verint Systems Inc. | Target tracking in a multi-camera surveillance system |
CN106250938B (zh) * | 2016-07-19 | 2021-09-10 | 易视腾科技股份有限公司 | 目标跟踪方法、增强现实方法及其装置 |
CN106295598A (zh) * | 2016-08-17 | 2017-01-04 | 北京大学 | 一种跨摄像头目标跟踪方法及装置 |
US20180096575A1 (en) * | 2016-10-03 | 2018-04-05 | Motaz Aladas | System for facilitating surveillance video analysis |
CN108171219A (zh) * | 2018-01-30 | 2018-06-15 | 广州市君望机器人自动化有限公司 | 一种机器人追踪人脸方法 |
CN108806146A (zh) * | 2018-06-06 | 2018-11-13 | 合肥嘉仕诚能源科技有限公司 | 一种安防监控动态目标锁定追踪方法及系统 |
CN110390288B (zh) * | 2019-04-26 | 2021-05-25 | 上海鹰觉科技有限公司 | 基于计算机视觉的目标智能搜索、定位和跟踪系统及方法 |
-
2019
- 2019-11-15 CN CN201911119549.1A patent/CN111047621B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109102531A (zh) * | 2018-08-21 | 2018-12-28 | 北京深瞐科技有限公司 | 一种目标轨迹追踪方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111047621A (zh) | 2020-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111047621B (zh) | 一种目标对象追踪方法、系统、设备及可读介质 | |
CN110929770A (zh) | 一种基于图像处理的智能追踪方法、系统、设备及可读介质 | |
CN108960209B (zh) | 身份识别方法、装置及计算机可读存储介质 | |
CN111652678B (zh) | 物品信息显示方法、装置、终端、服务器及可读存储介质 | |
CN110929619A (zh) | 一种基于图像处理的目标对象追踪方法、系统、设备及可读介质 | |
CN110807361B (zh) | 人体识别方法、装置、计算机设备及存储介质 | |
CN112100305B (zh) | 一种基于多源数据的轨迹确定方法、装置、设备及介质 | |
CN113395542B (zh) | 基于人工智能的视频生成方法、装置、计算机设备及介质 | |
CN105354543A (zh) | 视频处理方法及装置 | |
CN105631403A (zh) | 人脸识别方法及装置 | |
AU2020309090A1 (en) | Image processing methods and apparatuses, electronic devices, and storage media | |
CN106663196A (zh) | 视频中的计算机显著人物识别 | |
CN106295511A (zh) | 人脸跟踪方法及装置 | |
CN106295515A (zh) | 确定图像中的人脸区域的方法及装置 | |
US20210201478A1 (en) | Image processing methods, electronic devices, and storage media | |
CN111783517B (zh) | 图像识别方法、装置、电子设备及存储介质 | |
CN107463903A (zh) | 人脸关键点定位方法及装置 | |
CN110889346B (zh) | 一种智能追踪方法、系统、设备及可读介质 | |
CN112101216A (zh) | 人脸识别方法、装置、设备及存储介质 | |
CN111339943A (zh) | 一种对象管理方法、系统、平台、设备及介质 | |
CN111340848A (zh) | 对目标区域的对象跟踪方法、系统、设备及介质 | |
CN103745223A (zh) | 一种人脸检测方法及装置 | |
CN105335714A (zh) | 照片处理方法、装置和设备 | |
CN114332503A (zh) | 对象重识别方法及装置、电子设备和存储介质 | |
CN111291638A (zh) | 一种对象比对方法、系统、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |