CN111898434B - 一种视频侦测分析系统 - Google Patents

一种视频侦测分析系统 Download PDF

Info

Publication number
CN111898434B
CN111898434B CN202010599263.4A CN202010599263A CN111898434B CN 111898434 B CN111898434 B CN 111898434B CN 202010599263 A CN202010599263 A CN 202010599263A CN 111898434 B CN111898434 B CN 111898434B
Authority
CN
China
Prior art keywords
garbage
image
detection
preset standard
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010599263.4A
Other languages
English (en)
Other versions
CN111898434A (zh
Inventor
王磊
范德满
沈义军
禹双双
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yancheng Fuji Intelligent Technology Co ltd
Original Assignee
Jiangsu Baixun Technology Development Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Baixun Technology Development Co ltd filed Critical Jiangsu Baixun Technology Development Co ltd
Priority to CN202010599263.4A priority Critical patent/CN111898434B/zh
Publication of CN111898434A publication Critical patent/CN111898434A/zh
Application granted granted Critical
Publication of CN111898434B publication Critical patent/CN111898434B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Abstract

本发明提供一种视屏侦测分析系统，包括：摄像设备，采集实时视频数据；侦测分析服务器，处理摄像设备采集的现实数据获得显示数据；显示设备，显示显示数据；用于连接摄像设备和侦测分析服务器的无线通讯模块，传输摄像设备采集的实时视频数据到侦测分析服务器，本发明的视屏侦测分析系统，可以使用户对场景下任一对象进行实时侦测分析并做数据统计，而且当场景下物体复杂时，依旧可以精准对场景下任一物体做数据统计，突破了传统统计方法识别对象单一的局限性。

Description

一种视频侦测分析系统
技术领域
本发明涉侦测分析技术领域，特别涉及一种视频侦测分析系统。
背景技术
目前，由于近年来大数据的发展，对数据的统计变得极为重要。例如：客流量数据信息对于实体经营店铺极其重要，实体店铺可以通过数据统计获得该店铺所在街道、商场的客流量信息，来合理分配举办宣传商品活动的时间，再必要的时间节点做最大利益化的措施。
数据统计分析对交通通行同样极其重要。例如：交通枢纽、旅游景点、火车、汽车站是人流、车流密集的地点，交通执法部门必须对这些地点的人流量、车流量做实时数据统计，以免发生人流或车流过于密集造成的拥挤、混乱、阻塞、碰撞等事故发生。
传统的数据统计分析方法分为两种：一是通过人力站岗计算或根据经验估计数据信息，这种方法获得的数据信息不可靠，而且当物体数量过多时，根本无法精准获取数据统计信息且无法实时了解场景下的数据统计数据；二是通过对单一对象如车辆、行人进行摄像侦测分析做数据统计的方法，这种方法识别对象单一，只能对唯一物体对象进行侦测分析。
发明内容
本发明目的之一在于提供了一种视频侦测分析系统，可以使商铺店家、交通执法部门等用户对场景下任一对象进行实时侦测分析并做数据统计，帮助商铺店家合理分配宣传活动的举办时间，帮助执法部门提前预判交通堵塞事件的发生，避免了由于人流或车流过于密集造成的混乱、碰撞等事故的发生，而且当场景下物体复杂时，依旧可以精准对场景下任一物体做数据统计，突破了传统统计方法识别对象单一的局限性。
本发明实施例提供的一种信息提取方法及系统，包括：
第一摄像设备，用于采集第一实时视频数据；
侦测分析服务器，通过无线通讯模块与所述第一摄像设备通讯连接；
第一显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第一摄像设备采集的所述第一实时视频数据，所述侦测分析服务器对所述第一实时视频数据进行处理获得第一显示数据并将所述第一显示数据发送到所述第一显示设备，所述第一显示设备显示所述第一显示数据。
优选地，所述无线通讯模块包括：
2/3/4/5G通信模块、NB-loT通信模块、红外通信模块和WIFI通信模块中的一种或多种结合。
优选地，所述侦测分析服务器包括：
指令输入模块，用于接收物体搜索指令；
识别捕捉模块，基于所述物体搜索指令捕捉每帧图像上的物体图像；
轨迹跟踪模块，用于计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪；
数据整合模块，用于将所述物体的所述物体数量、所述移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据。
优选地，所述识别捕捉模块基于所述物体搜索指令捕捉每帧图像上的物体图像，具体包括：
接收所述指令输入模块接收的所述物体搜索指令；
解析所述物体搜索指令，获得所述物体搜索指令对应的物体搜索对象；
将所述第一实时视频数据拆分成所述每帧图像；
采用物体候选采样框对所述每帧图像进行扫描采样，获得所述物体搜索对象对应的多个物体候选图像；
将所述物体候选图像与预设标准物体基础模型或预设标准物体运动模型进行比对，筛选出物体类似图像；
对所述物体类似图像进行边缘化提取，获得所述物体图像；
其中，将所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型进行比对，筛选出物体类似图像，具体包括：
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度为：
Figure GDA0002892287120000031
ys(x)为第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度，Selectx(a,b)为第x个候选图像的像素点坐标(a,b)的像素值，Base(a,b)为所述预设标准物体基础模型或所述预设标准物体运动模型的像素点坐标(a,b)的像素值，AND为和运算；
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度为：
Figure GDA0002892287120000032
yd(x)为第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度，XOR为异或运算；
计算第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的总体相似度为：
Figure GDA0002892287120000033
以总体相似度最大的所述预设标准物体基础模型对应的所述物体候选图像或所述预设标准物体运动模型对应的所述物体候选图像为所述物体图像。
优选地，所述轨迹跟踪模块计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪，具体包括：
接收所述识别捕捉模块捕捉的所述每帧图像上的所述物体图像，所述物体图像的数量为所述物体的物体数量；
根据预设标准物体中心判断规则确定所述每帧图像上的所述物体图像的中心点；
在所述每帧图像中的第一帧图像上以所述物体图像的中心点为坐标原点建立空间直角坐标系，X轴为所述物体的宽度、Y轴为所述物体的厚度、Z轴为所述物体的高度；
将除了所述第一帧图像外的所述每帧图像上所述物体图像的中心点通过帧比较标注在所述空间直角坐标系中；
将所述中心点在所述空间直角坐标系中依次连接和矢量计算获得中心点连接线，所述中心点连接线为所述物体的所述物体移动轨迹，所述中心点连接线的矢量方向为所述物体的所述物体移动方向；
对所述每帧图像上的所述物体图像做ID标记，对所述物体进行轨迹跟踪；
其中，计算所述物体的所述物体移动速度，具体包括：
计算所述物体移动轨迹的路程：
Figure GDA0002892287120000041
L为所述物体移动轨迹的所述路程，(x1，y1，z1)为第一个所述中心点在所述空间直角坐标系中的坐标,(xn，yn，zn)为第n个所述中心点在所述空间直角坐标系中的坐标；
计算所述物体的所述物体移动速度：
Figure GDA0002892287120000042
v为所述物体的所述物体移动速度，n-1为n个所述中心点有n-1个时间间隔，T为预设每帧图像间隔时间。
优选地，所述数据整合模块将所述物体的所述物体数量、所述移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据，具体包括：
接收所述轨迹跟踪模块计算得出的所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹；
将所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹标注在所述每帧图像的所述物体图像上获得所述第一显示数据。
优选地，所述第一摄像设备具有存储硬件，用于存储拍摄的所述第一实时视频数据。
优选地，视频侦测分析系统还包括：
第二摄像设备，用于采集第二实时视频数据，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
无人机装置，所述第二摄像设备固定设置在所述无人机装置上；
第二显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第二摄像设备采集的所述第二实时视频数据，所述侦测分析服务器对所述第二实时视频数据进行处理获得所述第二显示数据并将所述第二显示数据发送到所述第二显示设备，所述第二显示设备显示所述第二显示数据。
优选地，视频侦测分析系统还包括：
第三摄像设备，用于采集第三实时视频数据，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
垃圾处理平台，所述第三摄像设备固定设置在所述垃圾处理平台上；
垃圾搜集装置，固定设置在所述垃圾处理平台上，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
垃圾分类存储装置，固定设置在所述垃圾处理平台上；
第三显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第三摄像设备采集的所述第三实时视频数据，所述侦测分析服务器对所述第三实时视频数据进行处理获得所述第三显示数据并将所述第三显示数据发送到所述第三显示设备，所述第三显示设备显示所述第三显示数据；
所述侦测分析服务器接收垃圾搜集指令；
所述侦测分析服务器解析所述垃圾搜集指令，获得垃圾搜集对象；
所述侦测分析服务器通过所述无线通讯模块控制所述垃圾搜集装置对所述垃圾搜集对象对应的垃圾进行垃圾搜集；
所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置；
其中，所述侦测分析服务器对所述第三实时视频数据进行处理获得所述第三显示数据，具体包括：
所述指令输入模块接收垃圾搜索指令包括：可回收物搜索指令、厨余垃圾搜索指令、有害垃圾搜索指令和其它垃圾搜索指令；
所述识别捕捉模块捕捉所述每帧图像上的垃圾图像；
所述轨迹跟踪模块计算所述垃圾的垃圾数量、垃圾移动方向、垃圾移动速度和垃圾移动轨迹，对所述垃圾进行轨迹跟踪；
所述数据整合模块将所述垃圾的所述垃圾的垃圾数量、移动方向、所述垃圾移动速度和所述垃圾移动轨迹整合起来并与所述垃圾关联，获得所述第三显示数据；
其中，所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置，具体包括：
所述垃圾分类存储装置包括：可回收物存储装置、厨余垃圾存储装置、有害垃圾存储装置和其它垃圾存储装置；
所述垃圾搜集装置获取所述指令输入模块接收的所述垃圾对应所述垃圾搜集指令；
所述垃圾搜集装置根据所述垃圾搜集指令将所述垃圾传送的所述垃圾搜集指令对应的所述垃圾分类存储装置。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例中一种视频侦测分析系统的示意图；
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
本发明实施例提供了一种视频侦测分析系统，如图1所示，包括：
第一摄像设备1，用于采集第一实时视频数据；
侦测分析服务器2，通过无线通讯模块与所述第一摄像设备1通讯连接；
第一显示设备3，与所述侦测分析服务器2电连接；
所述侦测分析服务器2通过所述无线通讯模块获得所述第一摄像设备1采集的所述第一实时视频数据，所述侦测分析服务器2对所述第一实时视频数据进行处理获得第一显示数据并将所述第一显示数据发送到所述第一显示设备3，所述第一显示设备3显示所述第一显示数据。
上述技术方案的工作原理为：首先，所述第一摄像设备1，即摄像机，拍摄所述第一实时视频数据；然后，所述第一摄像设备1将采集的所述第一实时视频数据通过由2/3/4/5G通信模块、NB-loT通信模块、红外通信模块和WIFI通信模块中的一种或多种结合组成的所述无线通讯模块发送到所述侦测分析服务器2；接着，所述所述侦测分析服务器2对所述第一实时视频数据进行处理获得第一显示数据；最后，所述第一显示设备3显示所述第一显示数据。
例如，将所述第一摄像设备1安装在商场门口，所述第一摄像设备1将在商场门口采集的所述第一实时视频数据发送到所述侦测分析服务器2，所述侦测分析服务器2对所述第一实时视频数据进行处理，获得所述第一显示数据，例如：客流量数据信息，将所述第一显示数据发送到所述第一显示设备3上，所述第一显示设备3显示客流量信息。
上述技术方案的有益效果为：本发明可以帮助交通执法部门、商场店家等用户对场景做人流量、车流量等更精准、快捷的数据统计，而且数据统计的对象不是唯一的，突破了现有技术识别对象单一的局限性。
本发明实施例提供了一种视频侦测分析系统，所述无线通讯模块包括：
2/3/4/5G通信模块、NB-loT通信模块、红外通信模块和WIFI通信模块中的一种或多种结合。
上述技术方案的工作原理为：所述无线通讯模块由2/3/4/5G通信模块、NB-loT通信模块、红外通信模块和WIFI通信模块中的一种或多种结合组合而成；
所述2/3/4/5G通信模块通过基站或类似设备提供通信；
所述NB-loT通信模块可采取带内、保护带或独立载波三种部署方式，与现有网络共存；
所述红外通信模块是一种基于红外线的传输技术；
所述WIFI通信模块可以直接利用WIFI接入互联网。
上述技术方案的有益效果为：本发明采用无线通讯模块进行数据传输，突破了距离的限制，可以替代传统人力站岗的数据统计方法，还可以远程对场景下的物体对象进行实时侦测分析并做数据统计。
本发明实施例提供了一种视频侦测分析系统，所述侦测分析服务器2包括：
指令输入模块，用于接收物体搜索指令；
识别捕捉模块，基于所述物体搜索指令捕捉每帧图像上的物体图像；
轨迹跟踪模块，用于计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪；
数据整合模块，用于将所述物体的所述物体数量、所述移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据。
上述技术方案的工作原理为：所述侦测分析服务器2由所述指令输入模块、所述识别捕捉模块、所述轨迹跟踪模块和所述数据整合模块四部分组成；首先，所述指令输入模块可以接收用户想要搜索的所述物体搜索指令；然后，所述识别捕捉模块可以接收想要搜索的物体对象指令，对所述第一实时视频数据进行分帧处理，根据所述物体搜索指令并结合预设标准物体基础模型或预设标准物体运动模型识别出每帧图像上的物体，捕捉所述每帧图像上的物体图像；接着，接收所述每帧图像上的所述物体图像，根据所述识别捕捉模块捕捉的所述每帧图像上的所述物体图像，计算所述物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪；最后，所述数据整合模块接收所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹，将所述物体的所述物体的物体数量、移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体匹配，获得所述第一显示数据；
例如：想要对公路上行驶的自行车进行侦测分析，输入自行车搜索指令，所述识别捕捉模块可以识别所述第一视频数据中的自行车图像，所述轨迹跟踪模块可以计算场景下自行车的数量、自行车的行驶速度、自行车的行驶方向和自行车的行驶轨迹，对其进行轨迹跟踪。
上述技术方案的有益效果为：本发明可以帮助交通执法部门对场景做人流量、车流量等更精准、快捷的数据统计，可以实时侦测以采取措施来防止由于人流或车流过于密集造成的拥挤、混乱、阻塞、碰撞等事故的发生，而且数据统计的对象不是唯一的，突破了现有技术识别对象单一的局限性。
本发明实施例提供了一种视频侦测分析系统，所述识别捕捉模块基于所述物体搜索指令捕捉每帧图像上的物体图像，具体包括：
接收所述指令输入模块接收的所述物体搜索指令；
解析所述物体搜索指令，获得所述物体搜索指令对应的物体搜索对象；
将所述第一实时视频数据拆分成所述每帧图像；
采用物体候选采样框对所述每帧图像进行扫描采样，获得所述物体搜索对象对应的多个物体候选图像；
将所述物体候选图像与预设标准物体基础模型或预设标准物体运动模型进行比对，筛选出物体类似图像；
对所述物体类似图像进行边缘化提取，获得所述物体图像；
其中，将所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型进行比对，筛选出物体类似图像，具体包括：
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度为：
Figure GDA0002892287120000101
ys(x)为第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度，Selectx(a,b)为第x个候选图像的像素点坐标(a,b)的像素值，Base(a,b)为所述预设标准物体基础模型或所述预设标准物体运动模型的像素点坐标(a,b)的像素值，AND为和运算；
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度为：
Figure GDA0002892287120000102
yd(x)为第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度，XOR为异或运算；
计算第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的总体相似度为：
Figure GDA0002892287120000111
以总体相似度最大的所述预设标准物体基础模型对应的所述物体候选图像或所述预设标准物体运动模型对应的所述物体候选图像为所述物体图像。
上述技术方案的工作原理为：将所述物体图像从所述第一实时视频数据中提取出来，首先，所述识别捕捉模块将所述第一实时视频数据拆分成每帧图像；
然后，所述识别捕捉模块根据所述物体搜索对象采用物体候选采样框对所述每帧图像进行扫描采样，获得所述搜索对象对应的多个物体候选图像；
接着，所述识别捕捉模块将所述物体候选图像与所述预设标准物体基础模型和所述预设标准物体运动模型进行比对，筛选出物体类似图像；
最后，所述识别捕捉模块对所述物体类似图像进行边缘化提取，获得所述物体图像并捕捉所述每帧图像上的所述物体图像；
例如：所述第一实时视频数据为某路口的实时视频数据，视频数据中的物体有很多，所述识别捕捉模块对视频数据的每一帧图像进行扫描采样对想要搜索的物体进行定位，然后通过相似度算法确定是否为所述物体图像，确定为所述物体图像时，对其进行捕捉。
上述技术方案的有益效果为：本发明可以帮助用户对场景下任一物体进行搜索捕捉，突破了现有技术识别对象单一的局限性，而且当场景下物体数量复杂时，也可以对场景下的物体做数据统计。
本发明实施例提供了一种视频侦测分析系统，所述轨迹跟踪模块计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪，具体包括：
接收所述识别捕捉模块捕捉的所述每帧图像上的所述物体图像，所述物体图像的数量为所述物体的物体数量；
根据预设标准物体中心判断规则确定所述每帧图像上的所述物体图像的中心点；
在所述每帧图像中的第一帧图像上以所述物体图像的中心点为坐标原点建立空间直角坐标系，X轴为所述物体的宽度、Y轴为所述物体的厚度、Z轴为所述物体的高度；
将除了所述第一帧图像外的所述每帧图像上所述物体图像的中心点通过帧比较标注在所述空间直角坐标系中；
将所述中心点在所述空间直角坐标系中依次连接和矢量计算获得中心点连接线，所述中心点连接线为所述物体的所述物体移动轨迹，所述中心点连接线的矢量方向为所述物体的所述物体移动方向；
对所述每帧图像上的所述物体图像做ID标记，对所述物体进行轨迹跟踪；
其中，计算所述物体的所述物体移动速度，具体包括：
计算所述物体移动轨迹的路程：
Figure GDA0002892287120000121
L为所述物体移动轨迹的所述路程，(x1，y1，z1)为第一个所述中心点在所述空间直角坐标系中的坐标,(xn，yn，zn)为第n个所述中心点在所述空间直角坐标系中的坐标；
计算所述物体的所述物体移动速度：
Figure GDA0002892287120000122
v为所述物体的所述物体移动速度，n-1为n个所述中心点有n-1个时间间隔，T为预设每帧图像间隔时间。
上述技术方案的工作原理为：首先，所述轨迹跟踪模块接收所述识别捕捉模块发送的所述每帧图像上的所述物体图像，所述物体图像的数量为所述物体的物体数量；
然后，所述轨迹跟踪模块根据预设标准物体中心规则确定所述每帧图像上的所述物体图像的中心点；
接着，所述轨迹跟踪模块在所述每帧图像中的第一帧图像上以所述物体图像的中心点为坐标原点建立空间直角坐标系，X轴为所述物体的宽度、Y轴为所述物体的厚度、Z轴为所述物体的高度，将除了所述第一帧图像外的所述每帧图像上所述物体图像的中心点通过帧比较标注在所述空间直角坐标系中，将所述中心点在所述空间直角坐标系中依次连接和矢量计算获得中心点连接线，所述中心点连接线为所述物体的所述物体移动轨迹，所述中心点连接线的矢量方向为所述物体的所述物体移动方向；
最后，对所述每帧图像上的所述物体图像做ID标记，对所述物体进行轨迹跟踪；
例如：可以对公路上正在行驶的车辆进行实时侦测分析，计算其行驶方向、行驶速度和行驶轨迹。
上述技术方案的有益效果为：本发明可以帮助交通执法部门等用户对场景下的车流量做更精确的数据统计，当车辆过多时，可以及时采取措施预防车辆过多造成的拥挤、混乱、阻塞、碰撞等事故的发生。
本发明实施例提供了一种视频侦测分析系统，所述数据整合模块将所述物体的所述物体的物体数量、移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据具体包括：
接收所述轨迹跟踪模块计算得出的所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹；
将所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹标注在所述每帧图像的所述物体图像上获得所述第一显示数据。
上述技术方案的工作原理为：首先，所述数据整合模块接收所述轨迹跟踪模块计算得出的所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹；
接着，所述数据整合模块将所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹标注在所述每帧图像的所述物体图像上获得所述第一显示数据。
上述技术方案的有益效果为：本发明相对传统数据统计方法，可以对场景进行实时数据统计，而且当物体数量过多且复杂时，也可以更精准地对场景进行数据统计。
本发明实施例提供了一种视频侦测分析系统，所述第一摄像设备1具有存储硬件，用于存储拍摄的所述第一实时视频数据。
上述技术方案的工作原理为：所述第一摄像设备1具有存储硬件，用于存储拍摄的所述第一实时视频数据；当需要对所述第一实时视频数据进行回放时，侦测分析服务器2可以直接通过所述无线通讯模块获取回放内容。
上述技术方案的有益效果为：本发明提供了数据再分析的途径，提高了数据统计的可靠性和精准度，相比传统数据统计方法，能够更精准地获取场景下的数据统计信息。
本发明实施例提供了一种视频侦测分析系统，还包括：
第二摄像设备，用于采集第二实时视频数据，通过所述无线通讯模块与所述侦测分析服务器2通讯连接；
无人机装置，所述第二摄像设备固定设置在所述无人机装置上；
第二显示设备，与所述侦测分析服务器2电连接；
所述侦测分析服务器2通过所述无线通讯模块获得所述第二摄像设备采集的所述第二实时视频数据，所述侦测分析服务器2对所述第二实时视频数据进行处理获得所述第二显示数据并将所述第二显示数据发送到所述第二显示设备，所述第二显示设备显示所述第二显示数据。
上述技术方案的工作原理为：在无人机装置上安装摄像设备，可以对更多场景、区域进行侦测分析；
例如：想要侦测分析某湖面上的垃圾数量数据，只需控制带有摄像设备的无人机装置飞行到湖面上空，摄像设备就可以采集湖面实时视频数据，侦测分析服务器2对实时视频数据进行处理获得垃圾数量数据，显示设备可以直接显示。
上述技术方案的有益效果为：本发明可以与无人机装置结合，可以对更多场景、区域进行侦测分析，还可以帮助交通执法部门、商场店家等用户对任一场景做人流量、车流量等更精准、快捷的数据统计，而且数据统计的对象不是唯一的，突破了现有技术识别对象单一的局限性。
本发明实施例提供了一种视频侦测分析系统，还包括：
第三摄像设备，用于采集第三实时视频数据，通过所述无线通讯模块与所述侦测分析服务器2通讯连接；
垃圾处理平台，所述第三摄像设备固定设置在所述垃圾处理平台上；
垃圾搜集装置，固定设置在所述垃圾处理平台上，通过所述无线通讯模块与所述侦测分析服务器2通讯连接；
垃圾分类存储装置，固定设置在所述垃圾处理平台上；
第三显示设备，与所述侦测分析服务器2电连接；
所述侦测分析服务器2通过所述无线通讯模块获得所述第三摄像设备采集的所述第三实时视频数据，所述侦测分析服务器2对所述第三实时视频数据进行处理获得所述第三显示数据并将所述第三显示数据发送到所述第三显示设备，所述第三显示设备显示所述第三显示数据；
所述侦测分析服务器2接收垃圾搜集指令；
所述侦测分析服务器2解析所述垃圾搜集指令，获得垃圾搜集对象；
所述侦测分析服务器2通过所述无线通讯模块控制所述垃圾搜集装置对所述垃圾搜集对象对应的垃圾进行垃圾搜集；
所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置；
其中，所述侦测分析服务器2对所述第三实时视频数据进行处理获得所述第三显示数据，具体包括：
所述指令输入模块接收垃圾搜索指令包括：可回收物搜索指令、厨余垃圾搜索指令、有害垃圾搜索指令和其它垃圾搜索指令；
所述识别捕捉模块捕捉所述每帧图像上的垃圾图像；
所述轨迹跟踪模块计算所述垃圾的垃圾数量、垃圾移动方向、垃圾移动速度和垃圾移动轨迹，对所述垃圾进行轨迹跟踪；
所述数据整合模块将所述垃圾的所述垃圾的垃圾数量、移动方向、所述垃圾移动速度和所述垃圾移动轨迹整合起来并与所述垃圾关联，获得所述第三显示数据；
其中，所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置，具体包括：
所述垃圾分类存储装置包括：可回收物存储装置、厨余垃圾存储装置、有害垃圾存储装置和其它垃圾存储装置；
所述垃圾搜集装置获取所述指令输入模块接收的所述垃圾对应所述垃圾搜集指令；
所述垃圾搜集装置根据所述垃圾搜集指令将所述垃圾传送的所述垃圾搜集指令对应的所述垃圾分类存储装置。
上述技术方案的工作原理为：在垃圾处理平台上安装摄像设备，可以远程对场景进行侦测分析，获取场景的垃圾分布数据，通过无线通讯模块控制垃圾搜集装置对垃圾进行处理。
例如：某垃圾处理平台安装在河道下游某闸口，垃圾处理平台上摄像设备可以采集河面实时视频数据，侦测分析服务器2对河面实时视频数据进行处理获得垃圾分布图像数据；工作人员可以通过侦测分析服务器2向垃圾搜集装置发送垃圾搜集指令，对垃圾搜集装置进行远程控制，从而对河面垃圾进行处理。
上述技术方案的有益效果为：本发明与垃圾处理平台结合，可以远程对河道垃圾进行搜集处理，还可以帮助交通执法部门、商场店家等用户对场景做人流量、车流量等更精准、快捷的数据统计，而且数据统计的对象不是唯一的，突破了现有技术识别对象单一的局限性。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (7)

1.一种视频侦测分析系统，其特征在于，包括：
第一摄像设备，用于采集第一实时视频数据；
侦测分析服务器，通过无线通讯模块与所述第一摄像设备通讯连接；
第一显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第一摄像设备采集的所述第一实时视频数据，所述侦测分析服务器对所述第一实时视频数据进行处理获得第一显示数据并将所述第一显示数据发送到所述第一显示设备，所述第一显示设备显示所述第一显示数据；
所述侦测分析服务器包括：
指令输入模块，用于接收物体搜索指令；
识别捕捉模块，基于所述物体搜索指令捕捉每帧图像上的物体图像；
轨迹跟踪模块，用于计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪；
数据整合模块，用于将所述物体的所述物体数量、所述移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据；
第三摄像设备，用于采集第三实时视频数据，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
垃圾处理平台，所述第三摄像设备固定设置在所述垃圾处理平台上；
垃圾搜集装置，固定设置在所述垃圾处理平台上，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
垃圾分类存储装置，固定设置在所述垃圾处理平台上；
第三显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第三摄像设备采集的所述第三实时视频数据，所述侦测分析服务器对所述第三实时视频数据进行处理获得第三显示数据并将所述第三显示数据发送到所述第三显示设备，所述第三显示设备显示所述第三显示数据；
所述侦测分析服务器接收垃圾搜集指令；
所述侦测分析服务器解析所述垃圾搜集指令，获得垃圾搜集对象；
所述侦测分析服务器通过所述无线通讯模块控制所述垃圾搜集装置对所述垃圾搜集对象对应的垃圾进行垃圾搜集；
所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置；
其中，所述侦测分析服务器对所述第三实时视频数据进行处理获得所述第三显示数据，具体包括：
所述指令输入模块接收垃圾搜索指令包括：可回收物搜索指令、厨余垃圾搜索指令、有害垃圾搜索指令和其它垃圾搜索指令；
所述识别捕捉模块捕捉所述每帧图像上的垃圾图像；
所述轨迹跟踪模块计算所述垃圾的垃圾数量、垃圾移动方向、垃圾移动速度和垃圾移动轨迹，对所述垃圾进行轨迹跟踪；
所述数据整合模块将所述垃圾的所述垃圾的垃圾数量、移动方向、所述垃圾移动速度和所述垃圾移动轨迹整合起来并与所述垃圾关联，获得所述第三显示数据；
其中，所述垃圾搜集装置将所述垃圾传送到所述垃圾分类存储装置，具体包括：
所述垃圾分类存储装置包括：可回收物存储装置、厨余垃圾存储装置、有害垃圾存储装置和其它垃圾存储装置；
所述垃圾搜集装置获取所述指令输入模块接收的所述垃圾对应所述垃圾搜集指令；
所述垃圾搜集装置根据所述垃圾搜集指令将所述垃圾传送的所述垃圾搜集指令对应的所述垃圾分类存储装置。
2.如权利要求1所述的一种视频侦测分析系统，其特征在于，所述无线通讯模块包括：
2/3/4/5G通信模块、NB-loT通信模块、红外通信模块和WIFI通信模块中的一种或多种结合。
3.如权利要求1所述的一种视频侦测分析系统，其特征在于，所述识别捕捉模块基于所述物体搜索指令捕捉每帧图像上的物体图像，具体包括：
接收所述指令输入模块接收的所述物体搜索指令；
解析所述物体搜索指令，获得所述物体搜索指令对应的物体搜索对象；
将所述第一实时视频数据拆分成所述每帧图像；
采用物体候选采样框对所述每帧图像进行扫描采样，获得所述物体搜索对象对应的多个物体候选图像；
将所述物体候选图像与预设标准物体基础模型或预设标准物体运动模型进行比对，筛选出物体类似图像；
对所述物体类似图像进行边缘化提取，获得所述物体图像；
其中，将所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型进行比对，筛选出物体类似图像，具体包括：
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度为：
Figure FDA0002892287110000031
ys(x)为第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的相似度，Selectx(a,b)为第x个候选图像的像素点坐标(a,b)的像素值，Base(a,b)为所述预设标准物体基础模型或所述预设标准物体运动模型的像素点坐标(a,b)的像素值，AND为和运算；
计算第x个所述物体图候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度为：
Figure FDA0002892287110000041
yd(x)为第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的不相似度，XOR为异或运算；
计算第x个所述物体候选图像与所述预设标准物体基础模型或所述预设标准物体运动模型的总体相似度为：
Figure FDA0002892287110000042
以总体相似度最大的所述预设标准物体基础模型对应的所述物体候选图像或所述预设标准物体运动模型对应的所述物体候选图像为所述物体图像。
4.如权利要求1所述的一种视频侦测分析系统，其特征在于，所述轨迹跟踪模块计算所述物体图像上物体的物体数量、物体移动方向、物体移动速度和物体移动轨迹，对所述物体进行轨迹跟踪，具体包括：
接收所述识别捕捉模块捕捉的所述每帧图像上的所述物体图像，所述物体图像的数量为所述物体的物体数量；
根据预设标准物体中心判断规则确定所述每帧图像上的所述物体图像的中心点；
在所述每帧图像中的第一帧图像上以所述物体图像的中心点为坐标原点建立空间直角坐标系，X轴为所述物体的宽度、Y轴为所述物体的厚度、Z轴为所述物体的高度；
将除了所述第一帧图像外的所述每帧图像上所述物体图像的中心点通过帧比较标注在所述空间直角坐标系中；
将所述中心点在所述空间直角坐标系中依次连接和矢量计算获得中心点连接线，所述中心点连接线为所述物体的所述物体移动轨迹，所述中心点连接线的矢量方向为所述物体的所述物体移动方向；
对所述每帧图像上的所述物体图像做ID标记，对所述物体进行轨迹跟踪；
其中，计算所述物体的所述物体移动速度，具体包括：
计算所述物体移动轨迹的路程：
Figure FDA0002892287110000051
L为所述物体移动轨迹的所述路程，(x1，y1，z1)为第一个所述中心点在所述空间直角坐标系中的坐标,(xn，yn，zn)为第n个所述中心点在所述空间直角坐标系中的坐标；
计算所述物体的所述物体移动速度：
Figure FDA0002892287110000052
v为所述物体的所述物体移动速度，n-1为n个所述中心点有n-1个时间间隔，T为预设每帧图像间隔时间。
5.如权利要求1所述的一种视频侦测分析系统，其特征在于，所述数据整合模块将所述物体的所述物体数量、所述移动方向、所述物体移动速度和所述物体移动轨迹整合起来并与所述物体关联，获得所述第一显示数据，具体包括：
接收所述轨迹跟踪模块计算得出的所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹；
将所述物体的所述物体移动方向、所述物体移动速度和所述物体移动轨迹标注在所述每帧图像的所述物体图像上获得所述第一显示数据。
6.如权利要求1所述的一种视频侦测分析系统，其特征在于，所述第一摄像设备具有存储硬件，用于存储拍摄的所述第一实时视频数据。
7.如权利要求1所述的一种视频侦测分析系统，其特征在于，还包括：
第二摄像设备，用于采集第二实时视频数据，通过所述无线通讯模块与所述侦测分析服务器通讯连接；
无人机装置，所述第二摄像设备固定设置在所述无人机装置上；
第二显示设备，与所述侦测分析服务器电连接；
所述侦测分析服务器通过所述无线通讯模块获得所述第二摄像设备采集的所述第二实时视频数据，所述侦测分析服务器对所述第二实时视频数据进行处理获得第二显示数据并将所述第二显示数据发送到所述第二显示设备，所述第二显示设备显示所述第二显示数据。
CN202010599263.4A 2020-06-28 2020-06-28 一种视频侦测分析系统 Active CN111898434B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010599263.4A CN111898434B (zh) 2020-06-28 2020-06-28 一种视频侦测分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010599263.4A CN111898434B (zh) 2020-06-28 2020-06-28 一种视频侦测分析系统

Publications (2)

Publication Number Publication Date
CN111898434A CN111898434A (zh) 2020-11-06
CN111898434B true CN111898434B (zh) 2021-03-19

Family

ID=73207489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010599263.4A Active CN111898434B (zh) 2020-06-28 2020-06-28 一种视频侦测分析系统

Country Status (1)

Country Link
CN (1) CN111898434B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116489317B (zh) * 2023-06-08 2023-09-08 北京城建智控科技股份有限公司 基于摄像装置的物体侦测方法、系统以及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102255956A (zh) * 2011-06-24 2011-11-23 广西大学 一种基于无线的弓网状态监测系统
CN102724482A (zh) * 2012-06-18 2012-10-10 西安电子科技大学 基于gps和gis的智能视觉传感网络运动目标接力跟踪系统
CN103179359A (zh) * 2011-12-21 2013-06-26 北京新岸线移动多媒体技术有限公司 控制视频终端的方法及装置、视频终端
CN103297751A (zh) * 2013-04-23 2013-09-11 四川天翼网络服务有限公司 智慧天网视频行为分析系统
CN104462307A (zh) * 2014-11-28 2015-03-25 深圳市中兴移动通信有限公司 终端中对象的搜索方法和装置
CN105303890A (zh) * 2015-10-27 2016-02-03 重庆智韬信息技术中心 实现对周边异常行驶状态车辆的智能预警方法
CN105575125A (zh) * 2015-12-15 2016-05-11 上海微桥电子科技有限公司 一种车流视频侦测分析系统
CN106981073A (zh) * 2017-03-31 2017-07-25 中南大学 一种基于无人机的地面运动目标实时跟踪方法及系统
CN108009251A (zh) * 2017-12-01 2018-05-08 珠海市魅族科技有限公司 一种图像文件搜索方法及装置
CN108234927A (zh) * 2016-12-20 2018-06-29 腾讯科技（深圳）有限公司 视频追踪方法和系统
CN108275246A (zh) * 2018-03-12 2018-07-13 南昌简净智能科技有限公司 自动搜索并处理水面垃圾的无人船及无人船系统
US10579875B2 (en) * 2017-10-11 2020-03-03 Aquifi, Inc. Systems and methods for object identification using a three-dimensional scanning system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2032983C (en) * 1990-12-21 1999-09-07 Allan Bowman Load measuring system for refuse trucks
CN109241173A (zh) * 2017-07-10 2019-01-18 华为技术有限公司 查询追踪目标的方法及查询设备
CN108764245B (zh) * 2018-04-03 2022-04-29 南昌奇眸科技有限公司 一种提高商标图形相似度判定准确性的方法

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102255956A (zh) * 2011-06-24 2011-11-23 广西大学 一种基于无线的弓网状态监测系统
CN103179359A (zh) * 2011-12-21 2013-06-26 北京新岸线移动多媒体技术有限公司 控制视频终端的方法及装置、视频终端
CN102724482A (zh) * 2012-06-18 2012-10-10 西安电子科技大学 基于gps和gis的智能视觉传感网络运动目标接力跟踪系统
CN103297751A (zh) * 2013-04-23 2013-09-11 四川天翼网络服务有限公司 智慧天网视频行为分析系统
CN104462307A (zh) * 2014-11-28 2015-03-25 深圳市中兴移动通信有限公司 终端中对象的搜索方法和装置
CN105303890A (zh) * 2015-10-27 2016-02-03 重庆智韬信息技术中心 实现对周边异常行驶状态车辆的智能预警方法
CN105575125A (zh) * 2015-12-15 2016-05-11 上海微桥电子科技有限公司 一种车流视频侦测分析系统
CN108234927A (zh) * 2016-12-20 2018-06-29 腾讯科技（深圳）有限公司 视频追踪方法和系统
CN106981073A (zh) * 2017-03-31 2017-07-25 中南大学 一种基于无人机的地面运动目标实时跟踪方法及系统
US10579875B2 (en) * 2017-10-11 2020-03-03 Aquifi, Inc. Systems and methods for object identification using a three-dimensional scanning system
CN108009251A (zh) * 2017-12-01 2018-05-08 珠海市魅族科技有限公司 一种图像文件搜索方法及装置
CN108275246A (zh) * 2018-03-12 2018-07-13 南昌简净智能科技有限公司 自动搜索并处理水面垃圾的无人船及无人船系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Object Tracking in Videos: Approaches and Issues;Duc Phu Chau等;《Computer Vision and Pattern Recognition》;20130418;第1-11页 *
水面垃圾清理船的性能仿真分析;吴双等;《机械工程师》;20190228(第2期);第90-93页 *

Also Published As

Publication number Publication date
CN111898434A (zh) 2020-11-06

Similar Documents

Publication Publication Date Title
CN109686109B (zh) 一种基于人工智能的停车场安全监控管理系统及方法
US11631253B2 (en) People counting and tracking systems and methods
CN106998444B (zh) 一种大数据人脸监控系统
CN107305627B (zh) 一种车辆视频监控方法、服务器及系统
CN108986472B (zh) 一种掉头车辆监控方法及装置
CN111353369B (zh) 一种城市路侧停车高位视频在辅助刑侦中的应用方法及系统
KR100968433B1 (ko) 차량번호 인식정보 저장 시스템과 그 시스템을 이용한 차량 영상정보 검색 시스템
CN105069429A (zh) 一种基于大数据平台的人流量分析统计方法和系统
CN111325954B (zh) 人员走失预警方法、装置、系统及服务器
CN111814510B (zh) 一种遗留物主体检测方法及装置
CN106529401A (zh) 一种车辆反跟踪方法、装置及系统
KR100906203B1 (ko) 지리정보시스템를 이용한 차량 추적 시스템
CN111696364A (zh) 一种路侧停车管理方法
Malinovskiy et al. Video-based monitoring of pedestrian movements at signalized intersections
CN112836683A (zh) 用于便携式摄像设备的车牌识别方法、装置、设备和介质
CN114648748A (zh) 一种基于深度学习的机动车违停智能识别方法及系统
CN112163568A (zh) 基于视频检测的景区寻人系统
CN111898434B (zh) 一种视频侦测分析系统
KR101525151B1 (ko) 차량 번호판 인식 시스템 및 방법
JPH0830892A (ja) 交通監視システム及び車番認識装置付き自動車
EP3244344A1 (en) Ground object tracking system
CN116311166A (zh) 交通障碍物识别方法、装置及电子设备
CN114627420B (zh) 一种城市管理违规事件信息采集方法及系统
CN111627224A (zh) 车辆速度异常检测方法、装置、设备及存储介质
CN106919889A (zh) 对视频图像中的人头进行检测的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220525

Address after: 224000 room 109, building 2, No. 88, Xinyang Road, Xinyang Economic Zone, Yancheng City, Jiangsu Province (7)

Patentee after: Yancheng Fuji Intelligent Technology Co.,Ltd.

Address before: Rooms 1101 and 1102, North building, Yancheng international venture capital center, No.5, Renmin South Road, Yancheng City, Jiangsu Province, 224000

Patentee before: Jiangsu Baixun Technology Development Co.,Ltd.