CN113239894A - 基于群体行为分析辅助的群智感知系统 - Google Patents
基于群体行为分析辅助的群智感知系统 Download PDFInfo
- Publication number
- CN113239894A CN113239894A CN202110657825.0A CN202110657825A CN113239894A CN 113239894 A CN113239894 A CN 113239894A CN 202110657825 A CN202110657825 A CN 202110657825A CN 113239894 A CN113239894 A CN 113239894A
- Authority
- CN
- China
- Prior art keywords
- panoramic image
- crowd
- bus
- panoramic
- human body
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
- G06F18/24155—Bayesian classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
- G06V10/507—Summing image-intensity values; Histogram projection analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Probability & Statistics with Applications (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于群体行为分析辅助的群智感知系统,图像采集模块采集公交车内部的全景图像,将全景图像送入到群体HOG特征模块中,群体HOG特征模块中通过对全景图像进行灰度处理、Gamma算法去杂,划分像素块,计算像素块的梯度直方图,将像素块直方图串联获得全景图像的人体HOG特征,将公交车内人体HOG特征送入到PeD贝叶斯模块,PeD贝叶斯模块确定人群中每个人的位置区域,异常判断模块包括运动点提取单元和速度计算单元,运动点提取单元提取每个人位置区域中的目标运动点,速度计算单元根据目标运动点计算每个人的实际运动速度,通过设定的阈值判断异常,通过异常判断为公交车内异常预警和及时做出应急反应提供便利。
Description
技术领域
本发明涉及一种数据分析系统,尤其涉及一种基于群体行为分析辅助的群智感知系统。
背景技术
群智感知是结合众包思想和移动设备感知能力的一种新的数据获取模式,是物联网的一种表现形式,它的理念就是无意识协作获取数据实现感知,通过感知判断异常具有很大效用。CN201510500666.8公开了一种群智感知大数据公共安全识别方法,这种方法通过将声音、视频、图像、文本形式将大量样本进行分类并设置关联标记,利用对应的训练算法建立特征集与异常检测模型,在应用阶段检测数据与异常检测模型进行特征匹配,若匹配决策为异常,则提示安全异常。现有技术,公交车属于人员密集的公共区域,随着公交车的行驶,车内人员处于运动状态,现有的群智感知分析方法无法分析判断图像中的人群异常。
发明内容
为了解决上述现有技术存在的缺陷,本发明提出了一种基于群体行为分析辅助的群智感知系统。
本发明的技术方案是这样实现的:
一种基于群体行为分析辅助的群智感知系统,其特征在于,包括:图像采集模块、群体HOG特征模块、PeD贝叶斯模块、异常判断模块,
群体HOG特征模块接收全景图像序列,将全景图像序列中的任意全景图像转为全景灰度图, 利用Gamma算法对全景灰度图归一化,得
到有效全景灰度图,对有效全景灰度图的像素进行分组分块处
理,计算每一个像素块的梯度直方图,将图像中所有像素块的梯度直方图串联起来得到公
交车内人体HOG特征;
PeD贝叶斯模块将全景图像序列划分为训练集和验证集,训练集,验证集,通过公交车内人体HOG特征
标记训练集的全景图像中人体像素位置,利用训练集生成PeD贝叶斯模型,PeD贝叶斯
模型将验证集的全景图像中属于人体HOG特征的像素块合并,找出公交车内每个人体的
相应位置;
异常判断模块包括运动点提取单元和速度计算单元,运动点提取单元根据公交车
内每个人体的相应位置提取目标运动点,速度计算单元根据目标运动点计算每个人体的实
际运动速度,通过设定的阈值判断公交车内异常情况。
在本发明中,根据验证集的全景图像中人体目标运动点距离与实际距离的映射关
系求出实际速度,表达式为:,求得全景图像中每个人
的实际运动速度,,为全景图像中的人体个数,其中,,是相邻两张全景图像中同一人体的目标运动点,,为全景图像中公交车内
部各区域在水平、垂直方向上的实际距离,,为公交车内部区域个数,A×B
为全景图像分辨率,A 为全景图像长度值,B为全景图像宽度值,T2-T1为相邻两张全景图像
的时间差。
实施本发明的这种基于群体行为分析辅助的群智感知系统,具有以下有益效果:通过对大量图像数据感知分析,先提取公交车内人体HOG特征,然后训练PeD贝叶斯模型判断像素块,通过提取合并是人体特征的像素块找到人体位置,最后通过人体位置目标运动点距离与实际距离的映射关系计算人体实际速度,利用公交车中人体实际速度与阈值判断异常情况,为异常预警和及时做出应急反应有极大便利。
附图说明
图1为基于群体行为分析辅助的群智感知系统的系统模块图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
如图1所示基于群体行为分析辅助的群智感知系统的系统模块图,图像采集模块采集公交车内部的全景图像,将全景图像送入到群体HOG特征模块中。群体HOG特征模块中通过对全景图像进行灰度处理、Gamma算法去除光线和阴影杂质,将全景图像划分像素块,计算像素块的梯度直方图,将像素块直方图串联获得全景图的人体HOG特征,将公交车内人体HOG特征送入到PeD贝叶斯模块。通过PeD贝叶斯模块确定人群中每个人的位置区域。异常判断模块包括运动点提取单元和速度计算单元,运动点提取单元提取每个人位置区域中的目标运动点,速度计算单元根据目标运动点计算每个人的实际运动速度,通过设定的阈值判断异常。
群体HOG特征模块接收全景图像序列,通过像素三色彩通道平均值法
将全景图像转为全景灰度图像,对于全景图像的每一个像素,经过下式的处理,可将像素转换为灰度像素:,对全景
图像的所有像素都进行这样的操作,得到像素灰度化后的全景灰度图像,利用Gamma算法对全景灰度图像归一化,通过Gamma算法归一化调
节可以去除全景灰度图像中存在的光线、阴影问题。Gamma算法表达式为: ,为Gamma系数,当时,在低灰度值区域内,动态范围较
大,图像对比度增强;在较高的灰度值区域内,动态范围变小,图像整体的灰度值变大;而当时,图像低灰度值区域的动态范围变小,高灰度值区域的动态范围变大,降低了低灰
度值区域的对比度。通过Gamma算法调整图像灰度值区域和对比度有利于对图像中阴影、暗
淡部分进行分析,以去除图像中存在的光线、阴影杂质,通过调整,得到有效全景灰度图,对有效全景灰度图的像素进行分组分块处理,每4*4 个像素为
一个像素组,每4*4个像素组为一个像素块,计算每一个像素块的梯度直方图,将图像中所
有像素块的梯度直方图串联起来就得到了全景HOG特征,全景HOG特征即为公交车内人体
HOG特征,将全景HOG特征送入到PeD贝叶斯模块进行人群标记检测。
PeD贝叶斯模块接收公交车内人体HOG特征,贝叶斯模型是一种数学模型,其通常
用来解决例如先验概率、后验概率、分类问题等。例如对于事件a和事件b而言,已知事件b发
生了,事件a不确定有没有发生,求此时事件a发生的概率,可以通过贝叶斯来计算求得,基
于这个模型思路,我们提出了PeD贝叶斯模型。通过PeD贝叶斯模型可以实现对图像中人体
特征像素块的分割和位置确定,对于人体特征像素块和待验像素块而言,待验像素块为两
类,可能是人体特征像素块,可能不是,通过公交车内人体HOG特征标记已知人体特征像素
块,求待验像素块属于人体特征像素块的概率,具体为:将全景图像序列划分为训练集和验证集,通过群体HOG特征模块获
得的人体HOG特征标记训练集中人体特征像素块位置,验证集中待验像素块特征表示
为,求该待验像素块为人体特征像素块的概率,则可以由下式计算求得:
其中,表示为像素块个数,表示的是全景图像中人体特征像素块的概
率,表示已知全景图像中人体特征像素块情况下第个待验像素块
为人体像素块的概率即后验概率,表示已知第个待验像素块是什
么像素块的情况下为人体像素块的概率即先验概率。通过训练集训练PeD贝叶斯模型参
数生成PeD贝叶斯模型,训练好的PeD贝叶斯模型对验证集的像素块进行概率判断之后,
将属于人体像素块的各个像素块进行合并,可以找出公交车内每个人的相应位置。
异常判断模块中运动点提取单元根据公交车内每个人的相应位置提取每个人位
置区域中的目标运动点,公交车异常出现常常伴随着公交车内人体速度的变化,速度计算
单元根据目标运动点计算每个人的实际运动速度,通过计算每个人的实际运动速度与阈值
判断异常,具体为计算验证集相邻两张全景图像,此时相邻两张全景图像的时间差是
6s,相邻两张全景图像同一人体目标运动点分别为,,因为通过图像坐标
计算人体的运动速度和实际场景中的速度是不一致的,速度由距离算出,所以需要找出图
像中人体目标运动点距离与实际距离的映射关系。首先测量全景图像中在公交车内部各区
域如把手、座位、握杆在水平、垂直方向上的实际距离,,,为公交车
内部区域个数,全景图像分辨率为A×B,一般为,A 为全景图像长度值,B为全
景图像宽度值,人体目标运动点在水平方向的实际距离为 ,垂直方
向的实际距离,此时人体目标运动点速度表示为,T2-
T1在本实施例中数值为相邻两张图像的时间差6,此时,计算全景图像每一个人体目标运动点速度,,为全景图像人体个数,通过设定的阈值判断公交车内情况,为公交车速度,信号为表示的是异常情况。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改,等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.一种基于群体行为分析辅助的群智感知系统,其特征在于,包括,图像采集模块、群体HOG特征模块、PeD贝叶斯模块、异常判断模块,
群体HOG特征模块接收全景图像序列,将全景图像序列中的任意全景图像
转为全景灰度图, 利用Gamma算法对全景灰度图归一化,得到有效
全景灰度图,对有效全景灰度图的像素进行分组分块处理,计算
每一个像素块的梯度直方图,将所有像素块的梯度直方图串联起来得到公交车内人体HOG
特征;
PeD贝叶斯模块将全景图像序列划分为训练集和验证集,训练集,验证集,通过公交车内人体HOG特征
标记训练集的全景图像中人体像素位置,利用训练集生成PeD贝叶斯模型,PeD贝叶斯
模型将验证集的全景图像中属于人体HOG特征的像素块合并,确定公交车内每个人体的
相应位置;
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110657825.0A CN113239894A (zh) | 2021-06-15 | 2021-06-15 | 基于群体行为分析辅助的群智感知系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110657825.0A CN113239894A (zh) | 2021-06-15 | 2021-06-15 | 基于群体行为分析辅助的群智感知系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113239894A true CN113239894A (zh) | 2021-08-10 |
Family
ID=77139845
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110657825.0A Withdrawn CN113239894A (zh) | 2021-06-15 | 2021-06-15 | 基于群体行为分析辅助的群智感知系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113239894A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114429580A (zh) * | 2021-12-16 | 2022-05-03 | 哈尔滨理工大学 | 一种基于多模态轨迹的移动群智感知覆盖优化方法 |
-
2021
- 2021-06-15 CN CN202110657825.0A patent/CN113239894A/zh not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114429580A (zh) * | 2021-12-16 | 2022-05-03 | 哈尔滨理工大学 | 一种基于多模态轨迹的移动群智感知覆盖优化方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2959454B1 (en) | Method, system and software module for foreground extraction | |
CN109636771B (zh) | 基于图像处理的飞行目标检测方法及系统 | |
CN112800860B (zh) | 一种事件相机和视觉相机协同的高速抛撒物检测方法和系统 | |
CN105894701B (zh) | 输电线路防外破大型施工车辆的识别报警方法 | |
CN109918971B (zh) | 监控视频中人数检测方法及装置 | |
CN111553214B (zh) | 一种驾驶员吸烟行为检测方法及系统 | |
CN111626170B (zh) | 一种铁路边坡落石侵限检测的图像识别方法 | |
CN115691026A (zh) | 一种森林防火的智能预警监控管理方法 | |
CN106886778B (zh) | 一种监控场景下车牌字符分割与识别方法 | |
Bedruz et al. | Real-time vehicle detection and tracking using a mean-shift based blob analysis and tracking approach | |
US9904868B2 (en) | Visual attention detector and visual attention detection method | |
CN107563985B (zh) | 一种红外图像空中运动目标的检测方法 | |
KR102391853B1 (ko) | 영상 정보 처리 시스템 및 방법 | |
CN116309607B (zh) | 基于机器视觉的船艇式智能水上救援平台 | |
CN111626169A (zh) | 一种基于图像的铁路危险落石尺寸判断方法 | |
CN107247934A (zh) | 一种基于快速特征点定位的全天候哈欠检测方法及系统 | |
WO2019088333A1 (ko) | 깊이 맵 정보 기반의 인체 행위 인지 방법 및 그 장치 | |
CN114445661B (zh) | 一种基于边缘计算的嵌入式图像识别方法 | |
CN115166717A (zh) | 一种融合毫米波雷达与单目相机的轻量级目标跟踪方法 | |
CN113239894A (zh) | 基于群体行为分析辅助的群智感知系统 | |
CN106372566A (zh) | 一种基于数字标牌紧急疏散系统及方法 | |
CN109325426B (zh) | 一种基于三正交平面时空特征的黑烟车检测方法 | |
CN112329858B (zh) | 一种铁路动车防松铁丝折断故障图像识别方法 | |
CN116110006B (zh) | 一种用于智慧旅游系统的景区游客异常行为识别方法 | |
CN116228756B (zh) | 一种自动驾驶中相机坏点的检测方法及检测系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210730 |