CN113744137A - 一种螺旋矩阵式的帧差平滑处理方法 - Google Patents
一种螺旋矩阵式的帧差平滑处理方法 Download PDFInfo
- Publication number
- CN113744137A CN113744137A CN202010460280.XA CN202010460280A CN113744137A CN 113744137 A CN113744137 A CN 113744137A CN 202010460280 A CN202010460280 A CN 202010460280A CN 113744137 A CN113744137 A CN 113744137A
- Authority
- CN
- China
- Prior art keywords
- frame difference
- frame
- block
- difference
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000009499 grossing Methods 0.000 title claims abstract description 30
- 239000011159 matrix material Substances 0.000 title claims abstract description 18
- 239000000872 buffer Substances 0.000 claims abstract description 28
- 238000010606 normalization Methods 0.000 claims abstract description 4
- 230000008569 process Effects 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 claims description 3
- 230000001788 irregular Effects 0.000 claims description 3
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 230000003247 decreasing effect Effects 0.000 claims 1
- 238000001514 detection method Methods 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请在现有技术方法的基础上,提出了一种螺旋矩阵式的帧差平滑处理方法。通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度。所述方法包括以下步骤:S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量;S2.计算分块帧差:将每帧图像等分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化;S3.分块帧差重排序;S4.缓存分块帧差;S5.帧差平滑。
Description
技术领域
本发明涉及图像处理技术领域,特别涉及一种螺旋矩阵式的帧差平滑处理方法。
背景技术
目前,车内监控画面主要基于背景帧差来实现遮挡检测,由于车内环境复杂,车内监控画面的背景帧差易受乘车人员增减、活动,车窗外光线、景物变化等因素影响,而且车辆行驶过程中,不可避免的产生画面抖动;这些都会导致背景帧差一直处于波动状态,给遮挡检测带来了很大的不确定性。因此,统计某一时间段内的帧差,通过加权平均的方法进行平滑是一种有效的排除干扰的方法。
然而,现有技术中存在以下的缺陷:某一帧图像的全局帧差受环境等因素影响波动大,对遮挡检测结果干扰大。
发明内容
为了解决上述问题,本发明的目的在于:本申请在现有技术方法的基础上,提出了一种螺旋矩阵式的帧差平滑处理方法。通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度。
具体地,本发明提供一种螺旋矩阵式的帧差平滑处理方法,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
将每帧图像分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
其中,k=1,2,3……16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
公式(2):
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差然后在向量尾部存入当前帧图像的分块帧差否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
所述将每帧图像分成16区域为等分;也可以不等分,即进行不规则的区域划分。
S5.2中,考虑到越接近当前帧时刻的帧差权重越大,因此本方法中设定权重函数条件需要满足公式(5);
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
由此,本申请的优势在于:通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度,提高了车内监控画面检测的确定性,方法简单。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。
图1是本发明方法中将每帧图像等分成16区域的示意图。
图2是本发明方法中数组中按照螺旋形态按序号依次排列的示意图。
图3是本发明方法中每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图。
图4是本发明方法中将每帧图像不等分成16区域的示意图。
图5是本发明方法的流程示意图。
具体实施方式
为了能够更清楚地理解本发明的技术内容及优点,现结合附图对本发明进行进一步的详细说明。
如图5所示,本发明涉及一种螺旋矩阵式的帧差平滑处理方法,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
按图1所示,将每帧图像等分成16区域(也可以不等分,即进行不规则的区域划分,如图4所示),分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
其中,k=1,2,3...16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
公式(2):
在附图2的数组中按照序号大小,从1开始,在附图1中的找到对应位置的帧差数值依次放到向量中;
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差然后在向量尾部存入当前帧图像的分块帧差否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:其中即:D[i0][1]=d7,D[i0][2]=d11,······,D[i0][16]=d1,其他时刻同理亦然;
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
如图3所示,每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图。其中帧差的组合过程可以认为是步骤5中帧差平滑处理过程,图3中白色区域表示权重为0,灰色区域表示图像帧中在组合帧差图时的有效区域;如果采用等权重帧差平滑,可认为灰色部分所有权重相等,如果采用不等权重平滑,则灰色的深浅表示权重的大小,颜色越深,表示权重越大,也就是缓存中越接近当前时刻的图像帧。可以看出,采用螺旋矩阵式的帧差平滑方法,不仅在时间轴上对图像帧差进行了滑动平均处理,而且在图像平面内对帧差也进行了一次区域滑动平均。
如图3所示,如果采用不等权重平滑,各区域的帧差重要性为:例如汽车位置中:右侧司机>左侧副驾>四周区域,且缓存中距离当前时刻越久的图像帧差重要性越低,即当前帧图像的右侧司机区域帧差权重越大,按螺旋矩阵式权重慢慢降低,至缓存第一帧(距离当前帧的前第15帧图像)左上角边缘区域帧差权重越小。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
将每帧图像分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
其中,k=1,2,3······16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
公式(2):
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差然后在向量尾部存入当前帧图像的分块帧差否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
2.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S2中所述将每帧图像分成16区域为等分;也可以不等分,即进行不规则的区域划分。
5.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S5.2中,考虑到越接近当前帧时刻的帧差权重越大,因此本方法中设定权重函数条件需要满足公式(5);
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
6.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述方法还包括将每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图,其中帧差的组合过程被认为是步骤S5中帧差平滑处理过程。
7.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S5中如果采用不等权重平滑,缓存中距离当前时刻越久的图像帧差重要性越低,各区域的帧差重要性按螺旋矩阵式权重降低,至缓存第一帧左上角边缘区域帧差权重越小。
8.根据权利要求7所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述缓存第一帧为距离当前帧的前第15帧图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010460280.XA CN113744137B (zh) | 2020-05-27 | 2020-05-27 | 一种螺旋矩阵式的帧差平滑处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010460280.XA CN113744137B (zh) | 2020-05-27 | 2020-05-27 | 一种螺旋矩阵式的帧差平滑处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113744137A true CN113744137A (zh) | 2021-12-03 |
CN113744137B CN113744137B (zh) | 2024-05-31 |
Family
ID=78723676
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010460280.XA Active CN113744137B (zh) | 2020-05-27 | 2020-05-27 | 一种螺旋矩阵式的帧差平滑处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113744137B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100053030A (ko) * | 2008-11-12 | 2010-05-20 | (주)인펙비전 | 차량 영상 검지 및 속도 산출방법 |
CN102917224A (zh) * | 2012-10-18 | 2013-02-06 | 北京航空航天大学 | 基于新型十字菱形搜索及五帧背景对齐的动背景视频对象提取 |
CN107948465A (zh) * | 2017-12-11 | 2018-04-20 | 南京行者易智能交通科技有限公司 | 一种检测摄像头被干扰的方法和装置 |
US20180150696A1 (en) * | 2016-11-30 | 2018-05-31 | Arris Enterprises Llc | Detection of logos in a sequence of video frames |
CN108198155A (zh) * | 2017-12-27 | 2018-06-22 | 合肥君正科技有限公司 | 一种自适用色调映射方法及系统 |
CN108596169A (zh) * | 2018-03-12 | 2018-09-28 | 北京建筑大学 | 基于视频流图像的分块信号转换与目标检测方法及装置 |
US20200007817A1 (en) * | 2018-06-29 | 2020-01-02 | Imagination Technologies Limited | Image Component Detection |
CN111160304A (zh) * | 2019-12-31 | 2020-05-15 | 华中科技大学 | 一种局部帧差和多帧融合的地面动目标检测与跟踪方法 |
-
2020
- 2020-05-27 CN CN202010460280.XA patent/CN113744137B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100053030A (ko) * | 2008-11-12 | 2010-05-20 | (주)인펙비전 | 차량 영상 검지 및 속도 산출방법 |
CN102917224A (zh) * | 2012-10-18 | 2013-02-06 | 北京航空航天大学 | 基于新型十字菱形搜索及五帧背景对齐的动背景视频对象提取 |
US20180150696A1 (en) * | 2016-11-30 | 2018-05-31 | Arris Enterprises Llc | Detection of logos in a sequence of video frames |
CN107948465A (zh) * | 2017-12-11 | 2018-04-20 | 南京行者易智能交通科技有限公司 | 一种检测摄像头被干扰的方法和装置 |
CN108198155A (zh) * | 2017-12-27 | 2018-06-22 | 合肥君正科技有限公司 | 一种自适用色调映射方法及系统 |
CN108596169A (zh) * | 2018-03-12 | 2018-09-28 | 北京建筑大学 | 基于视频流图像的分块信号转换与目标检测方法及装置 |
US20200007817A1 (en) * | 2018-06-29 | 2020-01-02 | Imagination Technologies Limited | Image Component Detection |
CN111160304A (zh) * | 2019-12-31 | 2020-05-15 | 华中科技大学 | 一种局部帧差和多帧融合的地面动目标检测与跟踪方法 |
Non-Patent Citations (2)
Title |
---|
HAN WEI ET AL.: "A block-wise frame difference method for real-time video motion detection", 《INTERNATIONAL JOURNAL OF ADVANCED ROBOTIC SYSTEMS》, pages 1 - 13 * |
李文举;姚建国;董天祯;李海峰;何祥健;: "基于交错帧差和高斯模型的运动车辆检测", 计算机工程与设计, no. 05, pages 235 - 239 * |
Also Published As
Publication number | Publication date |
---|---|
CN113744137B (zh) | 2024-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103854259B (zh) | 图像处理设备以及处理图像的方法 | |
CN103186887B (zh) | 图像除雾装置和图像除雾方法 | |
KR20210018180A (ko) | 딥 뉴럴 네트워크의 정규화 방법 및 장치, 기기, 및 기억 매체 | |
CN104867121B (zh) | 基于暗原色先验和Retinex理论的图像快速去雾法 | |
CN103218778A (zh) | 一种图像和视频的处理方法及装置 | |
CN110533046B (zh) | 一种图像实例分割方法、装置、计算机可读存储介质及电子设备 | |
JP2021536071A (ja) | 障害物検出方法、知的運転制御方法、装置、媒体、及び機器 | |
EP4068220A1 (en) | Image processing device, image processing method, moving device, and storage medium | |
CN116309189B (zh) | 一种船舶烧伤伤员紧急转运分类的图像处理方法 | |
CN113222866A (zh) | 灰度图像增强方法、计算机可读介质及计算机系统 | |
CN110866872A (zh) | 一种路面裂缝图片预处理智能选择方法、装置及电子设备 | |
JP5927728B2 (ja) | 画像霧除去装置、画像霧除去方法及び画像処理システム | |
CN114937050A (zh) | 绿幕抠图方法、装置及电子设备 | |
CN113327206A (zh) | 基于人工智能的输电线智能巡检系统的图像模糊处理方法 | |
CN111626379A (zh) | 肺炎x光图像检测方法 | |
CN116883868A (zh) | 基于自适应图像去雾的无人机智能巡航检测方法 | |
CN108629750A (zh) | 一种夜间去雾方法、终端设备及存储介质 | |
CN107810520B (zh) | 图像处理装置和方法 | |
CN113744137A (zh) | 一种螺旋矩阵式的帧差平滑处理方法 | |
CN111160491B (zh) | 一种卷积神经网络中的池化方法和池化模型 | |
CN113570507B (zh) | 一种图像降噪方法、装置、设备及存储介质 | |
CN111369435A (zh) | 基于自适应稳定模型的彩色图像深度上采样方法及系统 | |
CN114140757A (zh) | 基于改进fcos的道路场景多类别检测方法及系统 | |
WO2021014809A1 (ja) | 画像認識評価プログラム、画像認識評価方法、評価装置及び評価システム | |
WO2021161513A1 (ja) | 画像処理装置、画像処理システム、画像処理方法、および画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |