CN113744137A - 一种螺旋矩阵式的帧差平滑处理方法 - Google Patents

一种螺旋矩阵式的帧差平滑处理方法 Download PDF

Info

Publication number
CN113744137A
CN113744137A CN202010460280.XA CN202010460280A CN113744137A CN 113744137 A CN113744137 A CN 113744137A CN 202010460280 A CN202010460280 A CN 202010460280A CN 113744137 A CN113744137 A CN 113744137A
Authority
CN
China
Prior art keywords
frame difference
frame
block
difference
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010460280.XA
Other languages
English (en)
Other versions
CN113744137B (zh
Inventor
马艳
于康龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Ingenic Technology Co ltd
Original Assignee
Hefei Ingenic Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Ingenic Technology Co ltd filed Critical Hefei Ingenic Technology Co ltd
Priority to CN202010460280.XA priority Critical patent/CN113744137B/zh
Priority claimed from CN202010460280.XA external-priority patent/CN113744137B/zh
Publication of CN113744137A publication Critical patent/CN113744137A/zh
Application granted granted Critical
Publication of CN113744137B publication Critical patent/CN113744137B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/223Analysis of motion using block-matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请在现有技术方法的基础上,提出了一种螺旋矩阵式的帧差平滑处理方法。通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度。所述方法包括以下步骤:S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量;S2.计算分块帧差:将每帧图像等分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化;S3.分块帧差重排序;S4.缓存分块帧差;S5.帧差平滑。

Description

一种螺旋矩阵式的帧差平滑处理方法
技术领域
本发明涉及图像处理技术领域,特别涉及一种螺旋矩阵式的帧差平滑处理方法。
背景技术
目前,车内监控画面主要基于背景帧差来实现遮挡检测,由于车内环境复杂,车内监控画面的背景帧差易受乘车人员增减、活动,车窗外光线、景物变化等因素影响,而且车辆行驶过程中,不可避免的产生画面抖动;这些都会导致背景帧差一直处于波动状态,给遮挡检测带来了很大的不确定性。因此,统计某一时间段内的帧差,通过加权平均的方法进行平滑是一种有效的排除干扰的方法。
然而,现有技术中存在以下的缺陷:某一帧图像的全局帧差受环境等因素影响波动大,对遮挡检测结果干扰大。
发明内容
为了解决上述问题,本发明的目的在于:本申请在现有技术方法的基础上,提出了一种螺旋矩阵式的帧差平滑处理方法。通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度。
具体地,本发明提供一种螺旋矩阵式的帧差平滑处理方法,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
将每帧图像分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
Figure BDA0002510692650000021
其中,k=1,2,3……16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
当i=i0时,原排序为:
Figure BDA0002510692650000022
对应16个分块区域按照从上至下、从左至右的规则进行帧差数值排序;
按螺旋矩阵对
Figure BDA0002510692650000023
进行分块帧差重排序,其结果如公式(2)所示:
公式(2):
Figure BDA0002510692650000024
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差
Figure BDA0002510692650000025
然后在向量尾部存入当前帧图像的分块帧差
Figure BDA0002510692650000026
否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:
Figure BDA0002510692650000027
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
Figure BDA0002510692650000031
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
Figure BDA0002510692650000032
其中:w为权重向量,满足
Figure BDA0002510692650000033
所述将每帧图像分成16区域为等分;也可以不等分,即进行不规则的区域划分。
S3中分块帧差重排序的结果,具体排序方式为:在数组中按照螺旋形态从16块的中间按序号大小依次排列,从1开始,在所述帧差数值排序中找到对应位置的帧差数值依次放到向量
Figure BDA0002510692650000034
中。
S4.2,当缓存向量满存时,其缓存的16帧分块帧差可表示为:
Figure BDA0002510692650000035
其中
Figure BDA0002510692650000036
即:D[i0][1]=d7,D[i0][2]=d11,······,D[i0][16]=d1,其他时刻同理亦然。
S5.2中,考虑到越接近当前帧时刻的帧差权重越大,因此本方法中设定权重函数条件需要满足公式(5);
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
由此,本申请的优势在于:通过对某一时间段内的局部帧差进行滑动平均,可以减小全局帧差波动干扰,增加检测准确度,提高了车内监控画面检测的确定性,方法简单。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。
图1是本发明方法中将每帧图像等分成16区域的示意图。
图2是本发明方法中数组中按照螺旋形态按序号依次排列的示意图。
图3是本发明方法中每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图。
图4是本发明方法中将每帧图像不等分成16区域的示意图。
图5是本发明方法的流程示意图。
具体实施方式
为了能够更清楚地理解本发明的技术内容及优点,现结合附图对本发明进行进一步的详细说明。
如图5所示,本发明涉及一种螺旋矩阵式的帧差平滑处理方法,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
按图1所示,将每帧图像等分成16区域(也可以不等分,即进行不规则的区域划分,如图4所示),分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
Figure BDA0002510692650000051
其中,k=1,2,3...16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
当i=i0时,原排序为:
Figure BDA0002510692650000052
对应16个分块区域按照从上至下、从左至右的规则进行帧差数值排序;
按螺旋矩阵对
Figure BDA0002510692650000053
进行分块帧差重排序,其结果如公式(2)所示:
公式(2):
Figure BDA0002510692650000054
在附图2的数组中按照序号大小,从1开始,在附图1中的找到对应位置的帧差数值依次放到向量中;
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差
Figure BDA0002510692650000055
然后在向量尾部存入当前帧图像的分块帧差
Figure BDA0002510692650000056
否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:
Figure BDA0002510692650000057
其中
Figure BDA0002510692650000058
即:D[i0][1]=d7,D[i0][2]=d11,······,D[i0][16]=d1,其他时刻同理亦然;
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
Figure BDA0002510692650000061
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
Figure BDA0002510692650000062
其中:w为权重向量,满足
Figure BDA0002510692650000063
考虑到越接近当前帧时刻的帧差权重越大,因此本方法中设定权重函数条件需要满足公式(5);
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
如图3所示,每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图。其中帧差的组合过程可以认为是步骤5中帧差平滑处理过程,图3中白色区域表示权重为0,灰色区域表示图像帧中在组合帧差图时的有效区域;如果采用等权重帧差平滑,可认为灰色部分所有权重相等,如果采用不等权重平滑,则灰色的深浅表示权重的大小,颜色越深,表示权重越大,也就是缓存中越接近当前时刻的图像帧。可以看出,采用螺旋矩阵式的帧差平滑方法,不仅在时间轴上对图像帧差进行了滑动平均处理,而且在图像平面内对帧差也进行了一次区域滑动平均。
如图3所示,如果采用不等权重平滑,各区域的帧差重要性为:例如汽车位置中:右侧司机>左侧副驾>四周区域,且缓存中距离当前时刻越久的图像帧差重要性越低,即当前帧图像的右侧司机区域帧差权重越大,按螺旋矩阵式权重慢慢降低,至缓存第一帧(距离当前帧的前第15帧图像)左上角边缘区域帧差权重越小。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述方法包括以下步骤:
S1.参数初始化,包括:背景初始化,创建分块帧差缓存空向量D;
S2.计算分块帧差:
将每帧图像分成16区域,分别统计各个区域内帧差图像中非零像素点的总数,即各个分块的帧差特征,并进行归一化,计算方法如公式(1)所示;
Figure FDA0002510692640000011
其中,k=1,2,3······16;k表示区域号,dk表示区域k的归一化分块帧差特征;
S3.分块帧差重排序:
当i=i0时,原排序为:
Figure FDA0002510692640000012
对应16个分块区域按照从上至下、从左至右的规则进行帧差数值排序;
按螺旋矩阵对
Figure FDA0002510692640000013
进行分块帧差重排序,其结果如公式(2)所示:
公式(2):
Figure FDA0002510692640000014
S4.缓存分块帧差:
S4.1求分块帧差缓存向量大小,即缓存了多少帧的分块帧差;
S4.2如果分块帧差缓存向量大小大于或等于16,表示缓存已满,需要先删除向量头部存储的分块帧差
Figure FDA0002510692640000015
然后在向量尾部存入当前帧图像的分块帧差
Figure FDA0002510692640000021
否则,表示缓存未满,直接在尾部存入当前帧图像的分块帧差;当缓存向量满存时,其缓存的16帧分块帧差可表示为:
Figure FDA0002510692640000022
S5.帧差平滑:
S5.1等权重平滑:
按照公式(3)计算缓存的16帧帧差等权重均值;
Figure FDA0002510692640000023
其中:D[it][16-t]表示第it帧图像第16-t块螺旋矩阵帧差,其中0≤t≤15;
S5.2不等权重平滑:
按照公式(4)计算缓存16帧帧差不等权重均值;
Figure FDA0002510692640000024
其中:w为权重向量,满足
Figure FDA0002510692640000025
2.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S2中所述将每帧图像分成16区域为等分;也可以不等分,即进行不规则的区域划分。
3.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S3中分块帧差重排序的结果,具体排序方式为:在数组中按照螺旋形态从16块的中间按序号大小依次排列,从1开始,在所述帧差数值排序中找到对应位置的帧差数值依次放到向量
Figure FDA0002510692640000031
中。
4.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S4.2,当缓存向量满存时,其缓存的16帧分块帧差可表示为:
Figure FDA0002510692640000032
其中
Figure FDA0002510692640000033
即:D[i0][1]=d7,D[i0][2]=d11,······,D[i0][16]=d1,其他时刻同理亦然。
5.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S5.2中,考虑到越接近当前帧时刻的帧差权重越大,因此本方法中设定权重函数条件需要满足公式(5);
w[i]<w[i+1]其中,0≤i≤14 公式(5)。
6.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述方法还包括将每一帧图像取其中某一块的帧差,16帧分别取不同区域,最后组成一个完整的帧差图,其中帧差的组合过程被认为是步骤S5中帧差平滑处理过程。
7.根据权利要求1所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,S5中如果采用不等权重平滑,缓存中距离当前时刻越久的图像帧差重要性越低,各区域的帧差重要性按螺旋矩阵式权重降低,至缓存第一帧左上角边缘区域帧差权重越小。
8.根据权利要求7所述的一种螺旋矩阵式的帧差平滑处理方法,其特征在于,所述缓存第一帧为距离当前帧的前第15帧图像。
CN202010460280.XA 2020-05-27 一种螺旋矩阵式的帧差平滑处理方法 Active CN113744137B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010460280.XA CN113744137B (zh) 2020-05-27 一种螺旋矩阵式的帧差平滑处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010460280.XA CN113744137B (zh) 2020-05-27 一种螺旋矩阵式的帧差平滑处理方法

Publications (2)

Publication Number Publication Date
CN113744137A true CN113744137A (zh) 2021-12-03
CN113744137B CN113744137B (zh) 2024-05-31

Family

ID=

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100053030A (ko) * 2008-11-12 2010-05-20 (주)인펙비전 차량 영상 검지 및 속도 산출방법
CN102917224A (zh) * 2012-10-18 2013-02-06 北京航空航天大学 基于新型十字菱形搜索及五帧背景对齐的动背景视频对象提取
CN107948465A (zh) * 2017-12-11 2018-04-20 南京行者易智能交通科技有限公司 一种检测摄像头被干扰的方法和装置
US20180150696A1 (en) * 2016-11-30 2018-05-31 Arris Enterprises Llc Detection of logos in a sequence of video frames
CN108198155A (zh) * 2017-12-27 2018-06-22 合肥君正科技有限公司 一种自适用色调映射方法及系统
CN108596169A (zh) * 2018-03-12 2018-09-28 北京建筑大学 基于视频流图像的分块信号转换与目标检测方法及装置
US20200007817A1 (en) * 2018-06-29 2020-01-02 Imagination Technologies Limited Image Component Detection
CN111160304A (zh) * 2019-12-31 2020-05-15 华中科技大学 一种局部帧差和多帧融合的地面动目标检测与跟踪方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100053030A (ko) * 2008-11-12 2010-05-20 (주)인펙비전 차량 영상 검지 및 속도 산출방법
CN102917224A (zh) * 2012-10-18 2013-02-06 北京航空航天大学 基于新型十字菱形搜索及五帧背景对齐的动背景视频对象提取
US20180150696A1 (en) * 2016-11-30 2018-05-31 Arris Enterprises Llc Detection of logos in a sequence of video frames
CN107948465A (zh) * 2017-12-11 2018-04-20 南京行者易智能交通科技有限公司 一种检测摄像头被干扰的方法和装置
CN108198155A (zh) * 2017-12-27 2018-06-22 合肥君正科技有限公司 一种自适用色调映射方法及系统
CN108596169A (zh) * 2018-03-12 2018-09-28 北京建筑大学 基于视频流图像的分块信号转换与目标检测方法及装置
US20200007817A1 (en) * 2018-06-29 2020-01-02 Imagination Technologies Limited Image Component Detection
CN111160304A (zh) * 2019-12-31 2020-05-15 华中科技大学 一种局部帧差和多帧融合的地面动目标检测与跟踪方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
HAN WEI ET AL.: "A block-wise frame difference method for real-time video motion detection", 《INTERNATIONAL JOURNAL OF ADVANCED ROBOTIC SYSTEMS》, pages 1 - 13 *
李文举;姚建国;董天祯;李海峰;何祥健;: "基于交错帧差和高斯模型的运动车辆检测", 计算机工程与设计, no. 05, pages 235 - 239 *

Similar Documents

Publication Publication Date Title
CN109101914B (zh) 一种基于多尺度的行人检测方法和装置
CN107454284B (zh) 一种视频去噪方法及计算设备
KR20210018180A (ko) 딥 뉴럴 네트워크의 정규화 방법 및 장치, 기기, 및 기억 매체
CN104867121B (zh) 基于暗原色先验和Retinex理论的图像快速去雾法
CN103218778A (zh) 一种图像和视频的处理方法及装置
CN110533046B (zh) 一种图像实例分割方法、装置、计算机可读存储介质及电子设备
JP2021536071A (ja) 障害物検出方法、知的運転制御方法、装置、媒体、及び機器
CN116309189B (zh) 一种船舶烧伤伤员紧急转运分类的图像处理方法
CN113327206B (zh) 基于人工智能的输电线智能巡检系统的图像模糊处理方法
CN113222866A (zh) 灰度图像增强方法、计算机可读介质及计算机系统
JP5927728B2 (ja) 画像霧除去装置、画像霧除去方法及び画像処理システム
US20220319145A1 (en) Image processing device, image processing method, moving device, and storage medium
CN110866872A (zh) 一种路面裂缝图片预处理智能选择方法、装置及电子设备
US20150187051A1 (en) Method and apparatus for estimating image noise
CN114937050A (zh) 绿幕抠图方法、装置及电子设备
CN108629750A (zh) 一种夜间去雾方法、终端设备及存储介质
CN113744137A (zh) 一种螺旋矩阵式的帧差平滑处理方法
CN113744137B (zh) 一种螺旋矩阵式的帧差平滑处理方法
CN111160491B (zh) 一种卷积神经网络中的池化方法和池化模型
CN113570507B (zh) 一种图像降噪方法、装置、设备及存储介质
CN111626379A (zh) 肺炎x光图像检测方法
CN111369435A (zh) 基于自适应稳定模型的彩色图像深度上采样方法及系统
CN114140757A (zh) 基于改进fcos的道路场景多类别检测方法及系统
WO2021014809A1 (ja) 画像認識評価プログラム、画像認識評価方法、評価装置及び評価システム
JP7239050B2 (ja) 画像処理装置、画像処理システム、画像処理方法、および画像処理プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant