CN103475802A - 一种电子稳像方法 - Google Patents

一种电子稳像方法 Download PDF

Info

Publication number
CN103475802A
CN103475802A CN2013104461040A CN201310446104A CN103475802A CN 103475802 A CN103475802 A CN 103475802A CN 2013104461040 A CN2013104461040 A CN 2013104461040A CN 201310446104 A CN201310446104 A CN 201310446104A CN 103475802 A CN103475802 A CN 103475802A
Authority
CN
China
Prior art keywords
video image
subregion
line segment
real
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013104461040A
Other languages
English (en)
Other versions
CN103475802B (zh
Inventor
程德强
张剑英
安铎
郭保文
王仕琛
李硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jining Antai Mine Equipment Manufacturing Co ltd
Original Assignee
China University of Mining and Technology CUMT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China University of Mining and Technology CUMT filed Critical China University of Mining and Technology CUMT
Priority to CN201310446104.0A priority Critical patent/CN103475802B/zh
Publication of CN103475802A publication Critical patent/CN103475802A/zh
Application granted granted Critical
Publication of CN103475802B publication Critical patent/CN103475802B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种电子稳像方法,包括:选取当前帧与参考帧;对当前帧和参考帧进行直方图均衡化处理;选取实时子区域、参考子区域,对实时子区域、参考子区域进行Hough线段检测;获取当前Hough线段相对于参考Hough线段的运动位移矢量、当前子区域相对于参考子区域的运动位移矢量,以得到当前帧相对于参考帧的全局运动位移矢量,并估计当前帧相对于参考帧的全局运动位移偏移量;之后,根据全局运动位移偏移量阈值范围内,将当前帧进行反方向等值补偿,得到稳定的当前视频图像。本发明具有抗干扰性强、稳像精度高、整体图像效果好等特点,可广泛应用于图像处理领域中。

Description

一种电子稳像方法
技术领域
本发明涉及图像处理技术,特别是涉及一种电子稳像技术。
背景技术
目前,图像处理技术无论在军事领域还是在民用领域都取得了广泛应用。在远离地面的井下作业中,轨道运输车上通常均装设有摄像设备,以记录井下巷道实际情况。实际应用中,井下环境比较恶劣,比如,摄像设备的震动、巷道粉尘、光线不足等情况;因此,摄像设备获得的视频图像会出现比较模糊、不稳定等问题。视频图像质量好坏会影响后续调度、预警等应用,如,井下视频追踪、视频联动以及视频存储压缩与视频编码解码的效率等。实际应用中,电子稳像技术已成为图像处理的关键技术之一。
目前,电子稳像方法有多种。比如,申请号为201110178881.2、名称为“基于特征匹配的电子稳像方法”的中国专利申请,其对当前帧图像块与参考帧图像块进行搜索已达到快匹配的目的,但对具有移动物体的视频图像的处理效果较差。再比如,申请号为201110300029.8、名称为“一种基于改进块匹配的电子稳像方法”的中国专利申请,其采用Harris角点进行匹配,在特征点提取较少的情况下,容易造成特点错误匹配的问题。
由此可见,现有技术中,电子稳像技术抗干扰性较差、稳像精度较低且体现视频图像整体信息效果较差。
发明内容
有鉴于此,本发明的主要目的在于提供一种抗干扰性强、稳像精度高且能较好体现视频图像整体信息的电子稳像方法。
为了达到上述目的,本发明提出的技术方案为:
一种电子稳像方法,包括如下步骤:
步骤1、每个时刻,将摄像设备获取的实时视频图像作为当前帧;实时视频图像的前一幅图像为参考视频图像,将参考视频图像作为参考帧;预设全局运动位移偏移量阈值。
步骤2、对当前帧和参考帧进行直方图均衡化处理,分别得到预处理当前帧、预处理参考帧;预处理当前帧、预处理参考帧分别对应预处理实时视频图像、预处理参考视频图像。
步骤3、在预处理实时视频图像、预处理参考视频图像中分别选取实时子区域、参考子区域,对实时子区域、参考子区域进行Hough线段检测,并依次得到实时Hough线段、参考Hough线段后,执行步骤4;依次对预处理实时视频图像、预处理参考视频图像进行行投影与列投影,并分别得到预处理当前帧行像素总和
Figure BDA00003882925600021
预处理当前帧列像素总和
Figure BDA00003882925600022
预处理参考帧行像素总和
Figure BDA00003882925600023
预处理参考帧列像素总和
Figure BDA00003882925600024
之后,执行步骤6;其中,Cur′k(i,j)为预处理实时视频图像(i,j)处的像素值,Cur′r(i,j)为预处理参考视频图像(i,j)处的像素值,ML为实时视频图像宽度,MR为实时视频图像长度,i、j、k、r为自然数,且0≤i≤ML,0≤j≤MR。
步骤4、对实时Hough线段进行行投影、列投影,分别得到实时Hough线段第k帧行像素总和
Figure BDA00003882925600031
实时Hough线段第k帧列像素总和
Figure BDA00003882925600032
对参考Hough线段进行行投影、列投影,分别得到参考Hough线段第r帧行像素总和
Figure BDA00003882925600033
参考Hough线段第r帧列像素总和
Figure BDA00003882925600034
其中,Curk(i,j)为实时视频图像(i,j)处的像素值,Curr(i,j)为参考视频图像(i,j)处的像素值。
步骤5、对实时Hough线段行像素总和、参考Hough线段行像素总和进行行相关处理
Figure BDA00003882925600035
得到Hough线段相对行位移R(w);对实时Hough线段列像素总和、参考Hough线段列像素总和进行列相关处理得到Hough线段相对列位移C(w);根据Hough线段相对行位移、Hough线段相对列位移,得到当前Hough线段相对于参考Hough线段的运动位移矢量;之后,执行步骤7;其中,m为运动位移矢量相对于参考帧在一侧的搜索宽度,w为参数且1≤w≤2m+1。
步骤6、对实时子区域行像素总和、参考子区域行像素总和进行行相关处理得到子区域相对行位移;对实时子区域列像素总和、参考子区域列像素总和进行列相关处理
Figure BDA00003882925600038
得到子区域相对列位移;根据子区域相对行位移、子区域相对列位移,得到当前子区域相对于参考子区域的运动位移矢量。
步骤7、对当前Hough线段相对于参考Hough线段的运动位移矢量、当前子区域相对于参考子区域的运动位移矢量进行均值处理,得到当前帧相对于参考帧的全局运动位移矢量:
δ x = m + 1 - w min δ y = m + 1 - w min ;
其中,wmin为w的最小值,δy为垂直运动位移矢量,δx为水平运动位移矢量。
步骤8、根据当前帧相对于参考帧的全局运动位移矢量估计当前帧相对于参考帧的全局运动位移偏移量:
d x = ( 1 - β ) δ x ′ + β δ x ′ ′ d y = ( 1 - β ) δ y ′ + βδ y ′ ′ ;
其中,δx′为实时视频图像水平位移矢量,δx″为实时视频图像子区域水平位移矢量,δy′为实时视频图像垂直位移矢量,δy″为实时视频图像子区域垂直位移矢量,β为权重比,dx为实时视频图像全局水平运动位移偏移量,dy为实时视频图像全局垂直运动位移偏移量。
步骤9、判断当前帧相对于参考帧的全局运动位移偏移量是否在预设全局运动位移偏移量阈值范围内:如果在,则执行步骤10;如果不在,则将当前帧作为参考帧后退出。
步骤10、将当前帧按照当前帧相对于参考帧全局运动位移矢量进行反方向等值补偿,得到稳定的当前视频图像。
综上所述,本发明所述电子稳像方法对实时视频图像、参考视频图像进行预处理,并根据实际情况选定实时视频图像子区域、参考视频图像子区域后:一方面,对实时视频图像子区域、参考视频图像子区域进行行、列投影,并通过相关处理获得当前子区域相对于参考子区域的运动位移矢量;另一方面,对实时视频图像子区域、参考视频图像子区域进行Hough线段检测,并对得到的实时Hough线段、参考Hough线段进行行、列投影,之后,通过相关处理获得当前Hough线段相对于参考Hough线段的运动位移矢量。通过对上述两个运动位移矢量进行均值化处理获取当前帧相对于参考帧的全局运动位移矢量后,进一步估计当前帧相对于参考帧的全局运动位移偏移量,并根据预设全局运动位移偏移量阈值,对当前帧进行反方向等值补偿,以输出稳定的当前视频图像。基于上述各种图像处理方法,本发明所述电子稳像方法能较好体现视频图像整体信息,稳像精度高,且具有较强的抗干扰性。
附图说明
图1是本发明所述电子稳像方法的流程示意图。
图2是本发明所述直方图均衡化处理的流程示意图。
图3是本发明所述Hough线段检测的流程示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图及具体实施例对本发明作进一步地详细描述。
图1是本发明所述电子稳像方法的流程示意图。如图1所示,本发明所述电子稳像方法包括如下步骤:
步骤1、每个时刻,将摄像设备获取的实时视频图像作为当前帧;实时视频图像的前一幅图像为参考视频图像,将参考视频图像作为参考帧;预设全局运动位移偏移量阈值。
步骤1中,所述预设全局运动位移偏移量阈值为[0,50]。
本发明中,实时视频图像、参考视频图像的采集分辨率均为704pixel*576pixel。
步骤2、对当前帧和参考帧进行直方图均衡化处理,分别得到预处理当前帧、预处理参考帧;预处理当前帧、预处理参考帧分别对应预处理实时视频图像、预处理参考视频图像。
步骤3、在预处理实时视频图像、预处理参考视频图像中分别选取实时子区域、参考子区域,对实时子区域、参考子区域进行Hough线段检测,并依次得到实时Hough线段、参考Hough线段后,执行步骤4;依次对预处理实时视频图像、预处理参考视频图像进行行投影与列投影,并分别得到预处理当前帧行像素总和
Figure BDA00003882925600061
预处理当前帧列像素总和
Figure BDA00003882925600062
预处理参考帧行像素总和
Figure BDA00003882925600063
预处理参考帧列像素总和
Figure BDA00003882925600064
之后,执行步骤6;其中,Cur′k(i,j)为预处理实时视频图像(i,j)处的像素值,Cur′r(i,j)为预处理参考视频图像(i,j)处的像素值,ML为实时视频图像宽度,MR为实时视频图像长度,i、j、k、r为自然数,且0≤i≤ML,0≤j≤MR。
步骤3中,所述实时视频图像子区域范围为实时视频图像中的[(320,20),(520,220)],参考视频图像子区域范围为参考视频图像中的[(320,20),(520,220)]。
步骤3中,实时视频图像子区域范围、参考视频图像子区域范围的选择可根据实际情况自行确定。矿井下各子区域的确定主要遵循如下原则:第一,各子区域应包括运输铁轨;第二,为避免危险事故的发生,机车运行时工人不会出现在各子区域中。
步骤4、对实时Hough线段进行行投影、列投影,分别得到实时Hough线段第k帧行像素总和
Figure BDA00003882925600071
实时Hough线段第k帧列像素总和
Figure BDA00003882925600072
对参考Hough线段进行行投影、列投影,分别得到参考Hough线段第r帧行像素总和
Figure BDA00003882925600073
参考Hough线段第r帧列像素总和其中,Curk(i,j)为实时视频图像(i,j)处的像素值,Curr(i,j)为参考视频图像(i,j)处的像素值。
步骤5、对实时Hough线段行像素总和、参考Hough线段行像素总和进行行相关处理
Figure BDA00003882925600075
得到Hough线段相对行位移R(w);对实时Hough线段列像素总和、参考Hough线段列像素总和进行列相关处理
Figure BDA00003882925600076
得到Hough线段相对列位移C(w);根据Hough线段相对行位移、Hough线段相对列位移,得到当前Hough线段相对于参考Hough线段的运动位移矢量;之后,执行步骤7;其中,m为运动位移矢量相对于参考帧在一侧的搜索宽度,w为参数且1≤w≤2m+1。
步骤5中,所述运动位移矢量相对于参考帧在一侧的搜索宽度m=30像素。
步骤6、对实时子区域行像素总和、参考子区域行像素总和进行行相关处理
Figure BDA00003882925600077
得到子区域相对行位移;对实时子区域列像素总和、参考子区域列像素总和进行列相关处理
Figure BDA00003882925600078
得到子区域相对列位移;根据子区域相对行位移、子区域相对列位移,得到当前子区域相对于参考子区域的运动位移矢量。
步骤7、对当前Hough线段相对于参考Hough线段的运动位移矢量、当前子区域相对于参考子区域的运动位移矢量进行均值处理,得到当前帧相对于参考帧的全局运动位移矢量:
δ x = m + 1 - w min δ y = m + 1 - w min ;
其中,wmin为w的最小值,δy为垂直运动位移矢量,δx为水平运动位移矢量。
步骤8、根据当前帧相对于参考帧的全局运动位移矢量估计当前帧相对于参考帧的全局运动位移偏移量:
d x = ( 1 - β ) δ x ′ + β δ x ′ ′ d y = ( 1 - β ) δ y ′ + βδ y ′ ′ ;
其中,δx′为实时视频图像水平位移矢量,δx″为实时视频图像子区域水平位移矢量,δy′为实时视频图像垂直位移矢量,δy″为实时视频图像子区域垂直位移矢量,β为权重比且0<β<1,dx为实时视频图像全局水平运动位移偏移量,dy为实时视频图像全局垂直运动位移偏移量。
步骤8中,所述权重比β=50%。
步骤9、判断当前帧相对于参考帧的全局运动位移偏移量是否在预设全局运动位移偏移量阈值范围内:如果在,则执行步骤10;如果不在,则将当前帧作为参考帧后退出。
步骤10、将当前帧按照当前帧相对于参考帧全局运动位移矢量进行反方向等值补偿,得到稳定的当前视频图像。
本发明方法中,步骤5与步骤6中均采用了相关处理,是因为各相关曲线的谷值分别对应Hough线段相对行位移、Hough线段相对列位移、子区域相对行位移、子区域相对列位移。
本发明方法中,步骤7对当前Hough线段相对于参考Hough线段的运动位移矢量、当前子区域相对于参考子区域的运动位移矢量进行均值处理的原因如下:第一,在某些特殊的环境中,比如矿井下,Hough线段检测会出现误差;第二,图像中特征区域发生交叉时,比如框架下铁轨交叉处,图像处理也会出现误差;因此,均值化处理既能反映图像整体特性,又能减小图像处理过程中产生的误差。
总之,本发明所述电子稳像方法对实时视频图像、参考视频图像进行预处理,并根据实际情况选定实时视频图像子区域、参考视频图像子区域后:一方面,对实时视频图像子区域、参考视频图像子区域进行行、列投影,并通过相关处理获得当前子区域相对于参考子区域的运动位移矢量;另一方面,对实时视频图像子区域、参考视频图像子区域进行Hough线段检测,并对得到的实时Hough线段、参考Hough线段进行行、列投影,之后,通过相关处理获得当前Hough线段相对于参考Hough线段的运动位移矢量。通过对上述两个运动位移矢量进行均值化处理获取当前帧相对于参考帧的全局运动位移矢量后,进一步估计当前帧相对于参考帧的全局运动位移偏移量,并根据预设全局运动位移偏移量阈值,对当前帧进行反方向等值补偿,以输出稳定的当前视频图像。基于上述各种图像处理方法,本发明所述电子稳像方法能较好体现视频图像整体信息,稳像精度高,且具有较强的抗干扰性。
图2是本发明所述直方图均衡化处理的流程示意图。如图2所示,本发明所述步骤2中,所述当前帧和参考帧进行直方图均衡化处理,包括如下步骤:
步骤21、获取当前帧对应的实时视频图像灰度值λ与参考帧对应的参考视频图像灰度值λ′的进行归一化处理,得到的像素概率分别为
Figure BDA00003882925600091
Figure BDA00003882925600101
其中,n为实时视频图像像素数;nλ为实时视频图像中灰度值λ的像素次数;p(i,j)(λ)为实时视频图像中灰度值λ的像素概率;l为参考视频图像像素数;lλ为参考视频图像中灰度值λ的像素次数;p(i,j)′(λ)为参考视频图像中灰度值λ的像素概率;n、l、λ、nλ、lλ均为自然数,且0≤λ≤L-1,L为实时视频图像最大灰度值。
步骤22、获取p(i,j)(λ)累计概率函数
Figure BDA00003882925600102
与p(i,j)′(λ)的累计概率函数A′(i)=p(i,j)′(i)。
步骤23、对累计概率函数
Figure BDA00003882925600103
进行反归一化处理,分别得到A*(i)=A(i)(max1-min1)+min1、A′*(i)=A′(i)(max2-min2)+min2;其中,max1为实时视频图像的最大灰度值,min1为实时视频图像的最小灰度值;max2为参考视频图像的最大灰度值,min2为参考视频图像的最小灰度值。
本发明方法中,直方图均衡化处理能将分布不均匀的图像进行均匀拉伸,使得图像分布均匀,增强了图像的对比度。该处理方法对于前景或背景太暗或太亮的图像处理效果非常好,比煤矿井下的各种视频图像。
图3是本发明所述Hough线段检测的流程示意图。如图3所示,本发明所述步骤3中,所述对实时子区域、参考子区域进行Hough线段检测包括如下步骤:
步骤31、分别对实时子区域、参考子区域进行边缘检测,以获取实时Hough线段检测特征点(ρ11)、参考Hough线段检测特征点(ρ22)。
本发明方法中,边缘检测得到的实时Hough线段检测特征点(ρ11)、参考Hough线段检测特征点(ρ22)依次为实时视频图像边缘点、参考视频图像边缘点。
步骤32、针对实时Hough线段检测特征点(ρ11)、参考Hough线段检测特征点(ρ22)分别设定一个初始值为0的实时累加器Acc1(ρ1′,θ1′)、参考累加器Acc2(ρ2′,θ2′)。
步骤33、遍历实时子区域中每一个像素点(u1,v1)的θ1值,并获取θ1对应的ρ1:如果存在ρ11′,则执行Acc1(ρ1′,θ1′)=Acc1(ρ1′,θ1′)+1;遍历参考子区域中每一个像素点(u2,v2)的θ2值,并获取θ2对应的ρ2:如果存在ρ22′,则执行Acc2(ρ2′,θ2′)=Acc1(ρ2′,θ2′)+1。
步骤34、根据遍历实时累加器Acc1(ρ1′,θ1′)获取的实时峰值点,获取实时Hough线段;根据遍历参考累加器Acc2(ρ2′,θ2′)获取的参考峰值点,获取参考Hough线段。
步骤31中,所述分别对实时子区域、参考子区域进行边缘检测,包括如下步骤:
步骤311、将原始空间中实时子区域的任一直线y1=t1x1+b1进行极坐标转换,得到:ρ1=a1cosθ1+d1sinθ1;将原始空间中参考子区域的任一直线y2=t2x2+b2进行极坐标转换,得到:ρ2=a2cosθ2+d2sinθ2;其中,x1、y1、x2、y2为原始空间坐标,ρ1、θ1、ρ2、ρ2为极坐标;t1、b1、t2、b2、a1、d1、a2、d2为参数。
本发明方法中,Hough线段检测通过对实时子区域、参考子区域进行坐标变换,将一般空间的实时子区域、参考子区域中给定的直线或线段变换为极坐标空间的一点,比如矿井下的运输轨道;并通过设定累加器找到的累加峰值点对应一般空间中的共线点。这样,Hough线段检测就将视频图像的整体检测转化为局部检测,使得问题得到简化。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种电子稳像方法,其特征在于,所述电子稳像方法包括如下步骤:
步骤1、每个时刻,将摄像设备获取的实时视频图像作为当前帧;实时视频图像的前一幅图像为参考视频图像,将参考视频图像作为参考帧;预设全局运动位移偏移量阈值;
步骤2、对当前帧和参考帧进行直方图均衡化处理,分别得到预处理当前帧、预处理参考帧;预处理当前帧、预处理参考帧分别对应预处理实时视频图像、预处理参考视频图像;
步骤3、在预处理实时视频图像、预处理参考视频图像中分别选取实时子区域、参考子区域,对实时子区域、参考子区域进行Hough线段检测,并依次得到实时Hough线段、参考Hough线段后,执行步骤4;依次对预处理实时视频图像、预处理参考视频图像进行行投影与列投影,并分别得到预处理当前帧行像素总和
Figure FDA00003882925500011
预处理当前帧列像素总和
Figure FDA00003882925500012
预处理参考帧行像素总和
Figure FDA00003882925500013
预处理参考帧列像素总和
Figure FDA00003882925500014
之后,执行步骤6;其中,Cur′k(i,j)为预处理实时视频图像(i,j)处的像素值,Cur′r(i,j)为预处理参考视频图像(i,j)处的像素值,ML为实时视频图像宽度,MR为实时视频图像长度,i、j、k、r为自然数,且0≤i≤ML,0≤j≤MR;
步骤4、对实时Hough线段进行行投影、列投影,分别得到实时Hough线段第k帧行像素总和
Figure FDA00003882925500015
实时Hough线段第k帧列像素总和对参考Hough线段进行行投影、列投影,分别得到参考Hough线段第r帧行像素总和
Figure FDA00003882925500021
参考Hough线段第r帧列像素总和
Figure FDA00003882925500022
其中,Curk(i,j)为实时视频图像(i,j)处的像素值,Curr(i,j)为参考视频图像(i,j)处的像素值;
步骤5、对实时Hough线段行像素总和、参考Hough线段行像素总和进行行相关处理
Figure FDA00003882925500023
得到Hough线段相对行位移R(w);对实时Hough线段列像素总和、参考Hough线段列像素总和进行列相关处理
Figure FDA00003882925500024
得到Hough线段相对列位移C(w);根据Hough线段相对行位移、Hough线段相对列位移,得到当前Hough线段相对于参考Hough线段的运动位移矢量;之后,执行步骤7;其中,m为运动位移矢量相对于参考帧在一侧的搜索宽度,w为参数且1≤w≤2m+1;
步骤6、对实时子区域行像素总和、参考子区域行像素总和进行行相关处理得到子区域相对行位移;对实时子区域列像素总和、参考子区域列像素总和进行列相关处理
Figure FDA00003882925500026
得到子区域相对列位移;根据子区域相对行位移、子区域相对列位移,得到当前子区域相对于参考子区域的运动位移矢量;
步骤7、对当前Hough线段相对于参考Hough线段的运动位移矢量、当前子区域相对于参考子区域的运动位移矢量进行均值处理,得到当前帧相对于参考帧的全局运动位移矢量:
&delta; x = m + 1 - w min &delta; y = m + 1 - w min ;
其中,wmin为w的最小值,δy为垂直运动位移矢量,δx为水平运动位移矢量;
步骤8、根据当前帧相对于参考帧的全局运动位移矢量估计当前帧相对于参考帧的全局运动位移偏移量:
d x = ( 1 - &beta; ) &delta; x &prime; + &beta; &delta; x &prime; &prime; d y = ( 1 - &beta; ) &delta; y &prime; + &beta;&delta; y &prime; &prime; ;
其中,δx′为实时视频图像水平位移矢量,δx″为实时视频图像子区域水平位移矢量,δy′为实时视频图像垂直位移矢量,δy″为实时视频图像子区域垂直位移矢量,β为权重比,dx为实时视频图像全局水平运动位移偏移量,dy为实时视频图像全局垂直运动位移偏移量;
步骤9、判断当前帧相对于参考帧的全局运动位移偏移量是否在预设全局运动位移偏移量阈值范围内:如果在,则执行步骤10;如果不在,则将当前帧作为参考帧后退出;
步骤10、将当前帧按照当前帧相对于参考帧全局运动位移矢量进行反方向等值补偿,得到稳定的当前视频图像。
2.根据权利要求1所述的电子稳像方法,其特征在于,步骤1中,所述预设全局运动位移偏移量阈值为[0,50]。
3.根据权利要求1所述的电子稳像方法,其特征在于,步骤2中,所述当前帧和参考帧进行直方图均衡化处理,包括如下步骤:
步骤21、获取当前帧对应的实时视频图像灰度值λ与参考帧对应的参考视频图像灰度值λ′的进行归一化处理,得到的像素概率分别为
Figure FDA00003882925500034
其中,n为实时视频图像像素数;nλ为实时视频图像中灰度值λ的像素次数;p(i,j)(λ)为实时视频图像中灰度值λ的像素概率;l为参考视频图像像素数;lλ为参考视频图像中灰度值λ的像素次数;p(i,j)′(λ)为参考视频图像中灰度值λ的像素概率;n、l、λ、nλ、lλ均为自然数,且0≤λ≤L-1,L为实时视频图像最大灰度值;
步骤22、获取p(i,j)(λ)累计概率函数
Figure FDA00003882925500041
与p(i,j)′(λ)的累计概率函数A′(i)=p(i,j)′(i);
步骤23、对累计概率函数
Figure FDA00003882925500042
进行反归一化处理,分别得到A*(i)=A(i)(max1-min1)+min1、A′*(i)=A′(i)(max2-min2)+min2;其中,max1为实时视频图像的最大灰度值,min1为实时视频图像的最小灰度值;max2为参考视频图像的最大灰度值,min2为参考视频图像的最小灰度值。
4.根据权利要求1所述的电子稳像方法,其特征在于,步骤3中,所述实时视频图像子区域范围为实时视频图像中的[(320,20),(520,220)],参考视频图像子区域范围为参考视频图像中的[(320,20),(520,220)]。
5.根据权利要求1所述的电子稳像方法,其特征在于,步骤3中,所述对实时子区域、参考子区域进行Hough线段检测包括如下步骤:
步骤31、分别对实时子区域、参考子区域进行边缘检测,以获取实时Hough线段检测特征点(ρ11)、参考Hough线段检测特征点(ρ22);
步骤32、针对实时Hough线段检测特征点(ρ11)、参考Hough线段检测特征点(ρ22)分别设定一个初始值为0的实时累加器Acc1(ρ1′,θ1′)、参考累加器Acc2(ρ2′,θ2′);
步骤33、遍历实时子区域中每一个像素点(u1,v1)的θ1值,并获取θ1对应的ρ1:如果存在ρ11′,则执行Acc1(ρ1′,θ1′)=Acc1(ρ1′,θ1′)+1;遍历参考子区域中每一个像素点(u2,v2)的θ2值,并获取θ2对应的ρ2:如果存在ρ22′,则执行Acc2(ρ2′,θ2′)=Acc1(ρ2′,θ2′)+1;
步骤34、根据遍历实时累加器Acc1(ρ1′,θ1′)获取的实时峰值点,获取实时Hough线段;根据遍历参考累加器Acc2(ρ2′,θ2′)获取的参考峰值点,获取参考Hough线段。
6.根据权利要求5所述的电子稳像方法,其特征在于,步骤31中,所述分别对实时子区域、参考子区域进行边缘检测,包括如下步骤:
步骤311、将原始空间中实时子区域的任一直线y1=t1x1+b1进行极坐标转换,得到:ρ1=a1cosθ1+d1sinθ1;将原始空间中参考子区域的任一直线y2=t2x2+b2进行极坐标转换,得到:ρ2=a2cosθ2+d2sinθ2;其中,x1、y1、x2、y2为原始空间坐标,ρ1、θ1、ρ2、ρ2为极坐标;t1、b1、t2、b2、a1、d1、a2、d2为参数。
7.根据权利要求1所述的电子稳像方法,其特征在于,步骤8中,所述权重比β=50%。
8.根据权利要求1所述的电子稳像方法,其特征在于,步骤1中,所述实时视频图像、所述参考视频图像的采集分辨率均为704pixel*576pixel。
9.根据权利要求1所述的电子稳像方法,其特征在于,步骤5中,所述运动位移矢量相对于参考帧在一侧的搜索宽度m=30像素。
CN201310446104.0A 2013-09-26 2013-09-26 一种电子稳像方法 Active CN103475802B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310446104.0A CN103475802B (zh) 2013-09-26 2013-09-26 一种电子稳像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310446104.0A CN103475802B (zh) 2013-09-26 2013-09-26 一种电子稳像方法

Publications (2)

Publication Number Publication Date
CN103475802A true CN103475802A (zh) 2013-12-25
CN103475802B CN103475802B (zh) 2016-09-07

Family

ID=49800489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310446104.0A Active CN103475802B (zh) 2013-09-26 2013-09-26 一种电子稳像方法

Country Status (1)

Country Link
CN (1) CN103475802B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104168463A (zh) * 2014-08-28 2014-11-26 中国矿业大学 一种媒体视频服务器
CN104580830A (zh) * 2015-01-09 2015-04-29 安徽清新互联信息科技有限公司 一种面向视频监控的准静态图像抗抖动方法
CN105007376A (zh) * 2015-07-21 2015-10-28 惠州Tcl移动通信有限公司 一种基于移动终端的防晕处理方法及系统
CN105163004A (zh) * 2015-04-30 2015-12-16 南方电网科学研究院有限责任公司 一种消除误匹配点的视频补偿方法
CN105574893A (zh) * 2015-12-18 2016-05-11 浙江大学 一种基于投影梯度的稳像方法
CN106872141A (zh) * 2016-12-28 2017-06-20 中国科学院长春光学精密机械与物理研究所 空间天文望远镜导星稳像精度测试方法及装置
CN108234859A (zh) * 2017-08-30 2018-06-29 珠海市魅族科技有限公司 视频防抖控制方法、装置、计算机装置及可读存储介质
CN109743495A (zh) * 2018-11-28 2019-05-10 深圳市中科视讯智能系统技术有限公司 视频图像电子增稳方法及装置
CN110351508A (zh) * 2019-08-13 2019-10-18 Oppo广东移动通信有限公司 基于录像模式的防抖处理方法和装置、电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102231792A (zh) * 2011-06-29 2011-11-02 南京大学 基于特征匹配的电子稳像方法
US20110267480A1 (en) * 2005-12-14 2011-11-03 Canon Kabushiki Kaisha Image processing apparatus, image-pickup apparatus, and image processing method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110267480A1 (en) * 2005-12-14 2011-11-03 Canon Kabushiki Kaisha Image processing apparatus, image-pickup apparatus, and image processing method
CN102231792A (zh) * 2011-06-29 2011-11-02 南京大学 基于特征匹配的电子稳像方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CHI-HAN CHUANG: "Multiple object motion detection for robust image stabilization using block-based hough transform", 《INTELLIGENT INFORMATION HIDING AND MULTIMEDIA SIGNAL PROCESSING》 *
钟平: "机载电子稳像技术研究", 《中国优秀博硕士学位论文全文数据库(博士)工程科技Ⅱ辑》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104168463A (zh) * 2014-08-28 2014-11-26 中国矿业大学 一种媒体视频服务器
CN104580830A (zh) * 2015-01-09 2015-04-29 安徽清新互联信息科技有限公司 一种面向视频监控的准静态图像抗抖动方法
CN104580830B (zh) * 2015-01-09 2017-12-19 安徽清新互联信息科技有限公司 一种面向视频监控的准静态图像抗抖动方法
CN105163004A (zh) * 2015-04-30 2015-12-16 南方电网科学研究院有限责任公司 一种消除误匹配点的视频补偿方法
CN105007376A (zh) * 2015-07-21 2015-10-28 惠州Tcl移动通信有限公司 一种基于移动终端的防晕处理方法及系统
CN105007376B (zh) * 2015-07-21 2019-02-26 惠州Tcl移动通信有限公司 一种基于移动终端的防晕处理方法及系统
CN105574893A (zh) * 2015-12-18 2016-05-11 浙江大学 一种基于投影梯度的稳像方法
CN105574893B (zh) * 2015-12-18 2018-02-09 浙江大学 一种基于投影梯度的稳像方法
CN106872141A (zh) * 2016-12-28 2017-06-20 中国科学院长春光学精密机械与物理研究所 空间天文望远镜导星稳像精度测试方法及装置
CN106872141B (zh) * 2016-12-28 2018-11-20 中国科学院长春光学精密机械与物理研究所 空间天文望远镜导星稳像精度测试方法及装置
CN108234859A (zh) * 2017-08-30 2018-06-29 珠海市魅族科技有限公司 视频防抖控制方法、装置、计算机装置及可读存储介质
CN109743495A (zh) * 2018-11-28 2019-05-10 深圳市中科视讯智能系统技术有限公司 视频图像电子增稳方法及装置
CN109743495B (zh) * 2018-11-28 2021-02-09 深圳市中科视讯智能系统技术有限公司 视频图像电子增稳方法及装置
CN110351508A (zh) * 2019-08-13 2019-10-18 Oppo广东移动通信有限公司 基于录像模式的防抖处理方法和装置、电子设备
CN110351508B (zh) * 2019-08-13 2021-09-28 Oppo广东移动通信有限公司 基于录像模式的防抖处理方法和装置、电子设备

Also Published As

Publication number Publication date
CN103475802B (zh) 2016-09-07

Similar Documents

Publication Publication Date Title
CN103475802A (zh) 一种电子稳像方法
CN105203552A (zh) 一种360°踏面图像检测系统及其检测方法
US9292750B2 (en) Method and apparatus for detecting traffic monitoring video
CN101303735B (zh) 探测车辆盲点区域内运动物体的方法及盲点探测装置
KR102471301B1 (ko) Rgb-d 카메라 기반 추적 시스템 및 그 방법
CN102930525B (zh) 基于仿射不变特征与单应矩阵的线匹配方法
CN108986082A (zh) 一种基于epnp的钢轨廓形检测方法及系统
CN102982559A (zh) 车辆跟踪方法及系统
CN105225482A (zh) 基于双目立体视觉的车辆检测系统和方法
CN103034981B (zh) 基于多时相数据的遥感影像加权回归恢复方法
CN109115173A (zh) 基于直线定位模型的掘进机机身位姿单目视觉测量方法
CN104794425B (zh) 一种基于行驶轨迹的车辆统计方法
CN105006003A (zh) 基于随机投影蕨的实时目标跟踪算法
CN107563331B (zh) 一种基于几何关系的道路标志线检测方法及系统
CN111982103B (zh) 一种权值优化的点线综合视觉惯性里程计方法
CN113989716A (zh) 煤矿井下输送带异物目标检测方法、系统、设备及终端
CN109765570A (zh) 一种基于激光雷达的带式输送机跑偏检测方法
CN110619328A (zh) 基于图像处理和深度学习的船舶水尺读数智能识别方法
CN102944226B (zh) 基于明暗区域配对的陨石坑检测方法
CN102902951A (zh) 高清视频监控图像的车辆目标定位、事件检测系统及方法
CN113111707B (zh) 一种基于卷积神经网络的前车检测与测距方法
CN110221312A (zh) 一种基于激光雷达快速检测地面点云的方法
CN103646242A (zh) 基于最大稳定极值区域特征的扩展目标跟踪方法
CN109859235B (zh) 一种夜间移动车灯跟踪检测系统、方法及设备
CN104318586A (zh) 基于自适应形态学滤波的运动模糊方向估计方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20210413

Address after: 272300 Yutai County Economic Development Zone, Jining, Shandong (south of the ancient Pavilion Road, North First Ring Road)

Patentee after: JINING ANTAI MINE EQUIPMENT MANUFACTURING Co.,Ltd.

Address before: 221116 No. 1 University Road, Xuzhou City, Jiangsu Province

Patentee before: China University of Mining and Technology

TR01 Transfer of patent right