CN111829434A - 一种料流计量检测方法及系统 - Google Patents

一种料流计量检测方法及系统 Download PDF

Info

Publication number
CN111829434A
CN111829434A CN201910452658.9A CN201910452658A CN111829434A CN 111829434 A CN111829434 A CN 111829434A CN 201910452658 A CN201910452658 A CN 201910452658A CN 111829434 A CN111829434 A CN 111829434A
Authority
CN
China
Prior art keywords
laser
sampling
line
image
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910452658.9A
Other languages
English (en)
Other versions
CN111829434B (zh
Inventor
董霄剑
曾洪庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Vizum Intelligent Technology Co ltd
Original Assignee
Beijing Vizum Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Vizum Intelligent Technology Co ltd filed Critical Beijing Vizum Intelligent Technology Co ltd
Priority to CN201910452658.9A priority Critical patent/CN111829434B/zh
Publication of CN111829434A publication Critical patent/CN111829434A/zh
Application granted granted Critical
Publication of CN111829434B publication Critical patent/CN111829434B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/002Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

一种料流计量检测方法包括线激光投到传送带上物料;双目相机拍带线激光物料图像,得物料即时轮廓激光线;用线激光双目测量方法得即时轮廓激光线三维数据;传送带匀速运动,用线激光双目测量方法得各即时轮廓激光线三维数据,得三维数据组、点云数据;依点云数据确定数据边界,基于XOY平面将点云数据划为小域均匀采样,记采样点三维坐标;以小域面积为底面积采样点Z值为高算采样长方体体积;合计各采样长方体体积得物料体积。检测系统包括传送带、线激光发射器、双目相机、数据处理模块。本发明稳定获取料流轮廓激光线扫描处三维数据;采样及积分计算,减小体积计算误差;随传送带运行状态即时计量,实时性好;设备安装方便,简单易用,适用性广。

Description

一种料流计量检测方法及系统
技术领域
本发明属于料流检测技术领域,具体涉及一种料流计量检测方法及系统。
背景技术
在食品、医药、农产品、工业生产领域,不规则散颗粒状或粉状固态物料的输送和计量被广泛涉及。实际生产中,散颗粒状或粉状固体物料的计量通常采用称重传感器称量方式进行测量。在物料输送过程中经常使用电子皮带秤采用称重传感器原理进行测量,由于皮带运行时,称重传感器信号易受到干扰,测量精度难以保证。
发明内容
针对上述缺陷,本发明提出一种料流计量检测方法及系统。具体内容如下:
一种料流计量检测方法,包括:将线激光投射到传送带上的待检测物料;利用双目相机摄取带线激光的物料图像,获取物料即时轮廓激光线;利用线激光双目测量方法得到即时轮廓激光线三维数据;传送带匀速运动,利用线激光双目测量方法得到各即时轮廓激光线三维数据,得到三维数据组,形成点云数据;根据点云数据确定数据边界,基于XOY平面将点云数据划分为微小区域并进行均匀采样,记录采样点三维坐标;以微小区域面积为底面积,采样点Z值为高计算采样长方体体积;合计各采样长方体体积,得到已经过线激光扫描部分的物料体积。
进一步地,所述线激光双目测量方法包括:对双目相机进行立体标定;通过双目相机的左摄像头和右摄像头分别获取带线激光的物料左图像和右图像;对获取的左图像和右图像进行立体校正,使校正后的左图像和右图像行对准;对校正后的左图像和右图像进行匹配得到线激光成像匹配点对;根据线激光成像匹配点对得到左右图像视差,根据左右图像视差计算该激光线投射处的物料轮廓三维数据。
本发明还包括一种料流计量检测系统,包括:传送带、线激光发射器、双目相机、数据处理模块。其中:
所述传送带匀速运动,输送物料经过料流计量检测系统进行计量;
所述线激光发射器投射线激光到传送带及传送带上的物料,以获取物料即时轮廓激光线;
所述双目相机获取带线激光的物料左图像和右图像,所述双目相机的左摄像头和右摄像头参数相同;
所述数据处理模块对所述带线激光的物料左图像和右图像进行分析处理,得到激光线投射处的物料轮廓三维数据;
所述线激光发射器垂直于所述传送带的传送平面投射线激光。
本发明的有益效果是:提供一种料流计量检测方法及系统,可以稳定可靠地获取料流轮廓激光线扫描处的三维数据;利用采样以及积分计算,减小了料流体积计算误差;随传送带运行状态即时计量,实时性好;设备安装方便,简单易用,适用性广。
附图说明
图1为本发明的一种料流计量检测方法及系统使用场景示意图。
图中:1.传送带;2.线激光发射器;3.双目相机;4.料流;5.料流轮廓激光线。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
本发明所要解决的技术问题是目前实际生产中散颗粒状或粉状固体物料的计量通常采用称重计量法,在物料输送过程中经常使用电子皮带秤采用称重传感器原理进行测量,由于皮带运行时,称重传感器信号易受到干扰,测量精度难以保证。
针对这一缺陷,本发明提出一种料流计量检测方法及系统,采用双目加线激光的检测方法,在获取传送带上料流轮廓三维数据后利用三维数据进行积分,得到料流体积,利用线激光能快速准确获取料流轮廓,结合双目立体视觉原理计算轮廓数据与积分计算,可以快速准确获取到料流的体积,完成料流的计算。
参见图1,本发明实施例具体包括以下步骤:
(1)对双目相机进行立体标定。具体包括:
对双目相机的左摄像头和右摄像头分别进行标定,得到所述双目相机的内参矩阵A、所述左摄像头的旋转矩阵R1和所述右摄像头的旋转矩阵R2,以及所述左摄像头的平移向量T1和所述右摄像头的平移向量T2
通过如下公式计算得到所述左摄像头和所述右摄像头之间的旋转矩阵R和平移向量T:
Figure BDA0002075632120000031
(2)打开线激光发射器,控制线激光发射器发出的线激光投射到传送带上的待测物料。
(3)通过双目相机的左摄像头和右摄像头分别获取带线激光的物料左图像和右图像。
(4)对获取的左图像和右图像进行立体校正,使校正后的左图像和右图像行对准。进行立体校正包括:
将所述旋转矩阵R分解为两个旋转矩阵r1和r2,其中r1和r2通过假设将所述左摄像头和所述右摄像头各旋转一半使所述左摄像头和所述右摄像头的光轴平行而得到;
对所述左图像和所述右图像进行行对准通过下式实现:
Figure BDA0002075632120000041
其中,Rrect为使行对准的旋转矩阵:
Figure BDA0002075632120000042
旋转矩阵Rrect由极点e1方向开始,以所述左图像的原点为主,所述左摄像头至所述右摄像头的平移向量的方向为主点方向:
Figure BDA0002075632120000043
e1与e2正交,将e1归一化到单位向量:
Figure BDA0002075632120000044
其中,Tx为平移向量T在双目相机所处平面内水平方向的分量,Ty为平移向量T在双目相机所处平面内竖直方向的分量;
e3与e1和e2正交,e3通过如下公式计算得到:
e3=e2×e1
根据上述旋转矩阵物理意义有:
Figure BDA0002075632120000045
其中,α表示为使行对准,所述左摄像头和所述右摄像头在其所处平面内需要旋转的角度,0≤α≤180°;对于所述左摄像头,使其绕e3方向旋转α',对于右相机,使其绕e3方向旋转α”。
(5)对校正后的左图像和右图像进行匹配得到线激光成像匹配点对。具体包括:
根据检测系统及待测料流的位置,确定图像的处理区域ROI;
对校正后的左图像和校正后的右图像进行预处理,分别转换为左灰度图和右灰度图;
分别对所述左灰度图和所述右灰度图位于ROI内的部分进行水平扫描,计算每个扫描点的窗口能量:
Figure BDA0002075632120000051
其中,(x,y)表示扫描点坐标,也是计算窗口的中心坐标;n表示从所述左灰度图所选窗口中心到边缘的距离,I(x+i,y+j)表示图像坐标(x+i,y+j)处的图像灰度值;
每个扫描行E(x,y)的极大值处为线激光的成像处,根据线激光条数M,得到M个极值,按x坐标从左到右进行排序,记为(x,y)k,k=1,2,...M;
对所述左灰度图和所述右灰度图的坐标y相同的水平扫描行构成的水平极线进行扫描得到所述左灰度图和所述右灰度图的线激光成像点(xL,y)k和(xR,y)k,L和R分别表示左灰度图和右灰度图,左右序列中k相同的点构成匹配点对。
(6)根据线激光成像匹配点对得到左右图像视差,根据左右图像视差计算该激光线投射处的物料轮廓三维数据。具体包括:
第y行水平极线上线激光成像的视差通过如下公式计算:
dyk=xL-xR,k=1,2,...M,
其中,dyk为纵坐标为y的极线第k条激光成像点的视差;
根据双目相机的内参矩阵A、外参矩阵[R T]及如下公式计算得到激光线投射处的物料轮廓各点在空间中的三维坐标(Z,X,Y):
Figure BDA0002075632120000061
其中,f是外参矩阵[R T]中双目相机的焦距,B是内参矩阵A中所述左摄像头和所述右摄像头的间距,由标定信息给出;XL-XR为空间一点在所述左灰度图和所述右灰度图之间的视差,由匹配信息给出;(x,y)为激光线投射处的物料轮廓点在成像平面上的坐标。
(7)保持传送带匀速运动,线激光扫描传送带上物料,双目相机依次摄取各即时轮廓激光线的左图像和右图像。
(8)重复上述步骤(4)-(7),得到各即时轮廓激光线三维数据,得到三维数据组,形成点云数据。
(9)根据点云数据确定数据边界,基于XOY平面将点云数据划分为微小区域并进行均匀采样,记录采样点三维坐标。具体包括:
根据点云数据确定数据最大边界,在边界区域内基于XOY平面对点云数据进行均匀采样,采样间隔Δd=a*D,D为最大边界长度,取采样区域内最接近采样区域中心的点为采样点。此处a为小于1的常数,且a越小,采样间隔越小,采样区域越小,计算料流体积越精确。
(10)以微小区域面积为底面积,采样点Z值为高计算采样长方体体积。具体计算方式为:Vn=(Δd)2*Zn,其中Vn为任一采样长方体的体积,Zn为该采样长方体的高。
(11)合计各采样长方体体积,得到已经过线激光扫描部分的物料体积。即:
Figure BDA0002075632120000071
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围不局限于此,任何熟悉本技术领域的技术人员在本发明披露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换、改变、材料替换、改进等,都应涵盖在本发明的保护范围之内。

Claims (4)

1.一种料流计量检测方法,其特征在于,包括:将线激光投射到传送带上的待检测物料;利用双目相机摄取带线激光的物料图像,获取物料即时轮廓激光线;利用线激光双目测量方法得到即时轮廓激光线三维数据;传送带匀速运动,利用线激光双目测量方法得到各即时轮廓激光线三维数据,得到三维数据组,形成点云数据;根据点云数据确定数据边界,基于XOY平面将点云数据划分为微小区域并进行均匀采样,记录采样点三维坐标;以微小区域面积为底面积,采样点Z值为高计算采样长方体体积;合计各采样长方体体积,得到已经过线激光扫描部分的物料体积。
2.根据权利要求1所述的线激光双目测量方法,其特征在于,包括:对双目相机进行立体标定;通过双目相机的左摄像头和右摄像头分别获取带线激光的物料左图像和右图像;对获取的左图像和右图像进行立体校正,使校正后的左图像和右图像行对准;对校正后的左图像和右图像进行匹配得到线激光成像匹配点对;根据线激光成像匹配点对得到左右图像视差,根据左右图像视差计算该激光线投射处的物料轮廓三维数据。
3.根据权利要求1所述的根据点云数据确定数据边界,基于XOY平面将点云数据划分为微小区域并进行均匀采样,记录采样点三维坐标包括:根据点云数据确定数据最大边界,在边界区域内基于XOY平面对点云数据进行均匀采样,采样间隔Δd=a*D,D为最大边界长度,取采样区域内最接近采样区域中心的点为采样点;此处a为小于1的常数,且a越小,采样间隔越小,采样区域越小,计算料流体积越精确。
4.一种料流计量检测系统,其特征在于,包括:传送带、线激光发射器、双目相机、数据处理模块,其中:
所述传送带匀速运动,输送物料经过料流计量检测系统进行计量;
所述线激光发射器投射线激光到传送带及传送带上的物料,以获取物料即时轮廓激光线;
所述双目相机获取带线激光的物料左图像和右图像,所述双目相机的左摄像头和右摄像头参数相同;
所述数据处理模块对所述带线激光的物料左图像和右图像进行分析处理,得到激光线投射处的物料轮廓三维数据;
所述线激光发射器垂直于所述传送带的传送平面投射线激光。
CN201910452658.9A 2019-05-28 2019-05-28 一种料流计量检测方法及系统 Active CN111829434B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910452658.9A CN111829434B (zh) 2019-05-28 2019-05-28 一种料流计量检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910452658.9A CN111829434B (zh) 2019-05-28 2019-05-28 一种料流计量检测方法及系统

Publications (2)

Publication Number Publication Date
CN111829434A true CN111829434A (zh) 2020-10-27
CN111829434B CN111829434B (zh) 2023-01-10

Family

ID=72912326

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910452658.9A Active CN111829434B (zh) 2019-05-28 2019-05-28 一种料流计量检测方法及系统

Country Status (1)

Country Link
CN (1) CN111829434B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112964318A (zh) * 2021-02-08 2021-06-15 中国铁建重工集团股份有限公司 一种皮带机渣土体积流量实时检测方法和检测系统
CN113306991A (zh) * 2021-04-16 2021-08-27 北京伟景智能科技有限公司 基于立体视觉的煤炭运输机监测管理系统
CN113379743A (zh) * 2021-08-12 2021-09-10 山东中都机器有限公司 基于计算机视觉的输送机异常检测方法及系统
CN113450315A (zh) * 2021-06-08 2021-09-28 北京伟景智能科技有限公司 棒材计数方法、装置及分钢系统
CN113706601A (zh) * 2021-08-20 2021-11-26 中铁工程装备集团有限公司 皮带机物料体积测量方法、装置、计算机设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102003938A (zh) * 2010-10-11 2011-04-06 中国人民解放军信息工程大学 大型高温锻件热态在位检测方法
CN102721367A (zh) * 2012-07-02 2012-10-10 吉林省粮油科学研究设计院 基于动态三维激光扫描的大型不规则散粮堆体积测量方法
WO2015024407A1 (zh) * 2013-08-19 2015-02-26 国家电网公司 基于电力机器人的双目视觉导航系统及方法
CN106097318A (zh) * 2016-06-06 2016-11-09 北京理工大学 一种粮食体积测量系统和方法
CN108267201A (zh) * 2016-12-30 2018-07-10 上海云统信息科技有限公司 一种皮带输运散料的计量方法
CN109341823A (zh) * 2018-11-15 2019-02-15 力博重工科技股份有限公司 基于视频图像的料流实时检测装置
CN109712180A (zh) * 2019-01-19 2019-05-03 北京伟景智能科技有限公司 一种钢筋计数方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102003938A (zh) * 2010-10-11 2011-04-06 中国人民解放军信息工程大学 大型高温锻件热态在位检测方法
CN102721367A (zh) * 2012-07-02 2012-10-10 吉林省粮油科学研究设计院 基于动态三维激光扫描的大型不规则散粮堆体积测量方法
WO2015024407A1 (zh) * 2013-08-19 2015-02-26 国家电网公司 基于电力机器人的双目视觉导航系统及方法
CN106097318A (zh) * 2016-06-06 2016-11-09 北京理工大学 一种粮食体积测量系统和方法
CN108267201A (zh) * 2016-12-30 2018-07-10 上海云统信息科技有限公司 一种皮带输运散料的计量方法
CN109341823A (zh) * 2018-11-15 2019-02-15 力博重工科技股份有限公司 基于视频图像的料流实时检测装置
CN109712180A (zh) * 2019-01-19 2019-05-03 北京伟景智能科技有限公司 一种钢筋计数方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112964318A (zh) * 2021-02-08 2021-06-15 中国铁建重工集团股份有限公司 一种皮带机渣土体积流量实时检测方法和检测系统
CN113306991A (zh) * 2021-04-16 2021-08-27 北京伟景智能科技有限公司 基于立体视觉的煤炭运输机监测管理系统
CN113450315A (zh) * 2021-06-08 2021-09-28 北京伟景智能科技有限公司 棒材计数方法、装置及分钢系统
CN113379743A (zh) * 2021-08-12 2021-09-10 山东中都机器有限公司 基于计算机视觉的输送机异常检测方法及系统
CN113706601A (zh) * 2021-08-20 2021-11-26 中铁工程装备集团有限公司 皮带机物料体积测量方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN111829434B (zh) 2023-01-10

Similar Documents

Publication Publication Date Title
CN111829434B (zh) 一种料流计量检测方法及系统
US9279662B2 (en) Laser scanner
CN101603812B (zh) 一种超高速实时三维视觉测量装置及方法
US10074191B1 (en) System and method for determination of object volume with multiple three-dimensional sensors
CN110208771B (zh) 一种移动二维激光雷达的点云强度改正方法
US8120755B2 (en) Method of correcting a volume imaging equation for more accurate determination of a velocity field of particles in a volume
CN111122598A (zh) 一种钢轨表面缺陷三维检测系统及方法
CN110966956A (zh) 一种基于双目视觉的三维检测装置和方法
García-Moreno et al. LIDAR and panoramic camera extrinsic calibration approach using a pattern plane
CN110223355B (zh) 一种基于双重极线约束的特征标志点匹配方法
CN113324483A (zh) 一种用于中厚板尺寸的测量装置及其测量方法
CN111637834A (zh) 一种三维数据测量装置及方法
CN105717499B (zh) 激光测距仪偏转角测量与校正系统及方法
US20200007843A1 (en) Spatiotemporal calibration of rgb-d and displacement sensors
JP6180158B2 (ja) 位置姿勢計測装置、位置姿勢計測装置の制御方法、およびプログラム
CN110458785B (zh) 一种基于图像传感的磁悬浮球悬浮间隙检测方法
Schramm et al. Data fusion for 3D thermal imaging using depth and stereo camera for robust self-localization
CN109506629B (zh) 一种水下核燃料组件检测装置旋转中心标定的方法
CN114170321A (zh) 一种基于测距的相机自标定方法及系统
So et al. Calibration of a dual-laser triangulation system for assembly line completeness inspection
Fuchs et al. Calibration and registration for precise surface reconstruction with ToF cameras
CN204730813U (zh) 一种基于对称双线激光角度可控的中厚钢板形貌检测系统
CN113393509B (zh) 一种激光雷达多径补偿方法
Isgro et al. An open system for 3D data acquisition from multiple sensor
Uriarte et al. Modeling distance nonlinearity in tof cameras and correction based on integration time offsets

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant