CN114800873B - 一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 - Google Patents
一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 Download PDFInfo
- Publication number
- CN114800873B CN114800873B CN202210461110.2A CN202210461110A CN114800873B CN 114800873 B CN114800873 B CN 114800873B CN 202210461110 A CN202210461110 A CN 202210461110A CN 114800873 B CN114800873 B CN 114800873B
- Authority
- CN
- China
- Prior art keywords
- sand
- aggregate
- camera
- height
- stone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000000463 material Substances 0.000 title claims abstract description 64
- 238000001514 detection method Methods 0.000 title claims abstract description 40
- 238000002156 mixing Methods 0.000 title claims abstract description 24
- 230000005540 biological transmission Effects 0.000 title claims abstract description 19
- 239000004576 sand Substances 0.000 claims abstract description 144
- 239000004575 stone Substances 0.000 claims abstract description 63
- 238000013507 mapping Methods 0.000 claims abstract description 22
- 238000000034 method Methods 0.000 claims abstract description 19
- 238000003860 storage Methods 0.000 claims abstract description 19
- 238000007599 discharging Methods 0.000 claims abstract description 14
- 230000008569 process Effects 0.000 claims abstract description 9
- 238000003384 imaging method Methods 0.000 claims description 26
- 238000012545 processing Methods 0.000 claims description 21
- 238000012549 training Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 5
- 238000013135 deep learning Methods 0.000 claims description 4
- 238000009826 distribution Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 claims description 4
- 238000007500 overflow downdraw method Methods 0.000 claims description 4
- 238000007781 pre-processing Methods 0.000 claims description 4
- 238000005259 measurement Methods 0.000 abstract description 12
- 238000005516 engineering process Methods 0.000 description 11
- 238000010276 construction Methods 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000011897 real-time detection Methods 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 239000012237 artificial material Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000004566 building material Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003245 coal Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B28—WORKING CEMENT, CLAY, OR STONE
- B28C—PREPARING CLAY; PRODUCING MIXTURES CONTAINING CLAY OR CEMENTITIOUS MATERIAL, e.g. PLASTER
- B28C7/00—Controlling the operation of apparatus for producing mixtures of clay or cement with other substances; Supplying or proportioning the ingredients for mixing clay or cement with other substances; Discharging the mixture
- B28C7/0046—Storage or weighing apparatus for supplying ingredients
- B28C7/0053—Storage containers, e.g. hoppers, silos, bins
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B28—WORKING CEMENT, CLAY, OR STONE
- B28C—PREPARING CLAY; PRODUCING MIXTURES CONTAINING CLAY OR CEMENTITIOUS MATERIAL, e.g. PLASTER
- B28C7/00—Controlling the operation of apparatus for producing mixtures of clay or cement with other substances; Supplying or proportioning the ingredients for mixing clay or cement with other substances; Discharging the mixture
- B28C7/04—Supplying or proportioning the ingredients
- B28C7/0454—Volumetric measuring devices, e.g. for consecutively delivering predetermined volumes of ingredients
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01F—MEASURING VOLUME, VOLUME FLOW, MASS FLOW OR LIQUID LEVEL; METERING BY VOLUME
- G01F23/00—Indicating or measuring liquid level or level of fluent solid material, e.g. indicating in terms of volume or indicating by means of an alarm
- G01F23/80—Arrangements for signal processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/11—Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Dispersion Chemistry (AREA)
- Theoretical Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Data Mining & Analysis (AREA)
- Fluid Mechanics (AREA)
- Algebra (AREA)
- Operations Research (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明公开了一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,S1、获取视频流信息,使用5G网络摄像头拍摄高位料仓内骨料的上下料进程的视频图像,提取检测区域图像帧序列中的关键区域;S2、提取砂石骨料的关键特征,获取砂石骨料的峰与谷状态;S3、建立图像坐标系与世界坐标系的对应关系;S4、计算砂石骨料料位高度,结合峰或谷状态下得到的像素信息,对峰或谷进行定位,结合建立的几何空间映射关系确定砂石骨料的高度。通过使用5G网络摄像头实时获取砂石料位图像,结合AI智能算法对砂石不同状态进行检测识别,解决一般混凝土搅拌站砂石存储仓存在的砂石料位测量困难、不准确、非实时的问题。
Description
技术领域
本发明属于混凝土搅拌站砂石料位检测技术领域,尤其涉及一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统。
背景技术
混凝土是当代最大宗的人造材料,也是最重要的建筑材料,广泛应用于机场、码头、高速公路及城市建设等场景,在工程建设和建筑业中占有举足轻重的地位。随着国民经济的持续稳定增长,建筑业有着广阔的发展前景。大批的工程建设需要优质、高效地完成,混凝土工程质量直接影响和决定着建设工程的质量,而混凝土各组成物料的精确计量是混凝土质量的可靠保证,砂石料位测量是混凝土组分计量的重要环节之一。砂石储仓料位是生产人员控制时产、磅房人员安排销售车次的重要参考数据,料位反馈不准确不及时易发生爆仓或缺料事件,存在较大的安全风险。混凝土各组成物料的精确计量是混凝土质量的可靠保证,储仓料位测量的准确性和灵敏性尤为重要。近年来,为方便混凝土作业及减少砂石骨料的存储空间,混凝土行业设计出一种高位料仓存储砂石骨料,但并未实现砂石料位的实时检测。因此,开发设计一种适用于混凝土搅拌站高位料仓环境下的料位在线监测方法,对获得高效、安全混凝土工作具有重要意义。
目前在高位料仓砂石料位测量中,还未有对砂石料位实时检测的方法。传统的人工测量方法缺乏客观性,测量精度低,且不能及时反馈料位变化。在实际应用中人工测量的方法缺乏便捷性,存在工作环境恶劣,管理落后,计算困难等问题。而现代的砂石料位检测,主要借鉴国内外煤堆高度的测量方法,如采用雷达料位计、重锤料位计、激光检测等基于相关料位传感器获取信息,易受工作环境中粉尘、湿度、冲击、震动等条件影响,传感器也会因老化等原因性能受损,进而直接影响检测系统的工作效率。除此之外,高成本亦为阻碍各种传感器测量技术推广的主要原因。因此建筑行业储仓骨料料位的实时精准检测仍是一个迫切需要解决的问题。
随着相机传感器和图像处理技术的进步,基于机器视觉的工业监测领域在近些年迅速发展,视频、图像等多媒体数据中的信息也在不断被人挖掘,为进一步的决策提供依据。为了达到砂石料位实时测量,可根据砂石存储的物理特性,结合视觉图像处理技术,将能获得有效的料位数据信息。
人工智能(AI,Artificial Intelligence)是一门新的技术科学,用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统。为了进一步达到高位料仓内对砂石料位的实时监测,将AI智能处理技术和目标检测技术相结合,这样就更加智能地获得有效数据信息。其中,目标检测技术在不断改进,视频、图像等多媒体数据中的信息在不断被人挖掘,进一步为各种决策做出依据。
5G(5th Generation Mobile Communication Technology)技术具有高速度、低延时和大连接特点等优势,支持高峰值速率、超高密度连接和毫秒级时延,满足间歇性小数据业务的传输需求。5G技术将给混凝土行业的砂石存储智能化建设带来垂直业务领域的巨大变化。研发基于5G技术的高端智能型砂石料位监测系统势在必行。
发明内容
针对现有技术不足,本发明的目的在于提供一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,通过使用5G网络摄像头实时获取砂石料位图像,结合AI智能算法对砂石不同状态进行检测识别,解决一般混凝土搅拌站砂石存储仓存在的砂石料位测量困难、不准确、非实时的问题。
本发明提供如下技术方案:
一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,包括以下步骤:
S1、获取视频流信息,使用5G网络摄像头拍摄高位料仓内骨料的上下料进程的视频图像,提取检测区域图像帧序列中的关键区域,并对图像进行预处理;
S2、提取砂石骨料的关键特征,获取砂石骨料的峰与谷状态,统计多个主要物理特征的数据,判断砂石状态信息,计算出砂石峰或谷状态下对应的像素点的大小,记录下每个砂石状态下的高度信息;
S3、建立图像坐标系与世界坐标系的对应关系,根据获取的视频流信息和提取的砂石骨料关键特征建立摄像头成像系统与被测得的峰或谷的几何空间映射关系;
S4、计算砂石骨料料位高度,结合峰或谷状态下得到的像素信息,对峰或谷进行定位,结合建立的几何空间映射关系确定砂石骨料的高度。
优选的,模拟砂石骨料的上下料过程获取料仓内骨料的状态及高度信息,将砂石骨料峰或谷状态下的多层边角轮廓特征、纹理周期特征与落体分布特征,作为图像智能处理的依据,判断砂石骨料的状态。
优选的,对峰或谷的位置进行定位,根据小孔成像原理,建立摄像头成像系统与被测得的峰或谷的几何空间映射关系。
优选的,将深度学习与多特征融合方法得出的砂石骨料状态及其定位信息与几何空间映射关系相结合求出料位高度,最后使用摄像头对料仓内砂石骨料的高度与实际测得数值进行高度映射。
优选的,使用确定的方程建立砂石骨料状态识别的模型,边框预测模型的描述方程式为式:
其中tx、ty、tw、th分别为预测砂石骨料状态边界框的中心点坐标及宽高,(bx,by)与(bw,bh)分别为相对应的特征图的中心点坐标及宽高,(tx,ty,tw,th)为相对于先验框的偏移量,(cx,cy)为网格在特征图上的位置,(pw,ph)为先验框相对于特征图的宽高,并将/>作为摄像头成像图片中砂石骨料峰或谷状态下的峰与谷的高度坐标。
优选的,对建立的砂石骨料状态识别模型进行训练,训练模型采用CIOU_Loss做Bounding box的损失函数,如公式所示:
式中d1代表预测框与目标框两个中心点的欧式距离,d2代表最小外接矩形的对角线距离,/>和/>分别代表目标框和预测框各自的宽高比,CIOU_loss考虑了边界框宽高比的尺度信息,从重叠面积、中心点距离和长宽比三个角度进行衡量,使得预测框回归的效果更佳。
优选的,根据小孔成像原理构建摄像头与储仓内峰或谷的特定的几何空间投影模型,得出摄像头与料位对高点的倾角α和料位最高点的图像直角坐标之间的函数关系,经拟合所得函数关系式如式所示。
α(y)=ay+b (3)
其中,a值为0.06315,b的值为10.35067。
优选的,根据边框预测模型的描述方程式与拟合所得函数关系式求出砂石骨料峰、谷状态下的高度,如式(4)所示。
式中,h为骨料料位的最高点,为图像直角坐标中峰或谷上边界的中心坐标,由摄像头与储仓特定的投影模型得出α为摄像头与料仓内料位最高点的倾角,H为摄像头高度,d为摄像头距离峰或谷的水平距离,摄像头焦距f为摄像头内参,均为固定值,其中,H=700mm,d=500mm,f=8mm。
优选的,一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法所采用的系统,包括砂石骨料仓、5G高清摄像头、无线发送端、无线信号接收设备、数据处理与显示终端,所述5G高清摄像头通过无线发送端、无线信号接收设备与数据处理与显示终端连接,所述数据处理与显示终端用于处理5G高清摄像头采集的视频信息数据,计算砂石骨料仓内砂石骨料的高度。
与现有技术相比,本发明具有以下有益效果:
(1)本发明一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,通过使用5G网络摄像头实时获取砂石料位图像,结合AI智能算法对砂石不同状态进行检测识别,解决了一般混凝土搅拌站砂石存储仓存在的砂石料位测量困难、不准确、非实时的问题。
(2)本发明一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,通过建立砂石骨料状态识别的模型和利用损失函数对模型进行训练,提高了模型的精确度,进一步提高了计算砂石骨料料位的精确度,计算误差较小。
(3)本发明一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,根据小孔成像原理构建摄像头与储仓内峰或谷的特定的几何空间投影模型,得出摄像头与料位对高点的倾角α和料位最高点的图像直角坐标之间的函数关系,能够得出砂石骨料峰、谷状态下的高度,对于模拟砂石骨料上、下料工作具有极大帮助。
(4)本发明一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,通过建立摄像头与储仓特定的投影模型,记录每一次上、下料后的料位高度,并记录摄像头倾角,构建高度与倾角的线性拟合方程,并与得到的砂石骨料峰或谷状态下对应的图像直角坐标进行高度映射,进而求取骨料的料位,使测量砂石存储仓的砂石料位更加便捷。
附图说明
为了更清楚地说明本发明实施方式的技术方案,下面将对实施方式中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明的砂石料位智能测量方法流程图;
图2为本发明的高清摄像头砂石料仓实景装置图;
图3为本发明砂石骨料状态判断流程图;
图4为本发明砂石骨料状态判断示意图;
图5为本发明摄像头成像系统与储仓内峰、谷的几何关系示意图;
图6为本发明图像坐标与实际成像角度之间的映射关系流程图;
具体实施方式
为使本发明实施方式的目的、技术方案和优点更加清楚,下面将结合本发明实施方式中的附图,对本发明实施方式中的技术方案进行清楚、完整地描述。显然,所描述的实施方式是本发明一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
因此,以下对在附图中提供的本发明的实施方式的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
实施例一:
如图1-6所示,一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,包括以下步骤:
S1、获取视频流信息,使用5G网络摄像头拍摄高位料仓内骨料的上下料进程的视频图像,提取检测区域图像帧序列中的关键区域,并对图像进行预处理;
S2、提取砂石骨料的关键特征,获取砂石骨料的峰与谷状态,统计多个主要物理特征的数据,判断砂石状态信息,计算出砂石峰或谷状态下对应的像素点的大小,记录下每个砂石状态下的高度信息;模拟砂石骨料的上下料过程获取料仓内骨料的状态及高度信息,将砂石骨料峰或谷状态下的多层边角轮廓特征、纹理周期特征与落体分布特征,作为图像智能处理的依据,判断砂石骨料的状态。
S3、建立图像坐标系与世界坐标系的对应关系,根据获取的视频流信息和提取的砂石骨料关键特征建立摄像头成像系统与被测得的峰或谷的几何空间映射关系;对峰或谷的位置进行定位,根据小孔成像原理,建立摄像头成像系统与被测得的峰或谷的几何空间映射关系。
S4、计算砂石骨料料位高度,结合峰或谷状态下得到的像素信息,对峰或谷进行定位,结合建立的几何空间映射关系确定砂石骨料的高度。
将深度学习与多特征融合方法得出的砂石骨料状态及其定位信息与几何空间映射关系相结合求出料位高度,最后使用摄像头对料仓内砂石骨料的高度与实际测得数值进行高度映射。
使用确定的方程建立砂石骨料状态识别的模型,边框预测模型的描述方程式为式:
其中tx、ty、tw、th分别为预测砂石骨料状态边界框的中心点坐标及宽高,(bx,by)与(bw,bh)分别为相对应的特征图的中心点坐标及宽高,(tx,ty,tw,th)为相对于先验框的偏移量,(cx,cy)为网格在特征图上的位置,(pw,ph)为先验框相对于特征图的宽高,并将/>作为摄像头成像图片中砂石骨料峰或谷状态下的峰与谷的高度坐标。
对建立的砂石骨料状态识别模型进行训练,训练模型采用CIOU_Loss做Boundingbox的损失函数,如公式所示:
式中d1代表预测框与目标框两个中心点的欧式距离,d2代表最小外接矩形的对角线距离,/>和/>分别代表目标框和预测框各自的宽高比,CIOU_loss考虑了边界框宽高比的尺度信息,从重叠面积、中心点距离和长宽比三个角度进行衡量,使得预测框回归的效果更佳。
根据小孔成像原理构建摄像头与储仓内峰或谷的特定的几何空间投影模型,得出摄像头与料位对高点的倾角α和料位最高点的图像直角坐标之间的函数关系,经拟合所得函数关系式如式所示。
α(y)=ay+b (3)
其中,a值为0.06315,b的值为10.35067。
根据边框预测模型的描述方程式与拟合所得函数关系式求出砂石骨料峰、谷状态下的高度,如式(4)所示。
式中,h为骨料料位的最高点,为图像直角坐标中峰或谷上边界的中心坐标,由摄像头与储仓特定的投影模型得出α为摄像头与料仓内料位最高点的倾角,H为摄像头高度,d为摄像头距离峰或谷的水平距离,摄像头焦距f为摄像头内参,均为固定值,其中,H=700mm,d=500mm,f=8mm。
由上述公式所得的砂石骨料高度检测模型,对于模拟砂石骨料上、下料工作具有极大帮助。
实施例二
如图1-6所示,一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,包括以下步骤:
S1、获取视频流信息,使用5G网络摄像头拍摄高位料仓内骨料的上下料进程的视频图像,提取检测区域图像帧序列中的关键区域,并对图像进行预处理和存储。
S2、提取砂石骨料的关键特征,获取砂石骨料的峰与谷状态,统计多个主要物理特征的数据,判断砂石状态信息,计算出砂石峰或谷状态下对应的像素点的大小,记录下每个砂石状态下的高度信息;模拟砂石骨料的上下料过程获取料仓内骨料的状态及高度信息,将砂石骨料峰或谷状态下的多层边角轮廓特征、纹理周期特征与落体分布特征,作为图像智能处理的依据,判断砂石骨料的状态。
S3、建立图像坐标系与世界坐标系的对应关系,根据获取的视频流信息和提取的砂石骨料关键特征建立摄像头成像系统与被测得的峰或谷的几何空间映射关系;对峰或谷的位置进行定位,根据小孔成像原理,建立摄像头成像系统与被测得的峰或谷的几何空间映射关系。
S4、计算砂石骨料料位高度,结合峰或谷状态下得到的像素信息,对峰或谷进行定位,结合建立的几何空间映射关系确定砂石骨料的高度。将深度学习与多特征融合方法得出的砂石骨料状态及其定位信息与几何空间映射关系相结合求出料位高度,最后使用摄像头对料仓内砂石骨料的高度与实际测得数值进行高度映射。
S5、写出料位高度并保存监测视频。
使用确定的方程建立砂石骨料状态识别的模型,边框预测模型的描述方程式为式:
其中tx、ty、tw、th分别为预测砂石骨料状态边界框的中心点坐标及宽高,(bx,by)与(bw,bh)分别为相对应的特征图的中心点坐标及宽高,(tx,ty,tw,th)为相对于先验框的偏移量,(cx,cy)为网格在特征图上的位置,(pw,ph)为先验框相对于特征图的宽高,并将/>作为摄像头成像图片中砂石骨料峰或谷状态下的峰与谷的高度坐标。
对建立的砂石骨料状态识别模型进行训练,训练模型采用CIOU_Loss做Boundingbox的损失函数,如公式所示:
式中d1代表预测框与目标框两个中心点的欧式距离,d2代表最小外接矩形的对角线距离,/>和/>分别代表目标框和预测框各自的宽高比,CIOU_loss考虑了边界框宽高比的尺度信息,从重叠面积、中心点距离和长宽比三个角度进行衡量,使得预测框回归的效果更佳。
根据小孔成像原理构建摄像头与储仓内峰或谷的特定的几何空间投影模型,得出摄像头与料位对高点的倾角α和料位最高点的图像直角坐标之间的函数关系,经拟合所得函数关系式如式所示。
α(y)=ay+b (3)
其中,a值为0.06315,b的值为10.35067。
根据边框预测模型的描述方程式与拟合所得函数关系式求出砂石骨料峰、谷状态下的高度,如式(4)所示。
式中,h为骨料料位的最高点,为图像直角坐标中峰或谷上边界的中心坐标,由摄像头与储仓特定的投影模型得出α为摄像头与料仓内料位最高点的倾角,H为摄像头高度,d为摄像头距离峰或谷的水平距离,摄像头焦距f为摄像头内参,均为固定值,其中,H=700mm,d=500mm,f=8mm。
由上述公式所得的砂石骨料高度检测模型,对于模拟砂石骨料上、下料工作具有极大帮助。
结合图1所示,系统首先获取视频流信息,对图像进行预处理;接着提取砂石骨料的关键特征,然后判断出骨料的峰或谷状态,若判断出状态之后则对判断出分峰或谷进行定位;定位信息结合摄像头与储仓特定的投影模型以及图像直角坐标与实际成像角度之间的映射关系,计算出砂石骨料料位高度,同时存储实时检测视频。图2为本发明的场景示意图,高清摄像头位于料仓某一边正中间的上方,当开始检测后,实时处理视频,实时写出检测内容并保存检测视频。砂石骨料料位检测模型系统分两部分构成,一部分为砂石骨料的上下料工作的实现和基于5G高清摄像图像的获取;另一部分是图像数据处理与结果显示部分。图3为本专利的技术路线图,首先对训练样本图像进行特征提取和训练学习,建立砂石骨料料位智能化检测模型;然后再对测试的样本图像进行处理和预测对比,得出实际的砂石骨料料位智能检测结果。图4为本发明砂石骨料状态图。其中A(左图)表示所检测得到的砂石骨料呈“峰”态,B(右图)表示所检测得到的砂石骨料呈“谷”态。图5为本发明摄像头与与储仓内峰、谷的几何关系示意图。将摄像头放置于料仓某一面正中间的上方,摄像头与所对储仓面的夹角固定,便于求取摄像头与料位最高点的夹角与料位高度之间的关系。其中P为料位最高点,P’为成像系统相平面上对应的料位最高点。H为摄心头高度,h为料位高度,D为摄像头据料位最高点的距离。图6为本发明图像坐标与实际成像角度之间的映射关系流程图。建立摄像头与储仓特定的投影模型,记录每一次上、下料后的料位高度,并记录摄像头倾角,构建高度与倾角的线性拟合方程,并与得到的砂石骨料峰或谷状态下对应的图像直角坐标进行高度映射,进而求取骨料的料位。
实施例三
一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法所采用的系统,包括砂石骨料仓、5G高清摄像头、无线发送端、无线信号接收设备、数据处理与显示终端,所述5G高清摄像头通过无线发送端、无线信号接收设备与数据处理与显示终端连接,所述数据处理与显示终端用于处理5G高清摄像头采集的视频信息数据,计算砂石骨料仓内砂石骨料的高度。
通过上述技术方案得到的装置是一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法及系统,通过使用5G网络摄像头实时获取砂石料位图像,结合AI智能算法对砂石不同状态进行检测识别,解决一般混凝土搅拌站砂石存储仓存在的砂石料位测量困难、不准确、非实时的问题。
以上所述仅为本发明的优选实施方式而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化;凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (3)
1.一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,其特征在于,包括以下步骤:
S1、获取视频流信息,使用5G网络摄像头拍摄高位料仓内骨料的上下料进程的视频图像,提取检测区域图像帧序列中的关键区域,并对图像进行预处理;
S2、提取砂石骨料的关键特征,获取砂石骨料的峰与谷状态,统计多个主要物理特征的数据,判断砂石状态信息,计算出砂石峰或谷状态下对应的像素点的大小,记录下每个砂石状态下的高度信息;
S3、建立图像坐标系与世界坐标系的对应关系,根据获取的视频流信息和提取的砂石骨料关键特征建立摄像头成像系统与被测得的峰或谷的几何空间映射关系;
S4、计算砂石骨料料位高度,结合峰或谷状态下得到的像素信息,对峰或谷进行定位,结合建立的几何空间映射关系确定砂石骨料的高度;
所述基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法采用以下的检测系统,包括砂石骨料仓、5G高清摄像头、无线发送端、无线信号接收设备、数据处理与显示终端,所述5G高清摄像头通过无线发送端、无线信号接收设备与数据处理与显示终端连接,所述数据处理与显示终端用于处理5G高清摄像头采集的视频信息数据,计算砂石骨料仓内砂石骨料的高度;
将深度学习与多特征融合方法得出的砂石骨料状态及其定位信息与几何空间映射关系相结合求出料位高度,最后使用摄像头对料仓内砂石骨料的高度与实际测得数值进行高度映射;使用确定的方程建立砂石骨料状态识别的模型,边框预测模型的描述方程式为式(1):
其中tx、ty、tw、th分别为预测砂石骨料状态边界框的中心点坐标及宽高,(bx,by)与(bw,bh)分别为相对应的特征图的中心点坐标及宽高,(tx,ty,tw,th)为相对于先验框的偏移量,(cx,cy)为网格在特征图上的位置,(pw,ph)为先验框相对于特征图的宽高,并将/>作为摄像头成像图片中砂石骨料峰或谷状态下的峰与谷的高度坐标;
对建立的砂石骨料状态识别模型进行训练,训练模型采用CIOU_Loss做Bounding box的损失函数,如公式所示:
式中d1代表预测框与目标框两个中心点的欧式距离,d2代表最小外接矩形的对角线距离,/>和/>分别代表目标框和预测框各自的宽高比,CIOU_loss考虑了边界框宽高比的尺度信息,从重叠面积、中心点距离和长宽比三个角度进行衡量,使得预测框回归的效果更佳;
根据小孔成像原理构建摄像头与储仓内峰或谷的特定的几何空间投影模型,得出摄像头与料位最高点的倾角α和料位最高点的图像直角坐标之间的函数关系,经拟合所得函数关系式如式所示:
α (y)=ay+b (3)
其中,a值为0.06315,b的值为10.35067;
根据边框预测模型的描述方程式与拟合所得函数关系式求出砂石骨料峰、谷状态下的高度,如式(4)所示:
式中,h为骨料料位的最高点,为图像直角坐标中峰或谷上边界的中心坐标,由摄像头与储仓特定的投影模型得出α为摄像头与料仓内料位最高点的倾角,H为摄像头高度,d为摄像头距离峰或谷的水平距离,摄像头焦距f为摄像头内参,均为固定值,其中,H=700mm,d=500mm,f=8mm。
2.根据权利要求1所述一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,其特征在于,模拟砂石骨料的上下料过程获取料仓内骨料的状态及高度信息,将砂石骨料峰或谷状态下的多层边角轮廓特征、纹理周期特征与落体分布特征,作为图像智能处理的依据,判断砂石骨料的状态。
3.根据权利要求1所述一种基于5G数据传输的混凝土搅拌站砂石料位AI智能检测方法,其特征在于,对峰或谷的位置进行定位,根据小孔成像原理,建立摄像头成像系统与被测得的峰或谷的几何空间映射关系。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210461110.2A CN114800873B (zh) | 2022-04-28 | 2022-04-28 | 一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210461110.2A CN114800873B (zh) | 2022-04-28 | 2022-04-28 | 一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114800873A CN114800873A (zh) | 2022-07-29 |
CN114800873B true CN114800873B (zh) | 2024-04-12 |
Family
ID=82509297
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210461110.2A Active CN114800873B (zh) | 2022-04-28 | 2022-04-28 | 一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114800873B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN208000147U (zh) * | 2018-03-26 | 2018-10-23 | 山推建友机械股份有限公司 | 基于图片识别的骨料监控系统 |
CN109285145A (zh) * | 2018-08-12 | 2019-01-29 | 浙江农林大学 | 基于智能手机的多株立木高度测量方法 |
CN110672020A (zh) * | 2019-06-14 | 2020-01-10 | 浙江农林大学 | 一种基于单目视觉的立木高度测量方法 |
CN111751253A (zh) * | 2020-07-06 | 2020-10-09 | 重庆理工大学 | 一种混凝土骨料检测模型的形成方法及质量检测方法 |
CN112528913A (zh) * | 2020-12-18 | 2021-03-19 | 中山艾尚智同信息科技有限公司 | 一种基于图像的砂石颗粒物粒径检测分析系统 |
CN213842314U (zh) * | 2021-05-17 | 2021-07-30 | 新疆久筑建材有限责任公司 | 一种骨料仓内固体料位自动检测装置 |
CN113237534A (zh) * | 2021-06-08 | 2021-08-10 | 宁波市水库管理中心 | 一种旋盘式量水堰水位监测系统 |
CN114274362A (zh) * | 2021-12-21 | 2022-04-05 | 三一汽车制造有限公司 | 泵送设备与搅拌设备的协同控制方法、系统及作业机械 |
CN114332749A (zh) * | 2021-11-16 | 2022-04-12 | 河海大学 | 一种基于深度学习的采砂船采砂监控方法 |
-
2022
- 2022-04-28 CN CN202210461110.2A patent/CN114800873B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN208000147U (zh) * | 2018-03-26 | 2018-10-23 | 山推建友机械股份有限公司 | 基于图片识别的骨料监控系统 |
CN109285145A (zh) * | 2018-08-12 | 2019-01-29 | 浙江农林大学 | 基于智能手机的多株立木高度测量方法 |
CN110672020A (zh) * | 2019-06-14 | 2020-01-10 | 浙江农林大学 | 一种基于单目视觉的立木高度测量方法 |
CN111751253A (zh) * | 2020-07-06 | 2020-10-09 | 重庆理工大学 | 一种混凝土骨料检测模型的形成方法及质量检测方法 |
CN112528913A (zh) * | 2020-12-18 | 2021-03-19 | 中山艾尚智同信息科技有限公司 | 一种基于图像的砂石颗粒物粒径检测分析系统 |
CN213842314U (zh) * | 2021-05-17 | 2021-07-30 | 新疆久筑建材有限责任公司 | 一种骨料仓内固体料位自动检测装置 |
CN113237534A (zh) * | 2021-06-08 | 2021-08-10 | 宁波市水库管理中心 | 一种旋盘式量水堰水位监测系统 |
CN114332749A (zh) * | 2021-11-16 | 2022-04-12 | 河海大学 | 一种基于深度学习的采砂船采砂监控方法 |
CN114274362A (zh) * | 2021-12-21 | 2022-04-05 | 三一汽车制造有限公司 | 泵送设备与搅拌设备的协同控制方法、系统及作业机械 |
Non-Patent Citations (1)
Title |
---|
董洪义.深度学习之PyTorch物体检测实战.北京:机械工业出版社,2020,第173-174页. * |
Also Published As
Publication number | Publication date |
---|---|
CN114800873A (zh) | 2022-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108845536B (zh) | 一种基于视频技术的堆场扬尘实时检测和智能洒水降尘装置及方法 | |
CN105956942B (zh) | 基于机器视觉的电力管廊钢筋网质量检测方法及检测装置 | |
CN110065790B (zh) | 一种基于视觉算法的煤矿皮带转运机头堵塞检测方法 | |
CN106290388A (zh) | 一种绝缘子故障自动检测方法 | |
CN108921165B (zh) | 基于水尺图像的水位识别方法 | |
CN110443093A (zh) | 一种面向智能化的红外数字全景系统及其仓库管理方法 | |
CN109472261B (zh) | 一种基于计算机视觉的粮仓储粮数量变化自动监测方法 | |
CN103096121B (zh) | 一种摄像头移动检测方法及装置 | |
CN110648364A (zh) | 一种多维度空间固废视觉检测定位及识别方法与系统 | |
CN107798293A (zh) | 一种道路裂缝检测装置 | |
CN103940344B (zh) | 一种高精度远程位移传感器 | |
CN112184707A (zh) | 基于点云数据的渣土车土石方装载判断方法以及判断系统 | |
CN113869196B (zh) | 一种基于激光点云数据多特征分析的车型分类方法及装置 | |
CN114912181A (zh) | 一种基于人工智能的路面边坡安全监测分析系统 | |
CN114800873B (zh) | 一种基于5g数据传输的混凝土搅拌站砂石料位ai智能检测方法及系统 | |
CN113420670A (zh) | 基于高分遥感输变电线路迁改环水保监管方法 | |
CN202562477U (zh) | 集装箱码头堆场集装箱危险堆存方式检测装置 | |
CN115908370A (zh) | 一种基于图像逆透视变换实现水位检测的方法 | |
CN112883778B (zh) | 一种基于计算机视觉的道路井盖高差识别方法及设备 | |
CN111723792B (zh) | 适用于刚柔接触网的实时定位点识别方法 | |
CN108871226B (zh) | 一种积雪深度的测量方法、装置及系统 | |
CN112037250A (zh) | 一种目标车辆矢量轨迹追踪和工程视图建模方法、装置 | |
CN108344384A (zh) | 一种基于车辆采集信息的坑槽自动识别方法 | |
CN111102932A (zh) | 一种基坑安全自动巡查方法及系统 | |
CN115345854B (zh) | 一种基于多区域搜索的水位识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |