CN107346542B - 一种基于机器视觉的防液压支架挤死的预警系统及方法 - Google Patents

一种基于机器视觉的防液压支架挤死的预警系统及方法 Download PDF

Info

Publication number
CN107346542B
CN107346542B CN201710456996.0A CN201710456996A CN107346542B CN 107346542 B CN107346542 B CN 107346542B CN 201710456996 A CN201710456996 A CN 201710456996A CN 107346542 B CN107346542 B CN 107346542B
Authority
CN
China
Prior art keywords
image
hydraulic support
image sensor
images
cross
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710456996.0A
Other languages
English (en)
Other versions
CN107346542A (zh
Inventor
王忠宾
魏东
谭超
徐西华
满溢桥
刘婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China University of Mining and Technology CUMT
Original Assignee
China University of Mining and Technology CUMT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China University of Mining and Technology CUMT filed Critical China University of Mining and Technology CUMT
Priority to CN201710456996.0A priority Critical patent/CN107346542B/zh
Publication of CN107346542A publication Critical patent/CN107346542A/zh
Application granted granted Critical
Publication of CN107346542B publication Critical patent/CN107346542B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Quality & Reliability (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

本发明公开了一种基于机器视觉的防液压支架挤死的预警系统及方法,包括分别安装于每个液压支架双立柱相同位置的十字目标靶、图像传感器和微型计算机模块,图像传感器固定在液压支架护帮板的内侧,微型计算机模块固定在液压支架上,所述图像传感器与微型计算机模块连接。本发明通过视觉图像分析,使得每个液压支架在进行立柱下降、移架、立柱升起运动时均可被监测,进而形成若干个周期,当两个液压支架之间的距离过小时,发出预警同时反馈该液压支架的架号,便于工作人员及时采取措施,防止发生两个液压支架相互挤死的情况。

Description

一种基于机器视觉的防液压支架挤死的预警系统及方法
技术领域
本发明涉及一种预警系统及方法,具体是一种基于机器视觉的防液压支架挤死的预警系统及方法。
背景技术
随着综采工作“少人化”的提出和持续的发展,综采面内的信息采集和管理日益成为许多学者和专家日益重视的话题。随着机器视觉的发展,各种图像采集设备发展迅速,图像传感器的体型越来越小,功能日益强大,已经越来越成为空间信息获取的主要来源。
液压支架的挤死问题一直是综采工作所需面对的重要问题之一。由于采面底板不平或者液压支架推移不平衡,都会造成液压支架不能按照垂直煤壁方向前进,造成相邻两液压支架产生相互靠近运动的趋势,如果这种趋势继续运动,将造成两液压支架相互挤死,不能继续运动,造成整个综采平面的瘫痪,由于液压支架重量大,很难对液压支架位置进行滞后的调整,整个调整周期较长,甚至可能造成整个综采面数周的瘫痪,造成巨额经济损失。
发明内容
针对上述现有技术存在的问题,本发明提供一种基于机器视觉的防液压支架挤死的预警系统及方法,通过视觉图像分析,可在液压支架进行立柱下降、移架、立柱升起运动过程中当两个液压支架之间的距离过小时,发出预警同时反馈该液压支架的架号,便于工作人员及时采取措施,防止发生两个液压支架相互挤死的情况。
为了实现上述目的,本发明采用的技术方案是:一种基于机器视觉的防液压支架挤死的预警系统,包括分别安装于每个液压支架双立柱相同位置的十字目标靶、图像传感器和微型计算机模块,图像传感器固定在液压支架护帮板的内侧,微型计算机模块固定在液压支架上,所述图像传感器与微型计算机模块连接。
进一步,所述图像传感器为防爆本安型摄像头。
进一步,所述十字目标靶为贴有十字形LED灯组的矩形标记靶。
进一步,还包括报警装置,所述报警装置与微型计算机模块连接。
一种基于机器视觉的防液压支架挤死的预警方法,具体步骤为:
(1)将十字目标靶和图像传感器安装完成后,在图像传感器初次采集图像之前,人工调整图像传感器角度,使每台液压支架上的图像传感器均能采集到本架和其移架方向上相邻液压支架的总共四个十字目标靶图像,并使得两个相邻液压支架上的相邻的十字目标靶图像呈于图像平面中心,完成图像传感器角度调节过程,并将该图像进行高斯平滑处理后作为模板存储在微型计算机模块中;
(2)在采煤机完成当前液压支架位置的截割工作后,该液压支架依次进行立柱下降、移架、立柱升起运动,到达所需位置时,打开护帮板;
(3)在护帮板完全打开后处于护帮板内侧的图像传感器开始拍摄采集图像,并将该图像传给微型计算机模块;
(4)微型计算机模块接收到采集的图像后,采用中值滤波对图像进行降噪操作;
(5)微型计算机模块利用模板进行图像匹配,确定采集图像中的所有十字LED灯组图像中所在位置,对图像进行区域分割,所用模板为步骤(1)得到的模板图像,分割方式为两种,产生三组数据空间,分别为:
A、采用由采集图像中心像素开始回字形向外侧搜索匹配模板的方式,当采集到靠近中心像素最近的两个与模板匹配的十字目标靶图像时停止搜索,并将该包括两个匹配图像的区域分割成图像a;
B、上述两个LED十字图像中每个LED十字图像本身各自一侧相邻的LED十字所组成的图像单元,共两组,分别为图像b和图像c;
(6)分别根据图像b和图像c中LED十字图像中水平边和竖直边的长度,利用仿射变换理论得出相对于射影空间在实际空间中所成相对角度,进而得到相邻两个液压支架的相对角度,从而按照实际工况,计算出该工况下的许用安全距离;
(7)将图像a中两个LED十字图像单元之间的相互距离与步骤(5)得到的许用安全距离进行比对,若相互距离小于许用安全距离,则微型计算机模块将当前的液压支架架号发送给上层控制单元,并通过报警装置预警;
(8)在下一个液压支架进行立柱下降、移架、立柱升起运动时,重复步骤(2)~(7)对该液压支架进行监测。
与现有技术相比,本发明采用十字目标靶、图像传感器和微型计算机模块相结合的方式,每个液压支架在进行立柱下降、移架、立柱升起运动时均可被监测,进而形成若干个周期,对每个监控周期之后的液压支架挤死危险进行评估,能有效地避免液压支架之间相互挤死的危险,且便于人员对危险情况进行提前排险处理,确保了综采面的稳定安全运行,大大减少了由液压支架挤死造成的巨额财产损失,并有效降低采面人员的工作强度,利于采面“少人化”工作的开展,且利用掩护式液压支架的固有的打开和回收护帮板的动作确保了图像采集模块的安全使用,减少由于截割造成的飞溅物击伤图像传感器的可能,大大增加了图像采集的安全性。
附图说明
图1是本发明中十字目标靶的安装位置示意图;
图2是本发明中图像分割后的三个区域示意图;
图3是本发明中图像传感器的安装位置示意图;
图4是本发明的工作流程图。
具体实施方式
下面将对本发明作进一步说明。
如图1至图4所示,一种基于机器视觉的防液压支架挤死的预警系统,包括分别安装于每个液压支架双立柱相同位置的十字目标靶、图像传感器和微型计算机模块,图像传感器固定在液压支架护帮板的内侧,随护帮板收起隐藏于护帮板与液压支架顶梁之间,以起到在采煤机截割过程中,避免溅射物体等对图像传感器造成损坏。微型计算机模块固定在液压支架上,所述图像传感器与微型计算机模块连接。
进一步,所述图像传感器为防爆本安型摄像头。采用防爆本安型摄像头可适应矿井下的特殊工况环境。
进一步,所述十字目标靶为贴有十字形LED灯组的矩形标记靶。
进一步,还包括报警装置,所述报警装置与微型计算机模块连接。设置报警装置可在两个液压支架之间发生挤死可能时,进行报警提示矿井下人员注意,及时采取相应措施。
一种基于机器视觉的防液压支架挤死的预警方法,具体步骤为:
(1)将十字目标靶和图像传感器安装完成后,在图像传感器初次采集图像之前,由于煤壁基本垂直,故在成像空间内能拍摄到2~3架液压支架朝向煤壁一侧的多个标记靶图像,人工调整图像传感器角度,使每台液压支架上的图像传感器均能采集到本架和其移架方向上相邻液压支架的总共四个十字目标靶图像,并使得两个相邻液压支架上的相邻的十字目标靶图像呈于图像平面中心,完成图像传感器角度调节过程,并将该图像进行高斯平滑处理后作为模板存储在微型计算机模块中;
(2)在采煤机完成当前液压支架位置的截割工作后,该液压支架依次进行立柱下降、移架、立柱升起运动,到达所需位置时,打开护帮板;
(3)在护帮板完全打开后处于护帮板内侧的图像传感器开始拍摄采集图像,并将该图像传给微型计算机模块;
(4)微型计算机模块接收到采集的图像后,为了增加处理速度,采用中值滤波对图像进行降噪操作;
(5)微型计算机模块利用模板进行图像匹配,确定采集图像中的所有十字LED灯组图像中所在位置,对图像进行区域分割。所用模板为步骤(1)得到的模板图像,分割方式为两种,产生三组数据空间,分别为:
A、采用由采集图像中心像素开始回字形向外侧搜索匹配模板的方式,当采集到靠近中心像素最近的两个与模板匹配的十字目标靶图像时停止搜索,并将该包括两个匹配图像的区域分割成图像a;
B、上述两个LED十字图像中每个LED十字图像本身各自一侧相邻的LED十字所组成的图像单元(即为每个液压支架上两十字目标靶所成图像),共两组,分别为图像b和图像c;
(6)分别根据图像b和图像c中LED十字图像中水平边和竖直边的长度,利用仿射变换理论得出相对于射影空间在实际空间中所成相对角度,进而得到相邻两个液压支架的相对角度,从而按照实际工况(可根据支架尺寸,支架间理论安全距离等),计算出该工况下的许用安全距离;
(7)将图像a中两个LED十字图像单元之间的相互距离与步骤(5)得到的许用安全距离进行比对,若相互距离小于许用安全距离,则微型计算机模块将当前的液压支架架号发送给上层控制单元,并通过报警装置预警;
(8)在下一个液压支架进行立柱下降、移架、立柱升起运动时,重复步骤(2)~(7)对该液压支架进行监测。

Claims (3)

1.一种基于机器视觉的防液压支架挤死的预警方法,其特征在于,采用的防液压支架挤死的预警系统包括分别安装于每个液压支架双立柱相同位置的十字目标靶、图像传感器、微型计算机模块和报警装置,图像传感器固定在液压支架护帮板的内侧,微型计算机模块固定在液压支架上,所述图像传感器与微型计算机模块连接,所述报警装置与微型计算机模块连接;该方法的具体步骤为:
(1)将十字目标靶和图像传感器安装完成后,在图像传感器初次采集图像之前,人工调整图像传感器角度,使每台液压支架上的图像传感器均能采集到本架和其移架方向上相邻液压支架的总共四个十字目标靶图像,并使得两个相邻液压支架上的相邻的十字目标靶图像呈于图像平面中心,完成图像传感器角度调节过程,并将该图像进行高斯平滑处理后作为模板存储在微型计算机模块中;
(2)在采煤机完成当前液压支架位置的截割工作后,该液压支架依次进行立柱下降、移架、立柱升起运动,到达所需位置时,打开护帮板;
(3)在护帮板完全打开后处于护帮板内侧的图像传感器开始拍摄采集图像,并将该图像传给微型计算机模块;
(4)微型计算机模块接收到采集的图像后,采用中值滤波对图像进行降噪操作;
(5)微型计算机模块利用模板进行图像匹配,确定采集图像中的所有十字LED灯组图像中所在位置,对图像进行区域分割,所用模板为步骤(1)得到的模板图像,分割方式为两种,产生三组数据空间,分别为:
A、采用由采集图像中心像素开始回字形向外侧搜索匹配模板的方式,当采集到靠近中心像素最近的两个与模板匹配的十字目标靶图像时停止搜索,并将该包括两个匹配图像的区域分割成图像a;
B、上述两个LED十字图像中每个LED十字图像本身各自一侧相邻的LED十字所组成的图像单元,共两组,分别为图像b和图像c;
(6)分别根据图像b和图像c中 LED十字图像中水平边和竖直边的长度,利用仿射变换理论得出相对于射影空间在实际空间中所成相对角度,进而得到相邻两个液压支架的相对角度,从而按照实际工况,计算出该工况下的许用安全距离;
(7)将图像a中两个LED十字图像单元之间的相互距离与步骤(5)得到的许用安全距离进行比对,若相互距离小于许用安全距离,则微型计算机模块将当前的液压支架架号发送给上层控制单元,并通过报警装置预警;
(8)在下一个液压支架进行立柱下降、移架、立柱升起运动时,重复步骤(2)~(7)对该液压支架进行监测。
2. 根据权利要求1 所述的一种基于机器视觉的防液压支架挤死的预警方法,其特征在于,所述图像传感器为防爆本安型摄像头。
3. 根据权利要求1 所述的一种基于机器视觉的防液压支架挤死的预警方法,其特征在于,所述十字目标靶为贴有十字形LED灯组的矩形标记靶。
CN201710456996.0A 2017-06-16 2017-06-16 一种基于机器视觉的防液压支架挤死的预警系统及方法 Active CN107346542B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710456996.0A CN107346542B (zh) 2017-06-16 2017-06-16 一种基于机器视觉的防液压支架挤死的预警系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710456996.0A CN107346542B (zh) 2017-06-16 2017-06-16 一种基于机器视觉的防液压支架挤死的预警系统及方法

Publications (2)

Publication Number Publication Date
CN107346542A CN107346542A (zh) 2017-11-14
CN107346542B true CN107346542B (zh) 2019-12-06

Family

ID=60253604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710456996.0A Active CN107346542B (zh) 2017-06-16 2017-06-16 一种基于机器视觉的防液压支架挤死的预警系统及方法

Country Status (1)

Country Link
CN (1) CN107346542B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110374681B (zh) * 2019-07-24 2020-12-29 精英数智科技股份有限公司 一种移架时危险区域有人的报警方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101149252A (zh) * 2006-09-22 2008-03-26 株式会社拓普康 位置测量装置、位置测量方法和位置测量程序
CN101629809A (zh) * 2009-08-24 2010-01-20 中南大学 巨型模锻液压机活动横梁非工作方向偏移检测方法及装置
CN102223556A (zh) * 2011-06-13 2011-10-19 天津大学 一种多视点立体图像零视差校正方法
CN103399495A (zh) * 2013-08-07 2013-11-20 中国矿业大学 一种液压支架电液控制系统的仿真系统及仿真方法
CN103899344A (zh) * 2014-03-13 2014-07-02 中国矿业大学 一种液压支架顶梁自适应调平方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101149252A (zh) * 2006-09-22 2008-03-26 株式会社拓普康 位置测量装置、位置测量方法和位置测量程序
CN101629809A (zh) * 2009-08-24 2010-01-20 中南大学 巨型模锻液压机活动横梁非工作方向偏移检测方法及装置
CN102223556A (zh) * 2011-06-13 2011-10-19 天津大学 一种多视点立体图像零视差校正方法
CN103399495A (zh) * 2013-08-07 2013-11-20 中国矿业大学 一种液压支架电液控制系统的仿真系统及仿真方法
CN103899344A (zh) * 2014-03-13 2014-07-02 中国矿业大学 一种液压支架顶梁自适应调平方法及装置

Also Published As

Publication number Publication date
CN107346542A (zh) 2017-11-14

Similar Documents

Publication Publication Date Title
CN104049281A (zh) 曲线地铁站台屏蔽门与列车间异物自动检测装置及方法
CN111389763A (zh) 一种基于图像数据处理的煤矸石分选系统和方法
CN104590319A (zh) 异物侵入检测装置和异物侵入检测方法
CN112530115B (zh) 一种电力作业人员防触电现场智能监理成套装置
CN103136514A (zh) 一种基于双向跟踪的停车事件检测方法
CN107346542B (zh) 一种基于机器视觉的防液压支架挤死的预警系统及方法
CN104159080B (zh) 一种基于Hough变换的架空索道脱索检测系统及方法
CN110805081B (zh) 一种挖掘机人员安全防护系统
CN112799339A (zh) 一种基于机器视觉技术预警工人与动态危险源的方法
CN110424960A (zh) 一种用于采煤机割煤作业安全的报警方法及设备
CN116299751A (zh) 一种被动式太赫兹人体安检信息的快速提取方法和装置
CN112253110A (zh) 基于视觉的综采工作面智能自主跟机控制方法以及装置
EP3532764B1 (en) Device and method for monitoring an operating area
CN110359960A (zh) 一种用于煤矿转载机推移的安全报警方法及设备
KR20230080522A (ko) 인공 지능을 이용한 화재 감시 시스템 및 그 제어 방법
CN112377265A (zh) 基于图像识别加速度特征的冲击地压报警方法
CN110374681B (zh) 一种移架时危险区域有人的报警方法、装置及系统
CN205820757U (zh) 激光全景可视塔吊碰撞预警装置
CN107386720A (zh) 垂直循环式立体车库安全管理方法、装置和系统
CN111577275A (zh) 一种采煤机滚筒与液压支架护帮板干涉检测装置及方法
CN114758363B (zh) 一种基于深度学习的绝缘手套佩戴检测方法和系统
CN112288996B (zh) 高压线下预警防护方法、系统、计算机设备及其存储介质
CN104000598B (zh) 一种基于最大内切圆的猪呼吸急促运动建模方法及系统
CN110599739A (zh) 一种基于三维图像及智能视频技术的人员安全检测系统
CN102819736B (zh) 双ccd摄像机自动监控目标侵入的识别方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: No. 1, Tongshan University Road, Xuzhou, Jiangsu Province, Jiangsu

Applicant after: China University of Mining & Technology

Address before: 221000 Xuzhou University Road, Jiangsu, No. 1

Applicant before: China University of Mining & Technology

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant