CN112340608A - 一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 - Google Patents
一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 Download PDFInfo
- Publication number
- CN112340608A CN112340608A CN202011334578.2A CN202011334578A CN112340608A CN 112340608 A CN112340608 A CN 112340608A CN 202011334578 A CN202011334578 A CN 202011334578A CN 112340608 A CN112340608 A CN 112340608A
- Authority
- CN
- China
- Prior art keywords
- lifting hook
- lifting
- point
- steel wire
- wire rope
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004438 eyesight Effects 0.000 title claims abstract description 60
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000012544 monitoring process Methods 0.000 title claims abstract description 28
- 238000012545 processing Methods 0.000 claims abstract description 21
- 230000002265 prevention Effects 0.000 claims abstract description 13
- 238000006243 chemical reaction Methods 0.000 claims abstract description 12
- 229910000831 Steel Inorganic materials 0.000 claims description 68
- 239000010959 steel Substances 0.000 claims description 68
- 230000007246 mechanism Effects 0.000 claims description 9
- 230000003287 optical effect Effects 0.000 claims description 9
- 230000003068 static effect Effects 0.000 claims description 3
- 206010063385 Intellectualisation Diseases 0.000 abstract description 2
- 241000288140 Gruiformes Species 0.000 description 41
- 239000011159 matrix material Substances 0.000 description 23
- 238000005516 engineering process Methods 0.000 description 8
- 239000013598 vector Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000005303 weighing Methods 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 description 1
- 238000007476 Maximum Likelihood Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 1
- 239000010931 gold Substances 0.000 description 1
- 229910052737 gold Inorganic materials 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000009776 industrial production Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 230000004297 night vision Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/18—Control systems or devices
- B66C13/48—Automatic control of crane drives for producing a single or repeated working cycle; Programme control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/04—Auxiliary devices for controlling movements of suspended loads, or preventing cable slack
- B66C13/06—Auxiliary devices for controlling movements of suspended loads, or preventing cable slack for minimising or preventing longitudinal or transverse swinging of loads
- B66C13/063—Auxiliary devices for controlling movements of suspended loads, or preventing cable slack for minimising or preventing longitudinal or transverse swinging of loads electrical
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/16—Applications of indicating, registering, or weighing devices
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/18—Control systems or devices
- B66C13/46—Position indicators for suspended loads or for crane elements
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P70/00—Climate change mitigation technologies in the production process for final industrial or consumer products
- Y02P70/10—Greenhouse gas [GHG] capture, material saving, heat recovery or other energy efficient measures, e.g. motor control, characterised by manufacturing processes, e.g. for rolling metal or metal working
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Control And Safety Of Cranes (AREA)
Abstract
本发明提供的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法，其特征在于，包括双目视觉图像采集系统、图像处理系统和PLC变频控制系统，其中，所述双目视觉图像采集系统用于采集吊钩位置图像信息，并将采集到的图像信息传输至图像处理系统；所述图像处理系统用于对接收到的图像信息进行处理，用以计算吊钩的位置信息和斜拉角度，并将得到的吊钩的位置信息和斜拉角度传输至PLC变频控制系统；所述PLC变频控制系统用于根据接收到的吊钩的位置信息和斜拉角度，对起重机进行防摇摆控制；本发明有效提高了桥式起重机操作的安全性，提升了起重机的自动化、智能化水平。
Description
技术领域
本发明涉及于起重机安全控制技术，具体地涉及一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法。
背景技术
桥式起重机是现代工业生产和起重中实现生产过程制动器点击放大机械化、自动化得重要工具和设备，广泛应用于工矿企业、钢铁化工、铁路交通、港口码头以及物流周转等场所，其使用安全性一直是使用单位和研发人员非常关注的问题。桥式起重机吊装起吊前，钢丝绳的斜拉会带来较为严重的危害。一方面，斜吊时的角度越大，斜吊有可能超负荷，钢丝绳受力增大，甚至会发生钢丝绳被拉断的事故。另一方面，斜吊时产生的水平分力，当重物离开地面或支架的瞬间，将使负载向垂直中心摆动，可能和挂吊人员、周围作业人员或其他物体挤撞而引起事故。因此，桥式起重机吊装操作时，起升钢丝绳要通过吊物的重心，并保持垂直。
目前，主要是通过操作人员人眼判断反复操作调整起重机来解决，调整效率和自动化程度低。现在部分企业采取了起重机防斜拉措施，针对这一问题，目前采取的解决措施是监测起吊时吊钩与起吊中心的斜拉角度，当斜拉角超过给定阈值时开启声光报警，停止起吊。因此对斜拉角度的精确测量显得尤为重要，常用的斜拉角度测量方法有：(1)基于电子角度传感器检测钢丝绳的斜拉角度[1]；(2)基于大小车两个方向上的编码器检测由于钢丝绳斜拉以及斜拉角度[2]；(3)应用机器视觉技术，采集绳长图像，分析钢丝绳倾斜角度[3]；采集吊钩图像，经过图像处理后计算吊钩中心所在位置及偏离起吊中心的角度[4，5]。危刚等在“基于机器视觉的桥式起重机防斜拉控制系统设计”中提出利用单目视觉传感器与绳长编码器计算吊钩斜拉的角度和相对起吊中心的偏差量的方法，取得较好的效果。
[1]谢为金，王惠民，张诗清，等.一种利用角度传感器测量吊钩摆角的方法[J].建筑机械，2013(17):71-74.
[2]Hyla P，Szpytko J.Crane Payload Position Measurement Vision-BasedSystem Dedicated for Anti-sway Solutions[M]//Telematics-Support forTransport.Springer Berlin Heidelberg，2014:404-413.
[3]Hyla P.Night vision applicability in anti-sway vision-basedsolutions[C]//International Conference on Methods and MODELS in Automationand Robotics.IEEE，2015:358-363.
[4]Hideki Kawai，Young Bok Kim，Yong Woon Choi.Anti-sway system withimage sensor for container cranes[J].Journal of Mechanical Science andTechnology，2009，23(10):2757.
[5]Sorensen K，Fisch H，Dickerson S，et al.A Multi-Operational-ModeAnti-Sway and Positioning Control for an Industrial Bridge Crane[J].IFACProceedings Volumes,2008，41(2):881-888.
其中，防斜拉控制技术中通过限位开关，如光电开关、电阻开关等，限制斜拉状态的起升，这种方式已经不能满足起重机快速化和智能化的需求。利用机器视觉方法，由于桥架拱度的存在，单目相机的安装存在难度，安装精度对测量结果影响大，另外单目相机无法获得吊钩中心的坐标，需要结合绳长编码器，增加了系统的复杂度和成本。
双目视觉系统以其结构系统简便、获取环境信息较多、成本低等优势，在目标跟踪、识别、定位、三维重建、机器人自动导航、无人驾驶等领域有着广泛的应用，是一种非常有效的非接触测量方法。为此本专利基于双目视觉技术的三维坐标定位功能进行桥式起重机吊装前斜拉偏差的检测，并结合PLC变频控制技术，实现吊装自动对中，提高桥式起重吊装作业安全的同时，提升其自动化、智能化水平。
发明内容
本发明的目的在于提供一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法，解决了现有的桥式起重机吊装防斜拉方法存在精度低、成本高的缺陷。
为了达到上述目的，本发明采用的技术方案是：
本发明提供的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，其特征在于，包括双目视觉图像采集系统、图像处理系统和PLC变频控制系统，其中，所述双目视觉图像采集系统用于采集吊钩位置图像信息，并将采集到的图像信息传输至图像处理系统；所述图像处理系统用于对接收到的图像信息进行处理，用以计算吊钩的位置信息和斜拉角度，并将得到的吊钩的位置信息和斜拉角度传输至PLC变频控制系统；所述PLC变频控制系统用于根据接收到的吊钩的位置信息和斜拉角度，对起重机进行防摇摆控制。
优选地，所述双目视觉图像采集系统布置在小车的底部，包括两台相机，两台相机采用汇聚式双目视觉方式布置；且每台相机的光轴与小车下板面之间的夹角为60°。
优选地，所述每台相机的四周围绕设置有一圈点光源，所述点光源的照射方向与所对应相机光轴方向平行。
优选地，所述图像处理系统包括图像采集卡和工况机，其中，所述图像采集卡与双目视觉图像采集系统的输出端连接；所述图像采集卡的输出端连接工况机的输入端；所述工况机的输出端连接PLC变频控制系统。
一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，基于所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，包括以下步骤：
步骤1，对吊装钢丝绳进行预拉紧监测及调整；
步骤2，分别计算吊钩和钢丝绳起吊点的三维坐标；根据得到的吊钩和钢丝绳起吊点的三维坐标计算吊钩斜拉角度；
步骤3，根据步骤2中得到的吊钩斜拉角度分别计算吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值；
步骤4，根据步骤3中得到的吊钩偏离小车方向的水平夹角和吊钩偏离大车方向的水平夹角判断吊点与吊钩之间是否需要自动对中，若吊点与吊钩之间需要自动对中，则进入步骤5；否则，进入步骤2；
步骤5，根据步骤3得到的钢丝绳起吊点与吊钩之间的对中偏差值对吊点与吊钩进行自动对中。
优选地，步骤1中，吊装钢丝绳的拉紧力范围为[T0,T0(1+30％)]，其中，T0为钢丝绳重量。
优选地，步骤2中，计算吊钩的三维坐标，具体方法是：
S1，采集吊钩的图像信息；
S2，设定OωXωYωZω为世界坐标系；O为钢丝绳起吊点；A1为钢丝绳起吊点在地面的投影点；T为吊钩中心点，l为钢丝绳起吊长度；
S3，采用张正有标定法对相机进行标定，得到相机参数；
S4，采用双目视觉测量方法，结合最小二乘法求得吊钩的三维坐标；
计算钢丝绳起吊点的三维坐标，具体方法是：
首先，起重机静止时，定义双目视觉测量系统中的其中一个相机坐标系为世界坐标系，该相机的光心坐标为(0，0，0)；钢丝绳起吊点O的坐标为(x0,y0,z0)；起吊点至地面的铅垂线为OL；在铅垂线OL上标出M、N、R三点，其三维坐标分别为M(a1,a2,a3)，N(b1,b2,b3)，R(c1,c2,c3)；
接着，通过双目视觉测距原理测得M、N、R三点的世界坐标；
最后，求解方程组，得到起钢丝绳起吊点O的三维坐标(x0,y0,z0)：
其中，l1＝OM；l2＝ON；l3＝OR；
计算吊钩斜拉角度，具体方法是：
根据吊钩的三维坐标和钢丝绳起吊点的三维坐标，结合几何关系分别计算得到吊钩的斜拉角度。
优选地，步骤3中，计算吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值，其中，钢丝绳起吊点与吊钩之间的对中偏差值包括吊钩偏离小车方向的偏差量以及吊钩偏离大车方向的偏差量；具体方法是：
首先，设定OωXωYωZω为世界坐标系；O为钢丝绳起吊点；A1为钢丝绳起吊点在地面的投影点；T为吊钩中心点，l为钢丝绳起吊长度；
最后，根据吊钩的三维坐标和钢丝绳起吊点的坐标，结合几何关系分别计算得到吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值。
优选地，步骤4中，判断吊点与吊钩之间是否需要自动对中，具体方法是：
若吊钩偏离小车方向的水平夹角或者吊钩偏离大车方向的水平夹角大于0.2°，则吊点与吊钩之间需要自动对中，起重机停止工作，进入步骤5；否则，吊点与吊钩之间不需要对中，起重机正常工作，且进入步骤2。
优选地，步骤5中，对吊点与吊钩进行自动对中，具体方法是：
起重机停止工作，利用获取钢丝绳起吊点与吊钩之间的对中偏差值，对起重机运行机构进行纠偏，直到斜拉角度在合理范围以内。
与现有技术相比，本发明的有益效果是：
本发明提供的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法，利用一套双目视觉系统获取桥式起重机钢丝绳起吊点与吊钩的空间三维坐标，进一步得到吊钩斜拉角度和起吊绳长，有效减少了传感器的数量，降低了系统复杂程度，使系统更加可靠；同时，利用双目视觉监测起重机吊钩斜拉状态，实时性强，环境适应性好；另外，基于监测的斜拉偏差量和PLC变频控制技术，实现了桥式起重机斜拉情况下的自动对中，有效提高了桥式起重机操作的安全性，提升了起重机的自动化、智能化水平。
附图说明
图1是吊装防斜拉监测与自动对中流程图；
图2是桥式起重机防斜拉监测与自动对中系统结构示意图；
图3是基于双目视觉的桥式起重机防斜拉吊钩靶标安装俯视图；
图4是吊钩斜拉角度分解示意图；
图5是汇聚式双目视觉原理图；
图6是PLC变频控制系统控制原理图。
具体实施方式
下面结合附图，对本发明进一步详细说明。
如图2所示，本发明提供的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，包括双目视觉图像采集系统4、图像处理系统2和PLC变频控制系统3，其中，所述双目视觉图像采集系统用于采集吊钩位置图像信息，并将采集到的图像信息传输至图像处理系统；所述图像处理系统用于对接收到的图像信息进行处理，用以计算吊钩的位置信息和斜拉角度，并将得到的吊钩的位置信息和斜拉角度传输至PLC变频控制系统；所述PLC变频控制系统用于根据接收到的吊钩的位置信息和斜拉角度，对起重机进行防摇摆控制。
如图3所示，所述起升机构包括定滑轮5和动滑轮7，其中，所述定滑轮5安装在小车上；所述动滑轮7套装在靶标固定销9上，所述靶标固定销9的两端固定有靶标8；同时，所述定滑轮5和动滑轮7之间通过钢丝绳6连接。
图像处理系统2包括一个图像采集卡和一台工况机，安装于小车1上平面的左侧；其中，所述图像采集卡与双目视觉图像采集系统的输出端连接；所述图像采集卡的输出端连接工况机的输入端；所述工况机的输出端连接PLC变频控制系统。
所述图像采集卡与双目视觉图像采集系统的输出端连接，图像采集卡用于数字化相机采集的图像；所述图像采集卡的输出端连接工况机的输入端，工况机用于实时处理采集的数字图像，解算吊钩斜拉角度及对中位置偏差；所述工况机的输出端连接PLC变频控制系统。
如图6所示，PLC变频控制系统3包括变频器、PLC控制器、变频电机、制动接触器和声光报警器，其中，变频器用于调节向变频电机输出电源的电压和频率，以达到调速目的；PLC控制器用于向变频器和声光报警器发出控制指令；制动接触器用于控制变频电机的减速和停止状态。
双目视觉图像采集系统4采用汇聚式双目视觉的方式布置，由两台工业相机10构成，其中，两个工业相机分别安装在小车下板面的两端，每个工业相机的光轴与小车下板面夹角为60°，两个工业相机的四周均围绕一圈点光源11，其照射方向与所对应相机光轴方向平行。
如图1所示，本发明提供的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，包括以下步骤：
步骤1，对吊装钢丝绳进行预拉紧监测及调整
为了更加准确测量吊钩斜拉角度，在负载离地前需要使吊钩预拉紧。在手动操作起升机构使吊钩慢慢上升过程中，利用桥式起重机载荷限制器中的称重传感器，如小吨位起重机没有载荷限制器的可以增加称重传感器，经过信号放大后，采集到PLC中，此时如果测量的重量T小于预设的吊具和钢丝绳重量T0，通过PLC程序设置，使桥式起重机的大小车机构均无法通过人工操作运行，并且发出报警铃声，PLC控制起升变频器，使起升机构上升，带动吊钩继续上升，直到钢丝绳拉紧力在设置的合格范围[T0,T0(1+30％)]以内，立即自动使起升机构停止运行，至此可以进行下步的吊钩斜拉角度和吊点与吊钩对中偏差监测。
步骤2，分别计算吊钩斜拉角度和钢丝绳起吊点与吊钩之间的对中偏差值
基于双目视觉技术在物体三维坐标中的应用特点和优势，利用安装于小车下方的双目视觉系统采集代表吊钩位置的人工靶标图像，经过图像处理模块后对吊钩位置进行精确定位，实时获取吊钩的三维坐标T，通过与起吊点O的三维坐标计算得出θ1，θ2，θ3，根据得到的θ1，θ2，θ3计算钢丝绳起吊点与吊钩之间的对中偏差值；
其中，θ1为吊钩偏离小车方向的水平夹角；θ3为吊钩偏离大车方向的水平夹角；θ2为吊钩斜拉的角度；钢丝绳起吊长度l；钢丝绳起吊点与吊钩之间的对中偏差值包括吊钩偏离小车方向的偏差量为B1T和吊钩偏离大车方向的偏差量为C1T。
步骤3，吊点与吊钩进行自动对中
若此时吊钩偏离小车方向的水平夹角θ1或者吊钩偏离大车方向的水平夹角θ3任意一个值大于0.2°，利用PLC程序停止起重机的工作；
利用获取的吊钩偏离小车方向的偏差量以及吊钩偏离大车方向的偏差量，分别控制大、小车运行机构进行纠偏，直到斜拉角度在合理范围以内；可以通过手动操作起升机构继续提升负载，正常完成后续吊装人物，以防止吊钩斜拉，并自动实现对中工作。
具体地，步骤2中，吊钩斜拉角度及对中位置偏差的计算方法：
如图4所示，设定OωXωYωZω为空间世界坐标系，O为钢丝绳起吊点，A1为钢丝绳起吊点在地面的投影点，T为吊钩中心点，θ1为吊钩偏离小车方向的水平夹角，θ2为吊钩斜拉的角度，l为钢丝绳起吊长度，A1T为吊钩相对起吊中心的偏差量，C1T为大车方向偏差量，B1T为小车方向偏差量；
获取并计算钢丝绳起吊点和吊钩中心的三维坐标，设钢丝绳起吊点和代表吊钩中心点位置的特征靶标的三维坐标分别是(x0，y0，z0)和(xt，yt，zt)，则
C1T＝|yt-y0| (3)
B1T＝|zt-z0| (4)
计算吊钩的三维坐标，具体方法是：
由于相机的非线性模型，使用双目视觉对吊点定位前需对相机进行标定，采用张氏标定法，张氏标定法具有方法简单、精度高、鲁棒性好等优点。其思想是通过已知三维空间点的坐标和对应像素坐标系上点的坐标，求得两个坐标系之间的关系。
M为世界坐标表示成齐次坐标的形式(X,Y,Z,1)，m为图像平面的齐次坐标(u,v,1)，s为尺度因子，A为相机的内参数矩阵，B为相机的外参数矩阵，则像素坐标系与世界坐标系的关系可表示为：
sm＝ABM (5)
标定中将世界坐标系构造在Z＝0的平面上，(5)式的矩阵形式为：
s[u v 1]T＝A[r1 r2 r3 t][X Y Z 1]T＝A[r1 r2 t][X Y 1]T (6)
令单应性矩阵H＝A[r1 r2 t]，则
s[u v 1]T＝H[X Y 1]T (7)
设
代入(7)式可得
令h＝[h11 h12 h13 h21 h22 h23 h31 h32 1]T,(8)式可写为：
已知世界坐标系的坐标和像素坐标系的坐标，则可求出h矩阵，因为h矩阵中含有8个未知量，故最小需要4个标定点，常取标定点数目多于4，利用最小二乘法可求得h矩阵，从而H矩阵也可求得。
将H矩阵与实际单应性矩阵相差1个比例因子，将实际单应性矩阵写成3个列向量的形式，即：
H＝[h1 h2 h3]＝λA[r1 r2 t] (10)
由于r1、r2正交且模为1，则r1 Tr1＝r2 Tr2＝1且r1 Tr2＝0，与(10)式联立可得：
h1 TA-TA-1h1＝h2 TA-TA-1h2且h1 TA-TA-1h2＝0 (11)
(11)式中h1、h2是通过单应性求解出来的，A为相机的内参数矩阵，包括α、β、u0、v0、γ这5个未知参数，3个单应性矩阵在2个约束下可得到6个方程，要求解出这五个未知参数，则需要3个单应性矩阵，即至少需要3张不同的标定图片。
由于
令
则：
N为对称矩阵，有效元素为6个，可用向量n表示：
n＝[N11 N12 N22 N13 N23 N33]
设hi为单应性矩阵H的第i个列向量，则hi＝[hi1 hi2 hi3]T，代入(11)式化简得：
其中，
vij＝[hi1hj1 hi1hj2+hi2hj1 hi2hj2 hi3hj1+hi1hj3 hi3hj2+hi2hj3 hi3hj3] (14)
联立(11)、(13)、(14)式，化简可得：
上式为一幅标定板图像得到的约束等式，若有b幅图像，即：Vn＝0，V为2a×6的矩阵，n是1个6维向量，故至少需要3组不同的单应性矩阵，即至少需要3幅以上的图像标定才能得到n的唯一解。通过对VTV进行奇异值分解，其最小特征值对应的特征向量便是Vn＝0的最小二乘解，矩阵N便可求得，其估计值是在相差1个常量因子下得到的，故：N＝λA-TA,比例因子λ和矩阵A也可求得：
得到矩阵A后，可根据每幅图像的单应性矩阵求得每幅图像对应的旋转矩阵R和平移向量t，即外参数也可得到：
以上所求为最小二乘法估计得到的解，为增加标定精度，采用最大似然估计进行优化，假设采集到p幅标定板的图像，每幅图像有d个像点，Dij表示第i幅图像上第j个像点对应的标定板上的三维点，则：
(18)式左侧表示Dij的像点，Ri,ti代表第i幅图像对应的旋转矩阵和平移向量，A是相机的内参数，则像点dij的概率密度函数为：
构造似然函数：
为使L(A,R,ti，Dij)取得最大值，则需使
取得最小值，相机内外参数的最优解即可求出。
在此采用汇聚式双目视觉安装方式，原理图如图5所示。特征靶标点三维坐标为T(xt，yt，zt)，靶标点在左右相机的像素坐标分别为(u1，v1),(u2,v2)。M1,M2分别为左右相机的投影矩阵，其中：
对于靶标点T(xt，yt，zt)左右相机的图像像素坐标系与世界坐标系的关系如下：
联立(23)式、(24)式，消除z1，z2可得到关于xt，yt，zt的线性方程组：
其中，靶标点T(xt，yt，zt)为待测数据，(u1，v1)，(u2，v2)可由相机得到，左右相机的投影矩阵M1，M2可利用张氏标定法获得，由于噪声及误差因素，(25)式4个方程为非线性的，可用最小二乘法求得靶标点T的三维坐标。
以矩阵形式重写(25)式：
则靶标点T的三维坐标为：
进而将靶标点T的三维坐标作为吊钩的三维坐标，得到吊钩的三维坐标。
计算钢丝绳起吊点的具体方法是：
起重机静止时，定义双目视觉测量系统的左相机坐标系为世界坐标系，左相机的光心坐标为(0，0，0)，定滑轮几何中心点为钢丝绳起吊点O，其坐标为(x0，y0，z0)。
起吊点至地面的铅垂线为OL，在铅垂线OL上标出M、N、R三点，其三维坐标分别为M(a1，a2，a3)，N(b1，b2,b3)，R(c1,c2,c3)，可通过双目视觉测距原理测得M、N、R三点的世界坐标。OM＝l1,ON＝l2,OR＝l3,l1，l2，l3可通过手工测得，则：
求解方程组即可得到起吊点坐标O(x0,y0,z0)。
计算吊钩斜拉角度、吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值，具体方法是：
根据吊钩的三维坐标和钢丝绳起吊点的坐标，结合几何关系分别计算得到吊钩的斜拉角度、吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值。
Claims (10)
1.一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，其特征在于，包括双目视觉图像采集系统、图像处理系统和PLC变频控制系统，其中，所述双目视觉图像采集系统用于采集吊钩位置图像信息，并将采集到的图像信息传输至图像处理系统；所述图像处理系统用于对接收到的图像信息进行处理，用以计算吊钩的位置信息和斜拉角度，并将得到的吊钩的位置信息和斜拉角度传输至PLC变频控制系统；所述PLC变频控制系统用于根据接收到的吊钩的位置信息和斜拉角度，对起重机进行防摇摆控制。
2.根据权利要求1所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，其特征在于，所述双目视觉图像采集系统布置在小车的底部，包括两台相机，两台相机采用汇聚式双目视觉方式布置；且每台相机的光轴与小车下板面之间的夹角为60°。
3.根据权利要求2所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，其特征在于，所述每台相机的四周围绕设置有一圈点光源，所述点光源的照射方向与所对应相机光轴方向平行。
4.根据权利要求1所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，其特征在于，所述图像处理系统包括图像采集卡和工况机，其中，所述图像采集卡与双目视觉图像采集系统的输出端连接；所述图像采集卡的输出端连接工况机的输入端；所述工况机的输出端连接PLC变频控制系统。
5.一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，基于权利要求1-4中任一项所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统，包括以下步骤：
步骤1，对吊装钢丝绳进行预拉紧监测及调整；
步骤2，分别计算吊钩和钢丝绳起吊点的三维坐标；根据得到的吊钩和钢丝绳起吊点的三维坐标计算吊钩斜拉角度；
步骤3，根据步骤2中得到的吊钩斜拉角度分别计算吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值；
步骤4，根据步骤3中得到的吊钩偏离小车方向的水平夹角和吊钩偏离大车方向的水平夹角判断吊点与吊钩之间是否需要自动对中，若吊点与吊钩之间需要自动对中，则进入步骤5；否则，进入步骤2；
步骤5，根据步骤3得到的钢丝绳起吊点与吊钩之间的对中偏差值对吊点与吊钩进行自动对中。
6.根据权利要求5所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，步骤1中，吊装钢丝绳的拉紧力范围为[T0,T0(1+30％)]，其中，T0为钢丝绳重量。
7.根据权利要求5所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，步骤2中，计算吊钩的三维坐标，具体方法是：
S1，采集吊钩的图像信息；
S2，设定OωXωYωZω为世界坐标系；O为钢丝绳起吊点；A1为钢丝绳起吊点在地面的投影点；T为吊钩中心点，l为钢丝绳起吊长度；
S3，采用张正有标定法对相机进行标定，得到相机参数；
S4，采用双目视觉测量方法，结合最小二乘法求得吊钩的三维坐标；
计算钢丝绳起吊点的三维坐标，具体方法是：
首先，起重机静止时，定义双目视觉测量系统中的其中一个相机坐标系为世界坐标系，该相机的光心坐标为(0，0，0)；钢丝绳起吊点O的坐标为(x0，y0，z0)；起吊点至地面的铅垂线为OL；在铅垂线OL上标出M、N、R三点，其三维坐标分别为M(a1，a2，a3)，N(b1，b2，b3)，R(c1，c2，c3)；
接着，通过双目视觉测距原理测得M、N、R三点的世界坐标；
最后，求解方程组，得到起钢丝绳起吊点O的三维坐标(x0，y0，z0)：
其中，l1＝OM；l2＝ON；l3＝OR；
计算吊钩斜拉角度，具体方法是：
根据吊钩的三维坐标和钢丝绳起吊点的三维坐标，结合几何关系分别计算得到吊钩的斜拉角度。
8.根据权利要求7所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，步骤3中，计算吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值，其中，钢丝绳起吊点与吊钩之间的对中偏差值包括吊钩偏离小车方向的偏差量以及吊钩偏离大车方向的偏差量；具体方法是：
首先，设定OωXωYωZω为世界坐标系；O为钢丝绳起吊点；A1为钢丝绳起吊点在地面的投影点；T为吊钩中心点，l为钢丝绳起吊长度；
最后，根据吊钩的三维坐标和钢丝绳起吊点的坐标，结合几何关系分别计算得到吊钩偏离小车方向的水平夹角、吊钩偏离大车方向的水平夹角以及钢丝绳起吊点与吊钩之间的对中偏差值。
9.根据权利要求5所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，步骤4中，判断吊点与吊钩之间是否需要自动对中，具体方法是：
若吊钩偏离小车方向的水平夹角或者吊钩偏离大车方向的水平夹角大于0.2°，则吊点与吊钩之间需要自动对中，起重机停止工作，进入步骤5；否则，吊点与吊钩之间不需要对中，起重机正常工作，且进入步骤2。
10.根据权利要求5所述的一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中方法，其特征在于，步骤5中，对吊点与吊钩进行自动对中，具体方法是：
利用获取钢丝绳起吊点与吊钩之间的对中偏差值，对起重机运行机构进行纠偏，直到斜拉角度在合理范围以内。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011334578.2A CN112340608B (zh) | 2020-11-24 | 2020-11-24 | 一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011334578.2A CN112340608B (zh) | 2020-11-24 | 2020-11-24 | 一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112340608A true CN112340608A (zh) | 2021-02-09 |
| CN112340608B CN112340608B (zh) | 2023-04-21 |
Family
ID=74364831
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011334578.2A Active CN112340608B (zh) | 2020-11-24 | 2020-11-24 | 一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112340608B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112897349A (zh) * | 2021-05-07 | 2021-06-04 | 新乡学院 | 一种具有三个角度防倾斜装置的起重机 |
| CN113003424A (zh) * | 2021-03-23 | 2021-06-22 | 长沙理工大学 | 一种桥式起重机吊钩位置测量方法 |
| CN113896111A (zh) * | 2021-09-28 | 2022-01-07 | 中国人民解放军火箭军工程大学 | 一种欠驱动起重吊装设备控制系统及其方法 |
| CN114314350A (zh) * | 2022-03-02 | 2022-04-12 | 聚时科技(江苏)有限公司 | 一种用于自动行车吊具摆角定位的自动标定方法 |
| CN115755680A (zh) * | 2022-11-02 | 2023-03-07 | 深圳艾灵网络有限公司 | 天车控制方法、装置、电子设备及存储介质 |
| CN116354242A (zh) * | 2023-05-25 | 2023-06-30 | 北京玖行智研交通科技有限公司 | 一种换电电池箱吊装方法及换电站 |
| CN116776051A (zh) * | 2023-05-24 | 2023-09-19 | 江苏润邦工业装备有限公司 | 一种用于大型设备的单钩吊装计算方法 |
| CN117387491A (zh) * | 2023-12-11 | 2024-01-12 | 南京理工大学 | 一种适用于架桥机的双目视觉标志物定位装置及方法 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105271004A (zh) * | 2015-10-26 | 2016-01-27 | 上海海事大学 | 采用单目视觉的吊具空间定位装置及方法 |
| CN107572373A (zh) * | 2017-08-31 | 2018-01-12 | 武汉理工大学 | 基于机器视觉的新型起重机主动防斜拉控制系统及其控制方法 |
| CN108675142A (zh) * | 2018-03-18 | 2018-10-19 | 武汉理工大学 | 基于单目相机的多高度标定测量方法及起重机防斜拉和精确定位方法 |
| CN110745702A (zh) * | 2019-10-16 | 2020-02-04 | 武汉理工大学 | 基于单目相机的起重机工作空间多信息测量方法及系统 |
| CN110790136A (zh) * | 2019-11-13 | 2020-02-14 | 广西飞熊科技有限公司 | 一种基于图像识别及双脉冲控制防摇系统 |
| CN111056439A (zh) * | 2020-01-02 | 2020-04-24 | 深圳市柯沃工业有限公司 | 一种基于机器视觉的起重机防摇方法 |
| CN111422739A (zh) * | 2020-03-24 | 2020-07-17 | 苏州西弗智能科技有限公司 | 一种基于视觉技术的桥式起重机电子防摇方法 |
-
2020
- 2020-11-24 CN CN202011334578.2A patent/CN112340608B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105271004A (zh) * | 2015-10-26 | 2016-01-27 | 上海海事大学 | 采用单目视觉的吊具空间定位装置及方法 |
| CN107572373A (zh) * | 2017-08-31 | 2018-01-12 | 武汉理工大学 | 基于机器视觉的新型起重机主动防斜拉控制系统及其控制方法 |
| CN108675142A (zh) * | 2018-03-18 | 2018-10-19 | 武汉理工大学 | 基于单目相机的多高度标定测量方法及起重机防斜拉和精确定位方法 |
| CN110745702A (zh) * | 2019-10-16 | 2020-02-04 | 武汉理工大学 | 基于单目相机的起重机工作空间多信息测量方法及系统 |
| CN110790136A (zh) * | 2019-11-13 | 2020-02-14 | 广西飞熊科技有限公司 | 一种基于图像识别及双脉冲控制防摇系统 |
| CN111056439A (zh) * | 2020-01-02 | 2020-04-24 | 深圳市柯沃工业有限公司 | 一种基于机器视觉的起重机防摇方法 |
| CN111422739A (zh) * | 2020-03-24 | 2020-07-17 | 苏州西弗智能科技有限公司 | 一种基于视觉技术的桥式起重机电子防摇方法 |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113003424A (zh) * | 2021-03-23 | 2021-06-22 | 长沙理工大学 | 一种桥式起重机吊钩位置测量方法 |
| CN112897349A (zh) * | 2021-05-07 | 2021-06-04 | 新乡学院 | 一种具有三个角度防倾斜装置的起重机 |
| CN112897349B (zh) * | 2021-05-07 | 2021-07-13 | 新乡学院 | 一种具有三个角度防倾斜装置的起重机 |
| CN113896111B (zh) * | 2021-09-28 | 2022-07-29 | 中国人民解放军火箭军工程大学 | 一种欠驱动起重吊装设备控制系统及其方法 |
| CN113896111A (zh) * | 2021-09-28 | 2022-01-07 | 中国人民解放军火箭军工程大学 | 一种欠驱动起重吊装设备控制系统及其方法 |
| CN114314350A (zh) * | 2022-03-02 | 2022-04-12 | 聚时科技(江苏)有限公司 | 一种用于自动行车吊具摆角定位的自动标定方法 |
| CN114314350B (zh) * | 2022-03-02 | 2022-07-08 | 聚时科技(江苏)有限公司 | 一种用于自动行车吊具摆角定位的自动标定方法 |
| CN115755680A (zh) * | 2022-11-02 | 2023-03-07 | 深圳艾灵网络有限公司 | 天车控制方法、装置、电子设备及存储介质 |
| CN116776051A (zh) * | 2023-05-24 | 2023-09-19 | 江苏润邦工业装备有限公司 | 一种用于大型设备的单钩吊装计算方法 |
| CN116354242A (zh) * | 2023-05-25 | 2023-06-30 | 北京玖行智研交通科技有限公司 | 一种换电电池箱吊装方法及换电站 |
| CN116354242B (zh) * | 2023-05-25 | 2023-09-22 | 北京玖行智研交通科技有限公司 | 一种换电电池箱吊装方法及换电站 |
| CN117387491A (zh) * | 2023-12-11 | 2024-01-12 | 南京理工大学 | 一种适用于架桥机的双目视觉标志物定位装置及方法 |
| CN117387491B (zh) * | 2023-12-11 | 2024-04-05 | 南京理工大学 | 一种适用于架桥机的双目视觉标志物定位装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112340608B (zh) | 2023-04-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112340608B (zh) | 一种基于双目视觉的桥式起重机吊装防斜拉监测与自动对中系统及方法 | |
| CN107572373B (zh) | 基于机器视觉的新型起重机主动防斜拉控制系统及其控制方法 | |
| CN111204662B (zh) | 用于识别状态参数的系统、吊装定位系统及吊装设备 | |
| EP2436637B1 (en) | Hook pose detecting equipment and crane | |
| US7950539B2 (en) | Load control device for a crane | |
| CN108946487B (zh) | 集装箱起重机远程操作系统 | |
| CN104860201A (zh) | 一种基于霍尔效应原理的双吊具桥吊摆角测量装置及其方法 | |
| EP1894881A2 (en) | Load control device for a crane | |
| CN102826456B (zh) | 大型施工设备编码器空间定位、智能防碰撞系统 | |
| CN105271004A (zh) | 采用单目视觉的吊具空间定位装置及方法 | |
| KR101812017B1 (ko) | 철탑 및 송변전시설물 점검용 로봇 시스템 | |
| CN212425180U (zh) | 吊装信息识别系统、吊装定位系统及吊装设备 | |
| CN108675137B (zh) | 基于滑动变阻器的桥吊摆角测量装置及测量方法 | |
| CN118239385B (zh) | 基于视觉识别的钢卷智能吊装系统及方法 | |
| CN111170184B (zh) | 一种塔式起重机的实时监测预警系统及方法 | |
| Wu et al. | The real-time vision measurement of multi-information of the bridge crane’s workspace and its application | |
| CN106829741A (zh) | 行车远程控制系统和控制方法 | |
| CN110745702B (zh) | 基于单目相机的起重机工作空间多信息测量方法及系统 | |
| CN111392579B (zh) | 一种用于板坯无人天车的自重式夹钳检测系统及检测方法 | |
| CN108147285A (zh) | 一种双起升桥吊的摆角测量装置及其测量方法 | |
| CN117023394A (zh) | 基于计算机视觉的起重机安全控制系统 | |
| CN111196572A (zh) | 一种塔式起重机的安全防护方法 | |
| CN215828194U (zh) | 基于机器视觉的吊具精准定位装置 | |
| CN202766129U (zh) | 大型施工设备编码器空间定位、智能防碰撞系统 | |
| CN107555316B (zh) | 集成偏载检测的集装箱堆码系统及其工作方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |