CN113954986A - 一种基于视觉的烟叶辅料运送小车 - Google Patents

一种基于视觉的烟叶辅料运送小车 Download PDF

Info

Publication number
CN113954986A
CN113954986A CN202111317587.5A CN202111317587A CN113954986A CN 113954986 A CN113954986 A CN 113954986A CN 202111317587 A CN202111317587 A CN 202111317587A CN 113954986 A CN113954986 A CN 113954986A
Authority
CN
China
Prior art keywords
motor
vision
knuckle
mechanical
mechanical claw
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111317587.5A
Other languages
English (en)
Inventor
付雨锋
张印辉
何自芬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kunming University of Science and Technology
Original Assignee
Kunming University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kunming University of Science and Technology filed Critical Kunming University of Science and Technology
Priority to CN202111317587.5A priority Critical patent/CN113954986A/zh
Publication of CN113954986A publication Critical patent/CN113954986A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D63/00Motor vehicles or trailers not otherwise provided for
    • B62D63/02Motor vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D63/00Motor vehicles or trailers not otherwise provided for
    • B62D63/02Motor vehicles
    • B62D63/04Component parts or accessories
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Manipulator (AREA)

Abstract

本发明专利涉及一种基于视觉的烟叶辅料运送小车,属于轮式移动机器人技术领域。包括车架、转动台、机械臂、视觉装置、升降台组成。车架下部的车轮由直流电机和步进电机驱动,车架上部前端安装转动台,转动台两侧装有机械臂,转动台上部装有视觉装置,视觉装置中工业相机与视觉开发板连接,车架上部后端装有升降台,升降台通过液压缸组件控制。本发明基于视觉控制实现小车的自动避障、调节升降台的高度和烟叶辅料的搬运,成本低廉、设计简单,且能够适应烟厂烟叶辅料中长距离运送。

Description

一种基于视觉的烟叶辅料运送小车
技术领域
本发明专利涉及一种基于视觉的烟叶辅料运送小车,属于轮式移动机器人技术领域。
背景技术
随着科技的不断进步,自动化设备的使用越来越广泛。据统计,在卷烟厂行业中,大量的时间和生产成本用于搬运工作。目前卷烟厂搬运工作主要依靠自主导航小车实现,该类自主导航小车引导方式主要包括标识导航和激光导航。标识导航主要通过识别路面的标识符进行移动,无法适应柔性工业制造现场,而采用激光导航虽然能够适用于柔性工业制造现场,但是存在成本大、干扰强、反应缓慢等问题。
发明内容
本发明要解决的技术问题:本发明提供一种基于视觉的烟叶辅料运送小车,通过计算机视觉语义分割的方法实现烟厂智能小车的视觉导航,辅助搬运小车实现自动控制,然后在结构上集成升降台托盘和双机械臂搬运机构,通过模拟人手的双臂进行工作;实现将烟叶辅料从物料仓库运送到机台,成本低廉,结构简单,适应性强。
本发明的技术方案是:一种基于视觉的烟叶辅料运送小车,包括车架5、升降台3、托盘2、液压缸组件、车轮7、搬运机构、视觉装置,底盘29上设有电源30、电机驱动装置33、控制器31、视觉开发板32;
车架5底部设置底盘29,液压缸组件固定在底盘29上且与升降台3连接,升降台3顶部与托盘2相连,底盘29的下部设有四个车轮7,每个车轮由步进电机11和直流电机8驱动,步进电机11和直流电机8与电源30连接,车架5上部的前端安装有搬运机构,搬运机构上方安装有视觉装置,步进电机11与电机驱动装置33连接,视觉装置中的工业相机16与视觉开发板32连接,液压缸组件、直流电机8、电机驱动装置33、视觉开发板32、搬运机构、视觉装置中的转动装置均与控制器31连接。
具体地,所述的升降台3装置采用铰链机构,液压缸组件包括液压缸4、液压泵、液压电机,液压缸与液压泵相连,液压泵与液压电机连接,液压电机与控制器31连接,液压缸4与升降台3相连。
具体地,所述搬运机构由安装在车架5上部前端的转动台28和安装在转动台28两侧的机械臂组成,机械臂包括机械大臂17、肘关节轴18、伸缩臂19、腕关节轴20、机械爪Ⅰ第二节指关节21、机械爪Ⅰ第一节指关节22、连接轴23、指关节连接轴Ⅰ24、机械爪Ⅱ第一节指关节25、指关节连接轴Ⅱ26、机械爪Ⅱ第二节指关节27、机械臂电机;机械大臂17分别与机械大臂电机、肘关节轴18连接,肘关节轴18前端安装有伸缩臂电机,伸缩臂19与伸缩臂电机连接,伸缩臂19内部安装有液压系统,腕关节轴20一端与伸缩臂19端部的连接,另一端连接机械爪连接轴23,机械爪连接轴23通过指关节连接轴Ⅰ24与机械爪Ⅱ第一节指关节25的一端连接,机械爪Ⅱ第一节指关节25的另一端通过指关节连接轴Ⅱ26与机械爪Ⅱ第二节指关节27连接,机械爪Ⅰ第一节指关节22的一端与机械爪连接轴23连接,另一端与机械爪Ⅰ第二节指关节21连接,机械爪连接轴23上安装有机械爪电机,指关节连接轴Ⅰ24和指关节连接轴Ⅱ24上分别安装指关节电机,机械大臂电机、伸缩臂电机、液压系统、机械爪电机、指关节电机均与控制器31连接。
具体地,所述的视觉装置还包括舵机Ⅰ13、舵机Ⅱ15、相机底座12、相机架14和工业相机16,相机底座12固定在搬运机构上部,相机底座12通过上方的舵机Ⅰ13与相机架14连接,相机架14上安装有舵机Ⅱ15舵机Ⅱ15与工业相机托板连接,工业相机16安装在工业相机托板16上,舵机Ⅰ13和舵机Ⅱ15垂直放置且均与控制器31连接。
优选地,所述的液压缸4以双耳环的连接方式与升降台3下部连接,升降台3顶部以槽口的方式与托盘2相连接。
具体地,所述的视觉开发板32内载入卷积神经网络训练的网络模型,网络模型内存储识别目标的纹理特征信息的参数。
本发明的有益效果是:
1、本发明专利结构简单,成本较低,适应性强,搬运稳定,可以适应柔性结构的机械加工场景的工件的搬运工作。
2、通过集成可升降台装置和双机械臂机构,可以完成对接不同高度的货架与机台之间烟叶辅料的运送,结构简单、操作灵活、搬运稳定、适应性强。
3、使用计算机视觉中语义分割的方法实现搬运小车的视觉导航,通过视觉开发板与控制器进行数据交换,实现搬运小车的环境感知和自动控制,成本低廉,反应速度快,容易实现。
附图说明
图1为本发明专利的总体结构示意图;
图2为本发明专利车轮的示意图;
图3为本发明专利视觉装置的示意图;
图4为本发明专利升降台的结构示意图;
图5为本发明专利机械臂机构的结构示意图;
图6为本发明专利控制系统的位置示意图。
图中各标号:1-滚筒、2-托盘、3-升降台、4-液压缸、5-车架、6-侧板、7-车轮、8-直流电机、9-角件、10-联轴器、11-步进电机、12-相机底座、13-舵机1、14-相机架、15-舵机2、16-工业相机、17-机械大臂、18-肘关节轴、19-伸缩臂、20-腕关节轴、21-机械爪Ⅰ第二节指关节、22-机械爪Ⅰ第一节指关节、23-机械爪连接轴、24-指关节连接轴Ⅰ、25-机械爪Ⅱ第一节指关节、26-指关节连接轴Ⅱ、27-机械爪Ⅱ第二节指关节、28-转动台、29-底盘、30-电源、31-控制器、32-视觉开发板、33-电机驱动装置。
具体实施方式
下面结合附图和具体实施例,对本发明作进一步说明。
实施例1:如图1-6所示,一种基于视觉的烟叶辅料运送小车,包括车架5、升降台3、托盘2、液压缸组件、车轮7、搬运机构、视觉装置,底盘29上设有电源30、电机驱动装置33、控制器31、视觉开发板32;
车架5底部设置底盘29,液压缸组件固定在底盘29上且与升降台3连接,升降台3顶部与托盘2相连,底盘29的下部设有四个车轮7,每个车轮由步进电机11和直流电机8驱动,步进电机11和直流电机8与电源30连接,车架5上部的前端安装有搬运机构,搬运机构上方安装有视觉装置,步进电机11与电机驱动装置33连接,视觉装置中的工业相机16与视觉开发板32连接,液压缸组件、直流电机8、电机驱动装置33、视觉开发板32、搬运机构、视觉装置中的转动装置均与控制器31连接。
进一步地,所述的升降台3采用铰链机构,液压缸组件包括液压缸4、液压泵、液压电机,液压缸与液压泵相连,液压泵与液压电机连接,液压电机与控制器31连接,液压缸4与升降台3相连。
进一步地,所述搬运机构由安装在车架5上部前端的转动台28和安装在转动台28两侧的机械臂组成,机械臂包括机械大臂17、肘关节轴18、伸缩臂19、腕关节轴20、机械爪Ⅰ第二节指关节21、机械爪Ⅰ第一节指关节22、连接轴23、指关节连接轴Ⅰ24、机械爪Ⅱ第一节指关节25、指关节连接轴Ⅱ26、机械爪Ⅱ第二节指关节27、机械臂电机;机械大臂17分别与机械大臂电机、肘关节轴18连接,肘关节轴18前端安装有伸缩臂电机,伸缩臂19与伸缩臂电机连接,伸缩臂19内部安装有液压系统,腕关节轴20一端与伸缩臂19端部的连接,另一端连接机械爪连接轴23,机械爪连接轴23通过指关节连接轴Ⅰ24与机械爪Ⅱ第一节指关节25的一端连接,机械爪Ⅱ第一节指关节25的另一端通过指关节连接轴Ⅱ26与机械爪Ⅱ第二节指关节27连接,机械爪Ⅰ第一节指关节22的一端与机械爪连接轴23连接,另一端与机械爪Ⅰ第二节指关节21连接,机械爪连接轴23上安装有机械爪电机,指关节连接轴Ⅰ24和指关节连接轴Ⅱ24上分别安装指关节电机。
整个机械臂由控制器31对机械大臂电机、伸缩臂电机、液压系统、机械爪电机、关节电机进行控制,实现抓取功能。搬运机构由两个机械臂组成,搬运过程中双臂配合操作,相比一般的搬运机构,双臂搬运机构搬运更加灵活,搬运更加平稳。
进一步地,所述的视觉装置除工业相机外还包括舵机Ⅰ13、舵机Ⅱ15、相机底座12、相机架14,相机底座12固定在搬运机构上部,相机底座12通过上方的舵机Ⅰ13与相机架14连接,相机架14上安装有舵机Ⅱ15舵机Ⅱ15与工业相机托板连接,工业相机16安装在工业相机托板16上,舵机Ⅰ13和舵机Ⅱ15垂直放置且均与控制器31连接,实现工业相机的全方位转动。
进一步地,所述的液压缸4以双耳环的连接方式与升降台3下部连接,升降台3顶部以槽口的方式与托盘2相连接。
进一步地,所述的视觉开发板32内载入卷积神经网络训练的网络模型,网络模型内存储识别目标的纹理特征信息的参数。
控制器31通过串行协议与视觉开发板32进行数据交换,将视觉开发板32中的视觉信息传输到控制器31,通过控制器31产生的脉冲信号控制直流电机8的转速,从而实现车轮7前进的快慢,通过电机驱动装置33将控制器31的脉冲信号转换为角位移来控制步进电机11转动的角度,从而控制车轮7的转动的角度和方向。液压电机与液压泵连接,由控制器31进行控制,视觉开发板32将视觉信息传递给控制器31,通过控制器31控制液压电机带动液压泵对液压缸4控制,从而实现托盘2上升和下降,以适应不同高度的货架和机台。
本发明的工作原理是:首先,采集卷烟厂的数据集并对数据集中需要识识别的目标进行标注,接着在卷积神经网络训练出相应的网络模型,并将训练的网络模型载入视觉开发板32;然后,工业相机16通过现场实时采集卷烟厂的图像数据并传输给视觉开发板32,视觉开发板32通过训练好的网络模型对现场采集的图像中的目标进行识别并进行像素级别的分割,实现对卷烟厂场景的识别与理解;最后,视觉开发板32将卷烟厂场景的视觉信息传输到控制器31,通过控制器31发出脉冲信号控制直流电机8和步进电机11,实现小车的自动避障、调节升降台3的高度和烟叶辅料的搬运,实现烟厂物料仓库到机台之间的搬运工作。
本发明专利涉及一种基于视觉的烟叶辅料运送小车,通过计算机视觉中语义分割的方法实现烟厂智能小车的视觉导航;在结构上也集成升降式托盘2和双机械臂机构,实现自动导航小车的中长距离运送。该小车主要承担烟厂物料仓库到机台之间的辅料运送。本发明专利成本低廉、适应性强,结构简单,能够适应烟厂柔性工业制造现场。
上面结合附图介绍对本发明的具体实例做了详细的阐述,但是本发明专利并不仅局限于上述实例,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。

Claims (6)

1.一种基于视觉的烟叶辅料运送小车,其特征在于:包括车架(5)、升降台(3)、托盘(2)、液压缸组件、车轮(7)、搬运机构、视觉装置,底盘(29)上设有电源(30)、电机驱动装置(33)、控制器(31)、视觉开发板(32);
车架(5)底部设置底盘(29),液压缸组件固定在底盘(29)上且与升降台(3)连接,升降台(3)顶部与托盘(2)相连,底盘(29)的下部设有四个车轮(7),每个车轮由步进电机(11)和直流电机(8)驱动,步进电机(11)和直流电机(8)与电源(30)连接,车架(5)上部的前端安装有搬运机构,搬运机构上方安装有视觉装置,步进电机(11)与电机驱动装置(33)连接,视觉装置中的工业相机(16)与视觉开发板(32)连接,液压缸组件、直流电机(8)、电机驱动装置(33)、视觉开发板(32)、搬运机构、视觉装置中的转动装置均与控制器(31)连接。
2.根据权利要求1所述的一种基于视觉的烟叶辅料运送小车,其特征在于:所述的升降台(3)装置采用铰链机构,液压缸组件包括液压缸(4)、液压泵、液压电机,液压缸与液压泵相连,液压泵与液压电机连接,液压电机与控制器(31)连接,液压缸(4)与升降台(3)相连。
3.根据权利要求1所述的一种基于视觉的烟叶辅料运送小车,其特征在于:所述搬运机构由安装在车架(5)上部前端的转动台(28)和安装在转动台(28)两侧的机械臂组成,机械臂包括机械大臂(17)、肘关节轴(18)、伸缩臂(19)、腕关节轴(20)、机械爪Ⅰ第二节指关节(21)、机械爪Ⅰ第一节指关节(22)、机械爪连接轴(23)、指关节连接轴Ⅰ(24)、机械爪Ⅱ第一节指关节(25)、指关节连接轴Ⅱ(26)、机械爪Ⅱ第二节指关节(27)、机械臂电机;机械大臂(17)分别与机械大臂电机、肘关节轴(18)连接,肘关节轴(18)前端安装有伸缩臂电机,伸缩臂(19)与伸缩臂电机连接,伸缩臂(19)内部安装有液压系统,腕关节轴(20)一端与伸缩臂(19)端部连接,另一端连接机械爪连接轴(23),机械爪连接轴(23)通过指关节连接轴Ⅰ(24)与机械爪Ⅱ第一节指关节(25)的一端连接,机械爪Ⅱ第一节指关节(25)的另一端通过指关节连接轴Ⅱ(26)与机械爪Ⅱ第二节指关节(27)连接,机械爪Ⅰ第一节指关节(22)的一端与机械爪连接轴(23)连接,另一端与机械爪Ⅰ第二节指关节(21)连接,机械爪连接轴(23)上安装有机械爪电机,指关节连接轴Ⅰ(24)和指关节连接轴Ⅱ(24)上分别安装指关节电机,机械大臂电机、伸缩臂电机、液压系统、机械爪电机、指关节电机均与控制器(31)连接。
4.根据权利要求1所述的一种基于视觉的烟叶辅料运送小车,其特征在于:所述的视觉装置还包括舵机Ⅰ(13)、舵机Ⅱ(15)、相机底座(12)、相机架(14),相机底座(12)固定在搬运机构上部,相机底座(12)通过上方的舵机Ⅰ(13)与相机架(14)连接,相机架(14)上安装有舵机Ⅱ(15),舵机Ⅱ(15)与工业相机托板连接,工业相机(16)安装在工业相机托板(16)上,舵机Ⅰ(13)和舵机Ⅱ(15)垂直放置且均与控制器(31)连接。
5.根据权利要求1所述的一种基于视觉的烟叶辅料运送小车,其特征在于:所述的液压缸(4)以双耳环的连接方式与升降台(3)下部连接,升降台(3)顶部以槽口的方式与托盘(2)相连接。
6.根据权利要求1所述的一种基于视觉的烟叶辅料运送小车,其特征在于:所述的视觉开发板(32)内载入有卷积神经网络训练的网络模型,网络模型内存储识别目标的纹理特征信息的参数。
CN202111317587.5A 2021-11-09 2021-11-09 一种基于视觉的烟叶辅料运送小车 Pending CN113954986A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111317587.5A CN113954986A (zh) 2021-11-09 2021-11-09 一种基于视觉的烟叶辅料运送小车

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111317587.5A CN113954986A (zh) 2021-11-09 2021-11-09 一种基于视觉的烟叶辅料运送小车

Publications (1)

Publication Number Publication Date
CN113954986A true CN113954986A (zh) 2022-01-21

Family

ID=79469504

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111317587.5A Pending CN113954986A (zh) 2021-11-09 2021-11-09 一种基于视觉的烟叶辅料运送小车

Country Status (1)

Country Link
CN (1) CN113954986A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105479434A (zh) * 2016-01-21 2016-04-13 厦门大学 智能保鲜搬运机器人
CN107140396A (zh) * 2017-06-06 2017-09-08 桂林电子科技大学 一种多功能智能搬运平台
CN109048926A (zh) * 2018-10-24 2018-12-21 河北工业大学 一种基于立体视觉的机器人智能避障系统及方法
CN109515553A (zh) * 2018-12-04 2019-03-26 深圳前海达闼云端智能科技有限公司 运输机器人及其车体
CN110765922A (zh) * 2019-10-18 2020-02-07 华南理工大学 一种agv用双目视觉物体检测障碍物系统
CN111837593A (zh) * 2020-07-24 2020-10-30 安徽农业大学 一种新型基于机器视觉和卷积神经网络算法的前胡除草机
CN213122711U (zh) * 2020-09-22 2021-05-04 长沙亚创智能科技有限公司 Ai视觉循迹自动驾驶智能小车

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105479434A (zh) * 2016-01-21 2016-04-13 厦门大学 智能保鲜搬运机器人
CN107140396A (zh) * 2017-06-06 2017-09-08 桂林电子科技大学 一种多功能智能搬运平台
CN109048926A (zh) * 2018-10-24 2018-12-21 河北工业大学 一种基于立体视觉的机器人智能避障系统及方法
CN109515553A (zh) * 2018-12-04 2019-03-26 深圳前海达闼云端智能科技有限公司 运输机器人及其车体
CN110765922A (zh) * 2019-10-18 2020-02-07 华南理工大学 一种agv用双目视觉物体检测障碍物系统
CN111837593A (zh) * 2020-07-24 2020-10-30 安徽农业大学 一种新型基于机器视觉和卷积神经网络算法的前胡除草机
CN213122711U (zh) * 2020-09-22 2021-05-04 长沙亚创智能科技有限公司 Ai视觉循迹自动驾驶智能小车

Similar Documents

Publication Publication Date Title
CN206913136U (zh) 一种传送带式机械臂agv小车
CN112567976A (zh) 一种可旋转式多自由度果蔬采摘收集装置
CN110614622A (zh) 一种智能果实采摘机器人及其实现方法
CN111645049B (zh) 一种机械爪、机械手、搬运机器人以及搬运系统
CN209737595U (zh) 一种可无线充电的移动式机械臂小车
CN116062469A (zh) 一种全自动智能装卸工业机器人装置
CN210850260U (zh) 一种搬运机器人机械手装置及搬运机器人
CN110435784B (zh) 一种全地形移动平台及其组成的机器人
CN216076171U (zh) 一种瓷砖智能铺贴机器人
CN209498337U (zh) 一种基于机器视觉的果树喷药机器人
CN109193457B (zh) 一种输电线路沿地线巡线机器人
CN113276090A (zh) 一种大承载仿人双臂服务机器人
CN113954986A (zh) 一种基于视觉的烟叶辅料运送小车
CN109502225B (zh) 一种铝模板自动出库打包设备及方法
CN110883515A (zh) 一种基于履带式六轴机器人的智能拧紧装配系统
CN115091429A (zh) 一种袋式除尘器的检修机器人及其控制方法
CN1284654C (zh) 复印机自动添换纸机器人
CN211439958U (zh) 档案管理机器人
CN213920809U (zh) 装载机轮胎自动搬运系统
CN220362599U (zh) 一种搬运机器人用的移动机构
CN112572267A (zh) 装载机轮胎自动搬运系统
CN112917481A (zh) 一种基于Delta机械臂的猕猴桃采摘装置
CN220799160U (zh) 一种温室大棚轨道采摘机器人
CN215836016U (zh) 一种可旋转式多自由度果蔬采摘收集装置
CN221023731U (zh) 转运车及转运车系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20220121