CN106672859B - 一种基于叉车视觉识别托盘的方法及叉车 - Google Patents

一种基于叉车视觉识别托盘的方法及叉车 Download PDF

Info

Publication number
CN106672859B
CN106672859B CN201710009007.3A CN201710009007A CN106672859B CN 106672859 B CN106672859 B CN 106672859B CN 201710009007 A CN201710009007 A CN 201710009007A CN 106672859 B CN106672859 B CN 106672859B
Authority
CN
China
Prior art keywords
pallet
fork truck
reflective layer
image
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710009007.3A
Other languages
English (en)
Other versions
CN106672859A (zh
Inventor
朱积祥
雷洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Youguang Image Technology Co.,Ltd.
Original Assignee
Shenzhen Bright Image Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Bright Image Technology Co Ltd filed Critical Shenzhen Bright Image Technology Co Ltd
Priority to CN201710009007.3A priority Critical patent/CN106672859B/zh
Publication of CN106672859A publication Critical patent/CN106672859A/zh
Application granted granted Critical
Publication of CN106672859B publication Critical patent/CN106672859B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/07504—Accessories, e.g. for towing, charging, locking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/0755—Position control; Position detectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Structural Engineering (AREA)
  • Civil Engineering (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Geology (AREA)
  • Mechanical Engineering (AREA)
  • Warehouses Or Storage Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种基于叉车视觉识别托盘的方法，方法包括：叉车利用单色照明单元照亮托盘所对应的反光层；叉车通过摄像头拍摄托盘所对应的反光层，以获得托盘的位置和/或托盘上的反光层的位置所对应的倾斜图像；叉车对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像；叉车将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔。通过上述方式，本发明能够自动调整叉车的位置，使得叉车的插条(方向和位置)能够准确对准托盘的插孔(方位)，方便叉车快速将托盘托起。

Description

一种基于叉车视觉识别托盘的方法及叉车
技术领域
本发明涉及自动化技术领域，特别是涉及一种基于叉车视觉识别托盘的方法及叉车。
背景技术
随着科技的发展，工业自动化应用而生，为降低人力劳动成本，在许多工厂或者货仓都采用移动机器人进行搬运货物等。托盘，也称叉车垫板，可以通过托盘盛放物品，再通过叉车将托盘托起，搬运到相应位置，以实现机械自动托运。在市面上，为了节省人工成本，大多数都是通过自动控制叉车的对准托盘的插孔并插入，然后将托盘托起，控制叉车到相应的位置，以实现搬运物品。
也就是说，目前市面上的叉车都是自动控制其运动轨迹的，由于各行各厂家所生产的叉车不一样，因此各厂家所生产的叉车对托盘不能准确定位，叉车的插条有时候不能准确的对准托盘的插孔，使得整个搬运过程所消耗的时间较大，且工作效率也低。
发明内容
本发明主要解决的技术问题是提供一种基于叉车视觉识别托盘的方法及叉车，解决了上述现有技术中的叉车的插条不能准确插入托盘的插孔的技术问题。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种基于叉车视觉识别托盘的方法，该叉车设有摄像头，托盘设有插孔，托盘设有插孔的区域倾斜设有具有反光功能的反光层，该方法包括：叉车在确定叉车与托盘的距离处于预设距离值内时，叉车利用单色照明单元照亮托盘所对应的反光层；叉车通过摄像头拍摄托盘所对应的反光层，以获得托盘的位置和/或托盘上的反光层的位置所对应的倾斜图像，其中摄像头的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明单元所发出的光以及与单色照明单元所发出的光的波长相同的光；叉车对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像；叉车将所述垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔中。
其中，托盘设有插孔的区域倾斜设有多个形状不同的反光层，叉车通过摄像头拍摄托盘所对应的反光层的步骤包括：叉车通过摄像头拍摄托盘所对应的多个形状不同的反光层中的至少一者。
其中，叉车对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像的步骤包括：叉车将倾斜图像中托盘的位置和/或托盘上的反光层的位置转换为垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像；叉车获取并保存所转换得到的垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像。
其中，叉车将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或所述托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹的步骤包括：叉车将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并计算出垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置的相对偏移度；叉车根据偏移度的大小调整叉车与托盘的相对应运动轨迹。
其中，反光层与摄像头不处于同一水平面上，且摄像头相对反光层倾斜设置。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种叉车，包括：单色照明模块，用于在确定叉车与托盘的距离处于预设距离值时，照亮托盘所对应的反光层，其中托盘设有插孔，托盘设有插孔的区域倾斜设有具有反光功能的反光层；摄像头模块，用于拍摄托盘所对应的反光层，以获得托盘的位置和/或托盘上的反光层的位置所对应的倾斜图像，其中摄像头模块的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明模块所发出的光以及与单色照明模块所发出的光的波长相同的光；图像分解模块，用于对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像；图像对比调整模块，用于将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔中。
其中，托盘设有插孔的区域倾斜设有多个形状不同的反光层；摄像头模块用于拍摄托盘所对应的多个形状不同的反光层中的至少一者。
其中，图像分解模块包括：图像转换单元，用于将倾斜图像中托盘的位置和/或托盘上的反光层的位置转换为垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像；图像保存单元，用于获取并保存所转换得到的垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像。
其中，图像对比调整模块包括：图像对比单元，用于将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比；图像计算单元，用于计算出垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置的相对偏移度；调整单元，用于根据偏移度的大小调整叉车与托盘的相对应运动轨迹。
其中，反光层与摄像头模块的镜头不处于同一水平面上，且摄像头模块的镜头相对反光层倾斜设置。
区别于现有技术，本发明所取得的有益效果是：本发明所公开的基于叉车视觉识别托盘的方法包括：叉车在确定叉车与托盘的距离处于预设距离值时，叉车利用单色照明单元照亮托盘所对应的反光层；叉车通过摄像头拍摄托盘所对应的反光层，以获得托盘的位置和/或托盘上的反光层的位置所对应的倾斜图像，其中摄像头的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明单元所发出的光以及与单色照明单元所发出的光的波长相同的光；叉车对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像；叉车将所述垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔中。通过上述方式，本发明能够自动调整叉车的运动轨迹，使得叉车的插条(方向和/或位置)能够准确对准托盘的插孔(方位)，方便叉车快速将托盘托起。
附图说明
图1是本发明基于叉车视觉识别托盘的系统的结构示意图；
图2是图1中叉车的立体结构示意图；
图3是图1中托盘的立体结构示意图；
图4是图1中叉车的摄像头和托盘的位置关系示意图；
图5是本发明基于叉车视觉识别托盘的系统的流程示意图；
图6是图5中步骤S103的子步骤结构示意图；
图7是图6中倾斜图像转换为垂直图像示意图；
图8是图5中步骤S104的子步骤结构示意图；
图9是图1中叉车的结构示意图；
图10是图9中图像分解模块的结构示意图；
图11是图9中图像对比调整模块的结构示意图。
具体实施方式
下面结合附图和实施方式对本发明进行详细说明。
如图1-3所示，该系统包括叉车10和托盘11。叉车10设有摄像头101和单色照明单元。托盘11设有插孔111，托盘11设有插孔111的区域倾斜设有具有反光功能的反光层112。
在本实施例中，摄像头101和/或单色照明单元倾斜设置，摄像头101的镜头和/或单色照明单元发出光线的开口倾斜朝向托盘11的反光层112。具体地，反光层112与摄像头不处于同一水平面上，且摄像头相对反光层112倾斜设置。也就是说，摄像头101的镜头与反光层112的连线倾斜设置，即摄像头101的镜头朝向方向A拍摄托盘11的反光层112，如图4所示。
在本实施例中，反光层112间隔设置在托盘11设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面上。具体的，托盘设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面设置有多个倾斜面，反光层设置在倾斜面上。优选的，托盘11设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面设有凸起或设有凹槽，凸起或凹槽形成倾斜面，倾斜面的倾斜角度小于等于90度且大于等于0度。
如图5所示，图5是本发明基于叉车视觉识别托盘的系统的流程示意图。该方法包括以下步骤：
步骤S101：叉车10在确定叉车10与托盘11的距离处于预设距离值内时，叉车10利用单色照明单元照亮托盘所对应的反光层112。
应理解，叉车10上设置有距离传感器，具体地，叉车10的底部设有距离传感器，保持与托盘11处于同一水平面，在步骤S101之前，该方法还包括：
步骤a：叉车10的距离传感器检测叉车10与托盘11的距离。
具体的，距离传感器通过检测叉车10与托盘11的反光层112来检测叉车10与托盘11的距离。距离传感器通过发送红外线至反光层112上，使得反光层112反射红外线后，叉车即可确定叉车和反光层112的距离。
步骤b：叉车10判断叉车10与托盘11的距离是否处于预设距离值内。其中预设距离值为用户设置的值，如果叉车10确定叉车10与托盘11的距离不处于预设距离值内，继续执行步骤a，如果叉车10确定叉车10与托盘11的距离处于预设距离值内，则执行步骤S101。
步骤S102：叉车10通过摄像头拍摄托盘所对应的反光层112，以获得托盘的位置和/或托盘上的反光层112的位置所对应的倾斜图像。
其中，摄像头的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明单元所发出的光以及与单色照明单元所发出的光的波长相同的光。
在本实施例中，托盘11设有插孔111的区域倾斜设有多个形状不同的反光层112。也就是说，叉车10可以通过托盘11上的反光层112识别到每一反光层112在托盘11上的不同位置，即每一反光层112对应托盘11的不同位置，因此为了方便叉车10识别反光层112处于托盘11的位置，优选将反光层112的形状设置成不相同。
在步骤S102中，叉车10通过摄像头拍摄托盘11所对应的反光层112的步骤包括：叉车10通过摄像头拍摄托盘11所对应的多个形状不同的反光层112中的至少一者。
步骤S103：叉车10对倾斜图像进行分解处理，以获得倾斜图像中托盘11的位置和/或托盘11上的反光层112的位置的垂直图像。
其中步骤S103具体包括以下子步骤：
步骤S1031：叉车10将倾斜图像中托盘11的位置和/或托盘11上的反光层112的位置转换为垂直拍摄托盘11的位置和/或托盘11上的反光层112的位置所对应的垂直图像。
举例而言，如图7所示，摄像头朝A方向拍摄反光层112所得到一个倾斜角度拍摄的倾斜图像c，犹如几何一样，将倾斜图像c分解为水平方向B拍摄反光层112所得到一个水平角度拍摄的水平图像b和垂直方向C拍摄反光层112所得到一个垂直角度拍摄的垂直图像a。当然，这种将倾斜图像分解为垂直图像和水平图像的技术已经是相当成熟的技术，故在此不一一赘述。
步骤S1032：叉车10获取并保存所转换得到的垂直拍摄托盘11的位置和/或托盘11上的反光层112的位置所对应的垂直图像。
由于叉车10和托盘11是设置在同一水平面的，因此，托盘11在水平方向B所移动的动作对叉车10来讲是很难察觉的，也不利于观察，也就是说，水平图像不利于观察；而只有在垂直图像的变化才能观察的清楚，在垂直方向C，托盘11的一举一动都能清晰反映。
步骤S104：叉车10将垂直图像所对应的托盘11的位置和/或托盘11上的反光层112的位置与标准图像所对应的托盘11的位置和/或托盘11上的反光层112的位置进行对比，并根据对比结果调整叉车10的运动轨迹，使得叉车10能够准确插入托盘11的插孔111中。
其中步骤S104包括以下子步骤：
步骤S1041：叉车10将垂直图像所对应的托盘11的位置和/或托盘11上的反光层112的位置与标准图像所对应的托盘11的位置和/或托盘11上的反光层112的位置进行对比，并计算出垂直图像所对应的托盘11的位置和/或托盘11上的反光层112的位置与标准图像所对应的托盘11的位置和/或托盘11上的反光层112的位置的相对偏移度。
在本实施例中，该相对偏移度为托盘11和/或托盘11上的反光层112在图像中的位置，叉车10通过此偏移度能够计算出实际的叉车10相对托盘11的偏移度。
应理解，标准图像为预设设置的图像，即托盘11的位置和/或托盘11上的反光层112的位置在标准图像的位置都预先设置好，即如果叉车10拍摄反光层112所得到的图像与标准图像一样，则叉车10的插条102对准托盘11的插孔111。又或者叉车拍摄托盘11的预定距离以及预定方位都是确定好的，叉车10在该预定距离和预定方位所拍摄图像为标准图像的，此时叉车10的插条102能够对准托盘11的插孔111。也就是说，通过标准图像能够计算出叉车10应在托盘的相对预定位置，如果叉车不在该相对预定位置，则可以计算出与相对预定位置的方位，从而调整叉车的运动轨迹使其处于相对预定位置即可。
步骤S1042：叉车10根据偏移度的大小调整叉车10与托盘11的相对应运动轨迹。
在步骤S1042中，叉车10是一边运动一边调整叉车10的运动轨迹。即如果垂直图像a所对应的托盘11的位置与标准图像所对应的托盘11的位置相偏移10度，则叉车10一边运动一边调整相对托盘11方位，使得叉车10所拍摄的垂直图像a所对应的托盘11的位置与标准图像所对应的托盘11的位置相偏移0度。
如图9所示，图9是图1中叉车的结构示意图。该叉车10包括单色照明模块101、摄像头模块102、图像分解模块103和图像对比调整模块104。
单色照明模块101用于在确定叉车10与托盘11的距离处于预设距离值时，照亮托盘11所对应的反光层112。应理解，托盘11设有插孔111，托盘11设有插孔111的区域倾斜设有具有反光功能的反光层112。
摄像头模块102用于拍摄托盘11所对应的反光层112，以获得托盘11的位置和/或托盘11上的反光层112的位置所对应的倾斜图像。其中摄像头模块102的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明模块所发出的光以及与单色照明模块所发出的光的波长相同的光。
在本实施例中，摄像头模块102的镜头和/或单色照明模块101倾斜设置，摄像头模块102的镜头和/或单色照明模块101发出光线的开口倾斜朝向托盘11的反光层112。具体地，反光层112与摄像头模块102的镜头不处于同一水平面上，且摄像头模块102的镜头相对反光层112倾斜设置。也就是说，摄像头模块102的镜头与反光层112的连线倾斜设置，即摄像头模块102的镜头朝向方向A拍摄托盘11的反光层112，如图4所示。
另外，在本实施例中，托盘11设有插孔111的区域倾斜设有多个形状不同的反光层112。摄像头模块102用于拍摄托盘11所对应的多个形状不同的反光层112中的至少一者。也就是说，叉车10可以通过托盘11上的反光层112识别到每一反光层112在托盘11上的不同位置，即每一反光层112对应托盘11的不同位置，因此为了方便叉车10识别反光层112处于托盘11的位置，优选将反光层112的形状设置成不相同。
应理解，反光层112间隔设置在托盘11设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面上。具体的，托盘设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面设置有多个倾斜面，反光层设置在倾斜面上。优选的，托盘11设有至少一插孔的一侧面和/或托盘设有至少一插孔的一侧面的上方的顶面设有凸起或设有凹槽，凸起或凹槽形成倾斜面，倾斜面的倾斜角度小于等于90度且大于等于0度。
应理解，叉车10还包括有距离传感器模块，其中，叉车10的底部设有距离传感器模块，距离传感器模块保持与托盘11处于同一水平面。在本实施例中，距离传感器模块用于检测叉车10与托盘11的距离。具体地，距离传感器模块通过检测叉车10与托盘11的反光层112来检测叉车10与托盘11的距离。距离传感器模块通过发送红外线至反光层112上，使得反光层112反射红外线后，叉车即可确定叉车和反光层112的距离。同时，距离传感器模块判断叉车10与托盘11的距离是否处于预设距离值内。其中预设距离值为用户设置的值，如果叉车10确定叉车10与托盘11的距离不处于预设距离值内，继续检测叉车10与托盘11的距离；如果叉车10确定叉车10与托盘11的距离处于预设距离值内，则摄像头模块102才拍摄托盘11所对应的反光层112。
图像分解模块103用于对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像。
如图10所示，图像分解模块包括图像转换单元1031和图像保存单元1032，图像转换单元1031用于将倾斜图像中托盘的位置和/或托盘上的反光层的位置转换为垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像。图像保存单元103用于获取并保存所转换得到的垂直拍摄托盘的位置和/或托盘上的反光层的位置所对应的垂直图像。
图像对比调整模块104用于将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔中。
如图11所示，图像对比调整模块104包括图像对比单元1041、图像计算单元1042和调整单元1043。图像对比单元1041用于将垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比。图像计算单元1042用于计算出垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置的相对偏移度。调整单元1043用于根据偏移度的大小调整叉车与托盘的相对应运动轨迹。
应理解，该相对偏移度为托盘11和/或托盘11上的反光层112在图像中的位置，图像计算单元1042通过此偏移度能够计算出实际的叉车10相对托盘11的偏移度。
应理解，标准图像为预设设置的图像，即托盘11的位置和/或托盘11上的反光层112的位置在标准图像的位置都预先设置好，即如果叉车10拍摄反光层112所得到的图像与标准图像一样，则叉车10的插条102对准托盘11的插孔111。又或者叉车拍摄托盘11的预定距离以及预定方位都是确定好的，叉车10在该预定距离和预定方位所拍摄图像为标准图像的，此时叉车10的插条102能够对准托盘11的插孔111。也就是说，通过标准图像能够计算出叉车10应在托盘的相对预定位置，如果叉车不在该相对预定位置，则可以计算出与相对预定位置的方位，从而调整叉车的运动轨迹使其处于相对预定位置即可。
其中，叉车10是一边运动一边调整叉车10的运动轨迹。即如果垂直图像a所对应的托盘11的位置与标准图像所对应的托盘11的位置相偏移10度，则叉车10一边运动一边调整相对托盘11方位，使得叉车10所拍摄的垂直图像a所对应的托盘11的位置与标准图像所对应的托盘11的位置相偏移0度。
综上，本发明所公开的基于叉车视觉识别托盘的方法包括：叉车在确定叉车与托盘的距离处于预设距离值时，叉车利用单色照明单元照亮托盘所对应的反光层；叉车通过摄像头拍摄托盘所对应的反光层，以获得托盘的位置和/或托盘上的反光层的位置所对应的倾斜图像，其中摄像头的镜头上设置有窄带滤光片，窄带滤光片用于通过单色照明单元所发出的光以及与单色照明单元所发出的光的波长相同的光；叉车对倾斜图像进行分解处理，以获得倾斜图像中托盘的位置和/或托盘上的反光层的位置的垂直图像；叉车将所述垂直图像所对应的托盘的位置和/或托盘上的反光层的位置与标准图像所对应的托盘的位置和/或托盘上的反光层的位置进行对比，并根据对比结果调整叉车的运动轨迹，使得叉车能够准确插入托盘的插孔中。通过上述方式，本发明能够自动调整叉车的运动轨迹，使得叉车的插条(方向和/或位置)能够准确对准托盘的插孔(方位)，方便叉车快速将托盘托起。
以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于叉车视觉识别托盘的方法，其特征在于，所述叉车设有摄像头，所述托盘设有插孔，所述托盘设有插孔的区域倾斜设有具有反光功能的反光层，所述方法包括：
所述叉车在确定所述叉车与所述托盘的距离处于预设距离值内时，所述叉车利用单色照明单元照亮所述托盘所对应的所述反光层；
所述叉车通过摄像头拍摄所述托盘所对应的所述反光层，以获得所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的倾斜图像，其中所述摄像头的镜头上设置有窄带滤光片，所述窄带滤光片用于通过所述单色照明单元所发出的光以及与所述单色照明单元所发出的光的波长相同的光；
所述叉车对所述倾斜图像进行分解处理，以获得所述倾斜图像中所述托盘的位置和/或所述托盘上的所述反光层的位置的垂直图像；
所述叉车将所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置进行对比，并根据对比结果调整所述叉车的运动轨迹，使得所述叉车能够准确插入所述托盘的插孔中。
2.根据权利要求1所述的方法，其特征在于，所述托盘设有插孔的区域倾斜设有多个形状不同的所述反光层，所述叉车通过摄像头拍摄所述托盘所对应的所述反光层的步骤包括：
所述叉车通过摄像头拍摄所述托盘所对应的多个形状不同的所述反光层中的至少一者。
3.根据权利要求1所述的方法，其特征在于，所述叉车对所述倾斜图像进行分解处理，以获得所述倾斜图像中所述托盘的位置和/或所述托盘上的所述反光层的位置的垂直图像的步骤包括：
所述叉车将所述倾斜图像中所述托盘的位置和/或所述托盘上的所述反光层的位置转换为垂直拍摄所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的垂直图像；
所述叉车获取并保存所转换得到的垂直拍摄所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的垂直图像。
4.根据权利要求1所述的方法，其特征在于，所述叉车将所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置进行对比，并根据对比结果调整所述叉车的运动轨迹的步骤包括：
所述叉车将所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与所述标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置进行对比，并计算出所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与所述标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置的相对偏移度；
所述叉车根据所述偏移度的大小调整所述叉车与所述托盘的相对应运动轨迹。
5.根据权利要求1所述的方法，其特征在于，所述反光层与所述摄像头不处于同一水平面上，且所述摄像头相对所述反光层倾斜设置。
6.一种叉车，其特征在于，包括：
单色照明模块，用于在确定所述叉车与托盘的距离处于预设距离值时，照亮所述托盘所对应的反光层，其中所述托盘设有插孔，所述托盘设有插孔的区域倾斜设有具有反光功能的反光层；
摄像头模块，用于拍摄所述托盘所对应的所述反光层，以获得所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的倾斜图像，其中所述摄像头模块的镜头上设置有窄带滤光片，所述窄带滤光片用于通过所述单色照明模块所发出的光以及与所述单色照明模块所发出的光的波长相同的光；
图像分解模块，用于对所述倾斜图像进行分解处理，以获得所述倾斜图像中所述托盘的位置和/或所述托盘上的所述反光层的位置的垂直图像；
图像对比调整模块，用于将所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置进行对比，并根据对比结果调整所述叉车的运动轨迹，使得所述叉车能够准确插入所述托盘的插孔中。
7.根据权利要求6所述的叉车，其特征在于，所述托盘设有插孔的区域倾斜设有多个形状不同的所述反光层；
所述摄像头模块用于拍摄所述托盘所对应的多个形状不同的所述反光层中的至少一者。
8.根据权利要求6所述的叉车，其特征在于，所述图像分解模块包括：
图像转换单元，用于将所述倾斜图像中所述托盘的位置和/或所述托盘上的所述反光层的位置转换为垂直拍摄所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的垂直图像；
图像保存单元，用于获取并保存所转换得到的垂直拍摄所述托盘的位置和/或所述托盘上的所述反光层的位置所对应的垂直图像。
9.根据权利要求6所述的叉车，其特征在于，所述图像对比调整模块包括：
图像对比单元，用于将所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与所述标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置进行对比；
图像计算单元，用于计算出所述垂直图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置与所述标准图像所对应的所述托盘的位置和/或所述托盘上的所述反光层的位置的相对偏移度；
调整单元，用于根据所述偏移度的大小调整所述叉车与所述托盘的相对应运动轨迹。
10.根据权利要求6所述的叉车，其特征在于，所述反光层与所述摄像头模块的镜头不处于同一水平面上，且所述摄像头模块的镜头相对所述反光层倾斜设置。
CN201710009007.3A 2017-01-05 2017-01-05 一种基于叉车视觉识别托盘的方法及叉车 Active CN106672859B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710009007.3A CN106672859B (zh) 2017-01-05 2017-01-05 一种基于叉车视觉识别托盘的方法及叉车

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710009007.3A CN106672859B (zh) 2017-01-05 2017-01-05 一种基于叉车视觉识别托盘的方法及叉车

Publications (2)

Publication Number Publication Date
CN106672859A CN106672859A (zh) 2017-05-17
CN106672859B true CN106672859B (zh) 2018-11-09

Family

ID=58849134

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710009007.3A Active CN106672859B (zh) 2017-01-05 2017-01-05 一种基于叉车视觉识别托盘的方法及叉车

Country Status (1)

Country Link
CN (1) CN106672859B (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107562049A (zh) * 2017-08-09 2018-01-09 深圳市有光图像科技有限公司 一种通过对比图像识别智能叉车的位置的方法及智能叉车
CN108181932B (zh) * 2017-12-30 2021-03-19 北京铁道工程机电技术研究所股份有限公司 架车机的架车位置调整方法和装置、设备以及存储介质
CN109040539B (zh) 2018-07-10 2020-12-01 京东方科技集团股份有限公司 图像采集装置、货架及图像识别方法
CN109584296A (zh) * 2018-09-28 2019-04-05 上海神添实业有限公司 一种基于单目视觉的叉车识别测距方法
CN109279542B (zh) * 2018-10-22 2020-07-07 广州微牌智能科技有限公司 叉车入叉方法、装置、计算机设备和存储介质
CN109368552A (zh) * 2018-10-22 2019-02-22 广州微牌智能科技有限公司 托盘入叉方法、装置、系统、设备和存储介质
CN109443201B (zh) * 2018-10-31 2020-10-16 广东嘉腾机器人自动化有限公司 一种基于s300激光扫描传感器的栈板识别方法
CN109650292B (zh) * 2019-02-02 2019-11-05 北京极智嘉科技有限公司 一种智能叉车以及智能叉车的位置调整方法和介质
CN109850810B (zh) * 2019-03-13 2020-09-25 南京实邦智能科技有限公司 叉车运动控制方法及装置
CN110054116B (zh) * 2019-03-15 2021-01-08 广州蓝胖子机器人有限公司 应用于叉车的货叉导航方法、系统及无人叉车
EP3950566B1 (en) 2019-04-02 2024-03-20 Beijing Geekplus Technology Co., Ltd. High-position robot, method for calibrating return of storage container, and storage medium
CN109987550B (zh) * 2019-04-04 2021-03-19 北京极智嘉科技有限公司 一种高位叉车、归还仓储容器的校准方法及存储介质
CN110127569A (zh) * 2019-04-08 2019-08-16 国以贤智能科技（上海）有限公司 视觉找孔的方法及叉车
CN110054121B (zh) * 2019-04-25 2021-04-20 北京极智嘉科技有限公司 一种智能叉车以及容器位姿偏移检测方法
CN111738253B (zh) * 2019-04-30 2023-08-08 北京京东乾石科技有限公司 叉车托盘定位方法、装置、设备和可读存储介质
CN111620014A (zh) * 2020-04-30 2020-09-04 南京理工大学 一种仓储搬运agv多层货盘识别及避障装置和方法
CN112707340B (zh) * 2020-12-10 2022-07-19 安徽有光图像科技有限公司 基于视觉识别的设备控制信号生成方法、装置及叉车
CN114435434B (zh) * 2021-12-28 2023-06-02 广州润易包装制品有限公司 一种可以辅助叉车装载的转运台车
CN115848878B (zh) * 2023-02-28 2023-05-26 云南烟叶复烤有限责任公司 一种基于agv的烟框识别与堆叠方法及系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE7804927L (sv) * 1978-04-28 1979-10-29 Volvo Ab Anordning for att orientera exempelvis ett lyftdon i forhallande till en last
US4678329A (en) * 1985-10-18 1987-07-07 Calspan Corporation Automatically guided vehicle control system
US5208753A (en) * 1991-03-28 1993-05-04 Acuff Dallas W Forklift alignment system
IT1275664B1 (it) * 1994-11-16 1997-10-17 Consorzio Telerobot Sistema per il controlllo e guida automatica di un gruppo elevatore a forche
JP3921968B2 (ja) * 2001-07-12 2007-05-30 株式会社豊田自動織機 位置検出方法及び位置検出装置
JP2003155199A (ja) * 2001-11-19 2003-05-27 Toyota Industries Corp 産業車両の音声報知装置及び産業車両
JP2010189130A (ja) * 2009-02-18 2010-09-02 Nippon Yusoki Co Ltd フォークリフトの荷役支援装置
WO2013059150A1 (en) * 2011-10-19 2013-04-25 Crown Equipment Corporation Identifying and selecting objects that may correspond to pallets in an image scene
JP2013086959A (ja) * 2011-10-21 2013-05-13 Sumitomo Heavy Ind Ltd フォークリフトのフォーク位置決め支援装置および方法
CN103472827B (zh) * 2013-09-11 2016-04-20 无锡普智联科高新技术有限公司 基于导引路径的agv举升校正系统及其方法
JP2015225450A (ja) * 2014-05-27 2015-12-14 村田機械株式会社 自律走行車、及び自律走行車における物体認識方法
JP6542574B2 (ja) * 2015-05-12 2019-07-10 株式会社豊田中央研究所 フォークリフト
CN105776077B (zh) * 2016-03-28 2017-12-19 广州飞锐机器人科技有限公司 一种使用智能叉车识别卡板叉孔的方法及装置

Also Published As

Publication number Publication date
CN106672859A (zh) 2017-05-17

Similar Documents

Publication Publication Date Title
CN106672859B (zh) 一种基于叉车视觉识别托盘的方法及叉车
US8504191B2 (en) Method for picking up work pieces
US9025827B2 (en) Controlling truck forks based on identifying and tracking multiple objects in an image scene
US9626753B2 (en) Programmable digital machine vision inspection system
JP4911341B2 (ja) 物品移載装置
US8930009B2 (en) Robot system and processed object manufacturing method
US20110316977A1 (en) Method of cnc profile cutting program manipulation
US10280025B2 (en) Sensor controller for interpreting natural interaction sensor for web handling
WO2019014760A1 (en) APPARATUS AND METHOD FOR CONSTRUCTING PALLET LOAD
JP2018189561A (ja) 画像検査装置
US10527557B2 (en) Adaptive diffuse illumination systems and methods
WO1996028985A1 (fr) Procede pour la coupe automatique de pieces dans un tissu a motif
US20190360992A1 (en) Leather Inspection System
CN109712315B (zh) 一种基于双摄像头的自动售卖机货物掉落检测方法
CN109052180A (zh) 一种基于机器视觉的集装箱自动对位方法及系统
US20230273132A1 (en) Automated inspection of foreign materials, cracks and other surface anomalies
JP2015537219A (ja) 生産の流れにおいて欠陥を検出するための動的なデジタルイメージングシステムの校正
CN110941462B (zh) 自动学习产品操纵的系统和方法
CN109384039A (zh) 物品搬运装置
CN107562049A (zh) 一种通过对比图像识别智能叉车的位置的方法及智能叉车
US20220327777A1 (en) System that fits a parameterized three-dimensional shape to multiple two-dimensional images
US20190234730A1 (en) Method of detecting positional displacement of sample container, image capturing method employing same, and sample container positional displacement detecting device
CN109746984A (zh) 一种基于机器视觉的毛边木板对中及输送机构
US20130327828A1 (en) Image capture system
JP2013096922A (ja) 飲料液異物検査装置および飲料液異物検査方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20210125

Address after: 246000 5 / F, building 1, No.10 Neihuan West Road (dongkun Industrial Park), Yingjiang District, Anqing City, Anhui Province

Patentee after: Anhui Youguang Image Technology Co.,Ltd.

Address before: Room 403, building a, Jinke Industrial Park, Guanlan hi tech Industrial Park, 310 Wuhe Avenue, Guanlan street, Longhua New District, Shenzhen, Guangdong 518000

Patentee before: Shenzhen Youguang Image Technology Co.,Ltd.

TR01 Transfer of patent right