CN111820545A - 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法 - Google Patents

一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法 Download PDF

Info

Publication number
CN111820545A
CN111820545A CN202010574149.6A CN202010574149A CN111820545A CN 111820545 A CN111820545 A CN 111820545A CN 202010574149 A CN202010574149 A CN 202010574149A CN 111820545 A CN111820545 A CN 111820545A
Authority
CN
China
Prior art keywords
point cloud
sole
glue spraying
spraying track
transformation matrix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010574149.6A
Other languages
English (en)
Inventor
贺磊盈
洪迪华
陈刚
李秦川
武传宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Zhejiang Sci Tech University ZSTU
Zhejiang University of Science and Technology ZUST
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN202010574149.6A priority Critical patent/CN111820545A/zh
Publication of CN111820545A publication Critical patent/CN111820545A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A43FOOTWEAR
    • A43DMACHINES, TOOLS, EQUIPMENT OR METHODS FOR MANUFACTURING OR REPAIRING FOOTWEAR
    • A43D25/00Devices for gluing shoe parts
    • A43D25/18Devices for applying adhesives to shoe parts
    • G06T5/70
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/521Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • AHUMAN NECESSITIES
    • A43FOOTWEAR
    • A43DMACHINES, TOOLS, EQUIPMENT OR METHODS FOR MANUFACTURING OR REPAIRING FOOTWEAR
    • A43D2200/00Machines or methods characterised by special features
    • A43D2200/60Computer aided manufacture of footwear, e.g. CAD or CAM
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection

Abstract

本发明涉及一种鞋底喷胶轨迹的生成方法。技术方案是:一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法,该方法包括下列步骤:步骤1:利用线结构光在线扫描鞋底,获得指定鞋底当前姿态下的点云模型,步骤2:对当前点云模型以标准点云为目标进行采样一致性初始配准算法处理,获得粗配准坐标变换矩阵Tsac;步骤3:对粗配准后所得的点云模型以标准点云为目标进行最近点迭代算法处理,求得精配准坐标变换矩阵Ticp;步骤4:将坐标变换矩阵T=Tsac·Ticp作用在离线所得的喷胶轨迹上,即可得到当前鞋底所需的喷胶轨迹。该方法具有喷胶轨迹精度高、喷胶质量好、生产的标准化程度高的特点。

Description

一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法
技术领域
本发明涉及一种鞋底喷胶轨迹的生成方法,尤其涉及一种基于线结构光并结合离线与在线扫描生成鞋底喷胶轨迹的方法。
背景技术
鞋底喷胶工序是自动化制鞋的关键工序;目前实际生产中所采用的自动化喷胶工艺参考数据往往是利用线结构光扫描鞋底所获得的鞋底深度数据和姿态图数据。此类数据的缺点在于,当鞋底曲面形状不连续时,利用线结构光扫描无法获得完整的鞋底三维点云信息,影响喷胶轨迹的生成。针对这种情况,目前常用的方法是利用离线编程技术将示教得到的鞋底应用到生产线中。但这种方法需要增加喷胶工位,同时喷胶时鞋底的位姿也存在误差,这些都影响了此类鞋底的自动喷胶生产,较难保证鞋底的喷胶质量。因此,这种模式无法很好地满足对复杂鞋底实现喷胶工序自动化的质量要求。另一个面,目前实际生产中很多情况下是一种喷胶工艺只针对一种型号的鞋底,如果需要更换产品就必然伴随着工艺方法的改变,例如需要重新示教、调试设备等,费时费力;因而一种生产工艺方法在一定程度上能同时适用于多种不同种类的产品是非常有必要的。
发明内容
本发明的目的是提出一种基于线结构光传感器将离线与在线扫描相结合的自动生成鞋底喷胶轨迹的方法,该方法具有喷胶轨迹精度高、喷胶质量好、生产的标准化程度高的特点。
本发明提供的技术方案是:
一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法,
该方法包括下列步骤:
步骤1:利用线结构光在线扫描鞋底,获得指定鞋底当前姿态下的点云模型,
步骤2:对当前点云模型以标准点云为目标进行采样一致性初始配准算法处理,获得粗配准坐标变换矩阵Tsac;
步骤3:对粗配准后所得的点云模型以标准点云为目标进行最近点迭代算法处理,求得精配准坐标变换矩阵Ticp;
步骤4:将坐标变换矩阵T=Tsac·Ticp作用在离线所得的喷胶轨迹上,即可得到当前鞋底所需的喷胶轨迹。
所述步骤1中获得点云模型后,需要滤波去除噪点。
本发明的有益效果是:
1.本发明分成了离线和在线两个部分,使得生产模块化,让鞋底标准模型的获取能独立于生产过程,且在实际生产中标准模型不会被修改,使得生产的标准化程度更高;
2.本发明只需提高鞋底标准模型的精准度、改进点云的匹配算法,就能提高喷胶轨迹的精度,提高喷胶质量,改进方式便捷,可满足一般的工业需求。
附图说明
图1是实施例中运动鞋完整鞋底点云图。
图2是实施例中运动鞋底喷胶轨迹示意图。
图3是实施例中在线扫描鞋底点云图。
图4是实施例中在线鞋底点云与喷胶轨迹示意图。
图5是本发明提供的在线配准方法流程图。
图6是本发明提供的整体系统流程图。
具体实施方式
下面结合附图所示的实施例,对本发明作进一步说明,但本发明并不局限于以下实施例。
本发明所述结合离线与在线扫描自动生成鞋底喷胶轨迹的方法,首先在离线状态下获得指定运动鞋鞋底的完整点云数据并在此基础上手动或自动地生成喷胶轨迹。再通过在线扫描获得当前鞋底点云数据,对两个点云进行采样一致性初始配准算法与最近点迭代算法处理,求得坐标变换矩阵。将坐标变换矩阵作用于离线获得的喷胶轨迹上,进而自动生成当前鞋底的喷胶轨迹。
步骤是:
1.利用线结构光获得当前鞋底点云数据:
利用线结构光传感器扫描鞋底,提取图像中的激光光条中心,根据线结构光的三维检测原理可以得到光条中心所有点的三维坐标,最终获得鞋底当前姿态下的三维点云数据。
2.匹配当前鞋底点云与鞋底标准点云:
将在线扫描得到的点云数据与离线获得的标准点云数据进行对比,利用SAC-IA和ICP配准算法快速获得当前点云的坐标变换矩阵。具体步骤如下:
1)准备两片点云,目标点云Q和待配准点云P,先对两片点云进行统计滤波去噪点,再从点云P中获取n个采样点,同时获取这n个采样点的点特征直方图(FHPF)。
计算点特征直方图的方法是先对每一个待计算的采样点pq,计算出该点与其k个领域点之间的相对关系,以此建立简化的点特征直方图SPFH,记为S(pq),再求出以上k个领域点的SPFH,最终通过计算,得到快速点特征直方图F(pq),计算表达式为
Figure BDA0002550733140000041
式中:wi为第i个领域点的SPFH特征的加权值。
2)在点云Q中查找与点云P中的采样点具有相似FPFH特征的一个或多个点,从这些相似点中随机选取一个点作为点云P在点云Q中的对应点。
3)计算所有对应点对间的坐标变换矩阵,利用对应点变换后的距离误差和来判断变换矩阵的性能,以此判断对应点对匹配是否合理。可使用Huber罚函数来表示距离误差和函数。
其表达式记为
Figure BDA0002550733140000042
Figure BDA0002550733140000043
式中:ml是定值,li表示经变换后第i组对应点对之间的距离差值。
4)最后将距离误差和最小的点对关系作为最优对应点对关系,其所对应的坐标变换矩阵即可作为采样一致性初始配准的粗配准变换矩阵Tsac,将该变换矩阵作用于点云P后可得经过粗配准的点云P’。
5)将上述粗配准点云P’作为待配准点云,对点云P’中的每一个点Pi,在点云Q中寻找距离最近的对应点Qi,作为该点在点云Q中的对应点组成初始对应点对,可利用k-d树近邻搜索方法来进行匹配点的搜索。
6)采用方向向量阈值剔除错误的对应点对。计算上述得到的各对应点间的单位法向量夹角,通过设定的阈值剔除错误对应点对。
7)计算旋转矩阵R和平移向量t,使对应点集之间的均方误差最小。
Figure BDA0002550733140000051
8)设定阈值ε和最大迭代次数Nmax,将第7步中得到的坐标变换矩阵作用于点云P’,得到新点云P”,计算点云P”与点云Q的距离误差值,如果两次迭代间误差的差值小于阈值即ε=dk-dk-1或者迭代次数大于Nmax,则迭代结束,否则更新点云P”,重复以上步骤,直至满足收敛条件。将每一步迭代过程中得到的坐标变换矩阵进行累乘,最终得到的坐标变换矩阵Ticp即为精配准变换矩阵。
将粗配准坐标变换矩阵右乘精配准变换矩阵,即可求得最终坐标变换矩阵T=Tsac·Ticp
3.利用坐标变换矩阵生成当前鞋底喷胶轨迹:
将上述求得的最终坐标变换矩阵作用在标准喷胶轨迹上,即可生成当前鞋底喷胶轨迹。
设喷胶轨迹上的一点p的坐标为(x,y,z)T,对其作用变换矩阵T,可得变换后的点p’=pR+t。
Figure BDA0002550733140000052
设L上有n个点{p1,p2,…,pn},则曲线L’即为{p’1,p’2,…,p’n}的集合。
本发明具体实施例如下:
步骤1:在离线状态下,利用专业的立体相机获得指定鞋型的完整点云(标准鞋底点云如图1所示)并结合相应的喷胶工艺得到相应喷胶轨迹L(标准喷胶轨迹如图2所示)。
步骤2:利用线结构光在线扫描鞋底,并对生成的点云模型(在线扫描所得不完整的鞋底点云如图3所示)与已有的鞋底标准点云进行采样一致性初始配准算法与最近点迭代算法处理,求得坐标变换矩阵。
首先进行采样一致性初始配准,将在线扫描鞋底点云作为待配准点云P,将标准鞋底点云作为目标点云Q。先对。两个点云进行体素滤波,去掉多余点,减少计算量。再从点云P中获取n个采样点,同时获取这n个采样点的点特征直方图。然后在点云Q中查找与点云P中的采样点具有相似FPFH特征的一个或多个点,从这些相似点中随机选取一个点作为点云P在点云Q中的对应点。
计算所有对应点对间的坐标变换矩阵,利用Huber罚函数来判断变换矩阵的性能,值越小则变换矩阵性能越好。
Figure BDA0002550733140000061
(3)最后将距离误差和最小的点对关系作为最优对应点对关系,其所对应的坐标变换矩阵Tsac即可作为采样一致性初始配准的粗配准变换矩阵,将该变换矩阵作用于点云P后可得经过粗配准的点云P’。
(4)然后对P’进行最近点迭代配准,将粗配准点云P’作为待配准点云,对点云P’中的每一个点Pi,利用k-d树近邻搜索方法,在点云Q中寻找距离最近的对应点Qi,作为该点在点云Q中的对应点组成初始对应点对,采用方向向量阈值剔除错误的对应点对。计算对于点集的旋转矩阵R和平移向量t,使对应点集之间的均方误差最小。
Figure BDA0002550733140000062
(5)设定阈值ε和最大迭代次数Nmax,将得到的坐标变换矩阵T作用于点云P’,计算新点云P”与点云Q的距离误差值,如果两次迭代间误差的差值小于阈值即ε=dk-dk-1或者迭代次数大于Nmax,则迭代结束,否则更新点云P”,循环迭代直至满足收敛条件。将每一步迭代过程中得到的坐标变换矩阵进行累乘,最终得到的坐标变换矩阵即为精配准变换矩阵Ticp
Ticp=T1T2T3…Tn,n≤Nmax
将粗配准坐标变换矩阵右乘精配准变换矩阵,即可求得最终坐标变换矩阵。本例中计算所得坐标变换矩阵为:
Figure BDA0002550733140000071
步骤3:将坐标变换矩阵T作用于离线所得的喷胶轨迹L上,所得新曲线即为所需要的当前鞋底喷胶轨迹L’。
设喷胶轨迹上的一点p的坐标为(x,y,z)T,对其作用变换矩阵T,可得变换后的点p’=pR+t。
Figure BDA0002550733140000072
设L上有n个点{p1,p2,…,pn},则曲线L’即为{p’1,p’2,…,p’n}的集合。
本实施例中经过旋转矩阵变换后所得扫描轨迹曲线如图4所示,其中点云为在线扫描所得鞋底点云P,曲线为所求的当前喷胶轨迹L’。
本发明在实践过程中,只需更换不同的标准模板数据,即可适应不同种类的产品,而无需修改其他工艺流程,相对更加便捷。此外鞋底的设计人员相对生产工艺设计人员而言更清楚鞋底的结构,如果将鞋底结构的标准模板交由鞋底设计人员提供,例如本发明所需的鞋底标准点云模型及标准喷胶轨迹等,则对后续提高所需喷胶轨迹的生成精度有很大帮助。

Claims (2)

1.一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法,步骤如下:
步骤1:利用线结构光在线扫描鞋底,获得指定鞋底当前姿态下的点云模型,
步骤2:对当前点云模型以标准点云为目标进行采样一致性初始配准算法处理,获得粗配准坐标变换矩阵Tsac;
步骤3:对粗配准后所得的点云模型以标准点云为目标进行最近点迭代算法处理,求得精配准坐标变换矩阵Ticp;
步骤4:将坐标变换矩阵T=Tsac·Ticp作用在离线所得的喷胶轨迹上,即可得到当前鞋底所需的喷胶轨迹。
2.根据权利要求1所述的结合离线与在线扫描自动生成鞋底喷胶轨迹的方法,其特征在于:所述步骤1中获得点云模型后,需要滤波去除噪点。
CN202010574149.6A 2020-06-22 2020-06-22 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法 Pending CN111820545A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010574149.6A CN111820545A (zh) 2020-06-22 2020-06-22 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010574149.6A CN111820545A (zh) 2020-06-22 2020-06-22 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法

Publications (1)

Publication Number Publication Date
CN111820545A true CN111820545A (zh) 2020-10-27

Family

ID=72897901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010574149.6A Pending CN111820545A (zh) 2020-06-22 2020-06-22 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法

Country Status (1)

Country Link
CN (1) CN111820545A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112405123A (zh) * 2020-11-19 2021-02-26 泉州华中科技大学智能制造研究院 基于聚类算法的鞋底打粗轨迹规划方法及装置
CN113255565A (zh) * 2021-06-11 2021-08-13 知守科技(杭州)有限公司 自适应鞋型识别方法、装置、系统、电子装置和存储介质
CN113483664A (zh) * 2021-07-20 2021-10-08 科派股份有限公司 一种基于线结构光视觉的屏风板自动上料系统及方法
CN113910226A (zh) * 2021-10-11 2022-01-11 深圳大学 基于视觉系统引导机器人执行的鞋体加工方法及系统
CN116091643A (zh) * 2022-12-28 2023-05-09 群滨智造科技(苏州)有限公司 鞋面底部工艺轨迹的生成方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104766325A (zh) * 2015-04-09 2015-07-08 泉州装备制造研究所 一种鞋面喷胶轨迹线的计算方法
CN106423656A (zh) * 2016-08-11 2017-02-22 重庆大学 基于点云与图像匹配的自动喷涂系统及方法
CN107808415A (zh) * 2017-11-17 2018-03-16 中国科学院合肥物质科学研究院 基于机器视觉的鞋底边缘轨迹及涂胶位姿提取方法
CN110069041A (zh) * 2018-01-24 2019-07-30 北京理工大学 一种基于在机测量的工件加工方法及系统
CN110202575A (zh) * 2019-06-05 2019-09-06 武汉工程大学 一种用于工业测量的机器人目标轨迹精度补偿方法
CN110434671A (zh) * 2019-07-25 2019-11-12 王东 一种基于特征测量的铸造件表面机加工轨迹校准方法
CN110480075A (zh) * 2019-08-26 2019-11-22 上海拓璞数控科技股份有限公司 基于点云数据的工件曲面轮廓补偿系统及方法及介质
CN111152229A (zh) * 2020-02-24 2020-05-15 深圳群宾精密工业有限公司 3d机械视觉的机械手引导方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104766325A (zh) * 2015-04-09 2015-07-08 泉州装备制造研究所 一种鞋面喷胶轨迹线的计算方法
CN106423656A (zh) * 2016-08-11 2017-02-22 重庆大学 基于点云与图像匹配的自动喷涂系统及方法
CN107808415A (zh) * 2017-11-17 2018-03-16 中国科学院合肥物质科学研究院 基于机器视觉的鞋底边缘轨迹及涂胶位姿提取方法
CN110069041A (zh) * 2018-01-24 2019-07-30 北京理工大学 一种基于在机测量的工件加工方法及系统
CN110202575A (zh) * 2019-06-05 2019-09-06 武汉工程大学 一种用于工业测量的机器人目标轨迹精度补偿方法
CN110434671A (zh) * 2019-07-25 2019-11-12 王东 一种基于特征测量的铸造件表面机加工轨迹校准方法
CN110480075A (zh) * 2019-08-26 2019-11-22 上海拓璞数控科技股份有限公司 基于点云数据的工件曲面轮廓补偿系统及方法及介质
CN111152229A (zh) * 2020-02-24 2020-05-15 深圳群宾精密工业有限公司 3d机械视觉的机械手引导方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
COLDPLAYPLAY: "点云的粗配准和精配准", 《CSDN博客》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112405123A (zh) * 2020-11-19 2021-02-26 泉州华中科技大学智能制造研究院 基于聚类算法的鞋底打粗轨迹规划方法及装置
CN113255565A (zh) * 2021-06-11 2021-08-13 知守科技(杭州)有限公司 自适应鞋型识别方法、装置、系统、电子装置和存储介质
CN113483664A (zh) * 2021-07-20 2021-10-08 科派股份有限公司 一种基于线结构光视觉的屏风板自动上料系统及方法
CN113483664B (zh) * 2021-07-20 2022-10-21 科派股份有限公司 一种基于线结构光视觉的屏风板自动上料系统及方法
CN113910226A (zh) * 2021-10-11 2022-01-11 深圳大学 基于视觉系统引导机器人执行的鞋体加工方法及系统
CN116091643A (zh) * 2022-12-28 2023-05-09 群滨智造科技(苏州)有限公司 鞋面底部工艺轨迹的生成方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN111820545A (zh) 一种结合离线与在线扫描自动生成鞋底喷胶轨迹的方法
CN112017220B (zh) 一种基于抗差约束最小二乘算法的点云精确配准方法
CN110853075B (zh) 一种基于稠密点云与合成视图的视觉跟踪定位方法
CN108460779B (zh) 一种动态环境下的移动机器人图像视觉定位方法
CN109960402B (zh) 一种基于点云和视觉特征融合的虚实注册方法
CN104463851B (zh) 一种基于机器人的鞋底边缘线自动跟踪方法
CN108279643A (zh) 一种基于测量点与自适应差分进化算法的工件姿态调整方法
CN111179321B (zh) 一种基于模板匹配的点云配准方法
CN109100731B (zh) 一种基于激光雷达扫描匹配算法的移动机器人定位方法
CN107330927B (zh) 机载可见光图像定位方法
CN109323697B (zh) 一种针对室内机器人任意点启动时粒子快速收敛的方法
CN110544279B (zh) 一种结合图像识别和遗传算法精配准的位姿估计方法
CN115290097B (zh) 基于bim的实时精确地图构建方法、终端及存储介质
CN114526739A (zh) 移动机器人室内重定位方法、计算机装置及产品
CN110163902B (zh) 一种基于因子图的逆深度估计方法
CN115147437A (zh) 机器人智能引导加工方法与系统
CN113706710A (zh) 基于fpfh特征差异的虚拟点多源点云融合方法及系统
CN114088081A (zh) 一种基于多段联合优化的用于精确定位的地图构建方法
CN113313200B (zh) 一种基于法向约束的点云精匹配方法
CN111546337B (zh) 基于自由曲面的工业机器人全覆盖路径生成方法及系统
CN113393524A (zh) 一种结合深度学习和轮廓点云重建的目标位姿估计方法
CN117392268A (zh) 一种基于自适应结合cpd和icp算法的激光扫描建图方法及系统
CN110942102B (zh) 一种概率松弛核线匹配方法及系统
CN115661218B (zh) 一种基于虚拟超点的激光点云配准方法和系统
CN112767482B (zh) 一种多传感器融合的室内外定位方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201027

RJ01 Rejection of invention patent application after publication