CN114571326B - 基于计算机视觉的变形曲面磨削方法、装置及系统 - Google Patents

基于计算机视觉的变形曲面磨削方法、装置及系统 Download PDF

Info

Publication number
CN114571326B
CN114571326B CN202210067353.8A CN202210067353A CN114571326B CN 114571326 B CN114571326 B CN 114571326B CN 202210067353 A CN202210067353 A CN 202210067353A CN 114571326 B CN114571326 B CN 114571326B
Authority
CN
China
Prior art keywords
grinding
initial
parameters
track
polishing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210067353.8A
Other languages
English (en)
Other versions
CN114571326A (zh
Inventor
王宇翔
郭文兴
黄小康
陈华斌
陈小奇
李振
任伟培
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ningbo Chengzhi Technology Co ltd
Shanghai Jiaotong University
Original Assignee
Ningbo Chengzhi Technology Co ltd
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo Chengzhi Technology Co ltd, Shanghai Jiaotong University filed Critical Ningbo Chengzhi Technology Co ltd
Priority to CN202210067353.8A priority Critical patent/CN114571326B/zh
Publication of CN114571326A publication Critical patent/CN114571326A/zh
Application granted granted Critical
Publication of CN114571326B publication Critical patent/CN114571326B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B24—GRINDING; POLISHING
    • B24B—MACHINES, DEVICES, OR PROCESSES FOR GRINDING OR POLISHING; DRESSING OR CONDITIONING OF ABRADING SURFACES; FEEDING OF GRINDING, POLISHING, OR LAPPING AGENTS
    • B24B21/00—Machines or devices using grinding or polishing belts; Accessories therefor
    • B24B21/006—Machines or devices using grinding or polishing belts; Accessories therefor for special purposes, e.g. for television tubes, car bumpers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B24—GRINDING; POLISHING
    • B24B—MACHINES, DEVICES, OR PROCESSES FOR GRINDING OR POLISHING; DRESSING OR CONDITIONING OF ABRADING SURFACES; FEEDING OF GRINDING, POLISHING, OR LAPPING AGENTS
    • B24B49/00—Measuring or gauging equipment for controlling the feed movement of the grinding tool or work; Arrangements of indicating or measuring equipment, e.g. for indicating the start of the grinding operation
    • B24B49/12—Measuring or gauging equipment for controlling the feed movement of the grinding tool or work; Arrangements of indicating or measuring equipment, e.g. for indicating the start of the grinding operation involving optical means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B24—GRINDING; POLISHING
    • B24B—MACHINES, DEVICES, OR PROCESSES FOR GRINDING OR POLISHING; DRESSING OR CONDITIONING OF ABRADING SURFACES; FEEDING OF GRINDING, POLISHING, OR LAPPING AGENTS
    • B24B49/00—Measuring or gauging equipment for controlling the feed movement of the grinding tool or work; Arrangements of indicating or measuring equipment, e.g. for indicating the start of the grinding operation
    • B24B49/16—Measuring or gauging equipment for controlling the feed movement of the grinding tool or work; Arrangements of indicating or measuring equipment, e.g. for indicating the start of the grinding operation taking regard of the load
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B24—GRINDING; POLISHING
    • B24B—MACHINES, DEVICES, OR PROCESSES FOR GRINDING OR POLISHING; DRESSING OR CONDITIONING OF ABRADING SURFACES; FEEDING OF GRINDING, POLISHING, OR LAPPING AGENTS
    • B24B51/00—Arrangements for automatic control of a series of individual steps in grinding a workpiece
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0014—Image feed-back for automatic industrial control, e.g. robot with camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Robotics (AREA)
  • Constituent Portions Of Griding Lathes, Driving, Sensing And Control (AREA)

Abstract

本发明涉及计算机技术领域，公开了一种基于计算机视觉的变形曲面磨削方法、装置及系统，方法包括设定初始磨削参数并沿初始打磨轨迹进行精磨；每磨削一道，获取工件的磨削表面图像，并将磨削表面图像均匀分割成n块子图像；将n块子图像输入至分类模型，得到对应的n个分类结果；若n个分类结果均为打磨完成，则确定工件打磨完成；若n个分类结果均为继续打磨，按照初始磨削参数和初始打磨轨迹继续打磨；若n个分类结果既存在打磨完成又存在继续打磨，根据所有待打磨区域的中心点坐标，优化初始磨削轨迹和所述初始磨削参数，按照优化后的磨削轨迹和磨削参数，对待打磨区域进行磨削。本发明可避免过磨和欠磨，提高磨削精度。

Description

基于计算机视觉的变形曲面磨削方法、装置及系统
技术领域
本发明涉及计算机视觉技术领域，尤其涉及一种基于计算机视觉的变形曲面磨削方法、装置及系统。
背景技术
在工业中，磨削往往作为机加工的最后一步，对产品最终的成型质量起到至关重要的作用，并最终决定了产品的档次。人工磨削、专用机床磨削和数控机床磨削是传统磨削加工的三种最主要的模式。工作在高温环境中的工件，比如航空航天件，受温度和力的影响会产生一定程度的变形，但由于此类工件价格较为昂贵，重新生产新件成本很高，所以往往需要经过磨削抛光，去除表面附着物后重复利用。由于每个工件变形程度不同，很难通过专用机床或者数控机床建立一个统一的模型进行磨削，目前处理这类工件的主要方式是人工磨削。然而，人工磨削工作量大，效率较低，工件加工均一性较差，并且磨削车间大量的粉尘不利于工人的健康。
近年来，具有自动化程度高，灵活性强，可进行编程控制等优点的工业机器人逐渐取代了传统的人工和机床，且机器人砂带磨削因其高效、高质量的特点正成为一种趋势。目前机器人磨削主要是通过在线示教或根据已有图纸确定打磨轨迹，并用恒定的磨削参数进行打磨。对于有变形的曲面磨削，每个工件变形程度不同，很难通过一次示教或根据工件未变形前的图纸确定统一的打磨轨迹，且一直用恒定的磨削参数磨削很容易出现欠磨或过磨的现象。
比如相关技术中，申请号为201010603399.4的发明专利公开了“一种基于视觉信息的工业机器人磨削系统及方法”，其利用视频摄像头采集工件图像，利用计算机识别定位工件并抓取工件，按照预先设定好的磨削参数进行打磨。该技术只适合标准化工件的流水线打磨，对于变形程度不一致的工件无法起到很好的效果。
机械设计与制造期刊上2015年12月8日发表的文献“数控插补方式实现外球面高精度磨削的方法”中提出了利用数控外圆磨床的高精度圆弧插补功能，在通用数控外圆磨床上、使用普通砂轮实现高硬度外球面的高精度磨削的方法，实现了对于规整外圆曲面的精密磨削，但是对于不规整的变形曲面很难进行圆弧插补。
申请号为201410148371.4的发明专利公开了“智能力控机器人磨削加工系统和方法”，其利用工业照相机采集工件扫描数据并据此生成刀具路径，从而将刀具路径转换为机器人姿态和末端路径完成自动化打磨，实现了打磨路径的自动规划。
申请号为200910241745.6的发明专利公开了“基于机器学习的机器人磨削方法”，其通过机器学习模型训练机器人进给速率、接触力、工件表面曲率和磨削量的关系，对磨削量进行预测，可以实现曲面的精密磨削。
由于变形工件上附着物的厚度是不一致的，所以要时刻监测工件表面防止过磨现象，但上述相关技术的研究皆为工件的整体磨削，无法自动识别打磨完成的区域，故此有很大概率出现过磨或者欠磨的现象。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种基于计算机视觉的变形曲面磨削方法及装置，旨在防止变形曲面的过磨和欠磨现象，提高磨削的精度。
为实现上述目的，本发明提供了一种基于计算机视觉的变形曲面磨削方法，所述方法包括以下步骤：
设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
若所述n个分类结果均为打磨完成，则确定工件打磨完成；
若所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
若所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
可选地，所述方法还包括：
构建相机到位于机器人末端的所述工件的转换矩阵；
采集不同拍摄角度的所述磨削表面图像作为样本图像；
将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
可选地，所述计算继续打磨结果对应的所有待打磨区域的中心点坐标，按照所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，包括：
基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
此外，为实现上述目的，本发明还提供了一种基于计算机视觉的变形曲面磨削装置，所述装置包括：
设置模块，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块，用于在所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
可选地，所述装置还包括：
转换矩阵构建模块，用于构建相机到位于机器人末端的所述工件的转换矩阵；
采集模块，用于采集不同拍摄角度的所述磨削表面图像作为样本图像；
第二分割模块将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
数据集构建模块，用于将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
训练模块，用于利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
可选地，所述第三确定模块包括：
轨迹优化单元，用于基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
参数优化单元，用于将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
此外，为实现上述目的，本发明还提供了一种基于计算机视觉的变形曲面磨削系统，所述系统包括：
PLC控制柜、工控机、砂带机、视觉传感单元、机器人控制柜、机器人以及力传感器；
所述PLC控制柜、所述视觉传感单元和所述机器人控制柜均与所述工控机连接，所述机器人控制柜与所述机器人连接，所述力传感器用于将所述机器人的力信息反馈至所述机器人控制柜；
所述PLC控制柜与所述砂带机连接，所述机器人的末端放置有工件，所述视觉传感单元用于通过辅助光源为所述工件打光以及通过相机采集所述工件的磨削表面图像；
所述工控机用于根据所述PLC控制柜、所述视觉传感单元和所述机器人控制柜发送的信息，对磨削路径和磨削参数进行优化调整。
可选地，所述工控机包括：
设置模块，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块，用于在所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
此外，为实现上述目的，本发明还提供了一种基于计算机视觉的变形曲面磨削设备，所述设备包括存储器、处理器；其中，所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于实现如上所述的方法。
此外，为实现上述目的，本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上所述的方法。
本发明提出的基于计算机视觉的变形曲面磨削方法、装置及系统，通过在工件磨削过程中，每磨削一道，就获取一次工件的磨削表面图像，将图像分割后输入至分类模型中，在分类结果中存在未打磨完成结果时，根据所有待打磨区域的中心点坐标，优化初始磨削轨迹和初始磨削参数，按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削，直至完成所有区域的磨削，通过利用深度学习模型进行磨削状态的分类判断，极大提高了判断的准确率，避免了过磨和欠磨，从而提高了磨削表面质量，且磨削的完成条件不需要人工干预，磨削系统自动判断何时结束磨削，提高了生产效率和磨削系统的智能化程度。
附图说明
图1为本发明第一实施例中基于计算机视觉的变形曲面磨削方法的流程图；
图2为本发明第一实施例中基于计算机视觉的变形曲面磨削方法的整体流程图；
图3为本发明第二实施例中基于计算机视觉的变形曲面磨削装置的结构示意图；
图4为本发明第三实施例中基于计算机视觉的变形曲面磨削系统的结构示意图；
图5为本发明第三实施例中基于计算机视觉的变形曲面磨削系统的详细结构示意图；
图6为本发明第三实施例中基于计算机视觉的变形曲面磨削系统的工作原理框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明舰载卫星天线虚拟现实系统的建立方法第一实施例的流程示意图。
在第一实施例中，所述舰载卫星天线虚拟现实系统的建立方法包括以下步骤：
步骤S10，设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度。
步骤S20，每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像。
需要说明的是，本实施例所述每磨削一道是指从砂带接触工件到离开工件为一道，将工件移动到相机前拍摄一次工件的磨削表面图像。
需要说明的是，n取值可为16，n的取值根据磨削工件的大小决定，该参数可以调整，本领域技术人员可根据实际要求选择合适的取值。
步骤S30，将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果。
步骤S40，若所述n个分类结果均为打磨完成，则确定工件打磨完成。
步骤S50，若所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨.
步骤S60，若所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
本实施例在分类结果中存在未打磨完成结果时，根据所有待打磨区域的中心点坐标，优化初始磨削轨迹和初始磨削参数，按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削，直至完成所有区域的磨削，通过利用深度学习模型进行磨削状态的分类判断，极大提高了判断的准确率，避免了过磨和欠磨，从而提高了磨削表面质量，且磨削的完成条件不需要人工干预，磨削系统自动判断何时结束磨削，提高了生产效率和磨削系统的智能化程度。
在一实施例中，如图2所示，所述方法还包括如下步骤：
构建相机到位于机器人末端的所述工件的转换矩阵；
需要说明的是，标定过程为：相机固定，将标定板固定于机器人末端并使得标定板平面和相机成像平面平行，移动标定板，拍摄同一平面内不同位置的标定板照片，应用机器人手眼标定算法确定机器人坐标系和相机坐标系的转换关系。
采集不同拍摄角度的所述磨削表面图像作为样本图像；
将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
本实施例通过采集不同拍摄角度下磨削程度不同的变形曲面图像，对这些图像进行任意尺寸的图像分割，得到一组尺寸不一的图片，将这些图片进行分类，代表磨削完成的图像作为一类，代表仍需打磨的图像作为一类，建立分类数据集，将数据集输入至AlexNet深度学习分类模型中进行训练，得到高准确度的分类模型。
在一实施例中，所述步骤S60中，所述计算继续打磨结果对应的所有待打磨区域的中心点坐标，按照所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，包括以下步骤：
基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
需要说明的是，沿优化后的磨削轨迹(可能有一条或多条)进行打磨，打磨时顺次小范围打磨轨迹所经过的子图像区域。
需要说明的是，如果分类结果部分为打磨完成，部分为继续打磨，则意味着工件有一部分区域已经打磨完成，再继续磨削就可能过磨，而另一部分区域仍处于欠磨状态，需要继续磨削。此时计算出所有待磨区域的中心点坐标，根据中心点坐标的位置分布优化磨削路径，同时降低砂带运行速度和磨削力，并按照优化后的路径和磨削参数继续磨削，直到所有区域都被判断为磨削完成。
此外，如图3所示，本发明实施例还提出了一种基于计算机视觉的变形曲面磨削装置，所述装置包括：
设置模块10，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块20，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型30，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块40，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块50，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块60，用于在所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
本实施例在分类结果中存在未打磨完成结果时，根据所有待打磨区域的中心点坐标，优化初始磨削轨迹和初始磨削参数，按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削，直至完成所有区域的磨削，通过利用深度学习模型进行磨削状态的分类判断，极大提高了判断的准确率，避免了过磨和欠磨，从而提高了磨削表面质量，且磨削的完成条件不需要人工干预，磨削系统自动判断何时结束磨削，提高了生产效率和磨削系统的智能化程度。
在一实施例中，所述装置还包括：
转换矩阵构建模块，用于构建相机到位于机器人末端的所述工件的转换矩阵；
采集模块，用于采集不同拍摄角度的所述磨削表面图像作为样本图像；
第二分割模块将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
数据集构建模块，用于将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
训练模块，用于利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
在一实施例中，所述第三确定模块包括：
轨迹优化单元，用于基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
参数优化单元，用于将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
本实施例通过采集不同拍摄角度下磨削程度不同的变形曲面图像，对这些图像进行任意尺寸的图像分割，得到一组尺寸不一的图片，将这些图片进行分类，代表磨削完成的图像作为一类，代表仍需打磨的图像作为一类，建立分类数据集，将数据集输入至AlexNet深度学习分类模型中进行训练，得到高准确度的分类模型。
需要说明的是，本发明所述基于计算机视觉的变形曲面磨削装置的其他实施例或具有实现方法可参照上述各方法实施例，此处不在赘余。
此外，如图4至图6所示，本发明实施例还提出了一种基于计算机视觉的变形曲面磨削系统，所述系统包括PLC控制柜7、工控机1、砂带机8、视觉传感单元、机器人控制柜2、机器人3以及力传感器4；
所述PLC控制柜7、所述视觉传感单元和所述机器人控制柜2均与所述工控机1连接，所述机器人控制柜2与所述机器人3连接，所述力传感器4用于将所述机器人3的力信息反馈至所述机器人控制柜2；
所述PLC控制柜7与所述砂带机8连接，所述机器人3的末端放置有工件，所述视觉传感单元通过辅助光源5为所述工件打光以及通过工业相机6采集所述工件的磨削表面图像；
所述工控机1用于根据所述PLC控制柜7、所述视觉传感单元和所述机器人控制柜2发送的信息，对磨削路径和磨削参数进行优化调整。
需要说明的是，PLC控制柜7控制砂带机8的启停以及砂带运动速度，机器人控制柜2控制工业机器人3的启停、运动轨迹、运动速度以及通过控制力传感器4控制工业机器人3的接触力大小，连接在工业机器人3上的力传感器4将力信息反馈给机器人控制柜2。工控机1分别接受来自PLC控制柜7的磨削参数(砂带运动速度)，机器人控制柜2的磨削参数(磨削力和进给速度)和视觉传感单元的图像信息对磨削参数和磨削路径进行优化，然后将优化结果分别反馈给PLC控制柜7，机器人控制柜2和视觉传感单元，以按照优化后的磨削路径和磨削参数对工件进行磨削，直至所有区域均磨削完成。
在一实施例中，所述工控机1包括：
设置模块10，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块20，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型30，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块40，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块50，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块60，用于在所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
需要说明的是，本发明所述基于计算机视觉的变形曲面磨削系统的其他实施例或具有实现方法可参照上述各方法实施例，此处不在赘余。
此外，本发明实施例还提出了一种基于计算机视觉的变形曲面磨削设备，所述设备包括存储器、处理器；其中，所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于实现如上所述的方法。
此外，本发明实施例还提出了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上所述的方法。
本发明所述舰载卫星天线虚拟现实系统的其他实施例或具有实现方法可参照上述各方法实施例，此处不在赘余。
此外，需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器(Read Only Memory，ROM)/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，节点打包设备，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种基于计算机视觉的变形曲面磨削方法，其特征在于，所述方法包括以下步骤：
设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
若所述n个分类结果均为打磨完成，则确定工件打磨完成；
若所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
若所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
2.如权利要求1所述的基于计算机视觉的变形曲面磨削方法，其特征在于，所述方法还包括：
构建相机到位于机器人末端的所述工件的转换矩阵；
采集不同拍摄角度的所述磨削表面图像作为样本图像；
将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
3.如权利要求1所述的基于计算机视觉的变形曲面磨削方法，其特征在于，所述计算继续打磨结果对应的所有待打磨区域的中心点坐标，按照所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，包括：
基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
4.一种基于计算机视觉的变形曲面磨削装置，其特征在于，所述装置包括：
设置模块，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块，用于所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
5.如权利要求4所述的基于计算机视觉的变形曲面磨削装置，其特征在于，所述装置还包括：
转换矩阵构建模块，用于构建相机到位于机器人末端的所述工件的转换矩阵；
采集模块，用于采集不同拍摄角度的所述磨削表面图像作为样本图像；
第二分割模块将所述样本图像进行任意尺寸的图像分割，得到样本子图像；
数据集构建模块，用于将所述样本子图像进行分类，构建分类数据集，所述分类数据集包括打磨完成类图像块和继续打磨类图像块；
训练模块，用于利用所述分类数据集对所述分类模型进行训练，得到预先训练好的分类模型，所述分类模型采用AlexNet深度学习分类模型。
6.如权利要求4所述的基于计算机视觉的变形曲面磨削装置，其特征在于，所述第三确定模块包括：
轨迹优化单元，用于基于所有待打磨区域的中心点坐标，将相邻中心点的坐标从上至下从左至右连线作为优化后的打磨轨迹，所述相邻中心点所在子图像上下相邻或左右相邻或沿对角线方向相邻；
参数优化单元，用于将所述初始磨削参数中的砂带转速调整为初始的80％，将磨削力调整为初始的80％，作为优化后的磨削参数。
7.一种基于计算机视觉的变形曲面磨削系统，其特征在于，所述系统包括PLC控制柜、工控机、砂带机、视觉传感单元、机器人控制柜、机器人以及力传感器；
所述PLC控制柜、所述视觉传感单元和所述机器人控制柜均与所述工控机连接，所述机器人控制柜与所述机器人连接，所述力传感器用于将所述机器人的力信息反馈至所述机器人控制柜；
所述PLC控制柜与所述砂带机连接，所述机器人的末端放置有工件，所述视觉传感单元用于通过辅助光源为所述工件打光以及通过相机采集所述工件的磨削表面图像；
所述工控机用于根据所述PLC控制柜、所述视觉传感单元和所述机器人控制柜发送的信息，对磨削路径和磨削参数进行优化调整；
所述工控机包括：
设置模块，用于设定初始磨削参数并沿初始打磨轨迹进行精磨，所述初始打磨轨迹由标准件示教得到，所述初始磨削参数包括砂带运行速度、磨削力和进给速度；
第一分割模块，用于每磨削一道，获取工件的磨削表面图像，并将所述磨削表面图像均匀分割成n块子图像；
分类模型，用于将所述n块子图像输入至预先训练好的分类模型，得到对应的n个分类结果；
第一确定模块，用于在所述n个分类结果均为打磨完成，则确定工件打磨完成；
第二确定模块，用于在所述n个分类结果均为继续打磨，则按照所述初始磨削参数和所述初始打磨轨迹继续打磨；
第三确定模块，用于在所述n个分类结果既包含打磨完成又包含继续打磨，则计算继续打磨结果对应的所有待打磨区域的中心点坐标，根据所有待打磨区域的中心点坐标，优化所述初始磨削轨迹和所述初始磨削参数，并按照优化后的磨削轨迹和优化后的磨削参数，对所有待打磨区域进行磨削。
8.一种基于计算机视觉的变形曲面磨削设备，其特征在于，所述设备包括存储器、处理器；其中，所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于实现如权利要求1-3中任一项所述的方法。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-3中任一项所述的方法。
CN202210067353.8A 2022-01-20 2022-01-20 基于计算机视觉的变形曲面磨削方法、装置及系统 Active CN114571326B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210067353.8A CN114571326B (zh) 2022-01-20 2022-01-20 基于计算机视觉的变形曲面磨削方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210067353.8A CN114571326B (zh) 2022-01-20 2022-01-20 基于计算机视觉的变形曲面磨削方法、装置及系统

Publications (2)

Publication Number Publication Date
CN114571326A CN114571326A (zh) 2022-06-03
CN114571326B true CN114571326B (zh) 2023-04-07

Family

ID=81771685

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210067353.8A Active CN114571326B (zh) 2022-01-20 2022-01-20 基于计算机视觉的变形曲面磨削方法、装置及系统

Country Status (1)

Country Link
CN (1) CN114571326B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114800229B (zh) * 2022-06-27 2022-09-13 江苏中清光伏科技有限公司 双面双玻表面抛光装置及其抛光方法
CN115091283B (zh) * 2022-07-06 2023-08-22 天润工业技术股份有限公司 一种高效磨削曲轴的控制调整方法及系统
CN116394161B (zh) * 2023-06-05 2023-08-11 深圳市鑫冠亚科技有限公司 一种基于数据分析的电极生产管理方法及系统
CN116551536B (zh) * 2023-07-10 2023-09-29 张家港市晨艺电子有限公司 一种合金零部件喷涂前自动打磨装置
CN117140354B (zh) * 2023-10-31 2024-01-05 雅安成建工业化建筑有限公司 一种基于轨迹优化的用于建筑用金属制品的打磨系统
CN117428581B (zh) * 2023-12-21 2024-02-27 苏州博宏源机械制造有限公司 基于机械抛光的处理效率优化方法、系统及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009012659A1 (en) * 2007-07-26 2009-01-29 Omron Corporation Digital image processing and enhancing system and method with function of removing noise
KR101551576B1 (ko) * 2014-06-16 2015-09-08 엘지전자 주식회사 로봇 청소기, 제스쳐 인식 장치 및 방법
CN105081903A (zh) * 2015-09-06 2015-11-25 东莞市莞智成机器人技术有限公司 一种带凸台圆柱外表面机器人打磨系统
BE1025522B1 (nl) * 2017-09-01 2019-04-04 Octonus Finland Oy Verbeterde werkwijze voor het controleren van het slijpen van edelstenen
CN109483369B (zh) * 2018-12-13 2023-09-29 中国船舶集团有限公司第七一六研究所 一种具有三维视觉的机器人打磨系统及其控制方法
CN109732625B (zh) * 2019-03-15 2020-11-27 珠海格力电器股份有限公司 一种基于机器视觉的工业机器人柔性打磨方法及系统
CN112388511B (zh) * 2020-09-23 2021-11-12 广东博智林机器人有限公司 打磨机器人的控制方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN114571326A (zh) 2022-06-03

Similar Documents

Publication Publication Date Title
CN114571326B (zh) 基于计算机视觉的变形曲面磨削方法、装置及系统
CN106041946B (zh) 基于图像处理的机械人打磨生产方法及应用其的生产系统
CN110091333B (zh) 复杂曲面表面焊缝特征识别和自动磨抛的装置及方法
CN107696499B (zh) 三维模型与机器视觉相结合的3d打印产品质量检测与修复方法
CN105127862A (zh) 基于砂带磨抛机的工业机器人叶片磨抛工艺
CN109249300B (zh) 木材加工控制方法、装置、电子设备及存储介质
CN112676925B (zh) 航空发动机叶片磨抛方法、装置、设备及存储介质
CN110794762A (zh) 用于打磨机器人的控制方法及系统
Princely et al. Vision assisted robotic deburring of edge burrs in cast parts
CN109848989B (zh) 一种基于红宝石探针的机器人执行末端自动标定及检测方法
CN110744406A (zh) 一种叶片型面机器人磨抛自适应加工系统及方法
CN110549332B (zh) 一种步进控制方法、装置、打磨机器人和可读存储介质
CN107263323B (zh) 超精密磨削异型薄壁结构件时球头砂轮在位修整方法
CN115365941B (zh) 一种用于光学抛光的工件位姿自动校准方法
Xu et al. Methodology for the immediate detection and treatment of wheel wear in contour grinding
JP3427389B2 (ja) バリ取り方法及びその装置
CN111085902B (zh) 一种视觉在线检测及修正的工件打磨系统
CN116542914A (zh) 基于3d点云的焊缝提取与拟合方法
US20080216336A1 (en) In-Process Non-Contact Measuring Systems and Methods for Automated Lapping Systems
CN113414773B (zh) 一种打磨机器人的打磨控制方法及系统
EP3316058A2 (en) Tool-path planning method
CN110815048A (zh) 基于机器视觉的砂轮修整方法及装置
CN113319656A (zh) 一种异型工件的磨削加工方法
CN114833724B (zh) 塑料抛光机械驱动系统
CN115847398B (zh) 一种基于区域的机器人智能加工方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant