CN108748137B - 一种实物扫描建模方法及其应用 - Google Patents

一种实物扫描建模方法及其应用 Download PDF

Info

Publication number
CN108748137B
CN108748137B CN201810319784.2A CN201810319784A CN108748137B CN 108748137 B CN108748137 B CN 108748137B CN 201810319784 A CN201810319784 A CN 201810319784A CN 108748137 B CN108748137 B CN 108748137B
Authority
CN
China
Prior art keywords
modeling
robot
processing
posture
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810319784.2A
Other languages
English (en)
Other versions
CN108748137A (zh
Inventor
陈诗琪
陈小龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810319784.2A priority Critical patent/CN108748137B/zh
Publication of CN108748137A publication Critical patent/CN108748137A/zh
Application granted granted Critical
Publication of CN108748137B publication Critical patent/CN108748137B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • B25J9/1605Simulation of manipulator lay-out, design, modelling of manipulator
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Numerical Control (AREA)

Abstract

本发明公开一种实物扫描方法,包括如下步骤:装备建模机器人,建模机器人上设有建模设备,所述建模设备上设有建模视觉感应摄像头、姿势传感器,建模机器人的旁侧设有建模工作台面,将工件放在建模工作台面上,并设置若干个约束点,让建模机器人带动建模设备以指定路径、指定姿态地依次经过上述若干个约束点,并对工件进行拍摄,整合所有的图像数据和姿态数据,从而生成工件的实物立体模型。姿态传感器能感知建模视觉感应摄像头所拍照片时的姿态,姿态传感器可以让建模机器人的姿态设置更为符合设定要求,大大降低了对建模机器人自身的动作精度要求,也减少了驱动系统的运算量。最终实现高效、高精度的实物建模。本发明用于实物扫描建模。

Description

一种实物扫描建模方法及其应用
技术领域
本发明涉及三维扫描仪领域,特别涉及一种实物扫描建模方法及其应用。
背景技术
三维扫描仪(3D scanner)是一种科学仪器,用来侦测并分析现实世界中物体或环境的形状(几何构造)与外观数据(如颜色、表面反照率等性质)。
搜集到的数据常被用来进行三维重建计算,在虚拟世界中创建实际物体的数字模型,这些模型具有相当广泛的用途。
现有的三维扫描仪要么是手持的,要么设置导向结构,让其具有特定的扫描轨迹,但是手持扫描仪的扫描精度差、工作量大、时间长、需要专业的培训,而其具有特定的扫描轨迹的扫描仪难以对一些复杂物体进行完整的扫描。
发明内容
本发明要解决的技术问题是:提供一种精度高、高效的实物扫描建模方法及其应用。
本发明解决其技术问题的解决方案是:
一种实物扫描方法,
包括如下步骤:
步骤a1)装备建模机器人,建模机器人上设有建模设备,所述建模设备上设有建模视觉感应摄像头、姿势传感器,建模视觉感应摄像头为双目摄像头或多目摄像头,建模机器人的旁侧设有建模工作台面,将工件放在建模工作台面上,在工件的周围设置若干个约束点,让建模机器人带动建模设备基于建模机器人的机器人坐标或建模机器人的建模外部坐标系,让建模设备以指定路径、指定姿态地依次经过上述若干个约束点,并对工件进行拍摄,使得指定路径的每个轨迹点均带有姿态信息、图像信息的立体基础数据,整合所有的立体基础数据,从而生成工件的实物立体模型。
作为上述方案的进一步改进,所述建模外部坐标系是这样构建的:在建模工作台面的上方或旁侧设置建模构建模块,所述建模构建模块上设有建模构建摄像头,建模构建摄像头监视范围覆盖建模设备的移动范围,所述建模构建摄像头为双目摄像头或多目摄像头。
作为上述方案的进一步改进,建模构建模块内设有姿态传感器,包括至少两个建模构建模块,建模工作台面的左侧或右侧或前侧或后侧设有至少一个建模构建模块,建模工作台面的上方设有至少一个建模构建模块,至少有一个建模构建模块称为全局构建模块,所述全局构建模块的建模构建摄像头的监视范围覆盖其他所有的建模构建模块;全局构建模块的建模构建摄像头的监视范围与其他所有的建模构建模块的建模构建摄像头监视范围相交。
一种应用实物扫描的示教程序生成方法:
在执行任意一项上述的一种实物扫描方法之前或之后进行工件的加工示教,加工示教中获得示教加工设备的在工件周围的行走轨迹数据,然后执行如下步骤:
步骤b1)将行走轨迹数据点/线化地可视化地与实物立体模型共同呈现,调整部分模拟数据和/或增减模拟数据
步骤c1)让建模机器人带动建模设备以建模机器人的机器人坐标经过行走轨迹数据所确定的实际的空间点,并同时记录建模机器人的机器人位姿数据;
步骤d1)基于所有的机器人位姿数据生成示教程序。
一种应用实物扫描的示教、加工生成方法:
在执行任意一项上述的一种实物扫描方法之前或之后进行工件的加工示教,加工示教中获得示教加工设备的在工件周围的行走轨迹数据,然后执行如下步骤:
步骤b1)将行走轨迹数据点/线化地可视化地与实物立体模型共同呈现,调整部分模拟数据和/或增减模拟数据
步骤c2)让建模机器人带动建模设备以建模机器人的机器人坐标经过行走轨迹数据所确定的实际的空间点,并同时记录建模机器人的机器人位姿数据,同时让建模构建模块对机器人进行连续的拍照,从而形成与机器人位姿数据一一对应的给定机器人姿态图像数据;
步骤d2)基于机器人位姿数据、给定机器人姿态图像数据生成示教程序;
步骤e2)装备加工工作台面,在工作台面上放置工件,加工工作台面旁侧设有加工机器人,加工机器人上设有加工设备,加工机器人外设有加工外部坐标系,加工工作台面的上方和/或旁侧设有加工建模模块,加工建模模块与建模构建模块的结构相同,加工外部坐标系与建模外部坐标系的构建方式相同,使得加工外部坐标系由加工建模模块进行构建,用示教程序驱动带有加工设备的加工机器人对工件进行加工,在加工过程中,用加工建模模块对加工机器人进行拍照从而获得当前机器人姿态数据,利用图片对比的方法将当前机器人姿态数据与给定机器人姿态图像数据进行对比,并根据图像数据对比的偏差来引导加工机器人进行自身的机器人位姿的变化,使得加工机器人根据步骤c)中机器人位姿数据进行建模机器人的机器人位姿的复现。
一种应用实物扫描的实物复制方法:
执行任意一项上述的一种实物扫描方法分别或同时对物体A、物体B进行扫描,从而获得A模型、B模型,将A模型、B模型在显示设备上可视化地重合在一起,将A模型、B模型重合的部分称为相交部分,A模型、B模型除了相交部分以外的部分称为离体部分,对离体部分或相交部分进行减料加工的编程。
本发明的有益效果是:由于建模设备上设有建模视觉感应摄像头、姿势传感器,建模视觉感应摄像头为双目摄像头或多目摄像头,且建模设备是由建模机器人带动的,通过若干个约束点的设置,可以对各种复杂的工件进行扫描,而且姿态传感器能感知建模视觉感应摄像头所拍照片时的姿态,让建模视觉感应摄像头所拍照片对应有姿态信息,这样就便于高精度的建模,而姿态传感器可以让建模机器人的姿态设置更为符合设定要求,大大降低了对建模机器人自身的动作精度要求,也减少了驱动系统的运算量。最终实现高效、高精度的实物建模。本发明用于实物扫描建模。
具体实施方式
以下将结合实施例对本发明的构思、具体结构及产生的技术效果进行清楚、完整地描述,以充分地理解本发明的目的、特征和效果。显然,所描述的实施例只是本发明的一部分实施例,而不是全部实施例,基于本发明的实施例,本领域的技术人员在不付出创造性劳动的前提下所获得的其他实施例,均属于本发明保护的范围。另外,文中所提到的所有联接/连接关系,并非单指构件直接相接,而是指可根据具体实施情况,通过添加或减少联接辅件,来组成更优的联接结构。本发明中的各个技术特征,在不互相矛盾冲突的前提下可以交互组合。
这是本发明的实施例,具体地:
一种实物扫描方法,
包括如下步骤:步骤a1)装备建模机器人,建模机器人上设有建模设备,所述建模设备上设有建模视觉感应摄像头、姿势传感器,建模视觉感应摄像头为双目摄像头或多目摄像头,建模机器人的旁侧设有建模工作台面,将工件放在建模工作台面上,在工件的周围设置若干个约束点,让建模机器人带动建模设备基于建模机器人的机器人坐标或建模机器人的建模外部坐标系,让建模设备以指定路径、指定姿态地依次经过上述若干个约束点,并对工件进行拍摄,使得指定路径的每个轨迹点均带有姿态信息、图像信息的立体基础数据,整合所有的立体基础数据,从而生成工件的实物立体模型。由于建模设备上设有建模视觉感应摄像头、姿势传感器,建模视觉感应摄像头为双目摄像头或多目摄像头,且建模设备是由建模机器人带动的,通过若干个约束点的设置,可以对各种复杂的工件进行扫描,而且姿态传感器能感知建模视觉感应摄像头所拍照片时的姿态,让建模视觉感应摄像头所拍照片对应有姿态信息,这样就便于高精度的建模,而姿态传感器可以让建模机器人的姿态设置更为符合设定要求,大大降低了对建模机器人自身的动作精度要求,也减少了驱动系统的运算量。最终实现高效、高精度的实物建模。
一种应用实物扫描的示教程序生成方法:
在执行上述的一种实物扫描方法之前或之后进行工件的加工示教,加工示教中获得示教加工设备的在工件周围的行走轨迹数据,然后执行如下步骤:
步骤b1)将行走轨迹数据点/线化地可视化地与实物立体模型共同呈现,调整部分模拟数据和/或增减模拟数据
步骤c1)让建模机器人带动建模设备以建模机器人的机器人坐标经过行走轨迹数据所确定的实际的空间点,并同时记录建模机器人的机器人位姿数据;
步骤d1)基于所有的机器人位姿数据生成示教程序。
通过这样的方法生成的实物立体模型可在计算机屏幕上直接显示,而行走轨迹数据也均可在计算机屏幕上显示,这就很方便地实现了人机交互,降低了调整轨迹点的专业化难度,任何人,无需高学历、无需非常丰富的编程经验和能力,经过简单的培训,就能调整定位数据,从而实现在加工过程中的精确定位。
本发明的建模外部坐标系是这样构建的:在建模工作台面的上方或旁侧设置建模构建模块,所述建模构建模块上设有建模构建摄像头,建模构建摄像头监视范围覆盖建模设备的移动范围,所述建模构建摄像头为双目摄像头或多目摄像头。
对于复杂的零件或较大的零件或长长的是生产线,有可能出现遮挡或者一个建模构建摄像头的监视范围不足的情况,可以让建模构建模块内设有姿态传感器,包括至少两个建模构建模块,建模工作台面的左侧或右侧或前侧或后侧设有至少一个建模构建模块,建模工作台面的上方设有至少一个建模构建模块,至少有一个建模构建模块称为全局构建模块,所述全局构建模块的建模构建摄像头的监视范围覆盖其他所有的建模构建模块;全局构建模块的建模构建摄像头的监视范围与其他所有的建模构建模块的建模构建摄像头监视范围相交,这样就能很好的防止建模机器人被工件遮挡或建模机器人脱离某一个模构建摄像头的监视范围就难以实现持续的监视的问题。而正是由于有多个建模构建模块对建模机器人进行监视所以便衍生出如下的一种应用实物扫描的示教、加工生成方法:
在执行上述的一种实物扫描方法之前或之后进行工件的加工示教,加工示教中获得示教加工设备的在工件周围的行走轨迹数据,然后执行如下步骤:
步骤b1)将行走轨迹数据点/线化地可视化地与实物立体模型共同呈现,调整部分模拟数据和/或增减模拟数据
步骤c2)让建模机器人带动建模设备以建模机器人的机器人坐标经过行走轨迹数据所确定的实际的空间点,并同时记录建模机器人的机器人位姿数据,同时让建模构建模块对机器人进行连续的拍照,从而形成与机器人位姿数据一一对应的给定机器人姿态图像数据;
步骤d2)基于机器人位姿数据、给定机器人姿态图像数据生成示教程序;
步骤e2)装备加工工作台面,在工作台面上放置工件,加工工作台面旁侧设有加工机器人,加工机器人上设有加工设备,加工机器人外设有加工外部坐标系,加工工作台面的上方和/或旁侧设有加工建模模块,加工建模模块与建模构建模块的结构相同,加工外部坐标系与建模外部坐标系的构建方式相同,使得加工外部坐标系由加工建模模块进行构建,用示教程序驱动带有加工设备的加工机器人对工件进行加工,在加工过程中,用加工建模模块对加工机器人进行拍照从而获得当前机器人姿态数据,利用图片对比的方法将当前机器人姿态数据与给定机器人姿态图像数据进行对比,并根据图像数据对比的偏差来引导加工机器人进行自身的机器人位姿的变化,使得加工机器人根据步骤c)中机器人位姿数据进行建模机器人的机器人位姿的复现。
由于有图像数据对比的偏差来引导,所以能大大降低加工机器人自身精度的问题而导致累积误差,提高加工的重复精度,也避免了系统的大量运算。
实物扫描建模方法,还能用于实物的复制,具体方法如下:
执行任意一项上述的一种实物扫描方法分别或同时对物体A、物体B进行扫描,从而获得A模型、B模型,将A模型、B模型在显示设备上可视化地重合在一起,将A模型、B模型重合的部分称为相交部分,A模型、B模型除了相交部分以外的部分称为离体部分,对离体部分或相交部分进行减料加工的编程。
因为很多时候,往往存在某一工艺品或工件,同时存在着某一待加工材料,而该艺品或工件是不规则的,同时该待加工材料也是不规则的,这样就难以知道,此待加工材料是否能够加工出该该艺品或工件,而本发明的复制方法正好能非常的快速、方便地解决这样的问题。
而对于制作模具模腔来说,可以通过对相交部分进行减料加工,实现模腔的制作。
以上对本发明的较佳实施方式进行了具体说明,但本发明并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可作出种种的等同变型或替换,这些等同的变型或替换均包含在本申请权利要求所限定的范围内。

Claims (1)

1.一种应用实物扫描的示教、加工生成方法:
步骤a1)装备建模机器人,建模机器人上设有建模设备,所述建模设备上设有建模视觉感应摄像头、姿势传感器,建模视觉感应摄像头为双目摄像头或多目摄像头,姿势传感器能感知建模视觉感应摄像头所拍照片时的姿态,让建模视觉感应摄像头所拍照片对应有姿态信息,建模机器人的旁侧设有建模工作台面,将工件放在建模工作台面上,在工件的周围设置若干个约束点,让建模机器人带动建模设备基于建模机器人的建模外部坐标系,让建模设备以指定路径、指定姿态地依次经过上述若干个约束点,并对工件进行拍摄,使得指定路径的每个轨迹点均带有姿态信息、图像信息的立体基础数据,整合所有的立体基础数据,从而生成工件的实物立体模型;建模构建模块内设有姿态传感器,包括至少两个建模构建模块,建模工作台面的左侧或右侧或前侧或后侧设有至少一个建模构建模块,建模工作台面的上方设有至少一个建模构建模块,至少有一个建模构建模块称为全局构建模块,所述全局构建模块的建模构建摄像头的监视范围覆盖其他所有的建模构建模块;全局构建模块的建模构建摄像头的监视范围与其他所有的建模构建模块的建模构建摄像头监视范围相交;所述建模外部坐标系是这样构建的:在建模工作台面的上方或旁侧设置建模构建模块,所述建模构建模块上设有建模构建摄像头,建模构建摄像头监视范围覆盖建模设备的移动范围,所述建模构建摄像头为双目摄像头或多目摄像头;
进行工件的加工示教,加工示教中获得示教加工设备的在工件周围的行走轨迹数据,然后执行如下步骤:
步骤b1)将行走轨迹数据点/线化地可视化地与实物立体模型共同呈现,调整部分模拟数据和/或增减模拟数据;
步骤c2)让建模机器人带动建模设备以建模机器人的机器人坐标经过行走轨迹数据所确定的实际的空间点,并同时记录建模机器人的机器人位姿数据,同时让建模构建模块对机器人进行连续的拍照,从而形成与机器人位姿数据一一对应的给定机器人姿态图像数据;
步骤d2)基于机器人位姿数据、给定机器人姿态图像数据生成示教程序;
步骤e2)装备加工工作台面,在工作台面上放置工件,加工工作台面旁侧设有加工机器人,加工机器人上设有加工设备,加工机器人外设有加工外部坐标系,加工工作台面的上方和/或旁侧设有加工建模模块,加工建模模块与建模构建模块的结构相同,加工外部坐标系与建模外部坐标系的构建方式相同,使得加工外部坐标系由加工建模模块进行构建,用示教程序驱动带有加工设备的加工机器人对工件进行加工,在加工过程中,用加工建模模块对加工机器人进行拍照从而获得当前机器人姿态数据,利用图片对比的方法将当前机器人姿态数据与给定机器人姿态图像数据进行对比,并根据图像数据对比的偏差来引导加工机器人进行自身的机器人位姿的变化,使得加工机器人根据步骤c2)中机器人位姿数据进行建模机器人的机器人位姿的复现。
CN201810319784.2A 2018-04-11 2018-04-11 一种实物扫描建模方法及其应用 Active CN108748137B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810319784.2A CN108748137B (zh) 2018-04-11 2018-04-11 一种实物扫描建模方法及其应用

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810319784.2A CN108748137B (zh) 2018-04-11 2018-04-11 一种实物扫描建模方法及其应用

Publications (2)

Publication Number Publication Date
CN108748137A CN108748137A (zh) 2018-11-06
CN108748137B true CN108748137B (zh) 2021-02-02

Family

ID=63981333

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810319784.2A Active CN108748137B (zh) 2018-04-11 2018-04-11 一种实物扫描建模方法及其应用

Country Status (1)

Country Link
CN (1) CN108748137B (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI112279B (fi) * 2001-11-21 2003-11-14 Mapvision Oy Ltd Menetelmä vastinpisteiden määrittämiseksi
FR2924560A1 (fr) * 2007-11-30 2009-06-05 Commissariat Energie Atomique Procede de suivi stereoscopique d'un objet texture.
CN103406905B (zh) * 2013-08-20 2015-07-08 西北工业大学 一种具有视觉伺服及检测功能的机器人系统
CN104972362B (zh) * 2014-04-14 2017-10-31 沈阳远大科技园有限公司 智能力控机器人磨削加工系统和方法
CN105045209B (zh) * 2015-07-10 2019-09-24 泉州台商投资区长芳设计有限公司 迷你3d公仔像头部及身体穿插结构标准化制作方法
CN105234943B (zh) * 2015-09-09 2018-08-14 大族激光科技产业集团股份有限公司 一种基于视觉识别的工业机器人示教装置及方法
CN105225269B (zh) * 2015-09-22 2018-08-17 浙江大学 基于运动机构的三维物体建模系统
CN106570932B (zh) * 2016-10-24 2023-07-18 南京邮电大学 基于图像的人体头部三维数据采集系统及其方法
CN107144236A (zh) * 2017-05-25 2017-09-08 西安交通大学苏州研究院 一种机器人自动扫描仪及扫描方法
CN107309882B (zh) * 2017-08-14 2019-08-06 青岛理工大学 一种机器人示教编程系统及方法

Also Published As

Publication number Publication date
CN108748137A (zh) 2018-11-06

Similar Documents

Publication Publication Date Title
US20210023694A1 (en) System and method for robot teaching based on rgb-d images and teach pendant
EP1527850B1 (en) Simulation apparatus
CN105225269B (zh) 基于运动机构的三维物体建模系统
Zou et al. Virtual manipulator-based binocular stereo vision positioning system and errors modelling
DE102015011914B4 (de) Konturlinienmessvorrichtung und Robotersystem
EP2728548B1 (en) Automated frame of reference calibration for augmented reality
CN106041937A (zh) 一种基于双目立体视觉的机械手抓取控制系统的控制方法
EP1435280A2 (en) A method and a system for programming an industrial robot
CN110142770B (zh) 一种基于头戴显示装置的机器人示教系统及方法
TWI659279B (zh) 基於擴充實境的加工規劃設備
US11446822B2 (en) Simulation device that simulates operation of robot
CN115346413A (zh) 一种基于虚实融合的装配指导方法及系统
CN108656120B (zh) 一种基于图像对比的示教、加工方法
CN112958974A (zh) 一种基于三维视觉的可交互自动化焊接系统
CN110039520B (zh) 一种基于图像对比的示教、加工系统
CN108748137B (zh) 一种实物扫描建模方法及其应用
JP5291482B2 (ja) ロボット教示プログラム修正装置
JPH11338532A (ja) 教示装置
CN110298918A (zh) 一种基于gpu实时三维建模显示装置及三维建模显示方法
CN108673514B (zh) 一种基于图像对比的标靶示教、加工方法
KR100362383B1 (ko) 3차원 인터페이스를 채용한 동작 정보 후처리 방법
KR101637553B1 (ko) 파노라마 영상을 이용한 증강현실 교육 컨텐츠 제작방법
CN115578465B (zh) 一种基于双目视觉的激光定位与标注方法及产品和应用
Durovsky Point cloud based bin picking: object recognition and pose estimation using region growing segmentation algorithm
CN115981178B (zh) 一种鱼类水产宰杀的仿真系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant