CN107923744A - 基于点云的表面施工 - Google Patents

基于点云的表面施工 Download PDF

Info

Publication number
CN107923744A
CN107923744A CN201680046729.XA CN201680046729A CN107923744A CN 107923744 A CN107923744 A CN 107923744A CN 201680046729 A CN201680046729 A CN 201680046729A CN 107923744 A CN107923744 A CN 107923744A
Authority
CN
China
Prior art keywords
data
sensor
sensing device
height sensor
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680046729.XA
Other languages
English (en)
Other versions
CN107923744B (zh
Inventor
J·门尼恩科
V·J·布拉贝茨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Topcon Positioning Systems Inc
Original Assignee
Topcon Positioning Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Topcon Positioning Systems Inc filed Critical Topcon Positioning Systems Inc
Publication of CN107923744A publication Critical patent/CN107923744A/zh
Application granted granted Critical
Publication of CN107923744B publication Critical patent/CN107923744B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01CCONSTRUCTION OF, OR SURFACES FOR, ROADS, SPORTS GROUNDS, OR THE LIKE; MACHINES OR AUXILIARY TOOLS FOR CONSTRUCTION OR REPAIR
    • E01C23/00Auxiliary devices or arrangements for constructing, repairing, reconditioning, or taking-up road or like surfaces
    • E01C23/01Devices or auxiliary means for setting-out or checking the configuration of new surfacing, e.g. templates, screed or reference line supports; Applications of apparatus for measuring, indicating, or recording the surface configuration of existing surfacing, e.g. profilographs
    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01CCONSTRUCTION OF, OR SURFACES FOR, ROADS, SPORTS GROUNDS, OR THE LIKE; MACHINES OR AUXILIARY TOOLS FOR CONSTRUCTION OR REPAIR
    • E01C11/00Details of pavings
    • E01C11/005Methods or materials for repairing pavings
    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01CCONSTRUCTION OF, OR SURFACES FOR, ROADS, SPORTS GROUNDS, OR THE LIKE; MACHINES OR AUXILIARY TOOLS FOR CONSTRUCTION OR REPAIR
    • E01C19/00Machines, tools or auxiliary devices for preparing or distributing paving materials, for working the placed materials, or for forming, consolidating, or finishing the paving
    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01CCONSTRUCTION OF, OR SURFACES FOR, ROADS, SPORTS GROUNDS, OR THE LIKE; MACHINES OR AUXILIARY TOOLS FOR CONSTRUCTION OR REPAIR
    • E01C19/00Machines, tools or auxiliary devices for preparing or distributing paving materials, for working the placed materials, or for forming, consolidating, or finishing the paving
    • E01C19/002Apparatus for preparing and placing the materials and for consolidating or finishing the paving
    • EFIXED CONSTRUCTIONS
    • E01CONSTRUCTION OF ROADS, RAILWAYS, OR BRIDGES
    • E01CCONSTRUCTION OF, OR SURFACES FOR, ROADS, SPORTS GROUNDS, OR THE LIKE; MACHINES OR AUXILIARY TOOLS FOR CONSTRUCTION OR REPAIR
    • E01C23/00Auxiliary devices or arrangements for constructing, repairing, reconditioning, or taking-up road or like surfaces
    • E01C23/06Devices or arrangements for working the finished surface; Devices for repairing or reconditioning the surface of damaged paving; Recycling in place or on the road
    • E01C23/07Apparatus combining measurement of the surface configuration of paving with application of material in proportion to the measured irregularities
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • E02F9/262Surveying the work-site to be treated with follow-up actions to control the work tool, e.g. controller
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/30Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces
    • G01B11/303Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces using photoelectric detection means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/30Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces
    • G01B11/306Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces for measuring evenness
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B17/00Measuring arrangements characterised by the use of infrasonic, sonic or ultrasonic vibrations
    • G01B17/08Measuring arrangements characterised by the use of infrasonic, sonic or ultrasonic vibrations for measuring roughness or irregularity of surfaces
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B21/00Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C15/00Surveying instruments or accessories not provided for in groups G01C1/00 - G01C13/00
    • G01C15/002Active optical surveying means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C7/00Tracing profiles
    • G01C7/02Tracing profiles of land surfaces
    • G01C7/04Tracing profiles of land surfaces involving a vehicle which moves along the profile to be traced

Abstract

本发明公开了一种用于对使用多个传感器获得的点云数据进行滤波以生成表示表面并且与特定类型的传感器一起使用的数据的方法和设备,滤波允许使用某些机器和传感器类型以获取点云数据,并且在表面施工和修改过程中使用不同类型的传感器。该方法可以用于各种类型的机器控制和表面施工方法。

Description

基于点云的表面施工
背景技术
本公开总体上涉及表面施工,并且更具体而言涉及基于点云的表面施工。
表面施工(例如,道路施工)规范通常包括平滑度要求。平滑度要求确定了表面应该被施工成的平滑度,以确保表面将用于其预期的目的。例如,路面必须沿着表面的长度在一定高度上没有凹陷和隆起,以便允许车辆以期望的速度在表面上安全地行驶并且生成将具有期望寿命的表面。另外,表面施工规范可以包括关于表面必须如何适应诸如路缘和排水沟的外部参考的信息。
使用各种方法构建表面以生成期望的结果(例如,以实现期望的平滑度)。在一种方法中,使用各种材料来构建表面以防止或最小化随着时间的推移表面的变化。通常在涂覆顶表面之前使用诸如砾石或沙子之类的底面材料。用于顶表面的材料可以是沥青、水泥、碎石等。测量用于构建表面的材料以确定材料的顶表面是否在特定范围内是平滑的(即,没有超过一定尺寸的凹陷和/或隆起)。如果表面在所期望范围内不平滑,则表面必须被修改。表面平滑度的测量可以在表面的整个施工过程中重复进行。如此,可以使用不同的机器和不同的传感器来测量表面的平滑度。
发明内容
在一个实施例中,一种方法包括从多个传感器接收表示表面的数据。点云基于该数据生成,并且然后基于特定的传感器类型进行滤波,以生成传感器特定数据。多个传感器可以包括但不限于高度传感器、全球导航卫星系统(GNSS)接收器、惯性测量传感器和车轮传感器。所述高度传感器可以包括基于激光的距离感测装置或基于声波的距离感测装置,并且所述特定的传感器类型可以是激光扫描仪的声波跟踪器。在一个实施例中,所述滤波基于高斯滤波器。所述传感器特定数据可以被传输到机器以用于修改表面。
在一个实施例中,一种方法包括在具有高度传感器的机器处接收传感器特定数据。所述传感器特定数据基于表面的点云数据,并且基于所述高度传感器的特性对点云数据进行滤波。基于来自高度传感器的数据,与经滤波的云数据相比较以修改表面。在一个实施例中,所述经滤波的云数据被修改以反映期望的表面。所述高度传感器可以是声波跟踪器、光学传感器和/或激光扫描仪中的一个或多个。在一个实施例中,当扫描机器沿着表面行进时,基于从与所述扫描机器相关联的多个传感器接收的数据来生成所述表面的点云数据。
在这里,还描述了用于实现上述方法的设备。
附图说明
图1示出了用于收集表面数据的车辆;
图2示出了传感器和获取的传感器数据;
图3示出了根据实施例的方法的流程图;以及
图4示出了计算机的高级框图。
具体实施方式
本公开描述了用于将基于多个传感器生成的数据转换为可以结合具有已知特性的单个传感器或多个传感器使用的数据的方法和设备。表面施工(例如,道路建设)的各种方法使用机器来生成表面的表示。在一个实施例中,这种表示被称为点云并且基于从多个传感器接收的数据而生成。点云信息还可以包括关于表面必须如何适应诸如路缘和排水沟的外部参考的信息。具有能够感测表面以生成点云的多个传感器的机器在表面施工期间可能不是一直可用的。然而,也可以使用装配有一个或两个传感器的其他机器。由于点云数据是使用来自多个传感器的数据生成的表面表示,与点云数据相比,来自不同传感器配置的数据通常不会生成有意义的结果。因此,点云数据在与来自不同传感器配置的数据一起使用之前需要进行滤波。这种滤波允许使用某些机器和传感器类型以获取点云数据,并且允许在表面施工和修改过程中使用不同类型的传感器。例如,在表面信息的初始构建期间,可以使用具有激光扫描仪的机器以及附加传感器。必须对使用激光扫描仪和附加传感器获得的点云数据进行滤波(例如,转换),以便与来自诸如声波跟踪器的单个传感器的数据一起使用。这里描述的方法可以用于各种类型的机器控制和表面施工方法。
可以结合各种表面规范和施工方法使用二维(“2D”)或三维(“3D”)机器控制系统来完成表面施工。机器控制系统有助于根据表面规范对表面进行施工。表面规范可分为三种类型:松散要求、平滑度要求和严格的3D要求。
具有松散要求的表面规范可能仅指定使用材料的量。对于具有松散要求的表面规范,可以在没有控制系统的情况下进行操作(例如,手动控制诸如用于去除表面材料的铣床以及用于添加和使材料成形的沥青摊铺机)。在一些情况下,针对具有松散要求的表面规范的操作使用传感器技术(例如,声波跟踪器)以复制表面并施加固定的偏移,以便使用特定厚度的附加材料覆盖表面。
具有平滑度要求的表面规范通常涉及使用2D机器控制系统的操作。使用声波跟踪器或激光扫描仪的机械滑雪和/或非接触式平均装置,与2D机器控制系统一起使用,以实现期望的平滑度。表面的平滑度可以使用诸如断面测绘器的装置来确定,所述断面测绘器测量表面的不平坦度。
具有严格的3D要求的表面规范可能需要各种传感器和装置,以实现高度准确性(elevation accuracy)。为了实现严格的3D要求,可以使用附加的升级,例如弦线、基于全站仪的控制、以及基于GNSS和激光的控制。下面更详细地描述这些升级。
如前所述,可以使用2D机器控制根据表面规范施工表面。2D机器控制通常用于表面施工,并且可以包括沿垂直调整(例如,第二维度)自动化的表面(例如,第一维度)移动的机器。
应该指出,垂直调整可以被手动控制。当手动控制垂直调整时,操作者通过目视来监控垂直距离(例如,偏移),或者可以使用传感器输出(例如,声波跟踪器)来监控垂直距离。
在使用表面规范来指示沿着表面的多个垂直距离的操作中,可以使用2D机器控制。所述2D机器控制跟踪表面并控制机器的垂直方面,以使表面的形状与某一偏移相匹配。操作者根据基于表面规范提供的数字来调整偏移。这些数字可以在已经开始修改表面之前被写在表面上。当机器沿着表面行进时,操作机器的用户可以看到这些数字。
2D机器控制可以与平均系统一起使用。平均系统可以是机械类型的系统,基于声波的距离感测系统和/或基于激光的距离感测系统。应该注意的是,不管使用哪种类型的平均系统,具有平均系统的2D机器控制都不跟踪实际的表面,而是跟踪表面的平均表示。
如果已经以足够的间隔(在纵向方向上)对表面进行了测量并且如果也捕获了横向上的所有断线,则可以使用3D机器控制。当使用3D机器控制时,机器的精整部分(即,将修改或创建表面的顶部的部分,诸如熨平板、鼓或叶片)的位置必须在诸如X、Y和Z的三维上已知;或纬度、经度和海拔是已知的;平移、偏移和海拔是已知的等等。该位置可以相对于已知的局部点或者使用投影系统(例如,3D坐标系)来计算。当机器移动时,机器的精整部分的位置被连续地计算并与表面设计信息进行比较。机器控制系统连续地进行调整,以尝试并使精整部分的位置与沿表面的每个位置处的表面规范(例如,表面设计)相匹配。
多个全球导航卫星系统(“GNSS”)接收器可以与3D机器控制结合使用。但是,GNSS的精度有限,特别是在海拔方面。这种有限的精度可能不足以达到表面施工的期望结果。
GNSS接收器的海拔不精准性可以使用外部参考设备来克服。全站仪可以跟踪安装在机器精整部分的棱镜。使用棱镜确定的位置信息被传输到机器上的控制系统,在该机器上控制机器的精整部分的海拔以匹配从机器位置处的表面的设计数据连续被提取的海拔。另一种使用外部参考的方法是在GNSS天线附近的机器上跟踪的已知点发射激光束。来自激光发射器的具有精确海拔数据的水平位置信息可以由控制机器的精整部分的系统组合。
当表面平滑度具有高优先级时,上述方法可能不利于表面施工。虽然3D机器解决方案可用于在表面规范内施工表面,但完成表面的平滑度可能不足。这可能是由于与外部海拔参考工作的困难所致。
用于生成表面表示的数据点的数据收集可以使用配备有多个传感器的车辆来完成。这通常需要将感测装置(例如,基于声波的距离感测装置)放置在要跟踪的表面的点上方。或者,可以使用基于激光的距离感测系统。基于激光跟踪器的距离感测系统通常在横向上每次数据采集运行时检测2-3个表面点。如果有足够的附加数据可用,独立收集运行可以精确地拼接在一起。感测装置(例如,激光跟踪器)通常直接放置在跟踪点上方。使用多个传感器来检测表面轮廓的基于点云的解决方案可用于生成表面的表示。没有数据修改的基于点云的方案通常具有过多的噪声数据。点云方案也会生成大量数据,并且出于设计目的,包含这些数据的文件不易于处理。最后,使用点云方案进行数据后处理可能非常耗时。
使用表面作为参考的机器控制可以被执行,但是某些问题会影响完成表面的精度。使用表面作为参考的机器控制要求感测装置(机械或声波)位于收集数据位置的顶部。定位通常基于可以粘住或滑动的车轮传感器。最后,使用表面作为参考的机器控制需要高度熟练的操作者。
在一个实施例中,用于铺路和/或碾磨过程的方法使用点云数据集,该点云数据集经过修改,使得其可以用于使用单个控制感测部件(例如,声波跟踪器)的机器控制。使用传感器的组合来收集表面数据。数据被处理以创建点云并且点云数据然后被滤波以生成模拟特定传感器将感测表面的方式的数据。
图1示出了配备有多个装置和传感器的车辆102,所述装置和传感器可以用来提供表面的测量。示出了具有全球导航卫星系统(GNSS)接收器104的车辆102(在该示例中为卡车),该全球导航卫星系统(GNSS)接收器104可以用于确定车辆102的位置。在该示例中,容器106容纳处理单元,在一个实施例中,该处理单元用于为来自各种传感器和装置的数据提供时间戳。容器106还容纳可用于检测车辆102的移动的惯性测量单元(IMU)。壳体108包含基于激光的距离感测装置,以用于确定从感测装置到车辆102正在其上移动的表面的距离。示出了车辆102具有可用于确定车辆102的移动的车轮传感器110。在一个实施例中,车轮传感器110是编码器,但也可以是用于检测旋转的任何类型的传感器。
在一个实施例中,来自GNSS接收器104、IMU和基于激光的距离感测装置的数据被传输到容器106中的处理单元以被标记时间戳。被标记时间戳的数据然后经由电缆114传输到数据存储装置112。应当注意的是,可以将数据从各种传感器和装置无线地传输到处理单元和/或数据存储装置112。
当车辆102在表面上行驶时,各种传感器和装置收集关于表面的数据。例如,可以使用GNSS接收器104来确定车辆102的位置。IMU还可以用于检测车辆102的移动并且确定车辆102的位置。通过测量从高度传感器下方的表面的点或区域到高度传感器的距离,可以使用各种类型的距离传感器来确定表面的轮廓。在一个实施例中,壳体108还包含基于光学的距离感测装置,其用于确定从光学距离感测装置到车辆102正在其上移动的表面的距离。在一个实施例中,基于光学的距离感测装置包括一个或多个相机。一个或多个相机收集其他传感器无法感测的表面的其他细节。另外,可以使用一对相机来使用诸如三角测量之类的方法来确定从相机到车辆102正在其上行驶的表面的距离。在其他实施例中,基于光学的距离感测装置可以是其他类型的光学装置和/或传感器。
基于激光的距离感测装置和基于光学的距离感测装置可以被一起使用。例如,如图1所示,壳体108中的基于激光的距离感测装置和/或基于光学的距离感测装置可以用于测量距离。距离传感器可以是用于测量距离的任何类型的传感器,例如声波跟踪器或激光扫描仪,或者传感器的组合。在一个实施例中,使用一个或多个光学距离传感器来光学地检测表面的变化。在一个实施例中,一对光学传感器被用于表面的立体成像。来自位于壳体108中的基于光学的距离感测装置的数据可以被传输到容器106中的处理单元。
在一个实施例中,车轮传感器110可以包括用于感测车辆102的移动的旋转传感器。来自被安装到车辆102的一个或多个传感器或装置的数据可以被传输到可以存储和分析数据的数据存储装置112。来自数据存储装置112的数据也可以经由通信天线被传输到远程位置。
应该注意的是,用于检测表面轮廓的传感器可以被安装到车辆102以外的机器或装置。例如,用于检测表面轮廓的各种传感器可以被安装到施工机器上,例如压路机。任何可以移动或者可以在表面上被移动并且可以被配备一个或多个传感器的机器都可以用来检测表面的轮廓。
在一个实施例中,安装到车辆102的传感器和装置被用于生成点云数据。点云数据形成表面的表示。然后可以使用点云数据来确定可能需要的修改以满足表面的平滑度要求或其他要求。在一个实施例中,收集数据以聚焦于捕获传感器被附接到的车辆102附近的表面的细节。在一个实施例中,可以组合多个机器上的多个传感器以生成点云数据。
在一个实施例中,使用一个或多个基于机械的距离传感器来测量表面的轮廓。基于机械的距离传感器可以被单独使用或与其他类型的传感器结合使用。在一个实施例中,基于机械的距离传感器包括被配置为感测施工机器的端门(end gate)的位置的弦线电位计。当端门通过端门正在其上移动的表面的轮廓垂直移动时,弦线电位计输出与垂直位置和端门有关的数据。该数据可以被解释为确定端门正在其上移动的表面的轮廓。在一个实施例中,侧叶片与弦线电位计一起使用以感测表面轮廓。
在获取来自传感器的数据之后,数据被用于生成表示表面的点云。点云可以由数据存储装置112或者远离车辆102的装置(例如,计算机)或两者的组合来生成。在其中点云至少部分地由远程计算机生成的实施例中,来自传感器的数据可以经由通信天线或其他手段被传输到远程计算机。
点云数据基于来自一个或多个传感器的数据的组合来提供表面的特定表示。应该指出的是,点云数据可以与其他点云数据进行比较。然而,点云数据通常不能很容易地与来自单个传感器(例如,声波距离感测装置或激光距离感测装置)或使用不同类型的传感器或配置的任何其它传感器系统的数据进行比较。因此,为了直接在施工和/或修改表面中利用点云数据,应该将代表表面期望形状的参考点云与基于表面的当前条件生成的点云进行比较。由于点云生成可能需要大量的处理,因此通常远离用于获取表示表面的传感器数据的施工机器。因此,点云生成通常不由施工机器或车辆的部件感测表面的当前状况来执行。
尽管施工机器通常不被配置为生成点云数据,但是施工机器的控制单元可以将传感器数据与参考数据进行比较,以生成用于向操作者显示的信息。例如,可以将基于声波跟踪器的参考数据与来自另一个声波跟踪器的数据进行比较。类似地,基于激光扫描仪的参考数据可以与来自另一台激光扫描仪的数据进行比较。然而,未经修改的点云数据不能与基于声波的传感器数据或基于激光的传感器数据进行比较。
在一个实施例中,对点云数据进行滤波,以生成可用作表面施工的参考数据的数据。具体而言,点云数据被滤波(也被称为修改)以生成可以与来自特定类型的传感器数据进行比较的数据。例如,表面的点云数据可经滤波以生成参考数据,从而与来自声波跟踪器的数据进行比较。在一个实施例中,可以修改参考数据以反映期望的表面。点云数据的滤波可以在用于获取点云数据的机器的控制单元上来执行。在一个实施例中,滤波被远程执行,并且经滤波的数据被传输到机器以供使用。在一个实施例中,远程执行滤波,并且当机器正在修改表面时,基于滤波而生成的数据被传输到机器以修改表面。用于反映期望表面的参考数据的修改可以通过修改表面的机器或通过单独的装置远程地执行,并且被传输到机器以用于修改表面。在一个实施例中,远程执行用于反映期望表面的参考数据的修改,并在机器修改表面时将其传输到机器以修改表面。
图2示出了传感器和所获取的传感器数据。图2示出传感器200从第一位置移动到第二位置(以虚线示出)。图2中所示的传感器200是声波跟踪器,但也可以是其他类型的传感器,例如激光扫描仪。传感器200在其从第一位置移动到第二位置时输出数据。数据传感器200输出表面202的表示并且被示出为虚线204。如图2中所示,来自传感器200的数据表示在表面传感器200当前所处的长度上的表面202的平均值。例如,传感器200被示出为在第一位置处输出数据点206,其表示在距离210上的表面202的平均值,该表面202在图2中示出为数据点206。距离210是传感器200在第一位置感测到的表面202的长度。类似地,数据点208表示距离212上的表面202的平均值。
图2中示出的交叉点214表示代表表面202的点云的点。如图2中所示,多个交叉点214不提供类似于图2中虚线204所示的由传感器200所生成的表面表示的一组数据点。
在一个实施例中,对用于表面的点云数据进行滤波,以生成类似于由特定传感器(例如,图2的声波跟踪器200)生成的表示的表面表示。在一个实施例中,通过使用算法修改点云数据来执行点云数据的滤波。
可以使用各种滤波方法来将点云数据转换为表示由特定传感器感测到的表面的数据。在一个实施例中,用于将点云数据转换成表示由特定传感器感测到的表面的数据的滤波方法基于高斯滤波器。在一个实施例中,滤波器仅应用于表示高度坐标的点云的点,并且平滑效果取决于滤波器西格玛(在下面的等式中示为σ)。对于点云中的每个点Pi,确定位于点Pi周围的特定区域A中的所有点Pj。如下所示,对于点Pi来说,经滤波的高度h'i被计算为属于A的所有点Pj的高度hj的加权平均值:
在一个实施例中,区域A被定义为以地球为中心的固定地球坐标(“ECEF”)的4σ*4σ*4σ立方体。应该注意的是,在一个实施例中,为了减少计算时间,将A定义为立方体而不是球体。
在一实施例中,缓存方案以用于提高性能(例如,减少计算时间)。在一实施例中,缓存方案包括从数据库加载ECEF坐标中的16σ*16σ*16σ立方体,并使用该立方体用于适于缓存内的若干点。
西格玛可以是一系列的值。在一个实施例中,西格玛被设定为20厘米。应该注意的是,即使用于平均的实际区域是4σ*4σ*4σ的立方体,有效区域是半径为2σ的球体。这是因为当两点之间的距离大于西格玛时,用于平均的高斯权重下降很快。
在一个实施例中,本文描述的高斯滤波器被用于将点云数据转换为与声波跟踪器一起使用的数据。这里描述的高斯滤波器可以被修改以与其他类型的传感器一起使用。在一个实施例中,使用其他类型的滤波器以生成与特定传感器一起使用的数据。
图3示出了用于对点云数据进行滤波的方法300的流程图。在步骤302中,从多个传感器接收数据。在一个实施例中,传感器被附接到沿着表面移动的扫描机器,例如施工机器。在另一实施例中,扫描机器是诸如皮卡车的车辆。数据表示由多个传感器感测到的表面。在一个实施例中,数据从扫描机器传输到远程位置以用于分析和/或修改(例如,滤波)。
在步骤304中,基于从多个传感器接收的数据生成点云。应该注意的是,可以使用来自扫描机器上的所有传感器或位于扫描机器上的传感器的子集的数据来生成点云。
在步骤306中,基于特定传感器类型对点云进行滤波以生成传感器特定数据。例如,点云可被滤波以生成基于声波的传感器类型数据、激光传感器类型数据和/或基于机械的距离感测装置数据。
在步骤308中,将传感器特定数据传输到施工机器以用于修改表面。例如,可以使用多个传感器基于扫描机器生成点云数据。点云数据可以被滤波以生成传感器特定数据以供具有特定传感器的施工机器使用。因此,点云数据可以被转换成可以与位于特定施工机器上的传感器一起使用的数据。
在步骤310中,使用传感器特定数据由施工机器修改表面。
例如,当仅具有单个传感器(例如,声波跟踪器)的机器可用于表面施工时,可以使用方法300。先前针对特定表面生成的点云基于来自多个传感器的数据。因此,点云数据与来自表面的声波跟踪器的数据相比不会生成有意义的信息。点云数据被滤波以生成表面的表示,该表示是使用声波跟踪器捕获的表面表示所生成的近似值。然后可以将经滤波的数据与来自声波跟踪器的数据进行比较,以确定表面的高度和表面的期望高度之间的差异。类似地,当仅具有激光扫描仪或其他类型的高度传感器的机器可用于表面施工时,表面的点云数据可被滤波以生成近似于使用激光扫描仪或其他高度传感器捕获的表面表示所生成的数据。
应该注意的是,可以进一步修改经滤波的数据以生成附加的数据。例如,可以进一步修改经滤波的数据以生成表面所需的修改的表示,以便将表面从其当前平滑度改变为期望的平滑度。
在一个实施例中,可以在施工机器上或远程地实时执行滤波,并将其传输到施工机器。例如,点云数据可以在远程位置被滤波,并基于来自施工机器的数据在需要时被传输给施工机器,以指示其相对于表面的位置。这样,与施工机器当前或即将修改的表面的特定部分(例如,在施工机器表面修改工具或装置的前面2-3英尺)有关的数据可以基于施工机器的位置和移动在需要时被传输给施工机器。这可以减少施工机器的各种控制和装置所需的内存量。在一个实施例中,被转换成与施工机器配备的特定传感器一起使用的日期的点云数据被传输到施工机器,并且施工机器基于期望的表面来修改所接收的数据。在一个实施例中,传输到施工机器的数据被修改以考虑期望的表面。
应该注意的是,尽管在图1中示出了各种传感器和装置被安装到车辆102的后部,但是传感器和装置也可以位于车辆102的前部或侧部或上部。在一个实施例中,示出的安装在图1中车辆102的后部的传感器和装置可以被分开安装到车辆102上的不同位置。车辆102被示出为皮卡车,但是也可以是能够移动的任何类型的车辆或机器,或者在表面上能够被移动的任何类型的车辆或机器。
可以使用计算机实现图1的处理单元、IMU、GNSS接收器104、基于光学的距离感测装置、基于激光的距离感测装置、数据存储装置112以及用于生成和滤波点云数据的远程装置。这种计算机的高级框图在图4中示出。计算机402包含处理器404,其通过执行定义这种操作的计算机程序指令来控制计算机402的整体操作。计算机程序指令可以存储在存储装置412或其他计算机可读介质(例如磁盘、CD ROM等)中,并且当期望执行计算机程序指令时将其加载到内存410中。因此,图3的方法步骤可以由存储在内存410和/或存储器412中的计算机程序指令来定义,并且由执行计算机程序指令的处理器404来控制。例如,计算机程序指令可以实现为本领域技术人员编程的计算机可执行代码,以执行由图3的方法步骤定义的算法。因此,通过执行计算机程序指令,处理器404执行通过图3的方法步骤定义的算法。计算机402还包括用于经由网络与其他装置进行通信的一个或多个网络接口406。计算机402还包括使用户能够与计算机402交互的输入/输出装置408(例如,显示器、键盘、鼠标、扬声器、按钮等)。本领域的技术人员将认识到,实际计算机的实现也可以包含其他部件,并且出于说明的目的,图4是这种计算机的一些部件的高级表示。
前面的具体实施方式应被理解为在每个方面都是说明性的和示例性的,而不是限制性的,并且这里公开的本发明构思的范围不是从具体实施方式中确定,而是根据专利法允许的全部范围解释的权利要求来确定的。应当理解,这里所示出和描述的实施例仅仅是对本发明构思的原理的说明,并且本领域技术人员可以在不脱离本发明构思的范围和精神的情况下实施各种修改。本领域技术人员可以在不脱离本发明构思的范围和精神的情况下实施各种其他特征组合。

Claims (34)

1.一种方法,包括:
从多个传感器接收数据,所述数据表示表面;
基于所述数据生成点云;以及
基于特定传感器类型对所述点云进行滤波以生成传感器特定数据。
2.如权利要求1所述的方法,其中所述多个传感器包括高度传感器、GNSS接收器、惯性测量传感器和车轮传感器。
3.如权利要求2所述的方法,其中所述高度传感器包括基于激光的距离感测装置。
4.如权利要求2所述的方法,其中所述高度传感器包括基于声波的距离感测装置。
5.如权利要求3所述的方法,其中所述特定传感器类型是基于声波的距离感测装置。
6.如权利要求4所述的方法,其中所述特定传感器类型是基于激光的距离感测装置。
7.如权利要求2所述的方法,其中所述高度传感器包括基于机械的距离感测装置。
8.如权利要求2所述的方法,其中所述高度传感器包括相机。
9.如权利要求1所述的方法,其中所述滤波基于高斯滤波器。
10.如权利要求1所述的方法,还包括:
将所述传感器特定数据传输到机器以用于修改所述表面。
11.一种方法,包括:
在包括高度传感器的机器处接收传感器特定数据,所述传感器特定数据基于表面的点云数据,基于所述高度传感器对所述点云数据进行滤波;以及
基于来自所述高度传感器的数据与经滤波的点云数据相比较来修改所述表面。
12.如权利要求11所述的方法,其中修改所述经滤波的点云数据以反映期望的表面。
13.如权利要求11所述的方法,其中所述高度传感器是基于声波的距离感测装置。
14.如权利要求11所述的方法,其中所述高度传感器是基于激光的距离感测装置。
15.如权利要求11所述的方法,其中所述高度传感器是基于机械的距离感测装置。
16.如权利要求11所述的方法,其中所述高度传感器是相机。
17.如权利要求11所述的方法,其中当扫描机器沿着所述表面行进时,基于从与所述扫描机器相关联的多个传感器接收到的数据来生成所述表面的所述点云数据。
18.一种设备,包括:
处理器;以及
存储器,所述存储器用于存储计算机程序指令,当在所述处理器上执行所述计算机程序指令时,使所述处理器执行以下操作:
从多个传感器接收数据,所述数据表示表面;
基于所述数据生成点云;以及
基于特定传感器类型对所述点云进行滤波以生成传感器特定数据。
19.如权利要求18所述的设备,其中所述多个传感器包括高度传感器、GNSS接收器、惯性测量传感器和车轮传感器。
20.如权利要求19所述的设备,其中所述高度传感器包括基于激光的距离感测装置。
21.如权利要求19所述的设备,其中所述高度传感器包括基于声波的距离感测装置。
22.如权利要求20所述的设备,其中所述特定传感器类型是基于声波的距离感测装置。
23.如权利要求21所述的设备,其中所述特定传感器类型是基于激光的距离感测装置。
24.如权利要求19所述的设备,其中所述高度传感器包括基于机械的距离感测装置。
25.如权利要求19所述的设备,其中所述高度传感器包括相机。
26.如权利要求18所述的设备,其中所述滤波基于高斯滤波器。
27.如权利要求18所述的设备,所述操作还包括:
将所述传感器特定数据传输到机器以用于修改所述表面。
28.一种设备,包括:
处理器;以及
存储器,所述存储器用于存储计算机程序指令,当在所述处理器上执行所述计算机程序指令时,使所述处理器执行以下操作:
在包括高度传感器的机器处接收传感器特定数据,所述传感器特定数据基于表面的点云数据,基于所述高度传感器对所述点云数据进行滤波;以及
基于来自所述高度传感器的数据与经滤波的点云数据相比较来修改所述表面。
29.如权利要求28所述的设备,其中修改所述经滤波的点云数据以反映期望的表面。
30.如权利要求28所述的设备,其中所述高度传感器是基于声波的感测装置。
31.如权利要求28所述的设备,其中所述高度传感器是基于激光的感测装置。
32.如权利要求28所述的设备,其中所述高度传感器是基于机械的感测装置。
33.如权利要求28所述的设备,其中所述高度传感器是相机。
34.如权利要求28所述的设备,其中当扫描机器沿着所述表面行进时,基于从与所述扫描机器相关联的多个传感器接收到的数据来生成所述表面的所述点云数据。
CN201680046729.XA 2015-08-12 2016-08-01 基于点云的表面施工 Active CN107923744B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/825,125 2015-08-12
US14/825,125 US10066346B2 (en) 2015-08-12 2015-08-12 Point cloud based surface construction
PCT/US2016/045004 WO2017027244A1 (en) 2015-08-12 2016-08-01 Point cloud based surface construction

Publications (2)

Publication Number Publication Date
CN107923744A true CN107923744A (zh) 2018-04-17
CN107923744B CN107923744B (zh) 2021-08-03

Family

ID=56800360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680046729.XA Active CN107923744B (zh) 2015-08-12 2016-08-01 基于点云的表面施工

Country Status (5)

Country Link
US (1) US10066346B2 (zh)
EP (1) EP3335003B1 (zh)
CN (1) CN107923744B (zh)
AU (1) AU2016304732B2 (zh)
WO (1) WO2017027244A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10774505B2 (en) * 2017-01-13 2020-09-15 Komatsu Ltd. Work machine control system, work machine, and work machine control method
JP6641535B2 (ja) * 2017-07-31 2020-02-05 三菱電機株式会社 構造物計測装置、計測点補正装置、および計測点補正方法
RU180452U1 (ru) * 2017-10-18 2018-06-14 Федеральное государственное казенное военное образовательное учреждение высшего образования "ВОЕННАЯ АКАДЕМИЯ МАТЕРИАЛЬНО-ТЕХНИЧЕСКОГО ОБЕСПЕЧЕНИЯ имени генерала армии А.В. Хрулева" Адаптивная дорожная лаборатория для измерения технических и эксплуатационных параметров автомобильных дорог
US20230221447A1 (en) * 2020-01-27 2023-07-13 Kevin MacVittie Object location using offset
DE102021107197A1 (de) * 2021-03-23 2022-09-29 Emanuel Sizmann Verfahren zur Positions- und Raumlagebestimmung eines Werkzeugs
CZ202262A3 (cs) 2022-02-09 2023-08-16 Exact Control System a.s. Způsob a zařízení pro frézování povrchu dopravní plochy v alespoň dvou vrstvách

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102277823A (zh) * 2011-05-03 2011-12-14 北京航空航天大学 一种基于惯性测量单元和激光测距仪的车载路面检测系统
CN103852064A (zh) * 2014-03-28 2014-06-11 安徽农业大学 一种道路坡度车载实时测试系统及其测试方法

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4733355A (en) * 1986-02-10 1988-03-22 Agtek Development Company, Inc. Non-contacting range sensing and control device
DE3816198C1 (zh) * 1988-05-11 1989-09-07 Moba-Electronic Gesellschaft Fuer Mobil-Automation Mbh, 6254 Elz, De
US4914593B1 (en) * 1988-06-09 1995-01-17 Spectra Physics Method for automatic depth control for earth moving and grading
DE8810670U1 (zh) * 1988-08-24 1989-01-26 Moba-Electronic Gesellschaft Fuer Mobil-Automation Mbh, 6254 Elz, De
US4933853A (en) * 1988-09-28 1990-06-12 Raytheon Company Ultrasonic grade and auger control
US5035290A (en) * 1989-10-27 1991-07-30 Moba-Electronic Gesellschaft Fur Mobil-Automation Mbh Height sensing device including an ultrasonic sensor and a mechanical sensor
DE59201413D1 (de) * 1991-11-15 1995-03-23 Moba Electronic Mobil Automat Ultraschall-Regeleinrichtung für ein fahrbares Fräsegerät.
US5935183A (en) * 1996-05-20 1999-08-10 Caterpillar Inc. Method and system for determining the relationship between a laser plane and an external coordinate system
DE19756676C1 (de) * 1997-12-19 1999-06-02 Wirtgen Gmbh Verfahren und Vorrichtung zum Abfräsen von Verkehrsflächen
US5984420A (en) * 1998-05-29 1999-11-16 Wirtgen America, Inc. Grade averaging system with floating boom and method of using the same
JP4435383B2 (ja) 2000-05-30 2010-03-17 東京計器株式会社 縦断形状測定装置
DE10060903C2 (de) * 2000-12-07 2002-10-31 Moba Mobile Automation Gmbh Laser-Höhenregeleinrichtung für eine Baumaschine
FI115161B (fi) * 2003-03-25 2005-03-15 Sandvik Tamrock Oy Järjestely kaivosajoneuvon paikannukseen
US7272474B1 (en) * 2004-03-31 2007-09-18 Carnegie Mellon University Method and system for estimating navigability of terrain
EP1600564A1 (de) * 2004-05-24 2005-11-30 Leica Geosystems AG Verfahren zur Steuerung einer oberflächenverändernden Maschine
DE102004040136B4 (de) * 2004-08-19 2008-05-08 Abg Allgemeine Baumaschinen-Gesellschaft Mbh Gerät zum Abfräsen von Verkehrsflächen
KR100733873B1 (ko) 2005-07-27 2007-07-02 전일중 도로의 평탄성 측정장치
US7689351B2 (en) 2006-03-31 2010-03-30 Topcon Positioning Systems, Inc. Virtual profilograph for road surface quality assessment
DE102006020293B4 (de) * 2006-04-27 2013-07-11 Wirtgen Gmbh Straßenbaumaschine, Nivelliereinrichtung sowie Verfahren zum Regeln der Frästiefe oder Fräsneigung bei einer Straßenbaumaschine
CN101369313B (zh) * 2007-08-17 2012-05-16 鸿富锦精密工业(深圳)有限公司 点云噪声点过滤系统及方法
US7594441B2 (en) * 2007-09-27 2009-09-29 Caterpillar Inc. Automated lost load response system
US8351684B2 (en) * 2008-02-13 2013-01-08 Caterpillar Inc. Terrain map updating system
SE532431C2 (sv) * 2008-05-30 2010-01-19 Atlas Copco Rock Drills Ab Metod och anordning för bestämning av en överensstämmelse mellan en representation av en omgivning och nämnda omgivning
US8768659B2 (en) * 2008-09-19 2014-07-01 The University Of Sydney Method and system of data modelling
US8174377B2 (en) * 2008-11-14 2012-05-08 GM Global Technology Operations LLC Suspension height sensor
AU2009251043A1 (en) * 2009-01-07 2010-07-22 The University Of Sydney A method and system of data modelling
CN101871775B (zh) * 2009-04-21 2012-09-19 鸿富锦精密工业(深圳)有限公司 三坐标测量机编程系统及方法
US20140379254A1 (en) * 2009-08-25 2014-12-25 Tomtom Global Content B.V. Positioning system and method for use in a vehicle navigation system
AU2010295226B2 (en) * 2009-09-15 2015-05-28 The University Of Sydney A method and system for multiple dataset Gaussian process modeling
FR2953316B1 (fr) * 2009-11-30 2012-08-24 Eurocopter France Procede d'obtention d'une base locale d'elevation de terrain a partir d'un moyen de detection embarque a bord d'un vehicule et dispositif pour la mise en oeuvre de ce procede
US8199977B2 (en) * 2010-05-07 2012-06-12 Honeywell International Inc. System and method for extraction of features from a 3-D point cloud
US8274508B2 (en) * 2011-02-14 2012-09-25 Mitsubishi Electric Research Laboratories, Inc. Method for representing objects with concentric ring signature descriptors for detecting 3D objects in range images
US8794867B2 (en) * 2011-05-26 2014-08-05 Trimble Navigation Limited Asphalt milling machine control and method
EP2562309B1 (de) * 2011-08-22 2014-04-02 Joseph Vögele AG Straßenfertiger mit Messvorrichtung
US9194949B2 (en) * 2011-10-20 2015-11-24 Robert Bosch Gmbh Methods and systems for precise vehicle localization using radar maps
US8630805B2 (en) * 2011-10-20 2014-01-14 Robert Bosch Gmbh Methods and systems for creating maps with radar-optical imaging fusion
US8793107B2 (en) * 2011-12-01 2014-07-29 Harris Corporation Accuracy-based significant point derivation from dense 3D point clouds for terrain modeling
US9767598B2 (en) * 2012-05-31 2017-09-19 Microsoft Technology Licensing, Llc Smoothing and robust normal estimation for 3D point clouds
US8705110B2 (en) * 2012-06-25 2014-04-22 Yoldas Askan Method of generating a smooth image from point cloud data
US9300841B2 (en) * 2012-06-25 2016-03-29 Yoldas Askan Method of generating a smooth image from point cloud data
US8788146B1 (en) * 2013-01-08 2014-07-22 Ford Global Technologies, Llc Adaptive active suspension system with road preview
CN104574282B (zh) * 2013-10-22 2019-06-07 鸿富锦精密工业(深圳)有限公司 点云噪声点去除系统及方法
US9145661B1 (en) * 2014-09-24 2015-09-29 Caterpillar Inc. Worksite control system for managing lost loads
US10459084B2 (en) * 2014-12-30 2019-10-29 Nokia Technologies Oy Range sensing using a hybrid range sensing device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102277823A (zh) * 2011-05-03 2011-12-14 北京航空航天大学 一种基于惯性测量单元和激光测距仪的车载路面检测系统
CN103852064A (zh) * 2014-03-28 2014-06-11 安徽农业大学 一种道路坡度车载实时测试系统及其测试方法

Also Published As

Publication number Publication date
US10066346B2 (en) 2018-09-04
CN107923744B (zh) 2021-08-03
AU2016304732A1 (en) 2018-02-08
WO2017027244A1 (en) 2017-02-16
EP3335003A1 (en) 2018-06-20
EP3335003B1 (en) 2024-05-01
US20170044728A1 (en) 2017-02-16
AU2016304732B2 (en) 2021-04-22

Similar Documents

Publication Publication Date Title
CN107923744A (zh) 基于点云的表面施工
US11561317B2 (en) Geographic map updating methods and systems
CN104330022B (zh) 使用从运动恢复结构算法的体积确定方法和系统
US9562971B2 (en) Point-cloud fusion
CN105928498B (zh) 提供关于对象的信息的方法、大地测绘系统、存储介质
JP5756835B2 (ja) 粉砕された表面の粉砕された体積又は面積の測定
KR102399227B1 (ko) Gpr 탐사를 이용한 지하시설물 관리시스템
CN107402000A (zh) 用于相对于测量仪器参照显示装置的系统和方法
CN105606077A (zh) 大地测量系统
US9367962B2 (en) Augmented image display using a camera and a position and orientation sensor
CN106066645A (zh) 在操作推土机的同时测量和绘制地形的方法和控制系统
EP1840506A1 (en) Virtual profilograph for road surface quality assessment
CN104236522A (zh) 三维可视化测量系统
KR20130109232A (ko) 자동 표현-변경 기능을 포함하는 측정 기기
CN105339758A (zh) 使用重叠区域优化光束法平差
KR101265746B1 (ko) 지능형 굴삭 시스템을 위한 3차원 스캔 데이터의 자동 정합 방법
RU2571300C2 (ru) Способ дистанционного определения абсолютного азимута целевой точки
US20220284671A1 (en) System and method for collecting and georeferencing 3d geometric data associated with a gps-denied environment
KR101730296B1 (ko) 지하매설물 3차원 공간정보 구축을 위한 모바일 매핑 시스템 및 그 매칭 시스템을 이용한 지하매설물 3차원 공간정보 구축방법
CN114266835A (zh) 一种非量测相机的变形监测控制方法与系统
Nuttens et al. Comparison of 3D accuracy of terrestrial laser scanning and digital photogrammetry: an archaeological case study
RU178696U1 (ru) Мобильная лаборатория для мониторинга аэродромного покрытия взлётно-посадочной полосы
US20190212131A1 (en) Pipeline depth of cover determination method and apparatus
JP2019128776A (ja) 情報処理装置、情報処理方法およびプログラム
Guta Use of unmanned aerial vehicles compared to terrestrial laser scanning for characterizing discontinuities on rock exposures

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant