CN113538556B - 基于ir图的体积测量装置 - Google Patents

基于ir图的体积测量装置 Download PDF

Info

Publication number
CN113538556B
CN113538556B CN202010293594.5A CN202010293594A CN113538556B CN 113538556 B CN113538556 B CN 113538556B CN 202010293594 A CN202010293594 A CN 202010293594A CN 113538556 B CN113538556 B CN 113538556B
Authority
CN
China
Prior art keywords
straight line
top surface
straight lines
box body
merging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010293594.5A
Other languages
English (en)
Other versions
CN113538556A (zh
Inventor
周响南
刘涛
黄龙祥
汪博
朱力
吕方璐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Guangjian Technology Co Ltd
Original Assignee
Shenzhen Guangjian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Guangjian Technology Co Ltd filed Critical Shenzhen Guangjian Technology Co Ltd
Priority to CN202010293594.5A priority Critical patent/CN113538556B/zh
Publication of CN113538556A publication Critical patent/CN113538556A/zh
Application granted granted Critical
Publication of CN113538556B publication Critical patent/CN113538556B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/002Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083Shipping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0283Price estimation or determination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Abstract

本发明提供了一种基于IR图的体积测量装置,包括:深度相机,用于采集目标箱体的点云数据和IR图;控制模块,用于根据点云数据确定目标箱体顶面的侧边直线段和底面;将顶面的侧边直线段投影到IR图中确定侧边区域,并在IR图中将侧边区域选出;在侧边区域进行直线检测生成多条直线,将多条直线合并与筛选后确定顶面的边缘直线段,进而确定顶面的长和宽;根据IR图确定顶面的中心点,根据中心点至底面的距离确定目标箱体的高,进而能够确定目标箱体的体积;显示模块,用于显示目标箱体的体积。本发明中在IR图中对侧边区域进行直线检测,确定顶面的边缘直线段,进而确定目标相同的长宽高,实现目标箱体体积的准确计算,能够应用于物流计费等领域。

Description

基于IR图的体积测量装置
技术领域
本发明涉及体积自动测量,具体地,涉及一种基于IR图的体积测量装置。
背景技术
体积数据作为物体的一项最为基本的属性信息,被广泛应用生产和物流等领域中,如基于物体体积的物流计费、物体的自动装载等。其中,在进行物流计费或物体的自动装载中的物体常常使用标准的长方体箱体。然后通过三维测头进行自动化、高效、准确地计算出箱体的体积,以解决人工拉尺慢,手动输入繁琐,运费计算出错,存储存档困难等问题。
现有技术中,常用的体积确定方法包括采用激光的确定方法和采用手工标尺的确定方法。
其中,采用激光的确定方法虽然具有很高的精度,但是装配昂贵的激光测量设备,性价比低,很难被用户广泛接受;而采用手工标尺的确定方法需要人工配合,且受人工操作及情绪影响,导致无论精度还是效率均无法得到保证。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种基于IR图的体积测量装置、系统、设备及存储介质。
根据本发明提供的基于IR图的体积测量装置,包括如下模块:
深度相机,用于采集目标箱体的点云数据和IR图;
控制模块,用于根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面;将所述顶面的侧边直线段投影到所述IR图中确定侧边区域,并在所述IR图中将所述侧边区域选出;在所述侧边区域进行直线检测生成多条直线,将所述多条直线合并与筛选后确定所述顶面的边缘直线段,进而确定所述顶面的长和宽;根据所述IR图确定所述顶面的中心点,根据所述中心点至所述底面的距离确定所述目标箱体的高,进而能够确定所述目标箱体的体积;
显示模块,用于显示所述目标箱体的体积。
优选地,根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面时,具体为:
获取目标箱体的点云数据,根据所述点云数据确定所述目标箱体的多个平面;
根据所述平面的数量及平面之间的角度确定所述目标箱体的测量方式,所述测量方式包括垂直测量、倾斜单侧面测量以及倾斜双侧面测量;
根据所述目标箱体的测量方式和所述平面之间的几何关系确定所述目标箱体顶面的侧边直线段和底面。
优选地,在所述IR图中将所述侧边区域选出时,具体为:
获取目标箱体的IR图,对所述IR图进行自适应灰度变换处理,生成目标IR图;
将所述顶面的侧边直线段投影到所述目标IR图中,在所述目标IR图确定侧边区域;
将所述侧边区域作为ROI区域在所述目标IR图中截取出。
优选地,将所述多条直线合并与筛选后确定所述顶面的边缘直线段时,具体为:
在一所述侧边区域进行直线检测生成多条直线;
对于所述多条直线,当两条直线之间的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时,将两条直线进行合并生成合并直线;
对所述合并直线进行筛选确定所述顶面的边缘直线段;
对多个所述侧边区域进行直线检测、合并及筛选后以确定所述顶面的多条边缘直线段,进而还能够确定所述顶面的长和宽。
优选地,当将两条直线进行合并生成合并直线时,具体为:
将多条直线按照长度由大到小进行遍历,当遍历到一直线时,按照与该直线形成的角度由小到大的顺序进行与该直线之间距离和角度判断,当一直线与该直线的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时将两条直线进行合并;
将任意两条直线进行组合形成直线对,计算直线对之间的距离,当两条直线对之间距离小于预设置的第一距离阈值且距离最小时,则将直线对中的直线进行合并;
重复进行直线对中最近邻直线的合并,直至剩余直线中任意两条直线对之间距离均大于等于预设置的第一距离阈值。
将剩余直线按照长度由大到小进行遍历,当遍历到一剩余直线时,对其他剩余直线按照与该剩余直线形成的角度由小到大的顺序进行与该直线之间距离和角度判断,当一剩余直线与该剩余直线的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时,将两条剩余直线进行合并生成合并直线。
优选地,当对所述合并直线进行筛选确定所述顶面的边缘直线段时,具体为:
步骤M101:当合并直线仅有一条时,且当所述合并直线与所述顶面的侧边直线段之间的夹角小于预设置的第二角度阈值、所述合并直线长度大于预设置的长度阈值、所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二距离阈值时,则将所述合并直线作为边缘直线段,否则执行步骤M102;
步骤M102:当所述合并直线与所述顶面的中心点之间的距离在预设置的第三距离阈值范围内、所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二角度阈值时,则将所述合并直线作为候选直线,当所述候选直线为一根时,将所述候选直线作为边缘直线段,当所述候选直线为多根时,执行步骤M103;
步骤M103:将所述候选直线按照与所述中心点的距离进行从小到大的排序,遍历所述候选直线,在相邻的两条候选直线之间取ROI区域,统计ROI区域内的点云数量,当所述ROI区域的点云数量小于预设置的点云数量阈值,将该两条候选直线加入到输出队列中并执行步骤M106,当所述ROI区域的点云数量大于预设置的点云数量阈值时,执行步骤M104-M105;
步骤M104:当所述ROI区域的点云的平均深度与所述顶面的平均深度的差值在预设置的第一深度差范围内,则舍弃靠近所述顶面的中心点的候选直线,当所述ROI区域的点云的平均深度与所述底面的平均深度的差值在预设置的第二深度差范围内,则舍弃远离所述顶面的中心点的候选直线;
步骤M105:重复执行步骤M103和步骤M104,将筛选出的最后一候选直线作为所述边缘直线段;
步骤M106:在所述输出队列中选择与所述顶面的侧边直线段的距离最近的候选直线作为所述边缘直线段。
优选地,当对两条直线进行合并时,具体为:
对两条直线根据长度进行等比例取点,进而根据取到的点将两条直线进行拟合生成所述合并直线。
优选地,根据预设置的体积与费用相关联的费用系数,对所述目标箱体的体积输出对应的费用;
所述显示模块,用于同时显示所述目标箱体的体积及对应发费用。
优选地,所述目标箱体为长方体或正方体。
优选地,所述深度相机包括光束投射器、光探测器以及处理器模块;
所述光束投射器,用于所述目标箱体投射点阵光;
所述光探测器,用于接收经所述目标箱体反射后的所述点阵光生成采集光信号;
所述处理器模块,用于根据采集光信号生成所述目标箱体的点云数据。
与现有技术相比,本发明具有如下的有益效果:
本发明中通过深度相机采集目标箱体的点云数据和IR图,控制模块通过将点云数据确定所述目标箱体顶面的侧边直线段投影到IR图中,并对所述IR图中的侧边区域进行直线检测,确定顶面的边缘直线段,进而确定所述目标相同的长宽高,实现目标箱体体积的准确计算,能够应用于物流计费以及物体的自动装载等领域。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明实施例中基于IR图的体积测量装置的模块示意图;
图2为本发明实施例中根据目标箱体的点云数据获取目标箱体顶面和底面的步骤流程图;
图3为本发明实施例中在目标IR图中截取出侧边区域的步骤流程图;
图4为本发明实施例中对多条直线进行合并和筛选的步骤流程图;
图5为本发明实施例中对多条直线进行合并生成合并直线的步骤流程图;
图6为本发明实施例中根据合并直线确定边缘直线段的步骤流程图;
图7为本发明实施例中根据合并直线确定边缘直线段的示意图;
图8为本发明实施例中深度相机的模块示意图。
实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进。这些都属于本发明的保护范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例,例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
本发明提供的基于IR图的体积测量装置,旨在解决现有技术中存在的问题。
下面以具体地实施例对本发明的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本发明的实施例进行描述。
图1为本发明实施例中基于IR图的体积测量装置的步骤流程图,如图1所示,本发明提供的基于IR图的体积测量装置,包括如下模块:
深度相机,用于采集目标箱体的点云数据和IR图;
控制模块,用于根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面;将所述顶面的侧边直线段投影到所述IR图中确定侧边区域,并在所述IR图中将所述侧边区域选出;在所述侧边区域进行直线检测生成多条直线,将所述多条直线合并与筛选后确定所述顶面的边缘直线段,进而确定所述顶面的长和宽;根据所述IR图确定所述顶面的中心点,根据所述中心点至所述底面的距离确定所述目标箱体的高,进而能够确定所述目标箱体的体积;
显示模块,用于显示所述目标箱体的体积。
在本发明实施例中,所述目标箱体为正方体或长方体。由于所述目标箱体的底面和地面为相对的平面,因此所述目标箱体的底面根据地面上的点云数据确定。
图2为本发明实施例中根据目标箱体的点云数据获取目标箱体顶面和底面的步骤流程图,如图2所示,根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面时,具体包括如下步骤:
步骤S101:获取目标箱体的点云数据,根据所述点云数据确定所述目标箱体的多个平面;
步骤S102:根据所述平面的数量及平面之间的角度确定所述目标箱体的测量方式,所述测量方式包括垂直测量、倾斜单侧面测量以及倾斜双侧面测量;
步骤S103:根据所述目标箱体的测量方式和所述平面之间的几何关系确定所述目标箱体顶面的侧边直线段和底面。
在本发明实施例中,获取所述点云数据,计算所述点云数据中每个点的特征值,根据所述点的特征值对所述点云数据进行聚类生成多个子平面,将位于同一平面的多个子平面融合为一平面。
在本发明实施例中,所述特征值包括法线、中心点、内点以及范围值,具体计算方式为,基于KD树计算每个点的k临近点,对多个k临近点形成的平面计算出的法线作为该点的法线,并将该点作为中心点,将k临近点作为内点,将多个k临近点与中心点的平均距离作为范围值。
在本发明实施例中,将多个点聚类为子平面时,通过判断每相邻点的法线角度、相邻点之间距离以及种子点与待选定的点之间的角度进行聚类,种子点为聚类开始时选取的点,如当一待选点与子平面中一相邻点之间的法线角度在10度以内,距离在2倍的范围值之内时,且其中的待选点在与种子点之间角度在15度以内时,则经该待选点加入子平面中的范围内。当聚类生成的平面的点数不小于预设置的数量阈值时,如100个点,才作为一子平面;在平面融合时,通过点与点之间的临近关系查找相邻点,然后通过判断相邻子平面之间的法线以及中心点之间的法线角度关系判断是否是两点是否为同一个平面,如果两点之间属于同一个平面,则进行融合,如当具有相邻点的子平面之间法线角度在10度以内,则将该两个子平面进行融合。
在本发明实施例中,将多个平面根据包含点云数据的数量降序排列,所述点云数据通过深度相机以俯视角度采集;
遍历所述平面,选择出夹角小于预设置的第一角度阈值的两个平面,分别作为顶面和底面,其中,所述顶面为深度最小的平面,所述底面为深度最大的平面;
当所述平面的数量为两个时,则对所述目标箱体的测量判定为垂直测量,此时将所述顶面的点云数据投射到一与所述顶面平行的2D平面上,并按预设置的比例系数收缩形成收缩点云图;在所述2D平面上对收缩点云图进行轮廓检测计算轮廓的最小矩形闭包,将所述矩形闭包的四条边作为所述顶面的边缘,进而确定所述四条边的交点和侧边直线段,根据所述比例系数确定所述顶面的长和宽;
当所述平面的数量大于两个时,则获取所述顶面或所述底面垂直的侧面集合,所述侧面集合包括多个侧面;当所述侧面集合内平面的数量为一个时,则对所述目标箱体的测量认定为倾斜单侧面测量;当所述测量方式为倾斜单侧面测量时,计算一侧面和顶面的交线,将所述侧面和所述顶面上的点云数据投影到所述交线上,获取所述交线的两个端点,进而确定所述顶面一侧边直线段;将顶面面上距离交线最远的点云数据到交线的垂直距离作为所述顶面另一侧边直线段的长度,且该侧边直线段与交点连接,进而确定该侧边直线段的位置;
当所述侧面集合内平面的数量大于两个时,遍历所述侧面集合内平面查找出到两个平面之间的夹角与90°角差的绝对值小于预设置的第二角度阈值时,则对所述目标箱体的测量认定为倾斜双侧面测量。当所述测量方式为倾斜双侧面测量时,计算两侧面分别与所述顶面的交线,获得两条交线,进而确定两条交线的交点,即两条交线的一端点;
将所述侧面和所述顶面上的点云数据投影到所述两条交线上,获取两条所述交线另一端点,进而确定所述顶面的两条侧边直线段。
在本发明实施例中,所述目标箱体为正方体或长方体。
图3为本发明实施例中在目标IR图中截取出侧边区域的步骤流程图,如图3所示,在所述IR图中将所述侧边区域选出时,具体包括如下步骤:
步骤S201:获取目标箱体的IR图,对所述IR图进行自适应灰度变换处理,生成目标IR图;
步骤S202:将所述顶面的侧边直线段投影到所述目标IR图中,在所述目标IR图确定侧边区域;
步骤S203:将所述侧边区域作为ROI区域在所述目标IR图中截取出。
在本发明实施例中,通过自适应灰度变换处理对所述IR图用于提高所述IR图的对比度。
图4为本发明实施例中对多条直线进行合并和筛选的步骤流程图,如图4所示,将所述多条直线合并与筛选后确定所述顶面的边缘直线段时,具体包括如下步骤:
步骤S301:在一所述侧边区域进行直线检测生成多条直线;
步骤S302:对于所述多条直线,当两条直线之间的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时,将两条直线进行合并生成合并直线;
在本发明实施例中,在进行直线检测时采用EDLines直线检测算法。所述第一距离阈值可以设置为6个像素;所述第一角度阈值可以设置为5°。
图5为本发明实施例中对多条直线进行合并生成合并直线的步骤流程图,如图5所示,当将两条直线进行合并生成合并直线时,具体包括如下步骤:
步骤S3021:将多条直线按照长度由大到小进行遍历,当遍历到一直线时,按照与该直线形成的角度由小到大的顺序进行与该直线之间距离和角度判断,当一直线与该直线的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时将两条直线进行合并;
步骤S3022:将任意两条直线进行组合形成直线对,计算直线对之间的距离,当两条直线对之间距离小于预设置的第一距离阈值且距离最小时,则将直线对中的直线进行合并;
步骤S3023:重复执行步骤S3022,直至剩余直线中任意两条直线对之间距离均大于等于预设置的第一距离阈值;
步骤S3024:将剩余直线按照长度由大到小进行遍历,当遍历到一剩余直线时,对其他剩余直线按照与该剩余直线形成的角度由小到大的顺序进行与该直线之间距离和角度判断,当一剩余直线与该剩余直线的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时,将两条剩余直线进行合并生成合并直线。
在本发明实施例中,当对两条直线进行合并的具体方法为:
对两条直线根据长度进行等比例取点,进而根据取到的点将两条直线进行拟合生成所述合并直线。
步骤S303:对所述合并直线进行筛选确定所述顶面的边缘直线段;
图6为本发明实施例中根据合并直线确定边缘直线段的步骤流程图,如图6所示,当对所述合并直线进行筛选确定所述顶面的边缘直线段时,具体包括如下步骤:
步骤S3031:当合并直线仅有一条时,且当所述合并直线与所述顶面的侧边直线段之间的夹角小于预设置的第二角度阈值,所述合并直线长度大于预设置的长度阈值,所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二距离阈值时,则将所述合并直线作为边缘直线段,否则执行步骤S3032;
步骤S3032:当所述合并直线与所述顶面的中心点之间的距离在预设置的第三距离阈值范围内,所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二距离阈值时,则将所述合并直线作为候选直线,当所述候选直线为一根时,将所述候选直线作为边缘直线段,当所述候选直线为多根时,执行步骤S3033;
步骤S3033:将所述候选直线按照与所述中心点的距离进行从小到大的排序,遍历所述候选直线,在相邻的两条候选直线之间取ROI区域,统计ROI区域内的点云数量,当所述ROI区域的点云数量小于预设置的点云数量阈值,将该两条候选直线加入到输出队列中并执行步骤S3035,当所述ROI区域的点云数量大于预设置的点云数量阈值时,执行步骤S3034;
步骤S3034:当所述ROI区域的点云的平均深度与所述顶面的平均深度的差值在预设置的第一深度差范围内,则舍弃靠近所述顶面的中心点的候选直线,当所述ROI区域的点云的平均深度与所述底面的平均深度的差值在预设置的第二深度差范围内,则舍弃远离所述顶面的中心点的候选直线;
步骤S3035:重复执行步骤S3033和步骤S3034,将筛选出的最后一候选直线作为所述边缘直线段。
步骤S3036:在所述输出队列中选择与所述顶面的侧边直线段的距离最近的候选直线作为所述边缘直线段。
步骤S304:重复执行步骤S301至步骤S303以确定所述顶面的多条边缘直线段,进而确定所述顶面的长和宽。
在本发明实施例中,所述第一深度差范围和所述第二深度差范围可以设置为2厘米。所述第二角度阈值为可以设置为8°。所述预设置的长度阈值可以设置为所在所述侧边区域对应侧边直线段长度的二分之一。所述第二距离阈值和所述第三距离阈值均可以设置为所在所述侧边区域对应侧边直线段到顶面中心距离的1.2倍。所述点云数量阈值可以设置为15个。
步骤S4:根据所述IR图确定所述顶面的中心点,根据所述中心点至所述底面的距离确定所述目标箱体的高,进而能够确定所述目标箱体的体积。
图7为本发明实施例中根据合并直线确定边缘直线段的示意图,如图7所示,如下图所示,提取到了三条合并直线,且该合并直线均为候选直线时,遍历排序后的候选直线,从候选直线A开始,在候选直线A和候选直线B之间取ROI区域,统计ROI区域内的点云数量,如果点数数量小于预设置的点云数量阈值,那么将候选直线A和候选直线B加入到输出队列;如果点云数量大于预设置的点云数量阈值,那么计算该ROI区域内点云的平均深度值,当平均深度和顶面的平面深度更接近,那么说明候选直线A是在顶面上,则舍弃掉靠近中心的候选直线A;接着判断候选直线B,在候选直线B和候选直线C之间取ROI区域,统计ROI区域内的点云数量,如果点数数量小于预设置的点云数量阈值,那么将候选直线B和候选直线C加入到输出队列;如果点云数量大于预设置的点云数量阈值,那么计算该ROI区域内点云的平均深度值,当平均深度和地面的平面深度更接近,那么说明候选直线B是在顶面上,则舍弃掉远离中心点的候选直线C。
本发明实施例中,通过深度相机采集目标箱体的点云数据和IR图,控制模块通过将点云数据确定所述目标箱体顶面的侧边直线段投影到IR图中,并对所述IR图中的侧边区域进行直线检测,确定顶面的边缘直线段,进而确定所述目标相同的长宽高,实现目标箱体体积的准确计算,能够应用于物流计费以及物体的自动装载等领域。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (8)

1.一种基于IR图的体积测量装置,其特征在于,包括如下模块:
深度相机,用于采集目标箱体的点云数据和IR图;
控制模块,用于根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面;将所述顶面的侧边直线段投影到所述IR图中确定侧边区域,并在所述IR图中将所述侧边区域选出;在所述侧边区域进行直线检测生成多条直线,将所述多条直线合并与筛选后确定所述顶面的边缘直线段,进而确定所述顶面的长和宽;根据所述IR图确定所述顶面的中心点,根据所述中心点至所述底面的距离确定所述目标箱体的高,进而能够确定所述目标箱体的体积;
显示模块,用于显示所述目标箱体的体积;
其中,将所述多条直线合并与筛选后确定所述顶面的边缘直线段时,具体为:
在一所述侧边区域进行直线检测生成多条直线;
对于所述多条直线,当两条直线之间的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时,将两条直线进行合并生成合并直线;
对所述合并直线进行筛选确定所述顶面的边缘直线段;
对多个所述侧边区域进行直线检测、合并及筛选后以确定所述顶面的多条边缘直线段,进而还能够确定所述顶面的长和宽;
当对所述合并直线进行筛选确定所述顶面的边缘直线段时,具体为:
步骤M101:当合并直线仅有一条时,且当所述合并直线与所述顶面的侧边直线段之间的夹角小于预设置的第二角度阈值、所述合并直线长度大于预设置的长度阈值、所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二距离阈值时,则将所述合并直线作为边缘直线段,否则执行步骤M102;
步骤M102:当所述合并直线与所述顶面的中心点之间的距离在预设置的第三距离阈值范围内、所述合并直线与所述顶面的侧边直线段之间的距离小于预设置的第二距离阈值时,则将所述合并直线作为候选直线,当所述候选直线为一根时,将所述候选直线作为边缘直线段,当所述候选直线为多根时,执行步骤M103;
步骤M103:将所述候选直线按照与所述中心点的距离进行从小到大的排序,遍历所述候选直线,在相邻的两条候选直线之间取ROI区域,统计ROI区域内的点云数量,当所述ROI区域的点云数量小于预设置的点云数量阈值,将该两条候选直线加入到输出队列中并执行步骤M106,当所述ROI区域的点云数量大于预设置的点云数量阈值时,执行步骤M104-M105;
步骤M104:当所述ROI区域的点云的平均深度与所述顶面的平均深度的差值在预设置的第一深度差范围内,则舍弃靠近所述顶面的中心点的候选直线,当所述ROI区域的点云的平均深度与所述底面的平均深度的差值在预设置的第二深度差范围内,则舍弃远离所述顶面的中心点的候选直线;
步骤M105:重复执行步骤M103和步骤M104,将筛选出的最后一候选直线作为所述边缘直线段;
步骤M106:在所述输出队列中选择与所述顶面的侧边直线段的距离最近的候选直线作为所述边缘直线段。
2.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,根据所述点云数据确定所述目标箱体顶面的侧边直线段和底面时,具体为:
获取目标箱体的点云数据,根据所述点云数据确定所述目标箱体的多个平面;
根据所述平面的数量及平面之间的角度确定所述目标箱体的测量方式,所述测量方式包括垂直测量、倾斜单侧面测量以及倾斜双侧面测量;
根据所述目标箱体的测量方式和所述平面之间的几何关系确定所述目标箱体顶面的侧边直线段和底面。
3.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,在所述IR图中将所述侧边区域选出时,具体为:
获取目标箱体的IR图,对所述IR图进行自适应灰度变换处理,生成目标IR图;
将所述顶面的侧边直线段投影到所述目标IR图中,在所述目标IR图确定侧边区域;
将所述侧边区域作为ROI区域在所述目标IR图中截取出。
4.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,当将两条直线进行合并生成合并直线时,具体为:
将多条直线按照长度由大到小进行遍历,当遍历到一直线时,按照与该直线形成的角度由小到大的顺序进行与该直线之间距离和角度判断,当一直线与该直线的距离小于预设置的第一距离阈值且角度小于预设置的第一角度阈值时将两条直线进行合并;
将任意两条直线进行组合形成直线对,计算直线对之间的距离,当两条直线对之间距离小于预设置的第一距离阈值且距离最小时,则将直线对中的直线进行合并;
重复进行直线对中最近邻直线的合并,直至剩余直线中任意两条直线对之间距离均大于等于预设置的第一距离阈值。
5.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,当对两条直线进行合并时,具体为:
对两条直线根据长度进行等比例取点,进而根据取到的点将两条直线进行拟合生成所述合并直线。
6.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,根据预设置的体积与费用相关联的费用系数,对所述目标箱体的体积输出对应的费用;
所述显示模块,用于同时显示所述目标箱体的体积及对应发费用。
7.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,所述目标箱体为长方体或正方体。
8.根据权利要求1所述的基于IR图的体积测量装置,其特征在于,所述深度相机包括光束投射器、光探测器以及处理器模块;
所述光束投射器,用于所述目标箱体投射点阵光;
所述光探测器,用于接收经所述目标箱体反射后的所述点阵光生成采集光信号;
所述处理器模块,用于根据采集光信号生成所述目标箱体的点云数据。
CN202010293594.5A 2020-04-15 2020-04-15 基于ir图的体积测量装置 Active CN113538556B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010293594.5A CN113538556B (zh) 2020-04-15 2020-04-15 基于ir图的体积测量装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010293594.5A CN113538556B (zh) 2020-04-15 2020-04-15 基于ir图的体积测量装置

Publications (2)

Publication Number Publication Date
CN113538556A CN113538556A (zh) 2021-10-22
CN113538556B true CN113538556B (zh) 2023-09-12

Family

ID=78088136

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010293594.5A Active CN113538556B (zh) 2020-04-15 2020-04-15 基于ir图的体积测量装置

Country Status (1)

Country Link
CN (1) CN113538556B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115239966B (zh) * 2022-05-30 2024-04-09 中国地质大学(武汉) 一种基于图像处理的隐伏基底古裂谷识别提取方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090092906A (ko) * 2008-02-28 2009-09-02 숭실대학교산학협력단 카메라 영상의 선분 세그먼트 기반 임의 허프변환을 이용한실시간 자동 원형물체 검출 시스템의 구현
KR20120105797A (ko) * 2011-03-16 2012-09-26 성균관대학교산학협력단 3차원 거리측정장치 및 거리측정방법
CN106415439A (zh) * 2013-11-21 2017-02-15 惠普发展公司,有限责任合伙企业 用于镜面反射红外光的投影屏幕
CN109522852A (zh) * 2018-11-22 2019-03-26 中国科学院长春光学精密机械与物理研究所 基于光学遥感影像的人造目标检测方法、装置及设备
CN110095062A (zh) * 2019-04-17 2019-08-06 北京华捷艾米科技有限公司 一种物体体积参数测量方法、装置及设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090092906A (ko) * 2008-02-28 2009-09-02 숭실대학교산학협력단 카메라 영상의 선분 세그먼트 기반 임의 허프변환을 이용한실시간 자동 원형물체 검출 시스템의 구현
KR20120105797A (ko) * 2011-03-16 2012-09-26 성균관대학교산학협력단 3차원 거리측정장치 및 거리측정방법
CN106415439A (zh) * 2013-11-21 2017-02-15 惠普发展公司,有限责任合伙企业 用于镜面反射红外光的投影屏幕
CN109522852A (zh) * 2018-11-22 2019-03-26 中国科学院长春光学精密机械与物理研究所 基于光学遥感影像的人造目标检测方法、装置及设备
CN110095062A (zh) * 2019-04-17 2019-08-06 北京华捷艾米科技有限公司 一种物体体积参数测量方法、装置及设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李鹏,等.基于不规则三棱柱分割法实时测算果树冠层体积.《中国农业科学》.2019,4493-4504. *

Also Published As

Publication number Publication date
CN113538556A (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
KR20190082062A (ko) 포인트 클라우드 데이터 사이의 매칭 관계를 확정하는 방법 및 장치
KR102543952B1 (ko) 차선의 확정방법, 포지셔닝 정밀도의 평가방법, 장치, 기기 및 컴퓨터 프로그램
US8792726B2 (en) Geometric feature extracting device, geometric feature extracting method, storage medium, three-dimensional measurement apparatus, and object recognition apparatus
US10223802B2 (en) Method for determining depth maps from stereo images with improved depth resolution in a range
WO2021051344A1 (zh) 高精度地图中车道线的确定方法和装置
CN105241397A (zh) 基于结构光的实时测量拼接方法及其设备
CN111123242B (zh) 一种基于激光雷达和相机的联合标定方法及计算机可读存储介质
CN102800127A (zh) 一种基于光流优化的三维重建方法及装置
Nocerino et al. Surface reconstruction assessment in photogrammetric applications
CN107504917B (zh) 一种三维尺寸测量方法及装置
Ahmadabadian et al. Image selection in photogrammetric multi-view stereo methods for metric and complete 3D reconstruction
CN109781003B (zh) 一种结构光视觉系统的下一最佳测量位姿确定方法
CN113763350A (zh) 一种胶线检测方法、装置、胶线检测设备及存储介质
CN113538556B (zh) 基于ir图的体积测量装置
CN110851978A (zh) 一种基于可见性的摄像机位置优化方法
CN107392948B (zh) 一种分振幅实时偏振成像系统的图像配准方法
CN113538557B (zh) 基于三维视觉的箱体积测量装置
CN102901490B (zh) 一种基于动态阈值的图像匹配方法及系统
CN113538553B (zh) 基于规则箱体的体积测量装置
CN113532267B (zh) 基于深度相机的体积测量装置
CN113538555A (zh) 基于规则箱体的体积测量方法、系统、设备及存储介质
CN116071721A (zh) 一种基于Transformer的高精地图实时预测方法和系统
CN112991372B (zh) 一种基于多边形匹配的2d-3d相机外参标定方法
CN115393381A (zh) 一种直线度的检测方法、装置、计算机设备及存储介质
CN114359891A (zh) 一种三维车辆检测方法、系统、装置及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant