CN103914871B - 基于点云数据的交互式选取物体表面坐标点的方法 - Google Patents

基于点云数据的交互式选取物体表面坐标点的方法 Download PDF

Info

Publication number
CN103914871B
CN103914871B CN201410080418.8A CN201410080418A CN103914871B CN 103914871 B CN103914871 B CN 103914871B CN 201410080418 A CN201410080418 A CN 201410080418A CN 103914871 B CN103914871 B CN 103914871B
Authority
CN
China
Prior art keywords
point
cloud
user
body surface
sight line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410080418.8A
Other languages
English (en)
Other versions
CN103914871A (zh
Inventor
席磊
汪强
马新明
侯志远
张�浩
郑光
冀亚丽
徐鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou province science and Technology Co Ltd
Original Assignee
Henan Agricultural University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Henan Agricultural University filed Critical Henan Agricultural University
Priority to CN201410080418.8A priority Critical patent/CN103914871B/zh
Publication of CN103914871A publication Critical patent/CN103914871A/zh
Application granted granted Critical
Publication of CN103914871B publication Critical patent/CN103914871B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明公开一种基于点云数据的交互式选取物体表面坐标点的方法。旨在解决当前点云数据处理缺少交互式选取物体表面坐标点的方法的技术问题,本方法主要由(1)由点云数据的渲染;(2)求解经过给定像素点的用户视线方程;(3)筛选用户视线附近的点云;(4)提取用户视线附近点云中的有效点集;(5)曲面拟合有效点集;(6)求解用户视线和拟合曲面的交点共六大步骤予以实现;借助本方法可以将鼠标的窗口动作映射为对物体表面的操作,以实现对点云数据的交互式操作。

Description

基于点云数据的交互式选取物体表面坐标点的方法
技术领域
本发明涉及点云数据的分析处理领域,尤其涉及一种基于点云数据的交互式选取物体表面坐标点的方法。
背景技术
随着3D激光扫描技术的成熟,快速获取大量、高精度的物体表面的坐标点云成为现实。近年来,国内外学者在点云的去噪、简化、特征估计、特征点(线)提取、骨架提取、曲面重构等方面作了大量研究,特别是以“点云获取—点云预处理—点云的曲面重建重构”为方法主线的逆向工程的发展,极大的促进了点云在虚拟现实、生物医学、逆向工程等领域的应用。目前,点云的处理方法大都集中在逆向工程和特征提取(特征点、骨架等)方面,缺少交互式的处理方法(例如,点云的交互式选取、修补、几何参数测量、分割等)。
发明内容
本发明的目的在于克服现有技术的不足,适应现实需要,提供一种基于点云数据的交互式选取物体表面坐标点的方法,旨在解决当前点云数据处理方法大都集中在逆向工程和特征提取(特征点、骨架等)方面,缺少交互式选取物体表面坐标点的方法的技术问题。
为了实现本发明的目的,本发明所采用的技术方案为:
设计一种基于点云数据的交互式选取物体表面坐标点的方法,首先定义屏幕像素点到物体表面的映射点为经过该像素点的用户视线沿视线方向和物体第一次相交的交点;所述屏幕像素点到物体表面坐标点的映射确定包括以下步骤:
1.点云数据的渲染,用于将采集到的点云数据在计算机屏幕上的渲染,并确定像素点的位置。
2.求解给定像素点的用户视线方程;所述用户视线方程为:f(t)=P0+v0t(1),其中t为函数参数,P0为像素点的窗口坐标在点云坐标系中的坐标,v0为用户视线方向向量在点云坐标系中的坐标表示。
3.筛选用户视线附近的点云;该步骤包括:遍历点云中的每个点Pi(i=0,1,2,…n);并按式:计算点云中的点Pi到用户视线的距离di;并设定阈值r,筛选出点云中的每个点Pi到用户视线的距离小于阈值r的点,均为用户视线附近的点,如图2-1,2-2。
4.提取用户视线附近点云中的有效点集;包括如下步骤:
(1)对用户视线附近点云中的每个点Pi,设定xi为其到用户视点的距离在用户视线方向上的投影,如图3;
(2)构造线性表Lp,并存入用户视线附近的点云并按其对应的xi由小到大排序;
(3)计算Lp中相邻两点xi、xi+1的变化量,并顺序存入新的线性表Lx中;
(4)设定n1,n2作为异常值判断的阈值,n1为准异常值的阈值,其表示应继续检测下一个元素做判断,n2为异常值的阈值;
(5)建立集合Sp作为有效点集,并初始化为Lp的前三个元素;
(6)建立数组Ix,用于保存计算中的xi的增加量。初始化为Lx的前两个元素,并设定循环变量i=4;
(7)当i>n时,停止并退出,n为Lp的长度;
(8)计算Ix的中元素的平均值Iavg和标准差Istd
(9)执行tmp=Lx[i-1]-Ix[i-2],如果tmp-Iavg>n1×Istd转到(11);
(10)将Lp[i]放入集合Sp中,将Lx[i-1]存入Ix,i=i+1,转到(7);
(11)如果tmp-Iavg>n2×Istd,则表示到达下一个表面,停止并退出;
(12)执行tmp=Lx[i]-Ix[i-2],如果tmp-Iavg>n2×Istd,停止并退出;
(13)将Lp[i],Lp[i+1]放入集合Sp中,将Lx[i-1],Lx[i-2]存入Ix,执行i=i+2转到(7);
(14)当算法停止时,集合Sp即为用户视线附近点云中的有效点集,如图4。
5.由曲面拟合有效点集;首先设定平面方程为z=-Ax-By+D,其最小二乘的误差为: E = Σ ( - Ax i - By i + D - z i ) 2 - - - ( 3 ) , 得出A,B,D的最小二乘解,定义向量V=(A,B,1),则平面方程可表示为矢量式,如式(4),V·P=-D(4)。
6.求出用户视线方程和拟合曲面的交点,本步骤通过联立式(1)、式(4)求解交点视线,该点即为像素点到点云表面的映射点,如图5。
本发明的有益效果在于:
本发明方法通过建立屏幕像素点到物体表面(物体由点云表示)坐标点的映射,实现鼠标对物体表面坐标点的选取;可以将鼠标的窗口动作映射到物体表面(物体由点云表示)上,为构建点云的交互式处理提供了方法基础;借助该方法可以将鼠标的窗口动作映射为对物体表面(物体由点云表示)的操作,以实现对点云数据的交互式操作。
附图说明
图1为本方法主要流程示意图;
图2-1用户视线附近点的平面云示意图;
图2-2用户视线附近点云的三维示意图;
图3为坐标点到视点距离在视线上的投影示意图;
图4为提取有效点集算法的运行结果示意图;
图5为经过像素点的用户视线和物体表面的交点示意图;
图中:1为用户视线。
具体实施方式
下面结合附图和实施例对本发明进一步说明:
实施例:一种基于点云数据的交互式选取物体表面坐标点的方法;如图1,图2-1,图2-2,图3,图4,图5所示;本方法主要由(1)由点云数据对物体表面进行渲染;用于将采集到的点云数据在计算机屏幕上的渲染,,并确定像素点的位置;(2)求解用户视线经过给定像素点的用户视线方程;(3)筛选视线附近的点云;(4)提取用户视线附近点云中的有效点集;(5)由曲面拟合有效点集;(6)求解视线和拟合曲面的交点共六大步骤予以实现,为实现构建交互式选取物体表面坐标点的方法,本实施例将对以上为六个步骤详细说明。
首先,定义屏幕像素点到物体表面的映射点为经过该像素点的用户视线沿视线方向和物体第一次相交的交点;在实现中,需要映射的像素点由鼠标位置给出。在本法中由于物体缺少“面”的概念由点云数据表示,所以理论上用户视线与点云中任何点相交的概率均为0。本方法通过提取计算视线“附近”的点云实现对视线和物体交点的求解。
第一步:点云的渲染,将采集到的点云数据在计算机屏幕上的渲染,并设定用户视点位置。
第二步:求解用户视线经过给定像素点的用户视线方程。依据点云渲染中的坐标变换矩阵,可通过逆变换将像素点P的窗口坐标Pw和视线的方向向量vw变换为坐标系O中的坐标点P0和方向向量v0,则经过像素点P的视线方程可由下式(1):
f(t)=P0+v0t(1)
给出,其中t为方程参数。P0为像素点的窗口坐标在点云坐标系中的坐标,v0为用户视线方向向量在点云坐标系中的坐标表示。
第三步:筛选用户视线附近的点云,在本发明中,视线附近的云由阈值r确定,即到视线的距离小于r的点,均为视为视线附近的点。该步骤通过遍历点云中的点Pi,由式(2):
d i = | P 0 P i | 2 - ( P 0 P i · v 0 | v 0 | ) 2 - - - ( 2 )
计算其到视线的距离di,筛选出点云中的每个点Pi到用户视线的距离小于阈值r的点,均为用户视线附近的点,其是按阈值进行过滤筛选视实现;如图2-1,2-2所示。
第四步:提取视线附近点云中有效点集,用户视线附近的点云往往代表了一个或多个的局部表面,如图2-1,2-2所示;但按照屏幕像素点到物体表面点的定义可知,只有距离视点最近的局部表面才是有效的。该步骤通过分析点云到视点距离在视线上的投影,提取有效的点集;对视线附近的点云,定义xi为点Pi到视点的距离在视线方向上的投影,如图3。
提取算法:分析视线附近的点云可知,位于不同表面的点其xi会表现明显的差异。固可通过分析相邻点坐标xi变化量的异常值来分辨不同表面的点云,具体算法设定如下。
构造线性表Lp中,存入视线附近的点云并按每个点的xi排序。计算Lp中相邻两点的xi变化量,并存入新的线性表Lx。设n1,n2作为异常值判断的阈值,n1为准异常值的阈值,表示应继续检测下一个元素做判断,n2为异常值的阈值,其执行流程如下:
(1)建立集合Sp作为有效点集,初始化为Lp的前三个元素;
(2)建立数组Ix,用于保存计算中的xi的增加量。初始化为Lx的前两个元素,并设定循环变量i=4;
(3)当i>n时,停止并退出,n为Lp的长度;
(4)计算Ix的中元素的平均值Iavg和标准差Istd
(5)执行tmp=Lx[i-1]-Ix[i-2],如果tmp-Iavg>n1×Istd转到(7);
(6)将Lp[i]放入集合Sp中,将Lx[i-1]存入Ix,i=i+1,转到(3);
(7)如果tmp-Iavg>n2×Istd,则表示到达下一个表面,停止并退出;
(8)执行tmp=Lx[i]-Ix[i-2],如果tmp-Iavg>n2×Istd,停止并退出;
(9)将Lp[i],Lp[i+1]放入集合Sp中,将Lx[i-1],Lx[i-2]存入Ix,执行i=i+2转到(3);
(10)当算法结束时,集合Sp即为距离视点最近局部表面的点集。
算法具体实现时,n1,n2一般取4,5,针对特殊点云,n1,n2也可作调整。实验表明,在该算法可快速的找到距视点最近表面的点云,如图4。
第五步:曲面拟合有效点集。由于阈值r通常很小并考虑曲面拟合的效率,本方法采用平面近似替代最近的局部曲面。本方法采用最小二乘的平面拟合近似表示曲面。设平面方程为z=-Ax-By+D,则其最小二乘的误差表示为式(3):
E = Σ ( - Ax i - By i + D - z i ) 2 - - - ( 3 ) .
可得A,B,D的最小二乘解,如式(5):
Σ x i 2 Σ x i y i - Σ x i Σ x i y i Σ y i 2 - Σ y i - Σ x i - Σ y i n A B D = - Σ x i z i - Σ y i z i Σ z i - - - ( 5 )
定义向量V=(A,B,1),则平面方程可表示为矢量式,如式(4):
V·P=-D(4)。
第六步:计算视线和拟合曲面的交点。该步骤为计算用户视线和第五步拟合的平面的交点。可通过联立式(1)、式(4)求解得到,该点即为像素点到点云表面的映射点,如图5所示。
本发明的实施例公布的是较佳的实施例,但并不局限于此,本领域的普通技术人员,极易根据上述实施例,领会本发明的精神,并做出不同的引申和变化,但只要不脱离本发明的精神,都在本发明的保护范围内。

Claims (6)

1.一种基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:首先设定屏幕像素点到物体表面坐标点的映射点为经过该像素点的用户视线沿视线方向和物体第一次相交的交点;所述屏幕像素点到物体表面坐标点的映射的确定包括以下步骤:
①点云数据的渲染,用于负责将采集到的点云数据在计算机屏幕上的渲染,并确定像素点的位置;
②求解经过给定像素点的用户视线方程;
③筛选用户视线附近的点云;
④提取用户视线附近点云中的有效点集;
⑤曲面拟合有效点集;
⑥计算用户视线方程和拟合曲面的交点,即为像素点到点云表面的映射点;
其中,所述步骤④中提取用户视线附近点云中的有效点集的过程包括如下步骤:
(1)对用户视线附近点云中的每个点Pi,设定xi为其到用户视点的距离在用户视线方向上的投影;
(2)构造线性表Lp,存入用户视线附近的点云并按其对应的xi由小到大排序;
(3)计算Lp中相邻两点xi的变化量,并顺序存入新的线性表Lx中;
(4)设定n1,n2作为异常值判断的阈值,n1为准异常值的阈值,其表示应继续检测下一个元素做判断,n2为异常值的阈值;
(5)建立集合Sp作为有效点集,初始化为Lp的前三个元素;
(6)建立数组Ix,用于保存计算中的xi的增加量,初始化为Lx的前两个元素,并设定循环变量i=4;
(7)当i>n时,停止并退出,n为Lp的长度;
(8)计算Ix的中元素的平均值Iavg和标准差Istd
(9)执行tmp=Lx[i-1]-Ix[i-2],如果tmp-Iavg>n1×Istd转到步骤(11);
(10)将Lp[i]放入集合Sp中,将Lx[i-1]存入Ix,i=i+1,转到步骤(7);
(11)如果tmp-Iavg>n2×Istd,则表示到达下一个表面,停止并退出;
(12)执行tmp=Lx[i]-Ix[i-2],如果tmp-Iavg>n2×Istd,停止并退出;
(13)将Lp[i],Lp[i+1]放入集合Sp中,将Lx[i-1],Lx[i-2]存入Ix,执行i=i+2转到步骤(7);
(14)当算法停止并退出时,集合Sp即为用户视线附近点云中的有效的点集。
2.如权利要求1所述的基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:在所述步骤②中,所述的用户视线方程为式(1):
f(t)=P0+v0t(1),
其中t为函数参数,P0为像素点的窗口坐标在点云坐标系中的坐标,v0为用户视线方向向量在点云坐标系中的坐标表示。
3.如权利要求1所述的基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:步骤③包括:遍历点云中的每个点Pi,并按式(2):
d i = | P 0 P i | 2 - ( P 0 P i · v 0 | v 0 | ) 2 - - - ( 2 ) ,
计算点云中的点Pi到用户视线的距离di;并设定阈值r,筛选出点云中的每个点Pi到用户视线的距离小于阈值r的点,用户视线的距离小于阈值r的点均为用户视线附近的点。
4.如权利要求1所述的基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:所述n1=4,n2=5。
5.如权利要求1所述的基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:所述步骤⑤包括:首先设定平面方程为z=-Ax-By+D,则平面方程的最小二乘的误差为式(3):E=Σ(-Axi-Byi+D-zi)2(3),
得出A,B,D的最小二乘解,定义向量V=(A,B,1),则平面方程可表示为矢量式,如式(4),V·P=-D(4)。
6.如权利要求5所述的基于点云数据的交互式选取物体表面坐标点的方法,其特征在于:所述步骤⑥包括:联立式(1)、式(4)求解视线和拟合曲面的交点,该点即为像素点到点云表面的映射点。
CN201410080418.8A 2014-03-06 2014-03-06 基于点云数据的交互式选取物体表面坐标点的方法 Active CN103914871B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410080418.8A CN103914871B (zh) 2014-03-06 2014-03-06 基于点云数据的交互式选取物体表面坐标点的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410080418.8A CN103914871B (zh) 2014-03-06 2014-03-06 基于点云数据的交互式选取物体表面坐标点的方法

Publications (2)

Publication Number Publication Date
CN103914871A CN103914871A (zh) 2014-07-09
CN103914871B true CN103914871B (zh) 2016-06-08

Family

ID=51040524

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410080418.8A Active CN103914871B (zh) 2014-03-06 2014-03-06 基于点云数据的交互式选取物体表面坐标点的方法

Country Status (1)

Country Link
CN (1) CN103914871B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3249921A1 (en) * 2016-05-24 2017-11-29 Thomson Licensing Method, apparatus and stream for immersive video format
CN109143167B (zh) * 2017-06-28 2021-07-23 杭州海康机器人技术有限公司 一种障碍信息获取装置及方法
CN111131322B (zh) * 2019-12-31 2022-04-15 奇安信科技集团股份有限公司 网络行为的检测方法、装置、计算机设备和存储介质
CN111427451B (zh) * 2020-03-25 2022-11-01 中国人民解放军海军特色医学中心 采用扫描仪与眼动仪确定注视点在三维场景中位置的方法
CN114363519A (zh) * 2022-01-10 2022-04-15 北京字跳网络技术有限公司 一种图像处理方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6441821B1 (en) * 1998-07-03 2002-08-27 Hitachi, Ltd. Method and apparatus for displaying three-dimensional image by use of tensor rendering
CN101615191A (zh) * 2009-07-28 2009-12-30 武汉大学 海量点云数据的存储与实时可视化方法
CN101697233A (zh) * 2009-10-16 2010-04-21 长春理工大学 一种基于结构光的三维物体表面重建方法
CN102074044A (zh) * 2011-01-27 2011-05-25 深圳泰山在线科技有限公司 一种物体表面重建的系统和方法
CN103258345A (zh) * 2013-04-18 2013-08-21 中国林业科学研究院资源信息研究所 一种基于地面激光雷达三维扫描的树木枝干参数提取方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6441821B1 (en) * 1998-07-03 2002-08-27 Hitachi, Ltd. Method and apparatus for displaying three-dimensional image by use of tensor rendering
CN101615191A (zh) * 2009-07-28 2009-12-30 武汉大学 海量点云数据的存储与实时可视化方法
CN101697233A (zh) * 2009-10-16 2010-04-21 长春理工大学 一种基于结构光的三维物体表面重建方法
CN102074044A (zh) * 2011-01-27 2011-05-25 深圳泰山在线科技有限公司 一种物体表面重建的系统和方法
CN103258345A (zh) * 2013-04-18 2013-08-21 中国林业科学研究院资源信息研究所 一种基于地面激光雷达三维扫描的树木枝干参数提取方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于DirectX的三维场景实体的拾取;郭艳霞 等;《辽宁石油化工大学学报》;20090930;第29卷(第3期);第77页第1部分第1-2段,第78页第1.2节第1段,右栏第2段,第79页第1段,图1 *
基于姿态标准化的线特征点云提取方法;李伟 等;《北京航空航天大学学报》;20130831;第39卷(第8期);第2部分,图2 *

Also Published As

Publication number Publication date
CN103914871A (zh) 2014-07-09

Similar Documents

Publication Publication Date Title
CN103914871B (zh) 基于点云数据的交互式选取物体表面坐标点的方法
Khoshelham et al. 3D modelling of interior spaces: Learning the language of indoor architecture
CN103544728B (zh) 一种在实景地图中基于法向量的被探面过滤方法
CN103237155B (zh) 一种单视角被遮挡的目标的跟踪和定位方法
CN107767453B (zh) 一种基于规则约束的建筑物lidar点云重构优化方法
CN103020993B (zh) 一种双通道颜色对比度融合的视觉显著性检测方法
CN107392875A (zh) 一种基于k近邻域划分的点云数据去噪方法
CN103701466A (zh) 基于特征保留的散乱点云压缩算法
CN104574311A (zh) 图像处理方法和装置
CN102881047B (zh) 一种自动的非封闭隐式曲面重建方法
CN102945551B (zh) 一种基于图论的三维点云数据平面提取方法
CN110070567A (zh) 一种地面激光点云配准方法
CN105574933A (zh) 物体全方位轮廓精确绘制方法
CN103714547A (zh) 一种结合边缘区域和互相关的图像配准方法
CN108986024A (zh) 一种基于网格的激光点云规则排列处理方法
CN102663805B (zh) 一种基于投影的视锥体裁剪的方法
CN104156520A (zh) 一种基于直线投影的凸多面体碰撞检测方法
CN105302951A (zh) 一种有限元网格曲面剖分方法
CN102621143B (zh) 基于多维阈值约束的双视角多气泡同名匹配方法
CN102063577A (zh) 一种基于等势面的地下水渗流量计算方法
CN103413306B (zh) 一种自适应阈值的Harris角点检测方法
CN103307979A (zh) 基于计算机视觉的水果体积测量方法
CN104933751B (zh) 基于局部直方图的心血管冠脉增强的体绘制方法及系统
CN103902657B (zh) 一种基于草绘图的三维模型检索方法
CN102831616B (zh) 一种视频流体运动矢量计算方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Wu Kaihua

Inventor before: Xi Lei

Inventor before: Wang Qiang

Inventor before: Ma Xinming

Inventor before: Hou Zhiyuan

Inventor before: Zhang Hao

Inventor before: Zheng Guang

Inventor before: Ji Yali

Inventor before: Xu Xin

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20170918

Address after: Hangzhou City, Zhejiang province 310051 Binjiang District West Street Binsheng Road No. 1509 Heng Building Room 1703

Patentee after: Hangzhou province science and Technology Co Ltd

Address before: 450002 agricultural road, Jinshui District, Henan, Zhengzhou, No. 63

Patentee before: He'nan Agricultural University