JP7406853B2 - Computer-implemented normal vector-based point cloud smoothing filtering method - Google Patents

Computer-implemented normal vector-based point cloud smoothing filtering method Download PDF

Info

Publication number
JP7406853B2
JP7406853B2 JP2022539368A JP2022539368A JP7406853B2 JP 7406853 B2 JP7406853 B2 JP 7406853B2 JP 2022539368 A JP2022539368 A JP 2022539368A JP 2022539368 A JP2022539368 A JP 2022539368A JP 7406853 B2 JP7406853 B2 JP 7406853B2
Authority
JP
Japan
Prior art keywords
normal vector
point
normal
plane
fitting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022539368A
Other languages
Japanese (ja)
Other versions
JP2023509888A (en
Inventor
海龍 裴
明輝 李
Original Assignee
華南理工大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 華南理工大学 filed Critical 華南理工大学
Publication of JP2023509888A publication Critical patent/JP2023509888A/en
Application granted granted Critical
Publication of JP7406853B2 publication Critical patent/JP7406853B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4802Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4808Evaluating distance, position or velocity data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Radar Systems Or Details Thereof (AREA)

Description

本発明は、レーザLidarスキャン計測分野に関し、特にコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法に関する。 TECHNICAL FIELD The present invention relates to the field of laser lidar scanning metrology, and in particular to a computer-implemented normal vector-based point cloud smoothing filtering method.

レーザ技術、コンピュータ技術の急速な発展に伴い、機上レーザ測定は、高精度で信頼性の高い3次元データを効率的に取得する新技術となっている。 With the rapid development of laser technology and computer technology, on-board laser measurement has become a new technology for efficiently acquiring highly accurate and reliable three-dimensional data.

それは、高精度の動的GPS差分測位、慣性航法、レーザ測距などの先進技術を集積しており、天候の影響が少なく、自動化の程度が高く、作図周期が短いなどの特徴を持つ。同技術は、複雑な物体表面の3次元点群情報を迅速、精確、非接触で取得でき、さらに実体の3次元再建を完了し、現在ではデジタル都市、地形計測、地理情報システム、医学工学、文化財保護、ロボットナビゲーションなどの各業界に広く応用されている。 It integrates advanced technologies such as high-precision dynamic GPS differential positioning, inertial navigation, and laser ranging, and has characteristics such as being less affected by weather, having a high degree of automation, and short plotting cycles. This technology can quickly, accurately, and non-contact acquire 3D point cloud information on the surface of complex objects, and has also completed 3D reconstruction of real objects, and is currently used in digital cities, topographic measurement, geographic information systems, medical engineering, etc. It is widely applied in various industries such as cultural property protection and robot navigation.

しかし、スキャン装置の物理的特性、スキャン環境、システム誤差、統合誤差の影響を受け、得られたオリジナル点群データは、ノイズに汚染されることが多い。オリジナル点群データを直接三角化してDEMを生成するのは、効果が低いため、点群に対して平滑化フィルタリング処理を行う必要がある。しかし、従来の方法では、十分な平滑化フィルタリング効果が得られない。 However, the obtained original point cloud data is often contaminated with noise due to the influence of the physical characteristics of the scanning device, the scanning environment, system errors, and integration errors. Generating a DEM by directly triangulating original point cloud data is ineffective, so it is necessary to perform smoothing filtering processing on the point cloud. However, with the conventional method, a sufficient smoothing filtering effect cannot be obtained.

本発明は、オリジナル点群データに対して平滑化処理を行うために、コンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法を提案する。本発明は、典型的な平滑化フィルタリングとグリッドフィルタリングなどと区別する。本発明のフィルタリング方法は、点群数を減少させることなく、オリジナル点群位置を最適化し、平滑化の効果を達成する。この点群フィルタリング方法は、簡単で効果的を実現し、点群のオリジナルデータに対して平滑化処理を行うのに適しており、実用的価値が高い。 The present invention proposes a computer-implemented normal vector-based point cloud smoothing filtering method to perform smoothing processing on original point cloud data. The present invention distinguishes between typical smoothing filtering, grid filtering, and the like. The filtering method of the present invention optimizes the original point cloud position and achieves the effect of smoothing without reducing the number of point clouds. This point cloud filtering method is simple and effective, is suitable for smoothing the original data of point clouds, and has high practical value.

本発明は、以下の技術手段によって達成される。 The present invention is achieved by the following technical means.

コンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法であって、以下のステップを含む。
S1:オリジナル点群の外れ点を除去し、各点周辺の設定範囲内の点の個数を統計し、一定個数より少ない場合は、外れ点と見なして除外する。
S2:離散点群セットに対して主成分分析(PCA)を行って点ごとの法線ベクトルを推定し、すべての点の法線ベクトルを同じ方向に調整する(すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整する)。
S3:各点に対してそのK近傍を介して最小二乗法で1つの平面をフィッティングし、この平面モデルによりその点の法線ベクトルを取得して同方向に調整する。
S4:フィッティング平面の法線ベクトルを用いて、S2で算出した法線ベクトルを補正する。
S5:当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影し、すなわち、当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、点群に対する平滑化の処理効果を達成する。
A computer-implemented normal vector-based point cloud smoothing filtering method includes the following steps.
S1: Remove outlying points from the original point group, count the number of points within a set range around each point, and if the number is less than a certain number, consider it as an outlier and exclude it.
S2: Perform principal component analysis (PCA) on the discrete point cloud set to estimate the normal vector for each point, and adjust the normal vectors of all points in the same direction (i.e., the third Adjust so that all components Z are greater than 0).
S3: Fit one plane to each point using the least squares method via its K neighbors, obtain the normal vector of that point using this plane model, and adjust it in the same direction.
S4: Correct the normal vector calculated in S2 using the normal vector of the fitting plane.
S5: Project the point onto the fitting plane along the corrected normal vector direction, that is, adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, and create a point group. To achieve the processing effect of smoothing.

さらに、前記ステップS1において、外れ点を除去して各点周辺0.3mの範囲内に少なくとも3点を設定し、そうでなければ外れ点と見なして除外する。このパラメータは、場合によって調整可能である。 Furthermore, in step S1, outlying points are removed and at least three points are set within a range of 0.3 m around each point, and if not, they are regarded as outlying points and excluded. This parameter can be adjusted as needed.

さらに、前記ステップS2において、離散点群セットに対して主成分分析(PCA)を行って点ごとの法線ベクトルを推定することは、その過程として以下を含む。
S21:法線推定問題を、所定点の近傍に確立された共分散行列の特徴量と特徴ベクトルを解く問題に変換する。1つの点集合S={P,P...P}を仮定し、この点集合内に所定点Pに対する共分散行列Cは、以下のように示される。

Figure 0007406853000001
ここで、
Figure 0007406853000002
は、この点集合の重心である。Cの特徴量と特徴ベクトルを計算し、特徴ベクトルは、空間中の1組の直交基底を構成し、最小特徴量に対応する特徴ベクトルは、所定点Pの法線に近似できる。 Furthermore, in step S2, performing principal component analysis (PCA) on the discrete point group set to estimate the normal vector for each point includes the following steps.
S21: Convert the normal estimation problem into a problem of solving the feature amount and feature vector of the covariance matrix established in the vicinity of a predetermined point. One point set S={P 1 , P 2 . .. .. P N }, the covariance matrix C for a given point P i within this point set is expressed as follows.
Figure 0007406853000001
here,
Figure 0007406853000002
is the centroid of this point set. The feature amounts and feature vectors of C are calculated, the feature vectors constitute a set of orthogonal bases in space, and the feature vector corresponding to the minimum feature amount can be approximated to the normal of the predetermined point P i .

さらに、前記ステップS2において、すべての点の法線ベクトルを同じ方向に調整することは、その過程が以下である。
S22:法線を求めてそれを単位化して法線ベクトルを得、(X,Y,Z)とし、法線ベクトルのZ<0ならばその法線ベクトルを逆にし、Z>0ならばそのままにし、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整して法線ベクトルを同方向にする。
Further, in step S2, the process of adjusting the normal vectors of all points in the same direction is as follows.
S22: Find the normal and unitize it to obtain the normal vector, set it as (X, Y, Z), and if the normal vector Z<0, reverse the normal vector, and if Z>0, leave it as it is. In other words, the third components Z of the normal vectors are all adjusted to be greater than 0, so that the normal vectors are in the same direction.

さらに、前記ステップS3において、最小二乗法により平面をフィッティングして法線ベクトルを取得することは、その過程が以下である。
平面方程式の一般式は、Ax+By+Cz+D=0,(C≠0)であり、
すなわち、

Figure 0007406853000003
すなわち、z=ax+by+c。
ここで、a、b、cは、平面方程式の他の表現方法の未知パラメータである。
一連のK(デフォルトでK=50とし、手動で設定可能である)個の点について、このK個の点の座標(x、y、z)(i=0,1,…,K-1)は、既知であり、上記平面方程式をフィッティング計算し、この方程式を構築して最小二乗法で平面方程式の未知パラメータを解く。
この方程式は、典型的な方程式方式のAX=Bと見なし、
ここで、
Figure 0007406853000004
この方程式AX=Bの最小二乗解は、X=(A-1)*ABであり、
このフィッティング平面方程式z=ax+by+cを求めることができ、この平面の法線は、(a,b,-1)であり、この法線を単位化すると法線ベクトルが得られ、それを以下のように同方向に調整する。
Figure 0007406853000005
法線ベクトルは、以下である。
Figure 0007406853000006
ここで、NormalLenは、法線を単位化するための、法線のノルムであり、a、bは、先に求めた平面方程式のパラメータである。 Furthermore, in step S3, the process of fitting a plane and obtaining a normal vector using the least squares method is as follows.
The general formula of the plane equation is A 0 x + B 0 y + C 0 z + D 0 =0, (C 0 ≠0),
That is,
Figure 0007406853000003
That is, z=ax+by+c.
Here, a, b, and c are unknown parameters of other expression methods of the plane equation.
For a series of K points (K=50 by default, can be set manually), the coordinates (x i , y i , z i ) of these K points (i=0, 1,..., K -1) is known, the above plane equation is calculated by fitting, this equation is constructed, and the unknown parameters of the plane equation are solved by the method of least squares.
This equation is considered as AX=B in typical equation form,
here,
Figure 0007406853000004
The least squares solution of this equation AX=B is X=(A T A −1 ) * A T B,
This fitting plane equation z = ax + by + c can be found, the normal to this plane is (a, b, -1), and by unitizing this normal, a normal vector is obtained, which can be expressed as follows: Adjust in the same direction.
Figure 0007406853000005
The normal vector is:
Figure 0007406853000006
Here, NormalLen is the norm of the normal line for unitizing the normal line, and a and b are the parameters of the plane equation obtained previously.

さらに、前記ステップS4において、S2で算出した法線ベクトルをフィッティング平面の法線ベクトルを用いて補正することは、その過程が以下である。
S2で算出した法線ベクトルをnorm1=(a1,b1,c1)、(c1>0)とし、
平面フィッティングによる法線ベクトルは、norm2=(a2,b2,c2)、(c2>0)であり、
法線ベクトル補正パラメータalpha(デフォルトで1.0とし、修正後の法線ベクトルは、デフォルトでフィッティング平面の法線ベクトルをとる。このパラメータは、設定可能である)を用いて法線ベクトルを補正して得られた補正後の法線ベクトルは、以下である。
norm=(a,b,c)=norm1*(1-alpha)+norm2*alpha
ここで、norm1は、ステップS2でのPCA計算による法線ベクトルであり、norm2は、平面フィッティングによる法線ベクトルであり、alphaは、法線ベクトル補正パラメータであり、平面フィッティングによる法線ベクトルが最終補正後の法線ベクトルに占める重みを表し、alphaは、一般的にデフォルトで1をとり、すなわち最終補正後の法線ベクトルが平面フィッティングによる法線ベクトルとなる。
Furthermore, in step S4, the process of correcting the normal vector calculated in S2 using the normal vector of the fitting plane is as follows.
The normal vector calculated in S2 is set as norm1=(a1, b1, c1), (c1>0),
The normal vector by plane fitting is norm2=(a2, b2, c2), (c2>0),
Correct the normal vector using the normal vector correction parameter alpha (default is 1.0, the corrected normal vector takes the normal vector of the fitting plane by default. This parameter is configurable) The corrected normal vector obtained by doing this is as follows.
norm=(a 0 , b 0 , c 0 )=norm1*(1-alpha)+norm2*alpha
Here, norm1 is the normal vector calculated by PCA in step S2, norm2 is the normal vector calculated by plane fitting, alpha is a normal vector correction parameter, and the normal vector calculated by plane fitting is the final normal vector. It represents the weight occupied by the corrected normal vector, and alpha generally takes 1 by default, that is, the final corrected normal vector becomes the normal vector by plane fitting.

さらに、前記ステップS5において、当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影することは、その過程が以下である。
当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、すなわち、点と平面との交点をその点の補正後の位置として求める。
このフィッティング平面の方程式は、S3で得られる。
z=ax+by+c
補正後の法線ベクトルは、S4で得られる。
(a,b,c
当該点座標を(x,y,z)とすると、当該法線方程式は、以下である。

Figure 0007406853000007
当該法線と当該フィッティング平面との交点を求める。
Figure 0007406853000008
ここで、a、b、cは、補正後の法線ベクトルであり、a、b、cは、ステップS3で最小二乗法でフィッティングした平面方程式パラメータであり、x、y、zは、調整するオリジナル点座標であり、x、y、zは、法線ベクトルに基づくフィルタリング調整後の点の座標であり、オリジナル点群のこの点の位置を上述の法線ベクトルとフィッティング平面の交点位置に調整することで、点群に対する平滑化の処理効果を達成できる。 Furthermore, in step S5, the process of projecting the point onto the fitting plane along the corrected normal vector direction is as follows.
The position of the point is adjusted to the intersection of the corrected normal vector and the fitting plane, that is, the intersection of the point and the plane is determined as the corrected position of the point.
The equation of this fitting plane is obtained in S3.
z=ax+by+c
The corrected normal vector is obtained in S4.
(a 0 , b 0 , c 0 )
When the point coordinates are (x i , y i , z i ), the normal equation is as follows.
Figure 0007406853000007
Find the intersection of the normal and the fitting plane.
Figure 0007406853000008
Here, a 0 , b 0 , c 0 are normal vectors after correction, a, b, c are plane equation parameters fitted by the least squares method in step S3, x i , y i , z i is the original point coordinate to be adjusted, x, y, z are the coordinates of the point after filtering adjustment based on the normal vector, and the position of this point in the original point cloud is fitted with the normal vector described above. By adjusting the intersection points of the planes, a smoothing processing effect on the point group can be achieved.

1)本発明の方法は、無人機搭載Lidarスキャン計測分野に適用し、安定性が高く、精度が高いという利点を有する。
2)本発明の方法は、新しい点群平滑化フィルタリング構想を提案し、各点を補正後の法線ベクトル方向に沿ってフィッティング平面に投影することにより良好な平滑化効果を達成でき、また、平面をフィッティングするのに必要なK近傍の大きさや法線ベクトル調整の重みを設定することができ、アルゴリズムが簡単で効率的である。
3)本発明の方法は、各地形領域、例えば荒地、草地などによく適用することができ、計算量が低く、後続の点群データの三角化及びDEM生成のために、必要な良い基礎となる。
4)本発明の方法は、典型的な平滑化フィルタリングとグリッドフィルタリング法などと区別し、本フィルタリング方法は、点群数を減少させることなく、オリジナル点群位置を最適化し、平滑化の効果を達成する。
1) The method of the present invention is applicable to the field of unmanned aerial vehicle-mounted lidar scan measurement and has the advantages of high stability and high accuracy.
2) The method of the present invention proposes a new point cloud smoothing filtering concept, and can achieve a good smoothing effect by projecting each point onto the fitting plane along the corrected normal vector direction, and The size of the K neighborhood and the weight of normal vector adjustment required for fitting a plane can be set, and the algorithm is simple and efficient.
3) The method of the present invention can be well applied to each terrain area, such as wasteland, grassland, etc., has low computational complexity, and provides a good basis necessary for subsequent point cloud data triangulation and DEM generation. Become.
4) The method of the present invention is distinguished from typical smoothing filtering and grid filtering methods, in that the present filtering method optimizes the original point cloud position without reducing the number of point clouds and improves the smoothing effect. achieve.

本発明の法線ベクトルに基づく点群平滑化フィルタリング方法のフローチャートである。1 is a flowchart of a point cloud smoothing filtering method based on normal vectors of the present invention; フィルタリング前のオリジナル点群効果図である。It is an original point cloud effect diagram before filtering. フィルタリング前のオリジナル点群三角化平面効果図である。FIG. 3 is an original point cloud triangulation plane effect diagram before filtering; 法線ベクトルに基づくフィルタリング後の点群効果図である。FIG. 6 is a point cloud effect diagram after filtering based on normal vectors. 法線ベクトルに基づくフィルタリング後の点群三角化平面効果図である。FIG. 3 is a point cloud triangulation plane effect diagram after filtering based on normal vectors; フィルタリング前の効果の比較図である。It is a comparison diagram of the effect before filtering. フィルタリング後の効果の比較図である。It is a comparison diagram of the effect after filtering.

本発明は、法線ベクトルに基づく点群平滑化フィルタリング方法を開示する。 The present invention discloses a point cloud smoothing filtering method based on normal vectors.

過程は、以下である。まずオリジナル点群の外れ点を除去する。それから離散点群セットに対して主成分分析を行って点ごとの法線ベクトルを推定し、すべての点の法線ベクトルを同じ方向に調整する(すなわち法線ベクトルの第3成分Zがすべて0より大きくなるように調整する)。さらに各点についてそのK近傍を介して最小二乗法で1つの平面をフィッティングし、平面モデルによりその点の法線ベクトルを得て同方向に調整する。次にフィッティング平面の法線ベクトルを用いて、第1ステップで算出した法線ベクトルを補正する。最後にその点を補正後の法線ベクトルの方向に沿ってそのフィッティング平面上に投影し、すなわちその点の位置を補正後の法線ベクトルとそのフィッティング平面との交点位置に調整し、点群に対する平滑化の処理効果を達成することができる。ここで、K近傍パラメータ(デフォルト50)および法線ベクトル修正パラメータ(デフォルト1.0であり、すなわち修正後の法線ベクトルは、フィッティング平面の法線ベクトルをデフォルトとする)の両方を設定することができる。この点群フィルタリング方法は、簡単で平滑化効果が明らかであり、オリジナル点群をフィルタリングすることで後続の点群データの三角化及びDEM生成のために良い基礎となり、点群オリジナルデータに対して平滑化処理を行うのに適しており、高い実用的価値を持つ。 The process is as follows. First, outlying points from the original point cloud are removed. We then perform principal component analysis on the set of discrete points to estimate the normal vector for each point, and adjust the normal vectors of all points in the same direction (i.e. the third component Z of the normal vector is all 0). (adjust to make it larger). Furthermore, one plane is fitted to each point using the least squares method through its K neighbors, and the normal vector of that point is obtained using a plane model and adjusted in the same direction. Next, the normal vector calculated in the first step is corrected using the normal vector of the fitting plane. Finally, the point is projected onto the fitting plane along the direction of the corrected normal vector, that is, the position of the point is adjusted to the intersection position of the corrected normal vector and the fitting plane, and the point cloud is The processing effect of smoothing can be achieved for. Here, set both the K neighborhood parameter (default 50) and the normal vector correction parameter (default 1.0, that is, the corrected normal vector defaults to the normal vector of the fitting plane). Can be done. This point cloud filtering method is simple and the smoothing effect is obvious, and filtering the original point cloud provides a good basis for subsequent point cloud data triangulation and DEM generation, and It is suitable for smoothing processing and has high practical value.

以下、具体的な実施形態を参照しながら、本発明を更に具体的に詳細に記載する。しかし、本発明の実施形態は、これに限られない。 Hereinafter, the present invention will be described in more specific detail with reference to specific embodiments. However, embodiments of the present invention are not limited to this.

本発明の法線ベクトルに基づく点群平滑化フィルタリング方法は、以下のステップで実現される。
S1:オリジナル点群の外れ点を除去し、各点周辺の設定範囲内の点の個数を統計し、一定個数より少ない場合は、外れ点と見なして除外する。
S2:離散点群セットに対して主成分分析(PCA)を行って点ごとの法線ベクトルを推定し、すべての点の法線ベクトルを同じ方向に調整する(すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整する)。
S3:各点に対してそのK近傍を介して最小二乗法で1つの平面をフィッティングし、この平面モデルによりその点の法線ベクトルを取得して同方向に調整する。
S4:フィッティング平面の法線ベクトルを用いて、S2で算出した法線ベクトルを補正する。
S5:当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影し、すなわち、当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、点群に対する平滑化の処理効果を達成する。
The point cloud smoothing filtering method based on normal vectors of the present invention is realized by the following steps.
S1: Remove outlying points from the original point group, count the number of points within a set range around each point, and if the number is less than a certain number, consider it as an outlier and exclude it.
S2: Perform principal component analysis (PCA) on the discrete point cloud set to estimate the normal vector for each point, and adjust the normal vectors of all points in the same direction (i.e., the third Adjust so that all components Z are greater than 0).
S3: Fit one plane to each point using the least squares method via its K neighbors, obtain the normal vector of that point using this plane model, and adjust it in the same direction.
S4: Correct the normal vector calculated in S2 using the normal vector of the fitting plane.
S5: Project the point onto the fitting plane along the corrected normal vector direction, that is, adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, and create a point group. To achieve the processing effect of smoothing.

さらに、前記ステップS1において、外れ点を除去して各点周辺0.3mの範囲内に少なくとも3点を設定し、そうでなければ外れ点と見なして除外する。このパラメータは、場合によって調整可能である。 Furthermore, in step S1, outlying points are removed and at least three points are set within a range of 0.3 m around each point, and if not, they are regarded as outlying points and excluded. This parameter can be adjusted as needed.

さらに、前記ステップS2において、離散点群セットに対して主成分分析(PCA)を行って点ごとの法線ベクトルを推定することは、その過程として以下を含む。
S21:法線推定問題を、所定点の近傍に確立された共分散行列の特徴量と特徴ベクトルを解く問題に変換する。1つの点集合S={P,P...P}を仮定し、この点集合内に所定点Pに対する共分散行列Cは、以下のように示される。

Figure 0007406853000009
ここで、
Figure 0007406853000010
は、この点集合の重心である。Cの特徴量と特徴ベクトルを計算し、特徴ベクトルは、空間中の1組の直交基底を構成し、最小特徴量に対応する特徴ベクトルは、所定点Pの法線に近似できる。 Furthermore, in step S2, performing principal component analysis (PCA) on the discrete point group set to estimate the normal vector for each point includes the following steps.
S21: Convert the normal estimation problem into a problem of solving the feature amount and feature vector of the covariance matrix established in the vicinity of a predetermined point. One point set S={P 1 , P 2 . .. .. P N }, the covariance matrix C for a given point P i within this point set is expressed as follows.
Figure 0007406853000009
here,
Figure 0007406853000010
is the centroid of this point set. The feature amounts and feature vectors of C are calculated, the feature vectors constitute a set of orthogonal bases in space, and the feature vector corresponding to the minimum feature amount can be approximated to the normal of the predetermined point P i .

さらに、前記ステップS2において、すべての点の法線ベクトルを同じ方向に調整することは、その過程が以下である。
S22:法線を求めてそれを単位化して法線ベクトルを得、(X,Y,Z)とし、法線ベクトルのZ<0ならばその法線ベクトルを逆にし、Z>0ならばそのままにし、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整して法線ベクトルを同方向にする。
Further, in step S2, the process of adjusting the normal vectors of all points in the same direction is as follows.
S22: Find the normal and unitize it to obtain the normal vector, set it as (X, Y, Z), and if the normal vector Z<0, reverse the normal vector, and if Z>0, leave it as it is. In other words, the third components Z of the normal vectors are all adjusted to be greater than 0, so that the normal vectors are in the same direction.

さらに、前記ステップS3において、最小二乗法により平面をフィッティングして法線ベクトルを取得することは、その過程が以下である。
平面方程式の一般式は、Ax+By+Cz+D=0,(C≠0)であり、
すなわち、

Figure 0007406853000011
すなわち、z=ax+by+c。
ここで、a、b、cは、平面方程式の他の表現方法の未知パラメータである。
一連のK(デフォルトでK=50とし、手動で設定可能である)個の点について、このK個の点の座標(x、y、z)(i=0,1,…,K-1)は、既知であり、上記平面方程式をフィッティング計算し、この方程式を構築して最小二乗法で平面方程式の未知パラメータを解く。
この方程式は、典型的な方程式方式のAX=Bと見なし、
ここで、
Figure 0007406853000012
この方程式AX=Bの最小二乗解は、X=(A-1)*ABである。
このフィッティング平面方程式z=ax+by+cを求めることができ、この平面の法線は、(a,b,-1)であり、この法線を単位化すると法線ベクトルが得られ、それを以下のように同方向に調整する。
Figure 0007406853000013
法線ベクトルは、以下である。
Figure 0007406853000014
ここで、NormalLenは、法線を単位化するための、法線のノルムであり、a、bは、先に求めた平面方程式のパラメータである。 Furthermore, in step S3, the process of fitting a plane and obtaining a normal vector using the least squares method is as follows.
The general formula of the plane equation is A 0 x + B 0 y + C 0 z + D 0 =0, (C 0 ≠0),
That is,
Figure 0007406853000011
That is, z=ax+by+c.
Here, a, b, and c are unknown parameters of other expression methods of the plane equation.
For a series of K points (K=50 by default, can be set manually), the coordinates (x i , y i , z i ) of these K points (i=0, 1,..., K -1) is known, the above plane equation is calculated by fitting, this equation is constructed, and the unknown parameters of the plane equation are solved by the method of least squares.
This equation is considered as AX=B in typical equation form,
here,
Figure 0007406853000012
The least squares solution of this equation AX=B is X=(A T A −1 )*A T B.
This fitting plane equation z = ax + by + c can be found, the normal to this plane is (a, b, -1), and by unitizing this normal, a normal vector is obtained, which can be expressed as follows: Adjust in the same direction.
Figure 0007406853000013
The normal vector is:
Figure 0007406853000014
Here, NormalLen is the norm of the normal line for unitizing the normal line, and a and b are the parameters of the plane equation obtained previously.

さらに、前記ステップS4において、S2で算出した法線ベクトルをフィッティング平面の法線ベクトルを用いて補正することは、その過程が以下である。
S2で算出した法線ベクトルをnorm1=(a1,b1,c1)、(c1>0)とし、
平面フィッティングによる法線ベクトルは、norm2=(a2,b2,c2)、(c2>0)であり、
法線ベクトル補正パラメータalpha(デフォルトで1.0とし、修正後の法線ベクトルは、デフォルトでフィッティング平面の法線ベクトルをとる。このパラメータは、設定可能である。)を用いて法線ベクトルを補正して得られた補正後の法線ベクトルは、以下である。
norm=(a,b,c)=norm1*(1-alpha)+norm2*alpha
ここで、norm1は、ステップS2でPCA計算による法線ベクトルであり、norm2は、平面フィッティングによる法線ベクトルであり、alphaは、法線ベクトル補正パラメータであり、平面フィッティングによる法線ベクトルが最終補正後の法線ベクトルに占める重みを表し、alphaは、一般的にデフォルトで1をとり、すなわち最終補正後の法線ベクトルが平面フィッティングによる法線ベクトルとなる。
Furthermore, in step S4, the process of correcting the normal vector calculated in S2 using the normal vector of the fitting plane is as follows.
The normal vector calculated in S2 is set as norm1=(a1, b1, c1), (c1>0),
The normal vector by plane fitting is norm2=(a2, b2, c2), (c2>0),
The normal vector is calculated using the normal vector correction parameter alpha (default is 1.0, and the normal vector after correction is the normal vector of the fitting plane by default. This parameter is configurable). The corrected normal vector obtained by the correction is as follows.
norm=(a 0 , b 0 , c 0 )=norm1*(1-alpha)+norm2*alpha
Here, norm1 is the normal vector calculated by PCA in step S2, norm2 is the normal vector calculated by plane fitting, alpha is a normal vector correction parameter, and the normal vector calculated by plane fitting is the final correction. It represents the weight to be given to the subsequent normal vector, and alpha generally takes 1 by default, that is, the normal vector after final correction becomes the normal vector by plane fitting.

さらに、前記ステップS5において、当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影することは、その過程が以下である。
当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、すなわち、点と平面との交点をその点の補正後の位置として求める。
このフィッティング平面の方程式は、S3で得られる。
z=ax+by+c
補正後の法線ベクトルは、S4で得られる。
(a,b,c
当該点座標を(x,y,z)とすると、当該法線方程式は、以下である。

Figure 0007406853000015
当該法線と当該フィッティング平面との交点を求める。
Figure 0007406853000016
ここで、a、b、cは、補正後の法線ベクトルであり、a、b、cは、ステップS3で最小二乗法でフィッティングした平面方程式パラメータであり、x、y、zは、調整するオリジナル点座標であり、x、y、zは、法線ベクトルに基づくフィルタリング調整後の点の座標であり、オリジナル点群のこの点の位置を上述の法線ベクトルとフィッティング平面の交点位置に調整することで、点群に対する平滑化の処理効果を達成できる。 Furthermore, in step S5, the process of projecting the point onto the fitting plane along the corrected normal vector direction is as follows.
The position of the point is adjusted to the intersection of the corrected normal vector and the fitting plane, that is, the intersection of the point and the plane is determined as the corrected position of the point.
The equation of this fitting plane is obtained in S3.
z=ax+by+c
The corrected normal vector is obtained in S4.
(a 0 , b 0 , c 0 )
When the point coordinates are (x i , y i , z i ), the normal equation is as follows.
Figure 0007406853000015
Find the intersection of the normal and the fitting plane.
Figure 0007406853000016
Here, a 0 , b 0 , c 0 are normal vectors after correction, a, b, c are plane equation parameters fitted by the least squares method in step S3, x i , y i , z i is the original point coordinate to be adjusted, x, y, z are the coordinates of the point after filtering adjustment based on the normal vector, and the position of this point in the original point cloud is fitted with the normal vector described above. By adjusting the intersection points of the planes, a smoothing processing effect on the point group can be achieved.

上述したように、本発明は、好適に実現される。 As mentioned above, the present invention is preferably implemented.

本発明の実施形態は、上述した実施例に限定されるものではない。本発明の精神および原理から逸脱することなく、その他のいかなる変更、修飾、代替、組み合わせ、簡略化も、等価な置換形態であるべきであり、いずれも本発明の範囲に含まれる。 Embodiments of the present invention are not limited to the examples described above. Any other alterations, modifications, substitutions, combinations, simplifications and equivalent substitutions without departing from the spirit and principles of the invention are within the scope of the invention.

(付記)
(付記1)
法線ベクトルに基づく点群平滑化フィルタリング方法であって、以下のステップを含むことを特徴とし、
S1:オリジナル点群の外れ点を除去し、各点周辺の設定範囲内の点の個数を統計し、一定個数より少ない場合は、外れ点と見なして除外する:
S2:離散点群セットに対して主成分分析を行って点ごとの法線ベクトルを推定し、すべての点の法線ベクトルを同じ方向に調整し、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整する:
S3:各点に対してそのK近傍を介して最小二乗法で1つの平面をフィッティングし、この平面モデルによりその点の法線ベクトルを取得して同方向に調整する:
S4:フィッティング平面の法線ベクトルを用いて、ステップS2で算出した法線ベクトルを補正する:
S5:当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影し、すなわち、当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、点群に対する平滑化の処理効果を達成する、
法線ベクトルに基づく点群平滑化フィルタリング方法。
(Additional note)
(Additional note 1)
A point cloud smoothing filtering method based on normal vectors, characterized by comprising the following steps:
S1: Remove outlying points from the original point cloud, calculate the number of points within the set range around each point, and if the number is less than a certain number, consider it as an outlier and exclude it:
S2: Perform principal component analysis on the discrete point cloud set to estimate the normal vector for each point, and adjust the normal vectors of all points in the same direction, that is, the third component Z of the normal vector Adjust so that all are greater than 0:
S3: Fit one plane to each point using the least squares method through its K neighbors, obtain the normal vector of that point using this plane model, and adjust it in the same direction:
S4: Correct the normal vector calculated in step S2 using the normal vector of the fitting plane:
S5: Project the point onto the fitting plane along the corrected normal vector direction, that is, adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, and create a point group. Achieving the processing effect of smoothing for
A point cloud smoothing filtering method based on normal vectors.

(付記2)
前記ステップS1において、外れ点を除去して各点周辺0.3mの範囲内に少なくとも3点を設定することを特徴とする付記1に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。
(Additional note 2)
The point group smoothing filtering method based on normal vectors according to appendix 1, characterized in that in step S1, outlying points are removed and at least three points are set within a range of 0.3 m around each point.

(付記3)
前記ステップS2において、離散点群セットに対して主成分分析を行って点ごとの法線ベクトルを推定することは、その過程として以下を含み、
S21:法線推定問題を、所定点の近傍に確立された共分散行列の特徴量と特徴ベクトルを解く問題に変換する。1つの点集合S={P,P...P}を仮定し、この点集合内に所定点Pに対する共分散行列Cは、以下のように示され、

Figure 0007406853000017
ここで、Pは、所定点であり、
Figure 0007406853000018
は、この点集合の重心であり、
Cの特徴量と特徴ベクトルを計算し、特徴ベクトルは、空間中の1組の直交基底を構成し、最小特徴量に対応する特徴ベクトルは、所定点Pの法線に近似できる、
ことを特徴とする付記2に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。 (Additional note 3)
In step S2, the process of estimating the normal vector for each point by performing principal component analysis on the discrete point group set includes the following:
S21: Convert the normal estimation problem into a problem of solving the feature amount and feature vector of the covariance matrix established in the vicinity of a predetermined point. One point set S={P 1 , P 2 . .. .. P N }, the covariance matrix C for a given point P i in this point set is shown as follows,
Figure 0007406853000017
Here, P i is a predetermined point,
Figure 0007406853000018
is the centroid of this point set,
Calculate the feature quantities and feature vectors of C, the feature vectors constitute a set of orthogonal bases in space, and the feature vector corresponding to the minimum feature quantity can be approximated to the normal of a predetermined point P i .
The point group smoothing filtering method based on normal vectors according to appendix 2, characterized in that:

(付記4)
前記ステップS2において、すべての点の法線ベクトルを同じ方向に調整することは、その過程が以下であり、
S22:法線を求めてそれを単位化して法線ベクトルを得、(X,Y,Z)とし、法線ベクトルのZ<0ならばその法線ベクトルを逆にし、Z>0ならばそのままにし、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整して法線ベクトルを同方向にする、
ことを特徴とする付記3に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。
(Additional note 4)
In step S2, the process of adjusting the normal vectors of all points in the same direction is as follows:
S22: Find the normal and unitize it to obtain the normal vector, set it as (X, Y, Z), and if the normal vector Z<0, reverse the normal vector, and if Z>0, leave it as it is. In other words, adjust the third component Z of the normal vectors so that they are all greater than 0, and make the normal vectors in the same direction.
The point group smoothing filtering method based on normal vectors according to appendix 3, characterized in that:

(付記5)
前記ステップS3において、最小二乗法により平面をフィッティングして法線ベクトルを取得することは、その過程が以下であり、
平面方程式の一般式は、Ax+By+Cz+D=0,(C≠0)であり、
ここで、A、B、C、Dは、平面方程式の未知パラメータであり、すなわち、

Figure 0007406853000019
すなわち、z=ax+by+c、
ここで、a、b、cは、平面方程式の他の表現方法の未知パラメータであり、
このK個の点の座標(x、y、z)(i=0,1,…,K-1)は、既知であり、上記平面方程式をフィッティング計算し、この方程式を構築して最小二乗法で平面方程式の未知パラメータを解き、
この方程式は、典型的な方程式方式のAX=Bと見なし、
ここで、
Figure 0007406853000020
この方程式AX=Bの最小二乗解は、X=(A-1)*ABであり、
このフィッティング平面方程式z=ax+by+cを求めることができ、この平面の法線は、(a,b,-1)であり、この法線を単位化すると法線ベクトルが得られ、それを以下のように同方向に調整し、
Figure 0007406853000021
法線ベクトルは、以下であり、
Figure 0007406853000022
ここで、NormalLenは、法線を単位化するための、法線のノルムであり、a、bは、先に求めた平面方程式のパラメータである、
ことを特徴とする付記4に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。 (Appendix 5)
In the step S3, the process of fitting the plane by the least squares method to obtain the normal vector is as follows:
The general formula of the plane equation is A 0 x + B 0 y + C 0 z + D 0 =0, (C 0 ≠0),
Here, A 0 , B 0 , C 0 , D 0 are unknown parameters of the plane equation, i.e.
Figure 0007406853000019
That is, z=ax+by+c,
Here, a, b, c are unknown parameters of other expression methods of the plane equation,
The coordinates (x i , y i , z i ) (i=0, 1,..., K-1) of these K points are known, and the above plane equation is calculated by fitting and this equation is constructed. Solve the unknown parameters of the plane equation using the least squares method,
This equation is considered as AX=B in typical equation form,
here,
Figure 0007406853000020
The least squares solution of this equation AX=B is X=(A T A −1 ) * A T B,
This fitting plane equation z = ax + by + c can be found, the normal to this plane is (a, b, -1), and by unitizing this normal, a normal vector is obtained, which can be expressed as follows: Adjust in the same direction as
Figure 0007406853000021
The normal vector is
Figure 0007406853000022
Here, NormalLen is the norm of the normal line for unitizing the normal line, and a and b are the parameters of the plane equation obtained earlier.
The point group smoothing filtering method based on normal vectors according to appendix 4, characterized in that:

(付記6)
前記ステップS4において、ステップS2で算出した法線ベクトルをフィッティング平面の法線ベクトルを用いて補正することは、その過程が以下であり、
ステップS2で算出した法線ベクトルをnorm1=(a1,b1,c1)、(c1>0)とし、
平面フィッティングによる法線ベクトルは、norm2=(a2,b2,c2)、(c2>0)であり、
法線ベクトル補正パラメータalphaを用いて法線ベクトルを補正して得られた補正後の法線ベクトルは、以下であり、
norm=(a,b,c)=norm1*(1-alpha)+norm2*alpha
ここで、norm1は、ステップS2でPCA計算による法線ベクトルであり、norm2は、平面フィッティングによる法線ベクトルであり、alphaは、法線ベクトル補正パラメータであり、平面フィッティングによる法線ベクトルが最終補正後の法線ベクトルに占める重みを表し、alphaは、デフォルトで1をとり、すなわち最終補正後の法線ベクトルが平面フィッティングによる法線ベクトルとなる、
ことを特徴とする付記5に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。
(Appendix 6)
In step S4, the process of correcting the normal vector calculated in step S2 using the normal vector of the fitting plane is as follows:
The normal vector calculated in step S2 is set as norm1=(a1, b1, c1), (c1>0),
The normal vector by plane fitting is norm2=(a2, b2, c2), (c2>0),
The corrected normal vector obtained by correcting the normal vector using the normal vector correction parameter alpha is as follows,
norm=(a 0 , b 0 , c 0 )=norm1*(1-alpha)+norm2*alpha
Here, norm1 is the normal vector calculated by PCA in step S2, norm2 is the normal vector calculated by plane fitting, alpha is a normal vector correction parameter, and the normal vector calculated by plane fitting is the final correction. It represents the weight to be occupied in the subsequent normal vector, and alpha takes 1 by default, that is, the normal vector after the final correction becomes the normal vector by plane fitting.
The point group smoothing filtering method based on normal vectors according to appendix 5, characterized in that:

(付記7)
前記ステップS5において、当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影することは、その過程が以下であり、
当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、すなわち、点と平面との交点をその点の補正後の位置として求め、
このフィッティング平面の方程式は、ステップS3で得られ、
z=ax+by+c
補正後の法線ベクトルは、ステップS4で得られ、
(a,b,c
当該点座標を(x,y,z)とすると、当該法線方程式は、以下であり、

Figure 0007406853000023
当該法線と当該フィッティング平面との交点を求め、
Figure 0007406853000024
ここで、a、b、cは、補正後の法線ベクトルであり、a、b、cは、ステップS3で最小二乗法でフィッティングした平面方程式パラメータであり、x、y、zは、調整するオリジナル点座標であり、x、y、zは、法線ベクトルに基づくフィルタリング調整後の点の座標であり、オリジナル点群のこの点の位置を上述の法線ベクトルとフィッティング平面の交点位置に調整することで、点群に対する平滑化の処理効果を達成できる、
ことを特徴とする付記6に記載の法線ベクトルに基づく点群平滑化フィルタリング方法。 (Appendix 7)
In step S5, the process of projecting the point onto the fitting plane along the corrected normal vector direction is as follows:
Adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, that is, find the intersection of the point and the plane as the corrected position of the point,
The equation of this fitting plane is obtained in step S3,
z=ax+by+c
The corrected normal vector is obtained in step S4,
(a 0 , b 0 , c 0 )
When the point coordinates are (x i , y i , z i ), the normal equation is as follows,
Figure 0007406853000023
Find the intersection of the normal and the fitting plane,
Figure 0007406853000024
Here, a 0 , b 0 , c 0 are normal vectors after correction, a, b, c are plane equation parameters fitted by the least squares method in step S3, x i , y i , z i is the original point coordinate to be adjusted, x, y, z are the coordinates of the point after filtering adjustment based on the normal vector, and the position of this point in the original point cloud is fitted with the normal vector described above. By adjusting the intersection point of the plane, you can achieve the smoothing effect on the point cloud.
6. The point group smoothing filtering method based on normal vectors according to appendix 6.

Claims (7)

コンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法であって、以下のステップを含むことを特徴とし、
ステップS1:オリジナル点群の外れ点を除去し、各点周辺の設定範囲内の点の個数を統計し、一定個数より少ない場合は、外れ点と見なして除外する:
ステップS2:離散点群セットに対して主成分分析を行って点ごとの法線ベクトルを推定し、すべての点の法線ベクトルを同じ方向に調整し、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整する:
ステップS3:各点に対してそのK近傍を介して最小二乗法で1つの平面をフィッティングし、この平面モデルによりその点の法線ベクトルを取得して同方向に調整する:
ステップS4:フィッティング平面の法線ベクトルを用いて、前記ステップS2で算出した法線ベクトルを補正する:
ステップS5:当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影し、すなわち、当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、点群に対する平滑化の処理効果を達成する、
コンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
A computer-implemented normal vector-based point cloud smoothing filtering method, comprising the following steps:
Step S1: Remove outlying points from the original point group, calculate the number of points within the set range around each point, and if the number is less than a certain number, consider it as an outlier and exclude it:
Step S2: Perform principal component analysis on the discrete point cloud set to estimate the normal vector for each point, and adjust the normal vectors of all points in the same direction, that is, the third component Z of the normal vector Adjust so that they are all greater than 0:
Step S3: Fit one plane to each point using the least squares method through its K neighbors, and use this plane model to obtain the normal vector of that point and adjust it in the same direction:
Step S4: Using the normal vector of the fitting plane, correct the normal vector calculated in step S2:
Step S5: Project the point onto the fitting plane along the corrected normal vector direction, that is, adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, and achieve a smoothing processing effect on the group,
A computer-implemented normal vector-based point cloud smoothing filtering method.
前記ステップS1において、外れ点を除去して各点周辺0.3mの範囲内に少なくとも3点を設定することを特徴とする請求項1に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。 2. The computer-executed point group based on normal vectors according to claim 1, wherein in step S1, outlying points are removed and at least three points are set within a range of 0.3 m around each point. Smoothing filtering method. 前記ステップS2において、離散点群セットに対して主成分分析を行って点ごとの法線ベクトルを推定することは、その過程として以下を含み、
ステップS21:法線推定問題を、所定点の近傍に確立された共分散行列の特徴量と特徴ベクトルを解く問題に変換する。1つの点集合S={P,P...P}を仮定し、この点集合内に所定点Pに対する共分散行列Cは、以下のように示され、
Figure 0007406853000025
ここで、Pは、所定点であり、
Figure 0007406853000026
は、この点集合の重心であり、
Cの特徴量と特徴ベクトルを計算し、特徴ベクトルは、空間中の1組の直交基底を構成し、最小特徴量に対応する特徴ベクトルは、所定点Pの法線に近似できる、
ことを特徴とする請求項2に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
In step S2, the process of estimating the normal vector for each point by performing principal component analysis on the discrete point group set includes the following:
Step S21: Convert the normal estimation problem into a problem of solving the feature amount and feature vector of the covariance matrix established in the vicinity of a predetermined point. One point set S={P 1 , P 2 . .. .. P N }, the covariance matrix C for a given point P i in this point set is shown as follows,
Figure 0007406853000025
Here, P i is a predetermined point,
Figure 0007406853000026
is the centroid of this point set,
Calculate the feature quantities and feature vectors of C, the feature vectors constitute a set of orthogonal bases in space, and the feature vector corresponding to the minimum feature quantity can be approximated to the normal of a predetermined point P i .
3. The computer-implemented normal vector-based point cloud smoothing filtering method according to claim 2.
前記ステップS2において、すべての点の法線ベクトルを同じ方向に調整することは、その過程が以下であり、
ステップS22:法線を求めてそれを単位化して法線ベクトルを得、(X,Y,Z)とし、法線ベクトルのZ<0ならばその法線ベクトルを逆にし、Z>0ならばそのままにし、すなわち、法線ベクトルの第3成分Zがすべて0より大きくなるように調整して法線ベクトルを同方向にする、
ことを特徴とする請求項3に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
In step S2, the process of adjusting the normal vectors of all points in the same direction is as follows:
Step S22: Find the normal and unitize it to obtain the normal vector, set it as (X, Y, Z), if Z<0 of the normal vector, reverse the normal vector, if Z>0 Leave it as is, that is, adjust the third component Z of the normal vector so that it is all greater than 0, so that the normal vectors are in the same direction.
4. The computer-implemented normal vector-based point cloud smoothing filtering method according to claim 3.
前記ステップS3において、最小二乗法により平面をフィッティングして法線ベクトルを取得することは、その過程が以下であり、
平面方程式の一般式は、Ax+By+Cz+D=0,(C≠0)であり、
ここで、A、B、C、Dは、平面方程式の未知パラメータであり、すなわち、
Figure 0007406853000027
すなわち、z=ax+by+c、
ここで、a、b、cは、平面方程式の他の表現方法の未知パラメータであり、
K個の点の座標(x、y、z)(i=0,1,…,K-1)は、既知であり、上記平面方程式をフィッティング計算し、平面方程式を構築して最小二乗法で平面方程式の未知パラメータを解き、
平面方程式は、典型的な方程式方式のAX=Bと見なし、
ここで、
Figure 0007406853000028
平面方程式AX=Bの最小二乗解は、X=(A-1)*ABであり、
フィッティング平面方程式z=ax+by+cを求めることができ、この平面の法線は、(a,b,-1)であり、この法線を単位化すると法線ベクトルが得られ、それを以下のように同方向に調整し、
Figure 0007406853000029
法線ベクトルは、以下であり、
Figure 0007406853000030
ここで、NormalLenは、法線を単位化するための、法線のノルムであり、a、bは、先に求めた平面方程式のパラメータである、
ことを特徴とする請求項4に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
In the step S3, the process of fitting the plane by the least squares method to obtain the normal vector is as follows:
The general formula of the plane equation is A 0 x + B 0 y + C 0 z + D 0 =0, (C 0 ≠0),
Here, A 0 , B 0 , C 0 , D 0 are unknown parameters of the plane equation, i.e.
Figure 0007406853000027
That is, z=ax+by+c,
Here, a, b, c are unknown parameters of other expression methods of the plane equation,
The coordinates (x i , y i , z i ) (i = 0, 1, ..., K-1) of K points are known, and the above plane equation is calculated by fitting, and the plane equation is constructed to minimize the Solve the unknown parameters of the plane equation using the square method,
The plane equation is considered as AX=B in the typical equation system,
here,
Figure 0007406853000028
The least squares solution of the plane equation AX=B is X=(A T A −1 ) * A T B,
The fitting plane equation z=ax+by+c can be found, the normal to this plane is (a, b, -1), and by unitizing this normal, a normal vector is obtained, which can be written as follows: Adjust in the same direction,
Figure 0007406853000029
The normal vector is
Figure 0007406853000030
Here, NormalLen is the norm of the normal line for unitizing the normal line, and a and b are the parameters of the plane equation obtained earlier.
5. The point cloud smoothing filtering method based on normal vectors executed by a computer according to claim 4.
前記ステップS4において、前記ステップS2で算出した法線ベクトルをフィッティング平面の法線ベクトルを用いて補正することは、その過程が以下であり、
前記ステップS2で算出した法線ベクトルをnorm1=(a1,b1,c1)、(c1>0)とし、
平面フィッティングによる法線ベクトルは、norm2=(a2,b2,c2)、(c2>0)であり、
法線ベクトル補正パラメータalphaを用いて法線ベクトルを補正して得られた補正後の法線ベクトルは、以下であり、
norm=(a,b,c)=norm1*(1-alpha)+norm2*alpha
ここで、norm1は、前記ステップS2でPCA計算による法線ベクトルであり、norm2は、平面フィッティングによる法線ベクトルであり、alphaは、法線ベクトル補正パラメータであり、平面フィッティングによる法線ベクトルが最終補正後の法線ベクトルに占める重みを表し、alphaは、デフォルトで1をとり、すなわち最終補正後の法線ベクトルが平面フィッティングによる法線ベクトルとなる、
ことを特徴とする請求項5に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
In step S4, the process of correcting the normal vector calculated in step S2 using the normal vector of the fitting plane is as follows:
The normal vector calculated in step S2 is set as norm1=(a1, b1, c1), (c1>0),
The normal vector by plane fitting is norm2=(a2, b2, c2), (c2>0),
The corrected normal vector obtained by correcting the normal vector using the normal vector correction parameter alpha is as follows,
norm=(a 0 , b 0 , c 0 )=norm1*(1-alpha)+norm2*alpha
Here, norm1 is the normal vector calculated by PCA in step S2, norm2 is the normal vector calculated by plane fitting, alpha is a normal vector correction parameter, and the normal vector calculated by plane fitting is the final normal vector. Represents the weight occupied by the normal vector after correction, alpha takes 1 by default, that is, the normal vector after the final correction becomes the normal vector by plane fitting.
6. The point cloud smoothing filtering method based on normal vectors executed by a computer according to claim 5.
前記ステップS5において、当該点を補正後の法線ベクトル方向に沿って当該フィッティング平面上に投影することは、その過程が以下であり、
当該点の位置を補正後の法線ベクトルと当該フィッティング平面との交点位置に調整し、すなわち、点と平面との交点をその点の補正後の位置として求め、
このフィッティング平面の方程式は、前記ステップS3で得られ、
z=ax+by+c
補正後の法線ベクトルは、前記ステップS4で得られ、
(a,b,c
当該点の座標を(x,y,z)とすると、当該法線の方程式は、以下であり、
Figure 0007406853000031
当該法線と当該フィッティング平面との交点を求め、
Figure 0007406853000032
ここで、a、b、cは、補正後の法線ベクトルであり、a、b、cは、前記ステップS3で最小二乗法でフィッティングした平面方程式パラメータであり、x、y、zは、調整するオリジナル点座標であり、x、y、zは、法線ベクトルに基づくフィルタリング調整後の点の座標であり、オリジナル点群のこの点の位置を上述の法線ベクトルとフィッティング平面の交点位置に調整することで、点群に対する平滑化の処理効果を達成できる、
ことを特徴とする請求項6に記載のコンピュータにより実行される法線ベクトルに基づく点群平滑化フィルタリング方法。
In step S5, the process of projecting the point onto the fitting plane along the corrected normal vector direction is as follows:
Adjust the position of the point to the intersection of the corrected normal vector and the fitting plane, that is, find the intersection of the point and the plane as the corrected position of the point,
The equation of this fitting plane is obtained in step S3,
z=ax+by+c
The corrected normal vector is obtained in step S4,
(a 0 , b 0 , c 0 )
If the coordinates of the point are (x i , y i , z i ), the equation of the normal is as follows,
Figure 0007406853000031
Find the intersection of the normal and the fitting plane,
Figure 0007406853000032
Here, a 0 , b 0 , and c 0 are normal vectors after correction, a, b, and c are plane equation parameters fitted by the least squares method in step S3, and x i , y i , z i are the original point coordinates to be adjusted, x, y, z are the coordinates of the point after filtering adjustment based on the normal vector, and the position of this point in the original point cloud is expressed as the above normal vector. By adjusting the intersection point of the fitting plane, you can achieve the smoothing effect on the point cloud.
7. The computer-implemented normal vector-based point cloud smoothing filtering method according to claim 6.
JP2022539368A 2019-12-26 2020-11-30 Computer-implemented normal vector-based point cloud smoothing filtering method Active JP7406853B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201911364489.XA CN111161179B (en) 2019-12-26 2019-12-26 Point cloud smoothing method based on normal vector
CN201911364489.X 2019-12-26
PCT/CN2020/132683 WO2021129317A1 (en) 2019-12-26 2020-11-30 Point cloud smoothing filtering method based on normal vector

Publications (2)

Publication Number Publication Date
JP2023509888A JP2023509888A (en) 2023-03-10
JP7406853B2 true JP7406853B2 (en) 2023-12-28

Family

ID=70558100

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022539368A Active JP7406853B2 (en) 2019-12-26 2020-11-30 Computer-implemented normal vector-based point cloud smoothing filtering method

Country Status (3)

Country Link
JP (1) JP7406853B2 (en)
CN (1) CN111161179B (en)
WO (1) WO2021129317A1 (en)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111161179B (en) * 2019-12-26 2023-06-16 华南理工大学 Point cloud smoothing method based on normal vector
CN112102178B (en) * 2020-07-29 2024-09-06 深圳市菲森科技有限公司 Point cloud feature denoising method and device, electronic equipment and storage medium
CN112085672B (en) * 2020-08-19 2021-12-21 中交第三航务工程局有限公司江苏分公司 Point cloud data filtering method considering pile body prior geometric form parameters
CN112862968B (en) * 2021-03-15 2024-01-19 网易(杭州)网络有限公司 Rendering display method, device and equipment of target vegetation model and storage medium
CN113487633A (en) * 2021-08-17 2021-10-08 熵智科技(深圳)有限公司 Point cloud contour extraction method and device, computer equipment and storage medium
CN113989116B (en) * 2021-10-25 2024-08-02 西安知微传感技术有限公司 Point cloud fusion method and system based on symmetry plane
CN114219917B (en) * 2021-12-02 2024-06-04 江苏方天电力技术有限公司 Vulnerability restoration method for laser radar point cloud data
CN115310028B (en) * 2022-07-21 2023-11-10 成都飞机工业(集团)有限责任公司 Calculation method for uncertainty in measurement of included angle between axis of blind hole and plane
KR102712187B1 (en) * 2022-11-30 2024-10-02 주식회사 메타뱅크 Method for reconstruct in 3d object surface and apparatus therefor
CN116165677B (en) * 2023-04-24 2023-07-21 湖北中图勘测规划设计有限公司 Geological investigation method and device based on laser radar
CN117132478B (en) * 2023-04-25 2024-05-17 兰州交通大学 Orbit point cloud denoising method based on normal vector two-norm characteristic parameter
CN116952181B (en) * 2023-09-18 2024-01-12 成都飞机工业(集团)有限责任公司 Internal profile measuring method for large-length-diameter-ratio composite material tubular thin-wall part
CN118037825B (en) * 2024-02-01 2024-08-16 北京中科慧灵机器人技术有限公司 Correction method and device for directed normal vector of surface point cloud
CN117808703B (en) * 2024-02-29 2024-05-10 南京航空航天大学 Multi-scale large-scale component assembly gap point cloud filtering method
CN118036899B (en) * 2024-04-10 2024-06-14 山东亿昌装配式建筑科技有限公司 Building decoration intelligent management system based on BIM

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150070354A1 (en) 2013-09-10 2015-03-12 Fu Tai Hua Industry (Shenzhen) Co., Ltd. Computing device and method for reconstructing curved surface of point cloud data
JP2017167671A (en) 2016-03-14 2017-09-21 キヤノン株式会社 Information processing device, information processing method, and program
CN109299739A (en) 2018-09-26 2019-02-01 速度时空信息科技股份有限公司 The method that vehicle-mounted laser point cloud is filtered based on the surface fitting of normal vector

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100501751C (en) * 2007-09-06 2009-06-17 许焱 Device and method for gem three-dimensional blank reconstruction design based on machine vision
CN103261945B (en) * 2010-12-28 2016-03-02 洛克希德马丁公司 A kind of system and method creating Free Space Optics reflecting surface
US10066925B2 (en) * 2016-02-02 2018-09-04 The Boeing Company Point cloud processing apparatus and method
CN105844600B (en) * 2016-04-27 2018-03-16 北京航空航天大学 A kind of extraterrestrial target three-dimensional point cloud fairing denoising method
CN106709883B (en) * 2016-12-20 2019-10-18 华南理工大学 Point cloud denoising method based on joint bilateral filtering and sharp features skeletal extraction
CN109409437B (en) * 2018-11-06 2021-06-01 安徽农业大学 Point cloud segmentation method and device, computer readable storage medium and terminal
CN111161179B (en) * 2019-12-26 2023-06-16 华南理工大学 Point cloud smoothing method based on normal vector

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150070354A1 (en) 2013-09-10 2015-03-12 Fu Tai Hua Industry (Shenzhen) Co., Ltd. Computing device and method for reconstructing curved surface of point cloud data
JP2017167671A (en) 2016-03-14 2017-09-21 キヤノン株式会社 Information processing device, information processing method, and program
CN109299739A (en) 2018-09-26 2019-02-01 速度时空信息科技股份有限公司 The method that vehicle-mounted laser point cloud is filtered based on the surface fitting of normal vector

Also Published As

Publication number Publication date
WO2021129317A1 (en) 2021-07-01
CN111161179B (en) 2023-06-16
CN111161179A (en) 2020-05-15
JP2023509888A (en) 2023-03-10

Similar Documents

Publication Publication Date Title
JP7406853B2 (en) Computer-implemented normal vector-based point cloud smoothing filtering method
CN108732582B (en) Vehicle positioning method and device
JP7300550B2 (en) METHOD AND APPARATUS FOR CONSTRUCTING SIGNS MAP BASED ON VISUAL SIGNS
US9378585B2 (en) System and method for automatic geometric correction using RPC
JP2012128661A (en) Information processor, information processing method and program
CN113835422B (en) Visual map construction method and mobile robot
US11551366B2 (en) System and methods for correcting terrain elevations under forest canopy
CN115063465B (en) Unmanned vehicle driving road condition modeling method based on laser radar
WO2022179094A1 (en) Vehicle-mounted lidar external parameter joint calibration method and system, medium and device
CN116929338B (en) Map construction method, device and storage medium
CN111080682A (en) Point cloud data registration method and device
CN115797256B (en) Method and device for processing tunnel rock mass structural plane information based on unmanned aerial vehicle
CN107782311A (en) Mobile path planning method and device for mobile terminal
CN111047652B (en) Rapid multi-TOF camera external parameter calibration method and device
CN110310370B (en) Method for point-plane fusion of GPS (Global positioning System) and SRTM (short Range TM)
CN115435796B (en) Vehicle positioning method and device and electronic equipment
JP6761388B2 (en) Estimator and program
Fursov et al. Solution of overdetermined systems of equations using the conforming subsystem selection
CN114742141A (en) Multi-source information data fusion studying and judging method based on ICP point cloud
KR102250687B1 (en) 2D Lidar-based Full 3D measurement method for 3D VR and Apparatus Therefor
Ye et al. Lunar Terrain Reconstruction from Multi-View Lroc Nac Images Based on Semi-Global Matching in Object Space
CN117351157B (en) Single-view three-dimensional scene pose estimation method, system and equipment
CN111145347B (en) Method and device for correcting digital elevation data of terrain section and correction equipment
Drobnjak et al. Evaluation of positional accuracy of digital topographic maps at scale 1: 25 000 (DTM25) on the basis of STANAG 2215 standard
Kim et al. Digital Terrain Modeling Using AKAZE Features Derived from UAV-Acquired, Nadir and Oblique Images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230509

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230713

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231031

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231211

R150 Certificate of patent or registration of utility model

Ref document number: 7406853

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150