JP5870011B2 - Point cloud analysis device, point cloud analysis method, and point cloud analysis program - Google Patents

Point cloud analysis device, point cloud analysis method, and point cloud analysis program Download PDF

Info

Publication number
JP5870011B2
JP5870011B2 JP2012258941A JP2012258941A JP5870011B2 JP 5870011 B2 JP5870011 B2 JP 5870011B2 JP 2012258941 A JP2012258941 A JP 2012258941A JP 2012258941 A JP2012258941 A JP 2012258941A JP 5870011 B2 JP5870011 B2 JP 5870011B2
Authority
JP
Japan
Prior art keywords
point
point cloud
interest
wire
feature vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012258941A
Other languages
Japanese (ja)
Other versions
JP2014106725A (en
Inventor
仁 新垣
仁 新垣
島村 潤
潤 島村
新井 啓之
啓之 新井
行信 谷口
行信 谷口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2012258941A priority Critical patent/JP5870011B2/en
Publication of JP2014106725A publication Critical patent/JP2014106725A/en
Application granted granted Critical
Publication of JP5870011B2 publication Critical patent/JP5870011B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Description

本発明は、センサ等によって得られた点群データを解析する点群解析装置、点群解析方法及び点群解析プログラムに関する。   The present invention relates to a point cloud analysis device, a point cloud analysis method, and a point cloud analysis program for analyzing point cloud data obtained by a sensor or the like.

近年、長距離レーザレンジファインダが広く普及することにより、屋内外問わず広範囲な空間における環境計測が実現し、計測した3次元点群から有用なオブジェクト(3次元物体)を抽出する技術開発が行われている。特に、レーザレンジファインダなどのセンサの高精度化により電線や通信架線のような線状物体(以下、ワイヤと称する)の位置測定も可能となった。   In recent years, with the widespread use of long-range laser range finders, environmental measurement has been realized in a wide range of spaces, both indoors and outdoors, and technology development has been carried out to extract useful objects (3D objects) from the measured 3D point cloud. It has been broken. In particular, it has become possible to measure the position of a linear object (hereinafter referred to as a wire) such as an electric wire or a communication overhead line by increasing the accuracy of a sensor such as a laser range finder.

非特許文献1では、3次元点群データに対して主成分分析を行い、各点がどのような3次元物体(直線、平面、立体的な形状)に所属するか識別を行っている。各点の3次元座標を1つのベクトルとし、ある点とその周辺の点群の分布が直線形状であれば、第1固有値が他の固有値に比べて大きな値となる傾向があるため、特定の閾値処理により注目点が架線上にあるかを判定できる。非特許文献1では、主成分分析により求めた第1固有値から第3固有値を特徴量と考えて、各点に事前につけたラベル(どの物体に所属するか判定する属性番号)を用いてパターン認識を行い、各点がどの物体(架線や建物、道路など)に属するか判定を行っている。図8は、点群密度と架線(ワイヤ)の直線近似精度を示す説明図である。図8(A)に示すように、ワイヤが高密度に計測できた場合、主成分分析により求めた直線の推定精度は高い。   In Non-Patent Document 1, principal component analysis is performed on three-dimensional point cloud data to identify what three-dimensional object (straight line, plane, three-dimensional shape) each point belongs to. If the three-dimensional coordinate of each point is a vector and the distribution of a point group and its surrounding points is a linear shape, the first eigenvalue tends to be larger than other eigenvalues. Whether or not the attention point is on the overhead line can be determined by threshold processing. In Non-Patent Document 1, pattern recognition is performed using labels (attribute numbers for determining which objects belong) that are assigned in advance to each point, considering the first to third eigenvalues obtained by principal component analysis as feature quantities. It is determined which object (overhead line, building, road, etc.) each point belongs to. FIG. 8 is an explanatory diagram showing the linear approximation accuracy of the point group density and the overhead line (wire). As shown in FIG. 8A, when the wire can be measured with high density, the estimation accuracy of the straight line obtained by the principal component analysis is high.

しかしながら、一般的に屋外のような広域な測定環境では、測定器から近い地面などの被写体は高密度に計測を行えるが、架線などワイヤは上空にある被写体のために、測定器から遠いことが原因となり計測点は疎になる傾向がある。また、電柱間のワイヤは複数本あるために、オクルージョン(途中に物体が障害となり、測定器から遠い物体の計測ができないこと)が生じ、更に測定間隔が疎になる。そのため、ある注目点とその周辺の広い範囲の点群の形状を調べなければ、注目点が架線を構成する点(ワイヤ構成点)か否かを判定することが難しい。ところが、形状を調べる範囲(処理対象領域)を広げると、注目点が属すべき物体以外の点群も含むこととなり、主成分分析の結果の信頼度が低くなるという問題がある(図8(B)参照)。   However, in general, in a wide-area measurement environment such as outdoors, subjects such as the ground near the measuring device can measure with high density, but wires such as overhead wires are far from the measuring device because of subjects in the sky. This causes the measurement points to be sparse. In addition, since there are a plurality of wires between the utility poles, occlusion occurs (an object becomes an obstacle on the way and an object far from the measuring instrument cannot be measured), and the measurement interval is further reduced. For this reason, it is difficult to determine whether or not the point of interest is a point that constitutes an overhead line (wire constituent point) unless the shape of a point of interest and a wide range of point groups around it are examined. However, if the range (processing target region) for examining the shape is expanded, the point group other than the object to which the attention point belongs is included, and there is a problem that the reliability of the result of the principal component analysis is lowered (FIG. 8B). )reference).

一方、従来技術において、上記のような主成分分析を用いるアプローチとは異なり、より広範囲な点群の分布を考慮するアプローチがある。非特許文献2では、Hough変換を用いて架線検出を行っている。Hough変換とは、直線や放物線などのモデルの位置や傾きなどのパラメータを、そのモデルに属すると推定された点群の投票により行うものである。   On the other hand, in the prior art, unlike the above-described approach using principal component analysis, there is an approach that considers a wider distribution of point clouds. In Non-Patent Document 2, overhead line detection is performed using Hough transform. The Hough transform is performed by voting a point group estimated to belong to a model such as a straight line or a parabola, such as a position or inclination of the model.

しかしながら、非特許文献2では架線がほぼ直線に見えるぐらいの狭い領域内での架線検出を行っているに過ぎず、道路上の広域な範囲での複雑な形状のモデルを推定することは困難である。また、非特許文献2では画像(2次元上の空間)でのモデル推定を行っているが、3次元上の空間でモデル推定を行う場合、パラメータの投票空間も大きくなるために、正確なパラメータ推定自体が難しいという問題がある。   However, Non-Patent Document 2 only performs overhead line detection in a narrow area where the overhead line looks almost straight, and it is difficult to estimate a complex shape model in a wide area on the road. is there. In Non-Patent Document 2, model estimation is performed on an image (a two-dimensional space). However, when model estimation is performed on a three-dimensional space, the parameter voting space also increases, so that an accurate parameter There is a problem that estimation itself is difficult.

また、従来技術におけるモデル推定とは別のアプローチとして、Markov Random Fieldにより、物体識別の推定精度が低いと思われる点を補正する手法もある。非特許文献3では、注目点とその周辺の点群の形状を主成分分析により推定し、近傍の点の推定精度が高いと思われる結果を用いて平滑化を行うことで、点群全体の推定精度を向上している。この技術により、部分的に測定密度が疎な部分の推定精度の向上が期待できる。   As another approach different from the model estimation in the prior art, there is a method of correcting a point where the estimation accuracy of the object identification is considered to be low by the Markov Random Field. In Non-Patent Document 3, the shape of the point of interest and the surrounding point group is estimated by principal component analysis, and smoothing is performed using the result that seems to have high estimation accuracy of neighboring points. The estimation accuracy has been improved. This technique can be expected to improve the estimation accuracy of the part where the measurement density is partially sparse.

しかしながら、個々の点の推定精度が低い点が集まっている部分については、推定精度の高い点群がないために正しく補正ができず、推定精度向上はできないという課題が残っている。例えば、複数の架線が密集して配置されていて、ねじれの位置にはあるが架線同士が交差しているような場合には、識別精度が低い点群の数が多くなってしまう。   However, there is a problem that a portion where points with low estimation accuracy of individual points are gathered cannot be corrected correctly because there is no point group with high estimation accuracy, and the estimation accuracy cannot be improved. For example, when a plurality of overhead lines are densely arranged and the overhead lines cross at the twisted position, the number of point groups with low identification accuracy increases.

また、既存技術のように主成分分析を適用する問題として、重心を原点とするように座標変換した後に点群の分布を調べていることである。図9は、電柱及び電柱間の架線(ワイヤ)の測定結果の一例を示す図である。図9(A)は電柱および電柱間の架線を表現している。図9(B)は、この電柱および電柱間の架線をレーザレンジファインダにより測定して得られた3次元点群を表現している。図9(B)に示すように、点群の密度に偏りがあると、注目点pの位置と大きく離れた「×」で示された位置が重心になる可能性もある。そのため、点pの位置とは異なる位置での接線方向を求めることになり、推定精度が低下するという問題がある。   Also, as a problem of applying principal component analysis as in the existing technology, the point cloud distribution is examined after coordinate transformation so that the center of gravity is the origin. FIG. 9 is a diagram illustrating an example of a measurement result of a utility pole and an overhead wire (wire) between the utility poles. FIG. 9A represents a utility pole and an overhead line between the utility poles. FIG. 9B represents a three-dimensional point group obtained by measuring the utility pole and the overhead line between the utility poles with a laser range finder. As shown in FIG. 9B, if the density of the point group is biased, there is a possibility that the position indicated by “x” far away from the position of the point of interest p becomes the center of gravity. Therefore, a tangential direction at a position different from the position of the point p is obtained, and there is a problem that the estimation accuracy is lowered.

Natural Terrain Classification using 3-D Ladar Data, N. Vandapel, D. F. Huber, A. Kapuria and M. Hebert, Robotics and Automation, 2004. Proceedings. ICRA '04. 2004 IEEE International Conference on (2004)Natural Terrain Classification using 3-D Ladar Data, N. Vandapel, D. F. Huber, A. Kapuria and M. Hebert, Robotics and Automation, 2004. Proceedings.ICRA '04. 2004 IEEE International Conference on (2004) Knowledge-based Power Line Detection for UAV Surveillance and Inspection Systems, Z. Li, Y. Liu, R. Hayward, J. Zhang and J. Cai, Image and Vision Computing New Zealand, 2008. IVCNZ 2008. 23rd International Conference (2008)Knowledge-based Power Line Detection for UAV Surveillance and Inspection Systems, Z. Li, Y. Liu, R. Hayward, J. Zhang and J. Cai, Image and Vision Computing New Zealand, 2008. IVCNZ 2008. 23rd International Conference (2008 ) Directional Associative Markov Network for 3-D Point Cloud Classification, D. Munoz, N. Vandapel and M. Hebert, Fourth International Symposium on 3D Data Processing, Visualization and Transmission, June (2008)Directional Associative Markov Network for 3-D Point Cloud Classification, D. Munoz, N. Vandapel and M. Hebert, Fourth International Symposium on 3D Data Processing, Visualization and Transmission, June (2008)

前述したように、従来技術である主成分分析を用いた個々の点の形状推定技術では、オクルージョンや架線位置が測定器から離れていて測定密度が低い場合や、複数の架線が密集している場合には架線の検出精度が低くなるという問題がある。また、共分散行列を求めているため、注目点とは異なる位置での点群形状および接線方向を求めており、推定精度の低下が生じるという問題もある。   As described above, in the conventional technique for estimating the shape of individual points using principal component analysis, the occlusion and overhead line positions are far from the measuring device and the measurement density is low, or a plurality of overhead lines are dense. In such a case, there is a problem that the detection accuracy of the overhead line is lowered. Further, since the covariance matrix is obtained, the point cloud shape and the tangential direction at a position different from the point of interest are obtained, and there is a problem that the estimation accuracy is lowered.

本発明は、このような事情に鑑みてなされたもので、得られた3次元点群を解析することによって線状物体を精度良く検出することができる点群解析装置、点群解析方法及び点群解析プログラムを提供することを目的とする。   The present invention has been made in view of such circumstances, and a point group analysis apparatus, a point group analysis method, and a point that can accurately detect a linear object by analyzing the obtained three-dimensional point group The purpose is to provide a group analysis program.

本発明は、3次元点群データを取得する3次元点群取得手段と、前記3次元点群データのひとつを注目点とし、該注目点と一定の距離以下にある点を周囲点とし、該注目点に対する該周囲点の重要度を算出し、該注目点について該重要度を用いた重み付き自己相関行列を算出する自己相関行列算出手段と、前記自己相関行列の固有値を要素とする固有値特徴ベクトルを算出する特徴ベクトル算出手段と、前記固有値特徴ベクトルを用いて前記注目点が線状物体を構成するか否かを判定する識別手段とを具備することを特徴とする。   The present invention provides a three-dimensional point cloud acquisition means for acquiring three-dimensional point cloud data, one of the three-dimensional point cloud data as a point of interest, and a point within a certain distance from the point of interest as a surrounding point, An autocorrelation matrix calculating means for calculating the importance of the surrounding points with respect to the attention point, calculating a weighted autocorrelation matrix using the importance for the attention point, and an eigenvalue feature having eigenvalues of the autocorrelation matrix as elements It is characterized by comprising: a feature vector calculating means for calculating a vector; and an identifying means for determining whether or not the point of interest constitutes a linear object using the eigenvalue feature vector.

本発明は、前記重要度は、各周囲点の近傍領域内の点群の分布の広がりが広い方向に前記注目点が存在する場合に値が大きくなることを特徴とする。   The present invention is characterized in that the importance is increased when the point of interest exists in a direction in which the distribution of the point group in the vicinity region of each surrounding point is wide.

本発明は、前記重要度は、前記注目点と各周囲点とを結んだ直線を中心とする帯上に、広範囲に点群が存在する場合に値が大きくなることを特徴とする。   The present invention is characterized in that the importance value increases when a point group exists in a wide range on a band centering on a straight line connecting the attention point and each surrounding point.

本発明は、前記識別手段は、最大固有値が所定の閾値を超えるか否かに基づいて、前記注目点が線状物体を構成するか否かを判定することを特徴とする。   The present invention is characterized in that the identifying means determines whether or not the point of interest constitutes a linear object based on whether or not the maximum eigenvalue exceeds a predetermined threshold value.

本発明は、前記識別手段は、前記特徴ベクトルと辞書ベクトルとの距離を比較し、距離が近い辞書ベクトルを持つ物体を前記注目点が所属する物体であると判定することにより、前記注目点が線状物体を構成するか否かを判定することを特徴とする。   In the present invention, the identification unit compares the distance between the feature vector and the dictionary vector, and determines that an object having a dictionary vector with a close distance is an object to which the attention point belongs, so that the attention point is It is characterized by determining whether to comprise a linear object.

本発明は、3次元点群データを取得する3次元点群取得手段を備える点群解析装置が行う点群解析方法であって、前記3次元点群データのひとつを注目点とし、該注目点と一定の距離以下にある点を周囲点とし、該注目点に対する該周囲点の重要度を算出し、該注目点について該重要度を用いた重み付き自己相関行列を算出する自己相関行列算出ステップと、前記自己相関行列の固有値を要素とする固有値特徴ベクトルを算出する特徴ベクトル算出ステップと、前記固有値特徴ベクトルを用いて前記注目点が線状物体を構成するか否かを判定する識別ステップとを有することを特徴とする。   The present invention is a point cloud analysis method performed by a point cloud analysis apparatus including a 3D point cloud acquisition unit for acquiring 3D point cloud data, wherein one of the 3D point cloud data is used as a target point, and the target point And a point below a certain distance as a surrounding point, calculating the importance of the surrounding point relative to the point of interest, and calculating a weighted autocorrelation matrix using the degree of importance for the point of interest A feature vector calculation step of calculating an eigenvalue feature vector having the eigenvalue of the autocorrelation matrix as an element, and an identification step of determining whether or not the point of interest constitutes a linear object using the eigenvalue feature vector; It is characterized by having.

本発明は、コンピュータを、前記点群解析装置として機能させるための点群解析プログラムである。   The present invention is a point cloud analysis program for causing a computer to function as the point cloud analysis device.

本発明によれば、得られた3次元点群から高精度に線状物体を検出することができるという効果が得られる。特に、従来技術では困難であった、複数の線状物体が平行して密集している点群やねじれの位置で交差している線状物体がある場合でも、線状物体を構成する点の検出を行うことができる。   According to the present invention, there is an effect that a linear object can be detected with high accuracy from the obtained three-dimensional point group. In particular, even in the case where there is a point group in which a plurality of linear objects are densely arranged in parallel or a linear object intersecting at a twisted position, which is difficult with the prior art, Detection can be performed.

本発明の第1の実施形態の構成を示すブロック図である。It is a block diagram which shows the structure of the 1st Embodiment of this invention. 図1に示すワイヤ構成点検出装置100(ワイヤ構成点特徴抽出手段105、ワイヤ構成点判定手段106)の動作を示すフローチャートである。2 is a flowchart showing the operation of the wire composing point detection apparatus 100 (wire composing point feature extracting means 105, wire composing point determining means 106) shown in FIG. 図9における注目点pおよび処理対象点群の拡大図である。FIG. 10 is an enlarged view of a point of interest pi and a processing target point group in FIG. 9. 注目点pから半径R内の点群を示す図である。From the point of interest p i is a diagram showing a point group in the radius R. ワイヤ構成点特徴抽出手段105が頻度分布Hを求める動作を示すフローチャートである。It is a flowchart which shows the operation | movement which the wire constituent point feature extraction means 105 calculates | requires frequency distribution Hq . 頻度分布の作成例を示す説明図である。It is explanatory drawing which shows the creation example of frequency distribution. 点pがある物体の曲面上に存在する場合(A)と、ワイヤ上に存在する場合(B)の重みの分布の違いを示す図である。It is a figure which shows the difference in weight distribution when the point p i exists on the curved surface of the object (A) and when it exists on the wire (B). 点群密度と架線(ワイヤ)の直線近似精度を示す説明図である。It is explanatory drawing which shows the point group density and the linear approximation precision of an overhead wire (wire). 電柱及び電柱間の架線(ワイヤ)の測定結果の一例を示す説明図である。It is explanatory drawing which shows an example of the measurement result of the overhead wire (wire) between utility poles.

<第1実施形態>
以下、図面を参照して、本発明の第1実施形態による点群解析装置を説明する。本実施形態では、大規模な3次元点群の中から線状物体(ワイヤ)に属する点群を検出すると同時に検出した点(ワイヤ構成点)における接線方向を算出する。以下の説明では、具体的な例としてレーザレンジファインダにより取得した位置情報(3次元座標)を持つ点群を用いた線状物体を構成する点群(ワイヤ構成点群)を解析する点群解析装置について説明する。ここで、3次元とは緯度、経度、海抜(高さ)情報でもよいし、ユーザーが設定した特定の位置を原点とした3次元ユークリッド座標系でも極座標系でもよい。以下の説明では、ユーザーが設定をした原点における3次元ユークリッド座標系(各方向をX,Y,Z座標とする)を想定し、各座標の単位はメートルとする。3次元点とは、各点に上記の3次元座標およびその点群が撮影された時刻やレーザの反射強度などの計測情報、その点の属性情報が付与されている点という意味である。3次元点に付与される情報に特に制限はないが、少なくとも位置情報(X,Y,Z座標)は付与されたものであり、3次元点群とはその点が複数集まったものである。
<First Embodiment>
Hereinafter, a point cloud analyzer according to a first embodiment of the present invention will be described with reference to the drawings. In this embodiment, a point group belonging to a linear object (wire) is detected from a large-scale three-dimensional point group, and at the same time, a tangent direction at the detected point (wire composing point) is calculated. In the following description, as a specific example, a point group analysis for analyzing a point group (wire constituent point group) constituting a linear object using a point group having position information (three-dimensional coordinates) acquired by a laser range finder The apparatus will be described. Here, the three-dimensional information may be latitude, longitude, sea level (height) information, or a three-dimensional Euclidean coordinate system or a polar coordinate system with a specific position set by the user as the origin. In the following description, a three-dimensional Euclidean coordinate system at the origin set by the user (each direction is assumed to be an X, Y, Z coordinate) is assumed, and the unit of each coordinate is meter. The term “three-dimensional point” means that each point is given measurement information such as the time when the above-mentioned three-dimensional coordinates and the group of points are photographed, the reflection intensity of the laser, and the attribute information of the point. There is no particular limitation on the information given to the three-dimensional point, but at least position information (X, Y, Z coordinates) is given, and the three-dimensional point group is a collection of a plurality of points.

次に、同実施形態による点群解析装置の構成を説明する。図1は同実施形態の構成を示すブロック図である。符号100は、コンピュータ装置で構成するワイヤ構成点検出装置である。符号101は、レーザレンジファインダや赤外線センサまたは超音波センサなどで構成し、被写体までの距離を測定する被写体測定手段である。被写体測定手段101は、例えば、レーザレンジファインダをGPS(Global Positioning System)が搭載された車両の上もしくはGPSの搭載された飛行機に搭載し、移動しながら計測することで街中の建物や架線、道路など不特定多数の被写体の3次元位置を計測する装置である。道路周辺の柱状物体検出ではなくて、ある特定の位置(交差点など)におけるワイヤ物体の検出であれば、1箇所からの計測でよいのでGPSが必ずしも搭載している必要はない。本実施形態では、被写体計測手段101として、車上にGPSとレーザレンジファインダが搭載されているMMS(Mobile Mapping System)を想定している。   Next, the configuration of the point group analysis apparatus according to the embodiment will be described. FIG. 1 is a block diagram showing the configuration of the embodiment. Reference numeral 100 denotes a wire composing point detecting device configured by a computer device. Reference numeral 101 denotes a subject measurement unit that is configured by a laser range finder, an infrared sensor, an ultrasonic sensor, or the like and measures the distance to the subject. The subject measuring means 101 is equipped with, for example, a laser range finder on a vehicle equipped with a GPS (Global Positioning System) or on an airplane equipped with a GPS, and by measuring while moving, buildings, overhead lines, roads in the city This is a device that measures the three-dimensional position of an unspecified number of subjects. If the detection is not a columnar object around the road but a wire object at a specific position (such as an intersection), the measurement need only be performed from one location, and the GPS does not necessarily have to be mounted. In the present embodiment, it is assumed that the subject measuring unit 101 is an MMS (Mobile Mapping System) in which a GPS and a laser range finder are mounted on a vehicle.

符号102は、ワイヤ構成点検出装置100で必要なパラメータを入力するパラメータ入力手段である。パラメータ入力手段102は、例えばキーボードやマウス、タッチ入力装置などのユーザーインタフェースや、DVD(Digital Versatile Disc)やUSB(Universal Serial Bus)メモリ等の外部記憶装置からのパラメータデータの転送装置である。   Reference numeral 102 denotes parameter input means for inputting parameters necessary for the wire composing point detection apparatus 100. The parameter input means 102 is a parameter data transfer device from a user interface such as a keyboard, mouse, or touch input device, or from an external storage device such as a DVD (Digital Versatile Disc) or USB (Universal Serial Bus) memory.

符号103は、被写体測定手段101が測定したレーザの反射強度や3次元位置情報、撮影時刻などの測定データを記憶する3次元点群記憶手段である。符号104は、パラメータ入力手段102によって入力したパラメータを記憶するパラメータ記憶手段である。パラメータとは、識別手法に用いるパラメータであり、例えば閾値や識別器に入力する値である。3次元点群記憶手段103とパラメータ記憶手段104は、例えばHDD(Hard Disk Drive)やSSD(Solid State Drive)等のハードウェアによる記憶装置であり、同一でも別々のハードウェアでもよい。   Reference numeral 103 denotes a three-dimensional point group storage unit that stores measurement data such as laser reflection intensity, three-dimensional position information, and photographing time measured by the subject measurement unit 101. Reference numeral 104 denotes parameter storage means for storing parameters input by the parameter input means 102. The parameter is a parameter used for the identification method, for example, a threshold value or a value input to the classifier. The three-dimensional point cloud storage unit 103 and the parameter storage unit 104 are hardware storage devices such as HDD (Hard Disk Drive) and SSD (Solid State Drive), and may be the same or different hardware.

符号105は、3次元点群記憶手段103から処理対象となる3次元座標内の3次元点群を読み出し、3次元点全てに対してワイヤ構成点であるか判定するための特徴の抽出処理を行うワイヤ構成点特徴抽出手段である。符号106は、ワイヤ構成点特徴抽出手段105が出力する結果およびパラメータ記憶手段104からパラメータを取得し、各点についてワイヤ構成点であるか識別処理を行うワイヤ構成点判定手段である。符号107は、ワイヤ構成点判定手段106の結果を取得し、ワイヤ構成点と判定された点について、接線方向の付与およびパラメータ記憶手段104から取得したワイヤ固有の属性番号へ属性を変更するワイヤ構成点情報付与手段である。属性情報とは、建物、地面、ワイヤ、樹木などに対して、ユーザがあらかじめ設定する物体固有の番号である。   Reference numeral 105 reads out a three-dimensional point group in the three-dimensional coordinates to be processed from the three-dimensional point group storage unit 103, and performs a feature extraction process for determining whether all three-dimensional points are wire constituent points. This is a wire constituent point feature extraction means to be performed. Reference numeral 106 denotes a wire composing point determination unit that obtains a parameter output from the result output from the wire composing point feature extracting unit 105 and the parameter storage unit 104 and identifies whether each point is a wire composing point. Reference numeral 107 denotes a wire configuration that acquires the result of the wire configuration point determination unit 106 and changes the attribute to the wire-specific attribute number acquired from the tangential direction assignment and parameter storage unit 104 for the point determined as the wire configuration point This is point information giving means. The attribute information is an object-specific number preset by the user for a building, ground, wire, tree, or the like.

符号108は、3次元点群が付与されている情報をアスキーコードなどのテキストデータやバイナリデータに変換し、そのデータをディスプレイ表示用の映像信号として出力する3次元点群出力手段である。付与されている情報とは、各点の3次元位置座標やレーザの反射強度、属性、接線方向、測定時刻などである。符号109は、ディスプレイ装置で構成する表示手段である。表示手段109は、例えば、CRT(Cathode Ray Tube)、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)等で構成する。   Reference numeral 108 denotes a three-dimensional point cloud output means for converting information to which a three-dimensional point cloud is assigned into text data such as ASCII code or binary data and outputting the data as a video signal for display display. The given information includes the three-dimensional position coordinates of each point, the reflection intensity of the laser, the attribute, the tangential direction, the measurement time, and the like. Reference numeral 109 denotes a display unit configured by a display device. The display means 109 is composed of, for example, a CRT (Cathode Ray Tube), an LCD (Liquid Crystal Display), a PDP (Plasma Display Panel), or the like.

次に、図2を参照して、図1に示すワイヤ構成点検出装置100の動作を説明する。図2は、図1に示すワイヤ構成点検出装置100(ワイヤ構成点特徴抽出手段105、ワイヤ構成点判定手段106)の動作を示すフローチャートである。ここでは、3次元点群記憶手段103には、3次元点群のデータが記憶されており、パラメータ記憶手段104には、パラメータが記憶されているものとして説明する。   Next, the operation of the wire composing point detection apparatus 100 shown in FIG. 1 will be described with reference to FIG. FIG. 2 is a flowchart showing the operation of the wire composing point detection apparatus 100 (wire composing point feature extracting means 105, wire composing point determining means 106) shown in FIG. Here, it is assumed that the 3D point cloud storage unit 103 stores 3D point cloud data and the parameter storage unit 104 stores parameters.

まず、ワイヤ構成点特徴抽出手段105は、3次元点群記憶手段103から点群データを入力する(ステップS1)。図9(A)は電柱および電柱間の架線を表現した図である。図9(B)は、この電柱および電柱間の架線をレーザレンジファインダにより測定して得られた3次元点群を表現した図である。3次元点群において、図9(B)示すような右手系のX,Y,Z座標系を適用する。全ての3次元点について以下の処理を独立して行う。注目点pの区別する番号をiで表示し、全点群の数をIとすると、各点pについて独立してステップS2〜S4の処理を行う。 First, the wire constituent point feature extraction unit 105 inputs point cloud data from the three-dimensional point cloud storage unit 103 (step S1). FIG. 9A is a diagram expressing the utility poles and the overhead lines between the utility poles. FIG. 9B is a diagram expressing a three-dimensional point group obtained by measuring the utility pole and the overhead line between the utility poles with a laser range finder. In the three-dimensional point group, a right-handed X, Y, Z coordinate system as shown in FIG. 9B is applied. The following processing is performed independently for all three-dimensional points. When the number for distinguishing the point of interest p is represented by i and the number of all point groups is I, the processing of steps S2 to S4 is performed independently for each point p i .

ワイヤ構成点特徴抽出手段105は、注目点pにおける重み付き自己相関行列を算出する(ステップS2)。まず、点pから半径R以内の点q(j∈1,2,3..,N)を処理対象点群として設定する。ここで、Nは半径R以内の点の総数、jは処理対象点の各点を区別するための番号である。点pに対する点qの重要度をwとすると、(1)式、(2)式、(3)式により重み付き自己相関行列Pを求める。

Figure 0005870011
Figure 0005870011
Figure 0005870011
Wire Configuration feature point extracting unit 105 calculates the weighted autocorrelation matrix at the point of interest p i (step S2). First, a point q j (jε1, 2, 3,..., N) within a radius R from the point p i is set as a processing target point group. Here, N is the total number of points within the radius R, and j is a number for distinguishing each of the points to be processed. When the importance of the point q j with respect to the point p i is w j , the weighted autocorrelation matrix P is obtained by the equations (1), (2), and (3).
Figure 0005870011
Figure 0005870011
Figure 0005870011

ここで、‖q−p‖は点qと点Pのユークリッド距離(ベクトルq−pの2ノルム)であり、(3)式の「・」はベクトルの内積である。uは点qから半径r以内の点q(m∈1,2,3,...,M)について、点qを基準とした自己相関行列Qを固有値展開して求めた固有ベクトルであり、δ はQの固有値(δ >δ >δ )である。Mを点qから半径r以内の距離の点群の数とすると、qを基準としたQは(4)式で求める。

Figure 0005870011
Here, ‖q j −p iユ ー is the Euclidean distance (two norms of the vector q j −p i ) between the point q j and the point P i , and “·” in the equation (3) is an inner product of the vectors. u l point from the point q j within a radius of r is q m (m∈1,2,3, ..., M ) for to determine the autocorrelation matrix Q relative to the point q j by eigenvalue expansion eigenvectors Δ k 2 is the eigenvalue of Q (δ 1 2 > δ 2 2 > δ 3 2 ). When M is the number of point groups having a distance within a radius r from the point q j , Q based on q j is obtained by equation (4).
Figure 0005870011

ここでは点qが点pと同一ワイヤ上に属する場合には、ベクトル(q−p)の方向が他の方向に比べて相対的に多くの点群が存在すると仮定している。すなわち、点q周辺の点群の分散方向を考慮することで、点pと点qが同一物体上にある可能性を考慮できる。(4)式で求めた固有値と固有ベクトルを用いたマハラノビス距離MLとベクトル(q−p)の距離の比率を、方向(q−p)に対する重要度(重みw)とする。 Here, when the point q j belongs to the same wire as the point p i , it is assumed that the direction of the vector (q j −p i ) has a relatively larger number of point groups than the other directions. . That is, by considering the dispersion direction of the point group near the point q j, it can be considered the possibility that the point p i and the point q j is on the same object. The importance ratio (weight w j ) for the direction (q j −p i ) is the ratio of the Mahalanobis distance ML using the eigen value and the eigen vector determined by the equation (4) to the distance between the vector (q j −p i ).

図3は、図9における注目点pおよび処理対象点群の拡大図である。図3(B)に示す例では、点q,点qについての点群の分散と第1固有ベクトル(最も分散が大きい方向)が示してある。2点を比べた場合、点qの第1固有ベクトルがベクトル(q−p)と成す角度が小さいため重みwが重みwより大きくなり、点qを同一物体上にある点として考慮できる。これにより、半径R以内の処理対象領域に注目点が所属しないワイヤが存在するときも、その異なるワイヤの方向の点の重要度を抑えられるために、推定精度を向上できる。 FIG. 3 is an enlarged view of the attention point p i and the processing target point group in FIG. 9. In the example shown in FIG. 3B, the dispersion of the point group and the first eigenvector (the direction in which the dispersion is the largest) for the points q 1 and q 2 are shown. When two points are compared, since the angle formed by the first eigenvector of the point q 2 and the vector (q j −p i ) is small, the weight w 2 is larger than the weight w 1 , and the point q 2 is on the same object Can be considered as. Thereby, even when there is a wire to which the target point does not belong in the processing target area within the radius R, the importance of the point in the direction of the different wire can be suppressed, so that the estimation accuracy can be improved.

パラメータrと半径Rは実験的に決めるものであり、ここではr=0.2,R=0.5とした。rを大きくすることで密度が低い点群についても推定精度が高まるが、rを大きくすると注目点が所属しないワイヤまで含む可能性も高くなり、推定時のノイズの影響が生じる。具体的には、rは異なるワイヤ間の最短距離もしくは平均距離を使うことが望ましい。   The parameter r and the radius R are determined experimentally. Here, r = 0.2 and R = 0.5. Increasing r increases the estimation accuracy even for a point group having a low density. However, increasing r increases the possibility of including a wire to which the point of interest does not belong, resulting in the influence of noise during estimation. Specifically, r is preferably the shortest distance or the average distance between different wires.

次に、ワイヤ構成点特徴抽出手段105は、自己相関行列Pを固有値展開して、固有値特徴量λ,λ,λ(λ>λ>λ)を算出する(ステップS3)。以降、固有値要素を縦に並べたベクトル[λ,λ,λを特徴ベクトルとし、固有値特徴ベクトルと呼ぶ。また、このとき算出した第1固有ベクトルuを点pにおける接線方向とする。 Next, the wire composing point feature extraction unit 105 expands the eigenvalues of the autocorrelation matrix P to calculate eigenvalue feature quantities λ 1 , λ 2 , λ 31 > λ 2 > λ 3 ) (step S3). . Hereinafter, a vector [λ 1 , λ 2 , λ 3 ] T in which eigenvalue elements are vertically arranged is referred to as a feature vector and is referred to as an eigenvalue feature vector. Further, the first eigenvector u 1 calculated at this time is set as the tangential direction at the point p i .

次に、ワイヤ構成点判定手段106は、固有値特徴量を用いて各点pの物体識別処理を行う(ステップS4)。最も簡単な処理方法は(5)式による閾値処理である。

Figure 0005870011
閾値Vthは実験的に決めるパラメータであり、閾値Vth以上の点をワイヤ構成点と判定する。ただし、閾値Vthは0〜1の値をとり、ここではVth=0.9とした。そして、ワイヤ構成点判定手段106は、物体識別結果を出力する(ステップS5)。 Then, the wire constituting point determination unit 106 performs the object identification processing of each point p i using eigenvalue feature quantity (step S4). The simplest processing method is threshold processing according to equation (5).
Figure 0005870011
The threshold value Vth is a parameter determined experimentally, and a point equal to or higher than the threshold value Vth is determined as a wire constituent point. However, the threshold value Vth takes a value of 0 to 1, and here, Vth = 0.9. Then, the wire composing point determination means 106 outputs the object identification result (step S5).

また、図9(B)の点p’のように半径R内に複数のワイヤが存在する場合、ノイズが影響して(1)式の第1固有値が小さくなる傾向がある。そこで、第1固有値以外の固有値情報も含めた判定処理を行う。具体的には、ワイヤおよびワイヤ以外の物体がどういった固有値の組み合わせになるか、事前に辞書ベクトルとして登録し、ニアレスト・ネイバー(NN)法やk−NN法、SVM法などのパターンマッチングによる識別を行うことで閾値処理よりも頑健な判定が行える。   Further, when there are a plurality of wires within the radius R as indicated by a point p ′ in FIG. 9B, there is a tendency that the first eigenvalue of the equation (1) becomes small due to noise. Therefore, a determination process including eigenvalue information other than the first eigenvalue is performed. Specifically, the eigenvalue combination of the wire and the object other than the wire is registered in advance as a dictionary vector, and pattern matching such as the nearest neighbor (NN) method, the k-NN method, and the SVM method is used. By performing the identification, a determination that is more robust than the threshold processing can be performed.

本実施形態では、NN法を用いたワイヤ構成点の識別方法について説明する。ワイヤ(クラス1)およびそれ以外の物体(クラス2)に属する点群について、(1)式の自己相関行列Pから固有値を求める。次に、クラス1およびクラス2それぞれの点群について、特徴ベクトルf{c}=[λ,λ,λ(class∈1,2)求める。点pの特徴ベクトルをfpi、各クラスに対する尤度をsim(f,c)、各クラスに属する点群を区別する番号をそれぞれt(c∈1,2)とすると、識別関数F(f)は(6)式、(7)式で求まる。

Figure 0005870011
Figure 0005870011
In the present embodiment, a method for identifying wire composing points using the NN method will be described. Eigenvalues are obtained from the autocorrelation matrix P of the equation (1) for the point group belonging to the wire (class 1) and the other object (class 2). Next, feature vectors f {c} = [λ 1 , λ 2 , λ 3 ] T (classε1,2) are obtained for the point cloud of class 1 and class 2. If the feature vector of the point p i is f pi , the likelihood for each class is sim (f, c), and the numbers that distinguish the points belonging to each class are t c (cε1,2), respectively, the discriminant function F (F) can be obtained by equations (6) and (7).
Figure 0005870011
Figure 0005870011

ここで、(7)式のsimは点pにおける特徴ベクトルfpiと各クラスの辞書ベクトルとの最短距離を尤度として出力する。識別関数Gは、クラス1、クラス2について、注目点pの特徴ベクトルfpiと各クラスの辞書ベクトルについて、各クラスの辞書ベクトルの最短距離を比較して距離が小さい方のクラス番号を出力する関数である。本実施形態においては、ワイヤおよびそれ以外の2クラス識別について説明したが、ワイヤ、建物、木、車、電柱など複数の物体(クラス)でも、同様の処理を適用することで識別が可能である。 Here, sim in the equation (7) outputs the shortest distance between the feature vector f pi at the point p i and the dictionary vector of each class as a likelihood. The discriminant function G compares the shortest distance of the dictionary vector of each class and outputs the class number of the smaller distance for the class 1 and class 2 for the feature vector f pi of the point of interest p i and the dictionary vector of each class. Function. In this embodiment, the wire and the other two-class identification have been described, but a plurality of objects (classes) such as a wire, a building, a tree, a car, and a utility pole can be identified by applying the same processing. .

<第2実施形態>
次に、本発明の第2実施形態による点群解析装置を説明する。第2実施形態における装置構成は、図1に示す装置構成と同じであるため、ここでは詳細な説明を省略する。第2実施形態においては、図2に示す処理動作のうち、ステップS2の処理が異なり、図2に示すステップS2以外の処理動作は同じである。第2実施形態におけるステップS2において、点p対する点qの重要度wを、点pと点qを結んだ直線から距離Δd以内に存在する点の分布の領域により求める。図4は、注目点pから半径R内の点群を示す図である。図4(B)に示すように、点Pと点qを結ぶ直線からΔd離れた2本の平行線内に存在する点の分布から重要度wを求める。また、図4(C)に示すように、点Pと点qを結ぶ直線からΔd離れた2本の平行線内に存在する点の分布から重要度Wを求める。
Second Embodiment
Next, a point cloud analysis device according to a second embodiment of the present invention will be described. Since the apparatus configuration in the second embodiment is the same as the apparatus configuration shown in FIG. 1, detailed description thereof is omitted here. In the second embodiment, among the processing operations shown in FIG. 2, the processing in step S2 is different, and the processing operations other than step S2 shown in FIG. 2 are the same. In step S2 in the second embodiment, the importance w j of the point p i against point q j, determined by the area of the distribution of points existing within a distance Δd from a straight line connecting the points p i and the point q j. FIG. 4 is a diagram showing a point group within the radius R from the point of interest p i . As shown in FIG. 4B, the importance w i is obtained from the distribution of points existing in two parallel lines separated by Δd from the straight line connecting the points P i and q 1 . Also, as shown in FIG. 4C, the importance W i is obtained from the distribution of points existing in two parallel lines separated by Δd from the straight line connecting the points P i and q 2 .

ワイヤ構成点特徴抽出手段105は、第2実施形態のステップS2において、点の分布を調べるために、まず点pと点qの作る直線上の点の頻度分布Hを作成する。処理対象領域内の点をqと区別がつくように点s(k∈1,2,..,K)と表記し、点sと直線(p,q)との距離をD(s)とし、Δhは直線(q,p)を離散的に分割する値(パラメータ)である。頻度分布のビンをbinで表す。Δd,Δhは実験的に決めるパラメータであり、ここではΔh=0.03(M),Δd=0.06(M)とした。 Wire Configuration feature point extraction unit 105, in step S2 of the second embodiment, in order to examine the distribution of points, first create a frequency distribution H q points on a straight line to make the point p i and the point q j. Processed point a point in the area so can be distinguished and q j s K (k∈1,2, .. , K) is expressed as the point s K and the straight line (p i, q j) the distance between the D (s K ), and Δh is a value (parameter) for dividing the straight line (q j , p i ) discretely. The bin of the frequency distribution is represented by bin. Δd and Δh are parameters determined experimentally. Here, Δh = 0.03 (M) and Δd = 0.06 (M).

ここで、図5を参照して、ワイヤ構成点特徴抽出手段105が頻度分布Hを求める動作を説明する。図5は、ワイヤ構成点特徴抽出手段105が頻度分布Hを求める動作を示すフローチャートである。まず、ワイヤ構成点特徴抽出手段105は、頻度分布Hの総和が0になるように初期化した後(ステップS11)、処理対象領域内の全点s(k∈1,2,..,N)を用いて、頻度分布Hのを求める(ステップS12〜S16)。 Here, with reference to FIG. 5, an operation in which the wire composing point feature extracting unit 105 obtains the frequency distribution Hq will be described. FIG. 5 is a flowchart showing an operation in which the wire composing point feature extracting unit 105 obtains the frequency distribution Hq . First, the wire composing point feature extracting unit 105 initializes the sum of the frequency distributions H q to be 0 (step S11), and then sets all points s k (kε1, 2,. , with N), determined from the frequency distribution H q (step S12 to S16).

ワイヤ構成点特徴抽出手段105は、D(s)とL(s)を算出し(ステップS13)、L(s)からbin(s)を算出する(ステップS14)。続いて、ワイヤ構成点特徴抽出手段105は、Gd(D(s))>0のとき、H(bin)←H(bin)+1とする(ステップS15)。そして、ワイヤ構成点特徴抽出手段105は、求めた頻度分布Hを出力する(ステップS17)。この処理によって、頻度分布Hが求まることになる(図6参照)。図6は、頻度分布Hの作成例を示す図である。 The wire composing point feature extraction unit 105 calculates D (s k ) and L (s k ) (step S13), and calculates bin (s k ) from L (s k ) (step S14). Subsequently, the wire composing point feature extracting unit 105 sets H q (bin) ← H q (bin) +1 when Gd (D (s k ))> 0 (step S15). Then, the wire configuration feature point extraction unit 105 outputs the frequency distribution H q determined (step S17). By this process, the frequency distribution Hq is obtained (see FIG. 6). FIG. 6 is a diagram illustrating an example of creating the frequency distribution Hq .

図5に示す処理動作を式で表すと、(8)式、(9)式、(10)式となる。

Figure 0005870011
Figure 0005870011
Figure 0005870011
The processing operation shown in FIG. 5 is expressed by equations (8), (9), and (10).
Figure 0005870011
Figure 0005870011
Figure 0005870011

ここで、関数Gは距離D((s))が閾値Δd以下であれば1を出力する関数であり、関数ceilは、入力した値を小数点以下で切り捨てた値を出力する関数であり、ヒストグラムのビン(bin)の値の範囲は処理対象点群qを(9)式に入力したときの最小値から最大値の範囲である。距離D(s)と変数L(s)は(11)式、(12)式、(13)式によって求まる。

Figure 0005870011
Figure 0005870011
Figure 0005870011
ただし、‖・‖はベクトルの2ノルムを表し、θは点sと直線(q,p)との成す角を表している。 Here, the function G d is a function that outputs 1 if the distance D ((s K )) is less than or equal to the threshold value Δd, and the function ceil is a function that outputs a value obtained by rounding down the input value to the decimal point. The range of the bin value of the histogram is the range from the minimum value to the maximum value when the processing target point group q j is input to the equation (9). The distance D (s K ) and the variable L (s K ) are obtained by the equations (11), (12), and (13).
Figure 0005870011
Figure 0005870011
Figure 0005870011
Here, ‖ / ‖ represents the 2-norm of the vector, and θ represents the angle formed by the point s K and the straight line (q j , p i ).

次に、ワイヤ構成点特徴抽出手段105は、この頻度分布Hを用いて、(q−p)の方向の重要度wを(14)式、(15)式によって計算する。

Figure 0005870011
Figure 0005870011
Next, the wire composing point feature extraction means 105 uses the frequency distribution H q to calculate the importance w j in the direction of (q j −p i ) using the equations (14) and (15).
Figure 0005870011
Figure 0005870011

図7は、点pがある物体の曲面上に存在する場合(図7(A))と、ワイヤ上に存在する場合(図7(B))の重みの分布の違いを示す図である。図7(A)のときと比べて、点pワイヤに属する場合(図7(B))には、点の分布の偏りから特定の方向(q,p)の存在する点の方向の重みが突出して大きくなる。一方、曲面上に存在する点pについては、様々な方向の重みが大きくなる傾向がある。よって、3次元空間において特定の方向に重みのピークがあるか判定することで、注目点pがワイヤ上にあるか否か判定できる。 FIG. 7 is a diagram illustrating a difference in weight distribution between the case where the point p i exists on the curved surface of the object (FIG. 7A) and the case where the point p i exists on the wire (FIG. 7B). . Compared to the case of FIG. 7A, in the case of belonging to the point pi wire (FIG. 7B), the direction of the point where the specific direction (q 3 , p i ) exists due to the distribution of the point distribution The weight of the projecting increases. On the other hand, for the points p i existing on the curved surface, weights in various directions tend to increase. Therefore, by determining whether there is a weight peak in a specific direction in the three-dimensional space, it can be determined whether or not the point of interest p i is on the wire.

このピークの有無を、重みwを用いた自己相関行列を用いることで判定する。注目点pがワイヤ状にある場合、図7(B)のように特定の方向の重みが大きくなるので、自己相関行列も特定の方向の成分が大きくなり、自己相関行列を固有値展開したときに第1固有値のみが大きくなる。つまり、多数の(q,p)の方向の重みを調べなくても、第一固有値が(5)式の閾値より大きいか否かを調べるだけで、ピークがあるか否かを調べることができる。また、特定の方向の重みが大きくなるという性質を利用して、閾値処理により点pと同一のワイヤ上にない点qの重み係数を0にしてから固有値展開することで、接線方向の推定精度を向上することもできる。例えば、図7(B)のようにピーク値の半分以下の値は0にするような閾値Twを設定してもよい。これにより、閾値Twよりも低い重要度の点については点pと同一ワイヤ上にない点と考え、自己相関行列に加算せず、結果としてピーク有無の判定に影響を与えないようにできる。(14)式の重みを用いて、重み付き自己相関行列Pは(1)式によって求まる。 The existence of this peak is determined by using an autocorrelation matrix using the weights w j. When the point of interest p i is in the shape of a wire, the weight in a specific direction becomes large as shown in FIG. 7B, so that the autocorrelation matrix also has a component in a specific direction, and the eigenvalue expansion of the autocorrelation matrix Only the first eigenvalue increases. That is, whether or not there is a peak is determined by checking whether or not the first eigenvalue is larger than the threshold value of the expression (5) without checking the weights in the direction of many (q j , p i ). Can do. Further, by utilizing the property that the weight in a specific direction becomes large, the eigenvalue expansion is performed after the weighting coefficient of the point q j not on the same wire as the point p i is set to 0 by the threshold processing, so that the tangential direction The estimation accuracy can also be improved. For example, as shown in FIG. 7B, a threshold value Tw may be set such that a value less than half of the peak value is zero. Thus, consider a point not on the same wire and the point p i is a point on the less important than the threshold value Tw, without adding to the autocorrelation matrix, as a result it so as not to affect the determination of the peak existence. The weighted autocorrelation matrix P is obtained by the equation (1) using the weight of the equation (14).

以上説明したように、従来の注目点の識別技術では、注目点からある一定距離内(処理対象領域)の点群を用いて主成分分析を行い、その固有値を用いて点が属する物体の識別を行っていた。これに対して、本実施形態では、注目点と関係性の高い点の方向を重要視した自己相関行列を用いて、注目点の属する物体識別を行う。具体的には、注目点と同一物体に属すると推定される点の方向の重みを大きくした重み付き自己相関行列を算出する。次に、この自己相関行列から固有値と固有ベクトルとを求める。重みを適切に求めることで、注目点と同一でない3次元物体の点の影響を小さくすることができ、処理対象領域を大きくしても安定してワイヤかそれ以外の物体か識別が可能となる。   As described above, in the conventional attention point identification technology, principal component analysis is performed using a point group within a certain distance (processing target region) from the attention point, and the object to which the point belongs is identified using its eigenvalue. Had gone. On the other hand, in the present embodiment, an object to which the attention point belongs is identified using an autocorrelation matrix that places importance on the direction of the point highly related to the attention point. Specifically, a weighted autocorrelation matrix is calculated by increasing the weight in the direction of a point estimated to belong to the same object as the target point. Next, eigenvalues and eigenvectors are obtained from the autocorrelation matrix. By appropriately obtaining the weight, the influence of the point of the three-dimensional object that is not the same as the target point can be reduced, and even if the processing target area is enlarged, it is possible to stably identify whether the object is a wire or other object. .

これにより、3次元点群から放物線や直線など細長い形状の物体(ワイヤ)を構成する点とその構成点の接線方向を算出する際に、測定結果に計測ノイズがある場合や計測密度が疎である場合、また複数のワイヤが近接している場合においてもワイヤ構成点の検出と各構成点の接線方向を高精度に算出することができる。   As a result, when calculating the points that make up an elongated object (wire) such as a parabola or straight line from the 3D point cloud and the tangential direction of the constituent points, there are measurement noises in the measurement results or the measurement density is sparse. In some cases, and even when a plurality of wires are close to each other, the detection of wire composing points and the tangential direction of each composing point can be calculated with high accuracy.

なお、図1における処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより3次元点群解析処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。   A three-dimensional point cloud is obtained by recording a program for realizing the functions of the processing unit in FIG. 1 on a computer-readable recording medium, causing the computer system to read and execute the program recorded on the recording medium. Analysis processing may be performed. Here, the “computer system” includes an OS and hardware such as peripheral devices. The “computer system” includes a WWW system having a homepage providing environment (or display environment). The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Further, the “computer-readable recording medium” refers to a volatile memory (RAM) in a computer system that becomes a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. In addition, those holding programs for a certain period of time are also included.

また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。   The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.

以上、図面を参照して本発明の実施の形態を説明してきたが、上記実施の形態は本発明の例示に過ぎず、本発明が上記実施の形態に限定されるものではないことは明らかである。したがって、本発明の技術思想及び範囲を逸脱しない範囲で構成要素の追加、省略、置換、その他の変更を行っても良い。   As mentioned above, although embodiment of this invention has been described with reference to drawings, the said embodiment is only the illustration of this invention, and it is clear that this invention is not limited to the said embodiment. is there. Accordingly, additions, omissions, substitutions, and other changes of the components may be made without departing from the technical idea and scope of the present invention.

得られた3次元点群を解析することによって物体を精度良く検出することが不可欠な用途にも適用できる。   By analyzing the obtained three-dimensional point group, it can be applied to applications in which it is indispensable to accurately detect an object.

101・・・被写体計測手段、102・・・パラメータ入力手段、103・・・3次元点群記憶手段、104・・・パラメータ記憶手段、105・・・ワイヤ構成点特徴抽出手段、106・・・ワイヤ構成点判定手段、107・・・ワイヤ構成点情報付与手段、108・・・3次元点群出力手段、109・・・表示手段   DESCRIPTION OF SYMBOLS 101 ... Subject measuring means, 102 ... Parameter input means, 103 ... Three-dimensional point group storage means, 104 ... Parameter storage means, 105 ... Wire constituent point feature extraction means, 106 ... Wire composing point determination means, 107... Wire composing point information giving means, 108... 3D point group output means, 109.

Claims (7)

3次元点群データを取得する3次元点群取得手段と、
前記3次元点群データのひとつを注目点とし、該注目点と一定の距離以下にある点を周囲点とし、該注目点に対する該周囲点の重要度を算出し、該注目点について該重要度を用いた重み付き自己相関行列を算出する自己相関行列算出手段と、
前記自己相関行列の固有値を要素とする固有値特徴ベクトルを算出する特徴ベクトル算出手段と、
前記固有値特徴ベクトルを用いて前記注目点が線状物体を構成するか否かを判定する識別手段と
を具備することを特徴とする点群解析装置。
3D point cloud acquisition means for acquiring 3D point cloud data;
One of the three-dimensional point cloud data is set as a point of interest, a point within a certain distance from the point of interest is set as a surrounding point, and the importance of the surrounding point with respect to the point of interest is calculated. Autocorrelation matrix calculating means for calculating a weighted autocorrelation matrix using
A feature vector calculation means for calculating an eigenvalue feature vector whose elements are eigenvalues of the autocorrelation matrix;
A point group analysis apparatus comprising: identification means for determining whether or not the point of interest constitutes a linear object using the eigenvalue feature vector.
前記重要度は、各周囲点の近傍領域内の点群の分布の広がりが広い方向に前記注目点が存在する場合に値が大きくなることを特徴とする請求項1に記載の点群解析装置。   The point cloud analysis device according to claim 1, wherein the importance level increases when the point of interest exists in a direction in which a distribution of a point cloud in a region near each surrounding point is wide. . 前記重要度は、前記注目点と各周囲点とを結んだ直線を中心とする帯上に、広範囲に点群が存在する場合に値が大きくなることを特徴とする請求項1に記載の点群解析装置。   2. The point according to claim 1, wherein the importance value increases when a point group exists in a wide range on a band centering on a straight line connecting the attention point and each surrounding point. 3. Group analysis device. 前記識別手段は、最大固有値が所定の閾値を超えるか否かに基づいて、前記注目点が線状物体を構成するか否かを判定することを特徴とする請求項1から3のいずれか1項に記載の点群解析装置。   The said identification means determines whether the said attention point comprises a linear object based on whether the largest eigenvalue exceeds a predetermined threshold value, The any one of Claim 1 to 3 characterized by the above-mentioned. The point cloud analyzer described in the paragraph. 前記識別手段は、前記特徴ベクトルと辞書ベクトルとの距離を比較し、距離が近い辞書ベクトルを持つ物体を前記注目点が所属する物体であると判定することにより、前記注目点が線状物体を構成するか否かを判定することを特徴とする請求項1から3のいずれか1項に記載の点群解析装置。   The identification means compares the distance between the feature vector and the dictionary vector, and determines that an object having a dictionary vector with a close distance is an object to which the attention point belongs, so that the attention point is a linear object. 4. The point cloud analysis apparatus according to claim 1, wherein it is determined whether or not to configure. 3次元点群データを取得する3次元点群取得手段を備える点群解析装置が行う点群解析方法であって、
前記3次元点群データのひとつを注目点とし、該注目点と一定の距離以下にある点を周囲点とし、該注目点に対する該周囲点の重要度を算出し、該注目点について該重要度を用いた重み付き自己相関行列を算出する自己相関行列算出ステップと、
前記自己相関行列の固有値を要素とする固有値特徴ベクトルを算出する特徴ベクトル算出ステップと、
前記固有値特徴ベクトルを用いて前記注目点が線状物体を構成するか否かを判定する識別ステップと
を有することを特徴とする点群解析方法。
A point cloud analysis method performed by a point cloud analysis apparatus including a 3D point cloud acquisition unit for acquiring 3D point cloud data,
One of the three-dimensional point cloud data is set as a point of interest, a point within a certain distance from the point of interest is set as a surrounding point, and the importance of the surrounding point with respect to the point of interest is calculated. An autocorrelation matrix calculating step for calculating a weighted autocorrelation matrix using
A feature vector calculation step of calculating an eigenvalue feature vector whose elements are eigenvalues of the autocorrelation matrix;
An identification step of determining whether or not the point of interest constitutes a linear object using the eigenvalue feature vector.
コンピュータを、請求項1から5のいずれか1項に記載の点群解析装置として機能させるための点群解析プログラム。   A point cloud analysis program for causing a computer to function as the point cloud analysis device according to any one of claims 1 to 5.
JP2012258941A 2012-11-27 2012-11-27 Point cloud analysis device, point cloud analysis method, and point cloud analysis program Active JP5870011B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012258941A JP5870011B2 (en) 2012-11-27 2012-11-27 Point cloud analysis device, point cloud analysis method, and point cloud analysis program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012258941A JP5870011B2 (en) 2012-11-27 2012-11-27 Point cloud analysis device, point cloud analysis method, and point cloud analysis program

Publications (2)

Publication Number Publication Date
JP2014106725A JP2014106725A (en) 2014-06-09
JP5870011B2 true JP5870011B2 (en) 2016-02-24

Family

ID=51028158

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012258941A Active JP5870011B2 (en) 2012-11-27 2012-11-27 Point cloud analysis device, point cloud analysis method, and point cloud analysis program

Country Status (1)

Country Link
JP (1) JP5870011B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6114052B2 (en) * 2013-02-13 2017-04-12 日本電信電話株式会社 Point cloud analysis processing device and point cloud analysis processing program
JP6460332B2 (en) * 2015-04-20 2019-01-30 国立大学法人 東京大学 Feature value generation unit, collation device, feature value generation method, and feature value generation program
JP2019008571A (en) * 2017-06-26 2019-01-17 株式会社デンソーアイティーラボラトリ Object recognition device, object recognition method, program, and trained model
JP6918672B2 (en) * 2017-10-11 2021-08-11 株式会社日立システムズ Deterioration diagnosis system
WO2022176160A1 (en) * 2021-02-19 2022-08-25 日本電信電話株式会社 Overhead cable identification method and overhead cable identification system
JP7563567B2 (en) 2021-02-19 2024-10-08 日本電信電話株式会社 Aerial cable measurement method and aerial cable measurement system
WO2023248576A1 (en) * 2022-06-22 2023-12-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ Three-dimensional point generating method, three-dimensional point generating device, decoding device, encoding device, decoding method, and encoding method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2614864B2 (en) * 1987-07-10 1997-05-28 繁 安藤 Image feature extraction device

Also Published As

Publication number Publication date
JP2014106725A (en) 2014-06-09

Similar Documents

Publication Publication Date Title
JP5870011B2 (en) Point cloud analysis device, point cloud analysis method, and point cloud analysis program
KR102210715B1 (en) Method, apparatus and device for determining lane lines in road
JP5181704B2 (en) Data processing apparatus, posture estimation system, posture estimation method and program
JP6114052B2 (en) Point cloud analysis processing device and point cloud analysis processing program
TWI601097B (en) Method of matching image features with reference features and integrated circuit therefor
JP5981886B2 (en) Point cloud analysis processing device, point cloud analysis processing method, and program
JP2014109555A (en) Point group analysis processing apparatus, point group analysis processing method and program
KR20200045522A (en) Methods and systems for use in performing localization
CN110663060B (en) Method, device, system and vehicle/robot for representing environmental elements
JP6180999B2 (en) Deflection estimation apparatus and program
CN113378760A (en) Training target detection model and method and device for detecting target
KR20100003856A (en) Apparatus and method for detecting obstacles
US20170357850A1 (en) Human detection apparatus and method using low-resolution two-dimensional (2d) light detection and ranging (lidar) sensor
US11506755B2 (en) Recording medium recording information processing program, information processing apparatus, and information processing method
Xiao et al. Building segmentation and modeling from airborne LiDAR data
JP2019109839A (en) Model generation device, generation method, and program
Sveier et al. Object detection in point clouds using conformal geometric algebra
JP6322564B2 (en) Point cloud analysis processing apparatus, method, and program
Gilani et al. Robust building roof segmentation using airborne point cloud data
JP5928010B2 (en) Road marking detection apparatus and program
KR101726677B1 (en) Wireless sensor network device and method for controlling the same
CN114674328B (en) Map generation method, map generation device, electronic device, storage medium, and vehicle
JP5960642B2 (en) 3D information acquisition method and 3D information acquisition apparatus
Long et al. A triple-stage robust ellipse fitting algorithm based on outlier removal
Daudt et al. Learning to understand earth observation images with weak and unreliable ground truth

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160108

R150 Certificate of patent or registration of utility model

Ref document number: 5870011

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150