JP7391127B2 - 点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラム - Google Patents

点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラム Download PDF

Info

Publication number
JP7391127B2
JP7391127B2 JP2022045929A JP2022045929A JP7391127B2 JP 7391127 B2 JP7391127 B2 JP 7391127B2 JP 2022045929 A JP2022045929 A JP 2022045929A JP 2022045929 A JP2022045929 A JP 2022045929A JP 7391127 B2 JP7391127 B2 JP 7391127B2
Authority
JP
Japan
Prior art keywords
node
layer
target
coordinate points
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022045929A
Other languages
English (en)
Other versions
JP2022093331A (ja
Inventor
マー ウェイ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Original Assignee
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apollo Intelligent Connectivity Beijing Technology Co Ltd filed Critical Apollo Intelligent Connectivity Beijing Technology Co Ltd
Publication of JP2022093331A publication Critical patent/JP2022093331A/ja
Application granted granted Critical
Publication of JP7391127B2 publication Critical patent/JP7391127B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/40Tree coding, e.g. quadtree, octree
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/001Model-based coding, e.g. wire frame
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/005Tree description, e.g. octree, quadtree
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Image Generation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • General Factory Administration (AREA)

Description

本開示は、データ処理技術領域に関し、特に知能交通と知覚データ処理の技術分野に関する。
近年、点群技術は、ますます成熟してきており、関連する応用も多様化傾向がある。しかし、レーザー点群は、データ量が多くて、冗長性などの問題があるため、応用においてデータ処理速度が遅く、空間占有率が大きくなる。したがって、点群データを如何に簡素化して間引くかは、点群データの処理における重要な課題の1つとなる。
本開示は、点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラムを提供する。
本開示の一態様において、点群データ処理方法を提供する。該方法は、
点群データにおける座標点に対してブロック分割処理を行った後に取得される、目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得することと、
前記目標ノードにおける全ての座標点の関連情報を取得することと、
前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定することと、
前記点群データに対する間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換えることと、を含む。
本開示の別の態様において、点群データ処理装置を提供する。当該装置は、
点群データにおける座標点に対してブロック分割処理を行った後に取得される、目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得する目標ノード決定ユニットと、
前記目標ノードにおける全ての座標点の関連情報を取得する関連情報取得ユニットと、
前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定する目標座標点決定ユニットと、
前記点群データに対する間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換える間引き処理ユニットと、を備える。
本開示の別の態様において、電子デバイスを提供する。当該電子デバイスは、
少なくとも1つのプロセッサと、
少なくとも1つのプロセッサに通信接続するメモリとを備え、
該メモリには、該少なくとも1つのプロセッサにより実行可能なコマンドが記憶されており、該コマンドは、該少なくとも1つのプロセッサにより実行されると、該少なくとも1つのプロセッサに本開示のいずれか1つの実施形態に記載の点群データ処理方法を実行させる。
本開示の別の態様において、コンピュータに本開示のいずれか1つの実施形態に記載の点群データ処理方法を実行させるためのコマンドが記憶された非一時的なコンピュータ可読記憶媒体を提供する。
本開示の別の態様において、コンピュータにおいてプロセッサにより実行されると、本開示のいずれか1つの実施形態に記載の点群データ処理方法を実現するタプログラムを提供する。
本開示によれば、点群データの簡素化、間引きを実現し、応用において点群データのデータ処理速度を改善し、空間占有率を低減する基礎が築かれる。
本開示の実施形態による点群データ処理方法の模式図である。 本開示の実施形態による点群データ処理方法の具体例におけるブロック分割処理の模式図である。 本開示の実施形態による点群データ処理方法の具体例における座標点の置換の模式図である。 本開示の実施形態による点群データ処理装置の構成の模式図である。 本開示の実施形態の点群データ処理方法を実現するための電子デバイスのブロック図である。
本部分で説明される内容は、本開示の実施形態の主要な又は重要な特徴を識別することを意図するものではなく、また、本開示の範囲を制限することを意図するものでもないことを理解すべきである。本開示の他の特徴は、以下の説明を通じて簡単に理解できる。
添付の図面は、本形態をよりよく理解するために使用されるものであり、本開示を限定するものではない。
以下は、理解を容易にするための本開示の実施形態の様々な詳細を含む添付の図面を参照して本開示の例示的な実施形態を説明し、単に例示的なものと見なされるべきである。したがって、当業者は、本開示の範囲、及び精神から逸脱することなく、本明細書に記載の実施形態に対して様々な変更、及び修正を行うことができることを理解する必要される。 同様に、明らかさと簡潔さのために、周知の機能と構造の説明は、以下の説明では省略されている。
本開示は点群データ処理方法を提供する。該方法は、以下のステップS101~S104を含む。
ステップS101において、点群データにおける座標点に対してブロック分割を行った後に取得される目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得する。ここで、実際の応用において、目標層に位置する目標ノードが1つ又は複数(即ち2つ又は2つ以上)存在する場合がある。本開示は、これを制限せず、目標層における各目標ノードが本開示に基づいて処理されることができる。このように、点群データの間引き処理を実現する。
ステップS102において、前記目標ノードにおける全ての座標点の関連情報を取得する。
ステップS103において、前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定する。
ステップS104において、前記点群データの間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換える。
ここで、前記点群データは、1つの三次元座標系における1組のベクトルの集合を指し、点群データにおける点あるいは座標点の関連情報は三次元座標を含み、実際の応用において、関連情報は、色情報や反射強度情報(以下、反射強度と呼び)をさらに含む。実際の応用において、本開示に記載された点群データは、具体的にレーザー点群データとすることができる。
そうすると、本開示は、目標ノードにおける全ての座標点の関連情報に基づいて目標座標点を決定し、前記目標ノードにおける全ての座標点を前記目標座標点に置き換えることができるため、間引き処理を実現しながら元の座標点の特徴を最大限に保留することができる。
本開示の1つの具体例では、また、以下の方法により、取得された複数の初期ノードにおける少なくとも1つの初期ノードに対してブロック分割処理を行うことも可能である。具体的に、予め設定されたブロック分割ルールに基づいて前記点群データにおける座標点に対してブロック分割処理を行い、初期層(第1層)に位置する複数の初期ノードを取得し、さらに、初期ブロック分割を完了した後、初期ノードに対してさらなる分層処理を行い、層ごとのブロック分割処理を実現する。具体的に、前記複数の初期ノードにおける少なくとも1つの初期ノードの座標点に対してブロック分割処理を続行して、次の層のノードを取得し、このように循環して、i番目層のノードを取得し、予め設定されたブロック分割の終了条件が満たされるまでに、最後の層のノードを取得する。ここで、前記iは1以上の正の整数である。このように、元の点群データに対して層ごとにブロック分割を行い、間引き処理を実現するための基礎が築かれる。
ここで、前記初期ノードには、1つ又は複数の座標点が含まれてもよいし、座標点が含まれていなくてもよい。異なる前記初期ノードの座標点の数量は、同じであっても、異なってもよく、本開示では、これを限定しない。実際の応用において、ブロック分割処理の効率を向上させるために、初期ノードを取得した後、予め設定された閾値以上の座標点の数量を持つ初期ノードのみに対して次の層のブロック分割処理を行い、予め設定された閾値よりも少ない座標点の数量を持つ初期ノードに対して次の層のブロック分割処理を行わない。即ち、「前記複数の初期ノードにおける少なくとも1つの初期ノードの座標点に対してブロック分割処理を続行して」には、具体的に、座標点の数量が予め設定された閾値以上の前記初期ノードを引き続きブロック分割処理を行うことを含む。
本開示の1つの具体例では、前記目標層は最後の層である。つまり、前記目標層は、層ごとのブロック分割処理した後の最下層である。このようにして、間引き処理を実現するための基礎が築かれる。
本開示の1つの具体例では、以下の方法を用いてブロック分割処理を行うこともできる。具体的に、前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定する。これに基づいて、以下の方法により、i番目層のノードを取得する。具体的には、前記i-1番目層のノードにおける座標点をブロック分割処理して、前記i番目層に位置するノードを取得する。ここで、前記i-1番目層のノードに対してブロック分割処理を行った後に取得される、前記i番目層に位置するノードの数量は、前記第1数量と同じである。つまり、ブロック分割処理を行った後に取得されるi番目層のノードの数量は第1数量と同じである。
なお、実際の応用において、採用される予め設定されたブロック分割ルールには、ブロック分割の数量を示しており、この場合、前記第1数量が予め設定されたブロック分割ルールにおけるブロック分割の数量以下であるとき、前記i番目層のノードにおける座標点を第1数量の子ノードにブロック分割し、即ち、第1数量の次の層のノードにブロック分割する。また、前記第1数量が予め設定されたブロック分割ルールにおけるブロック分割の数量よりも大きいとき、前記i番目層のノードにおける座標点を予め設定されたブロック分割ルールにおけるブロック分割の数量の子ノードにブロック分割する。つまり、前記i番目層のノードに対してブロック分割処理を行った後に取得される、前記i番目層に位置するノードの数量は、前記第1数量と前記予め設定されたブロック分割ルールに示したブロック分割の数量に関連している。
このようにして、前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を十分に考慮することができ、該第1数量に基づいて次の層のノードのブロック分割処理を実現するため、ブロック分割処理の効率を向上させ、無効なブロック分割処理を回避するための基礎が築かれる。
本開示の1つの具体例では、以下の方法を採用して前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定する。具体的に、前記i番目層に位置するノードにおける座標点の数量、及び前記i番目層のノードの親ノードにおける座標点の数量を取得し、前記i番目層のノードの親ノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第2数量を取得し、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量、及び前記第2数量に基づいて、前記第1数量を算出する。このようにして、前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を十分に考慮することができ、かつ第1数量は、該i番目層のノードにおける座標点の数量、該i番目層のノードの親ノードにおける座標点の数量、及び親ノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第2数量に関連している。したがって、関連要因を十分に考慮し、ブロック分割処理の効率を向上させ、無効なブロック分割処理を回避するための基礎が築かれる。
ここで、前記親ノードとは、それに直接に属する少なくとも1つの子ノードがあるノードを指す。例えば、i番目層のノードAをブロック分割処理して次の層の複数のノードBを取得する場合、該ブロック分割処理した後に得られたノードBは、該ノードAの子ノードと呼ぶことができ、該ノードAは、該ノードBの親ノードと呼ぶことができる。
本開示の1つの具体例では、上述のように、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量、及び前記第2数量に基づいて、前記第1数量を算出することは、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量に基づいて第1特徴値を取得することと、前記第1特徴値と前記第2数量に基づいて前記第1数量を取得することとを含む。

このように、次の層のノードにブロック分割して得られる必要がある子ノードの数量を決定するとき、その親ノードのブロック分割の数量、現在のノードの座標点の数量、及びその親ノードの座標点の数量を十分に考慮しており、親ノードにブロック分割する必要な数量が少ない、あるいはブロック分割する必要な数量が0であっても、該特徴を次の層に伝えることができるため、次の層に無効なブロック分割を行うことが回避でき、本開示のブロック分割処理の速度がより速い。
さらに、前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得する。このようにして、目標ノードにおける各座標点の反射強度と点群の数との加重比率が十分に考慮し、取得された目標座標点が価値のある情報を最大限に保持するようにしている。
本開示の1つの具体例では、前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得することは、具体的に、前記目標ノードにおける前記座標点の反射強度と前記予め設定された最小反射強度との差、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第2特徴値を取得することと、前記平均反射強度、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第3特徴値を取得することと、前記第2特徴値、前記第3特徴値、及び前記目標ノードにおける全ての座標点の座標情報に基づいて前記目標座標情報を取得することとを含む。


このように、本開示は、目標ノードにおける全ての座標点の関連情報に基づいて目標座標点を決定し、前記目標ノードにおける全ての座標点を前記目標座標点に置き換えることができるため、前記間引き処理を実現するとともに、元の座標点の特徴を最大限に保留することができる。
以下、具体例を参照して本開示を詳しく説明する。具体的に、本示例は、八分木法などの予め設定されたブロック分割ルールを採用して点群データに対してブロック分割処理を行う。具体的に、予め設定されたブロック分割終了条件を設置し、すなわち、八分木法によりブロック分割処理した後の目標総ノード数Nを設置し、すなわち、ブロック分割処理した後に得られた総ノード数が前記目標総ノード数Nに等しい場合、ブロック分割処理を停止して、最後の層のノードを得る。あるいは、ブロック分割処理した後に得られた総ノード数が前記前記目標総ノード数Nよりも大きい場合、ブロック分割処理を停止して、最後の層のノードを得る。

さらに、図2に示すように、点群データに対して八分木分割を行い。つまり、点群データにおける座標点をブロック分割して、初期の層の複数の初期ノードを取得する。ここで、八分木分割を採用するため、合計8個の初期ノードを取得する。さらに、予め設定されたブロック分割終了条件が満たされるまで、初期ノードに対して八分木分割を続行して、次の層のノード(次の層の子ノードとも呼ばれる)を取得する。
本示例では、分割処理を行う前に、次の層における各ノードに分割する必要があるブロック数(数量とも呼ばれる)を計算する必要がある。具体的に、計算式は次のとおりである。
さらに、この初期ノードに対して八分木ブロック分割を行い、次の層のノード、すなわち第2層のノードを取得し、ここで、N0-1に対するさらなる八分木ブロック分割を例として説明する。


なお、第1層の他の初期ノードについて、上記の方法に基づいてブロック分割処理を行うことができるため、ここでは繰り返さない。

ここで、次の層のノードがブロック分割する必要な数量を決定する場合、その親ノードのブロックの数量を充分に考慮しているため、親ノードに対しブロック分割する必要な数量が少ない、あるいはブロック分割する必要な数量が0であっても、該特徴を全て次の層に伝えることができるため、次の層に無効なブロック分割を行うことが回避でき、本開示のブロック分割処理の速度がより速い。
実際の応用において、上記ブロック分割に基づいて、予め設定されたブロック分割終了条件が満たされるまで、層ごとにブロック分割を行い、最後の層のノードを取得し、すなわち最下層のノードに深く分割することになる。
ここで、図3に示すように、最下層のノードに深く分割した後、重み付き重心法により、最下層のノードに対応する目標座標点を決定して、該目標座標点がこの最下層のノードにおける全ての座標点を代表することで、間引き処理を実現する。ここで、本実施例では、該目標座標点の座標情報と反射強度は、該最下層のノードにおける全ての座標点によって共同決定されるため、本開示は、反射強度と点群の数量の加重比率を充分に考慮し、価値のある情報を保留することができる。具体的に、以下のアルゴリズム式を用いて目標座標点を決定することができる。具体的に、

本開示は、点群データ処理装置をさらに提供する。図4に示されるように、
点群データにおける座標点に対してブロック分割処理を行った後に取得される、目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得する目標ノード決定ユニット401と、
前記目標ノードにおける全ての座標点の関連情報を取得する関連情報取得ユニット402と、
前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定する目標座標点決定ユニット403と、
前記点群データに対する間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換える間引き処理ユニット404と、を備える。
本開示の1つの具体例において、
予め設定されたブロック分割ルールに基づいて前記点群データにおける座標点に対してブロック分割処理を行い、初期層に位置する複数の初期ノードを取得し、前記複数の初期ノードにおける少なくとも1つの初期ノードの座標点に対して引き続きブロック分割処理を行い、次の層のノードを取得し、このように循環して、i番目層のノードを取得し、予め設定されたブロック分割の終了条件が満たされるまでに、最後の層のノードを取得するブロック分割処理ユニットをさらに備える。ここで、前記iは1以上の正の整数である。
本開示の1つの具体例において、前記目標層は最後の層である。
本開示の1つの具体例において、ノード数量決定ユニットをさらに備える。ここで、
前記ノード数量決定ユニットは、前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定することに用いられる。
前記ブロック分割処理ユニットは、前記i-1番目層のノードにおける座標点をブロック分割処理して、前記i番目層のノードを取得することにさらに用いられる。ここで、前記i-1番目層のノードに対してブロック分割処理を行った後に取得される前記i番目層に位置するノードの数量は、前記第1数量と同じである。
本開示の1つの具体例において、前記ノード数量決定ユニットは、前記i番目層に位置するノードにおける座標点の数量、及び前記i番目層のノードの親ノードにおける座標点の数量を取得し、前記i番目層のノードの親ノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第2数量を取得し、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量、及び前記第2数量に基づいて、前記第1数量を算出することにさらに用いられる。
本開示の1つの具体例において、前記ノード数量決定ユニットは、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量に基づいて第1特徴値を取得し、前記第1特徴値と前記第2数量に基づいて前記第1数量を取得することにさらに用いられる。
本開示の1つの具体例において、前記目標座標点決定ユニットは、前記目標ノードにおける全ての座標点の反射強度、及び前記目標ノードにおける前記座標点の総数に基づいて、平均反射強度を得、前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得することにさらに用いられる。
本開示の1つの具体例において、前記目標座標点決定ユニットは、前記目標ノードにおける前記座標点の反射強度と前記予め設定された最小反射強度との差、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第2特徴値を取得し、前記平均反射強度、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第3特徴値を取得し、前記第2特徴値、前記第3特徴値、及び前記目標ノードにおける全ての座標点の座標情報に基づいて前記目標座標情報を取得することにさらに用いられる。
本発明の実施形態における点群データ処理装置内の各ユニットの機能については、前述の方法における対応する説明を参照することができ、ここでは繰り返しない。
本開示の実施例によると、本開示はまた電子デバイス、可読記憶媒体、及びコンピュータプログラム製品を提供する。
図5は、本開示の実施形態を実施するための例示的な電子デバイス500のブロック図を示す。電子デバイスは、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、大型コンピュータ、及び他の適切なコンピュータのような様々な形態のデジタルコンピュータを表すことができる。また、電子デバイスはパーソナルデジタル処理、携帯電話、スマートフォン、装着可能デバイス、及びその他の類似の計算デバイスなどの様々な形態のモバイルデバイスを表すことができる。ここで示した部件、それらの接続と関係、及びそれらの機能は例示的なものに過ぎず、本明細書で説明されたもの、及び/又は要求される本明細書の実施を制限することは意図されない。
図5に示すように、電子デバイス500は、読み取り専用メモリ(ROM)502に格納されたコンピュータプログラム又は記憶ユニット508からランダムにロードされたコンピュータプログラムに従って実行することができる計算ユニット501を備える。アクセスメモリ(RAM)503さまざまな適切なアクションと処理。RAM503には、電子デバイス500の動作に必要な様々なプログラム、及びデータも格納することができる。計算ユニット501、ROM502、及びRAM503は、バス504を介して相互に接続されている。入出力(I/O)インターフェース505もまた、バス504に接続されている。
I/Oインターフェース505には、キーボードやマウスなどの入力ユニット506、各種ディスプレイやスピーカーなどの出力ユニット507、ディスクやCD―ROMなどの記憶ユニット508、ネットワークカードやモデム、無線通信トランシーバーなどの通信ユニット509など、電子デバイス500の複数のコンポーネントが接続されている。 通信ユニット509は、電子デバイス500が、インターネット、及び/又は各種通信ネットワークなどのコンピュータネットワークを介して、他の機器と情報/データを交換することを可能にする。
計算ユニット501は、処理能力や計算能力を有する様々な汎用、及び/又は専用処理コンポーネントであってもよい。計算ユニット501のいくつかの例には、中央処理装置(CPU)、グラフィック処理装置(GPU)、様々な専用人工知能(AI)計算チップ、機械学習モデルアルゴリズムを実行するための様々な計算ユニット、デジタルシグナルプロセッサ(DSP)、及び任意の適切なプロセッサ、コントローラ、マイクロコントローラなどが含まれているが、これらに限定されない。計算ユニット501は、例えば、点群データ処理方法のような上述した様々な方法や処理を実行する。例えば、いくつかの実施形態に、点群データ処理方法は、メモリユニット508などの機械読み取り可能な媒体に有形的に含まれるコンピュータソフトウェアプログラムとして実現されてもよい。 いくつかの実施形態に、コンピュータプログラムの一部又は全部が、ROM502、及び/又は通信ユニット509を介して電子デバイス500にロード、及び/又はインストールされてもよい。 コンピュータプログラムがRAM503にロードされ、計算ユニット501によって実行されると、上述した点群データ処理方法の1つ又は複数のステップが実行されてもよい。代替的に、その他の実施形態に、計算ユニット501は、任意の他の適切な手段によって(例えば、ファームウェアの助けを借りて)点群データ処理方法を実行するように配置されてもよい。
本文で、上述のシステム、及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、FPGA、ASIC、ASSP、SOC、CPLD、コンピュータハードウェア、ファームウェア、ソフトウェア、及びそれらの組み合わせに実現することができる。これらの様々な実施形態には、以下のものが含まれている。1つ又は複数のコンピュータプログラムで実施されて、この1つ又は複数のコンピュータプログラムは、少なくとも1つのプログラマブルプロセッサを備えるプログラマブルシステム上で実行、及び/又は解釈することができる。このプログラマブルプロセッサは専用又は汎用のプログラマブルプロセッサであってもよく、ストレージシステム、少なくとも1つの入力デバイス、及び少なくとも1つの出力デバイスからデータ、及び命令を受け取り、データ、及び命令をそのストレージシステム、その少なくとも1つの入力デバイス、及びその少なくとも1つの出力デバイスに転送することができる。
本開示の方法を実施するためのプログラムコードは、1つ又は複数のプログラミング言語の任意の組み合わせを用いて記述することができる。 プログラムコードは、汎用コンピュータ、専用コンピュータ、又はその他のプログラム可能なデータ処理装置のプロセッサ又はコントローラに提供され、プログラムコードがプロセッサ又はコントローラによって実行されると、フローチャート、及び/又はブロック図で指定された機能/動作が実行されるようになっていてもよい。 プログラムコードは、完全に機器上で実行されてもよいし、部分的に機器上で実行されてもよいし、スタンドアローンのソフトウェアパッケージとして部分的に機器上で実行されてもよいし、部分的にリモート機器上で実行されてもよいし、完全にリモート機器やサーバー上で実行されてもよい。
本開示のコンテクストでは、機械可読媒体は、命令実行システム、デバイス、又は装置で使用するためのプログラムを含む又は保存することができる有形媒体であることができる。 機械読み取り可能な媒体は、機械読み取り可能な信号媒体又は機械読み取り可能な記憶媒体であってもよい。機械可読媒体には、電子的、磁気的、光学的、電磁的、赤外線的、又は半導体的なシステム、デバイス、装置、又はこれらの適切な組み合わせが含まれますが、これらに限定されるものではない。 機械読み取り可能な記憶媒体のより具体的な例としては、1つ又は複数のワイヤベースの電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、消去可能なプログラマブルリードオンリーメモリ(EPROM又はフラッシュメモリ)、光ファイバ、便利なコンパクトディスクリードオンリーメモリ(CD-ROM)、光学メモリ、磁気メモリ、又は上記の任意の適切な組み合わせが挙げられる。
ユーザとのインタラクションを提供するために、ここで説明したシステムや技術は、コンピュータで実施されることができる。このコンピュータは、ユーザに情報を表示するための表示装置(例えば、CRT(ブラウン管)又はLCD(液晶ディスプレイ)モニタ)と、キーボード、及びポインティングデバイス(例えば、マウス又はトラックボール)とを備え、ユーザは、このキーボードやポインティングデバイスを使って、コンピューターに入力を提供することができる。他の種類の装置も、ユーザとのインタラクションを提供するために使用され得る。例えば、ユーザに提供されたフィードバックは、任意の形態のセンシングフィードバック(例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバック)であってもよく、ユーザからの入力は、いかなる形式(音響入力、音声入力、又は触覚入力を含む)で受信されてもよい。
ここで説明されているシステム、及び技術は、バックグラウンド部件を含む計算システム(例えば、データサーバとして)、又は中間部部件を含む計算システム(例えば、応用サーバ)、又は、フロントエンド部件を含む計算システム(例えば、グラフィカルユーザインタフェース又はネットワークブラウザを備えたユーザコンピュータであって、ユーザがこのグラフィカルユーザインタフェース又はネットワークブラウザを介してここで説明したシステム、及び技術に係る実施形態とインタラクションを行うことができるユーザコンピュータ)に実行されてもよく、又は、このようなバックグラウンド部件、中間部部件、又はフロントエンド部件の任意の組合せを含む計算システムにおいて実行されてもよい。システムの部件は、任意の形態又は媒体のデジタルデータ通信(例えば、通信ネットワーク)によって相互に接続されてもよい。通信ネットワークの例として、ローカルネットワーク(LAN)、広域ネットワーク(WAN)、及びインターネットを含む。
コンピュータシステムは、クライアント、及びサーバを含むことができる。クライアントとサーバは一般的に相互に離れており、通信ネットワークを介してインタラクションを行う。相応のコンピュータ上で実行するとともにお互いにクライアントとサーバとの関係を持つコンピュータプログラムによって、クライアントとサーバとの関係が構築される。
上記の様々な態様のフローを用いて、ステップを新たに順序付け、追加、又は削除することが可能であることを理解すべきである。例えば、本明細書で記載された各ステップは、並列に実行しても良いし、順次に実行しても良いし、異なる順序で実行しても良い。本明細書で開示された技術案が所望する結果を実現することができる限り、本明細書ではこれに限定されない。
上記具体的な実施形態は、本開示の保護範囲に対する限定を構成するものではない。当業者は、設計事項やその他の要因によって、様々な修正、組み合わせ、サブ組み合わせ、及び代替が可能であることを理解するべきである。本開示の要旨、及び原則内における変更、均等な置換、及び改善等は、いずれも本開示の保護範囲に含まれるべきである。

Claims (17)

  1. 点群データにおける座標点に対してブロック分割処理を行った後に取得される、目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得することと、
    前記目標ノードにおける全ての座標点の関連情報を取得することと、
    前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定することと、
    前記点群データに対する間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換えることと、を含み、
    前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定することは、
    前記目標ノードにおける全ての座標点の反射強度、及び前記目標ノードにおける前記座標点の総数に基づいて、平均反射強度を得ることと、
    前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得することと、を含む、
    点群データ処理方法。
  2. 予め設定されたブロック分割ルールに基づいて前記点群データにおける座標点に対してブロック分割処理を行い、初期層に位置する複数の初期ノードを取得することと、
    前記複数の初期ノードにおける少なくとも1つの初期ノードにおける座標点に対して引き続きブロック分割処理を行い、次の層のノードを取得し、このように循環して、i番目層のノードを取得することと、
    予め設定されたブロック分割の終了条件が満たされるまでに、最後の層のノードを取得することと、をさらに含み、
    ここで、iは1以上の正の整数である
    請求項1に記載の点群データ処理方法。
  3. 前記目標層は最後の層である
    請求項1又は2に記載の点群データ処理方法。
  4. 前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定すること、をさらに含め、
    ここで、前記i番目層のノードを取得することは、
    i-1番目層のノードにおける座標点をブロック分割処理して、前記i番目層に位置するノードを取得することを含み、
    ここで、前記i-1番目層のノードに対してブロック分割処理を行った後に取得される、前記i番目層に位置するノードの数量は、前記第1数量と同じである
    請求項2に記載の点群データ処理方法。
  5. 前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定することは、
    前記i番目層に位置するノードにおける座標点の数量、及び前記i番目層のノードの親ノードにおける座標点の数量を取得することと、
    前記i番目層のノードの親ノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第2数量を取得することと、
    前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数、及び前記第2数量に基づいて、前記第1数量を算出することと、を含む
    請求項4に記載の点群データ処理方法。
  6. 前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量、及び前記第2数量に基づいて、前記第1数量を算出することは、
    前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量に基づいて第1特徴値を取得することと、
    前記第1特徴値と前記第2数量に基づいて前記第1数量を取得することと、を含む
    請求項5に記載の点群データ処理方法。
  7. 前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得することは、
    前記目標ノードにおける前記座標点の反射強度と前記予め設定された最小反射強度との差、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第2特徴値を取得することと、
    前記平均反射強度、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第3特徴値を取得することと、
    前記第2特徴値、前記第3特徴値、及び前記目標ノードにおける全ての座標点の座標情報に基づいて前記目標座標情報を取得することと、を含む
    請求項に記載の点群データ処理方法。
  8. 点群データにおける座標点に対してブロック分割処理を行った後に取得される、目標層に位置する目標ノードであって、複数の座標点が含まれている前記目標ノードを取得する目標ノード決定ユニットと、
    前記目標ノードにおける全ての座標点の関連情報を取得する関連情報取得ユニットと、
    前記目標ノードにおける前記座標点の関連情報、及び前記目標ノードにおける前記座標点の総数に基づいて目標座標点を決定する目標座標点決定ユニットと、
    前記点群データに対する間引き処理を実現するように、前記目標ノードにおける全ての座標点を前記目標座標点に置き換える間引き処理ユニットと、を備え
    前記目標座標点決定ユニットは、前記目標ノードにおける全ての座標点の反射強度、及び前記目標ノードにおける前記座標点の総数に基づいて、平均反射強度を得、前記目標ノードにおける全ての座標点の座標情報、反射強度、平均反射強度、予め設定された最大反射強度、及び予め設定された最小反射強度に基づいて目標座標情報を決定して、前記目標座標点を取得することにさらに用いられる、
    点群データ処理装置。
  9. 予め設定されたブロック分割ルールに基づいて前記点群データにおける座標点に対してブロック分割処理を行い、初期層に位置する複数の初期ノードを取得し、前記複数の初期ノードにおける少なくとも1つの初期ノードにおける座標点に対して引き続きブロック分割処理を行い、次の層のノードを取得し、このように循環して、i番目層のノードを取得し、予め設定されたブロック分割の終了条件が満たされるまでに、最後の層のノードを取得するブロック分割処理ユニットをさらに備え、
    ここで、iは1以上の正の整数である
    請求項に記載の点群データ処理装置。
  10. 前記目標層は最後の層である
    請求項又は請求項9に記載の点群データ処理装置。
  11. ノード数量決定ユニットをさらに備え、
    前記ノード数量決定ユニットは、前記i番目層に位置するノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第1数量を決定することに用いられ、
    前記ブロック分割処理ユニットは、i-1番目層のノード内の座標点をブロック分割処理して、前記i番目層に位置するノードを取得することにさらに用いられ、ここで、
    前記i-1番目層のノードに対してブロック分割処理を行った後に取得される、前記i番目層に位置するノードの数は、前記第1数量と同じである
    請求項に記載の点群データ処理装置。
  12. 前記ノード数量決定ユニットは、前記i番目層に位置するノードにおける座標点の数量、及び前記i番目層のノードの親ノードにおける座標点の数量を取得し、前記i番目層のノードの親ノードに対してブロック分割処理を行った後に取得される必要がある次の層に位置するノードの第2数量を取得し、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量、及び前記第2数量に基づいて、前記第1数量を算出することにさらに用いられる
    請求項11に記載の点群データ処理装置。
  13. 前記ノード数量決定ユニットは、前記i番目層のノードにおける座標点の数量、前記i番目層のノードの親ノードにおける座標点の数量に基づいて第1特徴値を取得し、前記第1特徴値と前記第2数量に基づいて前記第1数量を取得することにさらに用いられる
    請求項12に記載の点群データ処理装置。
  14. 前記目標座標点決定ユニットは、前記目標ノードにおける前記座標点の反射強度と前記予め設定された最小反射強度との差、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第2特徴値を取得し、前記平均反射強度、及び前記予め設定された最大反射強度と前記予め設定された最小反射強度との差に基づいて第3特徴値を取得し、前記第2特徴値、前記第3特徴値、及び前記目標ノードにおける全ての座標点の座標情報に基づいて前記目標座標情報を取得することにさらに用いられる
    請求項に記載の点群データ処理装置。
  15. 少なくとも1つのプロセッサと、
    前記少なくとも1つのプロセッサに通信接続するメモリとを備え、
    前記メモリには、前記少なくとも1つのプロセッサにより実行可能なコマンドが記憶されており、前記コマンドは、前記少なくとも1つのプロセッサに実行されると、前記少なくとも1つのプロセッサに請求項1~請求項7のいずれか1項に記載の点群データ処理方法を実行させる、
    ことを特徴とする電子デバイス。
  16. コンピュータに請求項1~請求項7のいずれか1項に記載の点群データ処理方法を実行させるためのコマンドが記憶される非一時的なコンピュータ可読記憶媒体。
  17. コンピュータにおいてプロセッサにより実行されると、請求項1~請求項7のいずれか1項に記載の点群データ処理方法を実現することを特徴とするプログラム。
JP2022045929A 2021-04-13 2022-03-22 点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラム Active JP7391127B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110396772.1A CN113034682A (zh) 2021-04-13 2021-04-13 点云数据处理方法、装置、设备及存储介质
CN202110396772.1 2021-04-13

Publications (2)

Publication Number Publication Date
JP2022093331A JP2022093331A (ja) 2022-06-23
JP7391127B2 true JP7391127B2 (ja) 2023-12-04

Family

ID=76456554

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022045929A Active JP7391127B2 (ja) 2021-04-13 2022-03-22 点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラム

Country Status (5)

Country Link
US (1) US20220222868A1 (ja)
EP (1) EP4036861A3 (ja)
JP (1) JP7391127B2 (ja)
KR (1) KR20220044910A (ja)
CN (1) CN113034682A (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017054468A (ja) 2015-09-11 2017-03-16 大豊精機株式会社 2次元または3次元の形状情報を表示・操作するシステム、方法及びコンピュータソフトウエアプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104298971B (zh) * 2014-09-28 2017-09-19 北京理工大学 一种3d点云数据中的目标识别方法
CN107798721B (zh) * 2016-08-31 2021-03-16 北京四维图新科技股份有限公司 一种点云数据的处理方法及装置和点云渲染方法及装置
CN109816626A (zh) * 2018-12-13 2019-05-28 深圳高速工程检测有限公司 路面裂缝检测方法、装置、计算机设备和存储介质
CN109918755B (zh) * 2019-02-28 2020-08-14 大连理工大学 一种基于点云数据的低刚度制件装配变形预测方法
CN109740604B (zh) * 2019-04-01 2019-07-05 深兰人工智能芯片研究院(江苏)有限公司 一种行驶区域检测的方法和设备
CN110232329B (zh) * 2019-05-23 2023-04-18 星际空间(天津)科技发展有限公司 基于深度学习的点云分类方法、装置、存储介质及设备
CN110969624B (zh) * 2019-11-07 2023-08-01 哈尔滨工程大学 一种激光雷达三维点云分割方法
CN111311650B (zh) * 2020-01-20 2023-05-05 南方电网数字电网研究院有限公司 一种点云数据的配准方法、装置及存储介质
CN111862292B (zh) * 2020-07-29 2024-04-26 南方电网数字电网科技(广东)有限公司 输电线路走廊的数据渲染方法、装置和计算机设备
CN112634458B (zh) * 2021-01-06 2023-06-20 广西科技大学 一种基于特征显著性评价的口腔模型点云精简方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017054468A (ja) 2015-09-11 2017-03-16 大豊精機株式会社 2次元または3次元の形状情報を表示・操作するシステム、方法及びコンピュータソフトウエアプログラム

Also Published As

Publication number Publication date
CN113034682A (zh) 2021-06-25
EP4036861A2 (en) 2022-08-03
KR20220044910A (ko) 2022-04-12
EP4036861A3 (en) 2022-10-19
US20220222868A1 (en) 2022-07-14
JP2022093331A (ja) 2022-06-23

Similar Documents

Publication Publication Date Title
CN112862933B (zh) 用于优化模型的方法、装置、设备以及存储介质
CN112562069B (zh) 三维模型的构造方法、装置、设备和存储介质
CN112819971B (zh) 虚拟形象的生成方法、装置、设备和介质
CN114842123B (zh) 三维人脸重建模型训练和三维人脸形象生成方法及装置
CN113963110B (zh) 纹理图生成方法、装置、电子设备及存储介质
CN112785674A (zh) 纹理贴图的生成方法、渲染方法、装置、设备及存储介质
CN113409430B (zh) 可驱动三维人物生成方法、装置、电子设备及存储介质
CN112785493B (zh) 模型的训练方法、风格迁移方法、装置、设备及存储介质
CN114792355B (zh) 虚拟形象生成方法、装置、电子设备和存储介质
CN115018992B (zh) 发型模型的生成方法、装置、电子设备及存储介质
CN112528995B (zh) 用于训练目标检测模型的方法、目标检测方法及装置
KR20230076115A (ko) 이미지 처리 방법, 장치, 전자 기기 및 저장 매체
CN116524165B (zh) 三维表情模型的迁移方法、装置、设备和存储介质
CN113344213A (zh) 知识蒸馏方法、装置、电子设备及计算机可读存储介质
JP7391127B2 (ja) 点群データ処理方法、装置、電子デバイス、記憶媒体、及びプログラム
EP4155670A1 (en) Intersection vertex height value acquisition method and apparatus, electronic device and storage medium
CN112784967B (zh) 信息处理方法、装置以及电子设备
CN114581586A (zh) 一种模型基底的生成方法、装置、电子设备及存储介质
CN113408304A (zh) 文本翻译方法、装置、电子设备及存储介质
CN116894917B (zh) 虚拟形象的三维发丝模型的生成方法、装置、设备和介质
CN118550723A (zh) 进程间通信的参数传递方法及装置、电子设备和存储介质
CN117315145A (zh) 发丝模型的生成方法、装置、电子设备及存储介质
CN118550708A (zh) 用于大语言模型的任务执行方法、装置、设备和存储介质
CN117892050A (zh) 一种基于多核硬件的矩阵运算方法、装置、设备及介质
CN117669750A (zh) 量子线路模拟方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220322

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230810

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231031

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231121

R150 Certificate of patent or registration of utility model

Ref document number: 7391127

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150