JP2018124985A5 - - Google Patents

Download PDF

Info

Publication number
JP2018124985A5
JP2018124985A5 JP2017232350A JP2017232350A JP2018124985A5 JP 2018124985 A5 JP2018124985 A5 JP 2018124985A5 JP 2017232350 A JP2017232350 A JP 2017232350A JP 2017232350 A JP2017232350 A JP 2017232350A JP 2018124985 A5 JP2018124985 A5 JP 2018124985A5
Authority
JP
Japan
Prior art keywords
dimensional
point cloud
signed distance
point data
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017232350A
Other languages
English (en)
Other versions
JP2018124985A (ja
JP6879891B2 (ja
Filing date
Publication date
Priority claimed from US15/420,245 external-priority patent/US10176589B2/en
Application filed filed Critical
Publication of JP2018124985A publication Critical patent/JP2018124985A/ja
Publication of JP2018124985A5 publication Critical patent/JP2018124985A5/ja
Application granted granted Critical
Publication of JP6879891B2 publication Critical patent/JP6879891B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (20)

  1. 3次元点群内の欠落点を完成させるシステムであって、
    シーン内の物体の点データを測定する3次元センサと、
    前記3次元センサと、プログラムおよび前記点データを記憶するメモリとに接続されたプロセッサであって、該プロセッサは、前記プログラムの命令ステップを実行し、前記命令ステップは、
    前記物体の前記点データを取得して、前記3次元点群を生成するステップであって、前記点データは、前記物体の上の点の集合を含む、ステップと、
    前記3次元点群から平面セグメントを抽出するステップと、
    前記平面セグメント間の接続関係および欠落点を特定するステップと、
    前記平面セグメントおよび前記接続関係を用いて前記3次元点群内の前記欠落点を充填して、完成された3次元点群を生成するステップと、
    を含む、プロセッサと、
    前記プロセッサおよび前記3次元センサに接続された、前記完成された3次元点群を表示するディスプレイモニターと、
    を備える、システム。
  2. 前記特定するステップおよび前記充填するステップは、少なくとも1つの欠落点が前記充填するステップにおいて充填される場合に繰り返される、請求項1に記載のシステム。
  3. 前記3次元点群は、前記3次元センサを固定した姿勢に配置することによって取得される前記点データの単一のフレームから生成される、請求項1に記載のシステム。
  4. 前記3次元点群は、前記3次元センサを種々の姿勢に移動させることによって取得される前記点データの複数のフレームから、該複数のフレームを共通座標系に位置合わせすることによって生成される、請求項1に記載のシステム。
  5. 前記平面セグメントは、前記点データの前記複数のフレームのそれぞれから抽出され、前記共通座標系に位置合わせされる、請求項4に記載のシステム。
  6. 前記特定するステップおよび前記充填するステップは、符号付き距離場を用い、該符号付き距離場は、前記シーン内の各ボクセルの符号付き距離値を含む、請求項1に記載のシステム。
  7. 前記各ボクセルは、前記符号付き距離値が所定の範囲内にある場合には、占有ボクセルとして分類され、前記各ボクセルは、前記符号付き距離値が正の側における前記所定の範囲の正の限界を越えている場合には、空き空間ボクセルとして分類され、前記各ボクセルは、前記符号付き距離値が負の側における前記所定の範囲の負の限界を越えている場合には、未知ボクセルとして分類される、請求項6に記載のシステム。
  8. 2つの前記平面セグメント間のボクセルの大部分が前記占有ボクセルまたは前記未知ボクセルのいずれかである場合に、2つの前記平面セグメントは、接続されているとして特定される、請求項7に記載のシステム。
  9. 接続されているとして特定された前記2つの平面セグメント間の前記未知ボクセルは、占有ボクセルを用いて充填され、占有ボクセルとして更新される、請求項に記載のシステム。
  10. 前記符号付き距離場は、近似された符号付き距離値を用いて前記点データから生成され、前記近似された符号付き距離値は、前記3次元センサの各光線方向に沿って求められる、請求項6に記載のシステム。
  11. 前記符号付き距離場は、3次元空間において定義される、請求項6に記載のシステム。
  12. 前記符号付き距離場は、前記平面セグメントのそれぞれにおいて定義される、請求項6に記載のシステム。
  13. 3次元点群内の欠落点を完成させる方法であって、プロセッサがメモリおよび3次元センサと通信し、該方法は、
    前記3次元センサを用いてシーン内の物体の点データを測定するステップと、
    前記物体の前記点データを取得して、前記3次元点群を生成するステップであって、前記点データは、前記物体の上の点の集合を含む、ステップと、
    前記3次元点群から平面セグメントを抽出するステップと、
    前記平面セグメント間の接続関係および欠落点を特定するステップと、
    前記平面セグメントおよび前記接続関係を用いて前記3次元点群内の前記欠落点を充填して、完成された3次元点群を生成するステップと、
    を含む、方法。
  14. 前記特定するステップおよび前記充填するステップは、少なくとも1つの欠落点が前記充填するステップにおいて充填される場合に繰り返される、請求項13に記載の方法。
  15. 前記3次元点群は、前記3次元センサを固定した姿勢に配置することによって取得される前記点データの単一のフレームから生成される、請求項13に記載の方法。
  16. 前記3次元点群は、前記3次元センサを種々の姿勢に移動させることによって取得される前記点データの複数のフレームから、該複数のフレームを共通座標系に位置合わせすることによって生成される、請求項13に記載の方法。
  17. 前記特定するステップおよび前記充填するステップは、符号付き距離場を用い、該符号付き距離場は、前記シーン内の各ボクセルの符号付き距離値を含む、請求項13に記載の方法。
  18. 方法を実行するコンピューターによって実行可能なプログラムが具現化された非一時的コンピューター可読記憶媒体であって、前記方法は、3次元点群内の欠落点を完成させるものであり、プロセッサがメモリおよび3次元センサと通信し、前記方法は、
    前記3次元センサを用いてシーン内の物体の点データを測定するステップと、
    前記物体の前記点データを取得して、前記3次元点群を生成するステップであって、前記点データは、前記物体の上の点の集合を含む、生成するステップと、
    前記3次元点群から平面セグメントを抽出するステップと、
    前記平面セグメント間の接続関係および欠落点を特定するステップと、
    前記平面セグメントおよび前記接続関係を用いて前記3次元点群内の前記欠落点を充填して、完成された3次元点群を生成するステップと、
    を含む、非一時的コンピューター可読記憶媒体。
  19. 前記特定するステップおよび前記充填するステップは、少なくとも1つの欠落点が前記充填するステップにおいて充填される場合に繰り返される、請求項18に記載の記憶媒体。
  20. 前記特定するステップおよび前記充填するステップは、符号付き距離場を用い、該符号
    付き距離場は、前記シーン内の各ボクセルの符号付き距離値を含む、請求項18に記載の記憶媒体。
JP2017232350A 2017-01-31 2017-12-04 平面セグメントを用いて点群を完成させる方法およびシステム Active JP6879891B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/420,245 2017-01-31
US15/420,245 US10176589B2 (en) 2017-01-31 2017-01-31 Method and system for completing point clouds using planar segments

Publications (3)

Publication Number Publication Date
JP2018124985A JP2018124985A (ja) 2018-08-09
JP2018124985A5 true JP2018124985A5 (ja) 2020-10-22
JP6879891B2 JP6879891B2 (ja) 2021-06-02

Family

ID=62980041

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017232350A Active JP6879891B2 (ja) 2017-01-31 2017-12-04 平面セグメントを用いて点群を完成させる方法およびシステム

Country Status (2)

Country Link
US (1) US10176589B2 (ja)
JP (1) JP6879891B2 (ja)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10066946B2 (en) 2016-08-26 2018-09-04 Here Global B.V. Automatic localization geometry detection
LU100465B1 (en) 2017-10-05 2019-04-09 Applications Mobiles Overview Inc System and method for object recognition
EP3467782A1 (en) * 2017-10-06 2019-04-10 Thomson Licensing Method and device for generating points of a 3d scene
US11093759B2 (en) * 2018-03-06 2021-08-17 Here Global B.V. Automatic identification of roadside objects for localization
KR20210050582A (ko) 2018-09-27 2021-05-07 스냅 인코포레이티드 스테레오 추출을 사용하는 3차원 장면 인페인팅
WO2020071845A1 (ko) * 2018-10-05 2020-04-09 삼성전자 주식회사 3차원 영상을 부호화하는 방법 및 장치, 3차원 영상을 복호화하는 방법 및 장치
US10883823B2 (en) 2018-10-18 2021-01-05 Cyberoptics Corporation Three-dimensional sensor with counterposed channels
CN109859114B (zh) * 2018-12-27 2020-10-16 北京大学 基于局域平滑性和非局域相似性的三维点云修复方法
SG11202111295UA (en) * 2019-04-12 2021-11-29 Beijing Chengshi Wanglin Information Technology Co Ltd Three-dimensional object modeling method, image processing method, and image processing device
CN110084840B (zh) * 2019-04-24 2022-05-13 阿波罗智能技术(北京)有限公司 点云配准方法、装置、服务器和计算机可读介质
CN110443836B (zh) * 2019-06-24 2022-03-18 中国人民解放军战略支援部队信息工程大学 一种基于平面特征的点云数据自动配准方法及装置
US10818071B1 (en) * 2019-07-26 2020-10-27 Google Llc Image-based geometric fusion of multiple depth images using ray casting
KR20210030147A (ko) * 2019-09-09 2021-03-17 삼성전자주식회사 3d 렌더링 방법 및 장치
CN110569926B (zh) * 2019-09-19 2021-06-08 北京工商大学 一种基于局部边缘特征增强的点云分类方法
CN111462197B (zh) * 2020-03-06 2023-05-26 深圳大学 外观模型获取方法、装置、计算机设备和存储介质
US11321953B2 (en) 2020-03-25 2022-05-03 Hong Kong Applied Science and Technology Research Institute Company Limited Method and apparatus for posture, dimension and shape measurements of objects in 3D scenes
CN115298708A (zh) * 2020-03-30 2022-11-04 上海科技大学 多视角神经人体渲染
CN113866791A (zh) * 2020-06-30 2021-12-31 商汤集团有限公司 雷达装置采集的数据的处理方法及处理装置
CN112634366B (zh) * 2020-12-23 2023-10-17 北京百度网讯科技有限公司 位置信息的生成方法、相关装置及计算机程序产品
CN112287907B (zh) * 2020-12-24 2021-03-19 湖南联智科技股份有限公司 一种基于点云密度梯度的孔洞识别方法
WO2022141220A1 (zh) * 2020-12-30 2022-07-07 深圳市大疆创新科技有限公司 点云处理方法和装置、测距装置及可移动平台
CN113052955B (zh) * 2021-03-19 2023-06-30 西安电子科技大学 一种点云补全方法、系统及应用
US11741621B2 (en) * 2021-05-10 2023-08-29 Qingdao Pico Technology Co., Ltd. Method and system for detecting plane information
CN113298952B (zh) * 2021-06-11 2022-07-15 哈尔滨工程大学 一种基于数据扩容与相似性度量的残缺点云分类方法
CN114266780A (zh) * 2022-02-28 2022-04-01 深圳市其域创新科技有限公司 一种建筑物单体化实例分割方法及装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006084385A1 (en) * 2005-02-11 2006-08-17 Macdonald Dettwiler & Associates Inc. 3d imaging system
JP4715903B2 (ja) * 2008-10-29 2011-07-06 株式会社明電舎 物体の三次元形状モデル作製装置
WO2012012943A1 (en) * 2010-07-28 2012-02-02 Shenzhen Institute Of Advanced Technology Chinese Academy Of Sciences Method for reconstruction of urban scenes
US8879828B2 (en) 2011-06-29 2014-11-04 Matterport, Inc. Capturing and aligning multiple 3-dimensional scenes
US8731247B2 (en) 2012-01-20 2014-05-20 Geodigital International Inc. Densifying and colorizing point cloud representation of physical surface using image data
US9183631B2 (en) 2012-06-29 2015-11-10 Mitsubishi Electric Research Laboratories, Inc. Method for registering points and planes of 3D data in multiple coordinate systems
US9811880B2 (en) 2012-11-09 2017-11-07 The Boeing Company Backfilling points in a point cloud
EP3007129A4 (en) * 2013-05-31 2016-07-27 Panasonic Ip Man Co Ltd MODELING DEVICE, THREE-DIMENSIONAL MODEL GENERATION DEVICE, MODELING METHOD, PROGRAM AND LAYOUT SIMULATOR
US9412040B2 (en) 2013-12-04 2016-08-09 Mitsubishi Electric Research Laboratories, Inc. Method for extracting planes from 3D point cloud sensor data
US9609307B1 (en) * 2015-09-17 2017-03-28 Legend3D, Inc. Method of converting 2D video to 3D video using machine learning
US10026230B2 (en) * 2016-03-30 2018-07-17 Daqri, Llc Augmented point cloud for a visualization system and method
US9972067B2 (en) * 2016-10-11 2018-05-15 The Boeing Company System and method for upsampling of sparse point cloud for 3D registration

Similar Documents

Publication Publication Date Title
JP2018124985A5 (ja)
JP6760957B2 (ja) 3次元モデリング方法及び装置
RU2017130021A (ru) Оценка расстояния до объекта с использованием данных из одиночной камеры
JP2016534461A5 (ja)
WO2020019221A1 (zh) 一种自主定位和地图建立方法、装置和机器人
US9020251B2 (en) Image processing apparatus and method
IL291685B2 (en) Methods and systems for discovering and integrating structural features in 3D reconstruction
JP2015108621A5 (ja) 3次元点群から平面を抽出する、方法、画像処理装置およびプログラムを記憶した非一次的なコンピュータ可読媒体
JP2011175477A5 (ja) 3次元計測装置、処理方法、プログラム及び記憶媒体
DE102014212304A1 (de) Informationsverarbeitungsvorrichtung, Informationsverarbeitungsverfahren und Speichermedium
JP2016530581A5 (ja)
CN107077744A (zh) 使用边缘的三维模型生成
JP2015008148A5 (ja)
JP2019083001A5 (ja)
JP2008261755A5 (ja)
EP3756163B1 (en) Methods, devices, and computer program products for gradient based depth reconstructions with robust statistics
GB2594657A (en) Damage detection from multi-view visual data
JP2015515068A5 (ja)
CN107507277A (zh) 三维点云重构方法和装置、服务器及可读存储介质
JP2016179534A (ja) 情報処理装置、情報処理方法、プログラム
EP3308323A1 (en) Method for reconstructing 3d scene as 3d model
JP2017011431A5 (ja)
JP2016097657A5 (ja)
JP2019040229A5 (ja)
TW201346833A (zh) 三維幾何測量方法