JP7316456B2 - 点群マップ構築方法及びその装置、電子機器、記憶媒体並びにプログラム - Google Patents
点群マップ構築方法及びその装置、電子機器、記憶媒体並びにプログラム Download PDFInfo
- Publication number
- JP7316456B2 JP7316456B2 JP2022531403A JP2022531403A JP7316456B2 JP 7316456 B2 JP7316456 B2 JP 7316456B2 JP 2022531403 A JP2022531403 A JP 2022531403A JP 2022531403 A JP2022531403 A JP 2022531403A JP 7316456 B2 JP7316456 B2 JP 7316456B2
- Authority
- JP
- Japan
- Prior art keywords
- scale
- point cloud
- cloud map
- calibration
- physical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010276 construction Methods 0.000 title claims description 50
- 238000003860 storage Methods 0.000 title claims description 31
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 238000000034 method Methods 0.000 claims description 33
- 238000004590 computer program Methods 0.000 claims description 24
- 230000000007 visual effect Effects 0.000 claims description 24
- 238000000605 extraction Methods 0.000 claims description 9
- 238000012935 Averaging Methods 0.000 claims description 7
- 230000003190 augmentative effect Effects 0.000 claims description 3
- 238000003672 processing method Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 20
- 238000005516 engineering process Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000007726 management method Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011960 computer-aided design Methods 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 244000144992 flock Species 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
- G06T7/85—Stereo camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2016—Rotation, translation, scaling
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Architecture (AREA)
- Remote Sensing (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Geophysics And Detection Of Objects (AREA)
- Image Analysis (AREA)
Description
本願は、2020年12月25日に中国特許局に提出された、出願番号が202011565328.Xであり、発明の名称が「点群マップ構築方法及びその装置、電子機器並びに記憶媒体」である中国特許出願に基づいて提出されるものであり、当該中国特許出願の優先権を主張し、当該中国特許出願の全ての内容が参照として本願に援用される。
複数のスケール較正物がある場合、何れのスケール較正物について、スケール較正物の物理スケール及びスケール較正物の特徴スケールに基づいて、スケール較正物に対応する第2拡大縮小比率を決定し、
複数のスケール較正物に対応する第2拡大縮小比率を平均して、第1拡大縮小比率を決定するように構成される。
決定サブモジュールは、具体的に、
第1点群マップにおける少なくとも1つのスケール較正物に対応する点群特徴に基づいて、第1点群マップにおける少なくとも1つのスケール較正物の特徴スケールを決定するように構成される。
Claims (8)
- 電子機器に適用される点群マップ構築方法であって、
目標領域に対して画像収集を実行することにより取得された少なくとも1つの目標画像を取得することであって、前記目標領域は、物理スケールが既知である複数のスケール較正物を含む、ことと、
前記少なくとも1つの目標画像に基づいて、前記目標領域に対応する第1点群マップを構築することと、
前記第1点群マップにおける前記複数のスケール較正物の特徴スケールを決定することと、
前記複数のスケール較正物の物理スケール、及び前記複数のスケール較正物の特徴スケールに基づいて、第1拡大縮小比率を決定することと、
前記第1拡大縮小比率に基づいて、前記第1点群マップを拡大縮小調整して、第2点群マップを取得することと、
前記第2点群マップに基づいて、前記目標領域に対して視覚測位を実行して、視覚測位結果を取得し、前記視覚測位結果に基づいて、拡張現実(AR)ナビゲートを実行することと、を含み、
前記複数のスケール較正物の物理スケール、及び前記複数のスケール較正物の特徴スケールに基づいて、第1拡大縮小比率を決定することは、
何れの前記スケール較正物について、前記スケール較正物の物理スケール及び前記スケール較正物の特徴スケールに基づいて、前記スケール較正物に対応する第2拡大縮小比率を決定することと、
複数の前記スケール較正物に対応する第2拡大縮小比率を平均して、前記第1拡大縮小比率を決定することと、を含む、前記点群マップ構築方法。 - 前記少なくとも1つの目標画像に基づいて、前記目標領域に対応する第1点群マップを構築することは、
前記少なくとも1つの目標画像に対して特徴抽出を実行して、前記目標領域に対応する特徴情報を取得することと、
前記目標領域に対応する特徴情報に基づいて、前記第1点群マップを構築することと、を含む、
請求項1に記載の点群マップ構築方法。 - 前記第1点群マップは、前記複数のスケール較正物に対応する点群特徴を含み、
前記第1点群マップにおける前記複数のスケール較正物の特徴スケールを決定することは、
前記第1点群マップにおける前記複数のスケール較正物に対応する点群特徴に基づいて、前記第1点群マップにおける前記複数のスケール較正物の特徴スケールを決定することを含む、
請求項2に記載の点群マップ構築方法。 - 前記スケール較正物は、物理スケールが既知である2次元コード、及び物理スケールが既知である較正板のうちの少なくとも1つを含む、
請求項1ないし3のいずれか一項に記載の点群マップ構築方法。 - 点群マップ構築装置であって、
目標領域に対して画像収集を実行することにより取得された少なくとも1つの目標画像を取得するように構成される画像取得モジュールであって、前記目標領域は、物理スケールが既知である複数のスケール較正物を含む、画像取得モジュールと、
前記少なくとも1つの目標画像に基づいて、前記目標領域に対応する第1点群マップを構築するように構成される点群マップ構築モジュールと、
前記第1点群マップにおける前記複数のスケール較正物の特徴スケールを決定し、前記複数のスケール較正物の物理スケール、及び前記複数のスケール較正物の特徴スケールに基づいて、第1拡大縮小比率を決定し、前記第1拡大縮小比率に基づいて、前記第1点群マップを拡大縮小調整して、第2点群マップを取得するように構成されるスケール調整モジュールと、
前記第2点群マップに基づいて、前記目標領域に対して視覚測位を実行して、視覚測位結果を取得し、前記視覚測位結果に基づいて、ARナビゲートを実行するように構成される視覚測位モジュールと、を備え、
前記スケール調整モジュールは具体的に、何れの前記スケール較正物について、前記スケール較正物の物理スケール及び前記スケール較正物の特徴スケールに基づいて、前記スケール較正物に対応する第2拡大縮小比率を決定し、複数の前記スケール較正物に対応する第2拡大縮小比率を平均して、前記第1拡大縮小比率を決定するように構成される、前記点群マップ構築装置。 - 電子機器であって、
プロセッサと、
プロセッサ実行可能な命令を記憶するように構成されるメモリと、を備え、
前記プロセッサは、前記メモリに記憶されている命令を呼び出して実行することにより、請求項1ないし4のいずれか一項に記載の方法を実行するように構成される、前記電子機器。 - コンピュータプログラム命令が記憶されているコンピュータ可読記憶媒体であって、
前記コンピュータプログラム命令がプロセッサに、請求項1ないし4のいずれか一項に記載のデータ処理方法を実行させる、前記コンピュータ可読記憶媒体。 - コンピュータ可読コードを含むコンピュータプログラムであって、
前記コンピュータ可読コードが電子機器で実行されるときに、前記電子機器のプロセッサに、請求項1ないし4のいずれか一項に記載の方法を実行させる、前記コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011565328.X | 2020-12-25 | ||
CN202011565328.XA CN112541971A (zh) | 2020-12-25 | 2020-12-25 | 点云地图构建方法及装置、电子设备和存储介质 |
PCT/CN2021/097541 WO2022134475A1 (zh) | 2020-12-25 | 2021-05-31 | 点云地图构建方法及装置、电子设备、存储介质和程序 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023510474A JP2023510474A (ja) | 2023-03-14 |
JP7316456B2 true JP7316456B2 (ja) | 2023-07-27 |
Family
ID=75017587
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022531403A Active JP7316456B2 (ja) | 2020-12-25 | 2021-05-31 | 点群マップ構築方法及びその装置、電子機器、記憶媒体並びにプログラム |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP7316456B2 (ja) |
KR (1) | KR20220130707A (ja) |
CN (1) | CN112541971A (ja) |
WO (1) | WO2022134475A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112541971A (zh) * | 2020-12-25 | 2021-03-23 | 深圳市慧鲤科技有限公司 | 点云地图构建方法及装置、电子设备和存储介质 |
CN115097976B (zh) * | 2022-07-13 | 2024-03-29 | 北京有竹居网络技术有限公司 | 用于图像处理的方法、装置、设备和存储介质 |
CN116029952B (zh) * | 2022-07-27 | 2023-10-20 | 荣耀终端有限公司 | 点云评测方法及其相关设备 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019065536A1 (ja) | 2017-09-26 | 2019-04-04 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 再構成方法および再構成装置 |
CN111127661A (zh) | 2019-12-17 | 2020-05-08 | 北京超图软件股份有限公司 | 一种数据处理方法、装置及电子设备 |
CN111127561A (zh) | 2019-12-05 | 2020-05-08 | 农芯(南京)智慧农业研究院有限公司 | 一种多视角图像标定装置及方法 |
CN111445578A (zh) | 2020-03-27 | 2020-07-24 | 清华大学 | 一种地图三维道路特征识别方法和系统 |
US20200249359A1 (en) | 2017-07-25 | 2020-08-06 | Waymo Llc | Determining Yaw Error from Map Data, Lasers, and Cameras |
CN111563934A (zh) | 2020-06-10 | 2020-08-21 | 浙江欣奕华智能科技有限公司 | 单目视觉里程计尺度确定方法和装置 |
CN112105890A (zh) | 2019-01-30 | 2020-12-18 | 百度时代网络技术(北京)有限公司 | 用于自动驾驶车辆的基于rgb点云的地图生成系统 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2567245A (en) * | 2017-10-09 | 2019-04-10 | Nokia Technologies Oy | Methods and apparatuses for depth rectification processing |
CN111145339B (zh) * | 2019-12-25 | 2023-06-02 | Oppo广东移动通信有限公司 | 图像处理方法及装置、设备、存储介质 |
CN111882657B (zh) * | 2020-06-29 | 2024-01-26 | 杭州易现先进科技有限公司 | 三维重建的尺度恢复方法、装置、系统和计算机设备 |
CN112541971A (zh) * | 2020-12-25 | 2021-03-23 | 深圳市慧鲤科技有限公司 | 点云地图构建方法及装置、电子设备和存储介质 |
-
2020
- 2020-12-25 CN CN202011565328.XA patent/CN112541971A/zh active Pending
-
2021
- 2021-05-31 JP JP2022531403A patent/JP7316456B2/ja active Active
- 2021-05-31 WO PCT/CN2021/097541 patent/WO2022134475A1/zh active Application Filing
- 2021-05-31 KR KR1020227025486A patent/KR20220130707A/ko not_active Application Discontinuation
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20200249359A1 (en) | 2017-07-25 | 2020-08-06 | Waymo Llc | Determining Yaw Error from Map Data, Lasers, and Cameras |
WO2019065536A1 (ja) | 2017-09-26 | 2019-04-04 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 再構成方法および再構成装置 |
CN112105890A (zh) | 2019-01-30 | 2020-12-18 | 百度时代网络技术(北京)有限公司 | 用于自动驾驶车辆的基于rgb点云的地图生成系统 |
CN111127561A (zh) | 2019-12-05 | 2020-05-08 | 农芯(南京)智慧农业研究院有限公司 | 一种多视角图像标定装置及方法 |
CN111127661A (zh) | 2019-12-17 | 2020-05-08 | 北京超图软件股份有限公司 | 一种数据处理方法、装置及电子设备 |
CN111445578A (zh) | 2020-03-27 | 2020-07-24 | 清华大学 | 一种地图三维道路特征识别方法和系统 |
CN111563934A (zh) | 2020-06-10 | 2020-08-21 | 浙江欣奕华智能科技有限公司 | 单目视觉里程计尺度确定方法和装置 |
Non-Patent Citations (1)
Title |
---|
井本治孝, 外2名,"ディジタル写真三次元計測の開発と実用化",石川島播磨技報,石川島播磨重工業株式会社,2002年05月01日,第42巻, 第3号,p.157-160 |
Also Published As
Publication number | Publication date |
---|---|
KR20220130707A (ko) | 2022-09-27 |
WO2022134475A1 (zh) | 2022-06-30 |
JP2023510474A (ja) | 2023-03-14 |
CN112541971A (zh) | 2021-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI781359B (zh) | 人臉和人手關聯檢測方法及裝置、電子設備和電腦可讀儲存媒體 | |
JP7316456B2 (ja) | 点群マップ構築方法及びその装置、電子機器、記憶媒体並びにプログラム | |
JP7262659B2 (ja) | 目標対象物マッチング方法及び装置、電子機器並びに記憶媒体 | |
TWI767596B (zh) | 場景深度和相機運動預測方法、電子設備和電腦可讀儲存介質 | |
US20210097715A1 (en) | Image generation method and device, electronic device and storage medium | |
US20210319538A1 (en) | Image processing method and device, electronic equipment and storage medium | |
CN111551191B (zh) | 传感器外参数标定方法及装置、电子设备和存储介质 | |
CN112146645B (zh) | 一种坐标系对齐的方法及装置、电子设备和存储介质 | |
CN114019473A (zh) | 对象检测方法及装置、电子设备和存储介质 | |
CN111401230B (zh) | 姿态估计方法及装置、电子设备和存储介质 | |
CN110989901B (zh) | 图像定位的交互显示方法及装置、电子设备和存储介质 | |
CN112432637B (zh) | 定位方法及装置、电子设备和存储介质 | |
CN111860373B (zh) | 目标检测方法及装置、电子设备和存储介质 | |
CN111563138A (zh) | 定位方法及装置、电子设备和存储介质 | |
TW202301275A (zh) | 深度檢測方法及裝置、電子設備、儲存媒體和程式產品 | |
CN112767541B (zh) | 三维重建方法及装置、电子设备和存储介质 | |
CN114581525A (zh) | 姿态确定方法及装置、电子设备和存储介质 | |
CN112432636B (zh) | 定位方法及装置、电子设备和存储介质 | |
CN112837372A (zh) | 数据生成方法及装置、电子设备和存储介质 | |
WO2022110801A1 (zh) | 数据处理方法及装置、电子设备和存储介质 | |
CN114549983A (zh) | 计算机视觉模型训练方法及装置、电子设备和存储介质 | |
CN114638949A (zh) | 虚拟对象显示方法及装置、电子设备和存储介质 | |
CN114266305A (zh) | 对象识别方法及装置、电子设备和存储介质 | |
CN114519794A (zh) | 特征点匹配方法及装置、电子设备和存储介质 | |
CN112683262A (zh) | 定位方法及装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220526 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220526 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230425 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230613 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230711 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230714 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7316456 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |