JP2024043764A - 情報処理装置、移動体、情報処理方法及びコンピュータプログラム - Google Patents
情報処理装置、移動体、情報処理方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2024043764A JP2024043764A JP2022148933A JP2022148933A JP2024043764A JP 2024043764 A JP2024043764 A JP 2024043764A JP 2022148933 A JP2022148933 A JP 2022148933A JP 2022148933 A JP2022148933 A JP 2022148933A JP 2024043764 A JP2024043764 A JP 2024043764A
- Authority
- JP
- Japan
- Prior art keywords
- orientation
- information
- correction
- shape information
- shape
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 66
- 238000004590 computer program Methods 0.000 title claims description 10
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000004364 calculation method Methods 0.000 claims abstract description 51
- 238000012937 correction Methods 0.000 claims description 211
- 238000005259 measurement Methods 0.000 description 89
- 238000000034 method Methods 0.000 description 31
- 238000010586 diagram Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Length Measuring Devices With Unspecified Measuring Means (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
【課題】欠落やずれ等の生じた位置姿勢情報の補正を自動で行うことが可能な情報処理装置を提供する。【解決手段】情報処理装置において、移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得手段を有し、対象の位置姿勢情報と、形状情報取得手段で取得した対象の位置姿勢情報に紐づく形状情報と、近似できる位置姿勢情報に紐づく形状情報に基づいて、前記位置姿勢情報を補正した位置姿勢情報を算出する第2位置姿勢算出手段と、を有する。【選択図】図2
Description
本発明は、移動体に適した情報処理装置、移動体、情報処理方法及びコンピュータプログラムに関するものである
無人搬送車(例えばAGV:Automated Guided Vehicle)と呼ばれる、工場や物流倉庫などの環境内で稼働する移動体が知られている。この移動体は、設定した経路を、自己位置推定を行いながら走行する。又、移動体が計測した走行経路周辺の物体の位置姿勢データを用いて、障害物の形状等を表現した地図(以降、障害物レイアウト地図)を作成することで、移動体の経路設定に用いる技術も提案されている。
特許文献1には、レーザー測距計を搭載した自律移動ロボットで計測した形状データを用いて仮の障害物レイアウト地図を生成する手法が記載されている。又、ユーザにより手動でフレームごとの仮の障害物レイアウト地図の一部の形状の位置姿勢を修正することで、欠損の生じない障害物レイアウト地図を作成する手法が公開されている。
しかしながら、特許文献1に記載の手法では、移動体の自己位置推定を行いながら地図を障害物レイアウト作成する過程において、冗長な移動体の位置姿勢の計測データが削除される場合がある。又、特許文献1の手法では、位置姿勢データの削除によって生じる地図の欠けや位置ずれの補正を、ユーザが手動で全て行わなければならず、煩雑であるという問題がある。
上記課題に鑑みて、本発明では欠落やずれ等の生じた位置姿勢情報の補正を自動で行うことが可能な情報処理装置を提供することを目的とする。
情報処理装置において、
移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得手段と、
前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、
前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、
前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、前記補正量の近似値を取得する補正量取得手段と、
前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、
前記対象の位置姿勢情報と、前記形状情報取得手段で取得した前記対象の位置姿勢情報に紐づく形状情報と、前記近似できる位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、を有することを特徴とする。
移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得手段と、
前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、
前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、
前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、前記補正量の近似値を取得する補正量取得手段と、
前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、
前記対象の位置姿勢情報と、前記形状情報取得手段で取得した前記対象の位置姿勢情報に紐づく形状情報と、前記近似できる位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、を有することを特徴とする。
本発明によると、欠落やずれ等の生じた位置姿勢情報の補正を自動で行うことが可能な情報処理装置を実現できる。
以下、図面を参照して本発明の実施形態を説明する。ただし、本発明は以下の実施形態に限定されるものではない。なお、各図において、同一の部材または要素については同一の参照番号を付し、重複する説明は省略または簡略化する。
<実施形態1>
実施形態1では、障害物の形状を計測するセンサを搭載した移動体(例えば自律移動体)を移動させる際に、形状情報に紐づく位置姿勢が削除された場合に、削除された位置姿勢の補正処理を実施する例について説明する。尚、実施形態1では、削除された位置姿勢の近傍の位置姿勢の補正量を用いて位置姿勢の補正処理を実施する。
実施形態1では、障害物の形状を計測するセンサを搭載した移動体(例えば自律移動体)を移動させる際に、形状情報に紐づく位置姿勢が削除された場合に、削除された位置姿勢の補正処理を実施する例について説明する。尚、実施形態1では、削除された位置姿勢の近傍の位置姿勢の補正量を用いて位置姿勢の補正処理を実施する。
即ち、削除された位置姿勢を補正する際に、近似値となる補正量で位置姿勢の推定を行う第1の位置姿勢情報を算出する。更に第1の位置姿勢情報の算出によって補正された形状情報で補正しきれずに残ってしまった位置ずれがなくなるように、位置姿勢を補正して第2の位置姿勢情報を算出する。詳細は後述する。
実施形態1における、削除された位置姿勢の補正処理を実施する様子を、図1を使って説明する。図1(A)、(B)は、実施形態1に係る移動体の走行環境の例を説明するための模式図であり、図1(A)は、障害物レイアウト地図を生成する対象の空間を上方から見た模式図である。
図1において、101は例えば自律移動体等の移動体である。位置姿勢計測用センサ102は本実施形態では例えばステレオカメラであり、一定のフレームレート(例えば30枚/秒)で同時に撮影した左右の撮像画像を用いて、撮像範囲内の障害物との距離情報を計測する。形状計測用センサ103は本実施形態ではデプスセンサであり、一定のフレームレート(例えば30枚/秒)で撮影した距離画像を用いて、撮像範囲内の障害物の形状を計測する。
118は地図生成対象の空間であり、空間118には、移動体が移動する際の障害となる障害物104~115が存在する。操作者は、移動体101をリモート操作しながら、移動体101に障害物104~115の形状を計測させるために、障害物の近傍をルート116に沿って走行させる。この移動体101の走行中は、移動体101は所定の周期で、位置姿勢計測用センサ102の計測画像をもとにカメラ位置姿勢117を複数地点で計測する。
図1(B)は、位置姿勢計測用センサ102が計測したカメラ位置姿勢と、形状計測用センサ103で計測した形状情報との関連を表した図である。移動体101が走行したルート116上に、ID:18~ID:20の3つの位置姿勢観測点を含む、複数の位置姿勢観測点がある。この時ID:18の位置姿勢観測点は、形状情報119と紐づいている。
又、ID:19の位置姿勢観測点は、形状情報120と紐づいている。ここで形状情報119は、ID:18の位置姿勢観測点において形状計測用センサ103が計測した形状情報である。同様に形状情報120は、ID:19の位置姿勢観測点において形状計測用センサ103が計測した形状情報である。
実施形態1では移動体101がルート116を1周して戻った際に、障害物レイアウト地図の精度を上げるためにループクローズ補正を行い軌道や地図を補正する。又、そのループクローズ補正において、例えばID:19の位置姿勢観測点が冗長なものとして削除される場合を想定する。実施形態1では、その際にID:19の補正後の位置姿勢を、近傍のID:18(又はID:20)の位置姿勢観測点の情報を利用して算出する。
実施形態1における情報処理システムの構成を、図2、図3を用いて説明する。図2は、実施形態1に係る情報処理システム201の機能ブロック図である。尚、図2に示される機能ブロックの一部は、撮像装置に含まれる不図示のコンピュータに、不図示の記憶媒体としてのメモリに記憶されたコンピュータプログラムを実行させることによって実現されている。
しかし、それらの一部又は全部をハードウェアで実現するようにしても構わない。ハードウェアとしては、専用回路(ASIC)やプロセッサ(リコンフィギュラブルプロセッサ、DSP)などを用いることができる。又、図2に示される夫々の機能ブロックは、同じ筐体に内蔵されていなくても良く、互いに信号路を介して接続された別々の装置により構成しても良い。尚、図2に関する上記の説明は、図8、図10についても同様に当てはまる。
情報処理システム201は、位置姿勢計測用センサ102、形状計測用センサ103、位置姿勢計測部202、情報処理装置203、位置姿勢補正部204を含む。情報処理装置203は、形状情報取得部205、位置姿勢取得部206、補正対象決定部207、補正量取得部208、第1位置姿勢算出部209、第2位置姿勢算出部210を有する。
又、情報処理システム201にはコンピュータとしてのCPUが内蔵されており、記憶媒体としてのメモリに記憶されたコンピュータプログラムに基づき情報処理システム201の各部の動作を制御する制御手段として機能している。
形状情報取得部205(形状情報取得手段)は、形状計測用センサ103で計測した、走行経路周辺の障害物の形状情報を取得する。即ち、形状情報取得部205は、移動する形状計測用センサ103が複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する。尚、本実施形態では、形状情報とは、形状計測用センサ103で計測した距離画像から算出した2次元の特徴点マップを意味する。
位置姿勢計測部202は、位置姿勢計測用センサ102で計測した位置姿勢情報や、位置姿勢計測用センサ102と形状計測用センサ103の位置関係に基づいて、形状計測用センサ103の位置姿勢情報を計測する。ここで取得する位置姿勢情報は、ループクローズ補正前やループクローズ補正後の位置姿勢である。
尚、本実施形態では、形状計測用センサ103の位置姿勢情報とは、空間118に設定した座標系における形状計測用センサ103の位置を示す座標値、及び形状計測用センサ103の計測方向を示す角度を意味する。
位置姿勢取得部206(位置姿勢取得手段)は、複数地点で形状計測用センサ103により形状情報を夫々計測した際の位置姿勢情報を、位置姿勢計測部202より取得する。尚、本実施形態では、移動体101には形状計測用センサ103を2台搭載しているため、取得する位置姿勢情報は2台分である。
位置姿勢補正部204(補正手段)は、位置姿勢計測部202で計測した複数地点の位置姿勢観測点(位置姿勢情報)を補正する。具体的には、ループクローズ補正を行って、複数地点の位置姿勢観測点(位置姿勢情報)の補正処理を行う。補正対象決定部207は、上記補正処理を実施する対象の位置姿勢情報を決定する。即ち、補正対象決定部207は、センサの位置や姿勢を補正する対象の位置姿勢を決定する。
特に本実施形態においては、位置姿勢補正部204にて行われたループクローズ補正によって、冗長なものとして削除されたことで欠落した位置姿勢情報を決定する。尚、本実施形態では、位置姿勢情報のこのような欠落はループクローズ補正やバンドル調整等により生じる場合を想定している。
補正量取得部208は、補正対象決定部207にて、欠落した位置姿勢情報の補正処理が必要だと決定された場合に、例えば最近傍の形状計測用センサ103の位置姿勢観測点の位置姿勢情報を取得する。そして、その最近傍の位置姿勢観測点がループクローズ補正された際の補正量を取得する。即ち、補正量取得部208は、補正対象の位置姿勢を補正対象決定部207から取得し、位置姿勢情報の補正傾向と近似できる位置姿勢情報を位置姿勢取得部206から取得し、補正量の近似値を取得する。
第1位置姿勢算出部209(第1位置姿勢算出手段)は、補正対象決定部207で対象の位置姿勢情報の補正が必要だと決定された場合に、位置姿勢取得部206で取得した形状計測用センサ103の位置姿勢観測点の位置姿勢情報を取得する。即ち、第1位置姿勢算出部209は、補正対象決定部207で決定した対象の位置姿勢情報と、補正量取得部208で取得した補正量に基づき、対象の位置姿勢を補正した第1の位置姿勢情報を算出する。
そして、補正量取得部208で取得した、近傍の位置姿勢観測点の補正量(補正された位置姿勢情報)を近似補正量として取得し、両者を用いて、対象の位置姿勢観測点の位置姿勢情報を近似補正量で補正し、第1の位置姿勢情報として算出する。即ち、欠落した位置姿勢情報を、補正された近傍の他の位置姿勢情報に基づき第1の位置姿勢情報として算出する。
尚、その際に位置姿勢取得部206で取得する位置姿勢観測点の位置姿勢情報は、ループクローズ補正時に削除された時点での位置姿勢情報とする。
第2位置姿勢算出部210(第2の位置姿勢算出手段)は、第1位置姿勢算出部209で算出した、対象の第1の位置姿勢情報と、補正量取得部208と形状情報取得部205で取得した、対象の位置姿勢観測点に紐づいた形状情報を取得する。又、近傍の位置姿勢観測点に紐づいた形状情報を取得し、それらを用いて、補正対象の位置姿勢観測点を誤差補正した際の正確な位置姿勢情報を第2の位置姿勢情報として算出する。
図3は、実施形態1に係る情報処理装置203の利用場面の例を説明する図である。101は図1で説明したように、ルート116上を走行する移動体であり、この移動体101内に情報処理装置203が搭載されている。
そして、この移動体101上に位置姿勢計測用センサ102と形状計測用センサ103が搭載されており、情報処理装置203と位置姿勢計測用センサ102と形状計測用センサ103が、図2に示したように形状情報や位置姿勢情報のやり取りを行う。但し、移動体101から離れた場所に情報処理装置203を配置しても良い。
図4は、実施形態1に係る情報処理装置203のハードウェア構成例を示す図である。401はコンピュータとしてのCPUであり、システムバス408に接続された各種デバイスの制御を行う。402はROMであり、BIOSのプログラムやブートプログラムを記憶する。403はRAMであり、CPU401の主記憶装置として使用される。
404は外部メモリであり、情報処理装置203のCPU401が処理するコンピュータプログラムを格納する。入力部405はキーボードやマウスであり、情報の入力に係る処理を行う。
表示部406はCPU401からの指示に従って情報処理装置203の演算結果を表示信号として表示装置に出力する。尚、表示装置は液晶表示装置やプロジェクタ、LEDインジケーターなどであれば良く、種類は問わない。又、表示装置は移動体101に搭載されていても良いし、移動体とは別の場所に配置され表示部406からの表示信号を例えばネットワーク等を介して受け取り、表示を行うものであっても良い。
407は通信インターフェイスであり、ネットワークを介して情報通信を行うものであり、通信インターフェイス407はイーサネット、USB、シリアル通信、無線通信等を含む。又、通信インターフェイス407には位置姿勢計測用センサ102や形状計測用センサ103や表示装置などが接続されている。
実施形態1における情報処理装置1024の処理手順及び詳細な処理方法を、図5、図6を用いて説明する。図5は実施形態1に係る情報処理装置の行う処理全体の流れを示すフローチャートであり、図6は、実施形態1に係る第2の位置姿勢を算出する詳細処理を示すフローチャートである。尚、情報処理システム内のコンピュータとしてのCPU401が例えば外部メモリ404に記憶されたコンピュータプログラムを実行することによって図5、図6のフローチャートの各ステップの動作が行われる。
ステップS501(形状情報取得ステップ)では、形状情報取得部205が移動体101周辺の障害物の形状情報を周期的に取得する。即ち、移動する形状計測用センサ103が複数地点で夫々計測したセンサの周囲の物体の形状情報を取得する。ステップS502(位置姿勢取得ステップ)では、形状計測用センサ103が形状を計測した時の形状計測用センサ103の位置姿勢情報を位置姿勢取得部206が取得する。
即ち、形状情報を複数地点で夫々計測した際の形状計測用センサ103の位置姿勢情報を取得する。ステップS503では、補正対象の位置姿勢を決定する。具体的には、形状に欠けや位置ずれが生じている、或いは位置姿勢がずれている、という情報に基づき補正対象の位置姿勢を判断する。
ステップS504では、補正量取得部208が補正対象の位置姿勢情報の補正量と近似できる位置姿勢観測点の補正量を取得する。本実施形態では、最近傍の形状計測用センサ103の位置姿勢観測点での補正量を近似できるものとして、その最近傍の位置姿勢観測点のループクローズ補正時の補正量を取得する。尚、最近傍でなくても周囲の複数の形状計測用センサ103の位置姿勢観測点での補正量を近似できるものとして、それらの位置姿勢観測点のループクローズ補正時の補正量を取得しても良い。
ステップS505(第1の位置姿勢算出ステップ)では、補正対象決定部207で、補正対象の位置姿勢に補正が必要だと決定された場合に、第1位置姿勢算出部209が最近傍の位置姿勢観測点の補正量を用いて、位置姿勢観測点の位置姿勢情報を補正する。即ち、ステップS505では、例えば欠落した位置姿勢情報を、補正ステップにより補正された他の位置姿勢情報に基づき第1の位置姿勢情報として算出する。それにより第1段階目の位置姿勢観測点である第1の位置姿勢を算出(推定)する。詳細は図6に基づき後述する。
ステップS506では、第2位置姿勢算出部210が補正対象の第1段階目の位置姿勢観測点を本来の補正されるべき位置になるように更に補正した際の第2段階目の位置姿勢情報である第2の位置姿勢情報を算出する。詳細は以下の図6を参照して説明する。
図6は、前述のように、実施形態1に係る第2の位置姿勢を算出する詳細処理を示すフローチャートであり、図5のステップS506の詳細な処理の流れを示している。図6では、第2の位置姿勢とその第2の位置姿勢で撮影した場合の形状情報を算出する。
ステップS601では、形状情報取得部205で取得した形状情報とステップS505で推定した第1の位置姿勢を用いて、第1の位置姿勢において撮影した場合の形状情報を算出(推定)する。
本実施形態における形状情報とは3次元の測距点の集合体である。各測距点の番号iにおいて、位置姿勢観測点の削除が生じた時点での形状情報をQi(i=1~N)とする。Nは測距点の総数である。ここで、形状情報Qiを計測したカメラ位置姿勢と図5のステップS505で算出した第1の位置姿勢Hに基づいて、Qiを座標変換して第1の位置姿勢Hで計測した場合の形状情報Q‘iを計算する。
ステップS602は、ステップS601で算出した形状情報Q‘iと、ステップS504で取得した補正量が近似する位置姿勢で計測した形状情報Pi間で、配置パターンが類似している測距点群を対応点として探索する。尚、本実施形態では、ステップS504で取得した補正量が近似する位置姿勢とは、形状情報Qiを計測したカメラ位置姿勢に対して最近傍のカメラ位置姿勢とする。
具体的には、形状情報Q’iとPi内の測距点群の配置パターンの類似度が一定の閾値以上の測距点群を対応点として、形状情報Q’iから抽出された測距点群Kj(j=1~M)とPiから抽出されたLj(j=1~M)検出する。jは対応していると判定された測距点の番号であり、Mは対応している測距点の総数である。本実施形態では、この測距点群の配置パターンの類似判定には公知のブロックマッチング法を利用する。
ステップS603では、ステップS602で検出した対応点KjとLjから位置ずれ量Dを算出する。具体的には、KjとLjの各対応点に対して差分を求め、全対応点の差分の平均値を位置ずれ量Dとして算出する。即ち、対応点間の位置や姿勢のずれ量を計測する。
ステップS604では、第1の位置姿勢HとステップS603で求めた位置ずれ量に基づいて第2の位置姿勢Rを求め、更にその第2の位置姿勢Rで撮影した場合の形状情報Si(i=0~N)を算出する。具体的には、第1の位置姿勢Hを位置ずれ量Dに基づいて座標変換することで第2の位置姿勢Rを求める。そして、第1の位置姿勢Hと第2の位置姿勢Rに基づいて、形状情報Q’iを座標変換することで、第2の位置姿勢Rで撮影した場合の形状情報Siを求める。
即ち、ステップS601~ステップS604において、第1の位置姿勢情報に基づき算出された形状情報と、他の位置姿勢情報に紐づけられた他の形状情報に基づき、第1の位置姿勢情報を修正した第2の位置姿勢情報を算出している。以上のように本実施形態によれば、障害物レイアウト地図生成に使用できない移動体の位置姿勢の削除(欠落)が生じた場合でも、欠けや位置ずれのない障害物レイアウト地図を作成できる。
尚、実施形態1において位置姿勢計測用センサ102は、撮像範囲内の障害物との距離情報が得られれば良い。従って、例えば、レーザー光の反射時間から障害物との距離を推定するLiDAR(Light Detection And Ranging)センサ等であってもいい。
又、形状計測用センサ103はデプスセンサとしたが、障害物の形状情報が得られれば、これに限るものではない。例えば、ステレオカメラであっても良いし、単眼カメラであっても良いし、レーザー測距計であっても良いし、LiDARセンサであってもいい。
単眼カメラの場合、モーションステレオにより障害物までの距離を算出しても良いし、輝度情報から距離情報を出力する学習モデルを利用して距離を推定しても良い。LiDARセンサの場合、広角に照射されたレーザー光の反射時間から推定した距離値群から障害物の形状を推定する。
又、位置姿勢計測用センサ102と形状計測用センサ103は、LiDARセンサで位置姿勢計測と形状情報の計測を兼ねても構わない。又、形状情報取得部205で形状情報を取得する際は、形状情報を取得できれば良く、センサから直接取得する以外に、すでに計測されたものを記憶装置から取得しても構わない。また形状情報取得部205で取得する形状は、形状を表す特徴点分布からなるデータを取得できれば、2次元の特徴点マップ以外にも3次元の特徴点マップでも構わない。
尚、位置姿勢取得部206が位置姿勢を計測する方法は、移動体101の位置と向きが計測できるものであれば良く、移動体101に搭載したカメラで撮影した画像に基づいてSLAM(Simultaneous Localization And Mapping)技術で計測する方法に限らない。例えば、移動体101に搭載したLiDARセンサやデプスセンサの計測値に基づいてSLAM技術により計測する方法でも良いし、移動体101が備える車輪の回転数や移動体101が搭載する慣性センサに基づいて移動体101の位置向きを算出しても良い。
或いは、磁気センサ、光学センサ、電波ビーコン、GPSなどにより位置姿勢を計測しても良いし、空間118に予め設置した俯瞰カメラの映像から移動体101の位置向きを検出しても良い。更に、上記の複数の方法を組み合わせて用いても良い。又、本実施形態では、障害物レイアウト地図作成の例について説明したが、移動体101の周囲の形状情報をもとに計測したカメラ位置姿勢を用いるものであれば、経路設定のために適用しても良い。
又、補正量取得部208で取得する補正対象の位置姿勢観測点を補正するために最近傍の位置姿勢観測点を用いた。しかし、補正対象の位置姿勢観測点の補正の傾向が推測できるものであれば、位置姿勢観測点がツリー状のデータ構造の親ノードと子ノードのような依存関係の位置姿勢観測点であっても構わない。
又、補正量を近似できるものとして取得する位置姿勢観測点は、補正対象の位置姿勢観測点の補正の傾向が推測できるものであれば、複数でも構わない。その場合は、第1位置姿勢算出部209で第1の位置姿勢を推定する際に、複数の位置姿勢観測点の補正量から近似しても構わない。例えば、平均値や前後の位置姿勢観測点との物理的な距離に反比例して加重平均して算出しても良い。
又、補正対象決定部207で決定する補正対象の位置姿勢は、削除された状態以外の位置姿勢を補正対象と決定しても良い。例えば、異常な値で補正されたような位置姿勢や、もともと存在しなかったが新たに位置姿勢を推定したいような位置姿勢でも構わない。
又、補正手段としての位置姿勢補正部204で実施する補正処理は、位置姿勢誤差を補正する処理であれば、ループクローズ補正以外の処理でも良く、例えば、バンドル調整処理でも構わない。
又、第2位置姿勢算出部210で、形状情報間の対応点を検出する手法は、ブロックマッチング以外の手法でも良く、例えば、ICP(Iterative Closest Point)アルゴリズムを用いて検出しても構わない。
<実施形態2>
実施形態1では、移動体101の位置姿勢観測点を計測してループクローズ補正時に削除された位置姿勢観測点を算出している。これに対して実施形態2においては、キーフレームを用いて自己位置姿勢の推定を行う。又、欠落した前記位置姿勢情報はキーフレームに対応しているものとする。
実施形態1では、移動体101の位置姿勢観測点を計測してループクローズ補正時に削除された位置姿勢観測点を算出している。これに対して実施形態2においては、キーフレームを用いて自己位置姿勢の推定を行う。又、欠落した前記位置姿勢情報はキーフレームに対応しているものとする。
ここで、このキーフレームとは、例えば連続するフレームの特徴的な部分を対応点として取る処理を毎フレーム行うことにより自己位置姿勢の推定を行う場合に、連続する位置姿勢情報の特徴的な部分が大きく変わったときのフレームを指す。或いは、センサの移動距離が所定の閾値を超えた場合などに新たに追加しても良い。そして実施形態2では、キーフレームとともに相対位置姿勢を用いる。
この相対位置姿勢とは、キーフレームを基準にした、移動体101の相対的な位置姿勢のことである。相対位置姿勢は、障害物レイアウト地図や経路設定などに使うことが可能であり、キーフレームとは異なる頻度で計測される。実施形態2では、このキーフレームと相対位置姿勢を用いて、実施形態1と同様に、ループクローズ補正時に削除された位置姿勢を推定する。具体例を図7を用いて説明する。
図7(A)、(B)は実施形態2に係る移動体の走行環境を表す模式図であり、図7(A)は、本実施形態における障害物レイアウト地図を生成する対象の空間を上方から見た模式図である。移動体101や位置姿勢計測用センサ102、形状計測用センサ103、移動体101が移動する際のルート116、及び障害物104~115は実施形態1と同様である。この移動体101の走行中は、移動体101は定期的に位置姿勢計測用センサ102の計測画像をもとに、太枠で示したキーフレーム701と相対位置姿勢702を計測する。
図7(B)は、実施形態2において、位置姿勢計測用センサ102が計測したカメラ位置姿勢と、形状計測用センサ103で計測した形状情報との関連を表した図である。形状計測用センサ103が計測した形状情報119と120は実施形態1と同様だが、本実施形態では形状情報119は相対位置姿勢観測点703と紐づいており、同様に形状情報120は相対位置姿勢観測点704と紐づいている。
実施形態2における情報処理システムの構成を、図8を用いて説明する。図8は実施形態2に係る情報処理システム201の構成例を示す機能ブロック図である。実施形態2における情報処理システム201は、位置姿勢計測用センサ102、形状計測用センサ103、位置姿勢計測部202、情報処理装置203、位置姿勢補正部204を含む。
尚、位置姿勢計測用センサ102、形状計測用センサ103、位置姿勢計測部202、位置姿勢補正部204は実施形態1と同様のため説明は省略する。又、実施形態2における情報処理装置203は、形状情報取得部205、位置姿勢取得部206、補正対象決定部207、補正量取得部208、第1位置姿勢算出部209、第2位置姿勢算出部210、相対位置姿勢決定部801を備えている。
尚、形状情報取得部205、補正対象決定部207、第2位置姿勢算出部210は実施形態1と同様のため説明は省略する。位置姿勢取得部206は、位置姿勢計測部202で計測した形状計測用センサ103の位置姿勢情報を取得する。具体的には、実施形態1の位置姿勢取得部206に加えて、補正前のキーフレーム及び相対位置姿勢の位置姿勢情報を取得する。
補正量取得部208は、補正対象の形状計測用センサ103のキーフレームの補正の傾向が推測できるものとして、最近傍の形状計測用センサ103のキーフレームの位置姿勢情報を取得する。そして、その最近傍のキーフレームが位置姿勢補正部204にてループクローズ補正された際の補正量を取得する。
第1位置姿勢算出部209は、補正対象決定部207で補正対象のキーフレームに補正が必要だと決定された場合には以下のような処理をする。即ち、位置姿勢取得部206で取得したループクローズ補正時に削除された形状計測用センサ103の補正対象のキーフレームの位置姿勢情報と、補正量取得部208で取得した近傍のキーフレームの補正量を近似補正量として用いる。そして、補正対象のキーフレームの位置姿勢情報を近似補正量で補正した位置姿勢観測点を第1の位置姿勢情報として算出する。
相対位置姿勢決定部801(相対位置姿勢決定手段)は、位置姿勢取得部206で取得した相対位置姿勢の位置姿勢情報と、第1位置姿勢算出部209で取得したキーフレームの第1の位置姿勢情報を用いる。そして、それらに基づき相対位置姿勢を誤差補正した際の仮の位置姿勢情報を第1の相対位置姿勢情報として決定する。
第2位置姿勢算出部210は、相対位置姿勢決定部801で算出した補正対象の第1の相対位置姿勢と、補正量取得部208と形状情報取得部205で取得した補正対象の相対位置姿勢に紐づいた形状情報と、近傍の相対位置姿勢に紐づいた形状情報を用いる。そして、補正対象の相対位置姿勢を誤差補正した際の正確な位置姿勢情報を第2の相対位置姿勢情報として算出する。尚、実施形態2における情報処理装置203の他の動作は図3と同様のため、説明は省略する。
実施形態2における情報処理装置203のハードウェア構成も図4と同様のため、説明は省略する。本実施形態における情報処理装置203の処理手順及び詳細な処理方法を、図9を用いて説明する。図9は、実施形態2に係る情報処理装置の処理全体の流れを示すフローチャートである。尚、情報処理システム内のコンピュータとしてのCPU401が例えば外部メモリ404に記憶されたコンピュータプログラムを実行することによって図9のフローチャートの各ステップの動作が行われる。
図9のステップS501とステップS503は、実施形態1と同様のため、説明は省略する。ステップS502は、形状計測用センサ103が形状を計測した際の形状計測用センサ103のキーフレーム及び相対位置姿勢の位置姿勢情報を位置姿勢取得部206にて取得する。
ステップS504では、補正量取得部208が補正対象の位置姿勢情報の補正量と近似できるキーフレームの補正量を取得する。実施形態2では、最近傍の形状計測用センサ103のキーフレームでの補正量を近似できるものとして、その最近傍のキーフレームのループクローズ補正時の補正量を取得する。
ステップS505では、第1位置姿勢算出部209が補正対象決定部207で補正対象のキーフレームに補正が必要だと決定された場合に、補正後のセンサの第1の位置姿勢を算出する。即ち、補正対象のキーフレームの位置姿勢情報として、最近傍のキーフレームの補正量を用いて補正された第1段階目のキーフレームである第1の位置姿勢情報を算出する。詳細は後述する。
ステップS901では、相対位置姿勢決定部801にて、相対位置姿勢を誤差補正した際の仮の位置姿勢情報を第1の相対位置姿勢情報として決定する。詳細は後述する。ステップS506では、第2位置姿勢算出部210が補正対象の相対位置姿勢を本来の補正されるべき位置になるように、更に補正した際の第2段階目の位置姿勢情報である第2の相対位置姿勢情報を算出する。詳細な処理のフローチャート及び処理内容は、実施形態1と同様のため、説明は省略する。
以上のように実施形態2によれば、障害物レイアウト地図生成に使用できない移動体のキーフレームの削除が生じた場合でも、欠けや位置ずれのない障害物レイアウト地図を作成できる。
尚、実施形態2では、障害物レイアウト地図を作成する例について説明したが、移動体101の周囲の形状情報をもとに計測したキーフレーム又は相対位置姿勢を用いて経路設定等を行なうようにしても良い。
例えば、障害物レイアウト地図を生成しながら並行して経路設定を行う場合、位置姿勢を計測しながらそのキーフレーム又は相対位置姿勢の位置姿勢計測点を経路として設定する。又、設定した位置姿勢計測点がループクローズ補正などの補正処理によって削除された場合は、設定した位置姿勢計測点が欠落して使えなくなる。そういったケースでも、削除される位置姿勢計測点の補正前の位置姿勢情報とその位置姿勢観測点で計測した形状情報があれば、実施形態2と同様の手法で補正することができる。
<実施形態3>
実施形態3では、実施形態2によって、ループクローズ補正の影響で削除された移動体101の位置姿勢情報を推定した結果等を通知する構成を有する。実施形態3における情報処理システムの構成を、図10と図11を用いて説明する。図10は、実施形態3に係る情報処理システムの構成例を示す機能ブロック図である。
実施形態3では、実施形態2によって、ループクローズ補正の影響で削除された移動体101の位置姿勢情報を推定した結果等を通知する構成を有する。実施形態3における情報処理システムの構成を、図10と図11を用いて説明する。図10は、実施形態3に係る情報処理システムの構成例を示す機能ブロック図である。
図10では、図8のブロック図に対して新たに形状情報再補正部1001と、通知部1002が追加されている。形状情報再補正部1001と、通知部1002以外の機能ブロックは、実施形態1や実施形態2と同様のため、説明は省略する。
形状情報再補正部1001は、第2位置姿勢算出部210で算出された第2の相対位置姿勢情報と、形状情報取得部205で取得した補正対象の相対位置姿勢に紐づく形状情報を用いて、第2の相対位置姿勢情報の位置や姿勢での形状情報を再度補正する。
通知部1002は、形状情報再補正部1001で再度補正された形状情報を通知する。図11(A)、(B)は、実施形態3に係る補正後の位置姿勢情報算出の結果通知部の例を示す図であり、移動体101が計測のための空間118内を走行しながら障害物レイアウト地図を作成する様子を示すGUIを示している。
図11(A)はループクローズ補正前のGUI、図11(B)はループクローズ補正後のGUIである。1101はGUI画面、1102はステータス表示画面、1103は移動体101の計測した位置姿勢計測結果を示す画面、1104はその障害物レイアウト地図の表示画面である。
図11(A)では、ループクローズ補正前のため、移動体101(AGV No.10)の計測ステータス1105は地図作成中「Mapping」を示している。その時の移動体101の位置姿勢計測結果を示す画面1103では誤差が載った位置姿勢計測結果1106が表示されており、その時点の障害物レイアウト地図の表示画面1104にも歪んだ地図1107が表示されている。
図11(B)では、ループクローズ補正後のため、移動体101の計測ステータス1108は地図作成中かつ補正(補間)処理完了を表す「Mapping interpolation finished」が示されている。その時の移動体101の位置姿勢計測結果を示す画面1103では誤差が補正された位置姿勢計測結果1109(即ち、第2の位置姿勢情報)が表示されている。又、その時点の障害物レイアウト地図の表示画面1104にも歪みのない正確な地図1110(即ち、第2の位置姿勢情報に基づき算出された形状情報)が表示されている。
又、実施形態3における情報処理装置203のその他の動作は図3と同様のため、説明は省略する。実施形態3における情報処理装置203のハードウェア構成も図4と同様のため、説明は省略する。以上のように実施形態3によれば、障害物レイアウト地図生成に使用できない移動体のキーフレームの削除が生じた場合でも、欠けや位置ずれのない障害物レイアウト地図をわかりやすく表示(通知)できる。
実施形態3では、障害物レイアウト地図作成結果を表示する例で説明したが、ループクローズ補正等によって削除された位置姿勢を推定した結果を通知するものであれば良く、経路設定に関する表示をしても良い。尚、経路設定での通知結果を通知する場合、形状情報再補正部1001はなくても良い。実施形態3では、実施形態2の結果を通知する例で説明したが、実施形態1の結果を通知する場合でも構わない。
又、実施形態3では、1103は移動体101の計測した位置姿勢計測結果を示す画面、1104はその障害物レイアウト地図の表示画面ともに、計測範囲全体の結果を表示している。しかし、実施形態1や実施形態2で推定された結果を表示するものであれば、一部分の結果を表示するものであっても良い。又、通知手段としての通知部1002は、第2の位置姿勢情報、又は第2の位置姿勢情報に基づき算出された形状情報の少なくとも一方を通知するものであっても良い。
尚、上述の実施形態においては自律移動体に本発明を適用した例について説明した。しかし、本実施形態の移動体は、AGV(Automated Guided Vehicle)やAMR(Autonomous Mobile Robot)などの自律移動体に限らない。又、完全に自律移動しなくても運転支援的な使い方をするものであっても良い。
又、移動体は例えば自動車、列車、船舶、飛行機、ロボット、ドローンなどの移動をする移動装置であれば、どのようなものであってもよい。また、実施形態の情報処理システムの少なくとも一部が移動体に搭載されていなくても良い。又、移動体をリモートでコントロールする場合にも本発明を適用することができる。
又、位置姿勢情報の欠落はループクローズ補正やバンドル調整により削除されたことにより欠落するものに限定されない。例えば何らかの異常によって欠落が生じる場合を含む。又、欠落とは完全になくなるものに限らず、許容範囲外の値であると判断されたものも含む。
又、欠落した位置姿勢情報は、キーフレームの位置姿勢情報に限定されず、キーフレームに紐づけられた相対位置姿勢であっても良い。又、欠落した位置姿勢情報は、移動体の周辺の3次元の特徴点であっても良い。又、形状情報は、2次元の形状情報でも3次元の形状情報であっても良い。
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明は上記実施形態に限定されるものではなく、本発明の趣旨に基づき種々の変形が可能であり、それらを本発明の範囲から除外するものではない。尚、本実施形態は、以下の組み合わせを含む。
(構成1)移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得手段と、前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、補正量の近似値を取得する補正量取得手段と、前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、前記対象の前記位置姿勢情報と、前記形状情報取得手段で取得した前記対象の前記位置姿勢情報に紐づく形状情報と、前記近似できる前記位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、を有することを特徴とする情報処理装置。
(構成2)前記第1位置姿勢算出手段は、前記補正量取得手段で取得した前記対象の位置姿勢に近似できる位置姿勢の前記補正量を、前記対象の位置姿勢の補正前の位置姿勢に適用することで、補正後の前記対象の位置姿勢を前記第1の位置姿勢情報として推定することを特徴とする構成1に記載の情報処理装置。
(構成3)前記第2位置姿勢算出手段は、前記第1の位置姿勢情報を基準にした前記対象の位置姿勢情報に紐づく形状情報の位置や姿勢を推定し、前記補正された形状情報と前記近似する位置姿勢に紐づく形状情報を用いて、前記対象の位置姿勢に紐づく形状情報を前記近似する位置姿勢に紐づく形状情報の位置や姿勢に合わせこむように前記形状情報間の位置ずれ量を算出し、前記位置や姿勢のずれ量をもとに前記第2の位置姿勢情報を算出する構成1又は2に記載の情報処理装置。
(構成4)前記第2位置姿勢算出手段は、前記第1の位置姿勢情報を基準にした形状情報と、前記近似する位置姿勢に紐づく形状情報の対応点を探索し、前記対応点間の位置又は姿勢のずれ量を計測することで、前記第2の位置姿勢情報を算出することを特徴とする構成1~3のいずれか1つに記載の情報処理装置。
(構成5)前記位置姿勢取得手段で取得した前記対象の位置姿勢に関連する相対位置姿勢の補正後の位置姿勢を決定する相対位置姿勢決定手段をさらに含み、前記相対位置姿勢決定手段は前記第2位置姿勢算出手段で推定した前記対象の位置姿勢の前記補正量を用いることで、補正後の前記相対位置姿勢を算出することを特徴とする構成1~4のいずれか1つに記載の情報処理装置。
(構成6)前記第2位置姿勢算出手段が推定した補正後の前記対象の位置姿勢または、前記相対位置姿勢決定手段が推定した補正後の前記相対位置姿勢を用いて前記形状情報を再補正する形状情報再補正手段をさらに含み、
前記補正後の前記対象の位置姿勢または前記補正後の前記相対位置姿勢または前記形状情報再補正手段が補正した前記形状情報を通知する通知手段をさらに含むことを特徴とする構成5に記載の情報処理装置。
前記補正後の前記対象の位置姿勢または前記補正後の前記相対位置姿勢または前記形状情報再補正手段が補正した前記形状情報を通知する通知手段をさらに含むことを特徴とする構成5に記載の情報処理装置。
(構成7)形状計測用のセンサと、移動する前記センサが複数地点で夫々計測した前記センサの周囲の物体の形状情報を取得する形状情報取得手段と、前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、前記補正量の近似値を取得する補正量取得手段と、前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、前記対象の位置姿勢情報と、前記形状情報取得手段で取得した前記対象の位置姿勢情報に紐づく形状情報と、前記近似できる位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、を有することを特徴とする移動体。
(方法)移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得ステップと、前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得ステップと、前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定ステップと、前記補正対象決定ステップで決定した補正対象の位置姿勢を前記補正対象決定ステップから取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得ステップから取得し、前記補正量の近似値を取得する補正量取得ステップと、前記補正対象決定ステップで決定した前記対象の位置姿勢情報と、前記補正量取得ステップで取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出ステップと、前記対象の位置姿勢情報と、前記形状情報取得ステップで取得した前記対象の位置姿勢情報に紐づく前記形状情報と、前記近似できる位置姿勢情報に紐づく前記形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出ステップと、を有することを特徴とする情報処理方法。
(プログラム)構成1~6のいずれか1つに記載の情報処理装置又は構成7に記載の移動体の各手段をコンピュータにより制御するためのコンピュータプログラム。
尚、本実施形態における制御の一部又は全部を実現するために、上述した実施形態の機能を実現するコンピュータプログラムをネットワーク又は各種記憶媒体を介して情報処理システム等に供給するようにしてもよい。そしてその情報処理システム等におけるコンピュータ(又はCPUやMPU等)がそのプログラムを読み出して実行するようにしてもよい。その場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することとなる。
201:情報処理システム
103:形状計測用センサ
102:位置姿勢計測用センサ
203:情報処理装置
205:形状情報取得部
206:位置姿勢取得部
208:補正量取得部
209:第1位置姿勢算出部
210:第2位置姿勢算出部
204:位置姿勢補正部
207:補正対象決定部
103:形状計測用センサ
102:位置姿勢計測用センサ
203:情報処理装置
205:形状情報取得部
206:位置姿勢取得部
208:補正量取得部
209:第1位置姿勢算出部
210:第2位置姿勢算出部
204:位置姿勢補正部
207:補正対象決定部
Claims (9)
- 移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得手段と、
前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、
前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、
前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、補正量の近似値を取得する補正量取得手段と、
前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、
前記対象の前記位置姿勢情報と、前記形状情報取得手段で取得した前記対象の前記位置姿勢情報に紐づく形状情報と、前記近似できる前記位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、を有することを特徴とする情報処理装置。 - 前記第1位置姿勢算出手段は、前記補正量取得手段で取得した前記対象の位置姿勢に近似できる位置姿勢の前記補正量を、前記対象の位置姿勢の補正前の位置姿勢に適用することで、補正後の前記対象の位置姿勢を前記第1の位置姿勢情報として推定することを特徴とする請求項1に記載の情報処理装置。
- 前記第2位置姿勢算出手段は、前記第1の位置姿勢情報を基準にした前記対象の位置姿勢情報に紐づく形状情報の位置や姿勢を推定し、前記補正された形状情報と前記近似する位置姿勢に紐づく形状情報を用いて、前記対象の位置姿勢に紐づく形状情報を前記近似する位置姿勢に紐づく形状情報の位置や姿勢に合わせこむように前記形状情報間の位置ずれ量を算出し、前記位置や姿勢のずれ量をもとに前記第2の位置姿勢情報を算出する請求項1に記載の情報処理装置。
- 前記第2位置姿勢算出手段は、前記第1の位置姿勢情報を基準にした形状情報と、前記近似する位置姿勢に紐づく形状情報の対応点を探索し、前記対応点間の位置又は姿勢のずれ量を計測することで、前記第2の位置姿勢情報を算出することを特徴とする請求項1に記載の情報処理装置。
- 前記位置姿勢取得手段で取得した前記対象の位置姿勢に関連する相対位置姿勢の補正後の位置姿勢を決定する相対位置姿勢決定手段をさらに含み、
前記相対位置姿勢決定手段は前記第2位置姿勢算出手段で推定した前記対象の位置姿勢の前記補正量を用いることで、補正後の前記相対位置姿勢を算出することを特徴とする請求項1に記載の情報処理装置。 - 前記第2位置姿勢算出手段が推定した補正後の前記対象の位置姿勢または、前記相対位置姿勢決定手段が推定した補正後の前記相対位置姿勢を用いて前記形状情報を再補正する形状情報再補正手段をさらに含み、
前記補正後の前記対象の位置姿勢または前記補正後の前記相対位置姿勢または前記形状情報再補正手段が補正した前記形状情報を通知する通知手段をさらに含むことを特徴とする請求項5に記載の情報処理装置。 - 形状計測用のセンサと、
移動する前記センサが複数地点で夫々計測した前記センサの周囲の物体の形状情報を取得する形状情報取得手段と、
前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得手段と、
前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定手段と、
前記補正対象決定手段で決定した補正対象の位置姿勢を前記補正対象決定手段から取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得手段から取得し、前記補正量の近似値を取得する補正量取得手段と、
前記補正対象決定手段で決定した前記対象の位置姿勢情報と、前記補正量取得手段で取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出手段と、
前記対象の位置姿勢情報と、前記形状情報取得手段で取得した前記対象の位置姿勢情報に紐づく形状情報と、前記近似できる位置姿勢情報に紐づく形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出手段と、
を有することを特徴とする移動体。 - 移動するセンサが複数地点で夫々計測したセンサ周囲の物体の形状情報を取得する形状情報取得ステップと、
前記形状情報を前記複数地点で夫々計測した際の前記センサの位置姿勢情報を取得する位置姿勢取得ステップと、
前記センサの位置や姿勢を補正する対象の位置姿勢を決定する補正対象決定ステップと、
前記補正対象決定ステップで決定した補正対象の位置姿勢を前記補正対象決定ステップから取得し、前記位置姿勢情報の補正傾向と近似できる位置姿勢情報を前記位置姿勢取得ステップから取得し、前記補正量の近似値を取得する補正量取得ステップと、
前記補正対象決定ステップで決定した前記対象の位置姿勢情報と、前記補正量取得ステップで取得した前記補正量に基づき、前記対象の位置姿勢を補正した第1の位置姿勢情報を算出する第1位置姿勢算出ステップと、
前記対象の位置姿勢情報と、前記形状情報取得ステップで取得した前記対象の位置姿勢情報に紐づく前記形状情報と、前記近似できる位置姿勢情報に紐づく前記形状情報に基づいて、前記第1の位置姿勢情報を補正した第2の位置姿勢情報を算出する第2位置姿勢算出ステップと、
を有することを特徴とする情報処理方法。 - 請求項1~6のいずれか1項に記載の情報処理装置又は請求項7に記載の移動体の各手段をコンピュータにより制御するためのコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022148933A JP2024043764A (ja) | 2022-09-20 | 2022-09-20 | 情報処理装置、移動体、情報処理方法及びコンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022148933A JP2024043764A (ja) | 2022-09-20 | 2022-09-20 | 情報処理装置、移動体、情報処理方法及びコンピュータプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024043764A true JP2024043764A (ja) | 2024-04-02 |
Family
ID=90480409
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022148933A Pending JP2024043764A (ja) | 2022-09-20 | 2022-09-20 | 情報処理装置、移動体、情報処理方法及びコンピュータプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2024043764A (ja) |
-
2022
- 2022-09-20 JP JP2022148933A patent/JP2024043764A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210012520A1 (en) | Distance measuring method and device | |
CN111108342B (zh) | 用于高清地图创建的视觉测程法和成对对准 | |
KR101725060B1 (ko) | 그래디언트 기반 특징점을 이용한 이동 로봇의 위치를 인식하기 위한 장치 및 그 방법 | |
KR101776621B1 (ko) | 에지 기반 재조정을 이용하여 이동 로봇의 위치를 인식하기 위한 장치 및 그 방법 | |
JP5992184B2 (ja) | 画像データ処理装置、画像データ処理方法および画像データ処理用のプログラム | |
US9020301B2 (en) | Method and system for three dimensional mapping of an environment | |
KR102016636B1 (ko) | 카메라와 레이더의 캘리브레이션 장치 및 방법 | |
JP2018535402A (ja) | 異なる分解能を有するセンサーの出力を融合するシステム及び方法 | |
CN111263960B (zh) | 用于更新高清晰度地图的设备和方法 | |
EP3032818B1 (en) | Image processing device | |
KR20150144731A (ko) | 다이렉트 트래킹을 이용하여 이동 로봇의 위치를 인식하기 위한 장치 및 그 방법 | |
JP2016057108A (ja) | 演算装置、演算システム、演算方法およびプログラム | |
CN108603933B (zh) | 用于融合具有不同分辨率的传感器输出的系统和方法 | |
KR101544021B1 (ko) | 3차원 지도 생성 장치 및 3차원 지도 생성 방법 | |
KR20150144730A (ko) | ADoG 기반 특징점을 이용한 이동 로봇의 위치를 인식하기 위한 장치 및 그 방법 | |
EP3535096B1 (en) | Robotic sensing apparatus and methods of sensor planning | |
EP3155369B1 (en) | System and method for measuring a displacement of a mobile platform | |
KR101319525B1 (ko) | 이동 로봇을 이용하여 목표물의 위치 정보를 제공하기 위한 시스템 | |
JP6683195B2 (ja) | 情報処理装置、情報処理システム、情報処理方法、及び、プログラム | |
KR102174729B1 (ko) | 랜드마크를 활용한 주행차로 인식 방법 및 시스템 | |
JP2024043764A (ja) | 情報処理装置、移動体、情報処理方法及びコンピュータプログラム | |
JP2021047024A (ja) | 推定装置、推定方法及びプログラム | |
US20210402616A1 (en) | Information processing apparatus, information processing method, mobile robot, and non-transitory computer-readable storage medium | |
JP2019066292A (ja) | 映像表示システム | |
Mazzei et al. | A lasers and cameras calibration procedure for VIAC multi-sensorized vehicles |