JP7484658B2 - 位置特定システム - Google Patents
位置特定システム Download PDFInfo
- Publication number
- JP7484658B2 JP7484658B2 JP2020178398A JP2020178398A JP7484658B2 JP 7484658 B2 JP7484658 B2 JP 7484658B2 JP 2020178398 A JP2020178398 A JP 2020178398A JP 2020178398 A JP2020178398 A JP 2020178398A JP 7484658 B2 JP7484658 B2 JP 7484658B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- current position
- images
- unit
- moving object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 claims description 59
- 238000000034 method Methods 0.000 description 42
- 238000004891 communication Methods 0.000 description 34
- 230000006870 function Effects 0.000 description 27
- 238000010586 diagram Methods 0.000 description 16
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
- G01S19/48—Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Navigation (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
- Traffic Control Systems (AREA)
Description
部品運搬車両20は、一例として手動運転の車両とされている。図2には、部品運搬車両20に搭載されたナビゲーション装置22のハードウェア構成がブロック図にて示されている。ナビゲーション装置22は、制御部24、GPS(Global Positioning System)装置26、車外カメラ28及びユーザI/F(Inter Face)30を含んでいる。
図4には、歩行ロボット40のハードウェア構成がブロック図にて示されている。歩行ロボット40は、ロボット制御装置42、GPS装置44、外部センサ46、内部センサ48及びアクチュエータ50を含んでいる。
事前撮像車両60は、一例として手動運転の車両とされている。図6には、事前撮像車両60に搭載された事前撮像装置62のハードウェア構成がブロック図にて示されている。事前撮像装置62は、撮像制御部64、車外カメラ66及びユーザI/F68を含んでいる。
図8には、管制センター80に設けられた位置特定装置82のハードウェア構成がブロック図にて示されている。位置特定装置82は、CPU82A、ROM82B、RAM82C、ストレージ82D及び通信I/F82Eを含んで構成されている。CPU82A、ROM82B、RAM82C、ストレージ82D及び通信I/F82Eは、バス82Gを介して相互に通信可能に接続されている。CPU82A、ROM82B、RAM82C、ストレージ82D及び通信I/F82Eの機能は、前述した部品運搬車両20の制御部24のCPU24A、ROM24B、RAM24C、ストレージ24D及び通信I/F24Eの機能と同じである。
図10には、部品運搬車両20及び歩行ロボット40が使用される工場の一例が平断面図にて示されている。この例では、工場の建屋100内(すなわち屋内)に格子状の屋内移動経路IRが設けられている。また、建屋100の周りの屋外には、屋外移動経路ORが設けられている。
以下、図12を用いて、位置特定装置82で実施される制御処理の流れについて説明する。この制御処理は、位置特定装置82のストレージ82Dに多数の事前撮像画像が記憶された状態で実施される。この制御処理では、先ず図12のステップS1において、位置特定装置82のCPU82Aは、事前撮像車両60の事前撮像装置62から新たに事前撮像画像のデータが送信されたか否かを判断する。この判断が肯定された場合、ステップS2に移行し、この判断が否定された場合、ステップS3に移行する。
本実施形態に係る位置特定システム10では、建屋100内に設けられた屋内移動経路IRの多数箇所において、当該多数箇所の各画像である多数の事前撮像画像が撮像される。多数の事前撮像画像は、上記多数箇所の各位置情報と紐付けられ、管制センター80に設けられた位置特定装置82のストレージ82Dに記憶される。そして、部品運搬車両20及び歩行ロボット40が建屋100内の屋内移動経路IRで移動する際には、部品運搬車両20のナビゲーション装置22及び歩行ロボット40のロボット制御装置42によって、部品運搬車両20及び歩行ロボット40の現在位置の画像である現在位置画像が撮像される。撮像された現在位置画像のデータは、管制センター80の位置特定装置82に送信される。この位置特定装置82では、ストレージ82Dに記憶されている多数の事前撮像画像と現在位置画像との間で画像マッチングが行われ、この画像マッチングの結果から移動体の現在位置が特定される。この位置特定システム10では、床面にガイドラインが描かれていることが必要ではないため、ガイドラインを用いて現在位置を特定(把握)する構成と比較して汎用性が高くなる。
上記実施形態では、事前撮像車両60に搭載された事前撮像装置62を用いて事前撮像ステップが実施される場合について説明したが、これに限るものではない。例えば工場の作業者が持ち運び可能な携帯端末(スマートフォン、タブレット端末など)を用いて事前撮像ステップが実施される構成にしてもよい。
20 部品運搬車両(移動体)
26 GPS装置
32 移動時撮像部
40 歩行ロボット(移動体)
44 GPS装置
52 移動時撮像部
86 記憶部
88 マッチング部
90 位置特定部
IR 屋内移動経路(移動経路)
OR 屋外移動経路
N1~N24 番号(識別子)
Claims (3)
- 移動体と通信可能な管制センターに設けられ、前記移動体の移動経路の多数箇所で撮像され且つ前記多数箇所の各位置情報と紐付けられた前記多数箇所の各画像を記憶媒体に記憶する記憶部と、
前記移動体に搭載され、前記移動体が前記移動経路を移動する際に、前記移動体の現在位置の画像を撮像する移動時撮像部と、
前記管制センターに設けられ、前記記憶媒体に記憶されている前記各画像と前記現在位置の画像との間で画像マッチングを行い、前記各画像の中から前記現在位置の画像とマッチする一の画像を探索するマッチング部と、
前記管制センターに設けられ、前記一の画像に紐付けられた位置情報のみから前記移動体の現在位置を特定する位置特定部と、
を有し、
前記移動経路は、屋内に設けられた屋内移動経路であり、
前記屋内移動経路は、屋外に設けられた屋外移動経路と繋がっており、
前記移動体が前記屋外移動経路を移動する際には、前記移動体に搭載されたGPS装置を用いて前記移動体の現在位置が特定され、
前記移動時撮像部は、前記移動体が前記屋外移動経路から前記屋内移動経路へ移動することにより、前記GPS装置がGPS衛星からの信号を受信できなくなった場合に、前記移動体の現在位置の画像を撮像する位置特定システム。 - 前記移動体は、歩行ロボットである請求項1に記載の位置特定システム。
- 前記記憶部は、前記多数箇所に対してそれぞれ付された識別子によって前記各位置情報と紐付けられた前記各画像を前記記憶媒体に記憶する請求項1又は請求項2に記載の位置特定システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020178398A JP7484658B2 (ja) | 2020-10-23 | 2020-10-23 | 位置特定システム |
CN202111128537.2A CN114485605A (zh) | 2020-10-23 | 2021-09-26 | 位置确定方法以及位置确定系统 |
US17/503,365 US20220130054A1 (en) | 2020-10-23 | 2021-10-18 | Position finding method and position finding system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020178398A JP7484658B2 (ja) | 2020-10-23 | 2020-10-23 | 位置特定システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022069295A JP2022069295A (ja) | 2022-05-11 |
JP7484658B2 true JP7484658B2 (ja) | 2024-05-16 |
Family
ID=81257490
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020178398A Active JP7484658B2 (ja) | 2020-10-23 | 2020-10-23 | 位置特定システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220130054A1 (ja) |
JP (1) | JP7484658B2 (ja) |
CN (1) | CN114485605A (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007094743A (ja) | 2005-09-28 | 2007-04-12 | Zmp:Kk | 自律移動型ロボットとそのシステム |
JP2008083777A (ja) | 2006-09-26 | 2008-04-10 | Tamagawa Seiki Co Ltd | 無人搬送車の誘導方法及び装置 |
WO2019130945A1 (ja) | 2017-12-27 | 2019-07-04 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、及び移動体 |
WO2019187816A1 (ja) | 2018-03-30 | 2019-10-03 | 日本電産シンポ株式会社 | 移動体および移動体システム |
JP2020034491A (ja) | 2018-08-31 | 2020-03-05 | 株式会社日立産機システム | 移動体の位置検出装置、及び、位置検出装置を備えた移動体 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120070291A (ko) * | 2010-12-21 | 2012-06-29 | 삼성전자주식회사 | 보행 로봇 및 그의 동시 위치 인식 및 지도 작성 방법 |
CN103424113B (zh) * | 2013-08-01 | 2014-12-31 | 毛蔚青 | 移动终端基于图像识别技术的室内定位与导航方法 |
CN104112124A (zh) * | 2014-07-15 | 2014-10-22 | 北京邮电大学 | 一种基于图像识别的室内定位方法与装置 |
CN107094319B (zh) * | 2016-02-17 | 2021-06-04 | 王庆文 | 一种高精度室内外融合定位系统和方法 |
CN106595634A (zh) * | 2016-11-30 | 2017-04-26 | 深圳市有光图像科技有限公司 | 通过对比图像识别移动机器人的位置的方法及移动机器人 |
CN107423786A (zh) * | 2017-07-20 | 2017-12-01 | 北京邮电大学 | 一种基于二维码的定位导航方法、装置及设备 |
CN111201420A (zh) * | 2017-10-10 | 2020-05-26 | 索尼公司 | 信息处理装置、自身位置推定方法、程序和移动体 |
CN111241875A (zh) * | 2018-11-28 | 2020-06-05 | 驭势科技(北京)有限公司 | 基于视觉的自动化标志牌语义建图定位方法及系统 |
CN109827574B (zh) * | 2018-12-28 | 2021-03-09 | 中国兵器工业计算机应用技术研究所 | 一种无人机室内外切换导航系统 |
CN111339976B (zh) * | 2020-03-03 | 2023-08-11 | Oppo广东移动通信有限公司 | 室内定位方法、装置、终端及存储介质 |
CN111723682A (zh) * | 2020-05-28 | 2020-09-29 | 北京三快在线科技有限公司 | 提供位置服务的方法、装置、可读存储介质及电子设备 |
JP7424269B2 (ja) * | 2020-10-23 | 2024-01-30 | トヨタ自動車株式会社 | 位置把握システム、位置把握方法及び位置把握プログラム |
-
2020
- 2020-10-23 JP JP2020178398A patent/JP7484658B2/ja active Active
-
2021
- 2021-09-26 CN CN202111128537.2A patent/CN114485605A/zh active Pending
- 2021-10-18 US US17/503,365 patent/US20220130054A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007094743A (ja) | 2005-09-28 | 2007-04-12 | Zmp:Kk | 自律移動型ロボットとそのシステム |
JP2008083777A (ja) | 2006-09-26 | 2008-04-10 | Tamagawa Seiki Co Ltd | 無人搬送車の誘導方法及び装置 |
WO2019130945A1 (ja) | 2017-12-27 | 2019-07-04 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、及び移動体 |
WO2019187816A1 (ja) | 2018-03-30 | 2019-10-03 | 日本電産シンポ株式会社 | 移動体および移動体システム |
JP2020034491A (ja) | 2018-08-31 | 2020-03-05 | 株式会社日立産機システム | 移動体の位置検出装置、及び、位置検出装置を備えた移動体 |
Also Published As
Publication number | Publication date |
---|---|
CN114485605A (zh) | 2022-05-13 |
JP2022069295A (ja) | 2022-05-11 |
US20220130054A1 (en) | 2022-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zhang et al. | Laser–visual–inertial odometry and mapping with high robustness and low drift | |
CN108827249B (zh) | 一种地图构建方法和装置 | |
JP5018458B2 (ja) | 座標補正方法、座標補正プログラム、及び自律移動ロボット | |
CN107913039B (zh) | 用于清洁机器人的区块选择方法、装置及机器人 | |
US20160327946A1 (en) | Information processing device, information processing method, terminal device, and setting method | |
US20200241573A1 (en) | Route generation device, moving body, and program | |
JP2020503507A (ja) | 測位方法、端末及びサーバー | |
WO2018131165A1 (ja) | 情報処理プログラム、情報処理方法および情報処理装置 | |
US20190263524A1 (en) | Drone control system, method, and program | |
CN111380515B (zh) | 定位方法及装置、存储介质、电子装置 | |
Kim et al. | As-is geometric data collection and 3D visualization through the collaboration between UAV and UGV | |
JP7424269B2 (ja) | 位置把握システム、位置把握方法及び位置把握プログラム | |
JP7484658B2 (ja) | 位置特定システム | |
Zhang et al. | Ntu4dradlm: 4d radar-centric multi-modal dataset for localization and mapping | |
CN112689234B (zh) | 室内车辆定位方法、装置、计算机设备和存储介质 | |
CN110426038B (zh) | 机器人导航控制方法、装置、计算设备及计算机存储介质 | |
JP6651295B2 (ja) | 移動体制御装置、プログラムおよび集積回路 | |
CN110308978B (zh) | 一种自动驾驶软件部署方法、装置、终端及服务器 | |
JP2022034861A (ja) | フォークリフト、位置推定方法、及びプログラム | |
Morioka et al. | Simplified map representation and map learning system for autonomous navigation of mobile robots | |
CN116883504B (zh) | 车辆朝向的校准方法、装置、计算机设备及存储介质 | |
JP7285517B2 (ja) | 自己位置推定装置、移動体、自己位置推定方法、及び自己位置推定プログラム | |
JP7153747B2 (ja) | 制御システム、制御方法、プログラムおよびシートセット | |
EP4367477A1 (en) | Supporting localization and mapping using a heterogeneous map | |
JP2022146886A (ja) | 表示装置、通信システム、表示制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220920 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230630 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230822 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231024 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240415 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7484658 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |