JP2012164229A - Self-position measuring method of indoor autonomous traveling/moving object and device - Google Patents
Self-position measuring method of indoor autonomous traveling/moving object and device Download PDFInfo
- Publication number
- JP2012164229A JP2012164229A JP2011025458A JP2011025458A JP2012164229A JP 2012164229 A JP2012164229 A JP 2012164229A JP 2011025458 A JP2011025458 A JP 2011025458A JP 2011025458 A JP2011025458 A JP 2011025458A JP 2012164229 A JP2012164229 A JP 2012164229A
- Authority
- JP
- Japan
- Prior art keywords
- illuminator
- self
- mobile body
- autonomous mobile
- identification information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims description 43
- 238000005286 illumination Methods 0.000 claims description 57
- 238000000605 extraction Methods 0.000 claims description 3
- 238000000691 measurement method Methods 0.000 claims 1
- 238000009434 installation Methods 0.000 abstract description 14
- 230000007613 environmental effect Effects 0.000 abstract description 5
- 206010052143 Ocular discomfort Diseases 0.000 abstract description 3
- 238000012545 processing Methods 0.000 description 25
- 238000012795 verification Methods 0.000 description 11
- 238000005259 measurement Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 241000282412 Homo Species 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000004397 blinking Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Studio Devices (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
Description
本発明は、屋内を自律走行する移動体の位置を測定する方法及び装置に係り、特に、搭載したカメラの撮影画像から移動体の自己位置を測定する方法及び装置に関するものである。 The present invention relates to a method and apparatus for measuring the position of a moving body that autonomously travels indoors, and more particularly, to a method and apparatus for measuring the self-position of a moving body from an image captured by a mounted camera.
カメラを搭載した屋内用の自律走行移動体がカメラの撮影画像中から既知の位置のランドマークを抽出して自己位置を測定する際、ランドマークが複数存在する場合は、個々のランドマークの識別が不可欠となる。 When an indoor autonomous mobile vehicle equipped with a camera extracts a landmark at a known position from the captured image of the camera and measures its own position, if there are multiple landmarks, identify each landmark Is essential.
ランドマークの識別は、例えば、個々のランドマークに割り当てたユニークなマークの画像認識により行うことができる。しかし、この識別方法には、識別処理に多くの手間と時間を要するという欠点がある。それは、マークの識別の際に、ランドマークの周辺に存在する物体の形状や模様、ランドマーク周辺の明るさ等、ランドマークが存在する空間の環境状態の影響を受け易いからである。 The landmark can be identified by, for example, image recognition of a unique mark assigned to each landmark. However, this identification method has a drawback that much time and effort are required for the identification process. This is because, when a mark is identified, it is easily affected by the environmental state of the space where the landmark exists, such as the shape and pattern of an object existing around the landmark, the brightness around the landmark, and the like.
マークの画像認識によらないランドマークの識別方法としては、ランドマーク毎にユニークなパターンで光の点滅を行わせてこれを認識する方法がある(例えば、特許文献1,2,3)。
As a landmark identification method not based on the mark image recognition, there is a method of recognizing the landmark by blinking light with a unique pattern for each landmark (for example,
人間がいるエリアに自律走行移動体の移動エリアが設定される場合、もしランドマークとして可視光の光源を用いると、ランドマークで可視光を点滅させるのは、同じエリアにいる人間に違和感を持たせる場合がある。また、もしランドマークとして非可視光の光源を用いると、人間の目視用の照明に加えてランドマーク用の光源を追加設置する必要がある。 If a moving area of an autonomous mobile body is set in an area where humans are present, if a visible light source is used as a landmark, blinking the visible light with the landmark will cause a person in the same area to feel uncomfortable There is a case to make it. If a non-visible light source is used as the landmark, it is necessary to additionally install a landmark light source in addition to the human visual illumination.
本発明は前記事情に鑑みなされたもので、本発明の目的は、人間がいるエリアを自律走行する場合であっても、屋内用の自律走行移動体の自己位置を、光源の追加無しに、同じエリアの人間に視覚的な違和感を持たせにくく、かつ、周辺の環境状態の影響を受けにくい形態で測定することができる、屋内用自律走行移動体の自己位置測定方法とその装置とを提供することにある。 The present invention has been made in view of the above circumstances, and the object of the present invention is to perform self-positioning of an indoor autonomous mobile body without adding a light source even when autonomously traveling in an area where a human is present. Providing a self-localization method and apparatus for an indoor autonomous mobile body that can be measured in a form that makes it difficult for people in the same area to have a visual discomfort and is less affected by the surrounding environmental conditions There is to do.
上記目的を達成するため、請求項1に記載した本発明の屋内用自律走行移動体の自己位置測定方法は、
屋内を自律走行する自律走行移動体のカメラによる撮影画像中に存在する照明器の既知の絶対位置に基づいて、前記自律走行移動体の自己位置を測定する方法において、
前記照明器の光源に用いたLEDランプの照明光を前記照明器の絶対位置に対応する識別情報によって変調する変調ステップと、
前記撮影画像中の照明器からの前記変調された照明光を受光し前記識別情報を復調する復調ステップと、
前記復調した識別情報から前記撮影画像中の前記照明器の絶対位置を取得する絶対位置取得ステップと、
前記取得した絶対位置と前記撮影画像中の前記照明器の位置とに基づいて、前記自律走行移動体の自己位置を測定する自己位置測定ステップと、
を含むことを特徴とする。
In order to achieve the above object, a self-position measuring method for an indoor autonomous mobile body according to the present invention described in
In the method of measuring the self-position of the autonomous mobile body based on the known absolute position of the illuminator present in the image taken by the camera of the autonomous mobile body that autonomously travels indoors,
A modulation step of modulating the illumination light of the LED lamp used as the light source of the illuminator with identification information corresponding to the absolute position of the illuminator;
A demodulation step of receiving the modulated illumination light from the illuminator in the captured image and demodulating the identification information;
An absolute position acquisition step of acquiring the absolute position of the illuminator in the captured image from the demodulated identification information;
A self-position measuring step for measuring a self-position of the autonomous mobile body based on the acquired absolute position and the position of the illuminator in the captured image;
It is characterized by including.
また、上記目的を達成するため、請求項4に記載した本発明の屋内用自律走行移動体の自己位置測定装置は、
屋内を自律走行する自律走行移動体のカメラによる撮影画像中に存在する照明器の既知の絶対位置に基づいて、前記自律走行移動体の自己位置を測定する装置において、
前記自律走行移動体に搭載され、前記照明器の光源に用いたLEDランプが発光する、前記照明器の絶対位置に対応する識別情報によって変調された照明光を受光する受光手段と、
前記受光手段で受光した照明光から前記識別情報を復調する復調手段と、
前記復調手段で復調した識別情報から該識別情報に対応する前記照明器を特定する照明器特定手段と、
前記照明器特定手段で特定した照明器の絶対位置を前記復調手段で復調した識別情報から取得する絶対位置取得手段と、
前記照明器特定手段で特定した照明器を前記撮影画像中から抽出する抽出手段と、
前記抽出手段が抽出した照明器の前記自律走行移動体に対する相対位置を測定する相対位置測定手段と、
前記絶対位置取得手段で絶対位置を取得した照明器の前記相対位置測定手段で測定した相対位置に基づいて、前記自律走行移動体の自己位置を測定する自己位置測定手段と、
を備えることを特徴とする。
Moreover, in order to achieve the said objective, the self-position measuring apparatus of the indoor autonomous traveling mobile body of this invention described in Claim 4 is the following.
In the apparatus for measuring the self-position of the autonomous mobile body based on the known absolute position of the illuminator present in the image captured by the camera of the autonomous mobile body that autonomously travels indoors,
A light receiving means for receiving illumination light modulated by identification information corresponding to an absolute position of the illuminator, which is mounted on the autonomous mobile body and emits an LED lamp used as a light source of the illuminator;
Demodulating means for demodulating the identification information from illumination light received by the light receiving means;
Illuminator specifying means for specifying the illuminator corresponding to the identification information from the identification information demodulated by the demodulation means;
Absolute position acquisition means for acquiring the absolute position of the illuminator specified by the illuminator specifying means from the identification information demodulated by the demodulation means;
Extraction means for extracting the illuminator specified by the illuminator specifying means from the captured image;
A relative position measuring means for measuring a relative position of the illuminator extracted by the extracting means with respect to the autonomous mobile body;
Self-position measuring means for measuring the self-position of the autonomous mobile body based on the relative position measured by the relative position measuring means of the illuminator that has obtained the absolute position by the absolute position obtaining means;
It is characterized by providing.
請求項1に記載した本発明の屋内用自律走行移動体の自己位置測定方法によれば、照明器のLEDランプが発光する照明光を、照明器の絶対位置に対応する識別情報によって変調する。そして、自律走行移動体のカメラによる撮影画像中のLEDランプからの照明光を復調して識別情報を取得し、取得した識別情報から撮影画像中のLEDランプの絶対位置を特定する。したがって、特定したLEDランプの絶対位置と撮影画像中のLEDランプの位置とから、自律走行移動体の自己位置を測定することができる。
According to the self-position measuring method of the indoor autonomous mobile body of the present invention described in
このとき、LEDランプによる照明光の変調は、例えば数百MHzレベルの高い周波数で行うことができる。そのような周波数でLEDランプの照明光を変調した場合、変調後の照明光が識別情報に応じたパターンで点滅しても、それを人間が目視で認識するのは極めて困難である。 At this time, the modulation of the illumination light by the LED lamp can be performed at a high frequency of, for example, several hundred MHz level. When the illumination light of the LED lamp is modulated at such a frequency, even if the modulated illumination light blinks in a pattern according to the identification information, it is extremely difficult for a human to recognize it visually.
このため、人間がいるエリアを自律走行する場合であっても、屋内用の自律走行移動体の自己位置を、光源の追加無しに、同じエリアの人間に視覚的な違和感を持たせにくく、かつ、周辺の環境状態の影響を受けにくい形態で測定することができる。 For this reason, even when autonomously traveling in an area where a person is present, the self-position of the autonomous traveling vehicle for indoor use is less likely to cause visual discomfort to humans in the same area without adding a light source, and It can be measured in a form that is not easily affected by the surrounding environmental conditions.
なお、請求項4に記載した本発明の屋内用自律走行移動体の自己位置測定装置によっても、請求項1に記載した本発明の屋内用自律走行移動体の自己位置測定方法と同様の効果を得ることができる。
It should be noted that the self-position measuring device for indoor autonomous mobile body of the present invention described in claim 4 also has the same effect as the self-position measuring method for indoor autonomous mobile body of the present invention described in
さらに、請求項2に記載した本発明の屋内用自律走行移動体の自己位置測定方法は、請求項1に記載した本発明の屋内用自律走行移動体の自己位置測定方法において、前記撮影画像中の照明器の形状を特定する特定ステップをさらに含んでおり、前記絶対位置取得ステップが、前記特定した照明器の形状と一致する形状の情報を含む前記識別情報から前記撮影画像中の前記照明器の絶対位置を取得することを特徴とする。
Furthermore, the self-position measuring method for an indoor autonomous mobile body of the present invention described in
また、請求項5に記載した本発明の屋内用自律走行移動体の自己位置測定装置は、請求項4に記載した本発明の屋内用自律走行移動体の自己位置測定装置において、前記撮影画像から該撮影画像中の照明器の形状を判別する形状判別手段をさらに備えており、前記照明器特定手段が、前記形状判別手段が判別した形状と一致する形状の情報を含む前記識別情報から該識別情報に対応する前記照明器を特定することを特徴とする。 In addition, a self-position measuring device for an indoor autonomous mobile body according to a fifth aspect of the present invention is the self-position measuring device for an indoor autonomous mobile body according to the fourth aspect of the present invention. Shape discrimination means for discriminating the shape of the illuminator in the photographed image is further provided, and the illuminator specifying means identifies the identification information from the identification information including information on a shape that matches the shape identified by the shape discrimination means. The illuminator corresponding to information is specified.
請求項2に記載した本発明の屋内用自律走行移動体の自己位置測定方法によれば、請求項1に記載した本発明の屋内用自律走行移動体の自己位置測定方法において、照明光から復調した識別情報が複数ある場合に、撮影画像中の照明器の形状と一致する形状の情報を含む識別情報から、撮影画像中の照明器の絶対位置を特定することになる。
According to the self-position measuring method for an indoor autonomous mobile body of the present invention described in
したがって、複数の照明器からの照明光からそれぞれ識別情報が復調されても、そのうちどの識別情報を、撮影画像中の照明器の絶対位置を特定するのに用いればよいかを、確実に判別することができる。これにより、自律走行移動体の自己位置の測定精度を高く維持することができる。 Therefore, even when identification information is demodulated from illumination light from a plurality of illuminators, it is reliably determined which identification information should be used to specify the absolute position of the illuminator in the captured image. be able to. Thereby, the measurement accuracy of the self position of the autonomous mobile body can be maintained high.
なお、請求項5に記載した本発明の屋内用自律走行移動体の自己位置測定装置によれば、請求項4に記載した本発明の屋内用自律走行移動体の自己位置測定装置において、請求項2に記載した本発明の屋内用自律走行移動体の自己位置測定方法と同様の効果を得ることができる。 In addition, according to the self-position measuring device for an indoor autonomous mobile body of the present invention described in claim 5, in the self-position measuring device for an indoor autonomous mobile body of the present invention described in claim 4, The effect similar to the self-position measuring method of the indoor autonomous traveling mobile body of the present invention described in 2 can be obtained.
さらに、請求項3に記載した本発明の屋内用自律走行移動体の自己位置測定方法は、請求項1又は2に記載した本発明の屋内用自律走行移動体の自己位置測定方法において、前記変調された照明光の受光範囲を前記カメラの撮影範囲と一致させることで、前記復調ステップにおいて、前記撮影画像中の照明器からの前記変調された照明光を受光することを特徴とする。
Furthermore, the self-position measuring method of the indoor autonomous mobile body of the present invention described in
また、請求項6に記載した本発明の屋内用自律走行移動体の自己位置測定装置は、請求項4又は5に記載した本発明の屋内用自律走行移動体の自己位置測定装置において、前記受光手段が、前記カメラの撮影範囲と一致する受光範囲の前記変調された照明光を受光することを特徴とする。 According to a sixth aspect of the present invention, there is provided the self-position measuring device for an indoor autonomous mobile body according to the present invention, wherein the light receiving device is the self-position measuring device for an indoor autonomous mobile body according to the fourth or fifth aspect. The means receives the modulated illumination light in a light receiving range that coincides with a photographing range of the camera.
請求項3に記載した本発明の屋内用自律走行移動体の自己位置測定方法によれば、請求項1又は2に記載した本発明の屋内用自律走行移動体の自己位置測定方法において、カメラの撮影画像中の照明器からの照明光のみが受光されて、その照明光から復調した識別情報によって撮影画像中の照明器の絶対位置が特定されることになる。
According to the self-position measuring method for an indoor autonomous mobile body of the present invention described in
したがって、複数の照明器が存在しても、照明光からの識別情報の復調とその識別情報からの絶対位置の特定とを、異なる照明器からの複数の照明光についてそれぞれ行う必要をなくし、簡易に行えるようにすることができる。 Therefore, even if there are a plurality of illuminators, it is not necessary to perform demodulation of identification information from the illumination light and specification of an absolute position from the identification information for each of the plurality of illumination lights from different illuminators. To be able to do so.
なお、請求項6に記載した本発明の屋内用自律走行移動体の自己位置測定装置によれば、請求項4又は5に記載した本発明の屋内用自律走行移動体の自己位置測定装置において、請求項3に記載した本発明の屋内用自律走行移動体の自己位置測定方法と同様の効果を得ることができる。
In addition, according to the self-position measuring device for indoor autonomous traveling mobile body of the present invention described in
本発明によれば、人間がいるエリアを自律走行する屋内用の自律走行移動体の自己位置を、光源の追加無しに、同じエリアの人間に視覚的な違和感を持たせにくく、かつ、周辺の環境状態の影響を受けにくい形態で測定することができる。 According to the present invention, the self-positioning of an indoor autonomous mobile body that autonomously travels in an area where a person is present can be made less visually uncomfortable for a person in the same area without adding a light source, Measurements can be made in a form that is less susceptible to environmental conditions.
以下、本発明の実施形態を添付図面に基づいて詳述する。図1は本発明の一実施形態に係る屋内用自律走行移動体の自己位置測定装置の概略構成を模式的に示す説明図である。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. FIG. 1 is an explanatory view schematically showing a schematic configuration of a self-position measuring device for an indoor autonomous mobile body according to an embodiment of the present invention.
図1において、1は屋内の床上を移動する走行台車(請求項中の自律走行移動体に相当)、具体的には搬送車を示す。この走行台車1は自律走行台車であり無軌道式であるが、その走行すべき方向はほぼ走行経路2に沿ったものとして予定されている。この走行経路2の上方において、天井には照明器3が走行経路2に沿って複数個設置されている。
In FIG. 1,
図2は天井の各照明器3の電気的な概略構成を示すブロック図である。なお、図2では、各照明器3に枝番号を付して示す。本実施形態では、天井にN個の照明器3−1〜3−Nが、走行台車1の自己位置を測定するのに用いるターゲット1〜Nとして設置されている。天井(室内)における各照明器3−1〜3−Nの設置位置(請求項中の絶対位置に相当)は、後述する照合ユニット5c(図1参照)のテーブルで定義されていて、いずれも既知である。
FIG. 2 is a block diagram showing an electrical schematic configuration of each
各照明器3−1〜3−Nは同様の構成を有している。具体的には、各照明器3−1〜3−Nは、照明用光源31と、照明用光源31を発光駆動させるための照明用電源32、ID番号記憶部33、及び、変調部34とを有している。
Each illuminator 3-1 to 3-N has the same configuration. Specifically, each of the illuminators 3-1 to 3 -N includes an
照明用光源31はLED電球31a(請求項中のLEDランプに相当)を用いた光源である。照明用光源31は、照明用電源32からの電力信号によって駆動される。この電力信号は、ID番号記憶部33に記憶された各照明器3−1〜3−N毎にユニークなID番号(請求項中の識別情報に相当)に応じたパターンで、変調部34により変調される。この変調部34による変調が、請求項中の変調ステップに相当する。
The
ID番号記憶部33は、例えばフラッシュメモリで構成することができ、フラッシュメモリの交換で記憶するID番号を容易に変更できるようにしてもよい。また、LED電球31aを照明用光源31に用いる場合、変調部34による電力信号の変調は、例えば数百MHzレベルの高い周波数で行うことができる。したがって、照明用光源31の照明光がID番号に応じたパターンで点滅しても、それを人間が目視で認識するのは極めて困難である。
The ID
このように、各照明器3−1〜3−Nは、照明用光源31の照明光によって設置箇所の周辺を照明すると共に、照明光を光学的に受光できる範囲内において、ID番号の情報を光空間伝送信号として出力する。
Thus, each illuminator 3-1 to 3 -N illuminates the periphery of the installation location with the illumination light of the
以後、必要に応じて、照明器3に関する説明を個々の照明器3−1〜3−N単位で行うものとする。
Henceforth, the description regarding the
図1に示すように、走行台車1の移動中に自己位置を測定する本実施形態の自己位置測定装置は、走行経路2の上方を照明器3を含めて撮影するビデオカメラ4a(請求項中のカメラに相当)と、受光面を上方に向けた受光センサ4b(請求項中の受光手段に相当)とを有している。これらはいずれも、走行台車1上に搭載している。
As shown in FIG. 1, the self-position measuring device of the present embodiment for measuring the self-position while the traveling
ビデオカメラ4aは、走行経路2の上方の天井部分を、常に最低1個の照明器3を含めた視野の大きさで撮影する。ビデオカメラ4aの撮影画像の画像信号は、本実施形態の自己位置測定装置の一部を構成する制御部に入力される。
The
制御部は、画像処理装置5a(請求項中の抽出手段に相当)、演算装置6(請求項中の相対位置測定手段及び自己位置測定手段に相当)、比較演算器7及び出力制御器8を有している。これらによって、ビデオカメラ4aからの画像信号を処理して自己の位置を計算し、駆動輪9の駆動モータ10に対し適切な駆動指令を与え、走行台車1を目標位置へ移動させる。画像処理装置5a、演算装置6、比較演算器7及び出力制御器8の詳細な動作は後述する。
The control unit includes an
また、受光センサ4bは、上方に向けた受光面において、照明器3からの変調された照明光を受光する。受光センサ4bは受光レベルに応じた受光信号を出力する。この受光信号は、本実施形態の自己位置測定装置の一部を構成する照合部に入力される。
The
照合部は、復調器5b(請求項中の復調手段に相当)及び照合ユニット5c(請求項中の照明器特定手段及び絶対位置取得手段に相当)を有している。復調器5bは受光信号を復調処理し、受光センサ4bが受光した照明光に変調により重畳されたID番号を復調する。照合ユニット5cは、復調器5bが復調したID番号に対応する照明器3とその設置位置とを特定する。
The collating unit includes a demodulator 5b (corresponding to the demodulating means in the claims) and a
そのために、照合ユニット5cは、ID番号と対応する各照明器3−1〜3−Nの詳細情報とを関連付けたテーブルを有している。このテーブル上で管理される各照明器3−1〜3−Nの詳細情報は、各照明器3−1〜3−Nの設置位置を示す絶対座標系上の位置座標値と、各照明器3−1〜3−Nの形状(照明光により発光する部分の形状)の情報とを含んでいる。
Therefore, the
なお、受光センサ4bが複数の照明器3−1〜3−Nの照明光を受光した場合に、ID番号の復調時の混乱を避けるために、各照明器3−1〜3−N毎に変調部34の変調周波数帯をずらしてもよい。その場合、復調器5bは、バンドパスフィルタ等を用いて受光センサ4bからの受光信号を周波数帯別に復調できるように構成することができる。
In addition, when the
また、同様の目的で、LED電球がRGBの3原色の加法混色により白色の照明光を発光するものである場合は、各照明器3−1〜3−Nの変調部34がRGBの各色信号を個別に変調できる構成とし、少なくとも隣どうしの照明器3−1〜3−Nの変調部34が同じ色の光信号を変調しないように構成してもよい。その場合、復調器5bは、ダイクロイックミラー等を用いてRGBの各色信号に分波し、各色信号を個別に復調できるように構成することができる。
For the same purpose, when the LED bulb emits white illumination light by additive color mixing of the three primary colors of RGB, the
さらに、2つ以上の周波数帯又は2色以上の色信号からID番号を復調できる場合に、照合ユニット5cが、受光信号の信号レベル(受光レベル)が高い周波数帯又は色信号から復調したID番号に対応する照明器3とその設置位置を特定するように構成することができる。
Further, when the ID number can be demodulated from two or more frequency bands or color signals of two or more colors, the ID number demodulated from the frequency band or color signal by which the
また、照合ユニット5cのテーブルで管理される各照明器3−1〜3−Nの詳細情報が、各照明器3−1〜3−Nの形状(照明光により発光する部分の形状)の情報を含んでいるならば、2つ以上の周波数帯又は2色以上の色信号からID番号を復調できる場合に、次のように構成することもできる。
The detailed information of each illuminator 3-1 to 3 -N managed in the table of the
即ち、照合ユニット5cは、復調部5bで復調した複数のID番号にそれぞれ対応する複数の照明器3とその設置位置及び形状を取得するように構成する。一方、画像処理装置5aは、画像認識処理によって、ビデオカメラ4aの撮影画像中の照明器3の形状を特定するように構成する。そして、演算装置6は、画像処理装置5aが特定した形状に合致する形状の照明器3について照合ユニット5cが取得した設置位置を、走行台車1の自己位置測定に利用するように構成する。この場合は、画像処理装置5aが請求項中の形状判別手段に相当し、また、演算装置6が請求項中の抽出手段に相当することになる。
That is, the
ちなみに、受光センサ4bが、ビデオカメラ4aの撮影範囲に存在する一つの照明器3からの照明光のみを常に受光するように、受光センサ4bの受光感度を適切に設定することができる場合は、そのように設定してもよい。そうすれば、受光センサ4bの受光信号に重畳されている照明器3のID番号の情報が複数となるのを防ぎ、復調器5bや照合ユニット5cの構成や処理を簡易なものとすることができる。
Incidentally, if the
また、照合ユニット5cのテーブルを外部のコンピュータに持たせ、照合ユニット5c自身は、復調器5bから受け取ったID番号に対応する照明器3の設置位置を外部のコンピュータに問い合わせ、その回答を外部のコンピュータから受け取る動作のみを行う構成としてもよい。その場合、照合ユニット5cと外部のコンピュータとの間は、無線通信回線(図示せず)を介して接続される。
Further, the table of the
次に、図3のフローチャートを参照して、図1の走行台車1の自己位置測定処理の手順について説明する。図3に示すように、走行台車1の自己位置測定処理では、まず、ステップS1乃至ステップS4の処理と、ステップS5乃至ステップS7の処理とを、並行して行う。
Next, the procedure of the self-position measurement process of the traveling
そして、ステップS1乃至ステップS4については、まず、ビデオカメラ4aにより照明器3をその背景の天井と共に撮影する(ステップS1)。画像処理装置5aは、ビデオカメラ4aで撮影された画像から照明器3の像部分を抽出し(ステップS2)、得られた照明器3の像が画像中で占める位置を計測する(ステップS3)。
And about step S1 thru | or step S4, first, image | photograph the
なお、照明器3の形状を特定する必要がある場合は、その処理を、画像処理装置5aがステップS3の処理を行う際に併せて行う。したがって、その場合は、画像処理装置5aが請求項中の形状判別手段に相当することになる。
In addition, when it is necessary to specify the shape of the
演算装置6は、画像中での照明器3の像に対する走行台車1の相対的位置を計算する(ステップS4)。
The
これと並行して行うステップS5乃至ステップS7については、まず、照明光に重畳されたID番号の情報を含む光空間伝送信号としての照明光を、受光センサ4bにより受光し(ステップS5)、受光した照明光から復調器5bの復調処理によりID番号を取得する(ステップS6)。そして、取得したID番号を検索キーとして照合ユニット5cが行う検索により、取得したID番号に対応する照明器3の設置位置(絶対位置)を取得する(ステップS7)。
In steps S5 to S7 performed in parallel with this, first, illumination light as an optical spatial transmission signal including information of an ID number superimposed on illumination light is received by the
ステップS1乃至ステップS4の処理とステップS5乃至ステップS7の処理とに続いて、ステップS4で計算した照明器3の像に対する走行台車1の相対的位置と、ステップS7で取得した照明器3の設置位置(絶対位置)とに基づいて、走行台車1の絶対位置を計算する(ステップS8)。ステップS7で複数の照明器3の設置位置(絶対位置)を取得した場合、その中から1つを照明器3の形状によって選ぶ際には、このステップS8においてその処理を前もって行う。
Following the processing of steps S1 to S4 and the processing of steps S5 to S7, the relative position of the traveling
なお、走行台車1の絶対位置を計算する際、ステップS4で計算した照明器3の像に対する走行台車1の相対的位置は、厳密には、走行台車1のビデオカメラ4aの取付位置の、照明器3の像に対する相対的位置であることに留意する。
When calculating the absolute position of the traveling
比較演算器7は、得られた走行台車1の絶対位置を目標位置と比較して、その比較偏差を目標位置まで走行台車1を移動させるに必要な移動量とする(ステップS9)。出力制御器8はこの比較結果に従った適切な駆動(移動)指令を駆動輪9の駆動モータ10に与え、これを制御する(ステップS10)。
The
以上の説明からも明らかなように、本実施形態では、図3のフローチャートにおけるステップS6が、請求項中の復調ステップに対応する処理となっている。また、本実施形態では、図3中のステップS7が、請求項中の絶対位置取得ステップに対応する処理となっている。さらに、本実施形態では、図3中のステップS8が、自己位置測定ステップに対応する処理となっている。 As is apparent from the above description, in this embodiment, step S6 in the flowchart of FIG. 3 is processing corresponding to the demodulation step in the claims. Moreover, in this embodiment, step S7 in FIG. 3 is a process corresponding to the absolute position acquisition step in the claims. Furthermore, in this embodiment, step S8 in FIG. 3 is a process corresponding to the self-position measurement step.
なお、画像処理装置5aがステップS3において、ビデオカメラ4aで撮影された画像から照明器3の形状を特定する場合は、図3中のステップS3が、請求項中の特定ステップに対応する処理となり、かつ、図3中のステップS8が、請求項中の絶対位置取得ステップに対応する処理となる。
When the
次に、上述した画像処理装置5aと演算装置6による画像処理及び位置計算の仕方を詳述する。
Next, the method of image processing and position calculation by the above-described
(1)画像処理(図4)
画像処理装置5aにおいては、まずビデオカメラ4aからの画像信号を2値化し、照明器3の像部分を抽出する。即ち、ビデオカメラ4aで撮影される入力画像(被写体)において照明器3の部分は極めて明るいので、上記2値化によりビデオカメラ視野11中の照明器像12の部分が抽出される(図4(a))。次に、照明器像12の部分について、重心とモーメントを計算することにより、画像中での照明器3の中心位置13及び向きθfを求める(図4(b))。
(1) Image processing (FIG. 4)
In the
なお、図4(a),(b)に示すx−y座標系は、ビデオカメラ4aを座標原点とするカメラ座標系であり、上記画像中での照明器3の中心位置13は座標(xf,yf)で表わされる。
Note that the xy coordinate system shown in FIGS. 4A and 4B is a camera coordinate system having the
(2)位置計算(図5)
演算装置6においては、画像中での照明器像12に対する走行台車1の相対的位置を計算し、さらに、走行台車1におけるビデオカメラ4aの位置を参照して、走行台車1の絶対位置を求める。ところで、ビデオカメラ4aは走行台車1に搭載されており、ビデオカメラ4aの走行台車1に対する相対位置は既知であるから、ビデオカメラ4aの位置を求めることと走行台車1の位置を求めることとは等価である。よってここでは、走行台車1の位置として、ビデオカメラ4aの位置を計算により求める手法を示す。
(2) Position calculation (Fig. 5)
In the
図5は演算装置6によるビデオカメラ4aの絶対位置の計算方法の一例を示す説明図である。この図5では、照明器3とビデオカメラ4aの相対的位置関係を例示しており、一般性を持たせるため、ビデオカメラ撮像面14において照明器像12の位置がビデオカメラ光軸15からずれており且つθfだけ向きが傾いている状態を示している。fはカメラ焦点距離(既知)である。
FIG. 5 is an explanatory diagram showing an example of a method of calculating the absolute position of the
図6及び図7は、図5に示す照明器3とビデオカメラ4aにより撮影したビデオカメラ撮像面14における照明器像12との位置関係を、矢視方向を変えて示す平面図及び側面図である。各図中に記載されたパラメータの意味は、
Xf ,Yf :照明器3の中心 絶対座標(照合ユニット5cの照合結果により既知)
Θf :照明器3の向き 絶対座標(照合ユニット5cの照合結果により既知)
Zf :照明器3の高さ 絶対座標(照合ユニット5cの照合結果により既知)
xf ,yf :照明器像12の中心 カメラ座標(画像処理により計測)
θf :照明器像向き カメラ座標(画像処理により計測)
zf :照明器像高さ カメラ座標(走行台車1上でのビデオカメラ4aの取り付け高さから既知)
X0 ,Y0 :カメラ座標原点の絶対座標に対する位置(未知)
Θ:カメラ座標原点の絶対座標に対する向き(未知)
Z0 :カメラ座標原点の絶対座標に対する高さ(走行台車1上でのビデオカメラ4aの取り付け高さから既知)
である。なお、カメラ座標系には(x−y)座標系を、走行台車1の絶対座標系にはX−Y座標系を用いている。
6 and 7 are a plan view and a side view showing the positional relationship between the
Xf, Yf: center of
Θf: Direction of
Zf: Height of the
xf, yf: Center of the
θf: Orientation of illuminator image Camera coordinates (measured by image processing)
zf: Illuminator image height Camera coordinates (known from the mounting height of the
X0, Y0: Camera coordinate origin position relative to absolute coordinates (unknown)
Θ: Direction of camera coordinate origin relative to absolute coordinates (unknown)
Z0: height relative to the absolute coordinates of the camera coordinate origin (known from the mounting height of the
It is. Note that the (xy) coordinate system is used for the camera coordinate system, and the XY coordinate system is used for the absolute coordinate system of the traveling
上記のパラメータのうち、カメラ座標原点の絶対座標に対する位置(X0 ,Y0 )と向きΘが未知であるが、これは次式
X0 ={(Zf −Z0 )xf −f・Xf }/(Zf −Z0 −f)
Y0 ={(Zf −Z0 )yf −f・Yf }/(Zf −Z0 −f)
Θ=Θf −θf
により算出することができる。したがって、ビデオカメラ4aの絶対座標が求められる。さらに、ビデオカメラ4aに対する走行台車1(の代表点)の相対座標を用いることにより、走行台車1の絶対座標が求められる。
Of the above parameters, the position (X0, Y0) and the orientation Θ relative to the absolute coordinates of the camera coordinate origin are unknown. This is expressed by the following equation: X0 = {(Zf−Z0) xf−f · Xf} / (Zf− Z0 -f)
Y0 = {(Zf-Z0) yf-f.Yf} / (Zf-Z0-f)
Θ = Θf −θf
Can be calculated. Therefore, the absolute coordinates of the
(3)駆動指令
比較演算器7は、上記にて計測された台車位置を目標位置もしくは走行経路と比較し、その比較結果を出力制御器8に与え、駆動モータ10を駆動し、走行台車1を所望位置へ移動させる。
(3) Drive command The comparison
このようにして自律走行することが可能な走行台車1によれば、次のような優れた効果が得られる。
According to the traveling
(1)無軌道の移動体においてその移動中に自己位置を認識することができる。これにより、FA,OA,物流,警備等の分野において移動体の位置制御を容易に行うことが可能となる。 (1) A self-position can be recognized during movement of a trackless moving body. This makes it possible to easily control the position of the moving body in the fields of FA, OA, logistics, security, and the like.
(2)天井に既設の照明装置を利用して実現でき、専用のターゲットを設置する必要がないので、地上側の付加的設備コストをゼロとすることができる。 (2) It can be realized by using an existing lighting device on the ceiling, and there is no need to install a dedicated target, so that the additional equipment cost on the ground side can be made zero.
(3)照明器3は明るいため判別が容易であり、処理が容易かつ高速である。
(3) Since the
(4)上向きのビデオカメラ4aで撮影するため、横方向を撮影する場合のように障害物に妨害されて見え難くなることが極めて少ない。
(4) Since shooting is performed with the
以上に説明したように、本実施形態の自己位置測定装置によれば、複数の照明器3−1〜3−Nのうちの最低1個が常にビデオカメラ4aの撮影画像中に入るようにした。そして、ビデオカメラ4aで撮影した照明器3とその設置位置を、受光センサ4bが受光したその照明器3からの照明光を復調して得たID番号に基づいて照合できるようにした。このため、走行台車1の移動範囲が比較的広い場合でも常に自己位置を測定することが可能である。
As described above, according to the self-position measuring apparatus of this embodiment, at least one of the plurality of illuminators 3-1 to 3-N is always included in the captured image of the
しかも、照明器3の照明用光源31はLED電球を用いており、照明光を人間が目視で認識するのが極めて困難な高い周波数で変調することができる。このため、走行台車1が人間のいるエリアを自律走行する場合でも、そのエリアの人間に照明光としての違和感を持たせにくい形態で、各照明器3−1〜3−NのID番号に応じたパターンで照明光を変調して出力させ、走行台車1の受光センサ4b及び復調器5bを用いてID番号を復調、認識させることができる。
Moreover, the
1 走行台車
2 走行経路
3,3−1〜3−N 照明器
4a ビデオカメラ
4b 受光センサ
5a 画像処理装置(抽出手段、形状判別手段)
5b 復調器(復調手段)
5c 照合ユニット(照明器特定手段、絶対位置取得手段)
6 演算装置(相対位置測定手段、自己位置測定手段、抽出手段)
7 比較演算器
8 出力制御器
9 駆動輪
10 駆動モータ
11 ビデオカメラ視野
12 照明器像
13 中心位置
14 ビデオカメラ撮像面
15 ビデオカメラ光軸
31 照明用光源
31a LED電球(LEDランプ)
32 照明用電源
33 ID番号記憶部
34 変調部
DESCRIPTION OF
5b Demodulator (demodulation means)
5c Verification unit (illuminator specifying means, absolute position acquisition means)
6. Arithmetic device (relative position measuring means, self-position measuring means, extracting means)
7
32
Claims (6)
前記照明器の光源に用いたLEDランプの照明光を前記照明器の絶対位置に対応する識別情報によって変調する変調ステップと、
前記撮影画像中の照明器からの前記変調された照明光を受光し前記識別情報を復調する復調ステップと、
前記復調した識別情報から前記撮影画像中の前記照明器の絶対位置を取得する絶対位置取得ステップと、
前記取得した絶対位置と前記撮影画像中の前記照明器の位置とに基づいて、前記自律走行移動体の自己位置を測定する自己位置測定ステップと、
を含むことを特徴とする屋内用自律走行移動体の自己位置測定方法。 In the method of measuring the self-position of the autonomous mobile body based on the known absolute position of the illuminator present in the image taken by the camera of the autonomous mobile body that autonomously travels indoors,
A modulation step of modulating the illumination light of the LED lamp used as the light source of the illuminator with identification information corresponding to the absolute position of the illuminator;
A demodulation step of receiving the modulated illumination light from the illuminator in the captured image and demodulating the identification information;
An absolute position acquisition step of acquiring the absolute position of the illuminator in the captured image from the demodulated identification information;
A self-position measuring step for measuring a self-position of the autonomous mobile body based on the acquired absolute position and the position of the illuminator in the captured image;
A self-position measuring method for an indoor autonomous mobile body characterized by comprising:
前記自律走行移動体に搭載され、前記照明器の光源に用いたLEDランプが発光する、前記照明器の絶対位置に対応する識別情報によって変調された照明光を受光する受光手段と、
前記受光手段で受光した照明光から前記識別情報を復調する復調手段と、
前記復調手段で復調した識別情報から該識別情報に対応する前記照明器を特定する照明器特定手段と、
前記照明器特定手段で特定した照明器の絶対位置を前記復調手段で復調した識別情報から取得する絶対位置取得手段と、
前記照明器特定手段で特定した照明器を前記撮影画像中から抽出する抽出手段と、
前記抽出手段が抽出した照明器の前記自律走行移動体に対する相対位置を測定する相対位置測定手段と、
前記絶対位置取得手段で絶対位置を取得した照明器の前記相対位置測定手段で測定した相対位置に基づいて、前記自律走行移動体の自己位置を測定する自己位置測定手段と、
を備えることを特徴とする屋内用自律走行移動体の自己位置測定装置。 In the apparatus for measuring the self-position of the autonomous mobile body based on the known absolute position of the illuminator present in the image captured by the camera of the autonomous mobile body that autonomously travels indoors,
A light receiving means for receiving illumination light modulated by identification information corresponding to an absolute position of the illuminator, which is mounted on the autonomous mobile body and emits an LED lamp used as a light source of the illuminator;
Demodulating means for demodulating the identification information from illumination light received by the light receiving means;
Illuminator specifying means for specifying the illuminator corresponding to the identification information from the identification information demodulated by the demodulation means;
Absolute position acquisition means for acquiring the absolute position of the illuminator specified by the illuminator specifying means from the identification information demodulated by the demodulation means;
Extraction means for extracting the illuminator specified by the illuminator specifying means from the captured image;
A relative position measuring means for measuring a relative position of the illuminator extracted by the extracting means with respect to the autonomous mobile body;
Self-position measuring means for measuring the self-position of the autonomous mobile body based on the relative position measured by the relative position measuring means of the illuminator that has obtained the absolute position by the absolute position obtaining means;
A self-position measuring device for an indoor autonomous mobile body, comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011025458A JP2012164229A (en) | 2011-02-08 | 2011-02-08 | Self-position measuring method of indoor autonomous traveling/moving object and device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011025458A JP2012164229A (en) | 2011-02-08 | 2011-02-08 | Self-position measuring method of indoor autonomous traveling/moving object and device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012164229A true JP2012164229A (en) | 2012-08-30 |
Family
ID=46843544
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011025458A Withdrawn JP2012164229A (en) | 2011-02-08 | 2011-02-08 | Self-position measuring method of indoor autonomous traveling/moving object and device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012164229A (en) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101404840B1 (en) * | 2012-12-10 | 2014-06-11 | 연세대학교 산학협력단 | Position estimating system for robot and method thereof |
US9170581B2 (en) | 2013-09-30 | 2015-10-27 | Crown Equipment Limited | Industrial vehicles with overhead light based localization |
JP2015190931A (en) * | 2014-03-28 | 2015-11-02 | 株式会社フジタ | Position measuring system |
US9174830B1 (en) | 2014-09-29 | 2015-11-03 | Crown Equipment Limited | Industrial vehicles with point fix based localization |
JP2016033457A (en) * | 2014-07-30 | 2016-03-10 | パナソニックIpマネジメント株式会社 | Position estimation system and reception terminal |
CN105751230A (en) * | 2016-03-31 | 2016-07-13 | 纳恩博(北京)科技有限公司 | Path control method, path planning method, first equipment and second equipment |
JP2017512296A (en) * | 2013-12-11 | 2017-05-18 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | Use of a mobile device with an image sensor to retrieve information related to a luminaire |
JP2017523387A (en) * | 2014-05-06 | 2017-08-17 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | Determining the orientation of a mobile device |
JP2018514758A (en) * | 2015-03-23 | 2018-06-07 | オスラム ゲーエムベーハーOSRAM GmbH | Tracking system and method for tracking a carrier of a mobile communication unit |
KR20180134661A (en) * | 2017-06-09 | 2018-12-19 | 주식회사 세일테크놀러지 | System for controlling Automated Guided Vehicle using Visible Light Communication |
JP2019500596A (en) * | 2015-12-03 | 2019-01-10 | オスラム・シルバニア・インコーポレイテッド | Light-based vehicle localization for mobile communication systems |
-
2011
- 2011-02-08 JP JP2011025458A patent/JP2012164229A/en not_active Withdrawn
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101404840B1 (en) * | 2012-12-10 | 2014-06-11 | 연세대학교 산학협력단 | Position estimating system for robot and method thereof |
US9606540B2 (en) | 2013-09-30 | 2017-03-28 | Crown Equipment Corporation | Industrial vehicles with overhead light based localization |
US9170581B2 (en) | 2013-09-30 | 2015-10-27 | Crown Equipment Limited | Industrial vehicles with overhead light based localization |
JP2017512296A (en) * | 2013-12-11 | 2017-05-18 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | Use of a mobile device with an image sensor to retrieve information related to a luminaire |
JP2015190931A (en) * | 2014-03-28 | 2015-11-02 | 株式会社フジタ | Position measuring system |
JP2017523387A (en) * | 2014-05-06 | 2017-08-17 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | Determining the orientation of a mobile device |
JP2016033457A (en) * | 2014-07-30 | 2016-03-10 | パナソニックIpマネジメント株式会社 | Position estimation system and reception terminal |
US9340399B2 (en) | 2014-09-29 | 2016-05-17 | Crown Equipment Corporation | Industrial vehicles with point fix based localization |
US9174830B1 (en) | 2014-09-29 | 2015-11-03 | Crown Equipment Limited | Industrial vehicles with point fix based localization |
JP2018514758A (en) * | 2015-03-23 | 2018-06-07 | オスラム ゲーエムベーハーOSRAM GmbH | Tracking system and method for tracking a carrier of a mobile communication unit |
US10054665B2 (en) | 2015-03-23 | 2018-08-21 | Osram Gmbh | Tracking system and method for tracking a carrier of a mobile communication unit |
KR101903978B1 (en) | 2015-03-23 | 2018-10-05 | 오스람 게엠베하 | Tracking system and method for tracking a carrier of a mobile communication unit |
JP2019500596A (en) * | 2015-12-03 | 2019-01-10 | オスラム・シルバニア・インコーポレイテッド | Light-based vehicle localization for mobile communication systems |
US10891754B2 (en) | 2015-12-03 | 2021-01-12 | Osram Sylvania Inc. | Light-based vehicle positioning for mobile transport systems |
CN105751230A (en) * | 2016-03-31 | 2016-07-13 | 纳恩博(北京)科技有限公司 | Path control method, path planning method, first equipment and second equipment |
KR20180134661A (en) * | 2017-06-09 | 2018-12-19 | 주식회사 세일테크놀러지 | System for controlling Automated Guided Vehicle using Visible Light Communication |
KR102033144B1 (en) * | 2017-06-09 | 2019-10-17 | 주식회사 세일테크놀러지 | System for controlling Automated Guided Vehicle using Visible Light Communication |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2012164229A (en) | Self-position measuring method of indoor autonomous traveling/moving object and device | |
CN111989544B (en) | System and method for indoor vehicle navigation based on optical target | |
TWI714950B (en) | Operation terminal, oil leakage detection device and oil leakage detection method | |
US20160122038A1 (en) | Optically assisted landing of autonomous unmanned aircraft | |
JP6685234B2 (en) | Localization of portable device based on coded light | |
JP4915281B2 (en) | Signal detection device, signal detection method and program | |
JP6455813B2 (en) | Position estimation system and receiving terminal | |
US20060293810A1 (en) | Mobile robot and a method for calculating position and posture thereof | |
US8807428B2 (en) | Navigation of mobile devices | |
US20070150097A1 (en) | Localization system and method of mobile robot based on camera and landmarks | |
KR102083934B1 (en) | Method and apparaus for automatic landing of aircraft using vision-based information | |
CN107787508A (en) | Light fixture stopping guide | |
KR100698534B1 (en) | Landmark for location recognition of mobile robot and location recognition device and method using same | |
CN105185134A (en) | Electronic Apparatus, Control Method Of Electronic Apparatus And Computer Readable Recording Medium | |
JP2005315746A (en) | Own position identifying method, and device therefor | |
KR20130067851A (en) | Apparatus and method for recognizing position of vehicle | |
KR20100020338A (en) | Localization system and method for mobile object using led light | |
CN110024010A (en) | For detecting the method and system for the protrusion object being located in parking lot | |
US20190187065A1 (en) | Lighting apparatus, method for providing lighting system, and road management system | |
CN105588440A (en) | Position detection method and device for sintering machine trolleys | |
KR100919944B1 (en) | Map Creation system and Map Creation Method of Mobile Robot | |
KR20160089580A (en) | Method And System For Parking Management Using Unmanned Ground Vehicle | |
KR20110069902A (en) | Position detecting method and apparatus of mobile object, position detecting system and position detecting discriminator thereof | |
Pinto et al. | Indoor localization system based on artificial landmarks and monocular vision | |
KR20110049567A (en) | Artificial landmark, appratus and method for navigation using artificial landmark and natural landmark |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20140513 |