JP2019205066A - カメラ調整装置 - Google Patents

Abstract

【課題】自律走行装置などに取り付けられた可動カメラの調整を、自動的にいつでもどこでも可能とすることを課題とする。【解決手段】回動可能に取り付けられた調整対象カメラと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラと、調整対象カメラによって撮影された第１画像データと、調整判定用カメラによって撮影された第２画像データを取得する画像取得部と、第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する位置ずれ算出部と、ずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定する調整要否判定部とを備える。【選択図】図５

Description

この発明は、カメラ調整装置に関し、特に、自律走行装置などに取り付けられたカメラであってその装置の周囲を撮影可能なカメラの調整装置に関する。

今日、荷物を搬送する搬送用ロボットや、建物内および建物周辺や所定の敷地内の状況を監視する監視用ロボットなど、自律的に移動する自律走行装置が利用されている。
このような従来の自律走行装置は、走行すべき領域の移動経路情報を予め記憶し、カメラ、距離画像センサ、ＧＰＳ（Global Positioning System）から取得した情報などを利用して、障害物を避けながら、所定の経路を走行する。

また、自律走行装置の周囲を撮影するために、上下方向および左右方向に方向転換でき、さらに、ズーム機能を有する可動カメラが利用されている。
また、天井や壁に設置される監視カメラや、自動車に搭載されるカメラにも、可動カメラが利用されている。
可動カメラは、予め設定された初期的な方向を基準として、通常、遠隔制御により、上下左右方向に移動させられる。
しかし、自律走行装置は、走行しながら撮影を行うために、走行経路にある段差等を乗り越えた場合、衝撃により可動カメラの基準位置がずれてしまう場合がある。
このような場合、可動カメラの位置を、初期的な基準位置に調整し直す必要がある。

また、特許文献１には、車両に２つのカメラを備え、２つのカメラで既知物体を撮影して、既知物体の３次元位置と向きを推定することのできる車載カメラシステムにおいて、２つのカメラどうしの３次元位置と向きの関係が所定の関係となるようにキャリブレーションをする必要があるが、２つのカメラで撮影された画像から特徴点を検出し、その特徴点の位置情報に基づいて推定されたカメラの３次元位置と向きの移動量と、車両の速度に基づいて、それぞれのカメラのキャリブレーションの必要性を判定することが記載されている。

国際公開公報 ＷＯ２０１７／０５７０５７ Ａ１

しかし、従来の自律走行装置においては、監視などの走行時において、可動カメラの位置がずれても、その位置ずれを、自動的に検出することができなかった。
可動カメラの位置がずれているか否かは、たとえば、監視動作終了後に、所定の基準領域の画像を撮影して、管理担当者が、撮影された画像と、予め記憶されている基準画像とを比較し、両画像に所定以上の誤差が生じていることを確認した場合に、可動カメラの位置がずれていると判断していた。その後、そのような位置ずれが生じていると判断した管理担当者や調整担当者によって可動カメラの位置調整が行われていた。

また、特許文献１は、２つのカメラの撮影領域画像が重複するように車両に搭載された２つのカメラの移動量等からキャリブレーションの必要性を判定し、必要な場合に２つのカメラどうしの３次元位置と向きの関係を所定の関係に調整するものであり、上下左右に移動可能な可動カメラの位置ずれの検出や、可動カメラの調整の要否の判定をすることはできない。

そこで、この発明は、以上のような事情を考慮してなされたものであり、監視動作をする自律走行装置などの走行時や衝撃を検出した場合においても、位置調整の必要なカメラの調整の要否の判定を、自動的に、いつでもどこでもできるようにしたカメラ調整装置を提供することを課題とする。

この発明は、回動可能に取り付けられた調整対象カメラと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラと、調整対象カメラによって撮影された第１画像データと、調整判定用カメラによって撮影された第２画像データを取得する画像取得部と、第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する位置ずれ算出部と、ずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定する調整要否判定部とを備えたことを特徴とするカメラ調整装置を提供するものである。

また、前記調整要否判定部が、ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする。
また、前記調整判定用カメラが、固定設置された固定カメラであることを特徴とする。

また、前記第１画像データと前記第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの撮影範囲を特定する範囲変換座標を算出する撮影位置算出部をさらに備え、前記撮影位置算出部が、前記調整対象カメラの第１画像データから、所定の第１特徴点を抽出し、前記調整判定用カメラの第２画像データから、所定の第２特徴点を抽出し、抽出された第１特徴点と第２特徴点のうち、調整対象カメラの撮影範囲と調整判定用カメラの撮影範囲の中で、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、選定された調整対象カメラの有効特徴点と調整判定用カメラの有効特徴点の座標を利用して、特徴点の相対的な位置関係を示す前記座標変換情報を計算し、前記第１画像データから調整対象カメラの撮影範囲を画定する範囲測定座標を取得し、前記範囲測定座標を、前記座標変換情報を用いて前記範囲変換座標に変換することを特徴とする。

また、調整された状態の調整対象カメラの撮影範囲を特定する基準座標を予め記憶した記憶部をさらに備え、前記位置ずれ算出部が、前記算出された範囲変換座標と、記憶された基準座標とを利用して、前記ずれ量評価値を算出し、前記算出された範囲変換座標と前記記憶された基準座標が、前記調整対象カメラの撮影範囲の４つの頂点を特定する座標であり、前記ずれ量評価値が、前記範囲変換座標が示す４つの頂点と、範囲変換座標が示す４つの頂点にそれぞれ対応する基準座標が示す４つの頂点との間の距離の平均値であることを特徴とする。

この発明は、車体と、車体を走行させる駆動部材を制御する走行制御部と、回動可能に取り付けられた調整対象カメラと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラと、調整対象カメラによって撮影された第１画像データと、調整判定用カメラによって撮影された第２画像データを取得する画像取得部と、第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの撮影範囲を特定する範囲変換座標を算出する撮影位置算出部と、調整された状態の調整対象カメラの撮影範囲を特定する基準座標を予め記憶した記憶部と、算出された範囲変換座標と、記憶された基準座標とを利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する位置ずれ算出部と、ずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定する調整要否判定部とを備えたことを特徴とする走行装置を提供するものである。

また、前記調整要否判定部が、ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする。
また、前記調整判定用カメラが、前記車体に固定設置された固定カメラであることを特徴とする。

また、前記調整対象カメラが、上下左右に回動できるように前記車体に取り付けられ、ズーム機能を有する可動カメラであり、前記調整判定用カメラが、前記車体の側面に固定設置された固定カメラであることを特徴とする。

また、前記撮影位置算出部が、前記調整対象カメラの第１画像データから、所定の第１特徴点を抽出し、前記調整判定用カメラの第２画像データから、所定の第２特徴点を抽出し、抽出された第１特徴点と第２特徴点のうち、調整対象カメラの撮影範囲と調整判定用カメラの撮影範囲の中で、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、選定された調整対象カメラの有効特徴点と調整判定用カメラの有効特徴点の座標を利用して、特徴点の相対的な位置関係を示す前記座標変換情報を計算し、前記第１画像データから調整対象カメラの撮影範囲を画定する範囲測定座標を取得し、前記範囲測定座標を、前記座標変換情報を用いて前記範囲変換座標に変換することを特徴とする。

また、前記算出された範囲変換座標と前記記憶された基準座標が、前記調整対象カメラの撮影範囲の４つの頂点を特定する座標であり、前記ずれ量評価値が、前記範囲変換座標が示す４つの頂点と、範囲変換座標が示す４つの頂点にそれぞれ対応する基準座標が示す４つの頂点との間の距離の平均値であることを特徴とする。

また、前記調整された状態の調整対象カメラの撮影範囲を特定する基準座標を算出する初期基準位置算出部をさらに備え、調整対象カメラの位置が調整された状態で、前記車体を停止させ、前記撮影位置算出部によって、調整対象カメラの撮影範囲を特定する範囲変換座標を算出させ、前記算出された範囲変換座標を、調整された状態の調整対象カメラの撮影範囲を特定する基準座標として、前記記憶部に記憶することを特徴とする。

また、走行装置が所定の経路を走行している場合において、前記走行制御部が、任意の位置で車体を停止させた後、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする。

また、衝撃を検出する衝撃検出部をさらに備え、前記衝撃検出部によって、予め設定された衝撃以上の衝撃を検出した場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする。

また、走行装置が所定の経路を走行している場合において、一定時間が経過するごとに、前記走行制御部が、任意の位置で車体を停止させた後、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする。

また、前記撮影位置算出部が、前記選定された有効特徴点の数を取得し、前記取得された有効特徴点の数が、所定の判定値よりも大きい場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定し、前記有効特徴点の数が、所定の判定値以下の場合は、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定しないことを特徴とする。

また、前記撮影位置算出部が、前記選定された有効特徴点の数を取得し、前記有効特徴点の数が、所定の判定値以下の場合は、前記走行制御部によって車体を移動させた後、前記撮影位置算出部が、再度、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、前記選定された有効特徴点の数を取得し、前記取得された有効特徴点の数が、所定の判定値よりも大きくなった場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする。

また、この発明は、回動可能に取り付けられた調整対象カメラと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラとを備えた走行装置のカメラ調整判定方法であって、調整された状態の前記調整対象カメラの撮影範囲を特定する基準座標を予め記憶し、前記調整対象カメラによって撮影された第１画像データと、前記調整判定用カメラによって撮影された第２画像データを取得し、前記第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、前記調整対象カメラの撮影範囲を特定する範囲変換座標を算出し、前記算出された範囲変換座標と、前記記憶された基準座標とを利用して、前記調整対象カメラの位置ずれを判定可能なずれ量評価値を算出し、前記ずれ量評価値に基づいて、前記調整対象カメラの位置の調整の必要性を判定し、前記ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする走行装置のカメラ調整判定方法を提供するものである。

この発明によれば、回動可能に取り付けられた調整対象カメラによって撮影された第１画像データと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラによって撮影された第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出し、そのずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定するので、自動的に、いつでもどこでも、調整対象カメラの位置の調整の必要性を判定することができ、調整対象カメラの位置の調整が必要となった場合に、迅速に、調整対象カメラの調整をすることができるようになる。

また、この発明によれば、調整対象カメラによって撮影された第１画像データと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラによって撮影された第２画像データを取得し、第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの撮影範囲を特定する範囲変換座標を算出し、算出された範囲変換座標と、予め記憶された調整状態の調整対象カメラの撮影範囲を特定する基準座標とを利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出し、そのずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定するので、管理担当者の判断を待つことなく、自動的に、いつでもどこでも、調整対象カメラの位置の調整の必要性を判定することができ、調整対象カメラの位置の調整が必要となった場合に、管理担当者が自ら調整の要否を判断するよりも、迅速に、調整対象カメラの調整をすることができるようになる。

この発明の自律走行装置の一実施例の概略外観図である。 この発明の自律走行装置の可動カメラと固定カメラの一実施例の説明図である。 この発明の自律走行装置の一実施例の構成ブロック図である。 この発明の可動カメラにおける初期撮影範囲の基準座標の設定処理の一実施例のフローチャートである。 この発明の可動カメラにおける調整判定処理と調整処理の一実施例のフローチャートである。 この発明の可動カメラにおける撮影範囲位置座標の算出処理の一実施例のフローチャートである。 この発明の可動カメラ範囲変換座標と可動カメラ基準座標と、ずれ量評価値の一実施例の説明図である。 この発明の自律走行装置の記憶部に記憶される情報および計算される情報の一実施例の説明図である。 この発明の可動カメラ範囲測定座標と可動カメラ範囲変換座標と、その行列の一実施例の説明図である。 この発明の可動カメラにおける調整判定処理と調整処理の実施例２におけるフローチャートである。 この発明の可動カメラにおける調整判定処理と調整処理の実施例３におけるフローチャートである。 この発明の可動カメラにおける調整判定処理と調整処理の実施例４におけるフローチャートである。

以下、図面を使用して本発明の実施の形態を説明する。なお、以下の実施例の記載によって、この発明が限定されるものではない。

＜自律走行装置の構成＞
図１に、この発明の自律走行装置の一実施例の概略外観図を示す。
図１において、この発明の自律走行装置１は、所定の経路情報に基づいて、障害物を避けながら、自律的に移動する機能を有する車両である。
また、自律走行装置１は、移動機能に加えて、輸送機能、監視機能、掃除機能、誘導機能、通報機能などの種々の機能を備えてもよい。
以下の実施例では、主として、屋外の所定の監視領域や通路を自律走行し、監視領域等の監視や輸送を行うことのできる自律走行装置について説明する。

図１の外観図において、自律走行装置１（以下、車両とも呼ぶ）は、主として、車体１０と、４つの車輪（前輪２１，後輪２２）と、監視ユニット２と、制御ユニット３とを備える。
監視ユニット２は、移動する領域や路面の状態を確認する機能や監視対象を監視する機能を有する部分であり、たとえば、移動する前方空間の状態を確認する距離検出部５５、画像取得部５６、カメラなどを含み、その他に、走行している現在位置の情報を取得する位置情報取得部などを備えてもよい。
制御ユニット３は、この発明の自律走行装置の有する走行機能、監視機能、カメラ調整機能などを実行する部分であり、たとえば後述するような制御部５０、障害物検出部５４、位置ずれ算出部５９、記憶部７０などから構成される。

この発明の自律走行装置１は、画像取得部５６、距離検出部５５および障害物検出部５４等を利用して、車体１０の進行方向の前方、側方および後方の状態を確認しながら自走する。たとえば、前方に、障害物や段差等が存在することを検出した場合には、障害物に衝突することなどを防止するために、静止、回転、後退、前進等の動作を行って進路を変更し、画像認識などにより障害物を認識した場合や、接触を検出した場合には、車体の停止動作など、所定の機能を実行する。

自律走行装置１は、自律走行装置１の周囲を撮影する複数のカメラを備えるが、主として、後述する図２に示すように、監視ユニット２に備えられかつ上下左右に移動でき３６０度周囲を撮影することが可能でズーム機能も有する可動カメラ３１と、自律走行装置１の車体の側面に備えられた複数の固定カメラ３２とを含むものとする。
また、この発明の自律走行装置１は、自律走行時や停止中などにおいて、定期的に、あるいは不定期的に、位置ずれを生じる可能性のある可動カメラ３１の調整の要否を判定する。

以下の実施例では、可動カメラ３１を、この発明の調整対象カメラとし、固定カメラ３２を、調整判定用カメラとする。
調整対象カメラは、主として、車体に回動可能に取り付けられた可動カメラ３１であり、調整の要否が判定されるカメラである。
調整判定用カメラは、固定カメラ３２に限るものではない。
調整判定用カメラは、少なくとも、調整対象カメラの撮影空間を含む空間を撮影することができるものとする。

また、以下の実施例では、自律走行装置に備えられる調整対象カメラ（可動カメラ）の位置の調整の必要性を判定する処理について説明するが、調整対象カメラは、自律走行装置に備えられたものに限るものではなく、他の車両や設備に取り付けられたカメラでもよい。たとえば、調整対象カメラは、人が運転する車、調整対象カメラを搭載した本体が可動するもの（たとえば、ドローン等）、あるいは、非可動体などに、取り付けてもよい。
また、この発明は、調整対象カメラの位置の調整の必要性を判定する機能を有するカメラ調整装置として提供することもできる。

図２に、この発明の自律走行装置に備えられる可動カメラと固定カメラの一実施例の説明図を示す。図２は、自律走行装置１を上から見た平面図である。
図２（ａ）に示すように、２つの前輪２１と２つの後輪２２とを配置し、紙面の上方向を、自律走行装置１の前進方向とする。
また、自律走行装置１の本体１０に、１つの可動カメラ３１と、４つの固定カメラ３２とが取り付けられているものとする。
ただし、可動カメラ３１と固定カメラ３２以外のカメラを備えてもよい。

図２に示すように、可動カメラ３１は、自律走行装置１の本体１０に、動作可能なように取り付けられる。可動カメラ３１は、水平方向に３６０度回転し、自律走行装置１の周囲全体を撮影できる。また、可動カメラ３１は、上下方向に、所定の角度（たとえば、１８０度）の範囲内を回動する。
さらに、可動カメラ３１は、レンズを駆動し、広角撮影と望遠撮影が可能なズーム機能を備えてもよい。可動カメラ３１は、いわゆるパン、チルト、ズームの機能を有するので、ＰＴＺカメラとも呼ぶ。

可動カメラ３１の初期的な基準位置（ホームポジションとも呼ぶ）は、たとえば、自律走行装置１が前方方向に直進した場合に、進行方向に対して左右方向の角度がゼロ度で、上下方向の角度もゼロ度の方向を向いたときの状態とする。
自律走行装置１が自律走行を繰り返すと、走行経路に存在する段差を乗り越えた場合に生じる衝撃等によって、可動カメラ３１に位置ずれが発生する場合がある。このとき、可動カメラ３１をホームポジションに戻したつもりでも、実際には、可動カメラ３１は正確なホームポジションには戻っていない場合があり、可動カメラ３１の調整が必要となる。

そこで、自律走行をする前に、可動カメラ３１と固定カメラ３２の画像データを取得して、可動カメラ３１の初期的な基準位置に正確に調整されたときの可動カメラ３１の撮影範囲に相当する基準情報を予め記憶しておき、自律走行を繰り返した後の可動カメラ３１の撮影範囲に相当する測定情報と、記憶されていた基準情報とを比較して、両情報に所定以上の誤差が生じている場合に、可動カメラ３１の調整が必要と判定する。
後述するような可動カメラ３１の調整の要否の判定と、調整作業は、原則として、可動カメラ３１を、初期的な基準位置に戻して行うものとする。

図２（ａ）に示すように、固定カメラ３２は、たとえば、自律走行装置１の本体１０の４つの側面に、固定的に、それぞれ１つずつ取り付けられる。
固定カメラ３２は、回転等ができないものとし、常に同じ方向を撮影するものとする。自律走行装置１の前方方向を撮影する固定カメラ３２は、可動カメラ３１が初期的な基準位置にある場合と同じ方向を撮影できるものとする。
また、固定カメラ３２は、４つに限るものではなく、たとえば、本体１０の前後の側面のみに１つずつ取り付けてもよく、本体１０の左右と後方の側面に１つずつ取り付けてもよく、あるいは、５つ以上の固定カメラ３２を取り付けてもよい。

図２（ｂ）に、可動カメラ３１の撮影範囲Ａと、固定カメラ３２の撮影範囲Ｂとを示している。たとえば、可動カメラ３１の撮影範囲Ａを２つの線分Ａ１の間の空間とし、固定カメラ３２の撮影範囲Ｂを２つの線分Ｂ１の間の空間とすると、固定カメラ３２の撮影範囲Ｂは、可動カメラ３１の撮影範囲Ａよりも広いものとする。

図３に、この発明の自律走行装置の一実施例の構成ブロック図を示す。
図３において、この発明の自律走行装置１は、主として、制御部５１、走行制御部５２、車輪５３、障害物検出部５４、距離検出部５５、画像取得部５６、初期基準位置算出部５７、撮影位置算出部５８、位置ずれ算出部５９、調整要否判定部６０、調整実行部６１、記憶部７０を備える。
また、画像取得部５６は、可動カメラ３１によって撮影された画像データ（第１画像データと呼ぶ）と、固定カメラ３２によって撮影された画像データ（第２画像データと呼ぶ）を取得するものとする。

自律走行装置１の制御部５１は、走行制御部５２などの各構成要素の動作を制御する部分であり、主として、ＣＰＵ，ＲＯＭ，ＲＡＭ，Ｉ／Ｏコントローラ，タイマー等からなるマイクロコンピュータによって実現される。
ＣＰＵは、ＲＯＭ等に予め格納された制御プログラムに基づいて、各種ハードウェアを有機的に動作させて、この発明の走行機能、画像取得機能、障害物検出機能などを実行する。

走行制御部５２は、車体を走行させる駆動部材を制御する部分であり、主として、駆動部材に相当する車輪５３の回転を制御して、直線走行および回転動作などをさせることによって、自動的に車両を走行させる。駆動部材には、車輪やキャタピラ（登録商標）などが含まれる。
車輪５３は、図１および図２に示したような４つの車輪（２１，２２）に相当する。
また、上記したように、車輪のうち、左右の前輪２１を駆動輪とし、左右の後輪２２は回転制御をしない従動輪としてもよい。
また、図示しないエンコーダを、駆動輪２１の左輪と右輪にそれぞれ設け、車輪の回転数や回転方向、回転位置、回転速度によって車両の移動距離等を計測し、走行を制御してもよい。エンコーダは、速度検出部に相当する。

障害物検出部５４は、所定の障害物検知領域内に存在する物体を検出する部分であり、主として、距離検出部５５や画像取得部５６から取得した情報を利用して、物体（障害物、人など）を検出する。
特に、後述する距離検出部５５によって距離が検出された物体の障害物検知領域内での位置と、物体が存在する位置の進行方向に対する方向とが検出される。たとえば、距離検出部５５によって、反射光が受光され距離が算出された測点の位置には障害物が存在することが検出される。

また、距離検出部５５は、複数の測点までの距離が算出されるので、距離が算出された測点の位置情報から、障害物の大きさ、位置、形状、障害物までの距離が取得される。また、進行方向に対する障害物が存在する方向を検出することもできる。
障害物検出部５４としては、距離検出部５５に相当する２D LIDARと３D LIDARのほかに、画像取得部５６や、バンパー等に取り付けられた超音波センサも利用される。

距離検出部５５は、車両の現在位置から、進行方向の前方空間を含む所定の空間（たとえば、障害物検知領域）内に存在する物体および路面までの距離を検出する部分である。距離検出部５５は、車体の前面のほぼ中央付近に配置される。ここで、車両が屋外を走行する場合、物体とは、たとえば、建物、柱、壁、突起物などを意味する。
距離検出部５５は、たとえば、障害物検知領域に所定の光を出射した後、障害物検知領域内に存在する物体および路面によって反射された反射光を受光して、物体および路面までの距離を検出する。
具体的には、距離検出部５５は、主として、進行方向の所定の領域に光を出射する発光部と、物体によって反射された光を受光する受光部と、光の出射方向を、２次元的あるいは３次元的に変化させる走査制御部とから構成される。

出射される光としては、レーザー、赤外線、可視光、超音波、電磁波などを用いることができる。
また、今日、距離検出用センサとして、ＬＩＤＡＲ（Light Detection and Ranging、あるいはLaser Imaging Detection and Ranging：ライダー）が用いられているが、これを距離検出部５５として用いてもよい。
ＬＩＤＡＲは、所定の障害物検知領域内の２次元空間または３次元空間にレーザーを出射し、障害物検知領域内の複数の測点における距離を測定する装置である。
水平方向の２次元空間の測点における距離を測定する場合を、２D LIDARと呼び、水平方向に垂直方向も加えた３次元空間の測点における距離を測定する場合を、３D LIDARと呼ぶ。
また、ＬＩＤＡＲは、発光部からレーザーを出射した後、物体によって反射された反射光を受光部で検出し、たとえば、出射時刻と受光時刻との時間差から、受光距離Ｌ０を算出する。この算出された受光距離Ｌ０から、物体（障害物）までの距離が検出される。

画像取得部５６は、カメラによって撮影された画像データを取得する部分である。たとえば、複数のカメラによって撮影された車両の走行方向の前方空間、車両の側方空間、および車両の後方空間を含む所定の空間の画像を取得する。
取得する画像は、静止画でも、動画でもよい。
取得された画像は、記憶部７０に記憶され、管理装置等からの要求に応じて転送される。

また、特に、この発明では、調整対象カメラである可動カメラ３１によって撮影された画像データSIMG（第１画像データ）と、調整判定用カメラである固定カメラ３２によって撮影された画像データDIMG（第２画像データ）を取得する。
上記したように、可動カメラ３１は、上下左右に回動できるように車体の監視ユニット２に取り付けられ、水平方向に３６０度旋回して車体の周囲を撮影することが可能で、ズーム機能を有するＰＴＺカメラである。
固定カメラ３２は、たとえば、自律走行装置１の車体の側面に固定設置された４台のカメラであり、各固定カメラによって、車体の前方、左方、右方、後方をそれぞれ撮影する。

この発明では、少なくとも、１台の可動カメラ３１と、１台の固定カメラ３２とを備えるものとし、可動カメラ３１と固定カメラ３２は、同じ方向の画像を撮影できるものとする。また、可動カメラ３１と固定カメラ３２が同じ方向を向いている場合、固定カメラ３２は、可動カメラ３１の撮影空間を含む空間を撮影できるものとする。
また、以下の実施例では、可動カメラ３１で撮影した画像データと、固定カメラ３２で撮影した画像データとを利用して、可動カメラ３１の位置ずれを検出して、可動カメラ３１の調整の要否を判定する。

初期基準位置算出部５７は、調整された状態の可動カメラ３１の撮影範囲を特定する基準座標を算出する部分であり、可動カメラ３１と固定カメラ３２とが設計仕様どおりの位置に調整された状態で、可動カメラ３１と固定カメラ３２により撮影された画像を取得し、可動カメラ３１の初期的な基準位置（ホームポジション）における基準情報を算出する部分である。

たとえば、調整対象カメラである可動カメラ３１の位置が調整された状態で、車体を停止させ、後述する撮影位置算出部５８によって、可動カメラ３１の撮影範囲を特定する範囲変換座標（可動カメラ範囲変換座標AS）を算出させ、算出された範囲変換座標を、調整された状態の可動カメラ３１の撮影範囲を特定する基準座標（可動カメラ基準座標AK）として、記憶部７０に記憶する。

後述するように、固定カメラ３２で撮影された範囲の画像の位置座標と対応させて、
可動カメラ３１の初期的な基準位置で撮影された範囲の画像の位置座標（可動カメラ範囲変換座標AS）を計算し、この計算された座標を、可動カメラ基準座標AKとして、記憶部７０に予め記憶しておく。

この算出処理は、可動カメラ３１の初期位置を正確に設定するものであるので、自律走行をする前で、可動カメラ３１の位置が調整された状態で、車体を停止させて行うことが好ましい。
この算出処理の詳細は、後述する初期撮影範囲の基準座標の設定処理に相当し、図４などを用いて説明する。
また、記憶部７０に予め記憶された可動カメラ基準座標AKは、可動カメラの位置ずれの算出処理をするために利用される。

固定カメラ３２で撮影された範囲の画像と、可動カメラ３１の初期的な基準位置で撮影された範囲の画像とは、完全に一致する必要はないが、ほぼ同じ方向の空間を撮影するものとする。
たとえば、カメラの調整を特定の場所で行うことが決まっている場合は、その特定の場所に存在する所定の目標物を含む空間を撮影すればよい、
また、固定カメラ３２が複数ある場合は、可動カメラ３１を初期的な基準位置に設定したときに、ほぼ同じ方向の空間を撮影できる固定カメラ３２を用いればよい。たとえば、図２において、可動カメラ３１の初期的な基準位置における撮影範囲Ａが紙面の上方向である場合、同じ方向の撮影範囲Ｂを撮影できる本体１０の前方側面に配置された固定カメラ３２を用いればよい。

撮影位置算出部５８は、自律走行を開始した後、任意の位置で、可動カメラ３１と固定カメラ３２により撮影された画像を取得し、可動カメラ３１の初期的な基準位置（ホームポジション）における所定の測定情報を算出する部分である。
特に、撮影位置算出部５８は、画像取得部５６によって取得された第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、可動カメラ３１の撮影範囲を特定する範囲変換座標を算出する。
ここで、座標変換情報は、後述する座標変換行列Cであり、範囲変換座標は、後述する可動カメラ範囲変換座標ASに相当する。

この算出処理は、特定の場所で撮影を行う必要はなく、自律走行をする経路の途中で、撮影をしてもよい。たとえば、走行経路の途中で停止し、可動カメラ３１を初期的な基準位置に戻し、可動カメラ３１により画像を撮影し、また、ほぼ同じ方向の空間を撮影することのできる固定カメラ３２により、ほぼ同じ画像を撮影する。

より具体的には、撮影位置算出部５８は、可動カメラ３１の第１画像データから、所定の第１特徴点を抽出し、固定カメラ３２の第２画像データから、所定の第２特徴点を抽出し、抽出された第１特徴点と第２特徴点のうち、可動カメラ３１の撮影範囲と固定カメラ３２の撮影範囲の中で、位置がほぼ対応すると推定される可動カメラ３１の有効特徴点と、固定カメラ３２の有効特徴点とを選定し、選定された可動カメラ３１の有効特徴点と固定カメラ３２の有効特徴点の座標を利用して、特徴点の相対的な位置関係を示す座標変換情報（座標変換行列C）を計算し、第１画像データから可動カメラ３１の撮影範囲を画定する範囲測定座標を取得し、範囲測定座標を、座標変換情報を用いて範囲変換座標（可動カメラ範囲変換座標AS）に変換する。

ここで、第１特徴点は、可動カメラ３１の特徴点であり、第２特徴点は、固定カメラ３２の特徴点であり、範囲測定座標は、後述する可動カメラ範囲測定座標BSに相当する。
上記した有効特徴点は、抽出された第１特徴点と第２特徴点のうち、可動カメラ３１の撮影範囲と固定カメラ３２の撮影範囲の中で、位置がほぼ対応すると推定される特徴点であるが、可動カメラ３１の有効特徴点の座標が、後述する可動カメラ特徴点座標であり、固定カメラ３２の有効特徴点の座標が、後述する固定カメラ特徴点座標に相当する。
また、後述するように、可動カメラ３１の有効特徴点の座標は、ベクトルＳで表され、
固定カメラ３２の有効特徴点の座標は、ベクトルＤで表される。

後述するように、固定カメラ３２で撮影された範囲の画像の位置座標と対応させて、
可動カメラ３１で撮影された範囲の画像の座標（可動カメラ範囲変換座標AS）が計算されるが、この計算された座標ASは、現在の可動カメラの測定情報として、記憶部７０に記憶される。

この撮影位置算出部５８による算出処理は、自律走行をした後に、定期的に、あるいは不定期的に、行えばよい。
不定期的とは、任意のタイミングでもよいが、たとえば、大きな衝撃を検出した後や、
走行を停止してカメラを自動制御する直前に、行ってもよい。
この処理の詳細は、後述する可動カメラ撮影範囲位置座標の算出処理に相当し、図６などを用いて説明する。
また、記憶部７０に記憶された可動カメラ範囲変換座標ASも、可動カメラ３１の位置ずれの算出処理をするために利用される。

位置ずれ算出部５９は、可動カメラの位置ずれの有無を検出する部分であり、第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する。
具体的には、撮影位置算出部５８によって算出された範囲変換座標（可動カメラ範囲変換座標AS）と、記憶部７０に予め記憶された基準座標（可動カメラ基準座標AK）とを利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値PGEを算出する。
ずれ量評価値PGEは、可動カメラの位置ずれの有無を検出するための評価値であり、たとえば、後述するような所定の数式により算出される。
算出されたずれ量評価値PGEは、記憶部７０に予め記憶されたずれ量判定値PG0と比較される。

調整要否判定部６０は、算出されたずれ量評価値PGEに基づいて、可動カメラ３１の位置の調整の必要性を判定する部分である。
具体的には、算出されたずれ量評価値PGEと、予め記憶されたずれ量判定値PG0と比較し、ずれ量評価値PGEが所定のずれ量判定値PG0よりも大きい（PGE＞PG0）場合に、可動カメラ３１の位置の調整が必要であると判定する。
そうでない場合は、可動カメラ３１の調整は必要ないと判定する。

また、たとえば、自律走行装置が所定の経路を走行している場合において、走行制御部５２が、任意の位置で車体を停止させた後、調整要否判定部６０によって可動カメラ３１の位置の調整が必要か否かを判定すればよい。
可動カメラ３１の調整が必要と判断された場合は、たとえば、自律走行が終了した後に、可動カメラ３１の調整を実行する。

調整実行部６１は、可動カメラ３１の調整を実行する部分である。
可動カメラ３１の調整は、自律走行が終了した後や、停止して監視動作を行うときに、行えばよい。
また、可動カメラ３１の調整は、可動カメラ３１の初期的な基準位置を、正確なもとに位置に戻す処理であり、可動カメラに予め決められている信号を送信することで実施される。

また、図示していないが、自律走行装置１は、自律走行するために、車両の各構成要素に対して電力を供給する充電池を備える。
充電池としては、たとえば、リチウムイオン電池、ニッケル水素電池、Ｎｉ−Ｃｄ電池、鉛電池、各種燃料電池などの充電池が用いられる。
また、図示しない電池残量検出部を備え、充電池の残りの容量（電池残量）を検出し、検出された電池残量に基づいて、所定の充電設備の方へ帰還するべきか否かを判断し、電池残量が所定残量よりも少なくなった場合は、充電設備へ自動的に帰還するようにしてもよい。

さらに、上記した構成要素に加えて、その他の構成要素を備えてもよい。
たとえば、調整が必要なことを表示する表示部、調整が必要なことを音声で通知するスピーカ、ネットワークを介して管理装置と無線通信する通信部、走行中に段差を乗り越えた場合や障害物に衝突や接触した場合などに発生する衝撃を検出する衝撃検出部、車両の現在位置を示す情報を取得する位置情報取得部、撮影された物体を認識する画像認識部を備えてもよい。

通信部は、ネットワークを介して、管理装置と、データの送受信を行う部分であり、無線通信によってネットワークに接続し、管理装置と通信できる機能を有することが好ましい。
たとえば、自律走行装置の可動カメラの調整が必要であることが判定された場合は、可動カメラの調整が必要であることを示す情報を、自律走行装置とは異なる位置に配置された管理装置に送信する。
また、自律走行装置に異常状態が発生した場合、通信部は、異常状態が発生したこと、異常状態の発生日時および発生位置などを含む通知情報を、管理装置に送信する。
また、通知情報は、自律走行装置とは異なる位置にいる担当者の所持する端末に送信してもよく、管理装置および端末の少なくともどちらか一方または両方に送信すればよい。

衝撃検出部としては、感圧スイッチ、マイクロスイッチ、超音波センサ、加速度センサ、赤外線測距センサなどからなる接触センサや非接触センサが用いられ、たとえば、車体のバンパーに設置する。衝撃検出部は、１つでもよいが、車体の前方、側面、後方からの衝撃を検出するために、車体の前方、側面、後方の所定の位置に、それぞれ複数個設けることが好ましい。
衝撃検出部によって、予め設定された衝撃以上の衝撃を検出した場合に、調整要否判定部６０によって調整対象カメラ（可動カメラ３１）の位置の調整が必要か否かを判定してもよい。

位置情報取得部は、車両の現在位置を示す情報（緯度、経度など）を取得する部分であり、たとえば、ＧＰＳ（Global Position System）を利用して、現在位置情報を取得してもよい。
取得された現在位置情報と、記憶部７０に予め記憶された経路情報とを比較しながら、車両の進行すべき方向を決定し、車両を自律走行させる。

また、位置情報取得部としては、ＧＰＳと同様に、現在利用されている他の衛星測位システムを用いてもよい。たとえば、日本の準天頂衛星システム（Quasi-Zenith Satellite System：QZSS）、ロシアのＧＬＯＮＡＳＳ（Global Navigation Satellite System）、ＥＵのガリレオ、中国の北斗、インドのＩＲＮＳＳ（Indian Regional Navigational Satellite System）などを利用してもよい。

画像認識部は、可動カメラや固定カメラによって撮影された画像データの中に含まれる物体を認識する部分である。たとえば、画像データに含まれる物体を抽出し、抽出された物体が、人体の所定の特徴を持つ物体である場合に、その物体を人体として認識する。画像認識処理は、既存の画像認識技術を用いればよい。
認識する物体は、人体に限るものではなく、壁、柱、段差、動物、狭い通路のような障害物を認識してもよい。

記憶部７０は、自律走行装置１の各機能を実行するために必要な情報やプログラムを記憶する部分であり、ＲＯＭ，ＲＡＭ，フラッシュメモリなどの半導体記憶素子，ＨＤＤ，ＳＳＤなどの記憶装置、その他の記憶媒体が用いられる。
記憶部７０には、たとえば、可動カメラ画像データ７１（SIMG）、固定カメラ画像データ７２（DIMG）、可動カメラ特徴点座標７３（S）、固定カメラ特徴点座標７４（D）、座標変換行列７５（C）、可動カメラ範囲測定座標７６（BS）、可動カメラ範囲変換座標７７（AS）、可動カメラ基準座標７８（AK）、ずれ量評価値７９（PGE）、ずれ量判定値８０（PG0）、有効特徴点数８１（Tn）、有効特徴点数判定値８２（T0）などが記憶される。

可動カメラ画像データ７１（SIMG）は、可動カメラ３１によって取得された画像データであり、静止画像である。この画像データの取得は、自律走行中でも、停止中でも、いつでもどこでも行うことができる。
ただし、可動カメラ３１の調整の要否を判断する場合は、自律走行中であっても、一時的に停止して、可動カメラ３１によって撮影することが好ましい。

固定カメラ画像データ７２（DIMG）は、固定カメラ３２によって取得された画像データであり、静止画像である。この画像データの取得も、自律走行中でも、停止中でも、いつでもどこでも行うことができるが、可動カメラ３１と同様に、可動カメラ３１の調整の要否を判断する場合は、自律走行中であっても、一時的に停止して、固定カメラ３２によって撮影することが好ましい。

また、可動カメラ３１の調整の要否を判断する場合は、可動カメラ３１と同じ方向の空間を撮影できる固定カメラ３２を利用する。
たとえば、図２に示す場合は、可動カメラ３１と同じ紙面の上方向の空間を撮影できる車体の前方側面に設置された固定カメラ３２を利用する。
あるいは、可動カメラ３１が、車体の右方向の空間を撮影できる状態で静止した場合は、車体の右方向の空間を撮影できる車体の右側面に設置された固定カメラ３２を利用してもよい。

可動カメラ特徴点座標７３（S）は、可動カメラ３１の画像データ７１（SIMG）を解析することによって、抽出された特徴点の座標である。
可動カメラ３１によって撮影された画像データ７１（SIMG）の中には、様々な物体が含まれている場合があり、物体は、輪郭線や色で区別することが可能である。たとえば、画像データ７１（SIMG）に含まれる物体の輪郭線が、特徴点として抽出され、抽出された複数の特徴点の位置を示す座標が、可動カメラ特徴点座標７３（S）として、記憶される。

固定カメラ特徴点座標７４（D）は、固定カメラ３２の画像データ７２（DIMG）を解析することによって、抽出された特徴点の座標である。
たとえば、画像データ７２（DIMG）に含まれる物体の輪郭線が、特徴点として抽出され、抽出された複数の特徴点の位置を示す座標が、固定カメラ特徴点座標７４（D）として、記憶される。
上記したように、可動カメラ３１と固定カメラ３２がほぼ同じ空間を撮影している場合、両画像データ（SIMG、DIMG）に含まれる特徴点の座標は、同一ではないが、ほぼ同じ数値となると考えられる。

座標変換行列７５（C）は、可動カメラ３１の画像データから抽出した複数の特徴点の座標と、固定カメラ３２の画像データから抽出した複数の特徴点の座標とを対応付けるための行列である。
後述するように、可動カメラ３１の画像データから抽出した複数の有効特徴点の座標をベクトルSで表し、固定カメラ３２の画像データから抽出した複数の有効特徴点の座標をベクトルDで表した場合に、このベクトルSを、固定カメラ３２の座標を示したベクトルDに変換するための行列が、座標変換行列Cである。
すなわち、ベクトルD＝ベクトルS×座標変換行列Cである。

座標変換行列Cは、たとえば、後述する図８（ｃ）に示したような３×３の行列である。
また、ベクトルSとベクトルDは、抽出された複数の有効特徴点の座標から設定されるので、座標変換行列Cは、ベクトルSとベクトルDを利用して、後述する図８（ｃ）に示したような計算式により、求められる。

可動カメラ範囲測定座標７６（BS）は、可動カメラ３１で撮影された範囲（撮影範囲）を特定する測定座標である。
一般的に、カメラで撮影される範囲が、長方形の形状であるとすると、可動カメラ３１で撮影された範囲は、長方形の形状を確定する４つの頂点で特定される。
可動カメラ３１で撮影された画像データSIMGの撮影範囲である長方形の形状を確定する４つの頂点（４角の点）を示す座標が、画像データSIMGから、可動カメラ範囲測定座標BSとして取得される。可動カメラ範囲測定座標BSは、可動カメラ３１における座標値であり、固定カメラの撮影範囲から求めた座標ではない。
可動カメラ範囲測定座標BSと同様に、以下の可動カメラ範囲変換座標７７（AS）も、可動カメラ３１の撮影範囲の４つの頂点を特定する座標である。

可動カメラ範囲変換座標７７（AS）は、可動カメラ３１で撮影された画像データの撮影範囲と、固定カメラ３２で撮影された画像データの撮影範囲とを対応付けるために、可動カメラ範囲測定座標７６（BS）を、変換した座標である。
すなわち、可動カメラ範囲変換座標７７（AS）は、可動カメラ範囲測定座標７６（BS）を、固定カメラ３２の撮影範囲から求めた座標に変換したものである。
言いかえれば、可動カメラ範囲変換座標７７（AS）は、可動カメラ３１で撮影された画像データの特徴点の位置を示す座標を、その特徴点が固定カメラ３２で撮影されたとした場合に決定される位置の座標に変換するための撮影範囲を示す座標である。

後述するように、可動カメラ範囲変換座標７７（AS）は、可動カメラ範囲測定座標７６（BS）を、上記した座標変換行列Cを利用して変換した座標である。
すなわち、可動カメラ範囲変換座標ASは、可動カメラ範囲測定座標BSに、座標変換行列Cを掛け合わせることにより、計算できる。
可動カメラ範囲変換座標ASは、自律走行をした後に任意の位置で測定される後述するような可動カメラの測定範囲を画定する４角（a1', a2', a3', a4'）の頂点の座標に相当する。

可動カメラ基準座標７８（AK）は、調整された状態の可動カメラ３１の撮影範囲を特定する基準座標であり、予め記憶部７０に記憶される。この座標７８は、可動カメラ範囲変換座標７７（AS）に相当する座標であるが、初期基準位置算出部５７によって計算される座標である。
この記憶された基準座標（可動カメラ基準座標AK）も、可動カメラ３１の撮影範囲の４つの頂点を特定する座標である。
たとえば、可動カメラ３１の調整を行った後に測定された可動カメラ３１の初期的な基準位置に対応した座標であり、後述するような可動カメラの基準範囲を画定する４角（a1, a2, a3, a4）の頂点の座標に相当する。

ずれ量評価値７９（PGE）は、可動カメラ３１の初期的な基準位置からのずれ量を判定することのできる数値であり、上記した可動カメラ範囲変換座標７７（AS）と可動カメラ基準座標７８（AK）とを利用して、所定の計算式により計算される。
たとえば、後述するように、ずれ量評価値PGEは、範囲変換座標（可動カメラ範囲変換座標AS）が示す４つの頂点と、範囲変換座標が示す４つの頂点にそれぞれ対応する基準座標（可動カメラ基準座標AK）が示す４つの頂点との間の距離の平均値である。
図７に、可動カメラ範囲変換座標と可動カメラ基準座標と、ずれ量評価値の一実施例の説明図を示す。

図７（ａ）に、可動カメラ範囲変換座標７７（AS）と可動カメラ基準座標７８（AK）との関係の一実施例の説明図を示す。
図７（ａ）の可動カメラ測定範囲を確定する４角（a1', a2', a3', a4'）の頂点の座標は、自律走行後に算出される可動カメラ範囲変換座標ASに相当する。可動カメラ範囲変換座標ASは、長方形の４つの頂点（a1', a2', a3', a4'）のｘｙ座標で表される。
図７（ａ）の可動カメラ基準範囲を確定する４角（a1, a2, a3, a4）の頂点の座標は、初期基準位置の設定時に算出される可動カメラ基準座標AKに相当する。可動カメラ基準座標AKは、長方形の４つの頂点（a1, a2, a3, a4）のｘｙ座標で表される。
ここで、頂点a1'と頂点a1とが対応し、頂点a2'と頂点a2とが対応し、頂点a3'と頂点a3とが対応し、頂点a4'と頂点a4とが対応するものとする。

もし、自律走行した後に、可動カメラ３１に位置ずれが無いとした場合、可動カメラ測定範囲と可動カメラ基準範囲とは一致するはずであり、４角の（a1', a2', a3', a4'）の頂点の座標と、（a1, a2, a3, a4）の頂点の座標も一致する。すなわち、可動カメラ３１に位置ずれが無い場合は、対応する各頂点間の距離は、ゼロのはずである。

一方、自律走行した後に、可動カメラ３１に位置ずれが生じた場合は、図７（ａ）に示したように、可動カメラ測定範囲と可動カメラ基準範囲とは一致せず、各頂点の位置がずれている。すなわち、可動カメラ３１に位置ずれが生じた場合は、対応する各頂点間の距離は、ゼロではないはずである。

そこで、たとえば、可動カメラ３１の位置ずれを評価する数値として、図７（ｂ）に示すような数式で計算されるずれ量評価値７９（PGE）を採用する。
ここで、ずれ量評価値PGEは、２つの範囲をそれぞれ画定する４つの頂点において、４つの対応する頂点間の距離の平均値である。
このずれ量評価値PGEがゼロの場合、可動カメラ３１の位置ずれはないことを示している。また、ずれ量評価値PGEの数値が大きいほど、可動カメラ３１の位置ずれが大きいことを示している。
ただし、ずれ量評価値PGEは、このような数式で計算される数値に限定するものではない。

ずれ量判定値８０（PG0）は、可動カメラ３１の位置ずれがあった場合に、可動カメラ３１の調整の必要性を判定するための数値である。
ずれ量判定値８０（PG0）は、記憶部７０に予め記憶される数値であり、ずれ量評価値PGEと比較される。
たとえば、ずれ量評価値PGEがずれ量判定値PG0よりも大きい場合（PGE＞PG0）、カメラ３１の調整が必要と判定する。
一方、ずれ量評価値PGEがずれ量判定値PG0以下の場合（PGE≦PG0）、カメラ３１の調整は不要と判定する。

ずれ量判定値８０（PG0）の数値は、可動カメラ３１や自律走行装置の利用状況等によって、適切な数値が異なるので、一定値を設定することはできない。
可動カメラ３１の位置ずれをまったく許容しない場合は、ずれ量判定値８０（PG0）にゼロを設定すればよい。

ただし、可動カメラ３１の位置ずれをある程度許容し、ずれ量評価値PGEが、所定の閾値を超えた場合に、可動カメラ３１の調整をする必要性があるものとすると、ずれ量判定値８０（PG0）として、その閾値を予め設定すればよい。
ずれ量判定値８０（PG0）としては、設計時に固定値を予め設定記憶してもよいが、自律走行の状況に応じて、管理担当者が、ずれ量判定値８０（PG0）を、設定変更できるようにしてもよい。

有効特徴点数８１（Tn）は、可動カメラ３１の特徴量と固定カメラ３２の特徴量とから選定された対応する特徴点の数である。
撮影される画像データの精度等から、抽出された可動カメラ３１の特徴点と固定カメラ３２の特徴点とが、すべて対応する位置の点とは限らない。可動カメラ３１の特徴点として抽出された特徴点が、固定カメラ３２の特徴点として抽出されない場合もあり、逆の場合もある。
そこで、抽出された可動カメラ３１の特徴点と、抽出された固定カメラ３２の特徴点のうち、同じ位置にあると推定される特徴点（有効特徴点と呼ぶ）を見つけ出す必要がある。

可動カメラ３１の画像データSIMGから抽出された特徴点から可動カメラ３１の特徴量を算出し、固定カメラ３２の画像データDIMGから抽出された特徴点から固定カメラ３２の特徴量を算出し、両カメラの特徴量を比較して、両カメラの画像データの同じ位置にあると推定される特徴点、すなわち両カメラの画像データにおける対応する特徴点（有効特徴点）を選定する。
この選定された特徴点の合計数が、有効特徴点数８１（Tn）である。
上記した特徴点の抽出と、特徴量の算出と、有効特徴点の選定の各処理は、従来から利用されている画像処理技術を利用すればよい。

有効特徴点数判定値８２（T0）は、有効特徴点数８１（Tn）と比較される数値であり、記憶部７０に予め記憶される。
可動カメラ３１の画像データSIMGから抽出された特徴点と、固定カメラ３２の画像データDIMGから抽出された特徴点のうち、同じ位置にあると推定される対応する有効特徴点の数が、あまりにも少ない場合は、上記したずれ量評価値PGEを利用して、可動カメラ３１の位置ずれを正確に判定することは難しい。

有効特徴点の数Tnが、所定の数値よりも大きい場合に、可動カメラ３１の位置ずれを判定することが好ましく、所定の数値以下の場合は、可動カメラ３１の位置ずれの判定をしないか、たとえば車両を移動させて再度やり直すことが好ましい。
そこで、可動カメラ３１の位置ずれの判定をするか否かの基準として、有効特徴点数判定値８２（T0）を、予め設定記憶しておく。

有効特徴点数Tnが、有効特徴点数判定値T0よりも大きい場合（Tn＞T0）、可動カメラ３１のずれ量評価値PGEの算出を行い、可動カメラ３１の調整の要否の判定を行う。
そうでない場合（Tn≦T0）は、可動カメラ３１のずれ量評価値PGEの算出を行わず、可動カメラ３１の調整の要否の判定も行わない。
有効特徴点数判定値８２（T0）としては、予め固定値を設定記憶しておいてもよいが、管理担当者が、設定変更できるようにしてもよい。

＜初期撮影範囲の基準座標の設定処理＞
図４に、可動カメラにおける初期撮影範囲の基準座標の設定処理の一実施例のフローチャートを示す。
ここでは、調整された状態の可動カメラ３１において、可動カメラ３１の初期的な基準位置の情報である可動カメラ基準座標AKを設定記憶する処理について説明する。
以下の処理は、主として、ROM等に予め記憶されたプログラムに基づいて、初期基準位置算出部５７によって実行される。

図４のステップS1において、車両を所定の位置に停止させる。
たとえば、管理担当者は、可動カメラ３１の調整を行った後、特定の空間を撮影することができるように、自律走行装置１を所定の位置に移動させ、この設定処理を開始させる操作をする。
このとき、可動カメラ３１が撮影する方向と、１つの固定カメラ３２が撮影する方向が、同じ方向になるようにする。

ステップS2において、制御部５１が、２つのカメラ（３１、３２）によって画像を撮影させ、画像取得部５６によって、画像データを取得する。
すなわち、可動カメラ３１によって撮影された可動カメラ画像データSIMGを取得する。
また、可動カメラ３１と同じ方向を撮影することのできる固定カメラ３２によって撮影された固定カメラ画像データDIMGを取得する。

ステップS3において、初期基準位置算出部５７が、取得した画像データから、特徴点を抽出する。また、抽出した特徴点の座標を取得する。
すなわち、可動カメラ画像データSIMGを解析し、可動カメラ３１によって撮影された画像データに含まれる特徴点（可動カメラの特徴点）を抽出する。
また、固定カメラ画像データDIMGを解析し、固定カメラ３２によって撮影された画像データに含まれる特徴点（固定カメラの特徴点）を抽出する。
この特徴点の抽出処理は、従来から実施されている画像処理技術を用いればよい。
たとえば、具体的には、SIFT、SURF、ORBなどの名称で知られた技術が、この発明の画像処理技術に使用することができる。

ステップS4において、抽出した複数の特徴点を利用して、特徴量を算出する。
すなわち、抽出された複数の可動カメラの特徴点から可動カメラの特徴量を算出し、
抽出された複数の固定カメラの特徴点から固定カメラの特徴量を算出する。
可動カメラの特徴量は、たとえば、可動カメラ３１によって撮影された画像データに含まれる物体の形状等の特徴を示す情報であり、可動カメラの特徴点の座標を利用して所定の計算式によって計算されるハッシュ値などが、可動カメラの特徴量に相当する。
固定カメラの特徴量も同様に、固定カメラの特徴点の座標を利用して所定の計算式によって計算される。
この特徴量の算出処理も、従来から実施されている画像処理技術を用いればよい。

ステップS5において、可動カメラの特徴量と固定カメラの特徴量とから、２つの画像データの中で対応する有効特徴点を選定（推定）する。
すなわち、２つの画像データの中で対応可能な位置にある特徴点を見つけ出す。
ここでは、可動カメラの特徴量と固定カメラの特徴量を比較し、可動カメラ画像データSIMGに含まれる複数の可動カメラの特徴点と、固定カメラ画像データDIMGに含まれる複数の固定カメラの特徴点のうち、対応すると推定される可動カメラの特徴点（可動カメラの有効特徴点）と固定カメラの特徴点（固定カメラの有効特徴点）を選定する。

対応する有効特徴点は、たとえば、撮影された２つの画像データに含まれる同じ物体の中で位置がほぼ一致する（マッチングする）特徴点を意味する。
この有効特徴点の選定処理も、従来から実施されている画像処理技術を用いればよい。
この有効特徴点の選定処理によって、選定された有効特徴点の座標が、記憶部７０に記憶される。

図８に、記憶部に記憶される情報の一実施例の説明図を示す。
図８（ａ）に、対応する有効特徴点に相当する２つの座標（可動カメラ特徴点座標、固定カメラ特徴点座標）の一実施例を示している。
すなわち、対応する有効特徴点の位置は、可動カメラで撮影された画像データにおける特徴点の座標（Ｓ（Xs, Ys））と、固定カメラで撮影された画像データにおける特徴点の座標（Ｄ（Xd, Yd））によって示される。
たとえば、対応する有効特徴点Ｐ１は、可動カメラにおける特徴点の座標では、（Xs1, Ys1）で表され、固定カメラにおける特徴点の座標では、（Xd1, Yd1）で表される。
選定された有効特徴点がｎ個あれば、図８（ａ）のように、ｎ個の可動カメラにおける特徴点の座標（Ｓ（Xs, Ys））と、ｎ個の固定カメラにおける特徴点の座標（Ｄ（Xd, Yd））とが、対応付けて記憶される。

ステップS6において、選定された複数の可動カメラの有効特徴点の座標からなる可動カメラ特徴点座標（ベクトルＳ）を設定し、このベクトルＳ（７３）を記憶部７０に記憶する。
ステップS7において、選定された複数の固定カメラの有効特徴点の座標からなる固定カメラ特徴点座標（ベクトルＤ）を設定し、このベクトルＤ（７４）を記憶部７０に記憶する。

図８（ｂ）に、可動カメラ特徴点座標のベクトルＳと、固定カメラ特徴点座標のベクトルＤの一実施例を示す。
可動カメラ特徴点座標のベクトルＳは、図８（ａ）に示したｎ個の可動カメラにおける特徴点の座標Ｓ（Xs, Ys）を、ｎ行３列のベクトルで表したものである。
固定カメラ特徴点座標のベクトルＤは、図８（ａ）に示したｎ個の固定カメラにおける特徴点の座標Ｄ（Xd, Yd）を、ｎ行３列のベクトルで表したものである。
図８（ｂ）に示すように、ベクトルＳとベクトルＤとの関係は、上記した変換座標行列Ｃを用いて、Ｄ＝ＳＣで表される。

ステップS8において、可動カメラ特徴点座標（ベクトルＳ）と、固定カメラ特徴点座標（ベクトルＤ）とから、座標変換行列Ｃを計算する。
図８（ｃ）に、座標変換行列Ｃの一実施例を示す。
ここで、座標変換行列Ｃは、３行３列の行列である。
Ｄ＝ＳＣであるとすると、ベクトルＳとベクトルＤの転置行列とそれらの逆行列を用いて、座標変換行列Ｃは、図８（ｃ）に示す計算式による演算により、計算される。

ステップS9において、可動カメラの画像データSIMGから、可動カメラ３１の撮影範囲を画定する４角の頂点の位置を示す可動カメラ範囲測定座標ＢＳを取得する。
また、可動カメラ範囲測定座標ＢＳから、測定座標行列Ｂを生成する。
可動カメラ３１の撮影範囲は、通常、長方形なので、４つの頂点の座標を取得する。
可動カメラ３１の撮影範囲は、たとえば、１つの頂点の座標を原点（0,0）として、他の３つの頂点の座標は、ｘｙ座標で表される。

図９に、可動カメラ範囲測定座標と可動カメラ範囲変換座標と、その行列の一実施例の説明図を示す。
図９（ａ）に、可動カメラ測定範囲と、その測定範囲を画定する可動カメラ範囲測定座標ＢＳと、その座標をもとに生成した測定座標行列Ｂを示す。
可動カメラ測定範囲は、４つの頂点（b1,b2,b3,b4）で囲まれた領域であり、可動カメラ範囲測定座標ＢＳは、４つの頂点（b1,b2,b3,b4）の座標で示される。

可動カメラ測定範囲の左上の頂点b1を、原点（0,0）とし、可動カメラ測定範囲の横方向の長さをxmaxとし、縦方向の長さをymaxとすると、４つの頂点の座標は、それぞれ、b1（0,0）、b2（xmax,0）、b3（0, ymax）、b4（xmax, ymax）で表される。
これらの４つの頂点の座標を利用して、図９（ａ）に示すような測定座標行列Ｂが生成される。
可動カメラ範囲測定座標ＢＳは、可動カメラ３１で撮影された画像データの座標値であるので、固定カメラ３２で撮影された画像データの座標系と対応させるために、可動カメラ範囲測定座標ＢＳを、座標変換行列Ｃを利用して変換する。

ステップS10において、可動カメラ範囲測定座標ＢＳと、座標変換行列Ｃとから、可動カメラ範囲変換座標ＡＳを計算する。
すなわち、可動カメラ３１で撮影された画像データの可動カメラ範囲測定座標ＢＳを、固定カメラ３２で撮影された画像データの座標系で示した可動カメラ範囲変換座標ＡＳに変換する。

図９（ｂ）に、可動カメラ変換後測定範囲と、その測定範囲を画定する可動カメラ範囲変換座標ＡＳと、その座標をもとに生成した変換座標行列Ａの一実施例を示す。
固定カメラ３２で撮影された画像データの座標系で示した可動カメラ変換後測定範囲が、４つの頂点（a1,a2,a3,a4）で囲まれた領域であるとする。
４つの頂点（a1,a2,a3,a4）は、それぞれ、図９（ａ）に示した可動カメラ測定範囲の４つの頂点（b1,b2,b3,b4）に対応するものとする。
また、４つの頂点（a1,a2,a3,a4）の座標は、それぞれ、a1（x1,y1）、a2（x2,y2）、a3（x3,y3）、a4（x4,y4）で表されるものとする。

可動カメラ範囲変換座標ＡＳは、これらの４つの頂点の座標で表される。
座標変換後のa1（x1,y1）は、可動カメラ測定範囲を示すb1（0,0）に対応し、座標変換後のa2（x2,y2）は、可動カメラ測定範囲を示すb2（xmax,0）に対応し、座標変換後のa3（x3,y3）は、可動カメラ測定範囲を示すb3（0, ymax）に対応し、座標変換後のa4（x4,y4）は、可動カメラ測定範囲を示すb4（xmax, ymax）に対応する。
これらの４つの頂点（a1,a2,a3,a4）の座標を利用すると、変換座標行列Ａは、図９（ｂ）に示すように表現される。

可動カメラ範囲変換座標ＡＳを変換座標行列Ａで表した場合、変換座標行列Ａは、可動カメラ範囲測定座標ＢＳを示す測定座標行列Ｂと、座標変換行列Ｃとから、行列演算により計算される（Ａ＝ＢＣ）。
変換座標行列Ａを計算することにより、可動カメラ範囲変換座標ＡＳが求められる。
すなわち、可動カメラ変換後測定範囲を確定する４つの頂点の座標（a1,a2,a3,a4）が求められる。

ステップS11において、計算された可動カメラ範囲変換座標ＡＳを、可動カメラ基準座標ＡＫ（７８）として、記憶部７０に記憶する。
図４のフローチャートでは、自律走行装置を所定の位置に停止させて、可動カメラにおける初期的な基準座標の設定を行っているので、ここで計算された可動カメラ範囲変換座標ＡＳが、調整の要否を判定するための可動カメラ基準座標ＡＫ（７８）となる。
上記の処理により、可動カメラの調整の要否を判定するために必要な基準情報が設定記憶された。

＜可動カメラの調整判定と調整処理：実施例１＞
図５に、この発明の可動カメラにおける調整判定処理と調整処理の一実施例のフローチャートを示す。
自律走行装置を自律走行させた後、必要に応じて、以下に示す可動カメラの調整判定処理を行い、調整が必要と判断された場合に、可動カメラの調整処理を行う。
たとえば、所定の巡回経路を定期的に走行する自律走行装置の場合、その巡回経路を１０回走行した後に、可動カメラの調整判定処理を行う。あるいは、１日の巡回経路の走行が終了するごとに、可動カメラの調整判定処理を行ってもよい。
以下に示す可動カメラの調整判定処理は、自律走行装置を停止させて行う。

図５のステップS21において、撮影位置算出部５８が、可動カメラ撮影範囲位置の算出処理を行い、可動カメラ範囲変換座標ＡＳを計算する。
可動カメラ撮影範囲位置の算出処理の詳細は、後述する図６に示す。
可動カメラ撮影範囲位置の算出処理では、図４に示した可動カメラの初期撮影範囲の基準座標の設定処理とほぼ同様の処理を行い、可動カメラ範囲変換座標ＡＳを計算する。

可動カメラ３１の位置ずれがない場合は、図４の処理によって求められた可動カメラ基準座標ＡＫと、ほぼ同様の可動カメラ範囲変換座標ＡＳが求められる。
可動カメラ３１の所定以上の位置ずれがある場合は、図４の処理によって求められた可動カメラ基準座標ＡＫとは異なる可動カメラ範囲変換座標ＡＳが求められる。

ステップS22において、記憶部７０に予め記憶されている可動カメラ基準座標ＡＫを、記憶部から読み出す。
また、記憶部７０に予め記憶されているずれ量判定値PG0を、記憶部から読み出す。

ステップS23において、位置ずれ算出部５９が、可動カメラの位置ずれの算出処理を行う。
ここでは、読み出した可動カメラ基準座標ＡＫと、計算された可動カメラ範囲変換座標ＡＳとを利用して、図７（ｂ）に示した計算式によって、可動カメラのずれ量評価値PGEを算出する。

ステップS24において、調整要否判定部６０が、算出したずれ量評価値PGEと、読み出したずれ量判定値PG0を比較する。
ステップS25において、PGE＞PG0の場合、ステップS26に進み、そうでない場合は、ステップS27に進む。

ステップS26において、ずれ量評価値PGEが、ずれ量判定値PG0よりも大きいので、
調整実行部６１が、可動カメラの位置の調整処理を実行する。
ここでは、可動カメラの位置を、もとの初期位置に戻す作業が、管理担当者などによって行われる。
また、自律走行装置が停止した位置が、たとえば、自律走行経路の途中である場合など、可動カメラの調整を行うことができない位置である場合には、可動カメラの位置の調整が必要であることを示す情報を記憶し、位置調整が必要であることを示す情報を表示するか、あるいは管理装置などに送信してもよい。この場合は、可動カメラの調整が可能な位置に戻ってから、可動カメラの調整を行えばよい。

ステップS27において、ずれ量評価値PGEが、ずれ量判定値PG0以下なので、
調整実行部６１が、可動カメラの位置の調整が不要であることを通知する。たとえば、可動カメラの位置の調整が不要であることを表示するか、あるいは管理装置などに送信する。
または、可動カメラの位置調整が不要である場合は、管理担当者に特別な作業を発生させるものではないので、可動カメラの位置の調整が不要であることを、通知しなくてもよい。

可動カメラの位置の調整処理は、管理担当者による作業が必要となるが、可動カメラの位置の調整が必要か否かの判定処理を、いつでもどこでも、管理担当者が特定の操作をしなくても、自動的に実行させることができる。

＜可動カメラの撮影範囲位置座標の算出処理＞
図６に、この発明の可動カメラにおける撮影範囲位置座標の算出処理の一実施例のフローチャートを示す。
この算出処理は、図５に示したステップS21で実行される処理である。

図６のステップS41において、車両を停止させる。
ここでの車両の停止は、管理担当者の手動や遠隔操作によるものではなく、撮影範囲位置座標の算出処理が必要となった時点で、自律走行装置が、自ら自動的に停止することを意味する。たとえば、上記したように、自律走行装置の巡回経路を所定回数以上走行した場合に、車両を自動停止させる。
車両を停止させる場所は、特定の場合でなくてもよい。たとえば、走行経路上の任意の位置でもよい。

ステップS42において、可動カメラ３１を、初期位置に移動させる。
たとえば、図２に示すように、可動カメラ３１を、自律走行装置の前方方向を撮影することができる位置に戻す。この場合は、以下の処理で画像データを取得する固定カメラ３２としては、可動カメラ３１と同様に、自律走行装置の前方方向を撮影することができる固定カメラ３２を使用する。

以下のステップS43からステップS51までの処理は、それぞれ、図４に示したステップS2からステップS10までの処理に相当する。
ステップS43において、図４のステップS2と同様に、２つのカメラによって画像を撮影させ、画像データを取得する。
すなわち、可動カメラ３１によって撮影された可動カメラ画像データSIMGと、可動カメラ３１と同じ方向を撮影することのできる固定カメラ３２によって撮影された固定カメラ画像データDIMGを取得する。

ステップS44において、ステップS3と同様に、可動カメラ画像データSIMGを解析し、可動カメラ３１によって撮影された画像データに含まれる特徴点（可動カメラの特徴点）を抽出する。
また、固定カメラ画像データDIMGを解析し、固定カメラ３２によって撮影された画像データに含まれる特徴点（固定カメラの特徴点）を抽出する。

ステップS45において、ステップS4と同様に、抽出した複数の特徴点を利用して、抽出された複数の可動カメラの特徴点から可動カメラの特徴量を算出し、抽出された複数の固定カメラの特徴点から固定カメラの特徴量を算出する。

ステップS46において、ステップS5と同様に、可動カメラの特徴量と固定カメラの特徴量とから、２つの画像データの中で対応する有効特徴点を選定（推定）する。

ステップS47において、ステップS6と同様に、選定された複数の可動カメラの有効特徴点の座標からなる可動カメラ特徴点座標（ベクトルＳ）を設定し、このベクトルＳ（７３）を記憶部７０に記憶する。
ステップS48において、ステップS7と同様に、選定された複数の固定カメラの有効特徴点の座標からなる固定カメラ特徴点座標（ベクトルＤ）を設定し、このベクトルＤ（７４）を記憶部７０に記憶する。

ステップS49において、ステップS8と同様に、可動カメラ特徴点座標（ベクトルＳ）と、固定カメラ特徴点座標（ベクトルＤ）とから、座標変換行列Ｃを計算する。
座標変換行列Ｃは、図８（ｃ）に示す計算式による演算により、計算される。

ステップS50において、ステップS9と同様に、可動カメラ３１の撮影範囲の４角の頂点の位置を示す可動カメラ範囲測定座標ＢＳを取得する。また、可動カメラ範囲測定座標ＢＳから、測定座標行列Ｂを生成する。

ステップS51において、ステップS10と同様に、可動カメラ範囲測定座標ＢＳと、座標変換行列Ｃとから、可動カメラ範囲変換座標ＡＳを計算し、記憶する。
可動カメラ範囲変換座標ＡＳを変換座標行列Ａで表した場合、変換座標行列Ａは、可動カメラ範囲測定座標ＢＳを示す測定座標行列Ｂと、座標変換行列Ｃとから、行列演算により計算される（Ａ＝ＢＣ）。
これにより、可動カメラ３１で撮影された画像データの可動カメラ範囲測定座標ＢＳが、固定カメラ３２で撮影された画像データの座標系で示した可動カメラ範囲変換座標ＡＳに変換される。

ステップS52において、ステップS46において選定された可動カメラの有効特徴点の数Ｔｎを取得し、記憶する。有効特徴点数Ｔｎは、位置ずれの算出処理をするかしないかの判定に利用する。
以上の処理により、自律走行をした後、車両を停止させたときの位置で、可動カメラの調整の要否を判定するために必要な測定情報が記憶される。

＜可動カメラの調整判定と調整処理：実施例２＞
図１０に、この発明の可動カメラにおける調整判定処理と調整処理の実施例２におけるフローチャートを示す。
ここでは、図５に示したフローチャートとは異なり、定期的に（一定時間が経過するごとに）、図５に示した可動カメラの調整判定処理を、繰り返し実行する。
たとえば、自律走行装置が所定の経路を走行している場合において、一定時間が経過するごとに、走行制御部５２が、任意の位置で車体を停止させた後、調整要否判定部６０によって可動カメラの位置の調整が必要か否かを判定する。
図１０において、図５に示した処理と同じ処理をするステップには、同じステップ番号を付与している。

図１０のステップS31において、判定確認タイマーTに初期値を設定し、判定確認タイマーTを起動させ、時間の計測を開始する。
判定確認タイマーTは、調整判定処理を繰り返す時間間隔（周期）を決定するものであり、たとえば、１０分ごとに、調整判定処理を実行させる場合は、１０分に相当する数値が、判定確認タイマーTに初期設定される。
ステップS32において、判定確認タイマーTがタイムアウトし、設定された時間が経過した場合は、ステップS21に進み、そうでない場合は、ステップS32を繰り返す。

以下のステップS21からステップS27までの処理は、図５に示した処理と同じ処理である。
ステップS21において、撮影位置算出部５８が、可動カメラ撮影範囲位置の算出処理を行い、可動カメラ範囲変換座標ＡＳを計算する。
可動カメラ撮影範囲位置の算出処理の詳細は、図６に示した処理である。

ステップS22において、記憶部７０に予め記憶されている可動カメラ基準座標ＡＫと、ずれ量判定値PG0を、記憶部から読み出す。
ステップS23において、位置ずれ算出部５９が、可動カメラの位置ずれの算出処理を行う。ここでは、読み出した可動カメラ基準座標ＡＫと、計算された可動カメラ範囲変換座標ＡＳとを利用して、図７（ｂ）に示した計算式によって、可動カメラのずれ量評価値PGEを算出する。

ステップS24において、調整要否判定部６０が、算出したずれ量評価値PGEと、読み出したずれ量判定値PG0を比較する。
ステップS25において、PGE＞PG0の場合、ステップS26に進み、そうでない場合は、ステップS27に進む。

ステップS26において、ずれ量評価値PGEが、ずれ量判定値PG0よりも大きいので、
調整実行部６１が、可動カメラの位置の調整処理を実行し、その後、ステップS31に戻る。
ここでは、可動カメラの位置を、もとの初期位置に戻す作業が、管理担当者などによって行われる。
ただし、自律走行装置が停止した位置が、可動カメラの調整を行うことができない位置である場合には、可動カメラの位置の調整が必要であることを示す情報を記憶し、位置調整が必要であることを示す情報を表示するか、あるいは管理装置などに送信してもよい。この場合は、可動カメラの調整が可能な位置に戻ってから、可動カメラの調整を行えばよい。

ステップS27において、ずれ量評価値PGEが、ずれ量判定値PG0以下なので、調整実行部６１が、可動カメラの位置の調整が不要であることを通知し、その後、ステップS31に戻る。
たとえば、可動カメラの位置の調整が不要であることを表示するか、あるいは管理装置などに送信する。ただし、管理担当者に特別な作業を発生させるものではないので、可動カメラの位置の調整が不要であることを、通知しなくてもよい。

これによれば、可動カメラの位置の調整が必要か否かの判定処理を、いつでもどこでも、管理担当者が特定の操作をしなくても、定期的に、繰り返し実行させることができる。

＜可動カメラの調整判定と調整処理：実施例３＞
図１１に、この発明の可動カメラにおける調整判定処理と調整処理の実施例３におけるフローチャートを示す。
ここでは、取得された画像データから選定された有効特徴点の数Tnが、予め記憶された有効特徴点数判定値T0よりも多い場合に、可動カメラの調整判定処理を実行する。

すなわち、撮影位置算出部５８が、選定された有効特徴点の数を取得し、取得された有効特徴点の数が、所定の判定値T0よりも大きい場合に、調整要否判定部６０によって可動カメラの位置の調整が必要か否かを判定し、有効特徴点の数が、所定の判定値T0以下の場合は、調整要否判定部６０によって調整対象カメラの位置の調整が必要か否かを判定しない。
図１１において、図５に示した処理と同じ処理をするステップには、同じステップ番号を付与している。

選定された有効特徴点の数Tnがあまりにも少ない場合、たとえば、有効特徴点数Tnが１つしか無かった場合などでは、正確な可動カメラの位置ずれを検出することが困難であるので、調整判定処理をすべきでない。
そこで、正確な可動カメラの位置ずれが検出できると想定される有効特徴点数判定値T0を予め設定し、有効特徴点数Tnが、有効特徴点数判定値T0以下の場合には、調整判定処理をしないようにする。

まず、図１１のステップS21において、図５と同様に、撮影位置算出部５８が、可動カメラ撮影範囲位置の算出処理を行い、可動カメラ範囲変換座標ＡＳを計算する。
またここで、選定された可動カメラの有効特徴点の数Tnが取得され、記憶部７０に記憶される。
可動カメラ撮影範囲位置の算出処理の詳細は、図６に示した処理である。

ステップS61において、取得された有効特徴点数Tnと、記憶部７０に予め記憶されている有効特徴点数判定値T0とを比較する。
ステップS62において、Tn＞T0の場合は、ステップS22に進み、そうでない場合は、処理を終了する。

以下のステップS22からステップS27までの処理は、図５に示した処理と同じ処理である。
ステップS22において、記憶部７０に予め記憶されている可動カメラ基準座標ＡＫと、ずれ量判定値PG0を、記憶部から読み出す。
ステップS23において、位置ずれ算出部５９が、可動カメラの位置ずれの算出処理を行う。ここでは、読み出した可動カメラ基準座標ＡＫと、計算された可動カメラ範囲変換座標ＡＳとを利用して、図７（ｂ）に示した計算式によって、可動カメラのずれ量評価値PGEを算出する。

ステップS24において、調整要否判定部６０が、算出したずれ量評価値PGEと、読み出したずれ量判定値PG0を比較する。
ステップS25において、PGE＞PG0の場合、ステップS26に進み、そうでない場合は、ステップS27に進む。

ステップS26において、ずれ量評価値PGEが、ずれ量判定値PG0よりも大きいので、
調整実行部６１が、可動カメラの位置の調整処理を実行し、その後、処理を終了する。
ここでは、可動カメラの位置を、もとの初期位置に戻す作業が、管理担当者などによって行われる。
ただし、自律走行装置が停止した位置が、可動カメラの調整を行うことができない位置である場合には、可動カメラの位置の調整が必要であることを示す情報を記憶し、位置調整が必要であることを示す情報を表示するか、あるいは管理装置などに送信してもよい。この場合は、可動カメラの調整が可能な位置に戻ってから、可動カメラの調整を行えばよい。

ステップS27において、ずれ量評価値PGEが、ずれ量判定値PG0以下なので、調整実行部６１が、可動カメラの位置の調整が不要であることを通知し、その後、処理を終了する。
たとえば、可動カメラの位置の調整が不要であることを表示するか、あるいは管理装置などに送信する。ただし、管理担当者に特別な作業を発生させるものではないので、可動カメラの位置の調整が不要であることを、通知しなくてもよい。

これによれば、正確な可動カメラの位置ずれを検出することが困難である場合は、無駄な調整判定処理を行わず、有効特徴点数Tnが相当数以上カウントされた場合にのみ、調整判定処理を行う。
以上の処理により、可動カメラの位置の調整が必要か否かの判定処理を、いつでもどこでも、管理担当者が特定の操作をしなくても、自動的に、さらに、真に有効な位置ずれが検出できるような状態の場合に、実行させることができる。

＜可動カメラの調整判定と調整処理：実施例４＞
図１２に、この発明の可動カメラにおける調整判定処理と調整処理の実施例４におけるフローチャートを示す。
ここでは、図１０に示した処理と、図１１に示した処理を組み合わせて行う場合を示す。すなわち、所定の一定時間の経過ごとに、可動カメラの調整判定処理を行うが、有効特徴点の数Tnが、有効特徴点数判定値T0以下の場合は、車両を移動させて、再度、画像データを取得して有効特徴点の数Tnを確認する。

たとえば、撮影位置算出部５８が、選定された有効特徴点の数を取得し、有効特徴点の数が、所定の判定値T0以下の場合は、走行制御部５２によって車体を移動させた後、撮影位置算出部５８が、再度、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と調整判定用カメラの有効特徴点とを選定し、選定された有効特徴点の数を取得し、取得された有効特徴点の数が、所定の判定値よりも大きくなった場合に、調整要否判定部６０によって可動カメラの位置の調整が必要か否かを判定する。
図１２において、図５や図１１に示した処理と同じ処理をするステップには、同じステップ番号を付与している。

まず、図１１と同様に、可動カメラ撮影範囲位置の算出処理を行い、可動カメラ範囲変換座標ＡＳを計算し、選定された可動カメラの有効特徴点の数Tnを取得し、記憶部７０に記憶する。
可動カメラ撮影範囲位置の算出処理の詳細は、図６に示した処理である。

図１１と同様に、ステップS61において、取得された有効特徴点数Tnと、記憶部７０に予め記憶されている有効特徴点数判定値T0とを比較する。
ステップS62において、Tn＞T0の場合は、ステップS22に進み、そうでない場合は、ステップS63に進む。

ステップS63において、車両を移動する。
必ずしも車両の移動をしなくてもよいが、同じ位置で画像データを取得しても有効な特徴点が多数得られない可能性があるので、多くの有効特徴点を取得するために、車両を移動させることが好ましい。
その後、ステップS21に戻る。

以下のステップS22からステップS27までの処理は、図５に示した処理と同じ処理である。
ステップS22において、記憶部７０に予め記憶されている可動カメラ基準座標ＡＫと、ずれ量判定値PG0を、記憶部から読み出す。
ステップS23において、位置ずれ算出部５９が、可動カメラの位置ずれの算出処理を行う。ここでは、読み出した可動カメラ基準座標ＡＫと、計算された可動カメラ範囲変換座標ＡＳとを利用して、図７（ｂ）に示した計算式によって、可動カメラのずれ量評価値PGEを算出する。

ステップS24において、調整要否判定部６０が、算出したずれ量評価値PGEと、読み出したずれ量判定値PG0を比較する。
ステップS25において、PGE＞PG0の場合、ステップS26に進み、そうでない場合は、ステップS27に進む。

ステップS26において、ずれ量評価値PGEが、ずれ量判定値PG0よりも大きいので、
調整実行部６１が、可動カメラの位置の調整処理を実行し、ステップS64に進む。
ここでは、可動カメラの位置を、もとの初期位置に戻す作業が、管理担当者などによって行われる。
ただし、自律走行装置が停止した位置が、可動カメラの調整を行うことができない位置である場合には、可動カメラの位置の調整が必要であることを示す情報を記憶し、位置調整が必要であることを示す情報を表示するか、あるいは管理装置などに送信してもよい。この場合は、可動カメラの調整が可能な位置に戻ってから、可動カメラの調整を行えばよい。

ステップS27において、ずれ量評価値PGEが、ずれ量判定値PG0以下なので、調整実行部６１が、可動カメラの位置の調整が不要であることを通知し、ステップS64に進む。
たとえば、可動カメラの位置の調整が不要であることを表示するか、あるいは管理装置などに送信する。ただし、管理担当者に特別な作業を発生させるものではないので、可動カメラの位置の調整が不要であることを、通知しなくてもよい。

ステップS64において、図１０のステップS31と同様に、判定確認タイマーTに初期値を設定し、判定確認タイマーTを起動させ、時間の計測を開始する。
ステップS65において、図１０のステップS32と同様に、判定確認タイマーTがタイムアウトし、設定された時間が経過した場合は、ステップS21に戻り、そうでない場合は、ステップS65を繰り返す。

これによれば、正確な可動カメラの位置ずれを検出することが困難である場合は、無駄な調整判定処理を行わず、車両を移動させて、異なる画像データから再度有効特徴点数Tnを確認し、有効特徴点数Tnが相当数カウントされた場合にのみ、調整判定処理を行う。
以上の処理により、可動カメラの位置の調整が必要か否かの判定処理を、いつでもどこでも、管理担当者が特定の操作をしなくても、定期的に、繰り返し実行させることができ、さらに、真に有効な位置ずれが検出できるような状態の場合に、調整判定処理を実行させることができる。

１ 自律走行装置、
２ 監視ユニット、
３ 制御ユニット、
１０ 車体、
２１ 前輪、
２２ 後輪、
３１ 可動カメラ、
３２ 固定カメラ、
５１ 制御部、
５２ 走行制御部、
５３ 車輪、
５４ 障害物検出部、
５５ 距離検出部、
５６ 画像取得部、
５７ 初期基準位置算出部、
５８ 撮影位置算出部、
５９ 位置ずれ算出部、
６０ 調整要否判定部、
６１ 調整実行部、
７０ 記憶部、
７１ 可動カメラ画像データ（SIMG）、
７２ 固定カメラ画像データ（DIMG）、
７３ 可動カメラ特徴点座標（S）、
７４ 固定カメラ特徴点座標（D）、
７５ 座標変換行列（C）、
７６ 可動カメラ範囲測定座標（BS）、
７７ 可動カメラ範囲変換座標（AS）、
７８ 可動カメラ基準座標（AK）、
７９ ずれ量評価値（PGE）、
８０ ずれ量判定値（PG0）、
８１ 有効特徴点数（Tn）、
８２ 有効特徴点数判定値（T0）

Claims (17)

1. 回動可能に取り付けられた調整対象カメラと、
   調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラと、
   調整対象カメラによって撮影された第１画像データと、調整判定用カメラによって撮影された第２画像データを取得する画像取得部と、
   第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する位置ずれ算出部と、
   ずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定する調整要否判定部とを備えたことを特徴とするカメラ調整装置。
2. 前記調整要否判定部が、ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする請求項１に記載のカメラ調整装置。
3. 前記調整判定用カメラが、固定設置された固定カメラであることを特徴とする請求項１に記載のカメラ調整装置。
4. 前記第１画像データと前記第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの撮影範囲を特定する範囲変換座標を算出する撮影位置算出部をさらに備え、
   前記撮影位置算出部が、
   前記調整対象カメラの第１画像データから、所定の第１特徴点を抽出し、
   前記調整判定用カメラの第２画像データから、所定の第２特徴点を抽出し、
   抽出された第１特徴点と第２特徴点のうち、調整対象カメラの撮影範囲と調整判定用カメラの撮影範囲の中で、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、
   選定された調整対象カメラの有効特徴点と調整判定用カメラの有効特徴点の座標を利用して、特徴点の相対的な位置関係を示す前記座標変換情報を計算し、
   前記第１画像データから調整対象カメラの撮影範囲を画定する範囲測定座標を取得し、
   前記範囲測定座標を、前記座標変換情報を用いて前記範囲変換座標に変換することを特徴とする請求項１に記載のカメラ調整装置。
5. 調整された状態の調整対象カメラの撮影範囲を特定する基準座標を予め記憶した記憶部をさらに備え、
   前記位置ずれ算出部が、前記算出された範囲変換座標と、記憶された基準座標とを利用して、前記ずれ量評価値を算出し、
   前記算出された範囲変換座標と前記記憶された基準座標が、前記調整対象カメラの撮影範囲の４つの頂点を特定する座標であり、
   前記ずれ量評価値が、前記範囲変換座標が示す４つの頂点と、範囲変換座標が示す４つの頂点にそれぞれ対応する基準座標が示す４つの頂点との間の距離の平均値であることを特徴とする請求項４に記載のカメラ調整装置。
6. 車体と、
   車体を走行させる駆動部材を制御する走行制御部と、
   回動可能に取り付けられた調整対象カメラと、
   調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラと、
   調整対象カメラによって撮影された第１画像データと、調整判定用カメラによって撮影された第２画像データを取得する画像取得部と、
   第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、調整対象カメラの撮影範囲を特定する範囲変換座標を算出する撮影位置算出部と、
   調整された状態の調整対象カメラの撮影範囲を特定する基準座標を予め記憶した記憶部と、
   算出された範囲変換座標と、記憶された基準座標とを利用して、調整対象カメラの位置ずれを判定可能なずれ量評価値を算出する位置ずれ算出部と、
   ずれ量評価値に基づいて、調整対象カメラの位置の調整の必要性を判定する調整要否判定部とを備えたことを特徴とする走行装置。
7. 前記調整要否判定部が、ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする請求項６に記載の走行装置。
8. 前記調整判定用カメラが、前記車体に固定設置された固定カメラであることを特徴とする請求項６に記載の走行装置。
9. 前記撮影位置算出部が、
   前記調整対象カメラの第１画像データから、所定の第１特徴点を抽出し、
   前記調整判定用カメラの第２画像データから、所定の第２特徴点を抽出し、
   抽出された第１特徴点と第２特徴点のうち、調整対象カメラの撮影範囲と調整判定用カメラの撮影範囲の中で、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、
   選定された調整対象カメラの有効特徴点と調整判定用カメラの有効特徴点の座標を利用して、特徴点の相対的な位置関係を示す前記座標変換情報を計算し、
   前記第１画像データから調整対象カメラの撮影範囲を画定する範囲測定座標を取得し、
   前記範囲測定座標を、前記座標変換情報を用いて前記範囲変換座標に変換することを特徴とする請求項６に記載の走行装置。
10. 前記算出された範囲変換座標と前記記憶された基準座標が、前記調整対象カメラの撮影範囲の４つの頂点を特定する座標であり、
    前記ずれ量評価値が、
    前記範囲変換座標が示す４つの頂点と、範囲変換座標が示す４つの頂点にそれぞれ対応する基準座標が示す４つの頂点との間の距離の平均値であることを特徴とする請求項６に記載の走行装置。
11. 前記調整された状態の調整対象カメラの撮影範囲を特定する基準座標を算出する初期基準位置算出部をさらに備え、
    調整対象カメラの位置が調整された状態で、前記車体を停止させ、
    前記撮影位置算出部によって、調整対象カメラの撮影範囲を特定する範囲変換座標を算出させ、
    前記算出された範囲変換座標を、調整された状態の調整対象カメラの撮影範囲を特定する基準座標として、前記記憶部に記憶することを特徴とする請求項６に記載の走行装置。
12. 走行装置が所定の経路を走行している場合において、
    前記走行制御部が、任意の位置で車体を停止させた後、
    前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする請求項６に記載の走行装置。
13. 衝撃を検出する衝撃検出部をさらに備え、
    前記衝撃検出部によって、予め設定された衝撃以上の衝撃を検出した場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする請求項６に記載の走行装置。
14. 走行装置が所定の経路を走行している場合において、
    一定時間が経過するごとに、
    前記走行制御部が、任意の位置で車体を停止させた後、
    前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする請求項６に記載の走行装置。
15. 前記撮影位置算出部が、前記選定された有効特徴点の数を取得し、
    前記取得された有効特徴点の数が、所定の判定値よりも大きい場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定し、
    前記有効特徴点の数が、所定の判定値以下の場合は、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定しないことを特徴とする請求項９に記載の走行装置。
16. 前記撮影位置算出部が、前記選定された有効特徴点の数を取得し、
    前記有効特徴点の数が、所定の判定値以下の場合は、
    前記走行制御部によって車体を移動させた後、
    前記撮影位置算出部が、再度、位置がほぼ対応すると推定される調整対象カメラの有効特徴点と、調整判定用カメラの有効特徴点とを選定し、
    前記選定された有効特徴点の数を取得し、
    前記取得された有効特徴点の数が、所定の判定値よりも大きくなった場合に、前記調整要否判定部によって前記調整対象カメラの位置の調整が必要か否かを判定することを特徴とする請求項９に記載の走行装置。
17. 回動可能に取り付けられた調整対象カメラと、調整対象カメラの撮影空間を含む空間を撮影する調整判定用カメラとを備えた走行装置のカメラ調整判定方法であって、
    調整された状態の前記調整対象カメラの撮影範囲を特定する基準座標を予め記憶し、
    前記調整対象カメラによって撮影された第１画像データと、前記調整判定用カメラによって撮影された第２画像データを取得し、
    前記第１画像データと第２画像データに含まれる対応する特徴点の相対的な位置関係を示す座標変換情報を利用して、前記調整対象カメラの撮影範囲を特定する範囲変換座標を算出し、
    前記算出された範囲変換座標と、前記記憶された基準座標とを利用して、前記調整対象カメラの位置ずれを判定可能なずれ量評価値を算出し、
    前記ずれ量評価値に基づいて、前記調整対象カメラの位置の調整の必要性を判定し、
    前記ずれ量評価値が所定のずれ量判定値よりも大きい場合に、調整対象カメラの位置の調整が必要であると判定することを特徴とする走行装置のカメラ調整判定方法。