JP2007183290A - 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体 - Google Patents

画像計測方法、画像計測装置、および画像計測プログラム記憶媒体 Download PDF

Info

Publication number
JP2007183290A
JP2007183290A JP2007080363A JP2007080363A JP2007183290A JP 2007183290 A JP2007183290 A JP 2007183290A JP 2007080363 A JP2007080363 A JP 2007080363A JP 2007080363 A JP2007080363 A JP 2007080363A JP 2007183290 A JP2007183290 A JP 2007183290A
Authority
JP
Japan
Prior art keywords
measurement
point
points
plane
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2007080363A
Other languages
English (en)
Inventor
Susumu Kawakami
進 川上
Masahiro Matsuoka
雅裕 松岡
Hiroaki Okamoto
浩明 岡本
Shinya Hosoki
信也 細木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2007080363A priority Critical patent/JP2007183290A/ja
Publication of JP2007183290A publication Critical patent/JP2007183290A/ja
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】 オプティカルフローパターン、あるいはステレオ画像から平面の三次元幾何情報や点の位置情報などを計測する技術を提供する。
【解決手段】 所定の観察点から空間内を眺めたときの画像にあらわれた、その空間内の任意の点の、2つの時刻における各位置をそれぞれp,p、上記点の、無限時間経過後の位置をpinf、上記点を含む平面が観察点に重なる時刻における上記点の位置をpとしたとき、
上記点の4つの位置pinf,p,p,pで決まる複比{pinf}を用いて、上記平面の方位やその平面が上記観察点に重なる時刻を求める。
【選択図】 図1

Description

本発明は、画像にあらわれた点や面から、空間内におけるそれらの位置や向きなどを計測する画像計測方法、その画像計測方法を実施する画像計測装置、およびその画像計測を実現する画像計測プログラムが記憶されてなる画像計測プログラム記憶媒体に関する。
移動ロボット、自動車、そして飛行機などを環境に適応して移動させるには、カメラなどの動画像から、環境を3次元的に計測する必要がある。飛行機を着陸させる場合と歩行する場合に、人間は視覚により(正確には運動視により)どのような3次元計測を行っているかを考えてみる。
図1にパイロットの網膜に写るオプティカルフロー・パターンを示す。パイロットはこのパターンから、滑走路の傾き(3次元方位)や“このままで進むと何秒後に滑走路に到達するか”を知覚して、的確に飛行機を着陸させている。すなわち、パイロットはこのパターンから、平面(滑走路)の3次元方位と“平面を横切るまでの時間”を計測して着陸している。
我々が廊下を歩く場合を考えてみる。廊下の壁にぶつかる方向に歩くと、上述のオプティカルフロー・パターンが網膜上に生じ、そのパターンから壁を横切るまでの時間(壁に衝突するまでの時間)を計測して、同時に計測される壁の3次元方位からそれを避ける方向に回避移動をする。一方、壁に平行に歩いている場合にはいつまでもぶつかることがない(すなわち、無限時間経過後後にぶつかる)ことを計測して、そのままの方向に歩き続ける。このようにして、曲がりくねった廊下でも壁を的確に回避して歩くことができる。また、事務所内をあるく場合も、ホワイトボード・机・ローカーなどの“平面で構成される物体”を同じように回避して歩くことができる。さらに、自動車を運転する場合も、同様な“平面の3次元計測”を行って高速道路の走行や車庫入れなどを行っている。
このように、我々は視覚により、平面から構成される物体――そのような物体が沢山ある−−の三次元幾何情報(平面の3次元方位と平面を横切るまでの時間)を計測して的確な移動を可能にしている。曲面の物体でも“それに接する平面群”の3次元的幾何情報を計測して空間的に認識することができる。
このような“平面の三次元幾何情報”を画像から計測できるようになれば、移動ロボット、自動車、そして飛行機などを環境に適応してあるいは障害物を回避しながら移動させることが可能になる。
図1のオプティカルフロー・パターンの各速度要素――すなわち、図1の局所領域内の運動(局所運動)――については、それを動画像から計測する技術がこれまでに報告されている(特開平05−165956号公報、特開平05−165957号公報、特開平06−044364号公報、特開平09−081369号公報;“2次元相関およびコンボリューションをハフ平面のρ座標に沿って1次元的に行う方法,” 川上と岡本, 信学技報, vol. IE96−19, pp.31−38, 1996;“A cell model for the detection of local image motion on the magnocellular pathway of the visual cortex,”Kawakami, S. and Okamoto, H., Vision Research, vol. 36, pp. 117−147, 1996)。
しかし、このオプティカルフロー・パターンを統合して“平面の三次元幾何情報(平面の3次元方位、平面を横切るまでの時間、平面までの最短距離)”を計測する方法は、これまでに報告されていない。
また、動画像から空間内の直線や円柱の三次元幾何情報(それらの3次元方位、それらまでの最短距離など)を計測する技術がこれまでに報告されている(特公平03−52106号公報、特公平06−14356号公報、特公平06−14355号公報、特公平06−10603号公報、特開平02−816037号公報; “球面写像による線分の三次元方位と距離の計測,”稲本など,コンピュータビジョン研究会, vol. 45−2, pp.1−8, 1986; “鳥まねで単眼立体視を実現,”科学朝日, 6月号, pp.28−331987; “Measurement in three dimensions by motion stereo and spherical mapping,”Morita, T. et.al., CVPR, pp. 422−428, 1989; “Motion stereo vision system,”Inamoto, Y. et.al., Proceeding of ’91 ISART, pp. 239−246, 1991;「昭和60年度実用原子力発電施設作業ロボット開発委託研究成果報告書(極限作業ロボット技術研究組合)」の4.2.2.1節)。
しかし、平面の三次元幾何情報を計測する方法はこれまでに報告されていない。
本発明では、このオプティカルフローパターンなどの画像から、平面の三次元幾何情報や点の位置情報などを計測する技術を提供することを目的とする。なお、この三次元幾何情報の計測には、後述するように、平面までの最短距離の計測も含まれる。また、ステレオ画像から平面の三次元幾何情報を計測する技術を提供することも目的とする。
本発明の画像計測方法のうちの第1の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をpとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めることを特徴とする。
ここで、上記第1の画像計測方法において、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含される。
また、上記第1の画像計測方法では、前記重畳時刻を指標する物理量として、前記2つの計測時刻のうちの一方の計測時刻と前記重畳時刻との間の時間をt、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=t/Δt
であらわされる規格化時間を採用し、該規格化時間を、
={pinf
の関係式あるいは該関係式と等価な関係式を用いて求めてもよい。
また、上記第1の画像計測方法では、前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求めるプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスにより求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めてもよい。
また、上記第1の画像計測方法は、前記画像上にあらわれた計測点が強度の情報を有するものである場合に、前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスの実行の間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるものであってもよい。
さらに、上記第1の画像計測方法は、前記画像上にあらわれた計測点が強度の情報を有するものである場合に、前記計測点の前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求めるとともに、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスの実行の間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるものであってもよい。

さらに、上記第1の画像計測方法では、位置pを求めるにあたっては、前記重畳時刻を指標する物理量と、前記計測点の、前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記計測点の、前記移動継続状態における無限時間経過後の位置pinfとを知って、前記複比{pinf}あるいは該複比と等価な演算を用いて、前記計測点の前記重畳時刻における位置pを求めてもよい。
さらに、上記第1の画像計測方法は、
前記重畳時刻を指標する物理量をパラメータとして設定する第1のステップと、
前記第1のステップで設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第2のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータの値を前記第1のステップで変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第4ステップを実行するものであってもよい。
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記第3のステップが、前記極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、
前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして設定する第5のステップを有し、
前記第2のステップが、前記第1のステップで設定された、前記重量時刻を指標する物理量と、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τと、該計測点の前記移動継続状態における無限時間経過後の位置pinfとを用いて、該計測点の前記重畳時刻における位置pを求めるステップであり、
前記第3のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることも好ましい態様である。
ここで前記第3のステップが、前記位置pを極変換することにより球面上に大円として描かれる極線を求めるステップであることが好ましく、さらには、前記第3のステップが、前記位置pを極変換することにより球面上に大円として描かれ、さらに平面上の円の内部に射影された極線を求めるステップであることがさらに好ましい。あるいは、前記第3のステップが、前記位置pを極変換することにより平面上に直線として描かれる極線を求めるステップであってもよい。
また、上記第1の画像計測方法は、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記重畳時刻を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第3のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第5ステップを実行するものであってもよい。
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記第4のステップが、前記極線を求めるとともに、求められた極線を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、
前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第6のステップを有し、
前記第3のステップが、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記重量時刻を指標する物理量と、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第6のステップで設定された前記運動視差τとを用いて、該計測点の前記重畳時刻における位置pを求めるステップであり、
前記第4のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のステップ、前記第2のステップおよび前記第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測方法のうちの第2の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をp、前記計測平面の方位をnとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算と、前記計測平面の方位nと前記移動方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めることを特徴とする。
ここで、上記第2の画像計測方法における、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含される。
上記第2の画像計測方法は、前記最短距離を指標とする物理量として、前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、前記2つの計測時刻のうちの一方の計測時刻と前記重量時刻との間の時間をt、前記2つの計測時刻どうしの間の、前記計測点の、前記観察点に対する相対的な移動距離をΔx、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=t/Δt
であらわされる規格化時間と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるものであることが好ましい。
上記第2の画像計測方法は、
前記最短距離を指標する物理量を第1のパラメータとして設定する第1のステップと、
前記内積(n・v)を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第3のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める第4のステップと、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5のステップのうちの前記第3から第5までのステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返すことにより、前記第5のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値ごとに前記複数の計測点について求め、その後、
前記第1から第5のステップを複数回繰り返す間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第6のステップを実行するものであってもよい。
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記第5のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するステップであり、
前記第6のステップが、前記交差点を求めることに代わり、前記第1から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第7のステップを有し、
前記第3のステップが、前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第7のステップで設定された前記運動視差τと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfとを用いて、該計測点の、前記重畳時刻における位置pを求めるステップであり、
前記第5のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第3から第5までのステップを、前記第1、第2、および第7のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第6のステップが、前記交差点を求めることに代わり、前記第1、第2、第7および前記第3から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることも好ましい態様である。
ここで、上記第2の画像計測方法における前記第5のステップが、該第5のステップの繰り返しにより求められる、1つの計測点に関する複数の点を結ぶ曲線として、球面上に描かれる曲線を求めるステップであることが好ましく、さらには、前記第5のステップが、該第5のステップの繰り返しにより求められる、1つの計測点に関する複数の点を結ぶ曲線として、球面上に描かれ、さらに平面上の円の内部に射影された曲線を求めるステップであることがさらに好ましい。
また、上記第2の画像計測方法は、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記最短距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記内積(n・v)を第3のパラメータとして設定する第3のステップと、
前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第4のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める第5のステップと、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める第6のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第6のステップのうちの前記第4から第6までのステップを、前記第1から第3までのパラメータの各値を、それぞれ前記第1から第3までの各ステップで変更しながら複数回繰り返すことにより、前記第6のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求め、その後、
前記第1から第6までのステップを複数回繰り返す間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第7のステップを実行するものであってもよく、その場合に、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記第6のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するステップであり、
前記第7のステップが、前記交差点を求めることに代わり、前記第1から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時間のうちの一方の計測時間における前記計測平面までの最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第4のパラメータとして設定する第8のステップを有し、
前記第4のステップが、前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第8のステップで設定された前記運動視差τとを用いて、該計測点の、前記重畳時刻における位置pを求めるステップであり、
前記第6のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第4から第6までのステップを、前記第1、第2、第3および第8のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第7のステップが、前記交差点を求めることに代わり、前記第1、第2、第3、第8および前記第4から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測方法のうちの第3の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めることも好ましい態様である。
ここで、上記の第3の画像計測方法における、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含される。
上記第3の画像計測方法は、前記計測点の各位置pinf,p,pとして球面上に射影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、前記2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして設定する第1のステップと、
前記第1のステップで設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第2のステップと、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータを前記第1のステップで変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の小円を小円描画空間に描画したときの小円どうしの交差点を求めることにより、該交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第4ステップを実行するものであってもよい。
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして設定する第5のステップを有し、
前記第2のステップが、前記第1のステップで設定された規格化最短距離と、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、該計測点の前記2つの計測時間のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τとを用いて、前記半径Rを求めるステップであり、
前記第3のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様であり、
また、前記第3のステップが、半径Rの小円を前記球面上に求め、さらに該球面上の小円が平面上の円の内部に射影されてなる小円を求めるステップであることも好ましい態様である。
また、上記第3の画像計測方法は、前記計測点の各位置pinf,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記規格化最短距離を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第3のステップと、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうしの交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第5のステップを実行するものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記第4のステップが、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、
前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第6のステップを有し、
前記第2のステップが、前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第3のステップで設定された規格化最短距離と、該計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τとを用いて、前記半径Rを求めるステップであり、
前記第4のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1、第2および第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
さらに、本発明の画像計測方法のうちの第4の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、
前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離を指標する物理量を求めることを特徴とする。
ここで、第4の画像計測方法における、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含される。
上記第4の画像計測方法は、前記距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離をd、前記2つの計測時刻どうしの間の前記計測点の、前記観察点に対する移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化距離を採用し、該規格化距離を、
=(pinf
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、本発明の画像計測方法のうちの第5の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第6の画像計測方法は、所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第7の画像計測方法は、
所定の計測空間内を観察する、該計測空間内の所定の観察点と、該観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む、相互に異なる2つの計測時刻のうちの一方の計測時刻における計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、該2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の位置pinfと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第8の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記観測点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第9の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記第1のステップで設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を順次変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第10の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第11の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における、計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記第1のステップで設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第12の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測方法のうちの第13の画像計測方法は、
所定の計測空間内の所定の観察点から、該計測空間内を、相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について前記第1のステップと前記第2のステップを複数回実行することを特徴とする。
ここで、上記第13の画像計測方法は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第3のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第14の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定する第1のステップと、
前記観察点から、前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第14の画像計測方法は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第4のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第15の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差τとに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について、前記第1のステップと前記第2のステップを複数回実行することを特徴とする。
ここで、上記画像計測方法は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第3のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第16の画像計測方法は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定する第1のステップと、
前記観察点から前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第16の画像計測方法は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第4のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第17の画像計測方法は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めることを特徴とする。
ここで、上記第17の画像計測方法において、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含される。
また、上記第17の画像計測方法では、前記計測平面と前記2つの観察点との間の前記視軸方向の距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
={paxis
の関係式あるいは該関係式と等価な関係式を用いて求めてもよい。
また、上記第17の画像計測方法では、前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求めるプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスにより求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めてもよい。
また、上記第17の画像計測方法は、前記画像上にあらわれた計測点が強度の情報を有するものである場合に、前記観察平面上の交点の位置pを極変換することにより該計測点に対応する極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスの実行の間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであってもよい。
また、上記第17の画像計測方法は、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記観察平面上の交点の位置pを極変換することにより該計測点に対応する極線を求めるとともに、該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスの実行の間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであってもよい。
さらに、上記第17の画像計測方法では、位置pを求めるにあたっては、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記計測点の、前記無限遠点の位置paxisとを知って、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求めてもよい。
さらに、上記第17の画像計測方法は、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量をパラメータとして設定する第1のステップと、
前記第1のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点から観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第2のステップと、
前記観察平面上の交点の位置pを極変換することにより前記計測点に対応する極線を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータの値を前記第1のステップで変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める第4ステップを実行するものであってもよい。
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして設定する第5のステップを有し、
前記第2のステップが、前記第1のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σと、前記無限遠点の位置paxisとを用いて、前記観察平面上の交点pを求めるステップであり、
前記第3のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることも好ましい形態である。
ここで、上記第17の画像計測方法において、前記第3のステップが、前記位置pを極変換することにより球面上に大円として描かれる極線を求めるステップであることが好ましく、さらには、前記第3のステップが、前記位置pを極変換することにより球面上に大円として描かれ、さらに平面上の円の内部に射影された極線を求めるステップであることがさらに好ましい。あるいは、前記第3のステップが、前記位置pを極変換することにより平面上に直線として描かれる極線を求めるステップであってもよい。
また、上記第17の画像計測方法は、
前記視軸の方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、該計測点の前記観察平面上の交点の位置pを求める第3のステップと、
前記計測点の、前記観察平面上の交点の位置pを極変換することにより該計測点に対応する極線を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める第5ステップを実行するものであってもよい。
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記極線を求めるとともに、求められた極線を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第6のステップを有し、
前記第3のステップが、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記観察平面上の交点pを求めるステップであり、
前記第4のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のステップ、前記第2のステップおよび前記第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることも好ましい形態である。
また、本発明の画像計測方法のうちの第18の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めることを特徴とする。
ここで、上記第18の画像計測方法における、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含される。
上記第18の画像計測方法は、前記最短距離を指標とする物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=d/ΔxLR
であらわされる規格化距離と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるものであることが好ましい。
上記第18の画像計測方法は、
前記最短距離を指標する物理量を第1のパラメータとして設定する第1のステップと、
前記内積(n・v)を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第3のステップと、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める第4のステップと、
前記極線上の点であって、かつ前記視軸の方向vと角度
r=cos−1(n・v)
を成す点を求める第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5のステップのうちの前記第3から第5までのステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返すことにより、前記第5のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値ごとに前記複数の計測点について求め、その後、
前記第1から第5のステップを複数回繰り返す間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める第6のステップを実行するものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第5のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するステップであり、前記第6のステップが、前記交差点を求めることに代わり、前記第1から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第7のステップを有し、
前記第3のステップが、前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第7のステップで設定された前記両眼視差σと、前記無限遠点の位置paxisとを用いて、前記観察平面上の交点の位置pを求めるステップであり、
前記第5のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第3から第5までのステップを、前記第1、第2、および第7のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第6のステップが、前記交差点を求めることに代わり、前記第1、第2、第7および前記第3から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることも好ましい態様である。
この場合において、前記第5のステップが、該第5のステップの繰り返しにより求められる、1つの計測点に関する複数の点を結ぶ曲線として、球面上に描かれる曲線を求めるステップであることが好ましく、さらには、前記第5のステップが、該第5のステップの繰り返しにより求められる、1つの計測点に関する複数の点を結ぶ曲線として、球面上に描かれ、さらに平面上の円の内部に射影された曲線を求めることがさらに好ましい。
また、上記第18の画像計測方法は、
前記視軸方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記最短距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記内積(n・v)を第3のパラメータとして設定する第3のステップと、
前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第4のステップと、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める第5のステップと、
前記極線上の点であって、かつ前記視軸の方向vと角度
r=cos−1(n・v)
を成す点を求める第6のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第6のステップのうちの前記第4から第6までのステップを、前記第1から第3までのパラメータの各値を、それぞれ前記第1から第3までの各ステップで変更しながら複数回繰り返すことにより、前記第6のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求め、その後、
前記第1から第6までのステップを複数回繰り返す間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める第7のステップを実行するものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第6のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するステップであり、前記第7のステップが、前記交差点を求めることに代わり、前記第1から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第4のパラメータとして設定する第8のステップを有し、
前記第4のステップが、前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第8のステップで設定された前記両眼視差σとを用いて、前記観察平面上の交点の位置pを求めるステップであり、
前記第6のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第4から第6までのステップを、前記第1、第2、第3および第8のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第7のステップが、前記交差点を求めることに代わり、前記第1、第2、第3、第8および前記第4から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測方法のうちの第19の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記2つの視軸と同一方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,pで決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めることを特徴とする。
ここで、上記の第19の画像計測方法における、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含される。
上記第19の画像計測方法は、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして設定する第1のステップと、
前記第1のステップで設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rをを求める第2のステップと、
前記2つの観察点のうちの一方の観察点から観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータを前記第1のステップで変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の小円を小円描画空間に描画したときの小円どうしの交差点を求めることにより、該交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第4ステップを実行するものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして設定する第5のステップを有し、
前記第2のステップが、前記第1のステップで設定された規格化最短距離と、前記無限遠点の位置paxisと、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記半径Rを求めるステップであり、
前記第3のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差に対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
また、前記第3のステップが、半径Rの小円を前記球面上に求め、さらに該球面上の小円が平面上の円の内部に射影されてなる小円を求めるステップであることが好ましい。
また、上記第19の画像計測方法は、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記視軸方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記規格化最短距離を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第3のステップと、
前記2つの観察点のうちの一方の観察点とから観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうしの交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第5のステップを実行するものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第6のステップを有し、
前記第2のステップが、前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された規格化最短距離と、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記半径Rを求めるステップであり、
前記第4のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1、第2および第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
さらに、本発明の画像計測方法のうちの第20の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,p,で決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測点と、前記2つの観察点のうちの一方の観察点との間の距離を指標する物理量を求めることを特徴とする。
ここで、第20の画像計測方法における、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点それぞれから観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含される。
上記第20の画像計測方法は、前記距離を指標する物理量として、前記計測点と前記2つの観察点のうちの一方の観察点との間の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
=(paxis
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、本発明の画像計測方法のうちの第21の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第2のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第22の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第3のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第23の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点のうちの一方の観察点と、該2つの観察点から該計測空間を眺めたときの画像にあらわれた該計測空間内の任意の計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第2のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第24の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記2つの観測点のうちの一方の観察点と、前記計測点を含む計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第3のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第25の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれる、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4ののステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第26の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第27の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれる、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測方法のうちの第28の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測方法のうちの第29の画像計測方法は、所定の計測空間内の所定の2つの観察点から、該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について前記第1のステップと前記第2のステップを複数回実行することを特徴とする。
ここで、上記第29の画像計測方法は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める第3のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第30の画像計測方法は、所定の計測空間内を観察する該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定する第1のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第30の画像計測方法は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める第4のステップを有するものであってもよい。
また、本発明の画像計測方法のうちの第31の画像計測方法は、所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差σに対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差σとに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について、前記第1のステップと前記第2のステップを複数回実行することを特徴とする。
ここで、第31の画像計測方法は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位n、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との間の最短距離を指標する物理量を求める第3のステップを有するものであってもよい。
さらに、本発明の画像計測方法のうちの第32の画像計測方法は、所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定する第1のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応する座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、第32の画像計測方法は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との最短距離を指標する物理量を求める第4のステップを有するものであってもよい。
また、本発明の画像計測方法は、以下のようにも表現される。
(1) 画像内の任意の点の、現時刻の位置をp、次の時刻の位置をp、無限時間経過後の位置をpinf、そして“その点が載っている平面がカメラ中心を横切る時刻”の位置をpとしたときに、これら四つの位置で決まる複比{pinf}を用いて、平面の3次元方位nおよび平面を横切るまでの規格化時間を求める方法。ここで、規格化時間は、平面を横切るまでの時間tを、現在から次の時刻までの時間差Δtで規格化した時間であり、下式で表される。
=t/Δt (a)
(2) 平面を横切るまでの規格化時間を次の関係式を用いて求める方法。
={pinf} (b)
(2−1) 画像内の複数の点について“それらの点が載っている平面がカメラ中心を横切る時刻”での位置pを極変換(あるいは双対変換)し、その結果得られる極線の交差点として平面の3次元方位nを求める方法。
(2−2) 規格化時間および“三つの時刻での上記の位置p,p,pinf”を知って、位置pを式(b)を用いて計算する方法。この方法を、複比{pinf}を用いることから複比変換と言うことにする。
(3) (1)において、画像内の各点について“その点が載っている平面がカメラ中心を横切る時刻”での位置pを請求項2−1の複比変換を行って決定し、次にそれら位置を極変換した極線の交差点として、平面の3次元方位nを求める方法。
(4) (3)において、下記のステップを実行して平面の3次元方位ns0および平面を横切るまでの規格化時間c0を求める方法。
ステップ1:規格化時間パラメータを任意に設定し、画像内の各点について、(2−2)の複比変換を行って位置pを計算する。
ステップ2:次にそれら位置を極変換して、対応する複数の極線を描く。その極線の強度は“画像内の位置pの明るさ”とし、複数の極線が交わる場所ではそれら強度を加算した強度とする。
ステップ3:以上のステップを規格化時間パラメータを変えて行い、ステップ2で描かれる複数の極線が一点で交差するパラメータ値c0を求める。そのパラメータ値として“平面を横切るまでの規格化時間c0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。
(5) (4)において、ステップ2の極線を球面上に大円として描く方法。
(5−1) (5)における大円を、平面上の円の内部に射影して描く方法。
(6) (4)において、ステップ2の極線を平面上に直線として描く方法。
(7) (3),(4)において、移動方向v(すなわち、無限時間経過後の位置pinf)を知らなくても、下記のステップで平面の3次元方位nおよび平面を横切るまでの規格化時間を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:そのパラメータvの方向を“無限時間経過後の位置pinf”とする。
ステップ3:(3)あるいは(4)を実行する。
ステップ4:以上のステップをパラメータvを変えて行い、ステップ3で描かれる極線が一点で交差するパラメータ値vを求める。このパラメータ値が真の移動方向vであり、その交差点の座標として、平面の方位nおよび平面を横切るまでの規格化時間が求められる。
(8) 画像内の任意の点の、現時刻の位置をp、次の時刻の位置をp、無限時間経過後の位置をpinf、そして“その点が載っている平面がカメラ中心を横切る時刻”での位置をpとしたときに、式(b)の関係および式(c)の関係を用いて、平面の3次元方位nおよび平面までの規格化最短距離を求める方法。ここで規格化最短距離は、平面までの最短距離dを、現在から次の時刻までにカメラ(あるいは平面)が移動した距離Δxで規格化した距離であり、式(d)で表される。また、下式のvはカメラあるいは平面の移動方向である。
(n・v) (c)
=d/Δx (d)
(9) (8)において、下記のステップを実行して平面の3次元方位ns0および平面までの規格化最短距離s0を求める方法。
ステップ1:規格化最短距離パラメータを任意に設定する。
ステップ2:移動方向vと3次元方位nとの角度rを任意に設定−−すなわち、vとnとの内積(n・v)をcos(r)と任意に設定−−し、式(c)を用いて規格化時間パラメータ/cos(r)と計算する。
ステップ3:画像内の各点について、請求項2−1の複比変換を行って位置pを計算する。
ステップ4:次にそれら位置を極変換した極線上で、移動方向vと角度rをなす点を求める。
ステップ5:上記の角度rを変えながらステップ4の点を計算し、それら点群からなる曲線を描く。その曲線の強度は“画像内の位置pの明るさ”とし、複数の曲線が交わる場所ではそれら強度を加算した強度とする。
ステップ6:以上のステップを規格化最短距離パラメータを変えて行い、ステップ5で描かれる複数の曲線が一点で交差するパラメータ値s0を求める。そのパラメータ値として“平面までの規格化最短距離s0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。
(10) (8)において、下記のステップを実行して平面の3次元方位ns0および平面までの規格化最短距離s0を求める方法。
ステップ1:規格化最短距離パラメータを任意に設定し、画像内の各点について“三つの位置p,p,pinfで決まる単比(pinf)”を用いて式(e)によりパラメータRを計算する。
R=cos−1/(pinf)) (e)
ステップ2:次に“現在時刻の位置p”を中心として、半径Rの小円を描く。その小円の強度は“画像内の位置pの明るさ”とし、複数の小円が交わる場所ではそれら強度を加算した強度とする。
ステップ3:以上のステップを規格化最短距離パラメータを変えて行い、ステップ2で描かれる複数の小円が一点で交差するパラメータ値s0を求める。そのパラメータ値として“平面までの規格化最短距離s0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。
(11) (9)におけるステップ5の曲線、および請求項12におけるステップ2の小円を球面上に描く方法。
(11−1) (11)における曲線あるいは小円を、平面上の円の内部に射影して描く方法。
(12) (9)におけるステップ5の曲線、および請求項12におけるステップ2の小円を平面上に投影して描く方法。
(13) (8),(9),(10)において、移動方向v(すなわち、無限時間経過後の位置pinf)を知らなくても、下記のステップで平面の3次元方位nおよび平面までの規格化最短距離を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:そのパラメータvの方向を“無限時間経過後の位置pinf”とする。
ステップ3:(8)あるいは(9)あるいは(10)を実行する。
ステップ4:以上のステップをパラメータvを変えて行い、ステップ3で描かれる曲線(あるいは小円)が一点で交差するパラメータ値vを求める。このパラメータ値が真の移動方向vであり、その交差点の座標として、平面の方位nおよびあるいは平面までの規格化最短距離が求められる。
(14) 画像内の任意の点について、現時刻の位置をp、次の時刻の位置をp、無限時間経過後の位置をpinfとしたときに、これら三つの位置で決まる単比(pinf)を用いて、カメラ中心から空間内の点の位置までの規格化距離を、式(f)により求める方法。ここで規格化距離は、点までの距離dを、現在から次の時刻までにカメラ(あるいは点)が移動した距離Δxで規格化した距離であり、式(g)で表される。
=(pinf) (f)
=d/Δx (g)
(15) (10)のステップ1において、“規格化した点距離”を用いて下式によりパラメータRを計算する方法。
R=cos−1) (h)
(16) (1)〜(15)において、次時刻の位置の代わりに“現在の位置と次の時刻の位置との差(運動視差)”を用いる方法。
(17) (1)〜(7)において、現時刻の位置p、次の時刻の位置p、そして無限時間経過後の位置pinf、移動方向v、そして平面を横切るまでの規格化時間を、それぞれ、右カメラ画像での位置p、左カメラ画像での位置p、左右カメラを結ぶ視軸上の位置paxis、視軸方向axis、そして“視軸方向に平面を横切るまでの規格化距離”に置き換えて、ステレオ画像により平面の3次元方位nおよびそれを横切るまでの規格化距離を求める方法。ここで、この規格化距離は、視軸方向に平面を横切るまでの距離dを、左右カメラ間の距離ΔxLRで規格化した距離である。ここで、右カメラと左カメラを交換してもよい。
(18) (8)〜(13)、(15)において、現時刻の位置p、次の時刻の位置p、そして無限時間経過後の位置pinf、移動方向v、そして平面までの規格化最短距離を、それぞれ、右カメラ画像での位置p、左カメラ画像での位置p、左右カメラを結ぶ視軸上の位置paxis、視軸方向axis、そして“ステレオ画像での平面までの規格化最短距離s,stero”に置き換えて、ステレオ画像により平面の3次元方位nおよび平面までの規格化最短距離を求める方法。ここで、この規格化距離s,steroは、平面までの最短距離dを、左右カメラ間の距離ΔxLRで規格化した距離である。ここで、右カメラと左カメラを交換してもよい。
(19) (14)において、現時刻の位置p、次の時刻の位置p、そして無限時間経過後の位置pinfを、それぞれ、右カメラ画像での位置p、左カメラ画像での位置p、そして“左右カメラを結ぶ視軸上の位置paxis”に置き換えて、ステレオ画像により“空間内の点の位置までの規格化距離”を求める方法。ここで、この規格化距離は、点までの距離dを、左右カメラ間の距離ΔxLRで規格化した距離である。ここで、右カメラと左カメラを交換してもよい。
(20) (17)〜(19)において、左カメラ画像での位置pの代わりに“左カメラ画像位置と右カメラ画像位置との差(両眼視差)”を用いる方法。
(21) (1)〜(20)において、平面カメラで撮影した画像を入力画像とする方法。
(22) (1)〜(20)において、球面カメラで撮影した画像を入力画像とする方法。
(23) 平面カメラ画像から“現在の位置と次の時刻の位置との差(運動視差)”を求め、次にその運動視差を球面上に投影して請求項30を行う方法。
(24) 平面カメラ画像から“左カメラ画像位置と右カメラ画像位置との差(両眼視差)”を求め、次にその両眼視差を球面上に投影して請求項43を行う方法。
(25) (21),(22),(23)のうち(3)に関する方法で計測される“平面の3次元方位n”と“それを横切るまでの規格化時間”に基づいて、ロボットやホビ−用機器および自動車、飛行機などの移動機械を制御する方法。
(26) (21),(22),(23)のうち(8)(あるいは(3))に関する方法で計測される“平面の3次元方位n”と“平面までの規格化最短距離(あるいは平面を横切るまでの規格化時間)”に基づいて、“画像内に重なり合って見える複数物体や環境を奥行き分離”する方法。
(27) (21),(22),(23)のうち(18)あるいは(17)に関する方法で計測される“平面の3次元方位n”と“平面までの規格化最短距離(あるいは視軸方向に平面までの規格化距離)”に基づいて、“画像内に重なり合って見える複数物体や環境を奥行き分離”する方法。
(I)順方向法
(I−1)規格化時間
(16)のうちの(4)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−2)規格化時間+v未知
(16)のうちの(7)かつ(4)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−3)規格化最短距離
(16)のうちの(10)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−4)規格化最短距離+v未知
(16)のうちの(13)かつ(10)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−5)ステレオ+規格化距離
(20)のうちの(17)かつ(4)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−6)ステレオ+規格化距離+aaxis未知
(20)のうちの(17)かつ(7)かつ(4)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−7)ステレオ+規格化最短距離
(20)のうちの(18)かつ(10)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−8)ステレオ+規格化最短距離+aaxis未知
(20)のうちの(18)かつ(13)かつ(10)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−9)規格化最短距離
(16)のうちの(9)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−10)規格化最短距離+v未知
(16)のうちの(13)かつ(9)において、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−11)ステレオ+規格化最短距離
(20)のうちの(18)かつ(9)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(I−12)ステレオ+規格化最短距離+axis 未知
(20)のうちの(18)かつ(13)かつ(9)において、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。
(II)逆方向法
(II−1)規格化時間
ステップ1:現時刻での、画像内の任意画素 の番号iを考える。
ステップ2:また、3自由度配列(平面の方位ベクトルn の2自由度、規格化時間 のl自由度)内の任意要素(nsjcj)の番号jを考える。
ステップ3:それら番号iとjに対応する“画素 での運動視差ijτ”を計算する。
ステップ4:運動視差を検出する方法(あるいは、装置)により、上記運動視差ijτでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、3自由度配列内の要素(nsjcj)に投票する。
ステップ6:以上を所定範囲の画素iおよび画素jについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0c0)から“平面の方位と規格時間”を検出できる。
(II−2)規格時間+v未知
(II−1)において、移動方向V(すなわち、無限時間経過後の位置pinf )を知らなくても、下記のステップで平面の3次元方位n および平面を横切るまでの規格化時間 を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(II−1)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値V を求めると、そのパラメータ値として真の移動方向V を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化時間”を検出できる。
(II−3)規格化最短距離
ステップ1:現時刻での、画像内の任意画素 の番号iを考える。
ステップ2:また、3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 のl自由度)内の任意要素(nsjsj)の番号jを考える。
ステップ3:それら番号iとjに対応する“画素 での運動視差ijτ”を計算する。
ステップ4:運動視差を検出する方法(あるいは、装置)により、上記運動視差ijτでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、3自由度配列内の要素(nsjsj)に投票する。
ステップ6:以上を所定範囲の画素iおよび画素jについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(II−4)規格化最短距離+v未知
(II−3)において、移動方向v(すなわち、無限時間経過後の位置pinf )を知らなくても、下記のステップで平面の3次元方位n および規格化最短距離 を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(II−3)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値v を求めると、そのパラメータ値として真の移動方向v を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(II−5)ステレオ+規格化距離
ステップ1:右カメラ画像内の任意画素 の番号iを考える。
ステップ2:また、3自由度配列(平面の方位ベクトルn の2自由度、規格化距離 の1自由度)内の任意要素(nsjcj)の番号jを考える。
ステップ3:それら番号iとjに対応する“画素 での両眼視差ijσ”を計算する。
ステップ4:両眼視差を検出する方法(あるいは、装置)により、上記両眼視差ijσでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、3自由度配列内の要素(nsjcj)に投票する。
ステップ6:以上を所定範囲の画素iおよび要素jについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(II−6)ステレオ+規格化距離+axis未知
(II−5)において、視軸方向axis(すなわち、左右カメラを結ぶ視軸上の位置paxis)を知らなくても、下記のステップで平面の3次元方位n および規格化距離 を求める方法。
ステップ1:視軸方向パラメータaxisを任意に設定する。
ステップ2:(II−5)を実行する。
ステップ3:以上のステップをパラメータaxisを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0 を求めると、そのパラメータ値として真の視軸方向axis0 を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(II−7)ステレオ+規格化最短距離
ステップ1:右カメラ画像内の任意画素 の番号iを考える。
ステップ2:また、3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 の1自由度)内の任意要素(nsjsj)の番号jを考える。
ステップ3:それら番号iとjに対応する“画素 での両眼視差ijσを計算する。
ステップ4:両眼視差を検出する方法(あるいは、装置)により上記両眼視差ijσでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、3自由度配列内の要素(nsjsj)に投票する。
ステップ6:以上を所定範囲の画素iおよび要素jについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(II−8)ステレオ+規格化最短距離+axis未知
(II−7)において、視軸方向axis (すなわち、左右カメラを結ぶ視軸上の位置paxis)を知らなくても、下記のステップで平面の3次元方位n および規格化最短距離 を求める方法。
ステップ1:視軸方向パラメータaxis を任意に設定する。
ステップ2:(II−7)を実行する。
ステップ3:以上のステップをパラメータaxis を変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0を求めると、そのパラメータ値として真の視軸方向axis0を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。

(III)複合法
(III−1)規格化時間
ステップ1:現時刻での、画像内の任意の画素 の番号iを考える。
ステップ2:任意の運動視差 τの番号kを考える。
ステップ3:それら番号iとkに対応する“3自由度配列(平面の方位ベクトルn の2自由度、規格化時間 の1自由度)内の要素群{(nsjcj)}”を決定する。
ステップ4:運動視差を検出する方法(あるいは、装置)により、上記運動視差 τでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、上記の要素群{(nsjcj)}に投票する。
ステップ6:以上を所定範囲のiおよびkについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0c0)から“平面の方位と規格化時間”を検出できる。
(III−2)規格化時間+v未知
(III−1)において、移動方向v(すなわち無限時間経過後の位置pinf )を知らなくても、下記のステップで平面の3次元方位n および平面を横切るまでの規格化時間 を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(III−1)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値v を求めると、そのパラメータ値として真の移動方向v を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化時間”を検出できる。
(III−3)規格化最短距離
ステップ1:現時刻での、画像内の任意の画素 の番号iを考える。
ステップ2:任意の運動視差 τの番号kを考える。
ステップ3:それら番号iとkに対応する“3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 の1自由度)内の要素群{(nsjsj)}”を決定する。
ステップ4:運動視差を検出する方法(あるいは、装置)により、上記運動視差 τでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、上記の要素群{(nsjsj)}に投票する。
ステップ6:以上を所定範囲のiおよびkについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(III−4)規格化最短距離+v未知
(III−3)において、移動方向v(すなわち、無限時間経過後の位置pinf )を知らなくても、下記のステップで平面の3次元方位n および規格化最短距離 を求める方法。
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(III−2)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値v を求めると、そのパラメータ値として真の移動方向v を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(III−5)ステレオ+規格化距離
ステップ1:右カメラ画像内の任意画素 の番号iを考える。
ステップ2:任意の両眼視差 σの番号kを考える。
ステップ3:それら番号iとkに対応する“3自由度配列(平面の方位ベクトルn の2自由度、規格化距離 の1自由度)内の要素群{(nsjcj)}”を決定する。
ステップ4:両眼視差を検出する方法(あるいは、装置)により、上記両眼視差 σでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、上記の要素群{(nsjcj)}に投票する。
ステップ6:以上を所定範囲のiおよびkについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(III−6)ステレオ+規格化距離+aaxis未知
(III−5)において、視軸方向axis (すなわち、左右カメラを結ぶ視軸上の位置paxis)を知らなくても、下記のステップで平面の3次元方位n および規格化距離 を求める方法。
ステップ1:視軸方向パラメータaxis を任意に設定する。
ステップ2:(III−5)を実行する。
ステップ3:以上のステップをパラメータaxis を変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0を求めると、そのパラメータ値として真の視軸方向axis00 を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(III−7)ステレオ+規格化最短距離
ステップ1:右カメラ画像内の任意画素 の番号iを考える。
ステップ2:任意の両眼視差 σの番号kを考える。
ステップ3:それら番号iとkに対応する“3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 の1自由度)内の要素群{(nsjsj)}を決定する。
ステップ4:両眼視差を検出する方法(あるいは、装置)により、上記両眼視差 kσでの応答強度を入力画像から計算する。
ステップ5:その応答強度を、上記の要素群{(nsjsj)}に投票する。
ステップ6:以上を所定範囲のiおよびkについて繰り返す。
以上で投票された3自由度配列の中で極大応答をする要素を検出して、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(III−8)ステレオ+規格化最短距離+aaxis未知
(III−7)において、視軸方向axis (すなわち、左右カメラを結ぶ視軸上の位置paxis)を知らなくても、下記のステップで平面の3次元方位n および規格化最短距離 を求める方法。
ステップ1:視軸方向パラメータaxis を任意に設定する。
ステップ2:(III−7)を実行する。
ステップ3:以上のステップをパラメータaxis を変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0を求めると、そのパラメータ値として真の視軸方向axis0を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。

(IV)一般化
(IV−1)規格化時間
3自由度配列(平面の方位ベクトルn の2自由度、規格化時間 の1自由度)に、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。その配列の中で極大応答をする要素を検出することにより、そのアドレス(ns0c0)から“平面の方位と規格化時間”を検出できる。
尚、本発明の全てにおいて、“視差を検出する方法(あるいは、装置)により得られる応答強度を投票する”は、“入力画像の輝度に関連する量を投票する”でもよい。また、“視差を検出する方法(あるいは、装置)”は、“画像内の速度を検出する方法(あるいは、装置)”でもよい。
(IV−2)規格化時間+v未知
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(IV−1)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値v を求めると、そのパラメータ値として真の移動方向v を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化時間”を検出できる。
(IV−3)規格化最短距離
3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 の1自由度)に、運動視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。その配列の中で極大応答をする要素を検出することにより、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(IV−4)規格化最短距離+v未知
ステップ1:移動方向パラメータvを任意に設定する。
ステップ2:(IV−3)を実行する。
ステップ3:以上のステップをパラメータvを変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値v を求めると、そのパラメータ値として真の移動方向v を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(IV−5)ステレオ+規格化距離
3自由度配列(平面の方位ベクトルn の2自由度、規格化距離 の1自由度)に、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。その配列の中で極大応答をする要素を検出することにより、そのアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(IV−6)ステレオ+規格化距離+axis 未知
ステップ1:視軸方向パラメータaxis を任意に設定する。
ステップ2:(IV−5)を実行する。
ステップ3:以上のステップをパラメータaxis を変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0を求めると、そのパラメータ値として真の視軸方向axis0を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0c0)から“平面の方位と規格化距離”を検出できる。
(IV−7)ステレオ+規格化最短距離
3自由度配列(平面の方位ベクトルn の2自由度、規格化最短距離 の1自由度)に、両眼視差を検出する方法(あるいは、装置)により得られる応答強度を投票する方法。その配列の中で極大応答をする要素を検出することにより、そのアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
(IV−8)ステレオ+規格化最短距離+axis 未知
ステップ1:視軸方向パラメータaxis を任意に設定する。
ステップ2:(IV−7)を実行する。
ステップ3:以上のステップをパラメータaxis を変えて行う。
以上で投票された3自由度配列の中で、最大の応答をするパラメータ値axis0を求めると、そのパラメータ値として真の視軸方向axis0を検出できる。また、3自由度配列(ステップ2)の中で極大の応答するアドレス(ns0s0)から“平面の方位と規格化最短距離”を検出できる。
また、本発明の画像計測装置のうちの第1の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をpとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第1の画像計測装置において、前記演算部において実行される、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第1の画像計測装置において、前記演算部が、前記重畳時刻を指標する物理量として、前記2つの計測時刻のうちの一方の計測時刻と前記重畳時刻との間の時間をt、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=t/Δt
であらわされる規格化時間を採用し、該規格化時間を、
={pinf
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、上記第1の画像計測装置において、前記演算部が、
前記重畳時刻を指標する物理量をパラメータとして該パラメータの値を変更するパラメータ変更部と、
前記パラメータ変更部で設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める複比変換部と、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める極変換部と、
前記計測空間内の複数の計測点について、前記複比変換部および前記複比変換部における各演算が、前記パラメータの値を前記パラメータ設定部で変更されながら複数回繰り返される間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める検出部とを備えたものであってもよい。
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記極変換部が、前記極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部および前記極変換部における各演算が、前記パラメータの値が前記パラメータ変更部で変更しながら複数回繰り返される間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるものであることが好ましい。
また、上記の第1画像計測装置において、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部を備え、
前記複比変換部が、前記パラメータ変更部で設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第2のパラメータ変更部で設定された前記運動視差τと、該計測点の前記移動継続状態における無限時間経過後の位置pinfとから、該計測点の前記重畳時刻における位置pを求めるものであり、
前記極変換部が、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部および極変換部における各演算を前記パラメータ変更部および前記第2のパラメータ変更部において各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるものであることも好ましい態様である。
また、上記第1の画像計測装置において、前記演算部が、
前記移動方向vを第1のパラメータとして該第1のパラメータの値を変更することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを変更する第1のパラメータ変更部と、
前記重畳時刻を指標する物理量を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された位置pinfと、前記第2のパラメータ変更部で設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める複比変換部と、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める極変換部と、
前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値がそれぞれ前記第1のパラメータおよび前記第2のパラメータ変更部で変更されながら複数回繰り返される間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める検出部とを備えたものであることが好ましく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記極変換部が、前記極線を求めるとともに、求められた極線を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部および前記極変換部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値が順次変更されながら複数回繰り返される間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に交わる重畳時刻を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された位置pinfと、前記第2のパラメータ変更部で設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第3のパラメータ変更部で設定された前記運動視差τとを用いて、該計測点の前記重畳時刻における位置pを求めるものであり、
前記極変換部が、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算を前記第1、第2、および第3のパラメータ変更部において各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるものであることも好ましい態様である。
また、上記本発明の画像計測装置のうちの第2の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をp、前記計測平面の方位をnとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算と、前記計測平面の方位nと前記移動方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第2の画像計測装置において、前記演算部において実行される、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第2の画像計測装置は、前記演算部が、前記最短距離を指標とする物理量として、前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、前記2つの計測時刻のうちの前記一方の計測時刻と前記重量時刻との間の時間をt、前記2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔx、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=t/Δt
であらわされる規格化時間と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるものであってもよい。
また、上記第2の画像計測装置において、前記演算部が、
前記最短距離を指標する物理量を第1のパラメータとして該第1のパラメータの値を変更する第1のパラメータ変更部と、
前記内積(n・v)を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記第2のパラメータ変更部で設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める複比変換部と、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める極変換部と、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める点演算部とを備えるとともに、
前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値がそれぞれ前記第1のパラメータ変更部および前記第2のパラメータ変更部で変更されながら複数回繰り返されることにより、前記点演算部における、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の演算により求められる複数の点を結ぶ曲線が、前記第1のパラメータの各値ごとに前記複数の計測点について求められた後に演算を実行する、
前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める検出部を備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記点演算部が、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして該第3のパラメータを変更する第3のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記第2のパラメータ変更部で設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第3のパラメータで設定された前記運動視差τと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfとを用いて、該計測点の、前記重畳時刻における位置pを求めるものであり、
前記演算部が、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記演算部における各演算を前記第1、第2、および第3のパラメータ変更部において各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるものであることも好ましい態様である。
また、上記第2の画像計測装置において、前記演算部が、
前記移動方向vを第1のパラメータとして該第1のパラメータの値を変更することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを変更する第1のパラメータ変更部と、
前記最短距離を指標する物理量を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記内積(n・v)を第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部と、
前記第1のパラメータ演算部で設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のパラメータ演算部で設定された、前記最短距離を指標する物理量と、前記第3のパラメータ演算部で設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める複比変換部と、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める極変換部と、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める点演算部とを備えるとともに、
前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算が、前記第1から第3までのパラメータの各値がそれぞれ前記第1から第3までの各パラメータ変更部で変更されながら複数回繰り返されることにより、前記点演算部における、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の演算により求められる複数の点を結ぶ曲線が、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求められた後に演算を実行する、
前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める検出部を備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記点演算部が、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時間のうちの一方の計測時間における前記計測平面までの最短距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第4のパラメータとして該第4のパラメータの値を変更する第4のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記第3のパラメータ変更部で設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第4のパラメータ変更部で設定された前記運動視差τとを用いて、該計測点の、前記重畳時刻における位置pを求めるものであり、
前記点演算部が、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記演算部における各演算を前記第1、第2、第3、および第4のパラメータ変更部において各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測装置のうち第3の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第3の画像計測装置の、前記演算部において実行される、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第3の画像計測装置は、前記演算部が、前記計測点の各位置pinf,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして該パラメータを変更するパラメータ変更部と、
前記パラメータ変更部で設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求めるパラメータ演算部と、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める小円演算部と、
前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小円演算部における各演算が、前記パラメータが前記パラメータ変更部で変更されながら複数回繰り返される間に求められた複数の小円どうしの交差点を求めることにより、該交差点で交わる複数の小円を小円描画空間に描画したときの小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める検出部とを備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記小円演算部が、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記パラメータ演算部および前記小円演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部を備え、
前記パラメータ演算部が、前記パラメータ変更部で設定された規格化最短距離と、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、該計測点の前記2つの計測時間のうちの一方の計測時刻における計測位置pと、前記第2のパラメータ変更部で設定された前記運動視差τとを用いて、前記半径Rを求めるものであり、
前記小円変換部が、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するものであり、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記パラメータ演算部と前記小円変換部における各演算を、前記パラメータ変更部および前記第2のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるものであることも好ましい態様である。
また、上記第3の画像計測装置は、前記演算部が、前記計測点の各位置pinf,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記移動方向vを第1のパラメータとして該第1のパラメータの値を変更することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを変更する第1のパラメータ変更部と、
前記規格化最短距離を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のパラメータ変更部で設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求めるパラメータ演算部と、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める小円演算部と、
前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小演算部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のパラメータ変更部および前記第2のパラメータ変更部で変更しながら複数回繰り返される間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうしの交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める検出部とを備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記小円演算部が、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記パラメータ演算部および前記小円演算部における各演算が繰り返される間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部を備え、
前記パラメータ変更部が、前記第1のパラメータ変更部で設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のパラメータ変更部で設定された規格化最短距離と、該計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第3のパラメータ変更部で設定された前記運動視差τとを用いて、前記半径Rを求めるステップであり、
前記小円演算部が、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するものであり、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小円演算部における各演算を、前記第1、第2および第3のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるものであることも好ましい形態である。
さらに、本発明の画像計測装置のうちの第4の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第4の画像計測装置の、前記演算部において実行される、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第4の画像計測装置は、前記演算部が、前記距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離をd、前記2つの計測時刻どうしの間の前記計測点の、前記観察点に対する移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化距離を採用し、該規格化距離を、
=(pinf
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、本発明の画像計測装置のうちの第5の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfと、前記パラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める運動視差演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記パラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記運動視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第6の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のパラメータ設定部と、
前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のパラメータ設定部で設定された位置pinfと、前記第2のパラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める運動視差演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のパラメータ設定部で設定された座標に投票する第5の投票部とを備え、
前記計測空間内の複数の計測点について、前記運動視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第7の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の観察点と、該観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む、相互に異なる2つの計測時刻のうちの一方の計測時刻における計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、該2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の位置pinfと、前記パラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める運動視差演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記パラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の前記運動視差演算部、前記応答強度演算部、および投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測装置のうちの第8の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のパラメータ設定部と、
前記観測点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のパラメータ設定部で設定された位置pinfと、前記第2のパラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める運動視差演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のパラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記運動視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第9の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記パラメータ設定部で設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める座標演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第10の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のパラメータ設定部と、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τを第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のパラメータ設定部で設定された位置pinfと、前記第2のパラメータ設定部で設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める座標演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第11の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における、計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記パラメータ設定部で設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める座標演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測装置のうちの第12の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のパラメータ設定部と、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のパラメータ設定部で設定された位置pinfと、前記第2のパラメータ設定部で設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める座標演算部と、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のパラメータ設定部で設定された運動視差τに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第13の画像計測装置は、
所定の計測空間内の所定の観察点から、該計測空間内を、相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について前記応答強度演算部および前記投票部における各処理を複数回実行することを特徴とする。
ここで、上記第13の画像計測装置は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第14の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定するパラメータ設定部と、
前記観察点から、前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第14の画像計測装置は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第15の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を複数回実行することを特徴とする。
ここで、上記第15の画像計測装置は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める検出部を備えたものであってもよい。
さらに、本発明の画像計測装置のうちの第16の画像計測装置は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定するパラメータ設定部と、
前記観察点から前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、第16の画像計測装置は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第17の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第17の画像計測装置において、前記演算部において実行される、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第17の画像計測装置において、前記演算部が、前記計測平面と前記2つの観察点との間の前記視軸方向の距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
={paxis
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、上記第17の画像計測装置において、前記演算部が、
前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量をパラメータとして該パラメータの値を変更するパラメータ変更部と、
前記パラメータ変更部で設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点から観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める複比変換部と、
前記観察平面上の交点の位置pを極変換することにより前記計測点に対応する極線を求める極変換部と、
前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算が、前記パラメータの値が前記パラメータ変更部で変更されながら複数回繰り返される間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める検出部と備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記極変換部が、前記極線を求めるとともに、求められた極線のを極線描画空間に描画したときの該極線軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するものであり、前記第4のステップが、前記交差点を求めることに代わり、前記複比変換部および前記極変換部における各演算を、前記パラメータの値を前記パラメータ変換部で変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部を備え、
前記複比変換部が、前記パラメータ変更部で設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第2のパラメータ変更部で設定された前記両眼視差σと、前記無限遠点の位置paxisとから、前記観察平面上の交点pを求めるものであり、
前記極変換部が、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算を、前記パラメータ変更部および前記第2のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであることも好ましい態様である。
また、上記第17の画像計測装置において、前記演算部が、
前記視軸方向vを第1のパラメータとして該パラメータの値を変更することにより前記無限遠点の位置paxisを変更する第1のパラメータ変更部と、
前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された位置paxisと、前記第2のパラメータ変更部で設定された、前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、該計測点の前記観察平面上の交点の位置pを求める複比変換部と、
前記計測点の、前記観察平面上の交点の位置pを極変換することにより該計測点に対応する極線を求める極変換部と、
前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値がそれぞれ前記第1のパラメータ変更部および前記パラメータ変更部で変更されながら複数回繰り返される間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記観察点と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める検出部とを備えたものであることが好ましく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第極変換部が、前記極線を求めるとともに、求められた極線を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部および前記極変換部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値が変更されながら複数回繰り返される間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された位置paxisと、前記第2のパラメータ変更部で設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第3のパラメータ変更部で設定された前記両眼視差σとを用いて、前記観察平面上の交点pを求めるものであり、
前記極変換部が、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部および前記極変換部における各演算を、前記第1、第2、および第3のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるものであることも好ましい態様である。
また、上記本発明の画像計測装置のうちの第18の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第18の画像計測装置において、演算部により実行される、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第18の画像計測装置は、前記最短距離を指標とする物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=d/ΔxLR
であらわされる規格化距離と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるものであってもよい。
また、上記第18の画像計測装置において、前記演算部が前記最短距離を指標する物理量を第1のパラメータとして該第1のパラメータの値を変更する第1のパラメータ変更部と、
前記内積(n・v)を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された前記最短距離を指標する物理量と、前記第2のパラメータ変更部で設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める複比変換部と、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める極変換部と、
前記極線上の点であって、かつ前記視軸の方向vと角度
r=cos−1(n・v)
を成す点を求める点演算部とを備えるとともに、
前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値がそれぞれ第1のパラメータ変更部および前記第2のパラメータ変更部で変更されながら複数回繰り返されることにより、前記点演算部における、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の演算により求められる複数の点を結ぶ曲線が、前記第1のパラメータの各値ごとに前記複数の計測点について求められた後に演算を実行する、
前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める検出部を備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記点演算部が、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記第2のパラメータ変更部で設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第3のパラメータ変更部で設定された前記両眼視差σと、前記無限遠点の位置paxisとを用いて、前記観察平面上の交点の位置pを求めるものであり、
前記点演算部が、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算を、前記第1、第2、および第3のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるものであることも好ましい態様である。
また、上記第18の画像計測装置において、前記演算部が、
前記視軸の方向vを第1のパラメータとして該第1のパラメータの値を変更することにより前記無限遠点の位置paxisを変更する第1のパラメータ変更部と、
前記最短距離を指標する物理量を第2のパラメータとして該第2のパラメータを変更する第2のパラメータ変更部と、
前記内積(n・v)を第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部と、
前記第2のパラメータ変更部で設定された、前記無限遠点の位置paxisと、前記第3のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記極変換部で設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める複比変換部と、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める極変換部と、
前記極線上の点であって、かつ前記視軸方向vと角度
r=cos−1(n・v)
を成す点を求める点演算部とを備えるとともに、
前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算が、前記第1から第3までのパラメータの各値がそれぞれ前記第1から第3までの各パラメータ変更部で変更されながら複数回繰り返されることにより、前記点演算部における、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の演算により求められる複数の点を結ぶ曲線が、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求められた後に演算を実行する、
前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める検出部を備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記点演算部が、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するステップであり、前記検出部が、前記交差点を求めることに代わり、前記複比変換部、前記極変換部、および前記点演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第4のパラメータとして該第4のパラメータを変更する第4のパラメータ変更部を備え、
前記複比変換部が、前記第1のパラメータ変更部で設定された、前記無限遠点の位置paxisと、前記第2のパラメータ変更部で設定された、前記最短距離を指標する物理量と、前記第3のパラメータ変更部で設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第4のパラメータ変更部で設定された前記両眼視差σとを用いて、前記観察平面上の交点の位置pを求めるものであり、
前記点演算部が、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するものであって、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記複比変換部、前記極変換部、および前記点演算部における各演算部を、前記第1、第2、第3および第4のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測装置のうち第19の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸の方向をv、前記計測点を含み、前記2つの視軸と同一方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,pで決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第19の画像計測装置の、前記演算部により実行される、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第19の画像計測装置は、前記演算部が、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして該パラメータを変更するパラメータ変更部と、
前記パラメータ変更部で設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求めるパラメータ演算部と、
前記2つの観察点のうちの一方の観察点から観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める小円演算部と、
前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小演算部における各演算が、前記パラメータが前記パラメータ変更部で変更されながら複数回繰り返される間に求められた複数の小円を小円描画空間に描画したときの小円どうしの交差点を求めることにより、該交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める検出部とを備えたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記小円演算部が、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するものであり、
前記検出部が、前記交差点を求めることに代わり、前記パラメータ演算部および前記小円演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部を備え、
前記パラメータ演算部が、前記パラメータ変更部で設定された規格化最短距離と、前記無限遠点の位置paxisと、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第2のパラメータ変更部で設定された前記両眼視差σとを用いて、前記半径Rを求めるものであり、
前記小円変換部が、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差に対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第2のパラメータ演算部およびと前記小円変換部における各演算を、前記パラメータ変更部および前記第2のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返し、前記検出部が、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
また、上記第19の画像計測装置は、前記演算部が、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記視軸方向vを第1のパラメータとして該第1のパラメータの値を変更することにより前記無限遠点の位置paxisを変更する第1のパラメータ変更部と、
前記規格化最短距離を第2のパラメータとして該第2のパラメータの値を変更する第2のパラメータ変更部と、
前記第1のパラメータ変更部で設定された、前記無限遠点の位置paxisと、前記パラメータ変更部で設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求めるパラメータ演算部と、
前記2つの観察点のうちの一方の観察点とから観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める小円演算部とを有し、
前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小円演算部における各演算が、前記第1のパラメータおよび前記第2のパラメータの各値がそれぞれ前記第1のパラメータ変更部および前記第2のパラメータ演算部で変更されながら複数回繰り返される間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうし交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める検出部とをそなえたものであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記小円演算部が、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するものであり、前記検出部が、前記交差点を求めることに代わり、前記パラメータ演算部および前記小円演算部における各演算が複数回繰り返される間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるものであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記演算部が、前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして該第3のパラメータの値を変更する第3のパラメータ変更部を備え、
前記パラメータ演算部が、前記第1のパラメータ変更部で設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された規格化最短距離と、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第3のパラメータ変更部で設定された前記両眼視差σとを用いて、前記半径Rを求めるステップであり、
前記小円演算部が、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差σに対応する応答強度を投票するものであり、
前記検出部が、前記交差点を求めることに代わり、前記計測空間内の複数の計測点について、前記パラメータ演算部および前記小円演算部における各演算を、前記第1、第2および第3のパラメータ変更部で各パラメータの各値を変更しながら複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるものであることも好ましい態様である。
さらに、本発明の画像計測装置のうちの第20の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸の方向vと同一の方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,p,で決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測点と、前記2つの観察点のうちの一方の観察点との間の距離を指標する物理量を求める演算部を備えたことを特徴とする。
ここで、上記第20の画像計測装置の、前記演算部により実行される、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点それぞれから観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第20の画像計測装置は、前記距離を指標する物理量として、前記計測点と前記2つの観察点のうちの一方の観察点との間の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
=(paxis
の関係式あるいは該関係式と等価な関係式を用いて求めるものであってもよい。
また、本発明の画像計測装置のうちの第21の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれる該計測空間内の任意の計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記パラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める両眼視差演算部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記パラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記両眼視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第22の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のパラメータ設定部と、
前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のパラメータ設定部で設定された位置paxisと、前記第2のパラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める両眼視差演算部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のパラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記両眼視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第23の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点のうちの一方の観察点と、該2つの観察点から該計測空間を眺めたときの画像にあらわれた該計測空間内の任意の計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記パラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める両眼視差演算部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記パラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記両眼視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測装置のうちの第24の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のパラメータ設定部と、
前記2つの観測点のうちの一方の観察点と、前記計測点を含む計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のパラメータ設定部で設定された位置paxisと、前記第2のパラメータ設定部で設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める両眼視差演算部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のパラメータ設定部で設定された座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記両眼視差演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第25の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれる、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記パラメータ設定部で設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める座標演算部と、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第26の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のパラメータ設定部と、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のパラメータ設定部で設定された位置paxisと、前記第2のパラメータ設定部で設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める座標演算部と、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第27の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれた、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定するパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記パラメータ設定部で設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める座標演算部と、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
さらに、本発明の画像計測装置のうちの第28の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のパラメータ設定部と、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のパラメータ設定部と、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のパラメータ設定部で設定された位置paxisと、前記第2のパラメータ設定部で設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める座標演算部と、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のパラメータ設定部で設定された両眼視差σに対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記座標演算部で求められた座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記座標演算部、前記応答強度演算部、および前記投票部における各処理を、前記第1および第2のパラメータ設定部で各パラメータの各値を変更しながら複数回実行することを特徴とする。
また、本発明の画像計測装置のうちの第29の画像計測装置は、
所定の計測空間内の所定の2つの観察点から、該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について前記応答強度演算部および前記投票部における各処理を複数回実行することを特徴とする。
ここで、上記第29の画像計測装置は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第30の画像計測装置は、
所定の計測空間内を観察する該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定するパラメータ設定部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を、前記第1のパラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第30の画像計測装置は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第31の画像計測装置は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差σとに対応した座標に投票する投票部とを有し、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を複数回実行することを特徴とする。
ここで、上記第31の画像計測装置は、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との間の最短距離を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明の画像計測装置のうちの第32の画像計測装置は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定するパラメータ設定部と、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める応答強度演算部と、
前記応答強度演算部で求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応する座標に投票する投票部とを備え、
前記計測空間内の複数の計測点について、前記応答強度演算部および前記投票部における各処理を、前記パラメータ設定部でパラメータの値を変更しながら複数回実行することを特徴とする。
ここで、上記第32の画像計測装置は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との最短距離を指標する物理量を求める検出部を備えたものであってもよい。
また、本発明は画像計測プログラム記憶媒体に記憶された画像計測プログラムのうちの、本発明の第1の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をpとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第1の画像計測プログラム記憶媒体に記憶された画像計測プログラムが実行する、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第1の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記重畳時刻を指標する物理量として、前記2つの計測時刻のうちの一方の計測時刻と前記重畳時刻との間の時間をt、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=t/Δt
であらわされる規格化時間を採用し、該規格化時間を、
={pinf
の関係式あるいは該関係式と等価な関係式を用いて求めるプログラムであってもよい。
また、上記第1の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記重畳時刻を指標する物理量をパラメータとして設定する第1のステップと、
前記第1のステップで設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第2のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータの値を前記第1のステップで順次変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第4ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして設定する第5のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τと、該計測点の前記移動継続状態における無限時間経過後の位置pinfとを用いて、該計測点の前記重畳時刻における位置pを求めるステップであり、
前記第3のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることも好ましい態様である。
また、上記第1の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記重畳時刻を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記重畳時刻を指標する物理量と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第3のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該計測点に対応する極線を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで順次変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第5ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記極線を求めるとともに、求められた極線
を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点
を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第6のステップを有するプログラムであって、
前記第3のステップが、前記第2のステップで設定された、前記重畳時刻を指標する物理量と、前記第1のステップで設定された位置pinfと、前記計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第6のステップで設定された前記運動視差τとを用いて、該計測点の前記重畳時刻における位置pを求めるステップであり、
前記第4のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のステップ、前記第2のステップおよび前記第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する極線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求めるステップであることも好ましい形態である。
本発明の画像計測プログラム記憶媒体のうちの本発明の第2の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinf、前記移動継続状態において前記計測点を含む計測平面が前記観察点に重なる重畳時刻における前記計測点の位置をp、前記計測平面の方位をnとしたとき、
前記計測点の4つの位置pinf,p,p,pで決まる複比{pinf}あるいは該複比と等価な演算と、前記計測平面の方位nと前記移動方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第2の画像計測プログラム記憶媒体に記憶された画像計測プログラムが実行する、前記複比{pinf}あるいは該複比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第2の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記最短距離を指標とする物理量として、前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、前記2つの計測時刻のうちの一方の計測時刻と前記重量時刻との間の時間をt、前記2つの計測時刻どうしの間の、前記計測点の、前記観察点に対する相対的な移動距離をΔx、前記2つの計測時刻どうしの間の時間をΔtとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=t/Δt
であらわされる規格化時間と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるプログラムであってもよい。
また、上記第2の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記最短距離を指標する物理量を第1のパラメータとして設定する第1のステップと、
前記内積(n・v)を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τと、前記移動継続状態における無限時間経過後の位置pinfとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第3のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める第4のステップと、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5のステップのうちの前記第3から第5までのステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで順次変更しながら複数回繰り返すことにより、前記第5のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値ごとに前記複数の計測点について求め、その後、
前記第1から第5のステップを複数回繰り返す間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第6のステップを実行するプログラムであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第5のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するステップであり、前記第6のステップが、前記交差点を求めることに代わり、前記第1から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第7のステップを有するプログラムであって、
前記第3のステップが、前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第7のステップで設定された前記運動視差τと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfとを用いて、該計測点の、前記重畳時刻における位置pを求めるステップであり、
前記第5のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第3から第5までのステップを、前記第1、第2、および第7のステップで各パラメータの各値を変更しながら複数回繰り返し、その後実行される前記第6のステップが、前記交差点を求めることに代わり、前記第1、第2、第7および前記第3から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、上記第2の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記最短距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記内積(n・v)を第3のパラメータとして設定する第3のステップと、
前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の前記2つの計測時刻における各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pおよび該計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τとから、前記複比{pinf}あるいは該複比と等価な演算を用いて、該計測点の前記重畳時刻における位置pを求める第4のステップと、
前記計測点の、前記重畳時刻における位置pを極変換することにより該位置pに対応する極線を求める第5のステップと、
前記極線上の点であって、かつ前記移動方向vと角度
r=cos−1(n・v)
を成す点を求める第6のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第6のステップのうちの前記第4から第6までのステップを、前記第1から第3までのパラメータの各値を、それぞれ前記第1から第3までの各ステップで順次変更しながら複数回繰り返すことにより、前記第6のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求め、その後、
前記第1から第6までのステップを複数回繰り返す間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第7のステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第6のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するステップであり、前記第7のステップが、前記交差点を求めることに代わり、前記第1から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時間のうちの一方の計測時間における前記計測平面までの最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時間における2つの計測位置p,pどうしの間の運動視差τを第4のパラメータとして設定する第8のステップを有するプログラムであって、
前記第4のステップが、前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第8のステップで設定された前記運動視差τとを用いて、該計測点の、前記重畳時刻における位置pを求めるステップであり、
前記第6のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記運動視差τに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第4から第6までのステップを、前記第1、第2、第3および第8のステップで各パラメータの各値を変更しながら複数回繰り返し、その後実行される前記第7のステップが、前記交差点を求めることに代わり、前記第1、第2、第3、第8および前記第4から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する曲線描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測プログラム記憶媒体のうちの第3の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向をv、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第3の画像計測プログラム記憶媒体に記憶された画像計測プログラムが実行する、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第3の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記計測点の各位置pinf,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして設定する第1のステップと、
前記第1のステップで設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第2のステップと、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータを前記第1のステップで順次変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の小円を小円描画空間に描画したときの小円どうしの交差点を求めることにより、該交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第4ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第2のパラメータとして設定する第5のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された規格化最短距離と、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、該計測点の前記2つの計測時間のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τとを用いて、前記半径Rを求めるステップであり、
前記第3のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
また、上記第3の画像計測プログラム記憶媒体に格納された画像計測プログラムは、前記計測点の各位置pinf,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測平面との間の最短距離をd、2つの計測時刻どうしの間の前記計測点の、前記観察点に対する相対的な移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化最短距離を採用し、
前記移動方向vを第1のパラメータとして設定することにより前記移動継続状態における無限時間経過後の前記計測点の位置pinfを設定する第1のステップと、
前記規格化最短距離を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第2のステップで設定された規格化最短距離と、単比(pinf)あるいは該単比と等価な演算とを用いて、
R=cos−1/(pinf))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第3のステップと、
前記2つの計測時刻のうちの一方の計測時刻における前記計測点の計測位置を中心とした半径Rの小円を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで順次変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうし交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第5のステップを実行するプログラムであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を該小円に対応する小円描画空間に描画したときの該小円極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの計測時刻における2つの計測位置p,pどうしの間の運動視差τを第3のパラメータとして設定する第6のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された、前記移動継続状態における無限時間経過後の前記計測点の位置pinfと、前記第3のステップで設定された規格化最短距離と、該計測点の前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第5のステップで設定された前記運動視差τとを用いて、前記半径Rを求めるステップであり、
前記第4のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記運動視差τに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記運動視差τに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1、第2および第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の移動方向に対応する小円描画空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
さらに、上記本発明の画像計測プログラム記憶媒体のうちの第4の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における各計測位置をそれぞれp,p、前記計測点の、前記観察点に対する相対的な、前記2つの計測時刻の間における移動方向vと同一の方向への、かつ前記2つの計測時刻の間の移動速度と同一の速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の前記計測点の位置をpinfとしたとき、
前記計測点の3つの位置pinf,p,pで決まる単比(pinf)あるいは該単比と等価な演算を用いて、
前記観察点と、前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
この第4の画像計測プログラム記憶媒体に記憶された画像計測プログラムが実行する、前記単比(pinf)あるいは該単比と等価な演算には、前記計測点の、前記2つの計測時刻における2つの計測位置p,pに代えて、前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τとを用いる演算が包含されるものである。
上記第4の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記距離を指標する物理量として、前記観察点と前記2つの計測時刻のうちの一方の計測時刻における前記計測点との間の距離をd、前記2つの計測時刻どうしの間の前記計測点の、前記観察点に対する移動距離をΔxとしたときの、
=d/Δx
であらわされる規格化距離を採用し、該規格化距離を、
=(pinf
の関係式あるいは該関係式と等価な関係式を用いて求めるプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第5の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記移動継続状態における無限時間経過後の位置pinfと、前記第1のステップで設定された前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第6の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第7の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の観察点と、該観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む、相互に異なる2つの計測時刻のうちの一方の計測時刻における計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、該2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の位置pinfと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
さらに、本発明の画像計測プログラム記憶媒体のうちの第8の画像計測プログラム記憶媒体所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記観測点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第9の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記第1のステップで設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4ののステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を順次変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第10の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された運動視差τとから、前記移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第11の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻における2つの計測位置p,pどうしの間の位置の差である運動視差τをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における、計測位置pと、該計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、該計測点の無限時間経過後の位置pinfと、前記第1のステップで設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された運動視差τに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
さらに、本発明の画像計測プログラム記憶媒体のうちの第12の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向vを第1のパラメータとして設定することにより、前記計測点の、該移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における無限時間経過後の該計測点の位置pinfを設定する第1のステップと、
前記計測点の、前記2つの計測時刻における2つの計測位置p,pどうしの位置の差である運動視差τを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの計測時刻のうちの一方の計測時刻における計測位置pと、前記第1のステップで設定された位置pinfと、前記第2のステップで設定された運動視差τとに基づいて、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの計測時刻における、前記観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された運動視差τに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第13の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から、該計測空間内を、相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について前記第1のステップと前記第2のステップを複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第13の画像計測プログラム記憶媒体に記憶された前記画像計測プログラムは、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第3のステップを有するプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第14の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定する第1のステップと、
前記観察点から、前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記計測点の、前記2つの計測時刻の間における前記観察点に対する相対的な移動方向と同一方向への、かつ前記2つの計測時刻の間の移動速度と同一速度での移動がそのまま継続されるものと予定した移動継続状態における、前記計測点を含む計測平面が前記観察点に重なる重畳時刻を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第14の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面が前記観察点に重なる重畳時刻を指標する物理量を求める第4のステップを有するプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第15の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を相互に異なる2つの計測時刻において眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記運動視差とに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について、前記第1のステップと前記第2のステップを複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第15の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第3のステップを有するプログラムであってもよい。
さらに、本発明の画像計測プログラム記憶媒体のうちの第16の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点の、相互に異なる2つの計測時刻の間における前記観察点に対する相対的な移動方向をパラメータとして設定する第1のステップと、
前記観察点から前記計測空間内を前記2つの計測時刻において眺めたときの2つの画像に基づいて、前記計測点の、該2つの計測時刻における2つの計測位置どうしの位置の差である運動視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記観察点から、前記計測点を含む、前記2つの計測時刻のうちの一方の計測時刻における計測平面までの間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記運動視差に対応する座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第16の画像計測プログラム記憶媒体に記憶された画像計測プログラム記憶媒体は、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の移動方向に対応する投票空間を選択することにより該真の移動方向を求めるとともに、該真の移動方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記観察点から前記2つの計測時刻のうちの一方の計測時刻における前記計測平面までの最短距離を指標する物理量を求める第4のステップを有するプログラムであってもよい。
また、本発明は画像計測プログラム記憶媒体のうちの、第17の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、第17の画像計測プログラム記憶媒体に記憶された画像計測プログラムが実行する、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第17の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記計測平面と前記2つの観察点との間の前記視軸方向の距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
={paxis
の関係式あるいは該関係式と等価な関係式を用いて求めるプログラムであってもよい。
また、上記第17の画像計測プログラム記憶媒体に記憶された第17の画像計測プログラムは、
前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量をパラメータとして設定する第1のステップと、
前記第1のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の、前記2つの観察点から観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第2のステップと、
前記観察平面上の交点の位置pを極変換することにより前記計測点に対応する極線を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータの値を前記第1のステップで順次変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める第4ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記極線を求めるとともに、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして設定する第5のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σと、前記無限遠点の位置paxisとを用いて、前記観察平面上の交点pを求めるステップであり、
前記第3のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであってもよい。
また、上記第17の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記視軸方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、該計測点の前記観察平面上の交点の位置pを求める第3のステップと、
前記計測点の、前記観察平面上の交点の位置pを極変換することにより該計測点に対応する極線を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の極線を前記第1のパラメータの値に応じた複数の極線描画空間のうちのそれぞれ対応する極線描画空間に描画したときの極線どうしの交差点を各極線描画空間ごとに求め該交差点で交わる極線の本数の情報に基づいて真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記観察点と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める第5ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記極線を求めるとともに、求められた極線を該極線に対応する極線描画空間に描画したときの該極線の軌跡上の各点それぞれに該極線に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第6のステップを有するプログラムであって、
前記第3のステップが、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、前記計測点の前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記観察平面上の交点pを求めるステップであり、
前記第4のステップが、前記計測点に対応する極線を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた極線を極線描画空間に描画したときの該極線の軌跡上の各点それぞれに、該極線に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであって、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のステップ、前記第2のステップおよび前記第6のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各極線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する極線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する極線描画空間について求められた極大点の投票に参加した複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めるステップであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第18の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第18の画像計測プログラムに記憶された画像計測プログラムが実行する、前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第18の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記最短距離を指標とする物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、該規格化最短距離を、
=d/ΔxLR
であらわされる規格化距離と前記内積(n・v)とを用いた、
(n・v)
の関係式を用いて求めるプログラムであってもよい。
上記第18の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記最短距離を指標する物理量を第1のパラメータとして設定する第1のステップと、
前記内積(n・v)を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σと、前記無限遠点の位置paxisとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第3のステップと、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める第4のステップと、
前記極線上の点であって、かつ前記視軸の方向vと角度
r=cos−1(n・v)
を成す点を求める第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5のステップのうちの前記第3から第5までのステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返すことにより、前記第5のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であって、かつ前記第2のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値ごとに前記複数の計測点について求め、その後、
前記第1から第5のステップを複数回繰り返す間に求められた複数の曲線を曲線描画空間に描画したときの曲線どうしの交差点を求めることにより、該交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める第6のステップを実行するプログラムであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第5のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、前記曲線描画空間内の点に投票するステップであり、前記第6のステップが、前記交差点を求めることに代わり、前記第1から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第7のステップを有するプログラムであって、
前記第3のステップが、前記第1のステップで設定された、前記最短距離を指標する物理量と、前記第2のステップで設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第7のステップで設定された前記両眼視差σと、前記無限遠点の位置paxisとを用いて、前記観察平面上の交点の位置pを求めるステップであり、
前記第5のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第3から第5までのステップを、前記第1、第2、および第7のステップで各パラメータの各値を変更しながら複数回繰り返し、その後実行される前記第6のステップが、前記交差点を求めることに代わり、前記第1、第2、第7および前記第3から第5までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、上記第18の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、
前記視軸の方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記最短距離を指標する物理量を第2のパラメータとして設定する第2のステップと、
前記内積(n・v)を第3のパラメータとして設定する第3のステップと、
前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の前記2つの観察点それぞれから観察したときの各計測位置p,pあるいは、これら2つの計測位置p,pに代わる、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pおよび該計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σとから、前記複比{paxis}あるいは該複比と等価な演算を用いて、前記観察平面上の交点の位置pを求める第4のステップと、
前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求める第5のステップと、
前記極線上の点であって、かつ前記視軸の方向vと角度
r=cos−1(n・v)
を成す点を求める第6のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第6のステップのうちの前記第4から第6までのステップを、前記第1から第3までのパラメータの各値を、それぞれ前記第1から第3までの各ステップで変更しながら複数回繰り返すことにより、前記第6のステップの、1つの計測点に関する、前記第1のパラメータの値が同一であるとともに前記第2のパラメータの値が同一であって、かつ前記第3のパラメータの値がそれぞれ異なる複数回の実行により求められる複数の点を結ぶ曲線を、前記第1のパラメータの各値と前記第2のパラメータの各値との各組合せごとに前記複数の計測点について求め、その後、
前記第1から第6までのステップを複数回繰り返す間に求められた複数の曲線を前記第1のパラメータの値に応じた複数の曲線描画空間のうちのそれぞれ対応する曲線描画空間に描画したときの曲線どうしの交差点を各曲線描画空間ごとに求め該交差点で交わる曲線の本数の情報に基づいて真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた交差点で交わる複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める第7のステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第6のステップが、前記点を求めるとともに、該点に対応する計測点の強度に対応する値を該点に対応する、該点を含む曲線が描かれる曲線描画空間内の点に投票するステップであり、前記第7のステップが、前記交差点を求めることに代わり、前記第1から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点対応する、該点を含む曲線が描かれる曲線描画空間内の点に極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第4のパラメータとして設定する第8のステップを有するプログラムであって、
前記第4のステップが、前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された、前記最短距離を指標する物理量と、前記第3のステップで設定された内積(n・v)と、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第8のステップで設定された前記両眼視差σとを用いて、前記観察平面上の交点の位置pを求めるステップであり、
前記第6のステップが、前記計測点に対応する極線上の前記点を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、該極線上の前記点に対応する計測点の、前記両眼視差σに対応する応答強度を、該極線上の前記点に対応する、前記曲線描画空間内の点に投票するステップであって、
前記計測空間内の複数の計測点について、前記第4から第6までのステップを、前記第1、第2、第3および第8のステップで各パラメータの各値を変更しながら複数回繰り返し、その後実行される前記第7のステップが、前記交差点を求めることに代わり、前記第1、第2、第3、第8および前記第4から第6までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各曲線描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する曲線描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する曲線描画空間について求められた極大点の投票に参加した複数の曲線に対応する複数の計測点を含む計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めるステップであることも好ましい態様である。
また、本発明の画像計測プログラム記憶媒体のうちの第19の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記2つの視軸と同一方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,pで決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第19の画像計測プログラム記憶された画像計測プログラムが実行する、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第19の画像計測プログラム記憶媒体に格納された画像計測プログラムは、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記規格化最短距離をパラメータとして設定する第1のステップと、
前記第1のステップで設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rをを求める第2のステップと、
前記2つの観察点のうちの一方の観察点から観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記パラメータを前記第1のステップで変更しながら複数回繰り返し、その後、
前記第1から第3までのステップを複数回繰り返す間に求められた複数の小円を小円描画空間に描画したときの小円どうしの交差点を求めることにより、該交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第4ステップを実行するプログラムであってもよく、
この場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第3のステップが、前記小円を求めるとともに、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第4のステップが、前記交差点を求めることに代わり、前記第1から第3までのステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第2のパラメータとして設定する第5のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された規格化最短距離と、前記無限遠点の位置paxisと、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記半径Rを求めるステップであり、
前記第3のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差に対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第2のステップと前記第3のステップを、前記第1のステップおよび前記第5のステップで各パラメータの各値を変更しながら複数回繰り返し、
その後実行される前記第4のステップが、前記交差点を求めることに代わり、前記第1、第5、第2および第3のステップを複数回繰り返す間の投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
また、上記第19の画像計測プログラム記憶媒体に格納された画像計測プログラムは、前記各位置paxis,p,pとして球面上に写影された各位置を採用すると共に、前記最短距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化最短距離を採用し、
前記視軸方向vを第1のパラメータとして設定することにより前記無限遠点の位置paxisを設定する第1のステップと、
前記規格化最短距離を第2のパラメータとして設定する第2のステップと、
前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された規格化最短距離と、単比(paxis)あるいは該単比と等価な演算とを用いて、
R=cos−1/(paxis))
なる関係式あるいは該関係式と等価な関係式で規定される半径Rを求める第3のステップと、
前記2つの観察点のうちの一方の観察点とから観察したときの前記計測点の計測位置を中心とした半径Rの小円を求める第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1のパラメータおよび前記第2のパラメータの各値をそれぞれ前記第1のステップおよび前記第2のステップで変更しながら複数回繰り返し、その後、
前記第1から第4までのステップを複数回繰り返す間に求められた複数の小円を前記第1のパラメータの値に応じた複数の小円描画空間のうちのそれぞれ対応する小円描画空間に描画したときの小円どうし交差点を各小円描画空間ごとに求め該交差点で交わる小円の本数の情報に基づいて真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた交差点で交わる複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求める第5のステップを実行するプログラムであってもよく、
その場合に、前記画像上にあらわれた計測点が強度の情報を有するものであって、前記第4のステップが、前記小円を求めるとともに、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の強度に対応する値を投票するステップであり、前記第5のステップが、前記交差点を求めることに代わり、前記第1から第4までのステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることが好ましく、あるいは、
前記画像上にあらわれた計測点が強度の情報を有するものであって、
前記画像計測プログラムが、前記計測点の前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の両眼視差σを第3のパラメータとして設定する第6のステップを有するプログラムであって、
前記第2のステップが、前記第1のステップで設定された、前記無限遠点の位置paxisと、前記第2のステップで設定された規格化最短距離と、該計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第5のステップで設定された前記両眼視差σとを用いて、前記半径Rを求めるステップであり、
前記第4のステップが、前記計測点に対応する前記小円を求めるとともに、該計測点の、前記両眼視差σに対応する応答強度を求め、求められた小円を該小円に対応する小円描画空間に描画したときの該小円の軌跡上の各点それぞれに該小円に対応する計測点の、前記両眼視差σに対応する応答強度を投票するステップであり、
前記計測空間内の複数の計測点について、前記第3のステップと前記第4のステップを、前記第1、第2および第6のステップで各パラメータの各値を変更しながら複数回繰り返し、その後実行される前記第5のステップが、前記交差点を求めることに代わり、前記第1、第2、第6、第3および第4のステップを複数回繰り返す間の投票による値が極大値となる極大点を各小円描画空間ごとに求め該極大点における極大値の情報に基づいて前記真の視軸方向に対応する小円描画空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する小円描画空間について求められた極大点の投票に参加した複数の小円に対応する複数の計測点を含む計測平面の方位nso、及び/又は、該計測平面についての規格化最短距離s0を求めるステップであることも好ましい態様である。
さらに、上記本発明の画像計測プログラム記憶媒体のうちの第20の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸の方向vと同一の方向に延びる直線上の無限遠点の位置をpaxisとしたとき、
前記3つの位置paxis,p,p,で決まる単比(paxis)あるいは該単比と等価な演算を用いて、前記計測点と、前記2つの観察点のうちの一方の観察点との間の距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする。
この第20の画像計測プログラム記憶媒体に記録された画像計測プログラムが実行する、前記単比(paxis)あるいは該単比と等価な演算には、前記計測点の、前記2つの観察点それぞれから観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものである。
上記第20の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記距離を指標する物理量として、前記計測点と前記2つの観察点のうちの一方の観察点との間の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
=d/ΔxLR
であらわされる規格化距離を採用し、該規格化距離を、
=(paxis
の関係式あるいは該関係式と等価な関係式を用いて求めるプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第21の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第2のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第22の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第3のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第23の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点のうちの一方の観察点と、該2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標をパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第2のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第1のステップで設定された座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
さらに、本発明の画像計測プログラム記憶媒体のうちの第24の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記2つの観測点のうちの一方の観察点と、前記計測点を含む計測平面までの最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された、前記投票空間内の座標とから、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを求める第3のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、前記計測点の、前記両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第2のステップで設定された座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第25の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれる、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4ののステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第26の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された両眼視差σとから、前記計測点を含む計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第27の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像にあらわれる、該計測空間内の任意の計測点の2つの計測位置p,pどうしの間の位置の差である両眼視差σをパラメータとして設定する第1のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、該計測点を含み、前記2つの観察点どうしを結ぶ視軸方向と同一方向に延びる直線上の無限遠点の位置paxisと、前記第1のステップで設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される投票空間内の座標を求める第2のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第1のステップで設定された両眼視差σに対応する応答強度を求める第3のステップと、
前記第3のステップで求められた応答強度を、前記投票空間内の、前記第2のステップで求められた座標に投票する第4のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第4までのステップのうちの第2から第4までのステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
さらに、本発明の画像計測プログラム記憶媒体のうちの第28の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向方向vを第1のパラメータとして設定することにより、前記2つの観察点から該計測空間内を眺めたときの画像にあらわれる、該計測空間内の任意の計測点を含み、該視軸方向と同一方向に延びる直線上の無限遠点の位置paxisを設定する第1のステップと、
前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの位置の差である両眼視差σを第2のパラメータとして設定する第2のステップと、
前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記第1のステップで設定された位置paxisと、前記第2のステップで設定された両眼視差σとに基づいて、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位nとで規定される、前記第1のパラメータに応じた投票空間内の座標を求める第3のステップと、
前記2つの観察点から前記計測空間を眺めたときの2つの画像に基づいて、前記計測点の、前記第2のステップで設定された両眼視差σに対応する応答強度を求める第4のステップと、
前記第4のステップで求められた応答強度を、前記第1のパラメータに応じた投票空間内の、前記第3のステップで求められた座標に投票する第5のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第5までのステップのうちの第3から第5までのステップを、前記第1および第2のステップで各パラメータの各値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
また、本発明の画像計測プログラム記憶媒体のうちの第29の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から、該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記2つの観察点どうしを結ぶ視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について前記第1のステップと前記第2のステップを複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第29の画像計測プログラム記憶媒体に記憶された前記画像計測プログラムは、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める第3のステップを有するプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第30の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定する第1のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記計測点を含む計測平面と、前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応した座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第30の画像計測プログラム記憶媒体に記憶された前記画像計測プログラムは、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の、前記視軸方向の距離を指標する物理量を求める第4のステップを有するプログラムであってもよい。
また、本発明の画像計測プログラム記憶媒体のうちの第31の画像計測プログラム記憶媒体は、
所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第1のステップと、
前記第1のステップで求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される投票空間内の、前記計測点と前記両眼視差σとに対応した座標に投票する第2のステップとを有し、
前記計測空間内の複数の計測点について、前記第1のステップと前記第2のステップを複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第31の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記投票空間内の、前記投票による値が極大値となる極大点を求めることにより、該極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との間の最短距離を指標する物理量を求める第3のステップを有するプログラムであってもよい。
さらに、本発明の画像計測プログラム記憶媒体のうちの第32の画像計測プログラム記憶媒体は、
所定の計測空間内を観察する、該計測空間内の所定の2つの観察点どうしを結ぶ視軸方向をパラメータとして設定する第1のステップと、
前記2つの観察点から前記計測空間内を眺めたときの2つの画像に基づいて、該計測空間内の任意の計測点の、該2つの観察点から観察したときの2つの計測位置どうしの位置の差である両眼視差に対応する応答強度を求める第2のステップと、
前記第2のステップで求められた応答強度を、前記2つの観察点のうちの一方の観察点と、前記計測点を含む計測平面との間の最短距離を指標する物理量と、該計測平面の方位とで規定される、前記第1のステップで設定されたパラメータに応じた投票空間内の、前記計測点と前記両眼視差とに対応する座標に投票する第3のステップとを有し、
前記計測空間内の複数の計測点について、前記第1から第3までのステップのうちの第2および第3のステップを、前記第1のステップでパラメータの値を変更しながら複数回実行する画像計測プログラムが記憶されてなることを特徴とする。
ここで、上記第32の画像計測プログラム記憶媒体に記憶された画像計測プログラムは、前記投票による値が極大値となる極大点を各投票空間ごとに求め該極大点における極大値の情報に基づいて前記計測点の前記観察点に対する相対的な真の視軸方向に対応する投票空間を選択することにより該真の視軸方向を求めるとともに、該真の視軸方向に対応する投票空間について求められた極大点の投票に参加した複数の計測点を含む計測平面の方位、及び/又は、前記2つの観察点のうちの一方の観察点と、前記計測平面との最短距離を指標する物理量を求める第4のステップを有するプログラムであってもよい。
1.運動視アルゴリズム
(1)規格化時間を決定する方法の効果
1.3.2で述べたように、現時刻の位置p、次時刻の位置p、そして無限時間経過後の位置pinfを知って、平面の3次元方位nとそれを横切るまでの規格化時間を決定できる。
この時間はロボットの走行、自動車の自動走行、そして飛行機の自動着陸などに非常に有用である。例えば次のようにして行われる。ロボットが廊下を歩行する例で説明する。廊下に斜めに(ぶつかる方向に)移動すると、図10(B)の円柱配列の中の一点が発火し、その高さ座標として“壁を横切る(壁にぶつかる)までの規格化時間”が、また断面円内の座標として“壁の法線ベクトルn”が得られる。この規格化時間に“現在から次の時刻までの時間差(すなわち、画像フレーム間の時間差)Δt”を乗ずると、平面にぶつかるまでの時間tに変換される。この時間tと法線ベクトルnにもとづいて、ロボットは次のように回避行動をとることができる。すなわち、計測されたtが“ロボットの速度・慣性・駆動トルクなどから決まる回避時間の限界値”を下回ると、壁とぶつからない方向(すなわち、上記で計測される法線ベクトルnと直角な方向)に向きを変えるように制御する。向きが変わると次に計測される“壁にぶつかるまでの時間t”は回避限界値を超えた値に戻り、さらに回避が進んで壁と平行に移動し始めると“tが無限大”になり、この方向に移動すればぶつからないことを把握できる。このようにして壁の3次元方位nとそれにぶつかるまでの時間tを計測することにより、曲がりくねった廊下でもぶつからずに移動できる。
この方法は、三つの時刻での位置p,p,pinfを知るだけで移動速度Vを知らなくても、“壁にぶつかるまでの時間t”を予測できるのが大きな特長である。超音波などで壁までの距離を計って回避する方式では、その距離を“壁にぶつかるまでの時間”に変換するために、移動速度Vの計測が不可欠である。
さらに、1.6で述べた方法を用いるとpinf(すなわち、移動方向v)までも判らなくてもよく、二つの時刻での位置p,pを知るだけでnを計測できる。この方法により、例えばインターネット・ビデオ・映画の画像などで撮影中の移動方向が判らない場合でも“平面の3次元方位nとそれを横切るまでの規格化時間”を計測できる。また、平面が移動している場合にはその移動方向は一般には判らないが、その場合でも“それら方位と時間”を移動方向vとともに計測できる。
以上を行えるような方法はこれまでに報告されていない。
(2)規格化最短距離を決定する方法の効果
2.1と2.2.3で述べたように、現時刻の位置p、次時刻の位置p、そして無限時間経過後の位置pinfを知って、平面の3次元方位nと規格化最短距離を決定できる。
この規格化最短距離は“画像内に重なり合って見える複数の物体や環境を分離(奥行き分離と言われる)”するのに非常に有用である。すなわち、物体や環境を構成する平面の“相対的な奥行き”と“傾き”を規格化最短距離と方位nとして計測できるため、それらが重なり合っていても分離して識別することができる。
この奥行き分離は、三つの時刻での位置p,p,pinfを知るだけで、移動速度Vや“現在から次の時刻までの時間差Δtや移動距離Δx”が判らなくても行えるのが大きな特長である。なお、平面までの最短距離dが必要な場合には、この規格化最短距離に“現在から次時刻までの移動距離Δx”を乗じて得ることができる。
さらに、2.5で述べた方法を用いるとpinf(すなわち、移動方向v)までも判らなくてよく、二つの時刻での位置p,pを知るだけで規格化最短距離と方位nを計測できる。この方法により、例えばインターネット画像・ビデオ・映画などで撮影中の移動方向が判らない場合でも、“それら距離と方位”を計測でき、それに基づいて奥行き分離を行える。また、平面が移動している場合にはその移動方向は一般には判らないが、その場合でも“それら距離と方位”を移動方向vとともに計測できる。
以上を行えるような方法はこれまでに報告されていない。
2.両眼視アルゴリズム
(1)規格化最短距離を決定する方法の効果
4.3.1と4.3.2で述べたように、左カメラ画像での位置p、左カメラ画像での位置p、そして、“左右カメラを結ぶ視軸上の位置paxis”を知って、平面の3次元方位nと規格化最短距離を決定できる。
この規格化最短距離は“画像内に重なり合って見える複数の物体や環境を奥行き分離”するのに非常に有用である。すなわち、物体や環境を構成する平面の“相対的な奥行き”と“傾き”を規格化最短距離と方位nとして計測できるため、それらが重なり合っていても分離して識別することができる。
この奥行き分離は、左右カメラでの位置p,pと視軸上の位置paxisを知るだけで、左右カメラ間の距離ΔxLRが判らなくても行えるのが大きな特長である。なお、平面までの最短距離dが必要な場合には、この規格化最短距離に“左右カメラ間の距離ΔxLR”を乗じて得ることができる。
さらに、4.3.3で述べた方法を用いるとpaxis(すなわち、視軸方向axis)までも判らなくてよく、左右カメラでの位置p,pを知るだけで規格化最短距離と方位nを計測できる。この方法により、例えばインターネットなどのステレオ画像で、撮影中の視軸方向が判らない場合でも“それら距離と方位”を計測でき、それに基づいて奥行き分離を行える。
なお、以上の奥行き分離は、4.2.3で計測される“視軸方向に平面を横切るまでの規格化距離”と“平面の3次元方位n” を用いて行うこともできる。
以上を行えるような方法はこれまでに報告されていない。
以下、本発明の実施形態について説明する。
図2は、本発明の画像計測装置の一実施形態として採用されるコンピュータシステムの外観を示す図である。
このコンピュータシステム300は、CPU、RAMメモリ、磁気ディスク、通信用ボード、画像入力用ボード等を内蔵した本体301、本体301からの指示により画面表示を行なうCRTディスプレイ302、このコンピュータ内にユーザの指示や文字情報を入力するためのキーボード303、およびCRTディスプレイ302の表示画面上の任意の位置を指定することによりその位置に表示されていたアイコン等に応じた指示を入力するマウス304を備えている。本体301には、外観上、フロッピィディスクやMO(光磁気ディスク)が取り出し自在に装填されるフロッピィディスク装填口301aやMO装填口301bを有しており、その内部には、装填されたフロッピィディスク、MOをドライブするフロッピィディスクドライバ、MOドライバも内蔵されている。
図3は、図2に示すコンピュータシステムのハードウェア構成図である。
このハードウェア構成図には、中央演算処理装置(CPU)311、RAM312、磁気ディスクコントローラ313、フロッピィディスクドライバ314、MOドライバ315、マウスコントローラ316、キーボードコントローラ317、ディスプレイコントローラ318、通信用ボード319、および画像入力用ボード320が示されており、それらはバス310で相互に接続されている。
磁気ディスクコントローラ313は、本体301(図2参照)に内蔵された磁気ディスク321をアクセスするものである。
また、フロッピィディスクドライバ314、MOドライバ315は、図2を参照して説明したように、それぞれフロッピィディスク322、MO323が装填され、装填されたフロッピィディスク322、MO323をアクセスするものである。
また、マウスコントローラ316、キーボードコントローラ317は、それぞれ、マウス304、キーボード303の操作をこのコンピュータ内部に伝えるものである。
また、ディスプレイコントローラ318は、CPU311で動作するプログラムに応じて、CRTディスプレイ302に画像を表示させるコントローラである。
さらに、通信用ボード319は、通信回線400によりLANやインターネットなどの通信網と接続されており、この通信用ボード319は、例えば、その通信網を流れる画像データを受信する役割りを担っている。
さらに、画像入力用ボードは、外部のカメラ11(電子スチールカメラ、あるいはビデオカメラ等)と接続され、そのカメラ11での撮影により得られた画像データをこのコンピュータ内部に取り込む役割りを担っている。尚、この図3には、カメラは1台のみ示されているが、この画像入力用ボード320には2台のカメラが接続され、例えば人間の両眼の視差に対応した異なる方向から同一の被写体を同時に撮影して得た2枚の画像を入力することもできる。
このコンピュータシステム300は、フロッピィディスク322やMO323に記憶されていたプログラムがインストールされ、あるいは、通信回線400を経由してきたプログラムがインストールされて、後述する本発明の画像計測装置として動作するものであり、したがって、図2,図3に示したコンピュータシステムのハードウェアと、そのコンピュータシステムにインストールされて実行されるプログラムとの組合せとして本発明の画像計測装置の一実施形態が実現されている。また、このコンピュータシステムを本発明の画像計測装置として動作させるプログラムが、本発明にいう画像計測プログラムに相当し、フロッピィディスク322やMO323にその画像計測プログラムが記憶されている場合に、その画像計測プログラムを記憶した状態にあるフロッピィディスク322やMO323が本発明にいう画像計測プログラム記憶媒体に相当する。また、その画像計測プログラムがこのコンピュータシステムにインストールされると、そのインストールされた画像計測プログラムは磁気ディスク321に記憶される。従って、その画像計測プログラムを記憶した状態にある磁気ディスク321も本発明の画像計測プログラム記憶媒体の一例に相当する。
ここで、この図2,図3に示すコンピュータシステム300の、画像計測装置としての機能は、後述する各種の機能ブロック図で示されており、そこで動作する画像計測プログラムの内容は後述する各種のフローチャートで示されている。また、それら後述する各種のフローチャートは「方法」の形態として捉えることもでき、したがって、それら後述する各種のフローチャートは、本発明の画像計測方法の各種実施形態にも相当する。
ここで、本発明の実施形態の説明は一旦中断し、本発明による画像計測の原理説明を行ない、その後、本発明の各種の実施形態を説明する。
1.平面の3次元方位と横切るまでの時間の計測法
平面の三次元幾何情報のうち、平面の3次元方位nと平面を横切るまでの時間tを計測する方法を提供する。
平面がある方向vに移動しているとする。法線ベクトルがnの平面(3次元方位がnの平面)が、現時刻tから次の時刻tへと移動し、さらに時刻tに平面がカメラ中心Oを横切る様子を、図4に示す。各時刻の平面上の三角形の頂点(白丸)は、眼球の網膜(あるいは球面カメラ)の上では、カメラ中心と各頂点を結んだ線と眼球面(あるいは球面カメラ)との交点(黒丸)として写る。以降では簡単のために、眼球(あるいは球面カメラ)の直径は1とする。従って、カメラ中心と黒丸を結ぶベクトルは大きさ1の“単位ベクトル”になる。
1.1. 平面の3次元方位nを計測する原理
図4の時刻tの様子を抜き出して図5に示す。この時刻では、平面がカメラ中心Oを通るため、平面上の点群(白丸)は球面上では“大円gnsの上の点群(黒丸)”として縮退して投影される。この大円は平面と球面との交線であり、従ってベクトルpは平面の法線ベクトルnと直交する。この関係から、平面の法線ベクトルnはベクトルpの「極変換」として次のようにして計測できる。すなわち、各ベクトルpについてそれを中心とする大円――大円は球面上で最も大きい円――を描くと、それら大円群は一点で交差し、その交差点として平面の法線ベクトル(すなわち3次元方位)nが計測される。このように、平面上の複数の点についてpが判ると、極変換を行って平面の3次元方位を求めることができる。(ここで、極変換の用語を説明しておくと、上記の球面上の点pおよび大円がそれぞれ「極」および「極線」と言われ、その極pを極線(大円)に変換する操作が「極変換(polar transformation)(あるいは双対変換(duality))」と言われる。)
1.2. 平面を横切るまでの規格化時間を計測する原理
規格化時間を計測する原理を説明する。ここで、規格化時間は、平面を横切るまでの時間tを“現時刻tと次の時刻tの時間差Δt”で規格化した時間であり、式(1)で表される。
=t/Δt (1)
Δt=t−t (2)
図4の球面上に投影された三角形(黒丸)が移動する様子を図6に示す。現時刻tでの三角形が次時刻tではに移動し、次に平面を横切る時刻tでは“平面の法線ベクトルnと直交する大円gns”の上の三点に縮退して移動し、最後に無限時間経過後には移動方向vに収束する。各頂点は“移動方向vとそれらを結ぶ大円g,g,g”の上を移動する。なお、移動方向vは無限時間経過後の位置であることから、以降ではpinfとも記す。
規格化時間を計測するための準備として、現時刻の位置p、次時刻の位置p、そして無限時間経過後の位置pinfを知って、現時刻での点の三次元距離(すなわち、カメラ中心Oから点Pまでの距離)dを計測できることを図7で示す。図6の“移動軌跡を表す大円の一つg”で球面を切断した断面を図7に示す。三角形OPに正弦定理を用いると、点Pまでの距離dと“現在から次時刻までの移動距離Δx”の間には
Δx/sin(p)=d/sin(pinf) (3)
の関係がある。ここで、pはpからpへの中心角であり、pinfはpinfからpへの中心角である。式(3)を変形すると、点Pまでの距離dは下式で求められる。
=Δx sin(pinf)/sin(p) (4)
ここで、大円の三点a,b,cについての「単比(abc)」は
(abc)=ac/bc=sin(ac)/sin(bc) (5)
と定義される(「射影幾何(グーリエビッチ著、東京図書)」の6頁)。この単比を用いると式(4)は式(6)で表される。この単比表現により中心投影の方式によらなくなるため、“球面カメラや眼球”の大円上を移動する上記の三点p,p,pだけでなく、“平面カメラ画像の直線”の上を移動する三点p,p,pからでも距離dを計測することができる。すなわち、画像を撮影するカメラ方式によらずに、点の距離dを三次元計測できる。
=Δx(pinf) (6)
以上の準備に基づいて、規格化時間を計測する原理を説明する。“時刻tにカメラ中心Oを横切っている平面”を図7に書き加えたのが図8である。移動速度をVとすると、“現在から次の時刻までの移動距離Δx”は“現在から次の時刻までの時間差Δt”と
Δx=V Δt (7)
の関係にあるから、式(4)および式(6)に式(7)を代入すると次式になる。
=V Δt sin(pinf)/sin(p) (8a)
=V Δt(pinf) (8b)
また、現在から平面を横切るまでの時間をtとすると、三角形OPPに正弦定理を適用して上記と同様に変形すると、距離dが下式で求められる。
=V t sin(pinf)/sin(p) (9a)
=V t(pinf) (9b)
式(8)と式(9)の比をとって整理すると、平面を横切るまでの規格化時間が下式で求められる。
=t/Δt
=(sin(pinf)/sin(p))/(sin(pinf
/sin(p)) (10a)
=(pinf)/(pinf) (10b)
ここで、大円上の四点a,b,c,dについての複比{abcd}は、“二つの単比、(abc)と(abd)、の比”として式(11a)で定義され、その複比には式(11c)の関係がある(「射影幾何(グーリエビッチ著、東京図書)」の257頁および119頁)。
{abcd}=(abc)/(abd)
=(ac/bc)/(ad/bd) (11a)
=(sin(ac)/sin(bc))
/(sin(ad)/sin(bd)) (11b)
{abcd}={badc}={cdab}={dcba} (11c)
この複比の定義(式(11a))を用いると式(10)は
={pinf} (12a)
と表される。このように、移動軌跡上の四点p,p,p,pinfが判ると、規格化時間は式(12a)の複比として求められる。
ここで、式(12a)の射影幾何学的な意味を考える。「射影幾何学(弥永と平野著、朝倉書店)」の86頁によると、「基点系a,b,cによるdの座標λを複比といい、{abcd}で表される」として複比が定義されている(「射影幾何(グーリエビッチ著、東京図書)」の119頁にも同様の記載あり)。この定義において、基点系a,b,cを基点系pinf,p,pに換え、また複比の値λをに換えると「基点系pinf,p,pによるpの座標を複比といい、{pinf}で表される」になる。従って、式(12a)は射影幾何学的には、
「規格化時間は、原点、無限遠点、単位点をそれぞれp,pinf,pとする基点系で計測したpの座標である」 (12b)
を意味する。
式(12a)の複比は射影幾何学の基本的な不変量であり、任意の射影と切断に対して変わらない――つまり、球面カメラや平面カメラなどの“任意のカメラ方式の画像”に対して複比は変わらない。従って、“球面カメラや眼球”の大円上を移動する上記の四点p,p,p,pinfだけでなく、“平面カメラ画像の直線”の上を移動する四点p,p,p,pinfからでも“平面を横切るまでの規格化時間”を複比として計測することができる。すなわち、画像を撮影するカメラの方式によらずに、規格化時間を計測できることを示している。
1.3. 複比変換と極変換により平面の三次元幾何情報を求める方法
以上の原理で用いた四つの位置p,p,p,pinfを知ることができるかどうかを考えてみる。まず、現時刻の位置pと次の時刻の位置pはカメラ画像から知ることができる。次に、無限時刻の位置は、平面(あるいはカメラ)の移動方向vに等しいから知ることができる。上記の四つの位置のうち直接に知ることができないのは、平面がカメラ中心を横切る時刻tでの位置pである。
式(10a)あるいは式(12a)を変形して得られる「複比変換」によりその位置pを推定でき、次にそのpを1.1の方法で「極変換」することにより、平面の三次元幾何情報(3次元方位ns0と横切るまでの規格化時間c0)を計測できることを以下に示す。
1.3.1 複比変換
この複比変換は、規格化時間および三つの時刻での位置p,p,pinfを知って、三次元幾何情報の決定に重要な“上記の位置p”を計算するものである。式(12a)において四つの変数,p,p,pinfが判るから、残りの変数pを求めることができる――この計算は射影幾何学の複比の計算法としてよく知られている。
この計算を具体的に数式で表す。図8の球の断面部分を取り出して図9に示す。pinfを基点にして、それからの中心角a,b,xでp,p,pの位置を表す(注:この基点は任意の位置でよい)。各種の中心角を纏めて下記に示す。
inf=a (13)
inf=b
inf=x
=b−a
=x−a
これら中心角を用いて上記の複比変換を数式で示す。式(10a)の右辺すなわち複比を、式(13)の中心角を用いて表すと
=(sin(b)/sin(b−a))
/(sin(x)/sin(x−a)) (14a)
となる。これを変形すると、pとpinfとの中心角xが
x=tan−1((sin(a)sin(b))
/(cos(a)sin(b)− sin(b−a)))
(14b)
で与えられる。従って、規格化時間および“三つの時刻の位置p,p,pinf”を与えると、平面を横切る時刻での位置pが式(14b)により計算されること、すなわち複比変換の数式が示された。
ここで、一般の動画像処理やオプティカルフローの研究では上記で用いた“次の時刻の位置p”の代わりに、“現時刻からの変化分p−p(すなわち、運動視差τであり中心角pで表される)”を扱うことが多い。オプティカルフロー・パターン(図1)の各矢印がこの変化分であり、矢印の始点が現時刻位置pで終点が次時刻位置pである。図9ではその変化分を角度τで表した。この場合の複比変換の数式を以下に示す。各種の中心角は
inf=a (15)
=τ
inf=x
inf=a+τ
=x−a
であり、式(10a)の右辺を式(15)の中心角を用いて表すと
=(sin(a+τ)/sin(τ))
/(sin(x)/sin(x−a)) (16a)
となる。これを変形すると、pとpinfとの中心角xが
x=tan−1((sin(a)sin(a+τ))
/(cos(a)sin(a+τ)− sin(τ)))(16b)
で与えられ、複比変換の別の数式が得られた。
1.3.2 平面の3次元方位と横切るまでの規格化時間の決定法
上記の複比変換を用いて、平面の3次元方位nと横切るまでの規格化時間を決定する方法を説明する。それは以下の四つのステップで行われる。
(1)規格化時間パラメータを任意に設定する。
(2)画像内の各点について、現在と次の時刻での位置p,pをカメラ画像から知り、また無限時間経過後の位置pinfを移動方向vから知って、それらを式(14b)あるいは式(16b)に代入して複比変換を行って、位置pを計算する。
(3)1.1の“平面の3次元方位nを計測する原理”に基づいて、平面の法線ベクトルnの候補を求める。すなわち、ステップ(2)で求めたpを極変換して、球面上に大円を描く。ここで、大円を描く意味を説明する。もしステップ(1)で与えた規格化時間パラメータが真の規格化時間c0であれば、図5で述べたように、それら大円の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く大円は、平面の法線ベクトルnの候補を求めたことになる。なお、上記大円の強度は“画像内の位置pの明るさ”にし、また複数の大円が交わる場所ではそれら大円の強度を加算した強度にする。
(4)以上のステップを規格化時間パラメータを変えて行い、ステップ(3)で描かれる複数の大円が一点で交差するパラメータ値c0を求める。そのパラメータ値として“平面を横切るまでの規格化時間c0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
ここで、ステップ(2)の複比変換で計算した位置pの幾何学的意味を説明しておく。そのpは、任意時刻Δtでの位置を「予測」したものである。この予測は、複比変換のベースである式(10a)の導出過程から明らかであるが、直感的には式(12b)を言い換えて
「任意時刻Δt(すなわち規格化時間)の位置を予測するには、原点、無限遠点、単位点をそれぞれp,pinf,pとする基点系において、座標がの位置pを求めればよい」
とすると理解できる。このようにして予測されるpが大円上に並ぶ時刻が、図5に示した“平面がカメラ中心を横切る時刻c0Δt(すなわちtc0)”であり、その時刻に対応して“平面を横切るまでの規格化時間c0”が決定される。これらpを極変換した大円は一点で交わり、その交差点の座標として平面の3次元方位ns0が決定される(図5)。
1.3.3 上記ステップの幾何学的意味
上述の各ステップの幾何学的意味を図10により説明する。図10(A)に示されているように、球面カメラ画像の上の各点は、現時刻の位置pから次の時刻の位置pに移動し、次に“平面がカメラ中心を横切る時刻”での位置pを経て、最後に無限時間経過後には“平面(あるいはカメラ)の移動方向vに等しい位置pinf”に到達する(図6参照)。
位置pの決定(ステップ(2)の意味):“現在と次の時刻の位置p,p”およびステップ(1)で与えた“規格化時間パラメータ”を式(14b)により複比変換して、“平面がカメラ中心を横切る時刻”での位置pを決定する。この様子を図10(A)に示す。なお、式(16b)の複比変換を用いる場合は、次時刻の位置pの代わりに“現時刻位置pから次時刻位置pへの差ベクトルτ”を用いる。
平面方位の候補群{n}の描画(ステップ(3)の意味):上記で決定された位置pを極変換して、球面上に大円、すなわち平面方位の候補群{n}を図10(A)のように描く。もしステップ(1)で与えた規格化時間パラメータが真の規格化時間c0であれば、画像内の複数の点に対応するこれら大円の交差点として平面の法線ベクトルns0が求まる。
円柱配列の座標値として三次元幾何情報を決定(ステップ(4)の意味):図10(A)の球面を平面の上に射影して、球面上の像を「円」の内部に変換する――射影する方法には、等立体角射影法、等距離射影法、正射影法等が知られている(「最新レンズ設計講座23レンズ設計に付随する諸問題(1) (中川著、写真工業、1982年)」:「昭和59年度実用原子力発電施設作業ロボット開発委託研究成果報告書(極限作業ロボット技術研究組合)」の4.2.2.1節;「昭和60年度実用原子力発電施設作業ロボット開発委託研究成果報告書(極限作業ロボット技術研究組合)」の4.2.2.1節)。その円を規格化時間パラメータを縦軸にして積み重ねて、図10(B)のような「円柱配列」にする。このようにすると、ステップ(1)の幾何学的意味がはっきりする。すなわち、ステップ(1)で任意に与えた規格化時間パラメータは、この円柱の高さ座標を指定したことになり、ステップ(2)と(3)では、その高さでの断面円――図10(A)の球面像を「円」の内部に変換したもの――を描いたことになる。ステップ(1)では任意にパラメータを与えているため、図10(B)の上面に示すように大円は一点で交差しないが、その高さが真の規格化時間c0に等しくなる断面円では、大円が一点で交差する。従って、この円柱の「高さ座標」として平面の規格化時間c0が得られ、また「断面円内での交差座標」として3次元方位nが得られる(図10(B))。
1.4 シミュレーションによる確認
1.3.2と1.3.3で説明した“平面の三次元幾何情報を計測するアルゴリズム”が正しいことを計算機シミュレーションで示す(図11)。そのシミュレーションは、実施形態A−1のフローで行った。
まず、入力データを説明する。球面カメラ(あるいは眼球)の真正面に垂直な平面があり、カメラ中心までの距離が3mである。その平面が、それに垂直な方向(すなわち、平面の法線ベクトルns0と平行な方向)に、カメラに向かって1m/秒の速度で移動する。その平面の上に8個の点があり、それらの点の“現在と次の時刻の球面上位置p,p”が入力画像データとして観測される。なお、現在から次の時刻までの時間差Δtは0.05秒であり、無限時刻の位置pinfはカメラの移動方向vに等しく視野中心にある。以上から、カメラが平面を横切るまでの時間tは3/1=3秒であり、従って規格化時間c0は3/0.05=60である。また、平面の法線ベクトルns0は視野中心にある。
現在と次の時刻の位置p,pおよび無限時間経過後の位置pinfから、前述のアルゴリズム(複比変換と極変換)により、平面の三次元幾何情報(c0とns0)を求めたシミュレーション結果を図11に示す。1.3.3で説明した各規格化時間パラメータでの“円柱の断面円”を並べて示す。各断面円は、図10(A)の球面を“1.3.3で説明した等距離射影方式(実施形態の式(103c)を参照)”で球を通る平面上に射影してある。右下が現在時刻に対応する=0での断面円で、左上の無限時刻に対応する=無限に向かって、パラメータが大きくなる順に並べてある。各断面円について説明する。各断面円には、位置p,pとパラメータから「複比変換」で計算した位置pがドットで描かれており、平面上の8個の点に対応して8個のpが描かれている――これらpは、1.3.2で述べたように、任意の時刻Δtで各点の見える位置を「予測」したものである。次に、それらpを「極変換」した8個の大円が描かれている。
最初の断面円(右下、=0)ではそれら大円が散らばって存在するが、パラメータが大きくなるにつれて収束していき、が60の断面円(右端の上から2番目)ではそれら大円が一点で交差する。これよりもが大きくなるとまた発散していく。このように、=60の高さでだけ大円が一点で交差する。この高さが上述の“平面を横切るまでの規格化時間c0”の値60に等しい。また、一点に交差する方位は視野の中心にあり、上述の“平面の法線ベクトルns0”に等しい。以上のシミュレーションから、1.3.2と1.3.3で説明した“平面の三次元幾何情報を計測するアルゴリズム”の正しいことが確認された。
1.5 移動方向に平面を横切るまでの規格化距離を計測する方法
規格化距離は、“移動方向に平面を横切るまでの距離d(この距離は図8のVtである)”を“現在から次の時刻までの移動距離Δx”で規格化したものであり、下式で表される。
=d/Δx
=Vt/Δx (17a)
式(7)を代入し、また式(1)を用いて変形すると
=Vt/(VΔt)=t/Δt
(17b)
になり、規格化距離は前述の“規格化時間”に等しいことが示された。従って、規格化時間を求める方法(1.3.2)をそのまま用いて規格化距離を計測できる。
1.6 移動方向vを知らなくても良い方法
以上では、移動方向vは既知であるとして、平面の3次元方位nとそれを横切るまでの規格化時間を計測する方法を述べた。すなわち、その方向vから“無限時刻の位置pinf”を定め、次にその位置を用いて複比変換を行い、最後に極変換を行って三次元方位nと規格化時間を求めた。
ここでは、移動方向vが未知でも“平面の三次元方位nと規格化時間”を計測できる方法を提供する。この方法により、例えばインターネット・ビデオ・映画の画像などで撮影中の移動方向が判らない場合でも“それら方位と時間”を計測できる。また、平面が移動している場合にはその移動方向は一般に判らないが、その場合でも“それら方位と時間”を移動方向vとともに計測できる。その方法の概要を説明すると、移動方向vが全ての方向にあり得ると仮定し、各移動方向に対して1.3.2の“複比変換と極変換”を行って極線を描く。それら極線が一定で交差する移動方向を求めると、それが真の移動方向vであり、またその交差点の座標として平面の三次元方位nと規格化時間が求められるものである。それは下記のステップで行われる。
(1)移動方向パラメータvを任意に設定する。
(2)そのパラメータvの方向を“無限時刻の位置pinf”とする。
(3)1.3.2のステップ(1)〜(4)を実行し、全ての規格化時間パラメータに対する極線を円柱配列(図10(B))の内部に描く。
(4)以上のステップを移動方向パラメータvを変えて行い、上記ステップで描かれる極線が一点で交差するパラメータ値vを求める。このパラメータ値が真の移動方向vである。その交差点の座標として、平面の方位ns0および平面を横切るまでの規格化時間c0が求められる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
2.平面までの規格化最短距離の計測法
平面の3次元方位nと平面までの規格化最短距離を計測する方法を提供する。ここで規格化最短距離は、平面までの最短距離dを“現在から次の時刻までにカメラ(あるいは平面)が移動した距離Δx”で規格化した距離であり、式(19)で表される。
=d/Δx (19)
この規格化最短距離と“1で説明した規格化時間”との間には、nを平面の3次元方位、vを移動方向、そして()をスカラー積として
(n・v) (20)
の関係がある。その理由を図12――平面のベクトルnと移動方向vが横たわる平面での断面――を用いて説明する。“カメラ中心Oから平面までの最短距離d”は、“移動方向に平面を横切るまでの距離Vt”の法線方向成分であるから、
=Vt(n・v) (21)
の関係がある――Vは移動速度の大きさである。この式の両辺を移動距離Δxで規格化すると、下式になり式(20)が得られた。
=d/Δx
=(Vt/Δx)(n・v)
=(Vt/(VΔt))(n・v)
(n・v) (22)
なお、上記の変形には、“現在から次の時刻までの時間差Δt”と“その間に移動する距離Δx”との次の関係を用いた。
Δx=VΔt (23)
2.1 平面の規格化最短距離と3次元方位nを計測する方法
1.3.2で述べたアルゴリズム(複比変換と極変換)に“との関係(式(20))”を組み合わせると、平面の3次元方位nと規格化最短距離を計測できる。
図13を用いて説明する。それは以下の六つのステップで行われる。
(1)規格化最短距離パラメータを任意に設定する。
(2)移動方向vを中心とする小円を考え、その半径rを任意に設定する(図13)。この小円上にある“平面の3次元方位候補n”をステップ(4)で求める。そのためには、規格化時間パラメータを下式で決まる値に設定する必要がある。
/cos(r) (24)
その理由を説明する。まず、nは“vを中心とする半径rの小円”の上にあるからn、v、そしてrの間には下式の関係があり、
cos(r)=(n・v) (25a)
またnは式(20)を満たす必要があるから、式(20)に式(25a)を代入すると
cos(r) (25b)
になり、これを変形して式(24)が得られる。
(3)画像内の各点について、現在と次の時刻での位置p,pをカメラ画像から知り、また無限時間経過後の位置pinfを移動方向vから知って、それらと規格化時間パラメータを式(14b)あるいは式(16b)に代入して複比変換を行って、位置pを計算する。
(4)ステップ(3)で求めたpを極変換して、球面上に大円gpcを描く。この大円とステップ(2)の小円との二つの交点s+s−が“平面の3次元方位候補”である(図13)。なお、この交点が式(29)で表されることを後述する。
(5)ステップ(2)〜(4)を半径rを変えて行い、ステップ(4)で求まる二つの交点s+s−からなる曲線を描く(図13)――この曲線は、2.2で述べるように“pを中心とする小円”になる。ここで、この曲線を描く意味を説明する。もしステップ(1)で与えた規格化最短距離パラメータが真の規格化最短距離s0であれば、それら曲線の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く曲線は、平面の法線ベクトルnの候補を求めたことになる。なお、上記曲線の強度は“画像内の位置pの明るさ”にし、また複数の曲線が交わる場所ではそれら曲線の強度を加算した強度にする。
(6)以上のステップを規格化最短距離パラメータを変えて行い、ステップ(5)で描かれる複数の曲線が一点で交差するパラメータ値s0を求める。そのパラメータ値として“カメラ中心Oから平面までの規格化最短距離s0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
2.2 平面の規格化最短距離と3次元方位nを計測する別の方法
まず、2.1(5)で描かれる曲線が小円であることを示し、次に、その小円描画を用いて平面の規格化最短距離s0と3次元方位ns0を計測する方法を説明する。
2.2.1 小円になることの証明
証明のために図13に各種パラメータを書き込んだものを図14に示す。これらパラメータを用いて2.1のステップ(3)〜(5)を下記のように数式で表現し、2.1(5)の曲線が小円であることを示す。
まず、ステップ(3)で述べた“位置p”を数式で表現する。すなわち、pとpinfとの中心角x(図9)は式(16b)に式(24)を代入して下式で表現される。なお、ここでは式(16b)を用いるが、それと等価な式(14b)を用いても同様にして証明できる。
tax(x)=(sin(a)sin(a+τ))
/(cos(a)sin(a+τ)
−(/cos(r))sin(τ)) (26)
次に、“そのpを極変換した大円”とステップ(2)の小円”との交点、すなわち平面の3次元方位候補s+s−を数式で表現する。三角形s+vに余弦定理を適用すると
cos(π/2)=cos(r)cos(−x)
+sin(r)sin(−x)cos(π−(αs+−α))
=cos(r)cos(x)
+sin(r)sin(x)cos(αs+−α) (27)
になる。上式のπ/2は方位候補点s+が“pの極線”上にあることに起因する。式(27)に式(26)を代入して、xを消去すると
cos(αs+−α)=−cot(r)cot(x)
=−cot(r)(cos(a)sin(a+τ)
−(/cos(r))sin(τ))
/(sin(a)sin(a+τ))
=−(cos(r)cos(a)sin(a+τ)
sin(τ))
/(sin(r)sin(a)sin(a+τ))
になり、さらに変換すると
cos(r)cos(a)+sin(r)sin(a)cos(αs+−α
sin(τ)/sin(a+τ) (28)
になる。平面方位の候補点s+s−の経度座標点αs+αs−は式(28)を変形して
αs+=α+(αs+−α
=α+cos−1((( sin(τ)/sin(a+τ))
−cos(r) cos(a))/(sin(r)sin(a)))
αs−=α−(αs+−α
=α−cos−1((( sin(τ)/sin(a+τ))
−cos(r) cos(a))/(sin(r)sin(a)))
(29)
で計算される。従って、平面方位の候補点s+s−の経度座標rが“ステップ(2)の小円の半径r”として、また経度座標点αs+αs−は式(29)で表現された。
以上の準備に基づいて、“二つの交点s+s−からなる曲線”がpを中心とする小円であることを示す。pを中心とする半径Rの小円は、三角形s+vに余弦定理を適用をして
cos(r)cos(a)
+sin(r)sin(a)cos(αs+−α)=cos(R) (30)
で表される(「幾何学大辞典2(岩田至康、槇書店)」の72頁)。式(30)と式(28)を比較すると、式(28)――すなわち、二つの交点s+s−からなる曲線――は“半径Rが下式で表されるpを中心とする小円”であることが判る。
R=cos−1 sin(τ)/sin(a+τ)) (31)
以上により、図14の二つの交点s+s−からなる曲線(すなわち式(28))は、“pを中心とする半径Rの小円”であることが示された。これは、任意の点pをこの小円に変換するとみることができ、この変換を「小円変換」と言うことにする。ここで、式(31)を現在時刻の位置p、次時刻の位置p、そして無限時刻の位置pinfで表現しておく。τ、a+τを式(15)の中心角で表現すると式(31)は下式で表される。
R=cos−1 sin(p)/sin(pinf)) (32)
式(31)では運動視差τを用いて半径Rを表現したが、次の時刻の位置pが判る場合には、式(13)を式(32)に代入して下式で与えられる。
R=cos−1 sin(b−a)/sin(b)) (33)
2.2.2. 小円変換の幾何学的意味
(1)半径Rの幾何学的意味
式(32)を式(4)を用いて変形すると
R=cos−1/(d/Δx)) (34a)
になり、さらに式(19)を代入して変形すると
R=cos−1((d/Δx)/(d/Δx))
=cos−1(d/d) (34b)
になる。
半径Rの幾何学的な意味を図15により説明する。式(34b)で決まるRは、“カメラ中心Oから距離dにある点P”を通り且つ最短距離がdの平面が存在するための必要条件を示している。すなわち、平面が存在するためには、その方位nが点の方向pから“式(34b)で決まる角度R”だけ傾いていなければならないことを示している。
そのような“点Pを通り最短距離がdの平面”は、pを回転軸として多数存在する。それら平面の垂線の足Pを全て描くと、図16の“カメラ中心Oを頂点とする直円錐(稜の長さがd、頂角が2R)”の底辺になる。この直円錐の稜と“Oを中心とする単位球”との交線が小円になる。2.2.1で述べた小円変換は、“点の方向p”をこの小円に変換するものである。
なお、式(34b)は“平面の規格化最短距離”と式(36)で定義される“点の規格化最短距離”を用いて式(35)と表すこともでき、
R=cos−1) (35)
=d/Δx (36)
また、式(34a)に式(6)を代入して下式で表すこともできる。
R=cos−1/(pinf)) (37)
(2)小円変換の幾何学的意味
以上の考察から、2.2.1の球面上の小円変換は、3次元空間内の次の変換と等価である。すなわち、「空間内の点P(方向p、距離d)」を、図16の直円錐の底の円周――すなわち“Pを通りカメラ中心Oからの最短距離がdの全平面”の法線ベクトル群{n}――へ変換するのと等価である。これが小円変換の幾何学的意味である。
2.2.3. 平面の規格化最短距離と3次元方位nを計測する別の方法
2.2.2.で説明した「小円変換」を用いて平面の規格化最短距離と3次元方位nを計測する方法を説明する。それは以下の四つのステップで行われる。
(1)規格化最短距離パラメータを任意に設定する。
(2)画像内の各点について、現在と次の時刻の位置p,pをカメラ画像から知り、また無限時間経過後の位置pinfを移動方向vから知って、小円変換の半径Rを式(32)により計算する。
(3)各点pを小円変換する。すなわち、pを中心とする半径Rの小円を球面上に描く。ここで、この小円を描く意味を説明する。もしステップ(1)で与えた規格化最短距離パラメータが真の規格化最短距離s0であれば、それら小円の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く小円は、平面の法線ベクトルnの候補を求めたことになる。なお、上記小円の強度は“画像内の位置pの明るさ”にし、また複数の小円が交わる場所ではそれら小円の強度を加算した強度にする。
(4)以上のステップを規格化最短距離パラメータを変えて行い、ステップ(3)で描かれる複数の小円が一点で交差するパラメータ値s0を求める。そのパラメータ値として“カメラ中心Oから平面までの規格化最短距離s0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
ここで、以上の小円変換法を図17により幾何学的に説明する。画像内の各点について、現在と次の時刻のp,pをカメラ画像から知り、また無限時間経過後の位置pinfを移動方向vから知り、さらに規格化最短距離パラメータがステップ(1)で与えられる。これらを式(32)に代入して半径Rを決定し、図17(A)のように小円変換を行う。すなわち、pを中心として半径Rの小円を球面上に描く。次に図17(A)の球面を、1.3.3のステップ(4)でと同様に平面の上に射影して、球面上の像を「円」の内部に変換する。その円を規格化最短距離パラメータを縦軸にして積み重ねて、図17(B)の「円柱配列」にする。
ステップ(1)で与えた規格化最短距離パラメータは、この円柱の高さ座標を指定したことになり、ステップ(2)と(3)では、その高さでの断面円――図17(A)の球面像を「円」の内部に変換したもの――を描いたことになる。ステップ(1)では任意にパラメータを与えているため、図17(B)の上面に示すように小円は一点で交差しないが、その高さが真の規格化最短距離s0に等しくなる断面円では、小円が一点で交差する。従って、この円柱の「高さ座標」として平面の規格化最短距離c0が得られ、また「断面円内の交差点の座標」として3次元方位nが得られる。
ここで、小円変換が成立するパラメータの範囲と性質を検討する。この変換が成立するのは、式(35)において|cos(R)|≦1、すなわち、
|≦|| (38)
の範囲にあるときである。この範囲では、半径Rはパラメータにより次のように変化する。=0では小円の半径Rがπ/2(すなわち大円)になり、||が大きくなるにつれて半径Rは小さくなって、||≦||でRがゼロになる。この“半径Rがゼロになる”は、図15において、“点Pを通りベクトル0Pに直交する平面”に対応する。
以上の検討に基づいて、画像内の任意の点pが円柱配列内のどのような幾何学形状に小円変換されるかを図17(C)で説明する。変換される小円の中心は高さによらずpにあり、また半径Rは上記で説明したように変化するため、点pは“回転楕円体のような立体”の表面に小円変換される。その頂点がで、回転軸がpである。画像内に複数の点があると、それらが小円変換された“回転楕円体表面”が一点で交わり、その交差点の座標として、平面の三次元方位ns0と規格化最短距離s0が得られる。なお、図17(C)ではpが円柱中心にある場合の“回転楕円体”を描いたが、中心からはずれる場合にはその楕円体は円柱からはみ出すが、その部分は描かなくてよい。
2.3 シミュレーションによる確認
2.2.3で説明した“平面の三次元幾何情報を計測するアルゴリズム”の正しいことを計算機シミュレーションで示す(図18)。そのシミュレーションは、実施形態A−3のフローで行った。
まず、入力データを説明する。球面カメラ(あるいは眼球)の真正面に垂直な平面があり、カメラ中心Oまでの距離が3mである。その平面が、それに垂直な方向(すなわち、平面の法線ベクトルns0と平行な方向)に、カメラに向かって1m/秒の速度で移動する。その平面の上に8個の点があり、それらの点の“現在と次の時刻の球面上位置p,p”が入力画像データとして観測される。なお、現在から次の時刻までの時間差Δtは0.05秒であり、従って現在から次の時刻までの移動距離Δxは0.05×1=0.05mである。無限時刻の位置pinfはカメラの移動方向vに等しく視野中心にある。以上から、平面の規格化最短距離s0は式(19)により30.05=60であり、平面の法線ベクトルns0は視野中心にある。
現在と次の時刻の位置p,pおよび無限時刻の位置pinfから、2.2.3の小円変換アルゴリズムにより、平面の三次元幾何情報(s0とns0)を求めたシミュレーション結果を図18に示す。図17(B)で説明した“各規格化最短距離パラメータでの円柱の断面円”を並べて示す。各断面円は、図17(A)の球面を“1.3.3で説明した等距離射影方式(実施形態の式(107c)を参照)”で球を通る平面上に射影してある。右下が=0での断面円であり、左上に向かってパラメータが大きくなる順に並べてある。各断面円について説明する。現在時刻の位置pがドットで描かれている。そのpを中心にして“式(32)で計算した半径Rの小円”が、平面上の8個の点に対応して描かれている。
最初の断面円(右下、=0)ではそれら小円が散らばって存在するが、パラメータが大きくなるにつれて収束していき、が60の断面円(右端の上から2番目)ではそれら小円が一点で交差する。これよりもが大きくなるとまた発散していく。このように、=60の高さだけ小円が一点で交差する。この高さが上述の“平面を横切るまでの規格化時間s0”の値60に等しい。また、一点で交差する方位は視野の中心にあり、上述の“平面の法線ベクトルns0”に等しい。以上のシミュレーションから、2.2.3で説明した“小変換アルゴリズム”の正しいことが確認された。なお、それと等価の2.1の方法でも平面の三次元幾何情報を正しく求められることをシミュレーションで確認している。
2.4 移動方向vを知らなくてもよい方法
2.1と2.2.3.では、移動方向vは既知であるとして、平面の三次元方位nと規格化最短距離を求めた。ここでは、移動方向vが未知でもそれら方位と距離を計測できる方法を提供する。1.6と類似の方法である。この方法により、例えばインターネット・ビデオ・映画の画像などで撮影中の移動方向が判らない場合でも“それら方位と距離”を計測できる。また、平面が移動している場合にはその移動方向は一般に判らないが、その場合でも“それら方位と距離”を移動方向vとともに計測できる。その方法の概要を2.2.3について説明する(2.1についても同様に行える)。移動方向vが全ての方向にあり得ると仮定し、各移動方向に対して2.2.3の“小円変換”を行って小円を描く。それら小円が一点で交差する移動方向を求めると、それが真の移動方向vであり、またその交差点の座標として平面の三次元方位nと規格化最短距離を求められるものである。それは下記のステップで行われる。
(1)移動方向パラメータvを任意に設定する。
(2)そのパラメータvの方向を“無限時刻の位置pinf”とする。
(3)2.2.3.のステップ(1)〜(4)を実行し、全ての規格化最短距離パラメータに対する小円を円柱配列(図17(B))の内部に描く。
(4)以上のステップを移動方向パラメータvを変えて行い、上記ステップで描かれる小円が一点で交差するパラメータ値vを求める。このパラメータ値が真の移動方向vである。その交差点の座標として、平面の方位ns0および規格化最短距離s0が求められる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
3.一般化
3.1 平面移動とカメラ移動
以上では平面が移動すると説明してきたが、カメラが移動する場合も同じアルゴリズムで平面の三次元幾何情報を計測できる。それは、平面移動とカメラ移動は相対的な運動であり、したがって移動方向vを反転すれば同じアルゴリズムになるからである。その等価性を、図19により説明する。
図19(B)は平面がvの方向に移動した場合であり、平面上の点もそれにともなってp,pと空間内を移動する。各時刻での球面上位置p,p(図8)は、カメラ中心Oから見た角度α,αとして観測されて決定される。無限時間経過後の球面位置pinfは平面の移動方向vに等しい。これら三つの球面上位置p,p,pinfから複比変換により“平面がカメラ中心を横切る時刻での球面上位置p”を予測し、次にそのpを極変換して平面の三次元幾何情報(3次元方位n、横切るまでの規格化時間、規格化最短距離)を計測できることを1.3.2、2.2.3で述べた。なお、t、Δt、Δx、Vはそれぞれ、平面を横切るまでの時間、現在から次の時刻までの時間差、次の時刻までの移動距離、移動速度の大きさである。
一方、図19(A)はカメラが移動した場合である。平面上の点Pを見ながらカメラ中心がO、O、Oと移動すると、点Pは各時刻でのカメラ中心から見た角度α,α,αとして観測され、球面上の位置p,p,pが決定される。無限時間経過後の球面上位置pinfは平面の移動方向vに等しい。これら位置p,p,p,pinfを一つの球面上に描くように図19(A)をモディファイすると、その図は“平面が移動した場合(図19(B))”と同じになる。図19(B)と異なるのは移動方向が反対であることだけである。以上の検討から、カメラが移動する場合も、移動方向vを半転さえすれば、前述の“平面が移動した場合のアルゴリズム(1.3.2、2.1、2.2.3)”を用いて平面の三次元幾何情報を求めることができることが判る。同様に、カメラが移動する場合の点距離の計測でも“平面が移動した場合のアルゴリズム(式(6))”を用いて計測できる。
3.2 円柱配列への投票
図10(B)では、円柱の各断面円に“球面上の大円を平面に射影した曲線”を「描画」するとした。この描画の代わりに、各断面円をメモリ配列やレジスタ配列で構成して、上記曲線に対応するメモリあるいはレジスタに「投票」をしてもよい。
また、図17(B)では、円柱の各断面円に“球面上の小円を平面に射影した曲線”を「描画」するとした。この描画の代わりに、上記と同様に「メモリあるいはレジスタへの投票」にしてもよい。
3.3 平面上での極変換
まず、極変換(双対変換とも言われる)の一般的な定義を図20により説明する。任意のベクトルaと“それを法線ベクトルとしかつ中心Oを通る平面π”を考える。そのベクトルaから平面πへの変換が広義の「極変換(あるいは双対変換)」である。このベクトルと平面を2次元的に表現するために、球面あるいは平面との交点あるいは交線が用いられる。
球面の場合には、ベクトルaとの交点をasphere、平面πとの交線(すなわち大円)をgとすると、asphereとgがそれぞれ球面の極と極線である。極asphereから極線gへの変換が「球面上の極変換」である。一方、平面の場合には、ベクトルaとの交点をaplane、平面πとの交線(すなわち直線)をlとすると、aplaneとlがそれぞれ平面上の極と極線である。極aplaneから極線lへの変換が「平面上の極変換」である。
1.3.2(3)では、pを極変換した極線を「球面上の大円」として描画した。上記の説明に基づいて、その極線を「平面上の直線」として描画しても良い。
また、2.1(5)と2.2.3(3)では、pを小円変換した小円を「球面」の上に描いた。この小円を、カメラ中心から「任意の平面」に投影して、楕円として描いてもよい。
3.4. 点までの規格化距離を計測する方法
現時刻、次の時刻、そして無限時刻の球面上位置p,p,pinfを知って、点までの規格化距離を計測できることを図7を用いて示す。ここで点の規格化距離は、点までの距離(すなわち、図7のカメラ中心Oから点Pまでの距離)dを、現在から次の時刻までにカメラ(あるいは点)が移動する距離Δxで規格化した距離である。その計測法を以下に示す。
点までの距離dを、上記三つの位置p,p,pinfを用いて式(6)で計測できることを1.2で述べた。式(6)の両辺をカメラ移動距離で規格化すると
=d/Δx
=(pinf) (39a)
となり、したがって、規格化距離を単比(pinf)として計測できることが示された。式(39a)に式(13)(あるいは式(15))を代入して中心角で表すと、下式になる。
=sin(b)/sin(b−a) (39b)
=sin(a+τ)/sin(τ) (39c)
3.5 平面カメラ
以上では球面カメラ(あるいは眼球)による画像を用いるとして説明したが、平面カメラによる画像を用いることもできる(図21)。その場合には、平面カメラで撮像された画像(白丸の三角形)を球面上の画像(黒丸の三角形)に変換して前述した“球面上のアルゴリズム”を実行すればよい。
4.ステレオ画像から三次元幾何情報を計測する方法
以上で述べた運動視アルゴリズム――すなわち、カメラ(あるいは平面)を移動して平面の三次元幾何情報を計測するアルゴリズム――のパラメータ名を両眼視の名前に変えると、ステレオ画像から三次元幾何情報を計測することができる。すなわち、運動視アルゴリズムの現時刻の位置p、次の時刻の位置p、そして無限時刻の位置pinfを、それぞれ右カメラ画像での位置p、左カメラ画像での位置p、そして“左右カメラを結ぶ視軸上の位置paxis”に置き換えると、そのアルゴリズムを用いてステレオ画像から(i)平面の3次元方位n、(ii)視軸方向に平面を横切るまでの規格化距離、(iii)平面までの規格化最短距離、そして(iv)点までの規格化距離を決定できる。それら方位と距離の計測法を以下で説明する。ここで、平面までの規格化距離、平面までの規格化最短距離、そして点までの規格化距離は、それぞれ“視軸方向に平面を横切るまでの右カメラからの距離d”、“右カメラからの平面までの最短距離d”、そして“右カメラから点までの距離d”を左右カメラ間の距離ΔxLRで規格化した距離である(図22参照)。それら距離は下式で表される。なお、上記で右カメラと左カメラを交換してもよい。
=d/ΔxLR (50)
=d/ΔxLR (51)
=d/ΔxLR (52)
4.1 運動視との対応
両眼視のパラメータ(図22)は、前述の運動視アルゴリズムに用いられたパラメータ(図19)と次のように対応している。
図22(A)に“平面上の点P”を両眼で見たときの様子を示す。左右カメラの中心O、Oから見た点Pの角度α,αが観測され、それにより球面上の位置p,pが決定される。左右カメラを結ぶ視軸上の位置paxis――無限時間経過後の位置pinf(例えば図19(B))に対応――は、視軸方向axisに等しい。また右カメラが視軸方向に平面を横切るまで移動すると考えたときのカメラ中心の位置がOである。Oから見た点Pの角度αが観測され、それにより球面上の位置pが決定される。
この図を前述の図19(A)と比較すると、名前が異なるだけで全く同じである。すなわち、図19(A)の現時刻の位置p、次の時刻の位置p、そして無限時刻の位置pinf、単位移動距離Δx、そして移動方向に平面を横切るまでの距離Vtを、それぞれ右カメラ画像での位置p、左カメラ画像での位置p、視軸上の位置paxis、左右カメラ間の距離ΔxLR、そして視軸方向に平面を横切るまでの距離dに置き換えると図22(A)になる。また、図22(B)は、図22(A)に四つの位置p,p,p,paxisを“Oを中心とする球面”の上に重ねて描くようにモディファイしたものであり、それらの四つの位置を“運動視におけるp,p,p,pinf”に置き換えると図19(B)と同じになる。
このように運動視とステレオ視の幾何学的関係は、パラメータの名前を上記のように交換すると全く同じになる。従って、前述の運動視アルゴリズム(1.3.2、2.1、2.2.3)のパラメータ名を変えることにより、同じアルゴリズムでステレオ画像から平面の三次元幾何情報を計測できることが判る。以下で詳述する。
4.2 平面の三次元方位nと“視軸方向に平面を横切るまでの規格化距離”を計測する方法
運動視アルゴリズム(1.2、1.3)と同様の手順で、平面の三次元方位nと規格化距離”を計測することができる。
4.2.1 規格化距離の複比{paxis}による表現
図22(B)において、三角形Pに正弦定理を用いると、Oから点Pまでの距離dと左右カメラ間の距離ΔxLRの間には
ΔxLR/sin(α−α)=d/sin(π−α) (53a)
の関係があり、これを球面上の位置p,p,paxisで表すと下式になる。
ΔxLR/sin(p)=−d/sin(paxis) (53b)
これを変形すると距離dは下式で求められる。
=−ΔxLR sin(paxis)/sin(p) (54a)
=−ΔxLR (paxis) (54b)
また、三角形Pに正弦定理を適用して上記と同様に変形すると、距離dが下式で求められる。
=−d sin(paxis)/sin(p) (55a)
=−d(paxis) (55b)
式(54)と式(55)の比をとって整理すると、規格化距離が複比{paxis}として下式で求められる。
=d/ΔxLR
=(sin(paxis)/sin(p))
/(sin(paxis)/sin(p)) (56a)
={paxis} (56b)
なお、この式は、式(12a)において、“運動視のパラメータ,pinf,p,p,p”を“両眼視のパラメータ,paxis,p,p,p”に交換したものになっている。
4.2.2複比変換
この複比変換は、四つの変数,p,p,paxisを知って、残りの変数pを式(56)を用いて計算する変換である。運動視の場合の複比変換(1.3.1)に対応する。
この複比変換を具体的に数式で示す。図22(B)の球の断面を取り出して図23に示す。paxisを基点にして、それから中心角c,d,xでp,p,pの位置を表す(注:この基点は任意の位置でよい)。これらの中心角を纏めて下記に示す。
axis=c (57)
axis=d
axis=x
=d−c
=x−c
これらの中心角を用いて複比変換を数式で示す。式(56a)の右辺すなわち複比を、式(57)の中心角を用いて表すと
=(sin(d)/sin(d−c))
/(sin(x)/sin(x−c)) (58a)
となる。これを変形すると、pとpaxisとの中心角xが
x=tan−1((sin(c)sin(d))
/(cos(c)sin(d)− sin(d−c)))(58b)
で与えられる。従って、規格化距離および“三つの球面上位置p,p,paxis”を与えると、“右カメラが平面を横切るときの位置p(図22(B))”が式(58b)で計算されることが示された。これが複比変換の数式である。なお、式(58b)は、式(14b)において運動視のパラメータ(規格化時間と中心角pinf,pinf,p,pinf)を両眼視のパラメータ(規格化距離と中心角paxis,paxis,p,paxis)に交換したもの――すなわち運動視のパラメータ(規格化時間と球面上位置pinf,p,p,p)を両眼視のパラメータ(規格化距離と中心角paxis,p,p,p)に交換したもの――になっている。
ここで、一般のステレオ画像処理の研究では上記で用いた“左カメラの位置p”の代わりに、“右カメラからの変化分p−p(すなわち、両眼視差σであり中心角pで表される)”を扱うことが多い。この場合の複比の変換の数式表現を以下に示す。各種の中心角は
axis=c (59)
=σ
axis=x
axis=c+σ
=x−c
であり、式(56a)の右辺を式(59)の中心角を用いて表すと
=(sin(c+σ)/sin(σ))
/(sin(x)/sin(x−c)) (60a)
となる。これを変形すると、pとpinfとの中心角xが
x=tan−1((sin(c)sin(c+σ))
/(cos(c)sin(c+σ)− sin(σ)))(60b)
で与えられ、複比変換の別の数式表現が得られた。なお、式(60b)は、式(16b)において運動視のパラメータ(規格化時間と中心角pinf,pinf,p,pinf)を両眼視のパラメータ(規格化距離と中心角paxis,paxis,p,paxis)に交換したもの――すなわち運動視のパラメータ(規格化時間と球面上位置pinf,p,p,p)を両眼視のパラメータ(規格化距離と球面上位置paxis,p,p,p)に交換したもの――になっている。
4.2.3 平面の3次元方位nと規格化距離の決定法
上記の複比変換を用いて、平面の3次元方位nと規格化距離を決定する方法を説明する。運動視の場合(1.3.2)と同様に行われる。それは以下の四つのステップで行われる。
(1)規格化距離パラメータを任意に設定する。
(2)画像内の各点について、左右カメラでの位置p,pをカメラ画像から知り、また視軸上の位置paxisを視軸方向axisから知って、それらを式(58b)あるいは式(60b)に代入して複比変換を行い、位置pを計算する。
(3)1.1の“平面の3次元方位nを計測する原理”に基づいて、平面の法線ベクトルnの候補を求める。すなわち、具体的には、ステップ(2)で求めたpを極変換して、球面上に大円を描く。ここで、大円を描く意味を説明する。もしステップ(1)で与えた規格化時間パラメータが真の規格化距離c0であれば、図5で述べたように、それら大円の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く大円は、平面の法線ベクトルnの候補を求めたことになる。なお、上記大円の強度は“画像内の位置pの明るさ”にし、また複数の大円が交わる場所ではそれら大円の強度を加算した強度にする。
(4)以上のステップを規格化距離パラメータを変えて行い、ステップ(3)で描かれる複数の大円が一点で交差するパラメータ値c0を求める。そのパラメータ値として“視軸方向に平面を横切るまでの規格化距離c0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
なお、この方法は1.3.2において、運動視のパラメータ(規格化時間と球面上位置pinf,p,p)を両眼視のパラメータ(規格化距離と球面上位置paxis,p,p)に交換したものになっている。
4.2.4 上記ステップの幾何学的意味
上記ステップの幾何学的意味を図24により説明する。1.3.3で述べた“運動視の場合の幾何学的意味”において、運動視のパラメータを両眼視のパラメータに換えたものになっている。
平面方位の候補群{n}の描画(ステップ(3)):ステップ(2)で複比変換により決定された位置pを極変換して、球面上に大円、すなわち平面方位の候補群{n}を図24(A)のように描く。
円柱配列の座標値として三次元幾何情報を決定(ステップ(4)):図24(A)の球面を、1.3.3のステップ(4)でと同様に平面の上に射影して、球面上の像を「円」の内部に変換する。その円を規格化最短距離パラメータを縦軸にして積み重ねて、図24(B)のような「円柱配列」にする。このようにすると、ステップ(1)の幾何学的意味がはっきりする。すなわち、ステップ(1)で任意に与えた規格化距離パラメータは、この円柱の高さ座標を指定したことになり、ステップ(2)と(3)では、その高さでの断面円――図24(A)の球面像を「円」の内部に変換したもの――を描いたことになる。ステップ(1)では任意にパラメータを与えているため、図24(B)の上面に示すように大円は一点で交差しないが、その高さが真の規格化距離c0に等しくなる断面円では、大円が一点で交差する。従って、この円柱の「高さ座標」として平面の規格化距離c0が得られ、また「断面円内での交差座標」として3次元方位nが得られる(図24(B))。
4.2.5 視軸方向axisを知らなくてもよい方法
以上では、視軸方向axisが既知であるとして、平面の3次元方位nと規格化距離を計測する方法を述べた。すなわち、その方向axisに等しい球面上位置としてpaxisを定め、次にその位置を用いて複比変換を行い、最後に極変換を行ってそれら方位nと距離を求めた。
ここでは、視軸方向axisが未知でも“平面の三次元方位nと規格化距離”を計測できる方法を提供する――1.6と同様の方法である。この方法により、例えばインターネットなどのステレオ画像で、撮影中の視軸方向が判らない場合でも“それら方位と距離” 視軸方向axisとともに計測できる。その方法の概要を説明すると、視軸方向axisが全ての方向にあり得ると仮定し、各視軸方向に対して4.2.3の“複比変換と極変換”を行って極線を描く。それら極線が一点で交差する視軸方向を求めると、それが真の視軸方向axis0であり、またその交差点の座標として平面の三次元方位nと規格化距離を求められるものである。それは下記のステップで行われる。
(1)移動方向パラメータaxisを任意に設定する。
(2)そのパラメータaxisの方向を“球面上の位置paxis”とする。
(3)4.2.3.のステップ(1)〜(4)を実行し、全ての規格化距離パラメータに対する極線を円柱配列(図24(B))の内部に描く。
(4)以上のステップを視軸方向パラメータaxisを変えて行い、上記ステップで描かれる極線が一点で交差するパラメータ値axis0を求める。このパラメータ値が真の視軸方向axis0である。その交差点の座標として、平面の方位ns0および平面を横切るまでの規格化距離c0が求められる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
4.3 平面までの規格化最短距離の計測法
平面の3次元方位nと“式(51)の規格化最短距離”を計測する方法を提供する――2で述べた運動視のアルゴリズムと同様の方法で行われる。この規格化最短距離と“4.2.3で説明した規格化距離”との間には、nを平面の3次元方位、axisを視軸方向、そして()をスカラー積として
(n・axis) (61)
の関係がある。その理由を図25を用いて説明する。平面の法線ベクトルnと視軸方向axisが横たわる平面での断面を図25に示す。“右カメラ中心Oから平面までの最短距離d”は、“視軸方向に平面を横切るまでの距離d”の法線方向の成分であるから、
=d(n・axis) (62)
の関係がある。この式の両辺をカメラ間距離ΔxLRで規格化すると、下式になり式(61)が得られる。
=d/ΔxLR=(d/ΔxLR)(n・axis
(n・axis) (63)
4.3.1 平面の規格化最短距離と3次元方位nを計測する方法
4.2.3で述べたアルゴリズム(複比変換と極変換)に“との関係(式(61))”を組み合わせると、平面の3次元方位nと規格化最短距離を計測できることを図26を用いて説明する。――2.1で述べた運動視のアルゴリズムと同様の方法で行われる。それ以下の六つのステップで行われる。
(1)規格化最短距離パラメータを任意に設定する。
(2)視軸方向axisを中心とする小円を考え、その半径rを任意に設定する(図26)。この小円上にある“平面の3次元方位候補n”をステップ(4)で求める。そのためには、規格化距離パラメータを下式で決まる値に設定する必要がある。
/cos(r) (64)
その理由を説明する。まず、nは“axisを中心とする半径rの小円”の上にあるからn、axis、そしてrの間には下式の関係があり、
cos(r)=(n・axis) (65a)
またnは式(61)を満たす必要があるから、式(61)に式(65a)を代入すると
cos(r) (65b)
になり、これを変形して式(64)が得られる。
(3)画像内の各点について、左右カメラでの球面位置p,pをカメラ画像から知り、また視軸上の位置paxisを視軸方向axisから知って、それらと規格化距離パラメータを式(58b)あるいは式(60b)に代入して複比変換を行って、位置pを計算する。
(4)ステップ(3)で求めたpを極変換して、球面上に大円gpcを描く。この大円とステップ(2)の小円と二つの交点s+s−が“平面の3次元方位候補”である(図26)。なお、この交点の緯度座標はr(図26参照)であり、また経度座標点αs+αs−は、式(29)において“運動視のパラメータα,a,τ”を“両眼視のパラメータα,c,σ”に置き換えて、
αs+=α+cos−1((( sin(σ)/sin(c+σ))
−cos(r) cos(c))/(sin(r)sin(c)))
αs−=α−cos−1((( sin(σ)/sin(c+σ))
−cos(r) cos(c))/(sin(r)sin(c)))
(65c)
で計算される。ここで、αとcは、“図14の運動視のパラメータαとa(すなわち、pの経度座標と緯度座標)”に対してpの経度座標と緯度座標である。
(5)ステップ(2)〜(4)を半径rを変えて行い、ステップ(4)で求まる二つの交点s+s−からなる曲線を描く(図26)――この曲線は、4.3.2で述べるように“pを中心とする小円”になる。ここで、この曲線を描く意味を説明する。もしステップ(1)で与えた規格化最短距離パラメータが真の規格化最短距離s0であれば、それら曲線の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く曲線は、平面の法線ベクトルnの候補を求めたことになる。なお、上記曲線の強度は“画像内の位置pの明るさ”にし、また、複数の曲線が交わる場所ではそれら曲線の強度を加算した強度にする。
(6)以上のステップを規格化最短距離パラメータを変えて行い、ステップ(5)で描かれる複数の曲線が一点で交差するパラメータ値s0を求める。そのパラメータ値として“右カメラ中心Oから平面までの規格化最短距離ds0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点の検出の代わりに、強度がピークになる点を検出してもよい。
4.3.2 平面の規格化最短距離と3次元方位nを計測する別の方法
図26の“両眼視に関するパラメータp,p,paxis,axis”を“運動視に関するパラメータp,p,pinf,v”に換えると、図13と同じになる。従って、4.3.1のステップ(5)の曲線は、2.2.1での証明をそのまま用いることが出来て、「pを中心として半径がRの小円」である。その半径Rは、式(31)、式(32)の“運動視のパラメータτ,a,p,pinf,”を“両眼視のパラメータσ,c,p,paxis”に換えて下式で表される。
R=cos−1 sin(σ)/sin(c+σ)) (66a)
=cos−1 sin(p)/sin(paxis)) (66b)
以上により、図26の二つの交点s+s−からなる曲線は、“pを中心とする半径Rの小円”であることが示された。これは、任意の点pをこの小円に変換するとみることができ、この変換を「小円変換」と言うことにする。この小円変換の性質は運動視と同じであり、2.2.2に示されている。なお、式(66a)では両眼視差σを用いて半径Rを表現したが、左カメラでの位置Pが判る場合には、式(57)を式(66b)に代入して下式で与えられる。
R=cos−1 sin(d−c)/sin(d)) (66c)
以上の準備に基づいて、「小円変換」を用いて平面の規格化最短距離と3次元方位nを計測する別法を説明する。それは以下の四つのステップで行われる――2.2.3で述べた運動視のアルゴリズムと同様の手順である。
(1)規格化最短距離パラメータを任意に設定する。
(2)画像内の各点について、左右カメラでの位置p,pを画像から知り、また“左右カメラを結ぶ視軸上の位置paxis”を視軸方向axisから知って、小円変換の半径Rを式(66b)により計算する。
(3)各点pを小円変換する。――すなわち、pを中心とする半径Rの小円を球面上に描く。ここで、この小円を描く意味を説明する。もしステップ(1)で与えた規格化最短距離パラメータが真の規格化最短距離s0であれば、それら小円の交差点として平面の法線ベクトルns0が求まる。しかし、ステップ(1)では任意にパラメータを与えているため、一般には一点で交差しない。従って、ここで描く小円は、平面の法線ベクトルnの候補を求めたことになる。なお、上記小円の強度は“画像内の位置pの明るさ”にし、また複数の小円が交わる場所ではそれら小円の強度を加算した強度にする。
(4)以上のステップを規格化最短距離パラメータを変えて行い、ステップ(3)で描かれる複数の小円が一点で交差するパラメータ値s0を求める。そのパラメータ値として“右カメラ中心Oから平面までの規格化最短距離s0”が得られる。また、上記の交差点の座標として、平面の方位ns0が得られる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
ここで、以上の小円変換法を図27により幾何学的に説明する。画像内の各点について、左右カメラでの位置p,pを画像から知り、また“左右カメラを結ぶ視軸上の位置paxis”を視軸方向axisから知り、さらに規格化最短距離パラメータがステップ(1)で与えられる。これらを式(66b)に代入して半径Rを決定し、小円変換を行う(図27(A))――。すなわち、pを中心として半径Rの小円を球面上に描く。次に、図27(A)の球面を、1.3.3のステップ(4)でと同様に平面の上に射影して、球面上の像を「円」の内部に変換する。その円を規格化最短距離パラメータを縦軸にして積み重ねて、図27(B)の「円柱配列」にする。
ステップ(1)で与えた規格化最短距離パラメータは、この円柱の高さ座標を指定したことになり、ステップ(2)と(3)では、その高さでの断面円――図27(A)の球面像を「円」の内部に変換したもの――を描いたことになる。ステップ(1)では任意にパラメータを与えているため、図27(B)の上面に示すように小円は一点で交差しないが、その高さが真の規格化最短距離s0に等しくなる断面円では、小円が一点で交差する。従って、この円柱の「高さ座標」として平面の規格化最短距離s0が得られ、また「断面円内での交差座標」として3次元方位ns0が得られる。
4.3.3 視軸方向axisを知らなくてもよい方法
4.3.1と4.3.2では、視軸方向axisは既知であるとして、平面の三次元方位nと規格化最短距離を求めた。ここでは、視軸方向axisが未知でもそれら方位と距離を計測できる方法を提供する。2.5と類似の方法である。この方法により、例えばインターネットなどのステレオ画像で、撮影中の視軸方向が判らない場合でも“それら方位と距離”を視軸方向axisとともに計測できる。その方法の概要を4.3.2について説明する(4.3.1についても同様に行える)。視軸方向axisが全ての方向にあり得ると仮定し、各視軸方向に対して4.3.2の“小円変換”を行って小円を描く。それら小円が一点で交差する視軸方向を求めると、それが真の視軸方向axis0であり、またその交差点の座標として平面の三次元方位nと規格化最短距離を求められるものである。それは下記のステップで行われる。
(1)移動方向パラメータaxisを任意に設定する。
(2)そのパラメータaxisの方向を球面上の位置paxisとする。
(3)4.3.2のステップ(1)〜(4)を実行し、全ての規格化最短距離パラメータに対する小円を円柱配列(図27(B))の内部に描く。
(4)以上のステップを視軸方向パラメータaxisを変えて行い、上記ステップで描かれる小円が一点で交差するパラメータ値axis0を求める。このパラメータ値が真の視軸方向axis0である。その交差点の座標として、平面の方位ns0および規格化最短距離s0が求められる。なお、上記の交差点検出の代わりに、強度がピークになる点を検出してもよい。
4.4 一般化
4.4.1 円柱配列への投票
図24(B)では円柱の各断面円に“球面上の大円を平面に射影した曲線”を「描画」するとした。この描画の代わりに、各断面円をメモリ配列やレジスタ配列で構成して、上記曲線に対応するメモリあるいはレジスタに「投票」をしてもよい。
また、図27(B)では、円柱の各断面円に“球面上の小円を平面に射影した曲線”を「描画」するとした。この描画の代わりに、上記と同様に「メモリあるいはレジスタへの投票」にしてもよい。
4.4.2 平面上での極変換
4.2.3(3)では、pを極変換した極線を「球面上の大円」として描画した。その極線を、3.3と同様に「平面上の直線」として描画してもよい。
また、4.3.1(5)と4.3.2(3)では、pを小円変換した小円を「球面」の上に描いた。この小円を、3.3と同様に、カメラ中心から「任意の平面」に投影して楕円として描いてもよい。
4.4.3 点までの規格化距離を計測する方法
式(39a)において、“運動視のパラメータΔx,p,p,pinf”を“両眼視のパラメータΔxLR,p,p,paxis”に置き換えると
=d/ΔxLR
=(paxis) (67a)
になる。この式により、点までの規格化距離を計測できる。式(67a)に式(57)(あるいは式(59))を代入して中心角で表すと、下式になる。
=sin(d)/sin(d−c) (67b)
=sin(c+σ)/sin(σ) (67c)
4.4.4 平面カメラ
以上では球面カメラ(あるいは眼球)による画像を用いるとして説明したが、平面カメラによる画像を用いる事もできる。その場合には、3.5と同様に、平面カメラで撮像された画像を球面上に変換して、以上で説明したアルゴリズムを実行すればよい。
以上で、本発明の原理的な説明を終了し、以下、本発明の各種の実施形態について説明する。尚、以下に説明する各種ブロック図は、図2,図3に示すコンピュータシステム300の機能ブロックと捉えることもでき、本発明の画像計測装置をハードウェアで構成したときの各種実施形態と捉えることもできる。また、以下に説明する各種フローチャートは、図2,図3に示すコンピュータシステム300にインストールされて実行される、本発明にいう画像計測プログラムの各種実施形態と捉えることもでき、本発明の画像計測方法の各種実施形態と捉えることもできる。
実施形態A運動視
実施形態A−1.(平面の3次元方位ns0と横切るまでの規格化時間c0の計測)
掲記の計測、すなわち1.3.2の方法を図28の実施形態で説明する。それは図29に示す以下のフローで行われる。
(Start)
(1)無限時刻の位置pinfを下記のようにして設定する(A−1−1)。カメラ11で得られた、現在と次の時刻での全点の位置{},{}を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から「移動方向vの抽出ユニット14」に入力して、移動方向vを抽出する――この抽出を行う方法と実施形態は、特許(特公平06−14355号公報)に述べられている。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時刻の位置pinf”を設定する。
(2)規格化時間パラメータを「パラメータの走査ユニット16」により下限値c,minから上限値c,maxまで走査する(A−1−2,A−1−3,A−1−16)。
を走査)
(3)画像内の各アドレスiを下限値iminから上限値imaxまで走査する(A−1−4,A−1−5,A−1−15)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−1−6)。
(5)以上で設定された四つのパラメータ,pinfを「複比変換ユニット17」に入力して位置を出力する。位置の計算は、そのユニット内で次の二つのステップで行われる。
(a)とpinfとの中心角xの計算(A−1−7)
,pinfから、xを式(14b)により下式で計算する(図9参照)。
x=tan−1((sin(a)sin(b))
/(cos(a)sin(b)−・sin((b)−(a)))
(100a)
(b)の計算(A−1−8)
球面上の位置を、上記のxを用いて下式で計算する。
=cos(x) Γ+sin(x) Γ (100b)
ここで、ΓとΓは、[×]および||をそれぞれベクトルの外積演算及び絶対値演算として下式で計算される。
Γ=v (100c)
Γ=[v×]/|[v×]|
Γ=[Γ×Γ
(6)上記の位置を「極変換ユニット18」により球面上の大円に極変換する(1.3.3と図10(A)参照)。その極変換は、ユニット内の次の二つのステップで行われる(図30(A)参照)。
(a)を極座標に変換(A−1−9)
を直交座標および“球面上の極座標”で
=(cXcYcZ) (101a)
=(αβ) (101b)
と表現して、の極座標成分(経度αと緯度β)を下式で計算する。
α=tan−1cYcX) (101c)
β=tan−1(√(cX cY )/cZ)) (101d)
ここで、Oは“球面上の原点”の単位ベクトル、XとYはX軸とY軸の単位ベクトルである。
(kを走査)
(b)の極変換(A−1−12)
を極変換した球面上の大円――すなわち、その大円を構成する任意の点GC(そのアドレスをkとする)の座標(経度αGCと緯度βGC)――はの座標αβで決まり、式(102b)で表される(幾何学大辞典2(岩田至康、槇書店)」の72頁)。
GC=(αGCβGC) (102a)
cos(αGCα)=−cot(βGC)cot(β) (102b)
大円の具体的な計算は、kを下限値kminから上限値kmaxまで走査して次のように行われる。ΔβGCを緯度分解能として緯度βGCをkΔβGCと計算し、その緯度を用いて経度αGCを下式で計算する。
αGCα+cos−1(cot(βGC)cot(β)) (102c)
(7)上記の大円を構成する点GCを、「円柱配列投票ユニット19」の高さの断面円内の、極座標(傾角αGC,Proj、動径βGC,Proj)で表される点GC,Projに変換して投票する(A−1−13)――その投票は“位置の明るさ”を加算して行われる(1.3.3、図10(B)、そして図30(B)を参照)。その変換は一般的にはf()を射影関数として、
βGC,Proj=f(βGC) (103a)
αGC,ProjαGC (103b)
で表される――f()の詳細は文献(「最新レンズ設計講座23レンズ設計に付随する諸問題(1)(中川著、写真工業、1982年)」:「昭和59年度実用原子力発電施設作業ロボット開発委託研究成果報告書(極限作業ロボット技術研究組合)」の4.2.2.1節)を参照されたい。等距離射影方式の場合にはf()=1であり、βGC,Projは下式で与えられる。
βGC,ProjβGC (103c)
以上を纏めると、大円を構成する“球面上の点GC”を断面円内の“平面上の点GC,Proj”に変換して、その点に“位置の明るさ”を投票(加算)する。各断面円はレジスタ配列あるいはメモリ配列で実現できる。なお、“球面上で大円に極変換するアルゴリズム”とその“その大円を円内に射影して投票するアルゴリズム”は、文献(「昭和60年度実用原子力発電施設作業ロボット開発委託研究成果報告書(極限作業ロボット技術研究組合)」の4.2.2.1節)に詳しく述べられている。
(kを走査(A−1−14))
(8)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(103)により変換されている。
(iを走査(A−1−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。なお、上記で述べた、球面上の極変換を“円の内部に対応するレジスタ配列”に投票するハードウェアについては、特公平01−57831号公報、特公平01−59619号公報、特公平06−70795号公報、特公平06−70796号公報に詳しく記載されている。
を走査(A−1−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(11)「ピーク抽出ユニット20」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化時間c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−1−17)。このフローを用いて行われた計算機シミュレーション結果を図11に示す。
(End)
実施形態A−2.(“平面の3次元方位ns0と横切るまでの規格化時間c0”を移動方向vを知らずに計測)
掲記の計測、すなわち1.6の方法を図31の実施形態で説明する。それは実施形態A−1をモディファイした、図32に示す、以下のフローで行われる。下記の(2)から(10)までのステップは、実施形態A−1の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(A−2−3)。
(2)規格化時間パラメータを「パラメータの走査ユニット16」により、下限値c,minから上限値c,maxまで走査する(A−2−4,A−2−5,A−2−16)。
を走査)
(3)画像内の各アドレスiを下限値iminから上限値imaxまで走査する(A−2−6,A−2−7,A−2−15)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−2−8)。
(5)以上で設定された四つのパラメータ,pinfを「複比変換ユニット17」に入力して、位置を出力する(A−2−9)。
(6)上記の位置を「極変換ユニット18」により球面上の大円に極変換する(A−2−10)。
(kを走査)
(7)その大円を構成する点GCを、「円柱配列投票ユニット19」の“高さの断面円内の点”に変換して投票する(A−2−13)。
kを走査(A−2−14)
(8)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(103)により変換されている。
(iを走査(A−2−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(A−2−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(vを走査(A−2−17))
(11)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット20」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化時間c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−2−18)。
(End)
実施形態A−3. (平面の3次元方位ns0と規格化最短距離s0の計測)
掲記の計測、すなわち、2.2.3の方法を図33の実施形態で説明する。それは、図34に示す以下のフローで行われる。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時刻の位置pinf”を設定する(A−3−1)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット22」により下限値s,minから上限値s,maxまで走査する(A−3−2,A−3−3,A−3−15)。
を走査)
(3)画像内の各アドレスiを下限値iminから上限値imaxまで走査する(A−3−4,A−3−5,A−3−14)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−3−6)。
(5)以上で設定された四つのパラメータ,pinfを「半径Rの計算ユニット23」に入力して、半径Rと位置を出力する(A−3−7)。そのユニットの中で、半径Rが式(33)により下式で計算される。
R=cos−1 sin(b−a)/sin(b)) (104)
(6)上記の半径Rと位置を「小円変換ユニット24」に入力して、小円変換――すなわち、位置をそれを中心とする半径Rの“球面上の小円”に変換――を行う(2.2.1と図17(A)参照)。その小円変換は、ユニット内の次の二つのステップで行われる(図35(A)参照)。
(a)を極座標に変換(A−3−8)
を直交座標および“球面上の極座標”で
=(0X0Y0Z) (105a)
=(αβ) (105b)
と表現して、の極座標成分(経度αと緯度β)を下式で計算する。
α=tan−10Y0X) (105c)
β=tan−1(√(0X 0Y )/0Z)) (105d)
kを走査(A−3−9,A−3−10,A−3−13)
(b)小円変換(A−3−11)
を小円変換した球面上の大円――すなわち、その小円を構成する任意の点SC(そのアドレスをkとする)の座標(経度αSCと緯度βSC)――はの座標αβと半径Rで決まり、式(106b)で表される。この式は、図35(A)のパラメータを用いて式(30)を表したものである。
SC=(αSCβSC) (106a)
cos(βSC)cos(β
+sin(βSC)sin(β)cos(αSCα
=cos(R) (106b)
小円の具体的な計算は、kを走査して次のように行われる。ΔβSCを緯度分解能として緯度βSCをkΔβSCと計算し、その緯度を用いて経度αSCを下式で計算する。
αSCα+cos−1((cos(R)−cos(βSC)cos(β))
/(sin(βSC)sin(β))) (106c)
(7)上記の小円を構成する点SCを、「円柱配列投票ユニット25」の高さの断面円内の、極座標(傾角αSC,Proj、動径βSC,Proj)で表される点SC,Projに変換して投票する(A−3−12)――その投票は“位置の明るさ”を加算して行われる(2.2.3、図17(B)、そして図35(B)を参照)。その変換はf()を射影関数として、下式で表される。
βSC,Proj=f(βSC) (107a)
αSC,ProjαSC (107b)
等距離射影方式の場合にはf()=1であり、βSC,Projは下式で与えられる。(実施形態A−1(7)参照)。
βSC,ProjβSC (107c)
以上を纏めると、小円を構成する“球面上の点SC”を断面円内の“平面上の点SC,Proj”に変換して、その点に“位置の明るさ”を投票(加算)する。各断面円はレジスタ配列あるいはメモリ配列で実現できる。
(kを走査(A−3−13))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(107)により変換されている。
(iを走査(A−3−14))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(A−3−15)
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(11)「ピーク抽出ユニット26」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−3−16)。このフローを用いて行われた計算機シミュレーション結果を図18に示す。
(End)
実施形態A−4.(“平面の3次元方位ns0と規格化最短距離s0”を移動方向vを知らずに計測)
掲記の計測、すなわち2.4の方法を図36の実施形態で説明する。それは、実施形態A−3をモディファイした、図37に示す、以下のフローで行われる。下記の(2)から(10)までのステップは、実施形態A−3の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(A−4−1,A−4−2,A−4−17)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(A−4−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(A−4−4,A−4−5,A−4−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(A−4−6,A−4−7,A−4−15)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−4−8)。
(5)以上で設定された四つのパラメータ,pinfを「半径Rの計算ユニット23」に入力して、半径Rと位置を出力する(A−4−9)。
(6)この半径Rと位置を「小円変換ユニット24」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する(A−4−10)。
(kを走査A−4−11,A−4−12,A−4−14)
(7)その小円を構成する点SCを、「円柱配列投票ユニット」の“高さの断面円内の点”に変換して投票する(A−4−13)。
(kを走査A−4−14)
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(107)により変換されている。
(iを走査(A−4−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(A−4−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(vを走査(A−4−17))
(11)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット26」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−4−18)。
(End)
実施形態A−5. (“点の規格化距離”の計測)
掲記の計測、すなわち、3.4の方法を図38の実施形態で説明する。それは、図39に示す以下のフローで行われる。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(A−5−1)。
(2)現在と次の時刻の位置p,pを「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−5−2)。
(3)以上で設定された三つのパラメータp,p,pinfを「点距離計算ユニット27」に入力して、点までの規格化距離が出力される(A−5−3)。の計算は、ユニット内で式(39b)を計算して行われる。
(End)
実施形態A−6. (“平面の3次元方位ns0と横切るまでの規格化時間c0”を運動視差τにより計測)
掲記の計測、すなわち1.3.2の方法において、“運動視差τによる複比変換(式16b))”を用いる場合を図40の実施形態で説明する。それは、図41に示す、以下のフローで行われる。下記の(7)から(12)までのステップは、実施形態A−1の対応するステップと同じである。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時刻の位置pinf”を設定する(A−6−1)
(2)規格化時間パラメータを「パラメータの走査ユニット16」により、下限値c,minから上限値c,maxまで走査する(A−6−2,A−6−3,A−6−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(A−6−4,A−6−5,A−6−15)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−6−6)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、運動視差τ(すなわち、)を出力する(A−6−7)。この運動視差は「従来技術および発明が解決しようとする課題」で述べた局所運動であり、それを計測するアルゴリズムとその実現方法については詳しく報告されている(特開平05−165956号公報、特開平05−165957号公報、特開平06−044364号公報、特開平09−081369号公報;“2次元相関およびコンボリューションをハフ平面のρ座標に沿って1次元的に行う方法,” 川上と岡本, 信学技報, vol. IE96−19, pp.31−38, 1996;“A cell model for the detection of local image motion on the magnocellular pathway of the visual cortex,”Kawakami, S. and Okamoto, H., Vision Research, vol. 36, pp. 117−147, 1996)。
(6)以上で設定された四つのパラメータτ,,pinfを「複比変換ユニット17」に入力して、位置を出力する。位置の計算は、そのユニット内で次の二つのステップで行われる。
(a)とpinfとの中心角xの計算(A−6−8)
,pinfから、xを式(16b)により下式で計算する。
x=tan−1((sin(a)sin(a+τ))
/(cos(a)sin(a+τ)− sin(τ)))
(110a)
(b)の計算(A−6−9)
球面上の位置を、上記のxを用いて下式で計算する。
=cos(x) Γ+sin(x) Γ (110b)
ここで、ΓとΓは実施形態A−1の式(100c)で計算される。
(7)上記の位置を「極変換ユニット18」により球面上の大円に極変換する(A−6−10)。
(kを走査(A−6−11,A−6−12,A−6−14))
(8)その大円を構成する点GCを、「円柱配列投票ユニット19」の“高さの断面円内の点”に変換して投票する(A−6−13)。
(kを走査(A−6−14))
(9)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(103)により変換されている。
(iを走査(A−6−15))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(A−6−16))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(12)「ピーク抽出ユニット20」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化時間c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−6−17)。
(End)
実施形態A−7.(“平面の3次元方位ns0と横切るまでの規格化時間c0”を移動方向vを知らずに、かつ運動視差τにより計測)
掲記の計測、すなわち1.6の方法において“運動視差τによる複比変換(式16b))”を用いる場合を図42の実施形態で説明する。それは、実施形態A−6をモディファイした、図43に示す以下のフローで行われる。下記の(2)から(11)までのステップは、実施形態A−6の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(A−7−1,A−7−2,A−7−18)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(A−7−3)。
(2)規格化時間パラメータを「パラメータの走査ユニット16」により、下限値c,minから上限値c,maxまで走査する(A−7−4,A−7−5,A−7−17)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(A−7−6,A−7−7,A−7−16)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−7−8)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、運動視差τ(すなわち、)を出力する(A−7−9)。
(6)以上で設定された四つのパラメータτ,,pinfを「複比変換ユニット17」に入力して、位置を出力する(A−7−10)。
(7)上記の位置を「極変換ユニット18」により球面上の大円に極変換する(A−7−11)。
(kを走査(A−7−12,A−7−13,A−7−15))
(8)その大円を構成する点GCを、「円柱配列投票ユニット19」の“高さの断面円内の点”に変換して投票する(A−7−14)。
(kを走査(A−7−15))
(9)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(103)により変換されている。
(iを走査(A−7−16))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(A−7−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(vを走査(A−7−18))
(12)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット20」により抽出する。この配列に対応する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化時間c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−7−19)。
(End)
実施形態A−8. (“平面の3次元方位ns0と規格化最短距離s0”を運動視差τにより計測)
掲記の計測、すなわち2.2.3の方法において、“運動視差τによる小円変換(式31))”を用いる場合を図44の実施形態で説明する。それは、図45に示す以下のフローで行われる。下記の“(1)から(4)”および“(7)から(12)”までは実施形態A−3の対応するステップと同じであり、また(5)は実施形態A−6の対応するステップと同じである。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(A−8−1)
(2)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(ステップA−8−2,A−8−3,A−8−15)。
を走査)
(3)画像内の各アドレスiを下限値iminから上限値imaxまで走査する(A−8−4,A−8−5,A−8−14)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−8−6)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、運動視差τ(すなわち、)を出力する(A−8−7)。
(6)以上で設定された四つのパラメータτ,,pinfを「半径Rの計算ユニット23」に入力して、半径Rと位置を出力する(A−8−8)。そのユニットの中で、半径Rが式(31)により下式で計算される。
R=cos−1 sin(τ)/sin(a+τ)) (115)
(7)この半径Rと位置を「小円変換ユニット24」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する(A−8−9)。
(kを走査(A−8−10,A−8−11,A−8−13))。
(8)その小円を構成する点SCを、「円柱配列投票ユニット25」の“高さの断面円内の点”に変換して投票する(A−8−12)。
(kを走査(A−8−13))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(107)により変換されている。
(iを走査(A−8−14))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(A−8−15))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(12)「ピーク抽出ユニット26」により、円柱配列の中で“投票された強度が最大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−8−16)。このフローを用いて行われた計算機シミュレーション結果を図18に示す。
(End)
実施形態A−9.(“平面の3次元方位ns0と規格化最短距離s0”を移動方向vを知らずに、かつ運動視差τにより計測)
掲記の計測、すなわち2.5の方法において“運動視差τによる小円変換(式31))”を用いる場合を図46の実施形態で説明する。それは、実施形態A−8をモディファイした、図47に示す、以下のフローで行われる。下記の(2)から(11)までのステップは、実施形態A−8の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmax)にわたって、“移動方向パラメータv”を走査する(A−9−1,A−9−2,A−9−18)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(A−9−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(A−9−4,A−9−5,A−9−17)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(A−9−6,A−9−7,A−9−16)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−9−8)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、運動視差τ(すなわち、)を出力する(A−9−9)。
(6)以上で設定された四つのパラメータτ,,pinfを「半径Rの計算ユニット23」に入力して、半径Rと位置を出力する(A−9−10)。
(7)この半径Rと位置を「小円変換ユニット24」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する(A−9−11)。
(kを走査(A−9−12,A−9−13,A−9−15))
(8)その小円を構成する点SCを、「円柱配列投票ユニット25」の“高さの断面円内の点”に変換して投票する(A−9−14)。
(kを走査A−9−15))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(107)により変換されている。
(iを走査(A−9−16))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(A−9−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(vを走査(A−9−18))
(12)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット26」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(A−9−19)。
(End)
実施形態A−10. (“点の規格化距離”を運動視差τにより計測)
掲記の計測、すなわち3.4の方法において、“運動視差τによる計測法(式39c))”を用いる場合を図48の実施形態で説明する。それは図49に示す以下のフローで行われる。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(A−10−1)
(2)現在と次の時刻の位置p,pを「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(A−10−2)。
(3)現在と次の時刻の位置p,pを「τ決定ユニット28」に入力して、運動視差τ(すなわち、p−p)を出力する(A−10−3)。
(4)以上で設定された三つのパラメータτ,p,pinfを「点距離計算ユニット27」に入力して、点までの規格化距離が出力される(A−10−4)。の計算は、ユニット内で式(39c)を計算して行われる。
(End)
実施形態B 両眼視
実施形態B−1. (平面の3次元方位ns0と横切るまでの規格化距離c0の計測)
掲記の計測、すなわち4.2.3の方法を図50の実施形態で説明する。それは、図51に示す以下のフローで行われる。ステップ(6)以降は実施形態A−1と同じである。
(Start)
(1)ステレオカメラの幾何学的配置から“左右カメラを結ぶ視軸方向axis”は一般に判っている。「paxis設定ユニット115」により、この視軸方向axisに等しいとして“視軸上の位置paxis”を設定する。
(2)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(B−1−2,B−1−3,B−1−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−1−4,B−1−5,B−1−15)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−1−6)。
(5)以上で設定された四つのパラメータ,paxisを「複比変換ユニット117」に入力して位置を出力する。位置の計算は、そのユニット内で次の二つのステップで行われる。
(a)とpaxisとの中心角xの計算(B−1−7)
,paxisから、xを式(58b)により下式で計算する(図23参照)。
x=tan−1((sin(c)sin(d))
/(cos(c)sin(d)− sin(d)−(c)))
(150a)
(b)の計算
球面上の位置を、上記のxを用いて下式で計算する。
=cos(x) Γ+sin(x) Γ (150b)
ここで、ΓとΓは、[×]および||をそれぞれベクトルの外積演算および絶対値演算として下式で計算される。
Γ=axis (150c)
Γ=[axis×]/|[axis×]|
Γ=[Γ×Γ
(6)上記の位置を、「極変換ユニット118」により球面上の大円に極変換する(図24(A)参照)。その極変換は、ユニット内の次の二つのステップで行われる(図30(A)参照)。
(a)を極座標に変換(B−1−9)
を直交座標および“球面上の極座標”で
=(cXcYcZ) (151a)
=(αβ) (151b)
と表現して、の極座標成分(経度αと緯度β)を下式で計算する。
α=tan−1cYcX) (151c)
β=tan−1(√(cX cY )/cZ)) (151d)
(kを走査(B−1−10,B−1−11,B−1−14))
(b)の極変換(B−1−12)
を極変換した球面上の大円――すなわち、その大円を構成する任意の点GC(そのアドレスをkとする)の座標(経度αGC、緯度βGC)――はの座標αβで決まり、式(152b)で表される。
GC=(αGCβGC) (152a)
cos(αGCα)=−cot(βGC)cot(β) (152b)
大円の具体的な計算は、kを下限値kminから上限値kmaxまで走査して次のように行われる。ΔβGCを緯度分解能として緯度βGCをkΔβGCと計算し、その緯度を用いて経度αGCを下式で計算する。
αGCα+cos−1(cot(βGC)cot(β)) (152c)
(7)上記の大円を構成する点GCを、「円柱配列投票ユニット119」の高さの断面円内の、極座標(傾角αGC,Proj、動径βGC,Proj)で表される点GC,Projに変換して投票する(B−1−13)。その変換は一般的にはf()を射影関数として、
βGC,Proj=f(βGC) (153a)
αGC,ProjαGC (153b)
で表される。等距離射影方式の場合にはf()=1であり、βGC,Projは下式で与えられる。
βGC,ProjβGC (153c)
以上を纏めると、大円を構成する“球面上の点GC”を断面円内の“平面上の点GC,Proj”に変換して、その点に“位置の明るさ”を投票(加算)する。各断面円はレジスタ配列あるいはメモリ配列で実現できる。
(kを走査(B−1−14))
(8)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(153)により変換されている。
(iを走査(B−1−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(B−1−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(11)「ピーク抽出ユニット120」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化距離c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−1−17)。
(End)
実施形態B−2.(“平面の3次元方位ns0と規格化距離c0”を視軸方向axisを知らずに計測)
掲記の計測、すなわち4.2.5の方法を図52の実施形態で説明する。それは実施形態B−1をモディファイした、図53に示す、以下のフローで行われる。下記の(2)から(10)までのステップは、実施形態B−1の対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(B−2−1,B−2−2,B−2−17)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(B−2−3)。
(2)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(B−2−4,B−2−7,B−2−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−2−6,B−2−7,B−2−15)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−2−8)。
(5)以上で設定された四つのパラメータ,paxisを「複比変換ユニット117」に入力して、位置を出力する(B−2−9)。
(6)上記の位置を「極変換ユニット118」により球面上の大円に極変換する(B−2−10)。
(kを走査(B−2−11,B−2−12,B−2−14))
(7)その大円を構成する点GCを、「円柱配列投票ユニット119」の“高さの断面円内の点”に変換して投票する(B−2−13)。
(8)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(153)により変換されている。
(iを走査(B−2−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(B−2−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(axisを走査(B−2−17))
(11)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット120」により抽出する。この配列に対応する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化距離c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−2−18)。
(End)
実施形態B−3. (平面の3次元方位ns0と規格化最短距離s0の計測)
掲記の計測、すなわち、4.3.2の方法を図54の実施形態で説明する。それは、図55に示す、以下のフローで行われる。ステップ(7)以降は実施形態A−3と同じである。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1参照(B−3−1))。
(2)規格化最短距離パラメータを「パラメータの走査ユニット122」により下限値s,minから上限値s,maxまで走査する(B−3−2,B−3−3,B−3−15)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−3−4,B−3−5,B−3−14)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−3−6)。
(5)以上で設定された四つのパラメータ,paxisを「半径Rの計算ユニット123」に入力して、半径Rと位置を出力する(B−3−7)。そのユニットの中で、半径Rが式(66c)により下式で計算される。
R=cos−1 sin(d−c)/sin(d)) (154)
(6)上記の半径Rと位置を「小円変換ユニット124」に入力して、小円変換――すなわち、位置をそれを中心とする半径Rの“球面上の小円”に変換――を行う(4.3.2と図27(A)参照)。その小円変換は、ユニット内の次の二つのステップで行われる(図56(A)参照)。
(a)を極座標に変換(B−3−8)
を直交座標および“球面上の極座標”で
=(RXRYRZ) (155a)
=(αβ) (155b)
と表現して、の極座標成分(経度αと緯度β)を下式で計算する。
α=tan−1RYRX) (155c)
β=tan−1(√(RX RY )/RZ) (155d)
(kを走査)
(b)小円変換(B−3−11)
を小円変換した球面上の小円――すなわち、その小円を構成する任意の点SC(そのアドレスをkとする)の座標(経度αSC、緯度βSC)――はの座標αβと半径Rで決まり、式(156b)で表される。この式は、図56(A)のパラメータを用いて式(30)を表したものである。
SC=(αSCβSC) (156a)
cos(βSC)cos(β
+sin(βSC)sin(β)cos(αSCα
=cos(R) (156b)
小円の具体的な計算は、kを走査して次のように行われる。ΔβSCを緯度分解能として緯度βSCをkΔβSCと計算し、その緯度を用いて経度αSCを下式で計算する。
αSCα+cos−1((cos(R)−cos(βSC)cos(β))
/(sin(βSC)sin(β))) (156c)
(7)上記の小円を構成する点SCを、「円柱配列投票ユニット125」の高さの断面円内の、極座標(傾角αSC,Proj、動径βSC,Proj)で表される点SC,Projに変換して投票する(B−3−12)。その変換はf()を射影関数として、下式で表される。
βSC,Proj=f(βSC) (157a)
αSC,ProjαSC (157b)
等距離射影方式の場合にはf()=1であり、βSC,Projは下式で与えられる。
βSC,ProjβSC (157c)
以上を纏めると、小円を構成する“球面上の点SC”を断面円内の“平面上の点SC,Proj”に変換して、その点に“位置の明るさ”を投票(加算)する。各断面円はレジスタ配列あるいはメモリ配列で実現できる。
(kを走査(B−3−13))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(157)により変換されている。
(iを走査(B−3−14))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(B−3−15)
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(11)「ピーク抽出ユニット126」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−3−16)。
(End)
実施形態B−4.(“平面の3次元方位ns0と規格化最短距離s0”を視軸方向axisを知らずに計測)
掲記の計測、すなわち4.3.3の方法を図57の実施形態で説明する。それは、実施形態B−3をモディファイした、図58に示す、以下のフローで行われる。下記の(2)から(10)までのステップは、実施形態B−3の対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(B−4−1,B−4−2,B−4−17)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(B−4−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(B−4−4,B−4−5,B−4−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−4−6,B−4−7,B−4−15)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−4−8)。
(5)以上で設定された四つのパラメータ,paxisを「半径Rの計算ユニット123」に入力して、半径Rと位置を出力する(B−4−9)。
(6)この半径Rと位置を「小円変換ユニット124」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する(B−4−10)。
(kを走査(B−4−11,B−4−12,B−4−14))
(7)その小円を構成する点SCを、「円柱配列投票ユニット125」の“高さの断面円内の点”に変換して投票する(B−4−13)。
(kを走査(B−4−14))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(157)により変換されている。
(iを走査(B−4−15))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(B−4−16))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(axisを走査(B−4−17))
(11)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット126」により抽出する。この配列に対する視軸方向パラメータとして、真の移動方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−4−18)。
(End)
実施形態B−5. (“点の規格化距離”の計測)
掲記の計測、すなわち、4.4.3の方法を図59の実施形態で説明する。それは、図60に示す以下のフローで行われる。
(Start)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”を視軸方向axisに等しいとして設定する(実施形態B−1参照(B−5−1))。
(2)左右カメラでの位置p,pを「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−5−2)。
(3)以上で設定された三つのパラメータp,p,paxisを「点距離計算ユニット127」に入力して、点までの規格化距離が出力される(B−5−3)。の計算は、ユニット内で式(67b)を計算して行われる。
(End)
実施形態B−6. (“平面の3次元方位ns0と規格化距離c0”を両眼視差σにより計測)
掲記の計測、すなわち4.2.3の方法において、“両眼視差σによる複比変換(式60b))”を用いる場合を図61の実施形態で説明する。それは、図62に示す、以下のフローで行われる。下記の(7)から(12)までのステップは、実施形態B−1の対応するステップと同じである。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1参照)。
(2)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(B−6−2,B−6−3,B−6−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−6−4,B−6−5,B−6−15)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−6−6)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(B−6−7)。この両眼視差を計測するアルゴリズムとその実現方法については報告されている(特開平05−165956号公報、特開平05−165957号公報、特開平06−044364号公報、特開平09−081369号公報;“2次元相関およびコンボリューションをハフ平面のρ座標に沿って1次元的に行う方法,” 川上と岡本, 信学技報, vol. IE96−19, pp.31−38, 1996)。
(6)以上で設定された四つのパラメータσ,,paxisを「複比変換ユニット117」に入力して、位置を出力する。位置の計算は、そのユニット内で次の二つのステップで行われる。
(A)とpaxisとの中心角xの計算(B−6−8)
σ,,paxisから、xを式(60b)により下式で計算する。
x=tan−1((sin(c)sin(c+σ))
/(cos(c)sin(c+σ)− sin(σ)))
(160a)
(b)の計算(B−6−9)
球面上の位置を、上記のxを用いて下式で計算する。
=cos(x) Γ+sin(x) Γ (160b)
ここで、ΓとΓは式(150c)で計算される。
(7)上記の位置を「変換ユニット118」により球面上の大円に極変換する(B−6−10)。
(kを走査(B−6−11,B−6−12,B−6−14))
(8)その大円を構成する点GCを、「円柱配列投票ユニット119」の“高さの断面円内の点”に変換して投票する(B−6−13)。
(kを走査(B−6−14))
(9)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(153)により変換されている。
(iを走査(B−6−15))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(B−6−16))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(12)「ピーク抽出ユニット120」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化距離c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−6−17)。
(End)
実施形態B−7.(“平面の3次元方位ns0と横切るまでの規格化距離c0”を視軸方向axisを知らずに、かつ両眼視差σにより計測)
掲記の計測、すなわち4.2.5の方法において“両眼視差σによる複比変換(式60b))”を用いる場合図63の実施形態で説明する。それは、実施形態B−6をモディファイした、図64に示す以下のフローで行われる。下記の(2)から(11)までのステップは、実施形態B−6の対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(B−7−1,B−7−2,B−7−18)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(B−7−3)。
(2)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(B−7−4,B−7−5,B−7−17)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−7−6,B−7−7,B−7−16)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−7−8)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(B−7−9)。
(6)以上で設定された四つのパラメータτ,,paxisを「複比変換ユニット117」に入力して、位置を出力する(B−7−10)。
(7)上記の位置を「極変換ユニット118」により球面上の大円に極変換する(B−7−11)。
(kを走査B−7−12,B−7−13,B−7−15))
(8)その大円を構成する点GCを、「円柱配列投票ユニット」の“高さの断面円内の点”に変換して投票する(B−7−14)。
(kを走査B−7−15)
(9)ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。但し、その大円は式(153)により変換されている。
(iを走査(B−7−16))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。
を走査(B−7−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(axisを走査(B−7−18))
(12)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット120」により抽出する。この配列に対応する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化距離c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−7−19)。
(End)
実施形態B−8. (“平面の3次元方位ns0と規格化最短距離s0”を両眼視差σにより計測)
掲記の計測、すなわち4.3.2の方法において“両眼視差σによる小円変換(式(66a))”を用いる場合を図65の実施形態で説明する。それは、図66に示す、以下のフローで行われる。下記の“(1)から(4)”および“(7)から(12)”までは実施形態B−3の対応するステップと同じであり、また(5)は実施形態B−6の対応するステップと同じである。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1参照)(B−8−1)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(B−8−2,B−8−3,B−8−15)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−8−4,B−8−5,B−8−14)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−8−6)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(B−8−7)。
(6)以上で設定された四つのパラメータσ,,paxisを「半径Rの計算ユニット123」に入力して、半径Rと位置を出力する(B−8−8)。そのユニットの中で、半径Rが式(66a)により下式で計算される。
R=cos−1sinσ/sin(c+σ)) (115)
(7)この半径Rと位置を「小円変換ユニット124」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する(B−8−9)。
(kを走査(B−8−10,B−8−11,B−8−13))
(8)その小円を構成する点SCを、「円柱配列投票ユニット125」の“高さの断面円内の点”に変換して投票する(B−8−12)。
(kを走査(B−8−13)
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(157)により変換されている。
(iを走査(B−8−14))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(B−8−15))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円内に投票が行われる。
(12)「ピーク抽出ユニット126」により、円柱配列の中で“投票された強度が最大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−8−16)。
(End)
実施形態B−9.(“平面の3次元方位ns0と規格化最短距離s0”を視軸方向axisを知らずに、かつ両眼視差σにより計測)
掲記の計測、すなわち4.3.3の方法において“両眼視差σによる小円変換(式(66a))”を用いる場合を図67の実施形態で説明する。それは、実施形態B−8をモディファイした、図68に示す、以下のフローで行われる。下記の(2)から(11)までのステップは、実施形態B−8の対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(B−9−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(B−9−4,B−9−5,B−9−17)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(B−9−6,B−9−7,B−9−16)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−9−8)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(B−9−9)。
(6)以上で設定された四つのパラメータτ,,paxisを「半径Rの計算ユニット123」に入力して、半径Rと位置を出力する(B−9−10)。
(7)この半径Rと位置を「小円変換ユニット124」に入力して、位置を中心とする半径Rの“球面上の小円”に変換する。
(kを走査)
(8)その小円を構成する点SCを、「円柱配列投票ユニット125」の“高さの断面円内の点”に変換して投票する(B−9−14)。
(kを走査(B−9−15))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(157)により変換されている。
(iを走査(B−9−16))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(B−9−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(axisを走査(B−9−18))
(12)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット126」により抽出する。この配列に対応する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(B−9−19)。
(End)
実施形態B−10. (“点の規格化距離”を両眼視差σにより計測)
掲記の計測、すなわち4.4.3の方法において“両眼視差σによる計測法(式(67c))”を用いる場合を図69の実施形態で説明する。それは、図70に示す以下のフローで行われる。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1参照)(B−10−1)。
(2)左右カメラでの位置p,pを「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(B−10−2)。
(3)左右カメラでの位置p,pを「σ決定ユニット128」に入力して、両眼視差σ(すなわち、p−p)を出力する(B−10−3)。
(4)以上で設定された三つのパラメータτ,p,paxisを「点距離計算ユニット127」に入力して、点までの規格化距離が出力される(B−10−4)。の計算は、ユニット内で式(67c)を計算して行われる。
(End)
実施形態C−1. (“平面の3次元方位ns0と規格化最短距離s0”を運動視差τにより計測)
掲記の計測、すなわち2.1の方法において運動視差τによる場合を図71の実施形態で説明する。それは、図72に示す、以下のフローで行われる。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(C−1−1)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により、下限値s,minから上限値s,maxまで走査する(C−1−2,C−1−3,C−1−14)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−1−4,C−1−5,C−1−13)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(C−1−6)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、実施形態A−6のステップ(5)と同様にして、運動視差τ(すなわち、)を出力する(C−1−7)。
(6)移動方向vを中心する半径rの円(図13)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−1−8,C−1−9,C−1−12)。
(rを走査)
(7)以上で設定された五つのパラメータ,pinfτ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、2.1(4)の二つの交点 s+ s−を出力する(C−1−10)。この交点は、2.2.1で証明したように“を中心にする半径Rの小円”の構成要素である。この点 s+ s−の“球面上の極座標(経度 αs+ αs−、緯度 βs+ βs−)”は、式(29)より下式で計算される。
βs+=r
βs−=r (200a)
αs+α+cos−1((( sin(τ)/sin(a+τ))
−cos(r)cos(a))/(sin(r)−sin(a)))
αs−α−cos−1((( sin(τ)/sin(a+τ))
−cos(r)cos(a))/(sin(r)−sin(a)))
(200b)
ここで、αaはの経度座標と緯度座標である(図14参照)。
(8)上記の小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の高さの断面円内の、極座標(傾角 αs+,Proj αs−,Proj、動径 βs+,Proj βs−,Proj)で表される点 s+,Proj s−,Projに変換して投票する(C−1−11)――その投票は“位置の明るさ”を加算して行われる。その変換は一般的にはf()を射影関数として、
βs+,Proj=f( βs+
βs−,Proj=f( βs−) (201a)
αs+,Proj αs+
αs−,Proj αs− (201b)
で表される(実施形態A−1のステップ(7)参照)。等距離射影方式の場合にはf()=1であり、 βs+,Proj βs−,Projは下式で与えられる。
βs+,Proj βs+
βs−,Proj βs− (201c)
以上を纏めると、小円を構成する“球面上の点 s+ s−”を断面円内の“平面上の点 s+,Proj s−,Proj”に変換して、その点に“位置の明るさ”を投票(加算)する。各断面円はレジスタ配列あるいはメモリ配列で実現できる。
(rを走査(C−1−12))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−1−13))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−1−14))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(12)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する(C−1−15)――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面の規格化最短距離”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる。
(End)
実施形態C−2.(“平面の3次元方位ns0と規格化最短距離s0”を移動方向vを知らずに、かつ運動視差τにより計測)
掲記の計測、すなわち“移動方向vを知らずに計測する方法(2.5)”を、2.1についてかつ運動視差τを用いて行う場合を図73の実施形態で説明する。それは、図74に示す、以下のフローで行われる。下記の(2)から(11)までのステップは、実施形態C−1の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmax)にわたって、“移動方向パラメータv”を走査する(C−2−1,C−2−2,C−2−17)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(C−2−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により、下限値s,minから上限値s,maxまで走査する(C−2−4,C−2−5,C−2−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−2−6,C−2−7,C−2−15)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(C−2−8)。
(5)現在と次の時刻の位置を「τ決定ユニット28」に入力して、実施形態A−5のステップ(5)と同様にして、運動視差τ(すなわち、)を出力する(C−2−9)。
(6)移動方向vを中心する半径rの円(図13)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−2−10,C−2−11,C−2−14)。
(rを走査)
(7)以上で設定された五つのパラメータ,pinfτ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、2.1(4)の二つの交点 s+ s−を出力する(C−2−12)。
(8)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換して投票する(C−2−13)。
(rを走査(C−2−14))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−2−15))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−2−16))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(vを走査(C−2−17))
(12)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット225」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(C−2−18)。
(End)
実施形態C−3. (“平面の3次元方位s0と規格化最短距離s0”を両眼視差σにより計測)
掲記の計測、すなわち4.3.1の方法において両眼視差σによる場合を図75の実施形態で説明する。それは、図76に示す、以下のフローで行われる。ステップ(8)以降は、と{}をと{}に置き換えると実施形態C−1と同じである。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1のステップ(1)参照)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により、下限値s,minから上限値s,maxまで走査する(C−3−2,C−3−3,C−3−14)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−3−4,C−3−5,C−3−13)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(C−3−6)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(実施形態B−6のステップ(5)参照(C−3−7))。
(6)視軸方向axisを中心する半径rの円(図26)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−3−8,C−3−9,C−3−12)。
(rを走査)
(7)以上で設定された五つのパラメータ,paxisσ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、4.3.1(4)の二つの交点 s+ s−を出力する(C−3−10)。この交点は、4.3.2で証明したように“を中心にする半径Rの小円”の構成要素である。この点 s+ s−の“球面上の極座標(経度 α α、緯度 β β)”は、4.3.1(4)で述べたように下式で計算される。
β=r
β=r (210a)
αs+α+cos−1((( sin(σ)/sin(c+σ))
−cos(r)cos(c))/(sin(r)−sin(c)))
αs−α−cos−1((( sin(σ)/sin(c+σ))
−cos(r)cos(c))/(sin(r)−sin(c)))
(210b)
(8)この小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内”に変換して投票する(C−3−11)。
(rを走査(C−3−12))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−3−13))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−3−14))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(12)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する(C−3−15)――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる。
(End)
実施形態C−4.(“平面の3次元方位ns0と規格化最短距離s0”を視軸方向axisを知らずに、かつ両眼視差σにより計測)
掲記の計測、すなわち“視軸方向axisを知らずに計測する方法(4.3.3)”を、4.3.1についてかつ両眼視差σを用いて行う場合を図77の実施形態で説明する。それは、実施形態C−3をモディファイした、図78に示す、以下のフローで行われる。下記の(1)から(11)までのステップは、実施形態C−3の対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(C−4−1,C−4−2,C−4−17)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(C−4−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により、下限値s,minから上限値s,maxまで走査する(C−4−4,C−4−5,C−4−16)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−4−6,C−4−7,C−4−15)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(C−4−8)。
(5)左右カメラでの位置を「σ決定ユニット128」に入力して、両眼視差σ(すなわち、)を出力する(C−4−9)。
(6)視軸方向axisを中心する半径rの円(図26)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−4−10,C−4−11,C−4−14)。
(rを走査)
(7)以上で設定された五つのパラメータ,paxisσ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、4.3.1(4)の二つの交点 s+ s−を出力する(C−4−12)。
(8)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の高さの断面円内の点”に変換して投票する(C−4−13)。
(rを走査(C−4−14))
(9)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−4−15))
(10)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−4−16))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(axisを走査(C−4−17))
(12)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット225」により抽出する。この配列に対する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる。(C−4−18)。
(End)
実施形態C−5. (平面の3次元方位ns0と規格化最短距離s0の計測)
掲記の計測、すなわち、2.1の方法を図79の実施形態で説明する。それは、図80に示す以下のフローで行われる。下記の(7)から(11)までのステップは、実施形態C−1の(8)から(12)までのステップと同じである。
(Start)
(1)移動方向vを「移動方向vの抽出ユニット14」により、実施形態A−1のステップ(1)と同様にして抽出する。次に、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(C−5−1)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により下限値s,minから上限値s,maxまで走査する(C−5−2,C−5−3,C−5−13)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−5−4,C−5−5,C−5−12)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する。
(5)移動方向vを中心とする半径rの円(図13)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−5−7,C−5−8,C−5−11)。
(rを走査)
(6)以上で設定された五つのパラメータ,pinf,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、2.1(4)の二つの交点 s+ s−を出力する。この交点は、2.2.1で証明したように“を中心にする半径Rの小円”の構成要素である。この点 s+ s−の“球面上の極座標(経度 αs+ αs−、緯度 βs+ βs−)”は、式(29)をモディファイして下式で計算される。
βs+=r
βs−=r (220a)
αs+α+cos−1((( sin(b−a)/sin(b))
−cos(r)cos(a))/(sin(r)−sin(a)))
αs−α−cos−1((( sin(b−a)/sin(b))
−cos(r)cos(a))/(sin(r)−sin(a)))
(220b)
ここで、αaはの経度座標と緯度座標であり、bはの緯度座標でる(図14および図9参照)。
(7)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換して投票する(実施形態C−1のステップ(8)参照(C−5−10))。
(rを走査(C−5−11))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−5−12))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−5−13))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(11)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(C−5−14)。
(End)
実施形態C−6.(“平面の3次元方位ns0と規格化最短距離s0”を移動方向vを知らずに計測)
掲記の計測、すなわち“移動方向vを知らずに計測する方法(2.5)”を、2.1について行う場合を図81の実施形態で説明する。それは、図82に示す、以下のフローで行われる。下記の(2)から(10)までのステップは、実施形態C−5の対応するステップと同じである。
(Start)
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値Vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(C−6−1,C−6−2,C−6−16)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(C−6−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により、下限値s,minから上限値s,maxまで走査する(C−6−4,C−6−5,C−6−15)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−6−6,C−6−7,C−6−14)。
(iを走査)
(4)現在と次の時刻の位置を「現時刻tの画像レジスタ12」と「次時刻tの画像レジスタ13」から出力する(C−6−8)。
(5)移動方向vを中心とする半径rの円(図13)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−6−9,C−6−10,C−6−13)。
(rを走査)
(6)以上で設定された五つのパラメータ,pinf,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、2.1(4)の二つの交点 s+ s−を出力する(C−6−11)。
(7)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換して投票する(実施形態C−6−12)。
(rを走査(C−6−13))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−6−14))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−6−15))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(vを走査(C−6−16))
(11)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット225」により抽出する。この配列に対応する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(C−6−17)。
(End)
実施形態C−7. (平面の3次元方位ns0と規格化最短距離s0の計測)
掲記の計測、すなわち、4.3.1の方法を図83の実施形態で説明する。それは、図84に示す、以下のフローで行われる。ステップ(7)以降は、と{}をと{}に置き換えると実施形態C−5と同じである。
(Start)
(1)「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(実施形態B−1のステップ(1)参照(C−7−1))。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により下限値s,minから上限値s,maxまで走査する(C−7−2,C−7−3,C−7−13)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−7−4,C−7−5,C−7−12)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(C−7−6)。
(5)視軸方向axisを中心とする半径rの円(図26)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−7−7,C−7−8,C−7−11)。
(rを走査)
(6)以上で設定された五つのパラメータ,paxis,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、4.3.1(4)の二つの交点 s+ s−を出力する(C−7−9)。この交点は、4.3.2で証明したように“を中心にする半径Rの小円”の構成要素である。この点 s+ s−の“球面上の極座標(経度 αs+ αs−、緯度 βs+ βs−)”は、式(65c)をモディファイして下式で計算される。
βs+=r
βs−=r (230a)
αs+α+cos−1((( sin(d−c)/sin(d))
−cos(r)cos(c))/(sin(r)−sin(c)))
αs−α−cos−1((( sin(d−c)/sin(d))
−cos(r)cos(c))/(sin(r)−sin(c)))
(230b)
ここで、αcはの経度座標と緯度座標であり、dはの緯度座標でる(図26および図23参照)。
(7)この小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換して投票する(C−7−10)。
(rを走査(C−7−11))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−7−12))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−7−13)
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(11)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として平面の規格化最短距離が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(C−7−14)。
(End)
実施形態C−8.(“平面の3次元方位ns0と規格化最短距離s0”を視軸方向axisを知らずに計測)
掲記の計測、すなわち“視軸方向axisを知らずに計測する方法(4.3.3)”を、4.3.1について行う場合を図85の実施形態で説明する。それは、実施形態C−7をモディファイした、図86に示す、以下のフローで行われる。下記の(1)から(10)までのステップは、実施形態C−7に対応するステップと同じである。
(Start)
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(C−8−1,C−8−2,C−8−16)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(C−8−3)。
(2)規格化最短距離パラメータを「パラメータの走査ユニット221」により下限値s,minから上限値s,maxまで走査する(C−8−4,C−8−5,C−8−15)。
を走査)
(3)画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(C−8−6,C−8−7,C−8−14)。
(iを走査)
(4)左右カメラでの位置を「右カメラ画像レジスタ112」と「左カメラ画像レジスタ113」から出力する(C−8−8)。
(5)視軸方向axisを中心とする半径rの円(図26)を考え、そのrを「半径rの走査ユニット222」により0からπ/2まで走査する(C−8−9,C−8−10,C−8−13)。
(rを走査)
(6)以上で設定された五つのパラメータ,paxis,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、4.3.1(4)の二つの交点 s+ s−を出力する(C−8−11)。
(7)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換して投票する(C−8−12)。
(rを走査(C−8−13))
(8)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。但し、その小円は式(201)により変換されている。
(iを走査(C−8−14))
(9)ここまでの処理で、高さがの断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。
を走査(C−8−15))
(10)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行われる。
(axisを走査(C−8−16))
(11)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(12)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット225」により抽出する。この配列に対応する移動方向パラメータとして、真の移動方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面の規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(C−8−17)。
(End)
実施形態D
実施形態D−1(規格化時間)
本実施形態について図87を参照して説明する。それは、図88に示す、以下のフローで行なわれる。
(1)移動方向vを実施形態A−1のステップ(1)と同様にして抽出し、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(D−1−1)。
(2)「画素番号iの走査ユニット401」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−1−2,D−1−3,D−1−17)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から“アドレスiに対応する画素”を中心とする各局所領域画像(特開平09−081369号公報の図1および信学技報(川上、岡本、 vol. IE−19, pp.31−38, 1996)の図1を参照)を、図159の左端に示すように、現時刻tと次時刻tについて切り出す(D−1−4)。
(4)「運動視差番号kの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−1−5,D−1−6,D−1−16)。 (kを走査)
(5)この番号kは運動視差のシリアル番号であり、運動視差τすなわち動きベクトル(τ τ)と図160に示すように対応している。「運動視差τ変換ユニット404」によりこの対応付けを行なって、運動視差τを出力する(D−1−7)。
但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(10)までをスキップする(D−1−8)。
(6)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159参照)に入力して、応答強度を下式で計算する(D−1−9)。
応答強度=ΣΣ (x,y)(x−τ,y−τ) (301)
ここで、(x,y)は、現時刻の局所領域画像(図159左上)内の(x,y)画素の強度であり、(x,y)は次時刻の局所領域画像(図159左下)内の(x,y)画素の強度である。
なお、この応答強度の計算は簡単のために2次元相関で示したが、例えば、MPEG2エンコーダーに標準的に用いられている差分絶対値による2次元相関、乗算的演算による2次元相関、ハフ変換と逆ハフ変換による相関(“2次元相関およびコンボリューションをハフ平面のρ座標に沿って1次元的に行う方法,” 川上と岡本, 信学技報, vol. IE96−19, pp.31−38, 1996、および特開平05−165956号公報、特開平05−165957号公報、特開平06−044364号公報、特開平09−081369号公報 参照)でもよい。また、微分勾配法などの速度を検出する方法でもよい。すなわち、この応答強度は、画素の強度に基いて求められるものであればよい。この点、本発明の、応答強度を求める全ての実施形態について同様である。
(7)規格化時間パラメータを「パラメータの走査ユニット16」により、下限値c,minから上限値c,maxまで走査する(D−1−10,D−1−11,D−1−15)。
を走査)
前掲の実施形態A−6と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態A−6とは異なり、以下のステップ(10)において「運動視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された四つのパラメータτ,,pinfを「複比変換ユニット17」に入力して、位置ikを出力する(D−1−12)。
(9)上記の位置ikを「極変換ユニット18」により球面上の大円に極変換して、その大円を構成する点群の位置{ikGC}を出力する(D−1−13)。
なお、前掲の実施形態A−6では、ikτ,ikikGCτ,GCと記されている。
(10)「円柱配列投票ユニット19」の“高さの大円上の点群”に、“運動視差検出ユニット405の応答強度”を投票する(D−1−14)。ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。
尚、ここでは円柱配列としたが、本発明の全ての実施形態(全ての図も含めて)において‘円柱’である必要はなく、3自由度配列と一般化してもよい。その場合には、上記の大円はそれに対応した曲線になる。
を走査(D−1−15))
(kを走査(D−1−16))
(iを走査(D−1−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(12)「ピーク抽出ユニット20」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化時間c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−1−18)。
尚、ここでは規格化時間としたが、Δtが一定のため、絶対時間t(すなわち、Δt)でもよい。この点は、本発明の、規格化時間を取扱う全ての実施形態について同様である。
実施形態D−2(規格化時間+v未知)
本実施形態について図89のブロック図を参照して説明する。それは、図90のフローで行なわれる。
下記の(2)から(11)までのステップは、実施形態D−1の対応するステップと同じである。
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(D−2−1,D−2−2,D−2−20)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(D−2−3)。
(2)「画像番号iの走査ユニット401」により、画像内の各点のアドレスを下限値iminから上限値imaxまで走査する(D−2−4,D−2−5,d−2−19)。
(iを走査)
(3)実施形態D−1のステップ(3)と同様にして、「 を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(D−2−6)。
(4)「運動視差番号kの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−2−7,D−2−8,D−2−18)。
(kを走査)
(5)実施形態D−1のステップ(5)と同様にして、「運動視差τ変換ユニット404」により、この番号kを運動視差τに変換して出力する(D−2−9)。
但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(10)までをスキップする(D−2−10)。
(6)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159参照)に入力して、応答強度を下式で計算する(D−2−11)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(7)規格化時間パラメータを「パラメータの走査ユニット16」により、下限値c,minから上限値c,maxまで走査する(D−2−12,D−2−13,D−2−17)。
を走査)
前掲の実施形態A−6と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態A―6とは異なり、ステップ(10)において「運動視差検出ユニットの応答強度を投票する」という処理が行なわれている。
(8)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された四つのパラメータτ,,pinfを「複比変換ユニット17」に入力して、位置ikを出力する(D−2−14)。
(9)上記の位置ikを「極変換ユニット18」により球面上の大円に極変換して、その大円を構成する点群の位置{ikGC}を出力する(D−2−15)。
(10)「円柱配列投票ユニット19」の“高さの大円上の点群”に、“運動視差検出ユニット405の応答強度”を投票する(D−2−16)。ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。
を走査(D−2−17))
(kを走査(D−2−18))
(iを走査(D−2−19))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(vを走査(D−2−20))
(12)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット20」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化時間c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−2−21)。
実施形態D−3(規格化最短距離)
図91は、本実施形態D−3のブロック図、図92はその実施形態D−3のフローチャートである。
(1)移動方向vを実施形態A−1のステップ(1)と同様にして抽出し、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(D−3−1)。
(2)「画素番号iの走査ユニット401」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−3−2,D−3−3,D−3−17)。
(iを走査)
(3)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(D−3−4)。
(4)「運動視差ユニットkの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−3−5,D−3−6,D−3−16)。
(kを走査)
(5)実施形態D−1のステップ(5)と同様にして、「運動視差τ変換ユニット404」により、この番号kを運動視差τに変換して出力する(D−3−7)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(10)までをスキップする(D−3−8)。
(6)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159参照)に入力して、応答強度を下式で計算する(D−3−9)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(7)規格化最短距離パラメータを「パラメータの走査ユニット22」により下限値s,minから上限値s,maxまで走査する。
を走査)
前掲の実施形態A−8と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態A−8とは異なり、ステップ(10)において「運動視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された四つのパラメータτ,,pinfを実施形態A−8のステップ(6)と同様にして、「半径Rの計算ユニット23」に入力して、半径ikRと位置を出力する(D−3−12)。そのユニット23の中で、半径ikRが下式で計算される。
ikR=cos−1 sin τ/sin(a+τ))
(9)実施形態A−8のステップ(7)と同様にして、この半径ikRと位置を「小円変換ユニット24」に入力して、位置を中心とする半径ikRの“球面円の小円”に変換する(D−3−13)。
(10)実施形態A−8のステップ(8)から(9)と同様にして、「円柱配列投票ユニット25」の“高さの小円上の点群”にステップ(6)の運動視差検出ユニット405の応答強度を投票する(D−3−14)。ここまでの処理で、位置の点が小円変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−3−15))
(kを走査(D−3−16))
(iを走査(D−3−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(12)「ピーク抽出ユニット26」により、円柱配列の中で“投票された強度が極大になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−3−18)。
実施形態D−4(規格化最短距離+v未知)
本実施形態について、図93のブロック図を参照して説明する。これは、図94に示す以下のフローに従って実行される。
下記の(2)から(11)までのステップは、実施形態D−3の対応するステップと同じである。
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(D−4−1,D−4−2,D−4−20)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(D−4−3)。
(2)「画素番号iの走査ユニット401」により、画像内の各点のアドレスを下限値iminから上限値imaxまで走査する(D−4−4,D−4−5,D−4−19)。
(iを走査)
(3)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(D−4−6)。
(4)「運動視差番号kの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−4−7,D−4−8,D−4−18)。
(kを走査)
(5)実施形態D−1のステップ(5)と同様にして、「運動視差τ変換ユニット404」により、この番号kを運動視差τに変換して出力する(D−4−9)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(10)までをスキップする(D−4−10)。
(6)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159)に入力して、応答強度を下式で計算する(D−4−11)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(7)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(D−4−12,D−4−13,D−4−17)。
を走査)
前掲の実施形態A−8と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態A−8とは異なり、ステップ(10)において、「運動視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された四つのパラメータτ,,pinfを、実施形態A−8のステップ(6)と同様にして、「半径Rの計算ユニット23」に入力して、半径ikRと位置を出力する(D−4−14)。そのユニット23の中で、半径ikRが下式で計算される。
ikR=cos−1 sin τ/sin(a+τ))
(9)実施形態A−8のステップ(7)と同様にして、この半径ikRと位置を「小円変換ユニット24」に入力して、位置を中心とする半径ikRの“球面円の小円”に変換する(D−4−15)。
(10)実施形態A−8のステップ(8)から(9)と同様にして、「円柱配列投票ユニット25」の“高さの小円上の点群”にステップ(6)の運動視差検出ユニット405の応答強度を投票する(D−4−16)。ここまでの処理で、位置の点が小円変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−4−17))
(kを走査(D−4−18))
(iを走査(D−4−19))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(vを走査(D−4−20))
(12)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面に投票が行なわれる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット26」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離が、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−4−21)。
実施形態D−5(ステレオ+規格化距離)
図95は、本実施形態D−5を示すブロック図、図96は、そのフローチャートである。
(1)前掲の実施形態B−1と同様、「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(D−5−1)。
(2)「画素番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−5−2,D−5−3,D−5−3−17)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対する”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−5−4)。
(4)「両眼視差番号kの走査ユニット423」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−5−5,D−5−6,D−5−16)。
(kを走査)
(5)この番号kは両眼視差のシリアル番号であり、両眼視差σすなわち視差ベクトル(σ σ)と図168に示すように対応している。「両眼視差σ変換ユニット424」によりこの対応付けを行なって、両眼視差σを出力する(D−5−7)。
但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときは、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−5−8)。
(6)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167)に入力して、応答強度を下式で計算する(D−5−9)。
応答強度=ΣΣ (x,y)(x−σ,y−σ) (302)
ここで、(x,y)は、右カメラの局所領域画像(図167左上)内の(x,y)画素の強度であり、(x,y)は左カメラの局所領域画像(図167左下)内の(x,y)画素の強度である。
なお、この応答強度の計算は簡単のために2次元相関で示したが、MPEG2エンコーダーに標準的に用いられている差分絶対値による2次元相関、乗算的演算による2次元相関、ハフ変換と逆ハフ変換による相関(“2次元相関およびコンボリューションをハフ平面のρ座標に沿って1次元的に行う方法,” 川上と岡本, 信学技報, vol. IE96−19, pp.31−38, 1996、および特開平05−165956号公報、特開平05−165957号公報、特開平06−044364号公報、特開平09−081369号公報 参照)でもよく、さらに微分勾配法などでもよく、この応答強度は、画素の強度に基づいて求められるものであればよい。
(7)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(D−5−10,D−5−11,D−5−15)。
を走査)
前掲の実施形態B−6と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態B−6とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット426」では、画素番号iが画素に変換され、以上で設定された四つのパラメータσ,,paxisを「複比変換ユニット117」に入力して、位置ikを出力する(D−5−12)。
(9)上記の位置ikを「極変換ユニット118」により球面上の大円に極変換して、その大円を構成する点群の位置{ikGC}を出力する(D−5−13)。
(10)「円柱配列投票ユニット119」の“高さの大円上の点群”に、“両眼視差検出ユニットの応答強度”を投票する(D−5−14)。ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。
を走査(D−5−15))
(kを走査(D−5−16))
(iを走査(D−5−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(12)「ピーク抽出ユニット120」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化距離c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−5−18)。
尚、ここでは規格化距離としたが、ΔxLRが一定のため、絶対距離d(すなわち、ΔxLR)でもよい。この点は、本発明の、規格化距離を取り扱う全ての実施形態について同様である。

実施形態D−6(ステレオ+規格化距離+axis未知)
図97は、本実施形態D−6を示すブロック図、図98はそのフローチャートである。
下記の(2)から(11)までのステップは、実施形態D−5の対応するステップと同じである。
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(D−6−1,D−6−2,D−6−20)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(D−6−3)。
(2)「画素番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−6−4,D−6−5,D−6−19)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−6−6)。
(4)「両眼視差番号kの走査ユニット423」により、両眼視差検出ユニットの両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−6−7,D−6−8,D−6−18)。
(kを走査)
(5)実施形態D−5のステップ(5)と同様にして、「運動視差σの変換ユニット424」により、この番号kを両眼視差σに変換して出力する(D−6−9)。
但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときは、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−6−10)。
(6)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167)に入力して、応答強度を下式で計算する(D−6−11)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(7)規格化距離パラメータを「パラメータの走査ユニット116」により、下限値c,minから上限値c,maxまで走査する(D−6−12,D−6−13,D−6−17)。
を走査)
前掲の実施形態B−6と同じ処理で、以下が行なわれる。但し、本実施形態では実施形態B−6とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット426」では画素番号iが画素に変換され、以上で設定された四つのパラメータσ,,paxisを「複比変換ユニット117」に入力して、位置ikを出力する(D−6−14)。
(9)上記の位置ikを「極変換ユニット118」により球面上の大円に極変換して、その大円を構成する点群の位置{ikGC}を出力する(D−6−15)。
(10)「円柱配列投票ユニット119」の“高さの大円上の点群”に、“両眼視差検出ユニット425の応答強度”を投票する(D−6−16)。ここまでの処理で、位置の点が“複比変換および極変換”された一個の大円が、高さがの断面円内に描かれる。
を走査(D−6−17))
(kを走査(D−6−18))
(iを走査(D−6−19))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が複比変換および極変換された大円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(axisを走査((D−6−20))
(12)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット120」により抽出する(D−6−21)。この配列に対する移動方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面をまでの規格化距離c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる。
実施形態D−7(ステレオ+規格化最短距離)
図99は、本実施形態D−7を示すブロック図、図100はそのフローチャートである。
(1)前掲の実施形態B−1と同様、「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(D−7−1)。
(2)「画像番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−7−2,D−7−3,D−7−17)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−7−4)。
(4)「両眼視差番号kの走査ユニット425」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−7−5,D−7−6,D−7−16)。
(5)実施形態D−5のステップ(5)と同様にして、「両眼視差番号kの走査ユニット425」により、この番号kを両眼視差σに変換して出力する(D−7−7)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときは、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−7−8)。
(6)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167)に入力して、応答強度を下式で計算する(D−7−9)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(7)規格化最短距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(D−7−10,D−7−11,D−7−15)。
を走査)
前掲の実施形態B−8と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態B−8とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)「変換ユニット」では画素番号iが画素に変換され、以上で設定された四つのパラメータσ,,paxisを、実施形態B−8のステップ(6)と同様にして、「半径Rの計算ユニット123」に入力して、半径ikRと位置を出力する(D−7−12)。そのユニット123の中で、半径ikRが下式で計算される。
ikR=cos−1 sin σ/sin(c+σ))
(9)実施形態B−8のステップ(7)と同様にして、この半径ikRと位置を「小円変換ユニット124」に入力して、位置を中心とする半径ikRの“球面上の小円”に変換する(D−4−13)。
(10)実施形態B−8のステップ(8)から(9)と同様にして、「円柱配列投票ユニット125」の“高さの小円上の点群”に、ステップ(6)の両眼視差検出ユニット425の応答強度を投票する(D−7−14)。ここまでの処理で、位置の点が小円変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−7−15))
(kを走査(D−7−16))
(iを走査(D−7−17))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(12)「ピーク抽出ユニット126」により、円柱配列の中で“投票された強度が極大になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−7−18)。
実施形態D−8(ステレオ+規格化最短距離+axis未知)
図101は、本実施形態のD−8のブロック図、図102は、そのフローチャートである。
下記の(2)から(11)までのステップは、実施形態D−7の対応するステップと同じである。
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(D−8−1,D−8−2,D−8−20)。
(axisを走査)
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(D−8−3)。
(2)「画素番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−8−4,D−8−5,D−8−19)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−8−6)。
(4)「両眼視差番号kの走査ユニット423」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−8−7,D−8−8,D−8−18)。
(kを走査)
(5)実施例形態D−5のステップ(5)と同様にして、「両眼視差σ変換ユニット424」により、この番号kを両眼視差σに変換して出力する(D−8−9)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−8−10)。
(6)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167)に入力して、応答強度を下式で計算する(D−8−11)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(7)規格化距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(D−8−12,D−8−13,D−8−17)。
を走査)
前掲の実施形態B−8と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態B−8とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれている。
(8)「変換ユニット426」では画素番号iが画素に変換され、以上で設定された四つのパラメータσ,,paxisを実施形態B−8のステップ(6)と同様にして、「半径Rの計算ユニット123」に入力して、半径ikRと位置を出力する(D−8−14)。そのユニット123の中で、半径ikRが下式で計算される。
ikR=cos−1 sin σ/sin(c+σ))
(9)実施形態B−8のステップ(7)と同様にして、この半径ikRと位置を「小円変換ユニット124」に入力して、位置を中心とする半径ikRの“球面上の小円”に変換する(D−8−15)。
(10)実施形態B−8のステップ(8)から(9)と同様にして、「円柱配列投票ユニット125」の“高さの小円上の点群”に、ステップ(6)の両眼視差検出ユニット425の応答強度を投票する(D−8−16)。ここまでの処理で、位置の点が小円変換一個の小円が、高さがの断面円内に描かれる。
を走査(D−8−17))
(kを走査(D−8−18))
(iを走査(D−8−19))
(11)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(axisを走査)
(12)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(13)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット126」により抽出する。この配列に対する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−8−21)。
実施形態D−9(規格化最短距離)
図103は、本実施形態D−9の構成を示すブロック図、図104はその動作を示すフローチャートである。
(1)移動方向vを前掲の実施形態A−1のステップ(1)と同様にして抽出し、「pinf設定ユニット15」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(D−9−1)。
(2)「画素番号iの走査ユニット401」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−9−2,D−9−3,D−9−19)。
(iを走査)
(3)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(D−9−4)。
(4)「運動視差番号kの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−9−5,D−9−6,D−9−18)。
(kを走査)
(5)実施形態D−1のステップ(5)と同様にして、「運動視差τ変換ユニット404」により、「この番号kを運動視差τに変換して出力する(D−9−7)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(11)までをスキップする(D−9−8)。
(6))実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159参照)に入力して、応答強度を下式で計算する(D−9−9)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(7)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(D−9−10,D−9−11,D−9−17)。
を走査)
(8)移動方向vを中心する半径rの円(図13)を考え、そのrを0からπ/2まで走査する(D−9−12,D−9−13,D−9−16)。
(rを走査)
(9)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された5つのパラメータ,pinfτ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、図13を参照して説明した二つの交点 s+ s−を出力する(D−9−14)。
(10)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換する。次に、その点にステップ(6)で計算した「運動視差検出ユニットの応答強度」を投票する(D−9−15)。
(rを走査(D−9−16))
(11)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−9−17))
(kを走査(D−9−18))
(iを走査(D−9−19))
(12)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(13)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−9−20)。
尚、ここでは規格化最短距離としたが、Δxが一定のため、最短距離d(すなわちΔx)でもよい。この点は、本発明の、規格化最短距離を取り扱う全ての実施形態について同様である。
実施形態D−10(規格化最短距離+v未知)
図105は、本実施形態D−10の構成を示すブロック図、図106はその動作を示すフローチャートである。
下記の(2)から(11)までのステップは、実施形態D−9の対応するステップと同じである。
(0)「vパラメータの走査ユニット21」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(D−10−1,D−10−2,D−10−22)。
(vを走査)
(1)「pinf設定ユニット15」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(D−10−3)。
(2)「画素番号iの走査ユニット401」により、画像内の各点のアドレスを下限値iminから上限値imaxまで走査する(D−10−4,D−10−5,D−10−21)。
(iを走査)
(3)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット402」により、カメラ11で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(D−10−6)。
(4)「運動視差番号kの走査ユニット403」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(D−10−7,D−10−8,D−10−20)。
(kを走査)
(5)実施形態Dのステップ(5)と同様にして、「運動視差番号τ変換ユニット404」により、この番号kを運動視差τに変換して出力する(D−10−9)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときは、この移動方向vと矛盾する運動視差のため、ステップ(11)までをスキップする(D−10−10)。
(6)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット405」(図159参照)に入力して、応答強度を下式で計算する(D−10−11)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(7)規格化最短距離パラメータを「パラメータの走査ユニット22」により、下限値s,minから上限値s,maxまで走査する(D−10−12,D−10−13,D−10−19)。
を走査)
前掲の実施形態C−2と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態C−2とは異なり、ステップ(10)において「運動視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)移動方向vを中心する半径rの円(図13)を考え、そのrを0からπ/2まで走査する(D−10−14,D−10−15,D−10−18)。
(rを走査)
(9)「変換ユニット406」では画素番号iが画素に変換され、以上で設定された五つのパラメータ,pinfτ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、図13を参照して説明した二つの交点 s+ s−を出力する(D−10−16)。
(10)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換し、その点にステップ(6)で計算した「運動視差検出ユニットの応答強度」を投票する(D−10−17)。
(rを走査(D−10−18))
(11)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−10−19))
(kを走査(D−10−20))
(iを走査(D−10−21))
(12)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(vを走査(D−10−22))
(13)ここまでの処理で、“全ての移動方向パラメータvに対する円柱配列群”の全断面円に投票が行われる。
(14)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”「ピーク抽出ユニット225」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−10−23)。
実施形態D−11(ステレオ+規格化最短距離)
図107は、本実施形態D−11の構成を示すブロック図、図108は、その動作を示すフローチャートである。
(1)前掲の実施形態B−1と同様、「paxis設定ユニット115」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(D−11−1)。
(2)「画素番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−11−2,D−11−3,D−11−19)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対する”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−11−4)。
(4)「両眼視差番号kの走査ユニット423」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−11−5,D−11−6,D−11−18)。
(kを走査)
(5)実施形態D−5のステップ(5)と同様にして、「両眼視差σの変換ユニット424」により、この番号kを両眼視差σに変換して出力する(D−11−7)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−11−8)。
(6)実施形態Dのステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167参照)に入力して、応答強度を下式で計算する(D−11−9)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(7)規格化距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(D−11−10,D−11−11,D−11−17)。
を走査)
前掲の実施形態C−3と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態C−3とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)視軸方向axisを中心する半径rの円(図26)を考え、そのrを0からπ/2まで走査する(D−11−12,D−11−13,D−11−16)。
(rを走査)
(9)「変換ユニット426」では画素番号iが画素に変換され、以上で設定された五つのパラメータ,pinfσ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、図26を参照して説明した二つの交点 s+ s−を出力する(D−11−14)。
(10)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換する。次に、その点にステップ(6)で計算した「両眼視差検出ユニットの応答強度」を投票する(D−11−15)。
(rを走査(D−11−16))
(11)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−11−17))
(kを走査(D−11−18))
(iを走査(D−11−19))
(12)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(13)「ピーク抽出ユニット225」により、円柱配列の中で“投票された強度が極大になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−11−20)。
尚、ここでは規格化最短距離としたが、ΔxLRが一定のため、最短距離d(すなわちΔxLR)でもよい。この点は、本発明の、規格化最短距離を取り扱う全ての実施形態について同様である。
実施形態D−12(ステレオ+規格化最短距離+axis未知)
図109は、本実施形態D−12の構成を示すブロック図、図110は、その動作を示すフローチャートである。
下記の(2)から(11)までのステップは、実施形態D−11の対応するステップと同じである。
(0)「axisパラメータの走査ユニット121」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(D−12−1,D−12−2,D−12−22)。
(1)「paxis設定ユニット115」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(D−12−3)。
(axisを走査)
(2)「画素番号iの走査ユニット421」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(D−12−4,D−12−5,D−12−21)。
(iを走査)
(3)「を中心とする局所領域画像の切出しユニット422」により、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラ412,413で得られた各画像から切り出す(D−12−6)。
(4)「両眼視差番号kの走査ユニット423」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(D−12−7,D−12−8,D−12−20)。
(kを走査)
(5)実施形態D−5のステップ(5)と同様にして、「両眼視差σの変換ユニット425」により、この番号kを両眼視差σに変換して出力する(D−12−9)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(10)までをスキップする(D−12−10)。
(6)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット425」(図167参照)に入力して、応答強度を下式で計算する(D−12−11)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(7)規格化最短距離パラメータを「パラメータの走査ユニット122」により、下限値s,minから上限値s,maxまで走査する(D−12−12,D−12−13,D−12−19)。
を走査)
前掲の実施形態C−4と同じ処理で、以下が行なわれる。但し、本実施形態では、実施形態C−4とは異なり、ステップ(10)において「両眼視差検出ユニットの応答強度を投票する」という処理が行なわれる。
(8)視軸方向axisを中心する半径rの円(図26)を考え、そのrを0からπ/2まで走査する(D−12−14,D−12−15,D−12−18)。
(rを走査)
(9)「変換ユニット426」では画素番号iが画素に変換され、以上で設定された五つのパラメータ,pinfσ,rを「小円構成要素 s+ s−の計算ユニット223」に入力して、図26を参照して説明した二つの交点 s+ s−を出力する(D−12−16)。
(10)その小円を構成する点 s+ s−を、「円柱配列投票ユニット224」の“高さの断面円内の点”に変換し、その点にステップ(6)で計算した「両眼視差検出ユニットの応答強度」を投票する(D−12−17)。
(rを走査(D−12−18))
(11)ここまでの処理で、位置の点が変換された一個の小円が、高さがの断面円内に描かれる。
を走査(D−12−19))
(kを走査(D−12−20))
(iを走査(D−12−21))
(12)ここまでの処理で、全ての高さ{}の断面円内に、“画像内の全ての点{}”が小円変換された小円群が描かれる。すなわち、円柱配列の全ての断面円に投票が行なわれる。
(axisを走査(D−12−22))
(13)ここまでの処理で、“全ての視軸方向パラメータaxisに対する円柱配列群”の全断面円に投票が行われる。
(14)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット225」により抽出する。この配列に対する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(D−12−23)。
実施形態E
実施形態E−1(規格化時間)
図111は、本実施形態E−1の構成を示すブロック図、図112,図113はその動作を示すフローチャートである。
(α)ijτテーブル(図163)――すなわち、入力画像の画素番号iと円柱配列の要素番号jから、運動視差ijτを検索して出力するためのテーブル――の作成(図111(A),図112参照)
(α1)移動方向vを前掲の実施形態A−1のステップ(1)と同様にして抽出し、「pinf設定ユニット501」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(E−1α−1)。
(α2)「画素番号iの走査ユニット502」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−1α−2,E−1α−3,E−1α−10)。
(iを走査)
(α3)「要素番号jの走査ユニット503」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−1α−4,E−1α−5,E−1α−9)。
(jを走査)
(α4)「出力ユニット504」、「nsj出力ユニット505」、および「cj出力ユニット506」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjcj)を出力する(E−1α−6)。
(α5)以上で設定された四つのパラメータnsjcj,pinfを「ijτテーブル作成ユニット507」に入力して、付録の(A−1)に示す方法で運動視差ijτを計算する(E−1α−7)。
ここでは煩雑になるため、以下の運動方向(からへの運動方向、すなわちijφ)などを省略した。第1に、付録の(A)で計算したPからijφを求め、これもijτテーブルの内容にする必要があり、また、下記ステップ(β5)で検出されるべき動きベクトル(ijτijτ)の方向tan−1ijτijτ)とこのijφが一致するときだけ投票する必要があるが、これらを省略した。以下の、同様の処理を伴う実施形態においても同様に省略した。
尚、運動視差ijτは、付録の(A−1)に示す方法に限らず、どのような方法で計算してもよい。この点、付録の(A−1)に示す方法で運動視差の計算を行う旨説明した全ての実施形態において同様である。
また、本実施形態では、ijτテーブルを作成し、実際の投票にあたってはその作成済のijτテーブルからijτを取り出したが、ijτテーブルをあらかじめ作成しておく必要はなく、投票のための演算を行なう際にijτを計算してもよい。
(α6)この運動視差ijτを、ijτテーブル(図163)のアドレス(i,j)に対応する内容として格納する(E−1α−8)。
(jを走査(E−1α−9))
(iを走査(E−1α−10))
以上によりijτテーブル(図163)が得られる。
(β)上記で作成されたijτテーブルを用いて、平面方位ns0と規格化時間c0を検出する(図111,図113参照)。
(β1)「画素番号iの走査ユニット552」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−1β−1,E−1β−2,E−1β−10)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット554」により、カメラ551で得られた現時刻tと次時刻tの各画像から“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(E−1β−3)。
(β3)「要素番号jの走査ユニット553」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−1β−4,E−1β−5,E−1β−9)。
(jを走査)
(β4)これらアドレス(i,j)をijτテーブル555(図163)に入力して、運動視差ijτを出力する(E−1β−6)。
(β5)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット556」(図159)に入力して、応答強度を下式で計算する(E−1β−7)。
応答強度=ΣΣ (x,y)(x−ijτ,y−ijτ
(β6)この応答強度を、「円柱配列投票ユニット557」内の要素(nsjcj)に投票する(E−1β−8)。
(jを走査(E−1β−9))
(iを走査(E−1β−10))
(β7)「ピーク抽出ユニット558」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化時間c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−1β−11)。
実施形態E−2(規格化時間+v未知)
図114は、本実施形態E−2の構成を示すブロック図、図115,図116はその動作を示すフローチャートである。
(α)全ての移動方向{v}に対するijτテーブル(図164)――すなわち、入力画像の画素番号i、円柱配列の要素番号j、そして移動方向vから運動視差ijτを検索して出力するためのテーブル――の作成(図114(A),図115参照)
下記の(α2)から(α6)までのステップは、実施形態E−1(α)の対応するステップと同じである。
(α0)「vパラメータの走査ユニット508」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(E−2α−1,E−2α−2,E−2α−13)。
(vを走査)
(α1)「pinf設定ユニット501」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(E−2α−3)。
(α2)「画素番号iの走査ユニット502」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−2α−4,E−2α−5,E−2α−12)。
(jを走査)
(α3)「要素番号jの走査ユニット503」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−2α−6,E−2α−7,E−2α−11)。
(jを走査)
(α4)「出力ユニット504」、「nsj出力ユニット505」、および「cj出力ユニット506」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjcj)を出力する(E−2α−8)。
(α5)以上で設定された四つのパラメータnsjcj,pinfを「ijτテーブル作成ユニット507」に入力して、付録(A−1)に示す方法で運動視差ijτを計算する(E−2α−9)。
(α6)この運動視差ijτを、ijτテーブル(図164)のアドレス(i,j)に対応する内容として格納する(E−2α−10)。
(jを走査(E−2α−11))
(iを走査(E−2α−12))
(α7)ここまで処理で、各移動方向vに対するijτテーブルが得られる。
以上により、全ての移動方向{v}に対するijτテーブル(図164)が得られる。
(β)上記で作成されたijτテーブルを用いて、平面方位ns0と規格化時間c0を検出する(図114(B),図116参照)
下記の(β1)から(β6)までのステップは、実施形態E−1の対応するステップと同じである。
(β0)「vパラメータの走査ユニット559」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(E−2β−1,E−2β−2,E−2β−13)。
(vを走査)
(β1)「画素番号iの走査ユニット552」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−2β−3,E−2β−4,E−2β−12)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット554」により、カメラ551で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(E−2β−5)。
(β3)「要素番号jの走査ユニット553」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−2β−6,E−2β−7,E−2β−11)。
(jを走査)
(β4)これらアドレス(i,j)と移動方向vをijτテーブル555(図164)に入力して、運動視差ijτを出力する(E−2β−8)。
(β5)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差ijτを「運動視差検出ユニット556」(図159参照)に入力して、応答強度を下式で計算する(E−2β−9)。
応答強度=ΣΣ (x,y)(x−ijτ,y−ijτ
(β6)この応答強度を、「円柱配列投票ユニット557」内の要素(nsjcj)に投票する(E−2β−10)。
(jを走査(E−2β−11))
(iを走査(E−2β−12))
(β7)ここまでの処理で、円柱配列内の全要素に投票が行われる。
(vを走査(E−2β−13))
(β8)ここまでの処理で、全ての移動方向パラメータvに対する円柱配列群の全要素に投票が行われる。
(β9)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット558」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化時間c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−2β−14)。
実施形態E−3(規格化最短距離)
図117は、本実施形態E−3の構成を示すブロック図、図118,図119はそのフローチャートである。
(α)ijτテーブル(図163)――すなわち、入力画像の画素番号iと円柱配列の要素番号jから、運動視差ijτを検索して出力するためのテーブル――の作成(図117(A)、図118参照)
(α1)移動方向vを前掲の実施形態A−1のステップ(1)と同様にして抽出し、「pinf設定ユニット501」により、この移動方向vに等しいとして“無限時間経過後の位置pinf”を設定する(E−3α−1)。
(α2)「画素番号iの走査ユニット502」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する。(E−3α−2,E−3α−3,E−3α−10)。
(iを走査)
(α3)「要素番号jの走査ユニット503」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する。
(jを走査)
(α4)「出力ユニット504」、「nsj出力ユニット505」、「sj出力ユニット509」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjsj)を出力する(E−3α−6)。
(α5)以上で設定された四つのパラメータnsjsj,pinfを「ijτテーブル作成ユニット510」に入力して、付録(A−2)に示す方法で運動視差ijτを計算する(E−3α−7)。
尚、運動視差ijτは、付録の(A−2)に示す方法に限らず、どのような方法で計算してもよい。この点、付録の(A−2)に示す方法で運動視差の計算を行う旨説明した全ての実施形態において同様である。
(α6)この運動視差ijτを、ijτテーブル(図163)のアドレス(i,j)に対応する内容として格納する(E−3α−8)。
(jを走査(E−3α−9))
(iを走査(E−3α−10))
以上によりijτテーブル(図163)が得られる。
(β)上記で作成されたijτテーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図117(B)、図119参照)
(β1)「画素番号iの走査ユニット552」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−3β−1,E−3β−2,E−3β−10)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット554」により、カメラ551で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(E−3β−3)。
(β3)「要素番号jの走査ユニット553」により、「円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−3β−4,E−3β−5,E−3β−9)。
(jを走査)
(β4)これらアドレス(i,j)をijτテーブル565(図163)に入力して、運動視差ijτを出力する(E−3β−6)。
(β5)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差ijτを「運動視差検出ユニット566」(図159参照)に入力して、応答強度を下式で計算する(E−3β−7)。
応答強度=ΣΣ (x,y)(x−ijτ,y−ijτ
(β6)この応答強度を、「円柱配列投票ユニット567」内の要素(nsjsj)に投票する(E−3β−8)。
(jを走査(E−3β−9))
(iを走査(E−3β−10))
(β7)「ピーク抽出ユニット568」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−3β−11)。
実施形態E−4(規格化最短距離+v未知)
図120は、本実施形態E−4の構成を示すブロック図、図121、図122は、その動作を示すフローチャートである。
(α)全ての移動方向{v}に対するijτテーブル(図164)――すなわち、入力画像の画素番号i、円柱配列の要素番号j、そして移動方向vから運動視差ijτを検索して出力するためのテーブル――の作成(図120(A),図121参照)
下記の(α2)から(α6)までのステップは、実施形態E−3(α)の対応するステップと同じである。
(α0)「vパラメータの走査ユニット508」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(E−4α−1,E−4α−2,E−4α−13)。
(vを走査)
(α1)「pinf設定ユニット501」により、“無限時間経過後の位置pinf”をこのパラメータvに等しいとして設定する(E−4α−3)。
(α2)「画素番号iの走査ユニット502」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−4α−4,E−4α−5,E−4α−12)。
(iを走査)
(α3)「要素番号jの走査ユニット503」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−4α−6,E−4α−7,E−4α−11)。
(jを走査)
(α4)「出力ユニット504」、「nsj出力ユニット505」、「sj出力ユニット509」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjsj)を出力する(E−4α−8)。
(α5)以上で設定された四つのパラメータnsjsj,pinfを「ijτテーブル作成ユニット510」に入力して、付録の(A−2)に示す方法で運動視差ijτを計算する(E−4α−9)。
(α6)この運動視差ijτを、ijτテーブル(図164)のアドレス(i,j)に対応する内容に格納する(E−4α−10)。
(jを走査(E−4α−11))
(iを走査(E−4α−12))
(α7)ここまで処理で、各移動方向vに対するijτテーブルが得られる。
(vを走査(E−4α−13))
以上により:全ての移動方向{v}に対するijτテーブル(図164)が得られる。
(β)上記で作成されたijτテーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図120(B),図122参照)
下記の(β1)から(β6)までのステップは、実施形態E−3の対応するステップと同じである。
(β0)「vパラメータの走査ユニット559」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(E−4β−1,E−4β−2,E−4β−13)
(β1)「画素番号iの走査ユニット552」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−4β−3,E−4β−4,E−4β−12)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット554」により、カメラ551で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、現時刻tと次時刻tについて切り出す(E−4β−5)。
(β3)「要素番号jの走査ユニット553」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−4β−6,E−4β−7,E−4β−11)。
(jを走査)
(β4)これらアドレス(i,j)をijτテーブル(図164)に入力して、運動視差ijτを出力する(E−4β−8)。
(β5)実施形態D−1のステップ(6)と同様にして、“現時刻tと次時刻tの局所領域画像”および運動視差ijτを「運動視差検出ユニット566」(図159)に入力して、応答強度を下式で計算する(E−4β−9)。
応答強度=ΣΣ (x,y)(x−ijτ,y−ijτ
(β6)この応答強度を、「円柱配列投票ユニット567内の要素(nsjsj)に投票する(E−4β−10)。
(jを走査(E−4β−11))
(iを走査(E−4β−12))
(β7)ここまでの処理で、円柱配列内の全要素に投票が行われる。
(vを走査(E−4β−13))
(β8)ここまでの処理で、全ての移動方向パラメータvに対する円柱配列群の全要素に投票が行われる。
(β9)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット568」により抽出する。この配列に対する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−4β−14)。
実施形態E−5(ステレオ+規格化距離)
図123は、本実施形態E−5の構成を示すブロック図、図124,図125はその動作を示すフローチャートである。
(α)ijσテーブル(図171)――すなわち、入力画像の画素番号iと円柱配列の要素番号jから、運動視差ijσを検索して出力するためのテーブル――の作成(図123(A),図124参照)
(α1)前掲の実施形態B−1と同様、「paxis設定ユニット511」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(E−5α−1)。
(α2)「画素番号iの走査ユニット512」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−5α−2,E−5α−3,E−5α−10)。
(iを走査)
(α3)「要素番号jの走査ユニット503」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−5α−4,E−5α−5,E−5α−9)。
(jを走査)
(α4)「出力ユニット514」、「nsj出力ユニット515」、および「cj出力ユニット516」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjcj)を出力する(E−5α−6)。
(α5)以上で設定された四つのパラメータnsjcj,paxisを「ijσテーブル作成ユニット517」に入力して、付録の(B−1)に示す方法で両眼視差ijσを計算する(E−5α−7)。
尚、両眼視差ijσは、付録(B−1)に示す方法に限らず、どのような方法で計算してもよい。この点、付録の(B−1)に示す方法で両眼視差の計算を行なう旨説明した全ての実施形態において同様である。
(α6)この両眼視差ijσを、ijσテーブル(図171)のアドレス(i,j)に対応する内容として格納する(E−5α−8)。
(jを走査(E−5α−9))
(iを走査(E−5α−10))
以上によりijσテーブル(図171)が得られる。
(β)上記で作成されたijσテーブルを用いて、平面方位ns0と規格化距離c0を検出する(図123(B),図125参照)
(β1)「画素番号iの走査ユニット572」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−5β−1,E−5β−2,E−5β−10)。
(iを走査)
(β2)を中心とする局所領域画像の切出しユニット574」により、右カメラ561および左カメラ562で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(E−5β−3)。
(β3)「要素番号jの走査ユニット573」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−5β−4,E−5β−5,E−5β−9)。
(jを走査)
(β4)これらアドレス(i,j)をijσテーブル575(図171)に入力して、両眼視差ijσを出力する(E−5β−6)。
(β5)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差ijσを「両眼視差検出ユニット576」(図167)に入力して、応答強度を下式で計算する(E−5β−7)。
応答強度=ΣΣ (x,y)(x−ijσ,y−ijσ
(β6)この応答強度を、「円柱配列投票ユニット577」内の要素(nsjcj)に投票する(E−5β−8)。
(jを走査(E−5β−9))
(iを走査(E−5β−10))
(β7)「ピーク抽出ユニット578」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化距離c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−5β−11)。
実施形態E−6(ステレオ+規格化距離+axis未知)
図126は、本実施形態E−6の構成を示すブロック図、図127,図128は、その動作を示すフローチャートである。
(α)全ての視軸方向{axis}に対するijσテーブル(図172)――すなわち、入力画像の画素番号i、円柱配列の要素番号j、そして視軸方向axisから両眼視差ijσを検索して出力するためのテーブル――の作成(図126(A),図127参照)
下記の(α2)から(α6)までのステップは、実施形態E−5(α)の対応するステップと同じである。
(α0)「axisパラメータの走査ユニット518」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(E−6α−1,E−6α−2,E−6α−13)。
(axisを走査)
(α1)「paxis設定ユニット511」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(E−6α−3)。
(α2)「画素番号iの走査ユニット512」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−6α−4,E−6α−5,E−6α−12)。
(iを走査)
(α3)「要素番号jの走査ユニット513」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−6α−6,E−6α−7,E−6α−11)。
(jを走査)
(α4)「出力ユニット514」、「nsj出力ユニット515」、および「cj出力ユニット516」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjcj)を出力する(E−6α−8)。
(α5)以上で設定された四つのパラメータnsjcj,paxisを「ijσテーブル作成ユニット517」に入力して、付録の(B−1)に示す方法で両眼視差ijσを計算する(E−6α−9)。
(α6)この両眼視差ijσを、ijσテーブル(図172)のアドレス(i,j)に対応する内容として格納する(E−6α−10)。
(jを走査(E−6α−11))
(iを走査(E−6α−12))
(α7)ここまで処理で、各視軸方向axisに対するijσテーブルが得られる。
(axisを走査(E−6α−13))
以上により全ての視軸方向{axis}に対するijσテーブル(図172)が得られる。
(β)上記で作成されたijσテーブルを用いて、平面方位ns0と規格化最短距離c0を検出する(図126(B),図128参照)
下記の(β1)から(β6)までのステップは、実施形態E−5の対応するステップと同じである。
(β0)「axisパラメータの走査ユニット579」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(E−6β−1,E−6β−2,E−6β−13)。
(axisを走査)
(β1)「画素番号iの走査ユニット572」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−6β−3,E−6β−4,E−6β−12)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット574」により、右カメラ561および左カメラ562で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(E−6β−5)。
(β3)「要素番号jの走査ユニット573」により、円柱配列内の要素(nsjcj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−6β−6,E−6β−7,E−6β−11)。
(jを走査)
(β4)これらアドレス(i,j)と視軸方向axisijσテーブル575(図172)に入力して、両眼視差ijσを出力する(E−6β−8)。
(β5)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差ijσを「両眼視差検出ユニット576」(図167)に入力して、応答強度を下式で計算する(E−6β−9)。
応答強度=ΣΣ (x,y)(x−ijσ,y−ijσ
(β6)この応答強度を、「円柱配列投票ユニット577」内の要素(nsjcj)に投票する(E−6β−10)。
(jを走査(E−6β−11))
(iを走査(E−6β−12))
(β7)ここまでの処理で、円柱配列内の全要素に投票が行われる。
(axis走査(E−6β−13))
(β8)ここまでの処理で、全ての視軸方向パラメータaxisに対する円柱配列群の全要素に投票が行われる。
(β9)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット578」により抽出する。この配列に対する視軸方向パラメータとして、真の移動方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化距離c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−6β−14)。
実施形態E−7(ステレオ+規格化最短距離)
図129は、本実施形態E−7の構成を示すブロック図、図130,図131は、その動作を示すフローチャートである。
(α)ijσテーブル(図171)――すなわち、入力画像の画素番号iと円柱配列の要素番号jから、両眼視差ijσを検索して出力するためのテーブル――の作成(図129(A),図130参照)
(α1)前掲の実施形態B−1と同様、「paxis設定ユニット511」により、視軸上の位置paxisを視軸方向axisに等しいとして設定する(E−7α−1)。
(α2)「画素番号iの走査ユニット512」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−7α−2,E−7α−3,E−7α−10)。
(iを走査)
(α3)「要素番号jの走査ユニット513」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−7α−4,E−7α−5,E−7α−9)。
(jを走査)
(α4)「出力ユニット514」、「nsj出力ユニット515」、および「sj出力ユニット519」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjsj)を出力する(E−7α−6)。
(α5)以上で設定された四つのパラメータnsjsj,paxisを「ijσテーブル作成ユニット520」に入力して、付録の(B−2)に示す方法で両眼視差ijσを計算する(E−7α−7)。
尚、両眼視差ijσは、付録の(B−2)に示す方法に限らず、どのような方法で計算してもよい。この点、付録の(B−2)に示す方法で両眼視差の計算を行なう旨説明した全ての実施形態において同様である。
(α6)この両眼視差ijσを、ijσテーブル(図171)のアドレス(i,j)に対応する内容として格納する(E−7α−8)。
(jを走査(E−7α−9))
(iを走査(E−7α−10))
以上によりijσテーブル(図171)が得られる。
(β)上記で作成されたijσテーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図129(B),図131参照)
(β1)「画素番号iの走査ユニット572」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−7β−1,E−7β−2,E−7β−10)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット574」により、右カメラ561および左カメラ562で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(E−7β−3)。
(β3)「要素番号jの走査ユニット573」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−7β−4,E−7β−5,E−7β−9)。
(β4)これらアドレス(i,j)をijσテーブル585(図171)に入力して、両眼視差ijσを出力する(E−7β−6)。
(β5)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差ijσを「両眼視差検出ユニット586」(図167)に入力して、応答強度を下式で計算する(E−7β−7)。
応答強度=ΣΣ (x,y)(x−ijσ,y−ijσ
(β6)この応答強度を、「円柱配列投票ユニット587」内の要素(nsjsj)に投票する(E−7β−8)。
(β7)「ピーク抽出ユニット588」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−7β−11)。
実施形態E−8(ステレオ+規格化最短距離+axis未知)
図132は、本実施形態E−8の構成を示すブロック図、図133,図134は、その動作を示すフローチャートである。
(α)全ての視軸方向{axis}に対するijσテーブル(図172)――すなわち、入力画像の画素番号i、円柱配列の要素番号j、そして視軸方向axisから両眼視差ijσを検索して出力するためのテーブル――の作成(図132(A),図133参照)
下記の(α2)から(α6)までのステップは、実施形態E−7(α)の対応するステップと同じである。
(α0)「axisパラメータの走査ユニット518」により、可能性のある全ての方向(下限値axis,minから上限値axis,max)にわたって、“視軸方向パラメータaxis”を走査する(E−8α−1,E−8α−2,E−8α−13)。
(axisを走査)
(α1)「paxis設定ユニット511」により、“視軸上の位置paxis”をこのパラメータaxisに等しいとして設定する(E−8α−3)。
(α2)「画素番号iの走査ユニット512」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−8α−4,E−8α−5,E−8α−12)。
(iを走査)
(α3)「要素番号jの走査ユニット513」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−8α−6,E−8α−7,E−8α−11)。
(jを走査)
(α4)「出力ユニット514」、「nsj出力ユニット515」、および「sj出力ユニット519」により、これらアドレス(i,j)に対応する、画像内の画素および円柱配列要素(nsjsj)を出力する(E−8α−8)。
(α5)以上で設定された四つのパラメータnsjsj,paxisを「ijσテーブル作成ユニット520」に入力して、付録の(B−2)に示す方法で両眼視差ijσを計算する(E−8α−9)。
(α6)この両眼視差ijσを、ijσテーブル(図172)のアドレス(i,j)に対応する内容として格納する(E−8α−10)。
(iを走査(E−8α−11))
(jを走査(E−8α−12))
(α7)ここまで処理で、各視軸方向axisに対するijσテーブルが得られる。
(axisを走査)
以上により全ての視軸方向{axis}に対するijσテーブル(図172)が得られる。
(β)上記で作成されたijσテーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図132(B),図134参照)
下記の(β1)から(β6)までのステップは、実施形態D−7の対応するステップと同じである。
(β0)「axisパラメータの走査ユニット579」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(E−8β−1,E−8β−2,E−8β−13)。
(axisを走査)
(β1)「画素番号iの走査ユニット572」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(E−8β−3,E−8β−4,E−8β−12)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット574」により、右カメラ561および左カメラ562で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(E−8β−5)。
(β3)「要素番号jの走査ユニット573」により、円柱配列内の要素(nsjsj)のアドレスjを下限値jminから上限値jmaxまで走査する(E−8β−6,E−8β−7,E−8β−11)。
(jを走査)
(β4)これらアドレス(i,j)をijσテーブル585(図172)に入力して、両眼視差ijσを出力する(E−8β−8)。
(β5)実施形態D−5のステップ(6)と同様にして、“右および左カメラの局所領域画像”および両眼視差ijσを「両眼視差検出ユニット586」(図167)に入力して、応答強度を下式で計算する(E−8β−9)。
応答強度=ΣΣ (x,y)(x−ijσ,y−ijσ
(β6)この応答強度を、「円柱配列投票ユニット587」内の要素(nsjsj)に投票する(E−8β−10)。
(jを走査(E−8β−11))
(iを走査(E−8β−12))
(β7)ここまでの処理で、「円柱配列投票ユニット587」内の全要素に投票が行われる。
(axisを走査(E−8β−13))
(β8)ここまでの処理で、全ての視軸方向パラメータaxisに対する円柱配列群の全要素に投票が行われる。
(β9)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット588」により抽出する。この配列に対する視軸方向パラメータとして、真の移動方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(E−8β−14)。
実施形態F
実施形態F−1
図135は、本実施形態F−1の構成を示すブロック図、図136、図137は、その動作を示すフローチャートである。
実施形態F−1(規格化時間)
(α)実施形態E−1のijτテーブル(図163)を{ikj}テーブルに変換(図135(A),図136参照)
(α1)実施形態E−1αの処理(図112参照)により、ijτテーブル555(図111,図163参照)を作成し(F−1α−1)、{ikj}テーブル変換ユニット601により、そのijτテーブル(すなわち運動視差τ)を、図160の対応関係に基づいて、運動視差番号kに書き換える(F−1α−2)。これにより、図163のijτテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図135(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット601により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブルを作成する(F−1α−3)。前掲の実施形態A−6で述べたように、任意アドレス(i,k)――すなわち、位置がで運動視差がτの画素――は複比変換と極変換により“円柱配列の大円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図165参照)。
(α3)以上により、任意アドレス(i,k)を指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図165)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化時間c0を検出する(図135(B),図137参照)
(β1)「画素番号iの走査ユニット652」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−1β−1,F−1β−2,F−1β−12)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット654」により、カメラ651で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(F−1β−3)。
(β3)「運動視差番号kの走査ユニット653」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(F−1β−4,F−1β−5,F−1β−11)。
(kを走査)
(β4)「運動視差τ変換ユニット655」により、この番号kを、実施形態D−1のステップ(5)と同様にして運動視差τに変換する(F−1β−6)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときには、この移動方向vと矛盾する運動視差のため、ステップ(β7)までをスキップする(F−1β−7)。
(β5)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット656」(図159)に入力して、実施形態D−1のステップ(6)と同様にして応答強度を下式で計算する(F−1β−8)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(β6)アドレス(i,k)を{ikj}テーブル602に入力して、円柱配列の要素番号群{ikj}を出力する(F−1β−9)。
(β7)「円柱配列投票ユニット657」中の、この番号群{ikj}に対応する円柱配列の要素番号群に、ステップ(β5)で計算した応答強度を投票する(F−1β−10)。
(kを走査(F−1β−11))
(iを走査(F−1β−12))
(β8)「ピーク抽出ユニット658」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面を横切るまでの規格化時間c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−1β−13)。
実施形態F−2(規格化時間+v未知)
図138は、本実施形態F−2の構成を示すブロック図、図139,図140は、その動作を示すフローチャートである。
(α)全ての移動方向{v}に対する{ikj}テーブル(図166)の作成(図138(A),図139参照)
(α1)実施形態E−2αの処理(図115参照)により、ijτテーブル555(図114,図164参照)を作成し(F−2α−1)、{ikj}テーブル変換ユニット601により、そのijτテーブル555(すなわち運動視差τ)を、図160の対応関係に基づいて、運動視差番号kに書き換える(F−2α−2)。これにより、図164のijτテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図138(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット601により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブルを作成する(F−2α−3)。前掲の実施形態A−6で述べたように、任意アドレス(i,k)――すなわち、位置がで運動視差がτの画素――は複比変換と極変換により“円柱配列の大円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図166参照)。
(α3)以上により、任意アドレス(i,k)と移動方向vを指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図166)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化時間c0を検出する(図138(B),図140参照)
下記の(β1)から(β7)までのステップは、実施形態F−1の対応するステップと同じである。
(β0)「vパラメータの走査ユニット659」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(F−2β−1,F−2β−2,F−2β−15)。
(vを走査)
(β1)「画素番号iの走査ユニット652」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−2β−3,F−2β−4,F−2β−14)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット654」により、カメラ654で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする各局所領域画像を、現時刻tと次時刻tについて切り出す(F−2β−5)。
(β3)「運動視差番号kの走査ユニット653」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(F−2β−6,F−2β−7,F−2β−13)。
(kを走査)
(β4)実施形態E−1のステップ(5)と同様にして、「運動視差τ変換ユニット653」により、この番号kを運動視差τに変換する(F−2β−8)。但し、運動視差τすなわちベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときには、この移動方向vと矛盾する運動視差のため、ステップ(β7)までをスキップする(F−2β−9)。
(β5)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット656」(図159参照)に入力して、実施形態D−1のステップ(6)と同様にして応答強度を下式で計算する(F−2β−10)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(β6)アドレス(i,k)および移動方向vを{ikj}テーブル602に入力して、円柱配列の要素番号群{ikj}を出力する(F−2β−11)。
(β7)「円柱配列投票ユニット657」中のこの番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−2β−12)。
(kを走査(F−2β−13))
(iを走査(F−2β−14))
(β8)ここまでの処理で、円柱配列内の全要素に投票が行なわれる。
(vを走査(F−2β−15))
(β9)ここまでの処理で、全ての移動方向パラメータvに対する円柱配列内の全要素に投票が行なわれる。
(β10)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット658」により抽出する。この配列に対応する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化時間c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−2β−16)。
実施形態F−3(規格化最短距離)
図141は、本実施形態F−3の構成を示すブロック図、図142,図143は、その動作を示すフローチャートである。
(α)実施形態E−3のijτテーブル(図163)を{ikj}テーブルに変換(図141(A),図142参照)
(α1)実施形態E−3αの処理(図118参照)により、ijτテーブルの内容565(図117,図163参照)を作成し(F−3α−1)、{ikj}テーブル変換ユニット611により、そのijτテーブル(すなわち運動視差τ)を、図160の対応関係に基づいて、運動視差番号kに書き換える(F−3α−2)。これにより、図163のijτテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図141(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット611により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブルを作成する(F−3α−3)。前掲の実施形態A−8で述べたように、任意アドレス(i,k)――すなわち、位置がで運動視差がτの画素――は小円変換により“円柱配列の小円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図165参照)。
(α3)以上により、任意アドレス(i,k)を指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図165)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図141(B),図143参照)
(β1)「画素番号iの走査ユニット652」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−3β−1,F−3β−2,F−3β−12)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット654」により、カメラ651で得られた現時刻tと次時刻tの各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、現時刻tと次時刻tについて切り出す(F−3β−3)。
(β3)「運動視差kの走査ユニット653」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(F−3β−4,F−3β−5,F−3β−11)。
(kを走査)
(β4)「運動視差τ変換ユニット665」により、この番号kを、実施形態D−1のステップ(5)と同様にして運動視差τに変換する(F−3β−6)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときには、この移動方向vと矛盾する運動視差のため、ステップ(β7)までをスキップする(F−3β−7)。
(β5)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット666」(図159)に入力して、実施形態D−1のステップ(6)と同様にして応答強度を下式で計算する(F−3β−8)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(β6)アドレス(i,k)を{ikj}テーブル612に入力して、円柱配列の要素番号群{ikj}を出力する(F−3β−9)。
(β7)「円柱配列投票ユニット667」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−3β−10)。
(kを走査(F−3β−11))
(iを走査(F−3β−12))
(β8)「ピーク抽出ユニット668」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−3β−13)。
実施形態F−4(規格化最短距離+v未知)
図144は、本実施形態F−4の構成を示すブロック図、図145,図146は、その動作を示すフローチャートである。
(α)実施例形態E−4のikτテーブル(図164)を、{ikj}テーブルに変換(図144(A),図145参照)
(α1)実施形態E−4αの処理(図121参照)により、ijτテーブル565(図120,図164参照)を作成し(F−4α−1)、{ikj}テーブル変換ユニット611により、そのijτテーブル(すなわち運動視差τ)を、図160の対応関係に基づいて、運動視差番号kに書き換える(F−4α−2)。これにより、図164のijτテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図144(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット611により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブルを作成する(F−4α−3)。前掲の実施形態A−8で述べたように、任意アドレス(i,k)――すなわち、位置がで運動視差がτの画素――は、小円変換により“円柱配列の小円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図166参照)。
(α3)以上により、任意アドレス(i,k)と移動方向vを指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル612(図166)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図144(B),図146参照)
下記の(β1)から(β7)までのステップは、実施形態F−3の対応するステップと同じである。
(β0)「vパラメータの走査ユニット659」により、可能性のある全ての方向(下限値vminから上限値vmaxまで)にわたって、“移動方向パラメータv”を走査する(F−4β−1,F−4β−2,F−4β−15)。
(vを走査)
(β1)「画素番号iの走査ユニット652」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−4β−3,F−4β−4,F−4β−14)。
(iを走査)
(β2)実施形態D−1のステップ(3)と同様にして、「を中心とする局所領域画像の切出しユニット654」により、カメラ651で得られた現時刻tおよび次時刻tの各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、現時刻tと次時刻tについて切り出す(F−4β−5)。
(β3)「運動視差番号kの走査ユニット653」により、運動視差番号kを下限値kminから上限値kmaxまで走査する(F−4β−6,F−4β−7,F−4β−13)。
(kを走査)
(β4)「運動視差τ変換ユニット665」により、この番号kを、実施形態D−1のステップ(5)と同様にして運動視差τに変換する(F−4β−8)。但し、運動視差τすなわち動きベクトル(τ τ)の方向が、図10(A)の“からv(すなわち、pinf)への方向”と違っているときには、この移動方向vと矛盾する運動視差のため、ステップ(β7)までをスキップする(F−4β−9)。
(β5)以上で設定された“現時刻tと次時刻tの局所領域画像”および運動視差τを「運動視差検出ユニット666」(図159)に入力して、実施形態D−1のステップ(6)と同様にして応答強度を下式で計算する(F−4β−10)。
応答強度=ΣΣ (x,y)(x−τ,y−τ
(β6)アドレス(i,k)および移動方向vを{ikj}テーブル612に入力して、円柱配列の要素番号群{ikj}を出力する(F−4β−11)。
(β7)「円柱配列投票ユニット667」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−4β−12)。
(kを走査(F−4β−13))
(iを走査(F−4β−14))
(β8)ここまでの処理で、円柱配列内の全要素に投票が行なわれる。
(vを走査(F−4β−15))
(β9)ここまでの処理で、全ての移動方向パラメータvに対する円柱配列内の全要素に投票が行なわれる。
(β10)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット668」により抽出する。この配列に対応する移動方向パラメータとして、真の移動方向vが求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面を横切るまでの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−4β−16)。
実施形態F−5(ステレオ+規格化距離)
図147は、本実施形態F−5の構成を示すブロック図、図148、図149は、その動作を示すフローチャートである。
(α)実施形態E−5のijσテーブル(図171)を{ikj}テーブルに変換(図147(A),図145参照)
(α1)実施形態E−5αの処理(図124参照)により、ijσテーブル575(図123,図171参照)を作成し(F−5α−1)、「{ikj}テーブル変換ユニット621」により、そのijσテーブル(すなわち両眼視差σ)を、図168の対応関係に基づいて、両眼視差番号kに書き換える(F−5α−2)。これにより、図171のijσテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図147(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット621」により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブル622を作成する(F−5α−3)。前掲の実施形態B−6で述べたように、任意アドレス(i,k)――すなわち、位置がで両眼視差がσの画素――は複比変換と極変換により“円柱配列内の大円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図173参照)。
(α3)以上により、任意アドレス(i,k)を指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図173)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化距離c0を検出する(図147(B),図149参照)
(β1)「画素番号iの走査ユニット672」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−5β−1,F−5β−2,F−5β−12)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット674」により、右カメラ661および左カメラ662で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(F−5β−3)。
(β3)「両眼視差番号kの走査ユニット673」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(F−5β−4,F−5β−5,F−5β−11)。
(kを走査)
(β4)「両眼視差σ変換ユニット675」により、この番号kを、実施形態D−5のステップ(5)と同様にして両眼視差σに変換する(F−5β−6)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(β7)までをスキップする(F−5β−7)。
(β5)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット676」(図167)に入力して、実施形態D−5のステップ(6)と同様にして応答強度を下式で計算する(F−5β−8)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(β6)アドレス(i,k)を{ikj}テーブル622に入力して、円柱配列の要素番号群{ikj}を出力する(F−5β−9)。
(β7)「円柱配列投票ユニット677」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−5β−10)。
(kを走査(F−5β−11))
(iを走査(F−5β−12))
(β8)「ピーク抽出ユニット678」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“大円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離c0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−5β−13)。
実施形態F−6(ステレオ+規格化距離+aaxis未知)
図150は、本実施形態F−6の構成を示すブロック図、図151,図152は、その動作を示すフローチャートである。
(α)全ての視軸方向{axis}に対する{ikj}テーブル(図166)の作成(図150(A),図151参照)
(α1)実施形態E−6αの処理(図127参照)により、ijσテーブル575(図126,図172参照)を作成し(F−6α−1)、{ikj}テーブル変換ユニット621により、そのijσテーブル(すなわち両眼視差σ)を、図168の対応関係に基づいて、両眼視差番号kに書き換える(F−6α−2)。これにより、図172のijσテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図150(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット621により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブルを作成する(F−6α−3)。前掲の実施形態B−6で述べたように、任意アドレス(i,k)――すなわち、位置がで両眼視差がσの画素――は、複比変換と極変換により“円柱配列の大円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図174参照)。
(α3)以上により、任意アドレス(i,k)と視軸方向axisを指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図174)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化距離c0を検出する(図150(B),図152参照)
下記の(β1)から(β7)までのステップは、実施形態F−5の対応するステップと同じである。
(β0)「axisパラメータの走査ユニット679」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(F−6β−1,F−6β−2,F−6β−15)。
(axisを走査)
(β1)「画素番号iの走査ユニット672」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−6β−3,F−6β−4,F−6β−14)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット674」により、右カメラ661および左カメラ662で得られた各画像から、“アドレスiに対応
する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(F−6β−5)。
(β3)「両眼視差番号kの走査ユニット673」により、両眼視差番号kを下限値kminから下限値kmaxまで走査する(F−6β−6,F−6β−7,F−6β−13)。
(β4)実施形態D−5のステップ(5)と同様にして、「両眼視差σ変換ユニット675」により、この番号kを、両眼視差σに変換する(F−6β−8)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(β7)までをスキップする(F−6β−8)。
(β5)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット676」(図167)に入力して、実施形態D−5のステップ(6)と同様にして応答強度を下式で計算する(F−6β−10)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(β6)アドレス(i,k)および視軸方向axisを{ikj}テーブル622に入力して、円柱配列の要素番号群{ikj}を出力する(F−6β−11)。
(β7)「円柱配列投票ユニット677」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−6β−12)。
(kを走査(F−6β−13))
(iを走査(F−6β−14))
(β8)ここまでの処理で、円柱配列内の全要素に投票が行なわれる。
(axisを変換(F−6β−15))
(β9)ここまでの処理で、全ての視軸方向パラメータaxisに対する円柱配列内の全要素に投票が行なわれる。
(β10)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット678」により抽出する。この配列に対応する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化距離c0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−6β−16)。
実施例F−7(ステレオ+規格化最短距離)
図153は、本実施形態F−7の構成を示すブロック図、図154,図155は、その動作を示すフローチャートである。
(α)実施形態E−7のijσテーブル(図171)を{ikj}テーブルに変換(153(A),図154参照)
(α1)実施形態E−7αの処理(図130参照)により、ijσテーブル585(図129,図171参照)を作成し、(F−7α−1)、「{ikj}テーブル変換ユニット631」により、そのijσテーブル(すなわち両眼視差σ)を、図168の対応関係に基づいて、両眼視差番号kに書き換える(F−7α−2)。これにより、図171のijσテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図153(A)の中段)」に書き換えられる。
(α2)次に、その「{ikj}テーブル変換ユニット631」により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブル632を作成する(F−7α−3)。前掲の実施形態B−8で述べたように、任意アドレス(i,k)――すなわち、位置がで両眼視差がσの画素――は小円変換により“円柱配列内の小円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図173参照)。
(α3)以上により、任意アドレス(i,k)を指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図173)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化距離s0を検出する(図153(B),図155参照)
(β1)「画素番号iの走査ユニット672」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−7β−1,F−7β−2,F−7β−12)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット674」により、右カメラ661および左カメラ662で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(F−7β−3)。
(β3)「両眼視差番号kの走査ユニット673」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(F−7β−4,F−7β−5,F−7β−11)。
(kを走査)
(β4)「両眼視差σ変換ユニット685」により、この番号kを、実施形態D−5のステップ(5)と同様にして両眼視差σに変換する(F−7β−6)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(β7)までをスキップする(F−7β−7)。
(β5)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット686」(図167)に入力して、実施形態D−5のステップ(6)と同様にして応答強度を下式で計算する(F−7β−8)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(β6)アドレス(i,k)を{ikj}テーブル632に入力して、円柱配列の要素番号群{ikj}を出力する(F−7β−9)。
(β7)「円柱配列投票ユニット687」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−7β−10)。
(kを走査(F−7β−11))
(iを走査(F−7β−12))
(β8)「ピーク抽出ユニット688」により、円柱配列の中で“投票された強度が極大(ピーク)になる点”を抽出する――この極大点が“小円群が一点に交差する場所”である。この極大点の“高さ座標”として“平面までの規格化最短距離s0”が求められ、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−7β−13)。
実施形態F−8(ステレオ+規格化最短距離+aaxis未知)
図156は、本実施形態F−8の構成を示すブロック図、図157,図158はその動作を示すフローチャートである。
(α)実施形態E−8のikσテーブル(図172)を、{ikj}テーブルに変換(図156(A),図157参照)
(α1)実施形態E−8αの処理(図133参照)により、ijσテーブル585(図132,図172参照)を作成し、(F−8α−1)、{ikj}テーブル変換ユニット631」により、そのijσテーブル(すなわち両眼視差σ)を、図168の対応関係に基づいて、両眼視差番号kに書き換える(F−8α−2)。これにより、図172のijσテーブルは、アドレスが(i,j)で内容がijkの「ijkテーブル(図156(A)の中段)」に書き換えられる。
(α2)次に、その{ikj}テーブル変換ユニット631」により、このijkテーブルを並べ換えて、アドレスが(i,k)で内容が“円柱配列の要素番号j”のテーブル632を作成する(F−8α−3)。前掲の実施形態B−8で述べたように、任意アドレス(i,k)――すなわち、位置がで両眼視差がσの画素――は、小円変換により“円柱配列の小円上の全ての点”に結ばれるから、上記の要素番号jは集合になり、要素番号群{ikj}で表される(図174参照)。
(α3)以上により、任意アドレス(i,k)と視軸方向axisを指定すると、円柱配列の要素番号群{ikj}が出力される{ikj}テーブル(図174)を作成できた。
(β)上記で作成された{ikj}テーブルを用いて、平面方位ns0と規格化最短距離s0を検出する(図156(B),図158参照)
下記の(β1)から(β7)までのステップは、実施形態F−7の対応するステップと同じである。
(β0)「axisパラメータの走査ユニット679」により、可能性のある全ての方向(下限値axis,minから上限値axis,maxまで)にわたって、“視軸方向パラメータaxis”を走査する(F−8β−1,F−8β−2,F−8β−15)。
(axisを走査)
(β1)「画素番号iの走査ユニット672」により、画像内の各点のアドレスiを下限値iminから上限値imaxまで走査する(F−8β−3,F−8β−4,F−8β−14)。
(iを走査)
(β2)「を中心とする局所領域画像の切出しユニット674」により、右カメラ661および左カメラ662で得られた各画像から、“アドレスiに対応する画素”を中心とする局所領域画像を、図167の左端に示すように、右および左カメラについて切り出す(F−8β−5)。
(β3)「両眼視差番号kの走査ユニット673」により、両眼視差番号kを下限値kminから上限値kmaxまで走査する(F−8β−6,F−8β−7,F−8β−13)。
(kを走査)
(β4)「両眼視差σ変換ユニット685」により、この番号kを、実施形態D−5のステップ(5)と同様にして両眼視差σに変換する(F−8β−8)。但し、両眼視差σすなわち視差ベクトル(σ σ)の方向が、図24(A)の“からaxis(すなわち、paxis)への方向”と違っているときには、この視軸方向axisと矛盾する両眼視差のため、ステップ(β7)までをスキップする(F−8β−9)。
(β5)以上で設定された“右および左カメラの局所領域画像”および両眼視差σを「両眼視差検出ユニット686」(図167)に入力して、実施形態D−5のステップ(6)と同様にして応答強度を下式で計算する(F−8β−10)。
応答強度=ΣΣ (x,y)(x−σ,y−σ
(β6)アドレス(i,k)および視軸方向axisを{ikj}テーブル632に入力して、円柱配列の要素番号群{ikj}を出力する(F−8β−11)。
(β7)「円柱配列投票ユニット687」中の、この番号群{ikj}に対応する円柱配列の要素群に、ステップ(β5)で計算した応答強度を投票する(F−8β−12)。
(kを走査(F−8β−13))
(iを走査(F−8β−14))
(β8)ここまでの処理で、円柱配列内の全要素に投票が行なわれる。
(axisを走査(F−8β−15))
(β9)ここまでの処理で、全ての視軸方向パラメータaxisに対する円柱配列内の全要素に投票が行なわれる。
(β10)上記の円柱配列群の中で、強度が最大になる“特定の円柱配列”を「ピーク抽出ユニット688」により抽出する。この配列に対応する視軸方向パラメータとして、真の視軸方向axis0が求められる。また、その配列の中で強度がピークになる点を抽出すると、その点の“高さ座標”として平面までの規格化最短距離s0が、また“断面円内の座標”として平面の3次元方位ns0が求められる(F−8β−16)。
付録 運動視差と両眼視差の計算法
(A)運動視差
(A−1)規格化時間、平面方位n、現時刻位置p、無限時刻位置pinf(移動方向v)から、運動視差τを計算する二種類の方法を以下に述べる。
(A−1−1)方法1:複比と極変換による方法(図161)
ステップ1:規格化時間、平面方位n、現時刻位置p、無限時刻位置pinfを設定する。
ステップ2:pの決定
は“pとpinfを通る大円”と“nの極線”との交点であるから(図161(A))、下式で決定される。なお、下式の“nとのベクトル積”は前述の1.3.2の極変換に起因する。
=[[p×pinf]×n]/|[p×pinf]×n| (付録−1a)
ステップ3:τすなわちcos−1(p)の決定
、pinf、p、p、pの間には
={pinf} (付録−2a)
の複比の関係がある(式(12a)参照)。pinf、p、p、pを中心角で表して(前述の1.3.1、図161(B))、式(付録−2a)に代入すると下式になる(式(16a)参照)。
=(sin(a+τ)/sin(τ))
/(sin(x)/sin(x−a)) (付録−2b)
この式をτについて解くと
τ=tan−1(sina sin(x−a)
/( sinx−cosa sin(x−a)) (付録−3)
になり、運動視差τが決定された。ここでaとxは下式で計算される。
a=cos−1(pinf) (付録−4a)
x=cos−1(pinf) (付録−4b)
なお、次時刻位置pを求めたい場合には、
=cosτ ξ+sinτ η (付録−5a)
と計算できる。ξとηは下式で与えられる。
ξ=p (付録−5b)
η=[[p×pinf]×p]/|[p×pinf]×p| (付録−5c)
(A−1−2)方法2:別法
下記の方法でも求めることができる。
ステップ1:規格化時間、平面方位n、現時刻位置p、無限時刻位置pinfを設定する。
ステップ2:任意の単位移動距離Δxを設定して、カメラ中心から平面まで距離d――この距離は図12のVt――を下式で計算する。
Δx (付録−6)
ステップ3:方位がnで距離がdの平面が決まる。カメラ中心からpの方向に延長して、その平面と交わる点Pを計算する。
ステップ4:その点Pをpinfの方向にΔxだけ移動した点Pを計算する。
ステップ5:この点Pを下式で規格化したpが、次時刻の球面上の位置である。
=P/|P| (付録−7)
ステップ6:この位置pと現時刻位置pから下式で運動視差τを決定できる。なお、ステップ2で任意に設定した単位移動距離Δxを変化しても、この運動視差は影響されない。
τ=cos−1(p) (付録−8)
(A−2)規格化最短距離の場合
規格化最短距離、平面方位n、現時刻位置p、無限時刻位置pinf(移動方向v)から、運動視差τを計算する二種類の方法を以下に述べる。
(A−2−1)方法1:小円変換による方法(図162)
ステップ1:規格化最短距離、平面方位n、現時刻位置p、無限時刻位置pinfを設定する。
ステップ2:小円変換の半径Rを下式で決定する(前述の2.2、図162(A))。
R=cos−1(p) (付録−11)
ステップ3:τすなわちcos−1(p)の決定
2.2で述べたように下式の関係がある(図162(B))
cosR=/(pinf
sinτ/sin(a+τ) (付録−12)
この式をτについて解くと
τ=tan−1(sina cosR/(−cosa cosR))
(付録−13)
になり、運動視差τが決定された。
なお、次時刻位置pを求めたい場合には、式(付録−5)と同様に下式で計算できる。
=cosτ ξ+sinτ η (付録−14)
(A−2−2)方法2:別法
下記の方法でも求めることができる。
ステップ1:規格化最短距離、平面方位n、現時刻位置p、無限時刻位置pinfを設定する。
ステップ2:任意の単位移動距離Δxを設定して、カメラ中心から平面まで最短距離d(図12)を下式で計算する。
Δx (付録−15)
ステップ3:方位がnで最短距離がdの平面が決まる。カメラ中心からpの方向に延長して、その平面と交わる点Pを計算する。
ステップ4:その点Pをpinfの方向にΔxだけ移動した点Pを計算する。
ステップ5:この点Pを下式で規格化したpが、次時刻の球面上の位置である。
=P/|P| (付録−16)
ステップ6:この位置pと現時刻位置pから下式で運動視差τを決定できる。なお、ステップ2で任意に設定した単位移動距離Δxを変化しても、この運動視差は影響されない。
τ=cos−1(p) (付録−17)
(B)両眼視差
(B−1)規格化距離の場合
規格化距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxis(移動方向axis)から、両眼視差σを計算する二種類の方法を以下に述べる。
(B−1−1)方法1:複比と極変換による方法(図169)
ステップ1:規格化距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxisを設定する。
ステップ2:pの決定
は“pとpaxisを通る大円”と“nの極線”との交点であるから(図169(A))、下式で決定される。なお、下式の“nとのベクトル積”は前述の4.2.3の極変換に起因する。
=[[p×paxis]×n]/|[p×paxis]×n| (付録−21a)
ステップ3:σすなわちcos−1(p)の決定
、paxis、p、p、pの間には
={paxis} (付録−22a)
の複比の関係がある(4.2参照)。paxis、p、p、pを中心角で表して(前述の4.2、図169(B))、式(付録−22a)に代入すると下式になる(式(60a)参照)。
=(sin(c+σ)/sin(σ))
/(sin(x)/sin(x−c)) (付録−22b)
この式をτについて解くと
σ=tan−1(sinc sin(x−c)
/( sinx−cosc sin(x−c)) (付録−23)
になり、両眼視差σが決定された。ここでcとxは下式で計算される。
c=cos−1(paxis) (付録−24a)
x=cos−1(paxis) (付録−24b)
なお、左カメラ画像での位置pを求めたい場合には、
=cosσ ξ+sinσ η (付録−25a)
と計算できる。ξとηは下式で与えられる。
ξ=p (付録−25b)
η=[[p×paxis]×p]/|[p×paxis]×p| (付録−25c)
(B−1−2)方法2:別法
下記の方法でも求めることができる。
ステップ1:規格化距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxisを設定する。
ステップ2:任意の左右カメラ間距離ΔxLRを設定して、カメラ中心から平面まで距離d(図22)を下式で計算する。
ΔxLR (付録−26)
ステップ3:方位がnで距離がdの平面が決まる。カメラ中心からpの方向に延長して、その平面と交わる点Pを計算する。
ステップ4:その点Pをpaxisの方向にΔxLRだけ移動した点Pを計算する。
ステップ5:この点Pを下式で規格化したpが、左カメラ画像位置である。
=P/|P| (付録−27)
ステップ6:この位置pと現時刻位置pから下式で両眼視差σを決定できる。なお、ステップ2で任意に設定した左右カメラ間距離ΔxLRを変化しても、この両眼視差は影響されない。
σ=cos−1(p) (付録−28)
(B−2)規格化最短距離の場合
規格化最短距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxis(視軸方向axis)から、両眼視差σを計算する二種類の方法を以下に述べる。
(B−2−1)方法1:小円変換による方法(図170)
ステップ1:規格化最短距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxisを設定する。
ステップ2:小円変換の半径Rを下式で決定する(前述の4.3、図170(A))。
R=cos−1(p) (付録−31)
ステップ3:σすなわちcos−1(p)の決定
4.3で述べたように下式の関係がある(図170(B))
cosR=/(paxis
sinσ/sin(c+σ) (付録−32)
この式をσについて解くと
σ=tan−1(sinc cosR/(−cosc cosR))
(付録−33)
になり、両眼視差σが決定された。
なお、次時刻位置pを求めたい場合には、式(付録−25)と同様に下式で計算できる。
=cosσ ξ+sinσ η (付録−34)
(B−2−2)方法2:別法
下記の方法でも求めることもできる。
ステップ1:規格化最短距離、平面方位n、右カメラ画像位置p、左右カメラを結ぶ視軸上の位置paxisを設定する。
ステップ2:任意の左右カメラ間距離ΔxLRを設定して、カメラ中心から平面まで最短距離dを下式で計算する。
ΔxLR (付録−35)
ステップ3:方位がnで最短距離がdの平面が決まる。カメラ中心からpの方向に延長して、その平面と交わる点Pを計算する。
ステップ4:その点Pをpaxisの方向にΔxLRだけ移動した点Pを計算する。
ステップ5:この点Pを下式で規格化したpが、左カメラ画像位置である。
=P/|P| (付録−36)
ステップ6:この位置pと右カメラ画像位置pから下式で両眼視差σを決定できる。なお、ステップ2で任意に設定した左右カメラ距離ΔxLRを変化しても、この両眼視差は影響されない。
σ=cos−1(p) (付録−37)
オプティカルフロー・パターンの説明図である。 本発明の画像計測装置の一実施形態として採用されるコンピュータシステムの概観を示す図である。 図2に示すコンピュータシステムのハードウェア構成図である。 平面が移動する様子を示す図である。 平面の3次元方位を計測する原理の説明図である。 球面を移動する様子を示す図である。 点までの距離を計測する原理の説明図である。 平面を横切るまでの時間を計測する原理の説明図である。 中心角の定義を示す図である。 円柱配列により規格化時間を計測する原理の説明図である。 規格化時間計測を計算機シミュレーションした結果を示す図である。 平面を横切るまでの時間と最短距離の関係を示す図である。 平面までの最短距離を計測する原理の説明図である。 小円変換のための模式図である。 点までの距離と平面までの最短距離との関係を示す図である。 小円変換の幾何学的意味を示す図である。 円柱配列により規格化最短距離を計測する原理の説明図である。 規格化最短距離を卓上図である。 カメラ移動と平面移動の等価性を示す図である。 球面上の極変換と平面上の極変換の関係を示す図である。 球面カメラ画像と平面カメラ画像の関係を示す図である。 視軸方向に平面を横切るまでの距離の計測原理説明図である。 中心角の定義を示す図である。 円柱配列により“視軸方向に平面を横切るまでの規格化距離”を計測する原理の説明図である。 “視軸方向に平面を横切るまでの規格化距離”と“平面までの最短距離”の関係を示す図である。 平面までの最短距離を計測する原理説明図である。 円柱配列により規格化最短距離を計測する原理の説明図である。 実施形態A−1のブロック図である。 請求項4の実施形態A−1のフローチャートである。 実施形態A−1に関する説明図である。 実施形態A−2のブロック図である。 実施形態A−2のフローチャートである。 実施形態A−3のブロック図である。 実施形態A−3のフローチャートである。 実施形態A−3に関する説明図である。 実施形態A−4のブロック図である。 実施形態A−4のフローチャートである。 実施形態A−5のブロック図である。 実施形態A−5のフローチャートである。 実施形態A−6のブロック図である。 実施形態A−6のフローチャートである。 実施形態A−7のブロック図である。 実施形態A−7のフローチャートである。 実施形態A−8のブロック図である。 実施形態A−8のフローチャートである。 実施形態A−9のブロック図である。 実施形態A−9のフローチャートである。 実施形態A−10のブロック図である。 実施形態A−10のフローチャートである。 実施形態B−1のブロック図である。 実施形態B−1のフローチャートである。 実施形態B−2のブロック図である。 実施形態B−2のフローチャートである。 実施形態B−3のブロック図である。 実施形態B−3のフローチャートである。 実施形態B−3に関する説明図である。 実施形態B−4のブロック図である。 実施形態B−4のフローチャートである。 実施形態B−5のブロック図である。 実施形態B−5のフローチャートである。 実施形態B−6のブロック図である。 実施形態B−6のフローチャートである。 実施形態B−7のブロック図である。 実施形態B−7のフローチャートである。 実施形態B−8のブロック図である。 実施形態B−8のフローチャートである。 実施形態B−9のブロック図である。 実施形態B−9のフローチャートである。 実施形態B−10のブロック図である。 実施形態B−10のフローチャートである。 実施形態C−1のブロック図である。 実施形態C−1のフローチャートである。 実施形態C−2のブロック図である。 実施形態C−2のフローチャートである。 実施形態C−3のブロック図である。 実施形態C−3のフローチャートである。 実施形態C−4のブロック図である。 実施形態C−4のフローチャートである。 実施形態C−5のブロック図である。 実施形態C−5のフローチャートである。 実施形態C−6のブロック図である。 実施形態C−6のフローチャートである。 実施形態C−7のブロック図である。 実施形態C−7のフローチャートである。 実施形態C−8のブロック図である。 実施形態C−8のフローチャートである。 実施形態D−1のブロック図である。 実施形態D−1のフローチャートである。 実施形態D−2のブロック図である。 実施形態D−2のフローチャートである。 実施形態D−3のブロック図である。 実施形態D−3のフローチャートである。 実施形態D−4のブロック図である。 実施形態D−4のフローチャートである。 実施形態D−5のブロック図である。 実施形態D−5のフローチャートである。 実施形態D−6のブロック図である。 実施形態D−6のフローチャートである。 実施形態D−7のブロック図である。 実施形態D−7のフローチャートである。 実施形態D−8のブロック図である。 実施形態D−8のフローチャートである。 実施形態D−9のブロック図である。 実施形態D−9のフローチャートである。 実施形態D−10のブロック図である。 実施形態D−10のフローチャートである。 実施形態D−11のブロック図である。 実施形態D−11のフローチャートである。 実施形態D−12のブロック図である。 実施形態D−12のフローチャートである。 実施形態E−1ブロック図である。 実施形態E−1のフローチャートである。 実施形態E−1のフローチャートである。 実施形態E−2のブロック図である。 実施形態E−2のフローチャートである。 実施形態E−2のフローチャートである。 実施形態E−3のブロック図である。 実施形態E−3のフローチャートである。 実施形態E−3のフローチャートである。 実施形態E−4のブロック図である。 実施形態E−4のフローチャートである。 実施形態E−4のフローチャートである。 実施形態E−5のブロック図である。 実施形態E−5のフローチャートである。 実施形態E−5のフローチャートである。 実施形態E−6のブロック図である。 実施形態E−6のフローチャートである。 実施形態E−6のフローチャートである。 実施形態E−7のブロック図である。 実施形態E−7のフローチャートである。 実施形態E−7のフローチャートである。 実施形態E−8のブロック図である。 実施形態E−8のフローチャートである。 実施形態E−8のフローチャートである。 実施形態F−1のブロック図である。 実施形態F−1のフローチャートである。 実施形態F−1のフローチャートである。 実施形態F−2のブロック図である。 実施形態F−2のフローチャートである。 実施形態F−2のフローチャートである。 実施形態F−3のブロック図である。 実施形態F−3のフローチャートである。 実施形態F−3のフローチャートである。 実施形態F−4のブロック図である。 実施形態F−4のフローチャートである。 実施形態F−4のフローチャートである。 実施形態F−5のブロック図である。 実施形態F−5のフローチャートである。 実施形態F−5のフローチャートである。 実施形態F−5のブロック図である。 実施形態F−6のフローチャートである。 実施形態F−6のフローチャートである。 実施形態F−7のブロック図である。 実施形態F−7のフローチャートである。 実施形態F−7のフローチャートである。 実施形態F−8のブロック図である。 実施形態F−8のフローチャートである。 実施形態F−8のフローチャートである。 運動視差検出ユニットのブロック図である。 運動視差τと視差ベクトル(ττ)との対応を示した図である。 複比と極変換による、運動視差τの計算方法の説明図である。 小円変換による、運動視差τの計算方法の説明図である。 ijτテーブルの模式図である。 ijτテーブルの模式図である。 ikj}テーブルの模式図である。 ikj}テーブルの模式図である。 両目視差検出ユニットのブロック図である。 両眼視差σと視差ベクトル(σσ)との対応を示した図である。 複比と極変換による、両眼視差τの計算方法の説明図である。 小円変換による、両眼視差τの計算方法の説明図である。 ijσテーブルの模式図である。 ijσテーブルの模式図である。 ikj}テーブルの模式図である。 ikj}テーブルの模式図である。
符号の説明
11 カメラ
12 現時刻tの画像レジスタ
13 次時刻tの画像レジスタ
14 移動方向vの抽出ユニット
15 pinf設定ユニット
16 パラメータの走査ユニット
17 複比変換ユニット
18 極変換ユニット
19 円柱配列投票ユニット
20 ピーク抽出ユニット
21 vパラメータの走査ユニット
22 パラメータの走査ユニット
23 半径Rの計算ユニット
24 小円変換ユニット
25 円柱配列投票ユニット
26 ピーク抽出ユニット
27 点距離計算ユニット
28 τ決定ユニット
112 右カメラ画像レジスタ
113 左カメラ画像レジスタ
115 paxis設定ユニット
116 パラメータの走査ユニット
117 複比変換ユニット
118 極変換ユニット
119 円柱配列投票ユニット
120 ピーク抽出ユニット
121 axisパラメータの走査ユニット
122 パラメータの走査ユニット
123 半径Rの計算ユニット
124 小円変換ユニット
125 円柱配列投票ユニット
126 ピーク抽出ユニット
127 点距離計算ユニット
128 σ決定ユニット
221 パラメータの走査ユニット
222 半径rの走査ユニット
223 小円構成要素 s+ s−の計算ユニット
224 円柱配列投票ユニット
225 ピーク抽出ユニット
300 コンピュータシステム
301 本体
302 CRTディスプレイ
303 キーボード
304 マウス
310 バス
311 中央演算処理装置(CPU)
312 RAM
313 磁気ディスクコントローラ
314 フロッピィディスクドライバ
315 MOドライバ
316 マウスコントローラ
317 キーボードコントローラ
318 ディスプレイコントローラ
319 通信用ボード
320 画像入力用ボード
401 画素番号iの走査ユニット
402 を中心とする局所領域画像の切出しユニット
403 運動視差番号kの走査ユニット
404 運動視差τ変換ユニット
405 運動視差検出ユニット
406 変換ユニット
410 通信回線
421 画素番号iの走査ユニット
422 を中心とする局所領域画像の切出しユニット
423 両眼視差σ変換ユニット
424 両眼視差σ変換ユニット
425 両眼視差検出ユニット
501 pinf変換ユニット
502,552 画素番号iの走査ユニット
503,553 要素番号jの走査ユニット
504 出力ユニット
505 nsj出力ユニット
506 cj出力ユニット
507,510 ijτテーブル作成ユニット
508,559 vパラメータの走査ユニット
509 sj出力ユニット
511 paxis設定ユニット
512,572 画素番号iの走査ユニット
513,573 要素番号jの走査ユニット
514 出力ユニット
515 nsj出力ユニット
516 cj出力ユニット
517,520 ijσテーブル作成ユニット
518,579 axisパラメータの走査ユニット
519 sj出力ユニット
554 を中心とする局所領域画像の切出しユニット
555,565 ijτテーブル
556 運動視差検出ユニット
557,567 円柱配列断層ユニット
558,568 ピーク検出ユニット
561 右カメラ
562 左カメラ
574 を中心とする局所領域画像の切出しユニット
575,585 ijσテーブル
576,586 両眼視差検出ユニット
577,587 円柱配列投票ユニット
578,588 ピーク抽出ユニット
601,611 {ikj}テーブル変換ユニット
602,612 {ikj}テーブル
651 カメラ
652 画素番号iの走査ユニット
653 運動視差番号kの走査ユニット
654 を中心とする局所領域画像の切出しユニット
655,665 運動視差τ変換ユニット
656,666 運動視差検出ユニット
657,667 円柱配列投票ユニット
658,668 ピーク抽出ユニット
659 vパラメータの走査ユニット
621,631 {ikj}テーブル変換ユニット
622,632 {ikj}テーブル
661 右カメラ
662 左カメラ
672 画素番号iの走査ユニット
673 両眼視差番号kの走査ユニット
674 を中心とする局所領域画像の切出しユニット
675,685 両眼視差σ変換ユニット
676,686 両眼視差検出ユニット
677,687 円柱配列投票ユニット
678,688 ピーク抽出ユニット
679 axisパラメータの走査ユニット

Claims (11)

  1. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めることを特徴とする画像計測方法。
  2. 前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの2つの計測位置pと、前記計測点の、前記2つの観察点から観察したときの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものであることを特徴とする請求項1記載の画像計測方法。
  3. 前記計測平面と前記2つの観察点との間の前記視軸方向の距離を指標する物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
    =d/ΔxLR
    であらわされる規格化距離を採用し、該規格化距離を、
    ={paxis
    の関係式あるいは該関係式と等価な関係式を用いて求めることを特徴とする請求項1記載の画像計測方法。
  4. 前記観察平面上の交点の位置pを極変換することにより該位置pに対応する極線を求めるプロセスを、前記計測空間内に存在する複数の計測点について実行し、これらのプロセスにより求められた複数の極線を極線描画空間に描画したときの極線どうしの交差点を求めることにより、該交差点で交わる複数の極線に対応する複数の計測点を含む計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求めることを特徴とする請求項1記載の画像計測方法。
  5. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求めることを特徴とする画像計測方法。
  6. 前記複比{paxis}あるいは該複比と等価な演算には、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pに代えて、前記計測点の、前記2つの観察点のうちの一方の観察点から観察したときの計測位置pと、前記計測点の、前記2つの観察点から観察したときの2つの計測位置p,pどうしの間の位置の差である両眼視差σとを用いる演算が包含されるものであることを特徴とする請求項5記載の画像計測方法。
  7. 前記最短距離を指標とする物理量として、前記計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離をd、前記計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離をd、前記2つの観察点どうしの間の距離をΔxLRとしたときの、
    =d/ΔxLR
    であらわされる規格化最短距離を採用し、該規格化最短距離を、
    =d/ΔxLR
    であらわされる規格化距離と前記内積(n・v)とを用いた、
    (n・v)
    の関係式を用いて求めることを特徴とする請求項5記載の画像計測方法。
  8. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める演算部を備えたことを特徴とする画像計測装置。
  9. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸の方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める演算部を備えたことを特徴とする画像計測装置。
  10. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記計測点を含み、前記2つの観察点どうしを結ぶ視軸方向vと同一の方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をpとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算を用いて、前記計測平面の方位、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の前記視軸方向の距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする画像計測プログラム記憶媒体。
  11. 所定の計測空間内の所定の2つの観察点から該計測空間内を眺めたときの画像にあらわれた、該計測空間内の任意の計測点の、前記2つの観察点それぞれから観察したときの各計測位置をそれぞれp,p、前記2つの観察点どうしを結ぶ視軸方向をv、前記計測点を含み、前記視軸方向vと同一方向に延びる直線上の無限遠点の位置をpaxis、前記2つの観察点のうちの一方の観察点を含み、前記計測点を含む計測平面と平行に広がる観察平面上の、前記直線との交点の位置をp、前記計測平面の方位をnとしたとき、
    前記4つの位置paxis,p,p,pで決まる複比{paxis}あるいは該複比と等価な演算と、前記計測平面の方位nと前記視軸の方向vとの内積(n・v)とを用いて、前記計測平面の方位n、及び/又は、該計測平面と前記2つの観察点のうちの一方の観察点との間の最短距離を指標する物理量を求める画像計測プログラムが記憶されてなることを特徴とする画像計測プログラム記憶媒体。
JP2007080363A 1999-04-12 2007-03-26 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体 Withdrawn JP2007183290A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007080363A JP2007183290A (ja) 1999-04-12 2007-03-26 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP13902199 1999-04-12
JP2007080363A JP2007183290A (ja) 1999-04-12 2007-03-26 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2000014170A Division JP3949333B2 (ja) 1999-04-12 2000-01-20 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体

Publications (1)

Publication Number Publication Date
JP2007183290A true JP2007183290A (ja) 2007-07-19

Family

ID=38339481

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007080363A Withdrawn JP2007183290A (ja) 1999-04-12 2007-03-26 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体

Country Status (1)

Country Link
JP (1) JP2007183290A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106017325A (zh) * 2014-07-16 2016-10-12 佛山科学技术学院 一种改进的复杂表面和不规则物体体积的非接触光学测量方法
CN109506592A (zh) * 2018-12-13 2019-03-22 山东师范大学 基于条纹光流的物体三维面形测量方法和装置
CN114608450A (zh) * 2022-03-10 2022-06-10 西安应用光学研究所 机载光电系统对远距离海面目标三维尺寸测算方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1153549A (ja) * 1997-08-01 1999-02-26 Sony Corp 画像処理装置、画像処理方法、および、伝送媒体

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1153549A (ja) * 1997-08-01 1999-02-26 Sony Corp 画像処理装置、画像処理方法、および、伝送媒体

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106017325A (zh) * 2014-07-16 2016-10-12 佛山科学技术学院 一种改进的复杂表面和不规则物体体积的非接触光学测量方法
CN106017325B (zh) * 2014-07-16 2018-11-02 佛山科学技术学院 一种改进的复杂表面和不规则物体体积的非接触光学测量方法
CN109506592A (zh) * 2018-12-13 2019-03-22 山东师范大学 基于条纹光流的物体三维面形测量方法和装置
CN114608450A (zh) * 2022-03-10 2022-06-10 西安应用光学研究所 机载光电系统对远距离海面目标三维尺寸测算方法
CN114608450B (zh) * 2022-03-10 2023-09-26 西安应用光学研究所 机载光电系统对远距离海面目标三维尺寸测算方法

Similar Documents

Publication Publication Date Title
CN111459166B (zh) 一种灾后救援环境下含受困人员位置信息的情景地图构建方法
US6791549B2 (en) Systems and methods for simulating frames of complex virtual environments
CN107808407A (zh) 基于双目相机的无人机视觉slam方法、无人机及存储介质
JP3949333B2 (ja) 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体
CN109465835A (zh) 一种动态环境下双臂服务机器人作业的事前安全预测方法
Vasquez-Gomez et al. Hierarchical ray tracing for fast volumetric next-best-view planning
Essomba et al. Optimal synthesis of a spherical parallel mechanism for medical application
Cai et al. Real-time collision-free grasp pose detection with geometry-aware refinement using high-resolution volume
RU2308764C2 (ru) Перемещение виртуального сочлененного объекта в виртуальном пространстве с предотвращением столкновений сочлененного объекта с элементами окружающего пространства
JP2007183290A (ja) 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体
Breyer et al. Closed-loop next-best-view planning for target-driven grasping
JPH02224004A (ja) 移動体の干渉チェック装置
Kim et al. A geometric approach for forward kinematics analysis of a 3-SPS/S redundant motion manipulator with an extra sensor using conformal geometric algebra
JP2003247805A (ja) 体積計測方法及び体積計測プログラム
Schaub et al. 6-DoF grasp detection for unknown objects
Jing Coverage planning for robotic vision applications in complex 3d environment
JP2007249978A (ja) 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体
Jang et al. A visibility-based accessibility analysis of the grasp points for real-time manipulation
Lee et al. Autonomous view planning methods for 3D scanning
Fernandez et al. Laser scan planning based on visibility analysis and space partitioning techniques
JP2007234031A (ja) 画像計測方法、画像計測装置、および画像計測プログラム記憶媒体
Taylor et al. Mapping with depth panoramas
JP2697917B2 (ja) 三次元座標計測装置
Triebel et al. First steps towards a robotic system for flexible volumetric mapping of indoor environments
Stewenius et al. Structure and motion problems for multiple rigidly moving cameras

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100928

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20101007