JPH06195472A - 画像処理システム - Google Patents

画像処理システム

Info

Publication number
JPH06195472A
JPH06195472A JP5213842A JP21384293A JPH06195472A JP H06195472 A JPH06195472 A JP H06195472A JP 5213842 A JP5213842 A JP 5213842A JP 21384293 A JP21384293 A JP 21384293A JP H06195472 A JPH06195472 A JP H06195472A
Authority
JP
Japan
Prior art keywords
image
camera
dimensional
single plane
processing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5213842A
Other languages
English (en)
Inventor
William Turnour Richard
リチャード・ウィリアム・ターナー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of JPH06195472A publication Critical patent/JPH06195472A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B2210/00Aspects not specifically covered by any group under G01B, e.g. of wheel alignment, caliper-like sensors
    • G01B2210/10Wheel alignment
    • G01B2210/12Method or fixture for calibrating the wheel aligner
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B2210/00Aspects not specifically covered by any group under G01B, e.g. of wheel alignment, caliper-like sensors
    • G01B2210/10Wheel alignment
    • G01B2210/14One or more cameras or other optical devices capable of acquiring a two-dimensional image
    • G01B2210/146Two or more cameras imaging the same area
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B2210/00Aspects not specifically covered by any group under G01B, e.g. of wheel alignment, caliper-like sensors
    • G01B2210/10Wheel alignment
    • G01B2210/20Vehicle in a state of translatory motion
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B2210/00Aspects not specifically covered by any group under G01B, e.g. of wheel alignment, caliper-like sensors
    • G01B2210/10Wheel alignment
    • G01B2210/30Reference markings, reflector, scale or other passive device
    • G01B2210/303Reference markings, reflector, scale or other passive device fixed to the ground or to the measuring station

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Image Generation (AREA)

Abstract

(57)【要約】 【目的】 カメラの視野内に3次元基準フレームを配置
する必要なしに、3次元空間内の物体の位置を計算する
ことのできるシステムを提供すること。 【構成】 このシステムは、実3次元空間におけるカメ
ラおよび標識の位置に関する情報を入力するための入力
手段と、入力手段によって提供される情報から、標識を
含む単一平面の方程式を計算するための計算手段と、連
続する画像を受け取り、各画像について、画像内の分析
対象点を単一平面上に射影し、カメラの位置と単一平面
内における分析対象点の位置とを通る直線の方程式の解
を求めるようにプログラミングされた射影手段と、射影
手段によって生成された、カメラからの対応する画像に
関する直線に応じて、分析対象点の3次元空間内の位置
を決定する手段とを含む。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、運動する物体の研究と
して大雑把に定義される、運動分析の分野に関し、詳細
には人間の運動を研究する生体工学の分野に関するもの
である。
【0002】
【従来の技術】科学としての運動分析は、運動している
物体の一連の画像を捕捉できることに依拠している。そ
れは、フィルム式カメラまたはソリッド・ステート・ビ
デオ・カメラを使用して一連の画像を捕捉することによ
って行われる。
【0003】このような応用分野では、必ずとはいわな
いまでも大抵の場合は、画像から物体の目に見える3次
元的な位置を確認することが必要である。そのためには
その位置がわかっている物体または点がいくつか必要で
あり、それを使ってカメラを較正する。この較正によ
り、画像内の位置が、3次元の実空間での既知の座標と
関係付けられる。
【0004】実空間と画像の数学的な関係は透視投影と
して知られ、射影行列によって数学的に記述される。3
次元の透視投影の場合、12の要素からなる3×4行列
である。これらの要素のうちの1つが変換の全体的スケ
ールを制御し、任意に1の値に設定することができる。
未知の係数が11個残るが、必要とされる透視投影を計
算するためにその値を求めなければらない。実空間内の
ある点の位置がわかっている場合、それを使って、解に
対する2つの制約条件を得ることができる。その点のx
座標とy座標それぞれについて1つずつの方程式を導き
出すことができるからである。従って、未知数が11個
あるので、既知の点が6つ必要である。
【0005】遺憾なことに、6つの点から12の方程式
が得られるが、未知数は11個しかない。この系は数学
的に優決定系と呼ばれ、その解を求めるには逐次代入法
を使用する必要がある。通常は、これは最小2乗法を使
って行われる。時間がかかることは別にしても、優決定
系の解は近似値であり、したがって誤差を含む。
【0006】もう1つの制約条件は、6つの点のうちの
少なくとも2つは他の4つと同一平面上にあってはなら
ないことである。この条件に従わない場合、結果として
得られる透視写像は特異なものになり、数学的に解けな
い。
【0007】うまく較正ができると、画像上の点を、3
次元透視投影によって実空間内の既知の点と直接関係付
けることができる。
【0008】現況技術では、3次元基準フレームを使用
し、これをカメラの視野中に置いている。これらのフレ
ームは、既知の寸法であり、既知の位置に配置される。
フレームの隅またはフレームに付けた標識を使って、必
要な6つの点を提供する。フレームは3次元物体なの
で、同一平面の制限に従った6つの点を見つけることが
常に可能である。
【0009】遺憾ながら、中実の基準フレームはフィル
ムで撮影しようとするときに邪魔になり、動かさなけれ
ばならないことが多い。例えば運動選手の動作を研究す
る場合、トラックの途中または飛び込み台の上端に基準
フレームを置いておくことは不可能である。
【0010】
【発明が解決しようとする課題】本発明の目的は、カメ
ラの視野中に3次元基準フレームを配置する必要なし
に、画像から3次元空間内の物体の位置を計算すること
のできるシステムを提供することである。
【0011】
【課題を解決するための手段】従って本発明は、互いに
固定した距離の所に設置した複数のカメラから、各カメ
ラの視野内に位置し、単一平面内で位置決めされた、複
数の標識を有する画像が得られる、2次元の画像から物
体の3次元の位置を決定するための画像処理システムで
あって、実3次元空間におけるカメラおよび標識の位置
に関する情報を入力するための入力手段と、入力手段に
よって提供される情報から、標識を含む単一平面の方程
式を計算するための計算手段と、連続する画像を受け取
り、各画像について、画像内の分析対象点を単一平面上
に射影し、カメラの位置と単一平面内における分析対象
点の位置とを通る直線の方程式の解を求めるようにプロ
グラミングされた射影手段と、射影手段によって生成さ
れた、カメラからの対応する画像に関する直線に応じ
て、分析対象点の3次元空間内の位置を決定する手段と
を含む画像処理システムを提供する。
【0012】本発明は、その第2の態様によれば、互い
に固定した距離の所に設置した複数のカメラから、各カ
メラの視野内に位置し、単一平面内で位置決めされた、
複数の標識を有する画像が得られる、2次元の画像から
物体の3次元の位置を決定するための方法であって、実
3次元空間におけるカメラおよび標識の位置に関する情
報を入力する段階と、入力手段によって提供される情報
から、標識を含む単一平面の方程式を計算する段階と、
連続する画像を受け取り、各画像について、画像内の分
析対象点を単一平面上に射影し、カメラの位置と単一平
面内における分析対象点の位置とを通る直線の方程式の
解を求める段階と、射影手段によって生成された、カメ
ラからの対応する画像に関する直線に応じて、分析対象
点の3次元空間内の位置を決定する段階とを含む方法を
提供する。
【0013】本発明は、現在1つの3次元射影写像を必
要としている問題を、2つの2次元射影写像を必要とす
る問題に還元することにより、上述の問題を解決する。
これは、数学的な簡約化を用いて行う。
【0014】
【実施例】好ましい実施例では、既知の4つの点がすべ
て同一平面内にあることが保証される。これは、壁面ま
たは他の都合のよい表面上にそれらの点をマークし、あ
るいは垂直なポールに標識を取り付けることによって、
簡単に行うことができる。カメラから4つの点までの距
離を測定する。この距離が、実空間内でそれらの点を含
む平面を定義する。この4つの点が、実空間内の既知の
平面上の2次元多角形の隅を定義する。これはカメラ画
像中で別の多角形として表される。1つの多角形から別
の多角形への射影写像は2次元の問題であり、必要な射
影行列は3×3列で、未知の係数が8つだけである。こ
れらの係数は、4つの既知の点が与えられると一義的に
見つけることができ、それらの係数を使って多角形自体
を定義する。
【0015】画像内の各点について、対応する点を実空
間内で定義された多角形中で見つけることができる。画
像内の既知の多角形の内側にあるどの点も、カメラから
始まり実空間の多角形で終わる直線上になければならな
いからである。この多角形を含む平面は既に定義されて
いるので、2次元多角形の座標を3次元実空間の座標に
変換することができる。このとき空間内で1本の直線が
既知である。2台のカメラと同じ物体の2つのビューが
与えられると、実空間内で2本の直線を決定することが
できる。この2本の直線の交点がその物体の空間内での
位置である。
【0016】図1を参照して好ましい実施例のシステム
をさらに詳しく説明する。まず2台のカメラ10と20
を特定の距離Aだけ離して設置し、4つの点30を、壁
面または他の適切な表面上の各視野中にマークする。カ
メラ間の基線距離Aを測定し、両方のカメラからマーク
された各点30までの距離B、C、D、E、F、G、
H、Iも測定する。既知の各点30と各カメラの高さも
測定する。
【0017】これらの測定値を使って、既知の各点30
の実空間内の位置を計算する。カメラ10と20のいず
れか一方を原点とする局部座標系を使用する。次いで、
前の段階で得られた実空間座標から、既知の点30を含
む平面の方程式を計算する。
【0018】次に、システムを使用のために較正し、次
の段階で分析すべき実験画像を捕捉する。2台のカメラ
10と20が同時に動作して、2つの異なる方向から物
体の2つの画像を投影する。
【0019】実験画像が得られた後、各画像について、
既知の点の位置がシステムによって決定される。これら
の画像の位置を上記で計算した実空間座標と一緒に使っ
て、各画像について、2次元射影写像を計算する。シス
テムの射影手段にプログラミングされた計算済み射影写
像を使って、画像内の各分析対象点を、既知の点を含む
平面上に射影する。これによって、既知の平面内におけ
る各分析対象点の位置が与えられる。この位置とカメラ
の位置(既知)が与えられると、カメラの位置と既知の
平面内の点を通る直線の方程式が射影手段によって計算
される。
【0020】特定の瞬間に見える同じ分析対象点を示す
各カメラからの1つの画像を考慮すると、上記のように
して2つの直線方程式をたてることができる。好ましい
実施例のシステムにより、3次元空間で交差する点を見
つけるための標準の技法を使って、この2本の直線の解
を求めることができる。この交点が、物体の実空間内で
の位置を表す。
【0021】以上のような技術を利用することにより、
好ましい実施例のシステムでは、従来技術に勝さるいく
つかの利点がある。第1に、射影写像の問題で、従来技
術によって提供される近似値ではなく、正確な解が与え
られる。さらに、必要とされる既知の点の数が4個に減
る。これらの4つの点は同一平面上にあってよく、した
がって壁面または他の適切な表面上に描くことができ
る。従って、中実の基準フレームはもはや必要でなくな
り、トラックや飛び込み台その他の実験領域が遮られる
ことはない。最後に、同じ3次元基準フレームを「見
る」2台のカメラが必要な従来技術による解決策とは違
って、好ましい実施例のシステムでは、互いの相対的位
置が絶対的に既知であるならば、各カメラの視野内で異
なる点が使用できる。このため、カメラの配置の柔軟性
が高くなり、したがって実験環境設計が改善される。
【0022】図2は、トラックの傍の垂直なポールに取
り付けた標識によって4つの既知の点が形成される好ま
しい実施例を示す。容易に理解できるように、これは、
フィルムで撮影される運動選手にとって、動きを妨げら
れる3次元基準フレームがなく、従って運動選手は通常
の環境で動作することができるため、得られる画像デー
タの価値が大幅に向上するので、ずっと好ましいもので
ある。
【0023】図3は好ましい実施例のシステムによって
生成される代表的な画像を示す。4つの標識30とその
前を通過する運動選手の表現がはっきりと見える。
【0024】
【発明の効果】以上のように、本発明によれば、カメラ
の視野内に3次元基準フレームを配置する必要なしに、
画像から3次元空間内の物体の位置を計算することので
きるシステムが提供される。
【図面の簡単な説明】
【図1】図1は、好ましい実施例のシステムを較正する
ために、入力手段によって入力する必要のある測定値を
示す説明図である。
【図2】図2は、トラックの傍の垂直なポールに取り付
けた標識によって4つの既知の点が形成される実施例を
示す図である。
【図3】図3は、好ましい実施例のシステムによって生
成される代表的な画像を示す図である。
【符号の説明】
10 カメラ 20 カメラ 30 標識

Claims (7)

    【特許請求の範囲】
  1. 【請求項1】互いに固定した距離の所に設置したカメラ
    (10、20)から、各カメラの視野内に位置し、単一
    平面内で位置決めされた、複数の標識(30)を有する
    画像が得られる、2次元の画像から物体の3次元の位置
    を決定するための画像処理システムであって、 実3次元空間におけるカメラおよび標識の位置に関する
    情報を入力するための入力手段と、 入力手段によって提供される情報から、標識を含む単一
    平面の方程式を計算するための計算手段と、 連続する画像を受け取り、各画像について、画像内の分
    析対象点を単一平面上に射影し、カメラの位置と単一平
    面内における分析対象点の位置とを通る直線の方程式の
    解を求めるようにプログラミングされた射影手段と、 射影手段によって生成された、カメラ(10、20)か
    らの対応する画像に関する直線に応じて、分析対象点の
    3次元空間内の位置を決定する手段とを含む画像処理シ
    ステム。
  2. 【請求項2】射影手段が、2次元画像中の分析対象点を
    2次元単一平面内の対応する点に射影するため、2次元
    射影写像技術を実行するようにプログラミングされてい
    ることを特徴とする、請求項1に記載の画像処理システ
    ム。
  3. 【請求項3】計算手段が、カメラ(10、20)のいず
    れか一方を原点とする局部座標系を使用することを特徴
    とする、請求項1または請求項2に記載の画像処理シス
    テム。
  4. 【請求項4】標識の数が4個であることを特徴とする、
    上記のいずれかの請求項に記載の画像処理システム。
  5. 【請求項5】2台のカメラを使用して2次元画像を提供
    することを特徴とする、上記のいずれかの請求項に記載
    の画像処理システム。
  6. 【請求項6】決定手段が、特定の時間に各カメラの位置
    から単一平面上に射影された同じ分析対象点を表す2本
    の直線の交点を計算し、この交点が、実3次元空間内の
    分析対象点の位置を与えることを特徴とする、請求項5
    に記載の画像処理システム。
  7. 【請求項7】互いに固定した距離の所に設置したカメラ
    (10、20)から、各カメラの視野内に位置し、単一
    平面内で位置決めされた、複数の標識(30)を有する
    画像が得られる、2次元の画像から物体の3次元の位置
    を決定するための方法であって、 実3次元空間におけるカメラおよび標識の位置に関する
    情報を入力する段階と、 入力手段によって提供される情報から、標識を含む単一
    平面の方程式を計算する段階と、 連続する画像を受け取り、各画像について、画像内の分
    析対象点を単一平面上に射影し、カメラの位置と単一平
    面内における分析対象点の位置とを通る直線の方程式の
    解を求める段階と、 射影手段によって生成された、カメラ(10、20)か
    らの対応する画像に関する直線に応じて、分析対象点の
    3次元空間内の位置を決定する段階とを含む方法。
JP5213842A 1992-09-05 1993-08-30 画像処理システム Pending JPH06195472A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB9218861.4 1992-09-05
GB9218861A GB2270435A (en) 1992-09-05 1992-09-05 Stereogrammetry

Publications (1)

Publication Number Publication Date
JPH06195472A true JPH06195472A (ja) 1994-07-15

Family

ID=10721491

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5213842A Pending JPH06195472A (ja) 1992-09-05 1993-08-30 画像処理システム

Country Status (3)

Country Link
EP (1) EP0587328A3 (ja)
JP (1) JPH06195472A (ja)
GB (1) GB2270435A (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE9600623L (sv) * 1996-02-20 1997-08-21 Imetric Sa Automatisreringsmetodik för metrologisystem vid 3D-avbildningar
US6647146B1 (en) 1997-08-05 2003-11-11 Canon Kabushiki Kaisha Image processing apparatus
EP0901105A1 (en) 1997-08-05 1999-03-10 Canon Kabushiki Kaisha Image processing apparatus
DE69823116D1 (de) 1997-08-05 2004-05-19 Canon Kk Bildverarbeitungsverfahren und -gerät
DE19757763A1 (de) 1997-12-23 1999-07-01 Bosch Gmbh Robert Vorrichtung zum Bestimmen der Rad- und/oder Achsgeometrie von Kraftfahrzeugen
DE19757760A1 (de) * 1997-12-23 1999-07-01 Bosch Gmbh Robert Vorrichtung zum Bestimmen der Rad- und/oder Achsgeometrie von Kraftfahrzeugen
GB9911935D0 (en) * 1999-05-21 1999-07-21 British Broadcasting Corp Tracking of moving objects
GB9927678D0 (en) 1999-11-23 2000-01-19 Canon Kk Image processing apparatus
EP1517116A1 (de) 2003-09-22 2005-03-23 Leica Geosystems AG Verfahren und Vorrichtung zur Bestimmung der Aktualposition eines geodätischen Instrumentes
CN100428805C (zh) * 2005-12-15 2008-10-22 上海交通大学 仅用一幅平面标定物图像的摄像机标定方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DD118169A1 (ja) * 1975-03-07 1976-02-12
IT1163442B (it) * 1983-06-03 1987-04-08 Agip Spa Metodo perfezionato di rilevamento stereofotogrammetrico di oggetti di grandi dimensioni in mare e su terraferma
GB8620040D0 (en) * 1986-08-18 1986-10-01 Samangooie F Model making
FR2648589B1 (fr) * 1989-06-16 1994-05-13 Omnes Yves Procede de localisation precise et de quantification approchee en radiologie medicale ou industrielle, et moyens pour la mise en oeuvre du procede

Also Published As

Publication number Publication date
EP0587328A2 (en) 1994-03-16
EP0587328A3 (en) 1994-10-12
GB9218861D0 (en) 1992-10-21
GB2270435A (en) 1994-03-09

Similar Documents

Publication Publication Date Title
US7529387B2 (en) Placement information estimating method and information processing device
Neumann et al. A self-tracking augmented reality system
JP3728900B2 (ja) キャリブレーション方法及び装置、並びにキャリブレーション用データ生成方法
CN109764858B (zh) 一种基于单目相机的摄影测量方法及系统
CN111121754A (zh) 移动机器人定位导航方法、装置、移动机器人及存储介质
US20080050042A1 (en) Hardware-in-the-loop simulation system and method for computer vision
El-Hakim et al. System for indoor 3D mapping and virtual environments
Li Camera calibration of a head-eye system for active vision
WO2006082825A1 (ja) 指標配置計測方法、位置姿勢推定方法、指標配置計測装置、位置姿勢推定装置
WO2011105616A1 (en) Three-dimensional measurement apparatus, model generation apparatus, processing method thereof, and non-transitory computer-readable storage medium
CN109900205B (zh) 一种高精度的单线激光器和光学相机的快速标定方法
JPH06195472A (ja) 画像処理システム
JP4170469B2 (ja) 検査点位置取得方法および装置
JP3282516B2 (ja) 三次元画像計測方法
Wohlfeil et al. Automatic camera system calibration with a chessboard enabling full image coverage
JP4227037B2 (ja) 撮像システム及び校正方法
JP2896539B2 (ja) 物体の位置、角度等の固有情報の検出方法
El-Hakim et al. Sensor based creation of indoor virtual environment models
CN117115434A (zh) 数据分割装置和方法
Ravn et al. Auto-calibration in automation systems using vision
WO2021111613A1 (ja) 3次元地図作成装置、3次元地図作成方法、及び3次元地図作成プログラム
JPS6256814A (ja) 3次元位置計測カメラ較正方式
KR100874425B1 (ko) 옥외 광고물 크기 측정 시스템 및 이를 이용한 옥외광고물의 크기 측정방법
Saponaro et al. Towards auto-calibration of smart phones using orientation sensors
Naruse et al. High-accuracy multiviewpoint stereo measurement using the maximum-likelihood method