JP2003123064A - 画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置 - Google Patents
画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置Info
- Publication number
- JP2003123064A JP2003123064A JP2001299329A JP2001299329A JP2003123064A JP 2003123064 A JP2003123064 A JP 2003123064A JP 2001299329 A JP2001299329 A JP 2001299329A JP 2001299329 A JP2001299329 A JP 2001299329A JP 2003123064 A JP2003123064 A JP 2003123064A
- Authority
- JP
- Japan
- Prior art keywords
- image
- coordinates
- screen
- output
- conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000009466 transformation Effects 0.000 claims abstract description 18
- 230000003287 optical effect Effects 0.000 claims abstract description 15
- 238000012937 correction Methods 0.000 claims abstract description 9
- 238000006243 chemical reaction Methods 0.000 claims description 108
- 238000003384 imaging method Methods 0.000 claims description 17
- 238000000034 method Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 101100000419 Autographa californica nuclear polyhedrosis virus AC41 gene Proteins 0.000 description 1
- 101100214868 Autographa californica nuclear polyhedrosis virus AC54 gene Proteins 0.000 description 1
- 101000935040 Homo sapiens Integrin beta-2 Proteins 0.000 description 1
- 102100025390 Integrin beta-2 Human genes 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Landscapes
- Studio Circuits (AREA)
- Closed-Circuit Television Systems (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【課題】 広角レンズを有する撮像装置による入力画像
から、距離感が喪失されない、歪みとのバランスの取れ
た出力画像を得る。 【解決手段】変換後の座標を極座標で距離R'、角度θ'
としたとき、対応する入力画像の座標を極座標で距離
R、角度θとして、広角レンズの光軸に垂直な平面に設
けられた歪み補正の為のキャリブレーションパターンを
前記撮像装置により撮像して解析することにより、入力
画像の歪みを完全に無くす変換が、R＝R'＋k 1R'3＋k2R'
5＋…＋knR'2n+1、θ＝θ'により決定されるとき、歪み
を完全には無くさないような変換式：R＝p(R'＋k'1R'3
＋k'2R'5＋…＋k'nR'2n+1)、θ＝θ'、ただし、ki＝０
となるi(1≦i≦n)について、k'i＝０、その他のi(1≦i
≦n)について、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０、
により構成されることを特徴とする。
から、距離感が喪失されない、歪みとのバランスの取れ
た出力画像を得る。 【解決手段】変換後の座標を極座標で距離R'、角度θ'
としたとき、対応する入力画像の座標を極座標で距離
R、角度θとして、広角レンズの光軸に垂直な平面に設
けられた歪み補正の為のキャリブレーションパターンを
前記撮像装置により撮像して解析することにより、入力
画像の歪みを完全に無くす変換が、R＝R'＋k 1R'3＋k2R'
5＋…＋knR'2n+1、θ＝θ'により決定されるとき、歪み
を完全には無くさないような変換式：R＝p(R'＋k'1R'3
＋k'2R'5＋…＋k'nR'2n+1)、θ＝θ'、ただし、ki＝０
となるi(1≦i≦n)について、k'i＝０、その他のi(1≦i
≦n)について、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０、
により構成されることを特徴とする。
Description
【０００１】
【発明の属する技術分野】本発明は広角レンズを用いた
撮像装置により得られた画像のような、いわゆる樽歪み
を有する画像を、視認しやすい画像に変換する画像変換
装置並びに、それを組み込んだ撮像及び／又は表示装置
に関する。本発明は自動車、船舶、航空機等の移動体に
おける画像処理及び状況把握、施設における広範囲の監
視等に有用である。
撮像装置により得られた画像のような、いわゆる樽歪み
を有する画像を、視認しやすい画像に変換する画像変換
装置並びに、それを組み込んだ撮像及び／又は表示装置
に関する。本発明は自動車、船舶、航空機等の移動体に
おける画像処理及び状況把握、施設における広範囲の監
視等に有用である。
【０００２】
【従来の技術】撮像装置による歪みを解析する為、例え
ば図１１に示すようなキャリブレーションパターンを撮
像し、各格子点が画像上のどの座標に変換されたかを基
に歪みを解析する方法が知られている。この方法として
は、例えば特開２０００−３５０２３９記載の方法が知
られている。
ば図１１に示すようなキャリブレーションパターンを撮
像し、各格子点が画像上のどの座標に変換されたかを基
に歪みを解析する方法が知られている。この方法として
は、例えば特開２０００−３５０２３９記載の方法が知
られている。
【０００３】
【発明が解決しようとする課題】さて、「ほとんど完全
に」歪みを無くした変換画像は、実は視認者には必ずし
も認識しやすい画像ではない。実際、広角レンズを用い
た撮像装置による入力画像として例えば６４０×４８０
画素の矩形画像として図１２の（ａ）、（ｂ）のような
画像が得られたとする。ここで図１２の（ａ）は駐車ス
ペースに駐車された３台の車両の右側面、正面、左側面
を示している。図１２の（ｂ）は同じ撮像装置による図
１１に示したキャリブレーションパターンである。上記
技術により、「ほとんど完全に」歪みを無くした画像に
変換すると、それぞれ図１３の（ａ）、（ｂ）のように
なる。外枠である４辺が湾曲するのは図１２の（ａ）、
（ｂ）の情報を極力使用することによる。また、図１３
の（ａ）、（ｂ）では画素は１２８０×９６０である。
図１３の（ｂ）を見れは、確かに「ほとんど完全に」歪
み自体はなくなっているが、図１３の（ａ）を見ると、
周辺部に見える車両が異様に視認されることがわかる。
これは特に距離感がずれて視認される為であり、このよ
うな距離感のずれは移動体の運転又は操縦においては問
題となる。
に」歪みを無くした変換画像は、実は視認者には必ずし
も認識しやすい画像ではない。実際、広角レンズを用い
た撮像装置による入力画像として例えば６４０×４８０
画素の矩形画像として図１２の（ａ）、（ｂ）のような
画像が得られたとする。ここで図１２の（ａ）は駐車ス
ペースに駐車された３台の車両の右側面、正面、左側面
を示している。図１２の（ｂ）は同じ撮像装置による図
１１に示したキャリブレーションパターンである。上記
技術により、「ほとんど完全に」歪みを無くした画像に
変換すると、それぞれ図１３の（ａ）、（ｂ）のように
なる。外枠である４辺が湾曲するのは図１２の（ａ）、
（ｂ）の情報を極力使用することによる。また、図１３
の（ａ）、（ｂ）では画素は１２８０×９６０である。
図１３の（ｂ）を見れは、確かに「ほとんど完全に」歪
み自体はなくなっているが、図１３の（ａ）を見ると、
周辺部に見える車両が異様に視認されることがわかる。
これは特に距離感がずれて視認される為であり、このよ
うな距離感のずれは移動体の運転又は操縦においては問
題となる。
【０００４】そこで図１３（ａ）、（ｂ）の中央部付近
の画像のみ取り出すことも考えられるが、６４０×４８
０画素取り出した図１４（ａ）、（ｂ）を見ると、「ほ
とんど完全に」歪みは無いものの、情報量が大幅に減っ
てしまうことが明らかである。
の画像のみ取り出すことも考えられるが、６４０×４８
０画素取り出した図１４（ａ）、（ｂ）を見ると、「ほ
とんど完全に」歪みは無いものの、情報量が大幅に減っ
てしまうことが明らかである。
【０００５】本発明はこのような問題点を解決する為に
成されたものである。即ち、本発明の目的は、視認者に
認識しやすい画像を出力する画像変換装置を提供するこ
とである。
成されたものである。即ち、本発明の目的は、視認者に
認識しやすい画像を出力する画像変換装置を提供するこ
とである。
【０００６】
【課題を解決するための手段】上記の課題を解決する
為、請求項１に記載の手段によれば、広角レンズを用い
た撮像装置による入力画像を、１画面毎に座標変換して
出力する画像変換装置において、１画面の入力画像を記
憶する入力画像保持手段と、１画面の出力画像を記憶す
る出力画像保持手段と、出力画像の座標と入力画像の座
標とを対応付けることにより、入力画像保持手段の１画
面の入力画像のデータから１画面の出力画像のデータを
形成する座標変換手段とから成り、座標変換手段におけ
る出力画像の座標と入力画像の座標との対応付けが、出
力画像の座標を極座標で距離R'、角度θ'としたとき、
対応する入力画像の座標を極座標で距離R、角度θとし
て、広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを撮像装置により
撮像して解析することにより、入力画像の歪みを完全に
無くす変換が、 R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1 及びθ＝θ'により決定されるとき、歪みを完全には無
くさないような変換式 R＝p(R'＋k'1R'3＋k'2R'5＋…＋k'nR'2n+1) 及びθ＝θ'ただし、pは0でない定数、ki＝０となるi(1
≦i≦n)について、k'i＝０、その他のi(1≦i≦n)につい
て、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０により構成さ
れることを特徴とする。
為、請求項１に記載の手段によれば、広角レンズを用い
た撮像装置による入力画像を、１画面毎に座標変換して
出力する画像変換装置において、１画面の入力画像を記
憶する入力画像保持手段と、１画面の出力画像を記憶す
る出力画像保持手段と、出力画像の座標と入力画像の座
標とを対応付けることにより、入力画像保持手段の１画
面の入力画像のデータから１画面の出力画像のデータを
形成する座標変換手段とから成り、座標変換手段におけ
る出力画像の座標と入力画像の座標との対応付けが、出
力画像の座標を極座標で距離R'、角度θ'としたとき、
対応する入力画像の座標を極座標で距離R、角度θとし
て、広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを撮像装置により
撮像して解析することにより、入力画像の歪みを完全に
無くす変換が、 R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1 及びθ＝θ'により決定されるとき、歪みを完全には無
くさないような変換式 R＝p(R'＋k'1R'3＋k'2R'5＋…＋k'nR'2n+1) 及びθ＝θ'ただし、pは0でない定数、ki＝０となるi(1
≦i≦n)について、k'i＝０、その他のi(1≦i≦n)につい
て、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０により構成さ
れることを特徴とする。
【０００７】また、請求項２に記載の手段によれば、請
求項１において、ki≠０である全てのi(1≦i≦n)につい
て、k'i/ki＝ａi、０＜a＜１とすることである。
求項１において、ki≠０である全てのi(1≦i≦n)につい
て、k'i/ki＝ａi、０＜a＜１とすることである。
【０００８】請求項３乃至５は、いずれも共通する部分
を有する。即ち、いずれも広角レンズを用いた撮像装置
による入力画像を変換する画像変換装置において、１画
面の入力画像を記憶する入力画像保持手段と、１画面の
中間画像を記憶する中間画像保持手段と、１画面の出力
画像を記憶する出力画像保持手段と、中間画像の座標と
入力画像の座標とを対応付けることにより、入力画像保
持手段の１画面の入力画像のデータから１画面の中間画
像のデータを形成する第１の座標変換手段と、出力画像
の座標と中間画像の座標とを対応付けることにより、中
間画像保持手段の１画面の中間画像のデータから１画面
の出力画像のデータを形成する第２の座標変換手段とか
ら成り、第１の座標変換手段における中間画像の座標と
入力画像の座標との対応付けが、広角レンズの光軸に垂
直な平面に設けられた歪み補正の為のキャリブレーショ
ンパターンを撮像装置により撮像して解析することによ
り、得られる中間画像の歪みを完全に無くす第１の変換
であって、中間画像の座標を極座標で距離R'、角度θ'
としたとき、対応する入力画像の座標を極座標で距離
R、角度θとして、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、第２の座標変換手段にお
ける出力画像の座標と中間画像の座標との対応付けが、
レンズ中心点に対応するディジタル座標を(0,0)とした
座標系における出力画像の座標を(x'',y'')とし、対応
する中間画像の座標を(x',y')としたとき、各々次の変
換とするものである。
を有する。即ち、いずれも広角レンズを用いた撮像装置
による入力画像を変換する画像変換装置において、１画
面の入力画像を記憶する入力画像保持手段と、１画面の
中間画像を記憶する中間画像保持手段と、１画面の出力
画像を記憶する出力画像保持手段と、中間画像の座標と
入力画像の座標とを対応付けることにより、入力画像保
持手段の１画面の入力画像のデータから１画面の中間画
像のデータを形成する第１の座標変換手段と、出力画像
の座標と中間画像の座標とを対応付けることにより、中
間画像保持手段の１画面の中間画像のデータから１画面
の出力画像のデータを形成する第２の座標変換手段とか
ら成り、第１の座標変換手段における中間画像の座標と
入力画像の座標との対応付けが、広角レンズの光軸に垂
直な平面に設けられた歪み補正の為のキャリブレーショ
ンパターンを撮像装置により撮像して解析することによ
り、得られる中間画像の歪みを完全に無くす第１の変換
であって、中間画像の座標を極座標で距離R'、角度θ'
としたとき、対応する入力画像の座標を極座標で距離
R、角度θとして、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、第２の座標変換手段にお
ける出力画像の座標と中間画像の座標との対応付けが、
レンズ中心点に対応するディジタル座標を(0,0)とした
座標系における出力画像の座標を(x'',y'')とし、対応
する中間画像の座標を(x',y')としたとき、各々次の変
換とするものである。
【０００９】請求項３においては、
x'＝px''(1＋k1''x''2＋k2''x''4＋…＋km''x''2m)
及びy'＝qy''
請求項４においては、x'＝px''及び
y'＝qy''(1＋k1''y''2＋k2''y''4＋…＋km''y''2m)
請求項５においては、
x'＝px''(1＋k1''x''2＋k2''x''4＋…＋km''x''2m)
及び
y'＝qy''(1＋k1''y''2＋k2''y''4＋…＋km''y''2m)
ここでいずれの請求項においてもpq≠０であることは言
うまでもない。
うまでもない。
【００１０】請求項６に記載の発明は、請求項１乃至請
求項５に記載の画像変換装置を組み込んだ、撮像装置、
表示装置又は撮像及び表示装置である。
求項５に記載の画像変換装置を組み込んだ、撮像装置、
表示装置又は撮像及び表示装置である。
【００１１】
【作用及び発明の効果】広角レンズを有する撮像装置の
キャリブレーションパターンからの解析においては、画
像変換の入出力画像において、光軸（画像上で点）に原
点があるものとするとその原理が容易に理解できる。光
軸を原点としてｘｙ座標、極座標のどちらを用いても結
論は同等である。広角レンズを有する撮像装置が光軸を
軸としてＣ∞の点対称を有していれば、光軸に垂直な直
線は、撮像装置により、入力画像上の原点を通る直線と
なる。また、入力画像上の位置は、当該光軸からの半画
角のみにより決定される。即ち、図１のように、レンズ
からの距離Ｚの位置に光軸からＬ離れた点の入力画像上
の位置は、半画角φ＝Arctan(L/Z)に依存する。
キャリブレーションパターンからの解析においては、画
像変換の入出力画像において、光軸（画像上で点）に原
点があるものとするとその原理が容易に理解できる。光
軸を原点としてｘｙ座標、極座標のどちらを用いても結
論は同等である。広角レンズを有する撮像装置が光軸を
軸としてＣ∞の点対称を有していれば、光軸に垂直な直
線は、撮像装置により、入力画像上の原点を通る直線と
なる。また、入力画像上の位置は、当該光軸からの半画
角のみにより決定される。即ち、図１のように、レンズ
からの距離Ｚの位置に光軸からＬ離れた点の入力画像上
の位置は、半画角φ＝Arctan(L/Z)に依存する。
【００１２】すると、焦点距離ｆ上の歪みを有する入力
画像上の座標(x,y)、極座標(R,θ)（ただしx＝Rcosθ,y
＝Rsinθ）を、歪みの無い出力画像の座標(x',y')、極
座標(R',θ')（ただしx'＝R'cosθ',y'＝R'sinθ'）に
変換する変換は、極座標表示においては原点からの距離
Rにのみ依存する。良く知られた簡単な考察から、その
ような変換はRの奇関数で示すことができる。逆に、出
力画像の座標からの変換を考えても、R'の奇関数で置く
ことができる。
画像上の座標(x,y)、極座標(R,θ)（ただしx＝Rcosθ,y
＝Rsinθ）を、歪みの無い出力画像の座標(x',y')、極
座標(R',θ')（ただしx'＝R'cosθ',y'＝R'sinθ'）に
変換する変換は、極座標表示においては原点からの距離
Rにのみ依存する。良く知られた簡単な考察から、その
ような変換はRの奇関数で示すことができる。逆に、出
力画像の座標からの変換を考えても、R'の奇関数で置く
ことができる。
【００１３】これを
R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1
及びθ＝θ'と求めたのち、各項の係数k1、k2、…、kn
のうち０でないものを、いずれも符号が同一で小さい絶
対値を有し、且つR'の高次項の係数ほど絶対値をより小
さくした変換を考える。当該変換は、「ほとんど」歪み
のない変換と比較して、周辺部の歪みを残す形の変換で
あることは容易に理解できる。即ち、出力画像の原点か
らの距離R'が大きいところで、より大きく影響すべきR'
の高次項の係数が、絶対値のより小さなものであるの
で、補正すべき歪みが、完全には補正されず、緩和され
た歪みのまま残ることとなる。この新しい変換の係数を
適当に選択することにより、歪みを完全に無くしてしま
うことによる距離感の喪失を、歪みと距離感のバランス
の取れたものとすることができる（請求項１）。
のうち０でないものを、いずれも符号が同一で小さい絶
対値を有し、且つR'の高次項の係数ほど絶対値をより小
さくした変換を考える。当該変換は、「ほとんど」歪み
のない変換と比較して、周辺部の歪みを残す形の変換で
あることは容易に理解できる。即ち、出力画像の原点か
らの距離R'が大きいところで、より大きく影響すべきR'
の高次項の係数が、絶対値のより小さなものであるの
で、補正すべき歪みが、完全には補正されず、緩和され
た歪みのまま残ることとなる。この新しい変換の係数を
適当に選択することにより、歪みを完全に無くしてしま
うことによる距離感の喪失を、歪みと距離感のバランス
の取れたものとすることができる（請求項１）。
【００１４】請求項１において、ki≠０である全てのi
(1≦i≦n)について、k'i/ki＝ａi、０＜a＜１とすれ
ば、容易に係数を設定することができる。この場合、１
個の変数ａのみで全係数kiを操作できるので、画像変換
装置の設計が容易となる（請求項２）。
(1≦i≦n)について、k'i/ki＝ａi、０＜a＜１とすれ
ば、容易に係数を設定することができる。この場合、１
個の変数ａのみで全係数kiを操作できるので、画像変換
装置の設計が容易となる（請求項２）。
【００１５】請求項３乃至５は、歪みを有する入力画像
を一旦歪みをほとんど無くした中間画像に変換したの
ち、ｘ軸方向及び／又はｙ軸方向にゆるやかな歪みを持
たせた出力画像に変換するものである。入力画像が点対
称の歪みであるのに対し、これらの出力画像は点対称で
ないゆるやかな歪みを有することとなる。この歪みは任
意に設定できるので、撮像装置が撮像する対象により、
種々の歪みを持たせることができる。一旦ほとんど歪み
を無くした中間画像に対して、ｘ軸、ｙ軸に平行な直線
は保存される（請求項３乃至請求項５）。
を一旦歪みをほとんど無くした中間画像に変換したの
ち、ｘ軸方向及び／又はｙ軸方向にゆるやかな歪みを持
たせた出力画像に変換するものである。入力画像が点対
称の歪みであるのに対し、これらの出力画像は点対称で
ないゆるやかな歪みを有することとなる。この歪みは任
意に設定できるので、撮像装置が撮像する対象により、
種々の歪みを持たせることができる。一旦ほとんど歪み
を無くした中間画像に対して、ｘ軸、ｙ軸に平行な直線
は保存される（請求項３乃至請求項５）。
【００１６】このように、完全に歪みを無くした画像に
比較しゆるやかな歪みを持たせる画像変換装置は、係数
の設定により距離感を喪失することを無くすことがで
き、視認性の良い出力画像を提供できる。このような画
像変換装置は、撮像装置に組み込んでも、表示装置に組
み込んでも、又は撮像装置と表示装置とが一体となった
撮像及び表示装置に組み込んでも良い（請求項６）。
比較しゆるやかな歪みを持たせる画像変換装置は、係数
の設定により距離感を喪失することを無くすことがで
き、視認性の良い出力画像を提供できる。このような画
像変換装置は、撮像装置に組み込んでも、表示装置に組
み込んでも、又は撮像装置と表示装置とが一体となった
撮像及び表示装置に組み込んでも良い（請求項６）。
【００１７】
【発明の実施の形態】〔第１実施例〕図２は、本願の第
１の実施例に係る画像変換装置１００と、広角レンズを
有する撮像装置２及び表示装置３と共に示した構成図で
ある。画像変換装置１００は、広角レンズを有する撮像
装置２から入力された１画面の画像データを保持する入
力メモリ１０、座標変換器１１、座標変換テーブル１２
及び表示装置３へ出力する１画面の画像データを保持す
る出力メモリ１３とから成る。座標変換器１１は、図３
に示すフローチャートに従うＣＰＵから成る。尚、本実
施例はモノクロ画像についてのものである。
１の実施例に係る画像変換装置１００と、広角レンズを
有する撮像装置２及び表示装置３と共に示した構成図で
ある。画像変換装置１００は、広角レンズを有する撮像
装置２から入力された１画面の画像データを保持する入
力メモリ１０、座標変換器１１、座標変換テーブル１２
及び表示装置３へ出力する１画面の画像データを保持す
る出力メモリ１３とから成る。座標変換器１１は、図３
に示すフローチャートに従うＣＰＵから成る。尚、本実
施例はモノクロ画像についてのものである。
【００１８】画像変換装置１００の座標変換器１１の作
用を図３のフローチャートに示す。以下、Ｓ１１等はス
テップ１１を示すものである。図３のフローチャート
は、入力メモリ１０に１画面のモノクロ画像データが読
み込まれたのち、始動する。まず、Ｓ１１において、出
力画素の初期座標(x',y')が読み込まれる。この初期座
標は任意であるが、例えば１画面の最も小さい座標の
(x',y')である。次にＳ１２で、出力画素（座標(x',
y')）に対応する入力座標(x,y)（必ずしも各画素に一致
しない）が、座標変換テーブル１２から読み込まれる。
用を図３のフローチャートに示す。以下、Ｓ１１等はス
テップ１１を示すものである。図３のフローチャート
は、入力メモリ１０に１画面のモノクロ画像データが読
み込まれたのち、始動する。まず、Ｓ１１において、出
力画素の初期座標(x',y')が読み込まれる。この初期座
標は任意であるが、例えば１画面の最も小さい座標の
(x',y')である。次にＳ１２で、出力画素（座標(x',
y')）に対応する入力座標(x,y)（必ずしも各画素に一致
しない）が、座標変換テーブル１２から読み込まれる。
【００１９】次にＳ１３で、出力座標(x',y')に対応す
る入力座標(x,y)が存在するか否かが判定される。存在
しない場合（入力画像の外に対応点が有る場合）はＳ１
４に進み、入力座標(x,y)の輝度Ｉを予め設定されたＩ0
に等しく置かれ、Ｓ１６に進む。出力座標(x',y')に対
応する入力座標(x,y)が存在する場合は、当該入力座標
(x,y)の輝度Ｉを直近画素から演算する。例えば当該入
力座標(x,y)を囲む４格子点の４つの輝度を入力メモリ
１０から読み込み、加重平均により入力座標(x,y)の輝
度Ｉを求め、Ｓ１６に進む。
る入力座標(x,y)が存在するか否かが判定される。存在
しない場合（入力画像の外に対応点が有る場合）はＳ１
４に進み、入力座標(x,y)の輝度Ｉを予め設定されたＩ0
に等しく置かれ、Ｓ１６に進む。出力座標(x',y')に対
応する入力座標(x,y)が存在する場合は、当該入力座標
(x,y)の輝度Ｉを直近画素から演算する。例えば当該入
力座標(x,y)を囲む４格子点の４つの輝度を入力メモリ
１０から読み込み、加重平均により入力座標(x,y)の輝
度Ｉを求め、Ｓ１６に進む。
【００２０】こうして、出力座標(x',y')に対応する入
力座標(x,y)の輝度Ｉが求められると、Ｓ１６で、輝度
Ｉが出力座標(x',y')の輝度として出力メモリ１３に出
力され、Ｓ１７に進む。Ｓ１７では出力画素（座標(x',
y')）の次画素の座標の存在を判定し、存在すればＳ１
８に進む。Ｓ１８では、次画素の座標に出力画素の座標
(x',y')を更新してＳ１２に戻る。出力画素（座標(x',
y')）の次画素が存在しない、即ち出力画像の１画面が
完成すれば、終了する。こののち、出力メモリ１３か
ら、表示装置３へ画像データが出力される。
力座標(x,y)の輝度Ｉが求められると、Ｓ１６で、輝度
Ｉが出力座標(x',y')の輝度として出力メモリ１３に出
力され、Ｓ１７に進む。Ｓ１７では出力画素（座標(x',
y')）の次画素の座標の存在を判定し、存在すればＳ１
８に進む。Ｓ１８では、次画素の座標に出力画素の座標
(x',y')を更新してＳ１２に戻る。出力画素（座標(x',
y')）の次画素が存在しない、即ち出力画像の１画面が
完成すれば、終了する。こののち、出力メモリ１３か
ら、表示装置３へ画像データが出力される。
【００２１】実際の画像データを用いた変換と、キャリ
ブレーションパターンを用いた変換を図４の（ａ）、
（ｂ）に示す。まず、図１２（ｂ）の６４０×４８０画
素の入力画像（極座標(R,θ)）から、図１３（ｂ）の完
全に歪みを取った１２８０×９６０画素の画像（極座標
(R',θ')）への変換が、次のように確定された。
ブレーションパターンを用いた変換を図４の（ａ）、
（ｂ）に示す。まず、図１２（ｂ）の６４０×４８０画
素の入力画像（極座標(R,θ)）から、図１３（ｂ）の完
全に歪みを取った１２８０×９６０画素の画像（極座標
(R',θ')）への変換が、次のように確定された。
【数１】
R＝R'＋k1R'3＋k2R'5＋k3R'7＋k4R'9＋k5R'11
θ＝θ'
k1＝-1.125×10-1
k2＝ 1.436×10-2
k3＝-1.224×10-3
k4＝ 5.729×10-5
k5＝-1.106×10-6
R、R'の単位はmmであり、R2＝x2＋y2、R'2＝x'2＋y'2。
【００２２】そこで、ａ＝2/3、k'i/ki＝ａiとして入力
画像（極座標(R,θ)）から、画像（極座標(R',θ')）へ
の変換を、
画像（極座標(R,θ)）から、画像（極座標(R',θ')）へ
の変換を、
【数２】
R＝R'＋k'1R'3＋k'2R'5＋k'3R'7＋k'4R'9＋k'5R'11
θ＝θ'
R2＝x2＋y2、R'2＝x'2＋y'2
とした。この関係が、全出力画素について変換テーブル
１２に用意されている。図１２の（ａ）、（ｂ）の入力
画像からこの変換を施した画像を図４の（ａ）、（ｂ）
に示す。図４の（ｂ）のように、この変換はゆるやかな
歪みを残した変換であるが、従来の図１３の（ａ）のよ
うな距離感を喪失したものでなく、図４の（ａ）のよう
に距離感と歪みのバランスの取れた、視認性の良い画像
を出力する変換となる。
１２に用意されている。図１２の（ａ）、（ｂ）の入力
画像からこの変換を施した画像を図４の（ａ）、（ｂ）
に示す。図４の（ｂ）のように、この変換はゆるやかな
歪みを残した変換であるが、従来の図１３の（ａ）のよ
うな距離感を喪失したものでなく、図４の（ａ）のよう
に距離感と歪みのバランスの取れた、視認性の良い画像
を出力する変換となる。
【００２３】〔第２実施例〕図５は、本願の第２の実施
例に係る画像変換装置２００と、広角レンズを有する撮
像装置２及び表示装置３と共に示した構成図である。画
像変換装置２００は、広角レンズを有する撮像装置２か
ら入力された１画面の画像データを保持する入力メモリ
２０、第１座標変換器２１、第１座標変換テーブル２
２、中間メモリ２３、第２座標変換器２４、第２座標変
換テーブル２５及び表示装置３へ出力する１画面の画像
データを保持する出力メモリ２６とから成る。第１座標
変換器２１は、図６に示すフローチャートに従うＣＰＵ
から成り、第２座標変換器２４は、図７に示すフローチ
ャートに従うＣＰＵから成る。尚、本実施例もモノクロ
画像についてのものである。
例に係る画像変換装置２００と、広角レンズを有する撮
像装置２及び表示装置３と共に示した構成図である。画
像変換装置２００は、広角レンズを有する撮像装置２か
ら入力された１画面の画像データを保持する入力メモリ
２０、第１座標変換器２１、第１座標変換テーブル２
２、中間メモリ２３、第２座標変換器２４、第２座標変
換テーブル２５及び表示装置３へ出力する１画面の画像
データを保持する出力メモリ２６とから成る。第１座標
変換器２１は、図６に示すフローチャートに従うＣＰＵ
から成り、第２座標変換器２４は、図７に示すフローチ
ャートに従うＣＰＵから成る。尚、本実施例もモノクロ
画像についてのものである。
【００２４】画像変換装置２００の前半の作用である第
１座標変換器２１を図６のフローチャートに示す。Ｓ２
１等はステップ２１を示すものである。図６のフローチ
ャートは、入力メモリ２０に１画面のモノクロ画像デー
タが読み込まれたのち、始動する。まず、Ｓ２１におい
て、中間画素の初期座標(x',y')が読み込まれる。この
初期座標は任意であるが、例えば１画面の最も小さい座
標の(x',y')である。次にＳ２２で、中間画素（座標
(x',y')）に対応する入力座標(x,y)（必ずしも各画素に
一致しない）が、第１座標変換テーブル２２から読み込
まれる。
１座標変換器２１を図６のフローチャートに示す。Ｓ２
１等はステップ２１を示すものである。図６のフローチ
ャートは、入力メモリ２０に１画面のモノクロ画像デー
タが読み込まれたのち、始動する。まず、Ｓ２１におい
て、中間画素の初期座標(x',y')が読み込まれる。この
初期座標は任意であるが、例えば１画面の最も小さい座
標の(x',y')である。次にＳ２２で、中間画素（座標
(x',y')）に対応する入力座標(x,y)（必ずしも各画素に
一致しない）が、第１座標変換テーブル２２から読み込
まれる。
【００２５】次にＳ２３で、中間座標(x',y')に対応す
る入力座標(x,y)が存在するか否かが判定される。存在
しない場合（入力画像の外に対応点が有る場合）はＳ２
４に進み、入力座標(x,y)の輝度Ｉが予め設定されたＩ0
に等しく置かれ、Ｓ２６に進む。中間座標(x',y')に対
応する入力座標(x,y)が存在する場合は、当該入力座標
(x,y)の輝度Ｉを直近画素から演算する。例えば当該入
力座標(x,y)を囲む４格子点の４つの輝度を入力メモリ
２０から読み込み、加重平均により入力座標(x,y)の輝
度Ｉを求め、Ｓ２６に進む。
る入力座標(x,y)が存在するか否かが判定される。存在
しない場合（入力画像の外に対応点が有る場合）はＳ２
４に進み、入力座標(x,y)の輝度Ｉが予め設定されたＩ0
に等しく置かれ、Ｓ２６に進む。中間座標(x',y')に対
応する入力座標(x,y)が存在する場合は、当該入力座標
(x,y)の輝度Ｉを直近画素から演算する。例えば当該入
力座標(x,y)を囲む４格子点の４つの輝度を入力メモリ
２０から読み込み、加重平均により入力座標(x,y)の輝
度Ｉを求め、Ｓ２６に進む。
【００２６】こうして、中間座標(x',y')に対応する入
力座標(x,y)の輝度Ｉが求められると、Ｓ２６で、輝度
Ｉが中間座標(x',y')の輝度として中間メモリ２３に出
力され、Ｓ２７に進む。Ｓ２７では中間画素（座標(x',
y')）の次画素の座標の存在を判定し、存在すればＳ２
８に進む。Ｓ２８では、次画素の座標に中間画素の座標
(x',y')を更新してＳ２２に戻る。中間画素（座標(x',
y')）の次画素が存在しない、即ち中間画像の１画面が
完成すれば、終了する。
力座標(x,y)の輝度Ｉが求められると、Ｓ２６で、輝度
Ｉが中間座標(x',y')の輝度として中間メモリ２３に出
力され、Ｓ２７に進む。Ｓ２７では中間画素（座標(x',
y')）の次画素の座標の存在を判定し、存在すればＳ２
８に進む。Ｓ２８では、次画素の座標に中間画素の座標
(x',y')を更新してＳ２２に戻る。中間画素（座標(x',
y')）の次画素が存在しない、即ち中間画像の１画面が
完成すれば、終了する。
【００２７】図７のフローチャートは、中間メモリ２３
に１画面のモノクロ画像データが書き込まれたのち、始
動する。まず、Ｓ３１において、出力画素の初期座標
(x'',y'')が読み込まれる。この初期座標は任意である
が、例えば１画面の最も小さい座標の(x'',y'')であ
る。次にＳ３２で、出力画素（座標(x'',y'')）に対応
する中間座標(x',y')（必ずしも各画素に一致しない）
が、第２座標変換テーブル２５から読み込まれる。
に１画面のモノクロ画像データが書き込まれたのち、始
動する。まず、Ｓ３１において、出力画素の初期座標
(x'',y'')が読み込まれる。この初期座標は任意である
が、例えば１画面の最も小さい座標の(x'',y'')であ
る。次にＳ３２で、出力画素（座標(x'',y'')）に対応
する中間座標(x',y')（必ずしも各画素に一致しない）
が、第２座標変換テーブル２５から読み込まれる。
【００２８】次にＳ３３で、出力座標(x'',y'')に対応
する中間座標(x',y')が存在するか否かが判定される。
存在しない場合（中間画像の外に対応点が有る場合）は
Ｓ３４に進み、中間座標(x',y')の輝度Ｉ'を予め設定さ
れたＩ0に等しく置かれ、Ｓ３６に進む。出力座標(x'',
y'')に対応する中間座標(x',y')が存在する場合は、当
該中間座標(x',y')の輝度Ｉ'を直近画素から演算する。
例えば当該中間座標(x',y')を囲む４格子点の４つの輝
度を中間メモリ２３から読み込み、加重平均により中間
座標(x',y')の輝度Ｉ'を求め、Ｓ３６に進む。
する中間座標(x',y')が存在するか否かが判定される。
存在しない場合（中間画像の外に対応点が有る場合）は
Ｓ３４に進み、中間座標(x',y')の輝度Ｉ'を予め設定さ
れたＩ0に等しく置かれ、Ｓ３６に進む。出力座標(x'',
y'')に対応する中間座標(x',y')が存在する場合は、当
該中間座標(x',y')の輝度Ｉ'を直近画素から演算する。
例えば当該中間座標(x',y')を囲む４格子点の４つの輝
度を中間メモリ２３から読み込み、加重平均により中間
座標(x',y')の輝度Ｉ'を求め、Ｓ３６に進む。
【００２９】こうして、出力座標(x'',y'')に対応する
中間座標(x',y')の輝度Ｉ'が求められると、Ｓ３６で、
輝度Ｉ'が出力座標(x'',y'')の輝度として出力メモリ２
６に出力され、Ｓ３７に進む。Ｓ３７では出力画素（座
標(x'',y'')）の次画素の座標の存在を判定し、存在す
ればＳ３８に進む。Ｓ３８では、次画素の座標に出力画
素の座標(x'',y'')を更新してＳ３２に戻る。出力画素
（座標(x'',y'')）の次画素が存在しない、即ち出力画
像の１画面が完成すれば、終了する。こののち、出力メ
モリ２６から、表示装置３へ画像データが出力される。
中間座標(x',y')の輝度Ｉ'が求められると、Ｓ３６で、
輝度Ｉ'が出力座標(x'',y'')の輝度として出力メモリ２
６に出力され、Ｓ３７に進む。Ｓ３７では出力画素（座
標(x'',y'')）の次画素の座標の存在を判定し、存在す
ればＳ３８に進む。Ｓ３８では、次画素の座標に出力画
素の座標(x'',y'')を更新してＳ３２に戻る。出力画素
（座標(x'',y'')）の次画素が存在しない、即ち出力画
像の１画面が完成すれば、終了する。こののち、出力メ
モリ２６から、表示装置３へ画像データが出力される。
【００３０】実際の画像データを用いた変換と、キャリ
ブレーションパターンを用いた変換を図８の（ａ）、
（ｂ）に示す。まず、図１２（ｂ）の６４０×４８０画
素の入力画像（極座標(R,θ)）から、図１３（ｂ）の完
全に歪みを取った１２８０×９６０画素の中間画像（極
座標(R',θ')）への変換が、第１実施例同様、次のよう
に確定された。
ブレーションパターンを用いた変換を図８の（ａ）、
（ｂ）に示す。まず、図１２（ｂ）の６４０×４８０画
素の入力画像（極座標(R,θ)）から、図１３（ｂ）の完
全に歪みを取った１２８０×９６０画素の中間画像（極
座標(R',θ')）への変換が、第１実施例同様、次のよう
に確定された。
【数３】
R＝R'＋k1R'3＋k2R'5＋k3R'7＋k4R'9＋k5R'11
θ＝θ'
k1＝-1.125×10-1
k2＝ 1.436×10-2
k3＝-1.224×10-3
k4＝ 5.729×10-5
k5＝-1.106×10-6
R、R'の単位はmmであり、R2＝x2＋y2、R'2＝x'2＋y'2。
この関係が、全中間画素について第１座標変換テーブル
２２に用意されている。
この関係が、全中間画素について第１座標変換テーブル
２２に用意されている。
【００３１】そこで、中間画像（座標(x',y')、x'＝R'c
osθ',y'＝R'sinθ'）から、出力画像（座標(x'',
y'')）への変換を、
osθ',y'＝R'sinθ'）から、出力画像（座標(x'',
y'')）への変換を、
【数４】x'＝x''(1＋2.0×10-6x''2＋2.0×10-11x''4＋
4.0×10-16x''6) y'＝1.5 y'' とした。この関係が、全出力画素について第２座標変換
テーブル２５に用意されている。図１３の（ａ）、
（ｂ）の中間画像からこの変換を施した画像を図８の
（ａ）、（ｂ）に示す。図８の（ｂ）のように、この変
換は横方向にゆるやかな歪みを加えた変換であるが、従
来の図１３の（ａ）のような距離感を喪失したものでな
く、図８の（ａ）のように距離感と歪みのバランスの取
れた、視認性の良い画像を出力する変換となる。
4.0×10-16x''6) y'＝1.5 y'' とした。この関係が、全出力画素について第２座標変換
テーブル２５に用意されている。図１３の（ａ）、
（ｂ）の中間画像からこの変換を施した画像を図８の
（ａ）、（ｂ）に示す。図８の（ｂ）のように、この変
換は横方向にゆるやかな歪みを加えた変換であるが、従
来の図１３の（ａ）のような距離感を喪失したものでな
く、図８の（ａ）のように距離感と歪みのバランスの取
れた、視認性の良い画像を出力する変換となる。
【００３２】〔第３実施例〕本実施例においては、図５
に示す第２実施例の構成において、第２座標変換テーブ
ル２５の内容を下記の通りに変更したものである。即
ち、中間画像（座標(x',y')、x'＝R'cosθ',y'＝R'sin
θ'）から、出力画像（座標(x'',y'')）への変換を、
に示す第２実施例の構成において、第２座標変換テーブ
ル２５の内容を下記の通りに変更したものである。即
ち、中間画像（座標(x',y')、x'＝R'cosθ',y'＝R'sin
θ'）から、出力画像（座標(x'',y'')）への変換を、
【数５】x'＝x''
y'＝1.5 y''(1＋2.0×10-6ｙ''2＋2.0×10-11ｙ''4＋4.
0×10-16ｙ''6) とした。図１３の（ａ）、（ｂ）の中間画像からこの変
換を施した画像を図９の（ａ）、（ｂ）に示す。図９の
（ｂ）のように、この変換は縦方向にゆるやかな歪みを
加えた変換であるが、従来の図１３の（ａ）のような距
離感を喪失したものでなく、図９の（ａ）のように距離
感と歪みのバランスの取れた、視認性の良い画像を出力
する変換となる。
0×10-16ｙ''6) とした。図１３の（ａ）、（ｂ）の中間画像からこの変
換を施した画像を図９の（ａ）、（ｂ）に示す。図９の
（ｂ）のように、この変換は縦方向にゆるやかな歪みを
加えた変換であるが、従来の図１３の（ａ）のような距
離感を喪失したものでなく、図９の（ａ）のように距離
感と歪みのバランスの取れた、視認性の良い画像を出力
する変換となる。
【００３３】〔第４実施例〕本実施例においては、図５
に示す第２実施例の構成において、第２座標変換テーブ
ル２５の内容を下記の通りに変更したものである。即
ち、中間画像（座標(x',y')、x'＝R'cosθ',y'＝R'sin
θ'）から、出力画像（座標(x'',y'')）への変換を、
に示す第２実施例の構成において、第２座標変換テーブ
ル２５の内容を下記の通りに変更したものである。即
ち、中間画像（座標(x',y')、x'＝R'cosθ',y'＝R'sin
θ'）から、出力画像（座標(x'',y'')）への変換を、
【数６】x'＝x''(1＋2.0×10-6x''2＋2.0×10-11x''4＋
4.0×10-16x''6) y'＝1.5 y''(1＋2.0×10-6ｙ''2＋2.0×10-11ｙ''4＋4.
0×10-16ｙ''6) とした。図１３の（ａ）、（ｂ）の中間画像からこの変
換を施した画像を図１０の（ａ）、（ｂ）に示す。図１
０の（ｂ）のように、この変換は縦及び横方向にゆるや
かな歪みを加えた変換であるが、従来の図１３の（ａ）
のような距離感を喪失したものでなく、図１０の（ａ）
のように距離感と歪みのバランスの取れた、視認性の良
い画像を出力する変換となる。
4.0×10-16x''6) y'＝1.5 y''(1＋2.0×10-6ｙ''2＋2.0×10-11ｙ''4＋4.
0×10-16ｙ''6) とした。図１３の（ａ）、（ｂ）の中間画像からこの変
換を施した画像を図１０の（ａ）、（ｂ）に示す。図１
０の（ｂ）のように、この変換は縦及び横方向にゆるや
かな歪みを加えた変換であるが、従来の図１３の（ａ）
のような距離感を喪失したものでなく、図１０の（ａ）
のように距離感と歪みのバランスの取れた、視認性の良
い画像を出力する変換となる。
【００３４】上記の実施例では、メモリとＣＰＵから成
るコンピュータシステムで実現したが、ロジック回路で
実現することも可能である。また、第２実施例乃至第４
実施例においては、中間メモリを設け、２段階の座標変
換としたが、１個のＣＰＵで可能なことも、１段階の座
標変換で当該変換が可能であることも明らかである。
るコンピュータシステムで実現したが、ロジック回路で
実現することも可能である。また、第２実施例乃至第４
実施例においては、中間メモリを設け、２段階の座標変
換としたが、１個のＣＰＵで可能なことも、１段階の座
標変換で当該変換が可能であることも明らかである。
【００３５】特許請求の範囲に記載した発明、発明の実
施の形態の欄に説明した発明は、画像変換装置について
のものであるが、当然ながら方法発明として、即ち画像
変換方法としても認識される。即ち、出力画像の座標を
極座標で距離R'、角度θ'としたとき、対応する入力画
像の座標を極座標で距離R、角度θとして、広角レンズ
の光軸に垂直な平面に設けられた歪み補正の為のキャリ
ブレーションパターンを前記撮像装置により撮像して解
析することにより、入力画像の歪みを完全に無くす変換
が、 R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1 及びθ＝θ'により決定されるとき、歪みを完全には無
くさないような変換式 R＝p(R'＋k'1R'3＋k'2R'5＋…＋k'nR'2n+1) 及びθ＝θ'ただし、pは0でない定数、ki＝０となるi(1
≦i≦n)について、k'i＝０、その他のi(1≦i≦n)につい
て、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０により構成さ
れることを特徴とする画像変換方法、及び、ki≠０であ
る全てのi(1≦i≦n)について、k'i/ki＝ａi、０＜a＜１
である画像変換方法。
施の形態の欄に説明した発明は、画像変換装置について
のものであるが、当然ながら方法発明として、即ち画像
変換方法としても認識される。即ち、出力画像の座標を
極座標で距離R'、角度θ'としたとき、対応する入力画
像の座標を極座標で距離R、角度θとして、広角レンズ
の光軸に垂直な平面に設けられた歪み補正の為のキャリ
ブレーションパターンを前記撮像装置により撮像して解
析することにより、入力画像の歪みを完全に無くす変換
が、 R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1 及びθ＝θ'により決定されるとき、歪みを完全には無
くさないような変換式 R＝p(R'＋k'1R'3＋k'2R'5＋…＋k'nR'2n+1) 及びθ＝θ'ただし、pは0でない定数、ki＝０となるi(1
≦i≦n)について、k'i＝０、その他のi(1≦i≦n)につい
て、1＞k'1/k1＞k'2/k2＞…＞k'n/kn＞０により構成さ
れることを特徴とする画像変換方法、及び、ki≠０であ
る全てのi(1≦i≦n)について、k'i/ki＝ａi、０＜a＜１
である画像変換方法。
【００３６】同様に、広角レンズの光軸に垂直な平面に
設けられた歪み補正の為のキャリブレーションパターン
を前記撮像装置により撮像して解析することにより、得
られる中間画像の歪みを完全に無くす第１の変換であっ
て、中間画像の座標を極座標で距離R'、角度θ'とした
とき、対応する入力画像の座標を極座標で距離R、角度
θとして、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、歪みの無い中間画像か
ら、周辺部において歪みを持たせる第２の変換であっ
て、出力画像の座標を(x'',y'')とし、対応する中間画
像の座標を(x',y')としたとき、下記（１）乃至（３）
のいずれかである画像変換方法。 （１） x'＝px''(1＋k1''x2＋k2''x4＋…＋km''x''2m) 及びy'＝qy'' （２） x'＝px''及び y'＝qy''(1＋k1''y2＋k2''y4＋…＋km''y''2m) （３） x'＝px''(1＋k1''x2＋k2''x4＋…＋km''x''2m) 及び y'＝qy''(1＋k1''y2＋k2''y4＋…＋km''y''2m)
設けられた歪み補正の為のキャリブレーションパターン
を前記撮像装置により撮像して解析することにより、得
られる中間画像の歪みを完全に無くす第１の変換であっ
て、中間画像の座標を極座標で距離R'、角度θ'とした
とき、対応する入力画像の座標を極座標で距離R、角度
θとして、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、歪みの無い中間画像か
ら、周辺部において歪みを持たせる第２の変換であっ
て、出力画像の座標を(x'',y'')とし、対応する中間画
像の座標を(x',y')としたとき、下記（１）乃至（３）
のいずれかである画像変換方法。 （１） x'＝px''(1＋k1''x2＋k2''x4＋…＋km''x''2m) 及びy'＝qy'' （２） x'＝px''及び y'＝qy''(1＋k1''y2＋k2''y4＋…＋km''y''2m) （３） x'＝px''(1＋k1''x2＋k2''x4＋…＋km''x''2m) 及び y'＝qy''(1＋k1''y2＋k2''y4＋…＋km''y''2m)
【図１】画像の歪みを示す概念図。
【図２】本発明の第１の実施例に係る画像変換装置と撮
像装置及び表示装置の組合せを示す構成図。
像装置及び表示装置の組合せを示す構成図。
【図３】第１の実施例に係る画像変換装置の作用を示す
フローチャート。
フローチャート。
【図４】第１の実施例に係る画像変換装置による出力画
像。
像。
【図５】本発明の第２の実施例に係る画像変換装置と撮
像装置及び表示装置の組合せを示す構成図。
像装置及び表示装置の組合せを示す構成図。
【図６】第２の実施例に係る画像変換装置の作用の前半
を示すフローチャート。
を示すフローチャート。
【図７】第２の実施例に係る画像変換装置の作用の後半
を示すフローチャート。
を示すフローチャート。
【図８】本発明の第２の実施例に係る画像変換装置によ
る出力画像。
る出力画像。
【図９】本発明の第３の実施例に係る画像変換装置によ
る出力画像。
る出力画像。
【図１０】本発明の第４の実施例に係る画像変換装置に
よる出力画像。
よる出力画像。
【図１１】キャリブレーションパターンの１例を示す
図。
図。
【図１２】広角レンズを有する撮像装置による入力画
像。
像。
【図１３】図１２の入力画像から生成した「ほとんど歪
みの無い」出力画像。
みの無い」出力画像。
【図１４】図１３の画像の中心部分を２倍に拡大した画
像
像
１００、２００ 画像変換装置
２ 広角レンズを有する撮像装置
３ 表示装置
１０ 入力メモリ
１１ 座標変換器
１２ 座標変換テーブル
１３ 出力メモリ
２０ 入力メモリ
２１ 第１座標変換器
２２ 第１座標変換テーブル
２３ 中間メモリ
２４ 第２座標変換器
２５ 第２座標変換テーブル
２６ 出力メモリ
─────────────────────────────────────────────────────
フロントページの続き
(51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考）
Ｈ０４Ｎ 7/18 Ｈ０４Ｎ 1/40 １０１Ｚ
(72)発明者 太田 充彦
愛知県愛知郡長久手町大字長湫字横道41番
地の１ 株式会社豊田中央研究所内
Ｆターム(参考） 5B057 BA11 CA02 CA16 CB02 CB16
CD12 CD18 CH11
5C022 AA04 AB51 AB68 AC41 AC54
AC69
5C023 AA10 BA02 CA02 DA04 DA08
5C054 AA01 CA04 CC02 EA01 FD03
5C077 LL02 PP59 PQ12 PQ23 TT09
Claims (6)
- 【請求項１】 広角レンズを用いた撮像装置による入力
画像を、１画面毎に座標変換して出力する画像変換装置
において、 １画面の入力画像を記憶する入力画像保持手段と、 １画面の出力画像を記憶する出力画像保持手段と、 出力画像の座標と入力画像の座標とを対応付けることに
より、前記入力画像保持手段の１画面の入力画像のデー
タから１画面の出力画像のデータを形成する座標変換手
段とから成り、 前記座標変換手段における出力画像の座標と入力画像の
座標との対応付けが、 出力画像の座標を極座標で距離R'、角度θ'としたと
き、対応する入力画像の座標を極座標で距離R、角度θ
として、 前記広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを前記撮像装置に
より撮像して解析することにより、入力画像の歪みを完
全に無くす変換が、 R＝R'＋k1R'3＋k2R'5＋…＋knR'2n+1 及びθ＝θ' により決定されるとき、歪みを完全には無くさないよう
な変換式 R＝p(R'＋k'1R'3＋k'2R'5＋…＋k'nR'2n+1) 及びθ＝θ' ただし、pは0でない定数、ki＝０となるi(1≦i≦n)につ
いて、k'i＝０、 その他のi(1≦i≦n)について、1＞k'1/k1＞k'2/k2＞…
＞k'n/kn＞０により構成されることを特徴とする画像変
換装置。 - 【請求項２】 請求項１において、ki≠０である全ての
i(1≦i≦n)について、 k'i/ki＝ａi、０＜a＜１ である画像変換装置。 - 【請求項３】 広角レンズを用いた撮像装置による入力
画像を変換する画像変換装置において、 １画面の入力画像を記憶する入力画像保持手段と、 １画面の中間画像を記憶する中間画像保持手段と、 １画面の出力画像を記憶する出力画像保持手段と、 中間画像の座標と入力画像の座標とを対応付けることに
より、前記入力画像保持手段の１画面の入力画像のデー
タから１画面の中間画像のデータを形成する第１の座標
変換手段と、 出力画像の座標と中間画像の座標とを対応付けることに
より、前記中間画像保持手段の１画面の中間画像のデー
タから１画面の出力画像のデータを形成する第２の座標
変換手段とから成り、 前記第１の座標変換手段における中間画像の座標と入力
画像の座標との対応付けが、 前記広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを前記撮像装置に
より撮像して解析することにより、得られる中間画像の
歪みを完全に無くす第１の変換であって、 中間画像の座標を極座標で距離R'、角度θ'としたと
き、対応する入力画像の座標を極座標で距離R、角度θ
として、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、 前記第２の座標変換手段における出力画像の座標と中間
画像の座標との対応付けが、 歪みの無い中間画像から、周辺部において歪みを持たせ
る第２の変換であって、 レンズ中心点に対応するディジタル座標を(0,0)とした
座標系における出力画像の座標を(x'',y'')とし、対応
する中間画像の座標を(x',y')としたとき、 x'＝px''(1＋k1''x''2＋k2''x''4＋…＋km''x''2m) 及びy'＝qy''により構成されることを特徴とする画像変
換装置。 - 【請求項４】 広角レンズを用いた撮像装置による入力
画像を変換する画像変換装置において、 １画面の入力画像を記憶する入力画像保持手段と、 １画面の中間画像を記憶する中間画像保持手段と、 １画面の出力画像を記憶する出力画像保持手段と、 中間画像の座標と入力画像の座標とを対応付けることに
より、前記入力画像保持手段の１画面の入力画像のデー
タから１画面の中間画像のデータを形成する第１の座標
変換手段と、 出力画像の座標と中間画像の座標とを対応付けることに
より、前記中間画像保持手段の１画面の中間画像のデー
タから１画面の出力画像のデータを形成する第２の座標
変換手段とから成り、 前記第１の座標変換手段における中間画像の座標と入力
画像の座標との対応付けが、 前記広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを前記撮像装置に
より撮像して解析することにより、得られる中間画像の
歪みを完全に無くす第１の変換であって、 中間画像の座標を極座標で距離R'、角度θ'としたと
き、対応する入力画像の座標を極座標で距離R、角度θ
として、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、 前記第２の座標変換手段における出力画像の座標と中間
画像の座標との対応付けが、 歪みの無い中間画像から、周辺部において歪みを持たせ
る第２の変換であって、 レンズ中心点に対応するディジタル座標を(0,0)とした
座標系における出力画像の座標を(x'',y'')とし、対応
する中間画像の座標を(x',y')としたとき、 x'＝px''及び y'＝qy''(1＋k1''y''2＋k2''y''4＋…＋km''y''2m) により構成されることを特徴とする画像変換装置。 - 【請求項５】 広角レンズを用いた撮像装置による入力
画像を変換する画像変換装置において、 １画面の入力画像を記憶する入力画像保持手段と、 １画面の中間画像を記憶する中間画像保持手段と、 １画面の出力画像を記憶する出力画像保持手段と、 中間画像の座標と入力画像の座標とを対応付けることに
より、前記入力画像保持手段の１画面の入力画像のデー
タから１画面の中間画像のデータを形成する第１の座標
変換手段と、 出力画像の座標と中間画像の座標とを対応付けることに
より、前記中間画像保持手段の１画面の中間画像のデー
タから１画面の出力画像のデータを形成する第２の座標
変換手段とから成り、 前記第１の座標変換手段における中間画像の座標と入力
画像の座標との対応付けが、 前記広角レンズの光軸に垂直な平面に設けられた歪み補
正の為のキャリブレーションパターンを前記撮像装置に
より撮像して解析することにより、得られる中間画像の
歪みを完全に無くす第１の変換であって、 中間画像の座標を極座標で距離R'、角度θ'としたと
き、対応する入力画像の座標を極座標で距離R、角度θ
として、 R＝p(R'＋k1R'3＋k2R'5＋…＋knR'2n+1) 及びθ＝θ'により決定され、 前記第２の座標変換手段における出力画像の座標と中間
画像の座標との対応付けが、 歪みの無い中間画像から、周辺部において歪みを持たせ
る第２の変換であって、 レンズ中心点に対応するディジタル座標を(0,0)とした
座標系における出力画像の座標を(x'',y'')とし、対応
する中間画像の座標を(x',y')としたとき、 x'＝px''(1＋k1''x''2＋k2''x''4＋…＋km''x''2m) 及び y'＝qy''(1＋k1''y''2＋k2''y''4＋…＋km''y''2m) により構成されることを特徴とする画像変換装置。 - 【請求項６】 請求項１乃至請求項５のいずれか１項に
記載の画像変換装置を組み込んだ撮像及び／又は表示装
置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001299329A JP4613465B2 (ja) | 2001-08-07 | 2001-09-28 | 画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001238783 | 2001-08-07 | ||
| JP2001-238783 | 2001-08-07 | ||
| JP2001299329A JP4613465B2 (ja) | 2001-08-07 | 2001-09-28 | 画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003123064A true JP2003123064A (ja) | 2003-04-25 |
| JP4613465B2 JP4613465B2 (ja) | 2011-01-19 |
Family
ID=26620068
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001299329A Expired - Fee Related JP4613465B2 (ja) | 2001-08-07 | 2001-09-28 | 画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4613465B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007111377A1 (ja) | 2006-03-27 | 2007-10-04 | Sanyo Electric Co., Ltd. | 運転支援装置 |
| JP2009017419A (ja) * | 2007-07-09 | 2009-01-22 | Canon Inc | 撮像装置及び交換レンズ装置 |
| JP2012053740A (ja) * | 2010-09-02 | 2012-03-15 | Mitsubishi Electric Corp | 画像処理方法および画像処理装置 |
| JP2012189551A (ja) * | 2011-03-14 | 2012-10-04 | Topcon Corp | マルチカメラのキャリブレーション用全周フィールド |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101592740B1 (ko) | 2014-07-24 | 2016-02-15 | 현대자동차주식회사 | 차량용 광각카메라의 영상 왜곡 보정 장치 및 방법 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0896118A (ja) * | 1994-09-28 | 1996-04-12 | Nissan Motor Co Ltd | 車両用周囲状況表示装置 |
| JP2000106623A (ja) * | 1998-07-27 | 2000-04-11 | Fuji Photo Film Co Ltd | 画像処理装置 |
-
2001
- 2001-09-28 JP JP2001299329A patent/JP4613465B2/ja not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0896118A (ja) * | 1994-09-28 | 1996-04-12 | Nissan Motor Co Ltd | 車両用周囲状況表示装置 |
| JP2000106623A (ja) * | 1998-07-27 | 2000-04-11 | Fuji Photo Film Co Ltd | 画像処理装置 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007111377A1 (ja) | 2006-03-27 | 2007-10-04 | Sanyo Electric Co., Ltd. | 運転支援装置 |
| US9308862B2 (en) | 2006-03-27 | 2016-04-12 | Panasonic Intellectual Property Management Co., Ltd. | Drive assistance device |
| JP2009017419A (ja) * | 2007-07-09 | 2009-01-22 | Canon Inc | 撮像装置及び交換レンズ装置 |
| US8194157B2 (en) | 2007-07-09 | 2012-06-05 | Canon Kabushiki Kaisha | Image-pickup apparatus and a zoom lens for the image-pickup apparatus, with distortion correction |
| US8692908B2 (en) | 2007-07-09 | 2014-04-08 | Canon Kabushiki Kaisha | Image-pickup apparatus and a zoom lens for the image-pickup apparatus, with distortion correction |
| JP2012053740A (ja) * | 2010-09-02 | 2012-03-15 | Mitsubishi Electric Corp | 画像処理方法および画像処理装置 |
| JP2012189551A (ja) * | 2011-03-14 | 2012-10-04 | Topcon Corp | マルチカメラのキャリブレーション用全周フィールド |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4613465B2 (ja) | 2011-01-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9196022B2 (en) | Image transformation and multi-view output systems and methods | |
| US9533618B2 (en) | Method, apparatus and system for processing a display from a surround view camera solution | |
| JP2021533507A (ja) | 画像繋ぎ合わせ方法及び装置、車載画像処理装置、電子機器、記憶媒体 | |
| WO2014125659A1 (ja) | 画像処理装置、撮像装置、フィルタ生成装置、画像復元方法及びプログラム | |
| CN101946519B (zh) | 图像处理装置、成像装置、校正系数计算方法 | |
| US20120154541A1 (en) | Apparatus and method for producing 3d images | |
| KR960036638A (ko) | 텔레비젼장치에서 이미지의 수직 신장장치 및 방법 | |
| JP2009225286A (ja) | 画像撮像装置 | |
| JPH11161773A (ja) | 画像処理方法及び画像入力装置 | |
| US8160394B2 (en) | Real-time capture and transformation of hemispherical video images to images in rectilinear coordinates | |
| TW548992B (en) | Distance calculating method and imaging device | |
| JP2003123064A (ja) | 画像変換装置並びにそれを組み込んだ撮像及び／又は表示装置 | |
| CN110678897A (zh) | 图像处理装置及摄像装置 | |
| JP2007045336A (ja) | 障害物検出システム及び障害物検出方法 | |
| CN110896443B (zh) | 一种用于双摄像头切换的区域值预设方法及双摄像头切换设备 | |
| CN110896444B (zh) | 一种双摄像头切换方法和设备 | |
| JP4446080B2 (ja) | 画像表示における歪補正機能を有する画像表示装置 | |
| CN111179180A (zh) | 影像的修正方法及其装置 | |
| JPH11127382A (ja) | 画像処理装置 | |
| JPH0896118A (ja) | 車両用周囲状況表示装置 | |
| JP2001145012A (ja) | 画像歪補正装置 | |
| JPH06113309A (ja) | ディジタルビデオカメラ | |
| US20120274818A1 (en) | Image processing apparatus and image processing method | |
| JP4834938B2 (ja) | ２板式画像取り込み装置 | |
| JP3405302B2 (ja) | 画像歪補正装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080801 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100921 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101004 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131029 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131029 Year of fee payment: 3 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131029 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |