JP2010171914A - 画像データ変換装置 - Google Patents
画像データ変換装置 Download PDFInfo
- Publication number
- JP2010171914A JP2010171914A JP2009087965A JP2009087965A JP2010171914A JP 2010171914 A JP2010171914 A JP 2010171914A JP 2009087965 A JP2009087965 A JP 2009087965A JP 2009087965 A JP2009087965 A JP 2009087965A JP 2010171914 A JP2010171914 A JP 2010171914A
- Authority
- JP
- Japan
- Prior art keywords
- image
- plane
- coordinate system
- correction
- input image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000006243 chemical reaction Methods 0.000 claims abstract description 93
- 238000000034 method Methods 0.000 claims description 18
- 230000003287 optical effect Effects 0.000 abstract description 27
- 238000003384 imaging method Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000005452 bending Methods 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
Landscapes
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
【解決手段】入力画像の信号から球形歪を除去するように画像変換して出力画像を得る画像変換部の画像変換モデルは、円形の平面からなる平面直交座標系の前記入力画像を、魚眼レンズと対応して被写体が映し出される極座標系の半球状の仮想物体面の画像に変換し、該仮想物体面の画像を、球形歪を補正する3次元直交座標系の補正面3上の画像に変換し、該補正面3の画像を、平面直交座標系の表示面に正射影法により投影して出力画像を得る。
【選択図】図1
Description
なお、図4に示すように、ここでは円形となる入力画像の論理的な半径のサイズを、r2=1で計算している。また、φ2は入力画像のx軸から反時計回り方向の角度(方位角)を示し、θ2は、φ2での半径の直線と光軸zとの間の角度(天頂角)を示している。
この入力画像座標I(x3,y3)は撮像された画素の座標であるが、実際には、撮像素子の横縦比率、例えば横4:縦3(横1:縦0.75)に入力画像が収まるようにする。これが撮像面6の撮像画像I’(x4,y4)であり、撮像時には光が到達しない範囲も含めて、画像信号として図2の画像データ変換装置90に入力される。
であるので、横方向の直線は歪んでしまうが、x0=±1のとき、z1=0となるので、真横まで表示面4に再現することができる。しかし、真下の領域を表示面4に再現することはできない。従って、車載用のバックカメラでは、車体と地面との相関を確認できることが望ましいが、これができない。
図5は6個の正四角片からなる箱体の上片と前片を除去し、その正面片(奥片)と底片と左片と右片の各中心を通る垂線の交わる点から正面片の中心に向かう線を光軸として、その箱体を前面から魚眼レンズで撮像した入力画像1(魚眼画像)である。
の式で算出されることを特徴とする。ただし、W/Hは前記表示面のアスペクト比で、Wは横、Hは縦の値を示す。
であり、
とし、y0<0のときg(y1)=y1とするとき、
から(但し、p、cは任意の数)、a=f(x1)、b=g(y1)として、
の式で算出されることを特徴とする。ただし、W/Hは前記表示面のアスペクト比で、Wは横、Hは縦の値を示す。
となる。なお、x1=x0,y1=y0である。4/3は表示面4のアスペクト比である。従って、表示面4がワイド画面であれば、16/9となる。
ただ、この式(7)を式(2)に適用すれば、x0とy0が両用とも大きくなる斜め方向において歪が大きくなる傾向がある。
ときは、お互いに近づくように変化する。なお、a=f(x1)、b=g(y1)である。
2:仮想物体面
3,3A:補正面、3a:中央面、3b:右側面、3c:左側面、3d:下中央面
4:表示面
5:光軸
6:撮像面
91:フレームメモリ部
92:画像変換部
92A:画像変換メモリ部
93:画像補間部
94:D/Aコンバータ
Claims (3)
- 魚眼レンズを用いて撮像された球形歪を含む被写体画像を入力画像とし、該入力画像の信号から前記球形歪を除去するように画像変換して出力画像を得る画像変換部を備えた画像データ変換装置において、
前記画像変換部は、前記入力画像の内の、上半分と下半分とで異なる画像変換処理を実行することを特徴とする画像データ変換装置。 - 魚眼レンズを用いて撮像された球形歪を含む被写体画像を入力画像とし、該入力画像の信号から前記球形歪を除去するように画像変換して出力画像を得る画像変換部を備えた画像データ変換装置において、
前記画像変換部は、円形の平面からなる平面直交座標系の前記入力画像を、前記魚眼レンズと対応して前記被写体が映し出される極座標系の半球状の仮想物体面上の画像に変換し、該仮想物体面上の画像を、前記球形歪を補正する3次元直交座標系の補正面上の画像に変換し、該補正面上の画像を、平面直交座標系の表示面上に正射影法により投影して、前記出力画像を得、
前記補正面は、前記表示面の横と縦の座標をx0,y0とし、前記補正面の3次元座標をx1,y1,z1とするとき、
の式で算出されることを特徴とする画像データ変換装置。ただし、W/Hは前記表示面のアスペクト比で、Wは横、Hは縦の値を示す。 - 魚眼レンズを用いて撮像された球形歪を含む被写体画像を入力画像とし、該入力画像の信号から前記球形歪を除去するように画像変換して出力画像を得る画像変換部を備えた画像データ変換装置において、
前記画像変換部は、円形の平面からなる平面直交座標系の前記入力画像を、前記魚眼レンズと対応して前記被写体が映し出される極座標系の半球状の仮想物体面上の画像に変換し、該仮想物体面上の画像を、前記球形歪を補正する3次元直交座標系の補正面上の画像に変換し、該補正面上の画像を、平面直交座標系の表示面上に正射影法により投影して、前記出力画像を得、
前記補正面は、前記表示面の横と縦の座標をx0,y0とし、前記補正面の3次元座標をx1,y1,z1とするとき、
であり、
とし、y0<0のときg(y1)=y1とするとき、
から(但し、p、cは任意の数)、a=f(x1)、b=g(y1)として、
の式で算出されることを特徴とする画像データ変換装置。ただし、W/Hは前記表示面のアスペクト比で、Wは横、Hは縦の値を示す。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009087965A JP5046132B2 (ja) | 2008-12-24 | 2009-03-31 | 画像データ変換装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008328484 | 2008-12-24 | ||
JP2008328484 | 2008-12-24 | ||
JP2009087965A JP5046132B2 (ja) | 2008-12-24 | 2009-03-31 | 画像データ変換装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2010171914A true JP2010171914A (ja) | 2010-08-05 |
JP2010171914A5 JP2010171914A5 (ja) | 2012-03-22 |
JP5046132B2 JP5046132B2 (ja) | 2012-10-10 |
Family
ID=42703580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009087965A Active JP5046132B2 (ja) | 2008-12-24 | 2009-03-31 | 画像データ変換装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5046132B2 (ja) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012053602A (ja) * | 2010-08-31 | 2012-03-15 | Hitachi Information & Communication Engineering Ltd | 画像補正装置、補正画像生成方法、補正テーブル生成装置、補正テーブル生成方法、補正テーブル生成プログラムおよび補正画像生成プログラム |
JP2012053601A (ja) * | 2010-08-31 | 2012-03-15 | Hitachi Information & Communication Engineering Ltd | 画像補正装置、補正画像生成方法、補正テーブル生成装置、補正テーブル生成方法、補正テーブル生成プログラムおよび補正画像生成プログラム |
JP2014119883A (ja) * | 2012-12-14 | 2014-06-30 | Fujitsu General Ltd | 画像データ変換装置並びにナビゲーションシステムおよびカメラ装置並びに車両 |
KR101521008B1 (ko) * | 2013-01-10 | 2015-05-19 | 염철희 | 어안 렌즈를 사용하여 얻은 왜곡영상에 대한 보정방법 및 이를 구현하기 위한 영상 디스플레이 시스템 |
US9052393B2 (en) | 2013-01-18 | 2015-06-09 | Caterpillar Inc. | Object recognition system having radar and camera input |
US9167214B2 (en) | 2013-01-18 | 2015-10-20 | Caterpillar Inc. | Image processing system using unified images |
JP2016195390A (ja) * | 2015-04-01 | 2016-11-17 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 単眼ビデオカメラを使用した、車両からの目標点の距離および方向の算定 |
CN106846410A (zh) * | 2016-12-20 | 2017-06-13 | 北京鑫洋泉电子科技有限公司 | 基于三维的行车环境成像方法及装置 |
JP2019176402A (ja) * | 2018-03-29 | 2019-10-10 | 株式会社富士通ゼネラル | 画像処理装置 |
US10595004B2 (en) | 2015-08-07 | 2020-03-17 | Samsung Electronics Co., Ltd. | Electronic device for generating 360-degree three-dimensional image and method therefor |
JPWO2018221209A1 (ja) * | 2017-05-30 | 2020-04-02 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
US10699389B2 (en) * | 2016-05-24 | 2020-06-30 | Qualcomm Incorporated | Fisheye rendering with lens distortion correction for 360-degree video |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000242773A (ja) * | 1999-02-19 | 2000-09-08 | Fitto:Kk | 画像データ変換装置 |
JP2002152719A (ja) * | 2000-08-29 | 2002-05-24 | Usc Corp | 曲面像を利用したモニタ方法及びモニタ装置 |
JP2005293038A (ja) * | 2004-03-31 | 2005-10-20 | Denso It Laboratory Inc | 物体検知装置 |
JP2008301052A (ja) * | 2007-05-30 | 2008-12-11 | Kyocera Corp | 画像処理方法及び装置 |
JP2008311890A (ja) * | 2007-06-14 | 2008-12-25 | Fujitsu General Ltd | 画像データ変換装置、及びこれを備えたカメラ装置 |
-
2009
- 2009-03-31 JP JP2009087965A patent/JP5046132B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000242773A (ja) * | 1999-02-19 | 2000-09-08 | Fitto:Kk | 画像データ変換装置 |
JP2002152719A (ja) * | 2000-08-29 | 2002-05-24 | Usc Corp | 曲面像を利用したモニタ方法及びモニタ装置 |
JP2005293038A (ja) * | 2004-03-31 | 2005-10-20 | Denso It Laboratory Inc | 物体検知装置 |
JP2008301052A (ja) * | 2007-05-30 | 2008-12-11 | Kyocera Corp | 画像処理方法及び装置 |
JP2008311890A (ja) * | 2007-06-14 | 2008-12-25 | Fujitsu General Ltd | 画像データ変換装置、及びこれを備えたカメラ装置 |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012053601A (ja) * | 2010-08-31 | 2012-03-15 | Hitachi Information & Communication Engineering Ltd | 画像補正装置、補正画像生成方法、補正テーブル生成装置、補正テーブル生成方法、補正テーブル生成プログラムおよび補正画像生成プログラム |
JP2012053602A (ja) * | 2010-08-31 | 2012-03-15 | Hitachi Information & Communication Engineering Ltd | 画像補正装置、補正画像生成方法、補正テーブル生成装置、補正テーブル生成方法、補正テーブル生成プログラムおよび補正画像生成プログラム |
JP2014119883A (ja) * | 2012-12-14 | 2014-06-30 | Fujitsu General Ltd | 画像データ変換装置並びにナビゲーションシステムおよびカメラ装置並びに車両 |
KR101521008B1 (ko) * | 2013-01-10 | 2015-05-19 | 염철희 | 어안 렌즈를 사용하여 얻은 왜곡영상에 대한 보정방법 및 이를 구현하기 위한 영상 디스플레이 시스템 |
US9052393B2 (en) | 2013-01-18 | 2015-06-09 | Caterpillar Inc. | Object recognition system having radar and camera input |
US9167214B2 (en) | 2013-01-18 | 2015-10-20 | Caterpillar Inc. | Image processing system using unified images |
JP2016195390A (ja) * | 2015-04-01 | 2016-11-17 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 単眼ビデオカメラを使用した、車両からの目標点の距離および方向の算定 |
US10595004B2 (en) | 2015-08-07 | 2020-03-17 | Samsung Electronics Co., Ltd. | Electronic device for generating 360-degree three-dimensional image and method therefor |
US10699389B2 (en) * | 2016-05-24 | 2020-06-30 | Qualcomm Incorporated | Fisheye rendering with lens distortion correction for 360-degree video |
CN106846410B (zh) * | 2016-12-20 | 2020-06-19 | 北京鑫洋泉电子科技有限公司 | 基于三维的行车环境成像方法及装置 |
CN106846410A (zh) * | 2016-12-20 | 2017-06-13 | 北京鑫洋泉电子科技有限公司 | 基于三维的行车环境成像方法及装置 |
JPWO2018221209A1 (ja) * | 2017-05-30 | 2020-04-02 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
JP7150709B2 (ja) | 2017-05-30 | 2022-10-11 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
US11521395B2 (en) | 2017-05-30 | 2022-12-06 | Sony Semiconductor Solutions Corporation | Image processing device, image processing method, and program |
JP2019176402A (ja) * | 2018-03-29 | 2019-10-10 | 株式会社富士通ゼネラル | 画像処理装置 |
JP7081265B2 (ja) | 2018-03-29 | 2022-06-07 | 株式会社富士通ゼネラル | 画像処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP5046132B2 (ja) | 2012-10-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5046132B2 (ja) | 画像データ変換装置 | |
JP4661829B2 (ja) | 画像データ変換装置、及びこれを備えたカメラ装置 | |
JP5029645B2 (ja) | 画像データ変換装置 | |
US8817079B2 (en) | Image processing apparatus and computer-readable recording medium | |
TWI524306B (zh) | 圖像轉換和多視圖輸出系統及方法 | |
KR101408426B1 (ko) | 화상 보정 장치, 보정 화상 생성 방법, 보정 테이블 생성 장치, 보정 테이블 생성 방법, 보정 테이블 생성 프로그램을 기록한 컴퓨터 판독가능한 기록 매체 및 보정 화상 생성 프로그램을 기록한 컴퓨터 판독가능한 기록 매체 | |
US10594941B2 (en) | Method and device of image processing and camera | |
JP5676092B2 (ja) | パノラマ画像生成方法及びパノラマ画像生成プログラム | |
JP4828779B2 (ja) | 高速デジタルパンチルトズームビデオ | |
JP3650578B2 (ja) | 画像の歪みを補正するためのニューラル・ネットワークを用いたパノラマ画像ナビゲーションシステム | |
JP6764995B2 (ja) | パノラマ画像圧縮方法および装置 | |
JP5596972B2 (ja) | 撮像装置の制御装置および制御方法 | |
KR20180101165A (ko) | 파노라마 프레임으로의 프레임 스티칭 | |
JP5666069B1 (ja) | 座標算出装置及び方法、並びに画像処理装置及び方法 | |
JP4811462B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置、及び撮像装置 | |
US20130058589A1 (en) | Method and apparatus for transforming a non-linear lens-distorted image | |
KR101912396B1 (ko) | 가상 카메라 기반의 임의 시점 영상 생성 장치 및 방법 | |
JP6310320B2 (ja) | 画像処理装置、撮像装置、画像処理方法、および、プログラム | |
WO2013130082A1 (en) | Method and system for adaptive perspective correction of ultra wide-angle lens images | |
WO2012060269A1 (ja) | 画像処理方法、画像処理装置及び撮像装置 | |
JP2008079026A (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
US10440267B2 (en) | System and method for image stitching | |
JP2008052589A (ja) | 広角画像の歪み補正方法 | |
JP2012053601A (ja) | 画像補正装置、補正画像生成方法、補正テーブル生成装置、補正テーブル生成方法、補正テーブル生成プログラムおよび補正画像生成プログラム | |
JP7081265B2 (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120203 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120319 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120425 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120604 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120622 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120705 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150727 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5046132 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |