JP2007036359A - 画像合成装置、画像合成方法及びプログラム - Google Patents
画像合成装置、画像合成方法及びプログラム Download PDFInfo
- Publication number
- JP2007036359A JP2007036359A JP2005212765A JP2005212765A JP2007036359A JP 2007036359 A JP2007036359 A JP 2007036359A JP 2005212765 A JP2005212765 A JP 2005212765A JP 2005212765 A JP2005212765 A JP 2005212765A JP 2007036359 A JP2007036359 A JP 2007036359A
- Authority
- JP
- Japan
- Prior art keywords
- image
- distortion
- distortion amount
- determined
- composition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000000203 mixture Substances 0.000 title claims abstract description 40
- 238000000034 method Methods 0.000 title abstract description 49
- 238000006243 chemical reaction Methods 0.000 claims abstract description 48
- 230000015572 biosynthetic process Effects 0.000 claims description 28
- 238000003786 synthesis reaction Methods 0.000 claims description 28
- 230000006870 function Effects 0.000 claims description 16
- 230000002194 synthesizing effect Effects 0.000 claims description 8
- 238000001308 synthesis method Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 abstract description 31
- 230000009466 transformation Effects 0.000 description 17
- 230000003287 optical effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 13
- 230000033001 locomotion Effects 0.000 description 6
- 239000000470 constituent Substances 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000001454 recorded image Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】連続撮影によって得られた複数枚の画像を順次重ね合わせて合成する際に、基準となる第1の画像とその第1の画像に重ね合わせる第2の画像との間の座標変換式を算出し(ステップB11)、第1の画像上の特徴点の座標を第2の画像の座標系に変換したときの歪み量を算出する(ステップB12〜B22)。この歪み量が閾値以内であれば、第2の画像を合成に適しているものと判断し、前記座標変換式を用いて合成処理を行う(ステップB24)。歪み量が閾値を超える場合には、第2の画像を合成に不適切であると判断して破棄する(ステップB23)。これにより、合成に適した画像のみを用いて、歪みのない鮮明な画像を合成結果として得ることができる。
【選択図】図7
Description
今、重ね合わせの基準になる方の画像をF0、その基準画像に重ね合わせる画像をF1とする。画像F0上のある任意の画素(x,y)に対して、射影変換の行列式Hを使って画像F1の座標系に変換したときの座標を(x′,y′)とすると、(x′,y′)は以下のようにして求まる。
前記第1の方法では、画像の各頂点画素の座標から辺と角度を算出して歪み量を求めるようにしたが、画像上のある任意の特徴点近傍の各画素値の差分の絶対値和を求める方法も考えられる。以下に、その方法について、図8および図9を用いて説明する。
Claims (5)
- 複数枚の連続した画像を取得する画像取得手段と、
この画像取得手段によって得られた各画像を順次重ね合わせて合成する際に、基準となる第1の画像とその第1の画像に重ね合わせる第2の画像との間の座標変換式を算出する変換式算出手段と、
この変換式算出手段によって得られた座標変換式を用いて、前記第1の画像上の特徴点の座標を前記第2の画像の座標系に変換したときの歪み量を算出する歪み量算出手段と、
この歪み量算出手段によって得られた歪み量が予め設定された閾値以内であれば、前記第2の画像を合成に適しているものと判断し、前記座標変換式を用いて前記第1の画像と前記第2の画像との合成処理を行い、前記歪み量が前記閾値を超える場合には、前記第2の画像を合成に不適切であると判断し、前記第2の画像を破棄する合成制御手段と
を具備したことを特徴とする画像合成装置。 - 前記歪み量算出手段は、前記第1の画像上の各頂点の座標を前記第2の画像の座標系に変換し、その変換後の各頂点の座標から求められる辺の長さ及び頂点の角度の少なくともいずれかを変換前の状態と比較することで歪み量を算出することを特徴とする請求項1記載の画像合成装置。
- 前記歪み量算出手段は、前記第1の画像上のある任意の特徴点の座標を前記第2の画像の座標系に変換し、その変換後の特徴点近傍の各画素値と変換前の特徴点近傍の各画素値との差分の絶対値和を歪み量として算出することを特徴とする請求項1記載の画像合成装置。
- 複数枚の連続した画像を取得する第1のステップと、
この第1のステップによって得られた各画像を順次重ね合わせて合成する際に、基準となる第1の画像とその第1の画像に重ね合わせる第2の画像との間の座標変換式を算出する第2のステップと、
この第2のステップによって得られた座標変換式を用いて、前記第1の画像上の特徴点の座標を前記第2の画像の座標系に変換したときの歪み量を算出する第3のステップと、
この第3のステップによって得られた歪み量が予め設定された閾値以内であれば、前記第2の画像を合成に適しているものと判断し、前記座標変換式を用いて前記第1の画像と前記第2の画像との合成処理を行い、前記歪み量が前記閾値を超える場合には、前記第2の画像を合成に不適切であると判断し、前記第2の画像を破棄する第4のステップと
を備えたことを特徴とする画像合成方法。 - コンピュータによって読取り可能なプログラムであって、
前記コンピュータに、
複数枚の連続した画像を取得する第1の機能と、
この第1の機能によって得られた各画像を順次重ね合わせて合成する際に、基準となる第1の画像とその第1の画像に重ね合わせる第2の画像との間の座標変換式を算出する第2の機能と、
この第2の機能によって得られた座標変換式を用いて、前記第1の画像上の特徴点の座標を前記第2の画像の座標系に変換したときの歪み量を算出する第3の機能と、
この第3の機能によって得られた歪み量が予め設定された閾値以内であれば、前記第2の画像を合成に適しているものと判断し、前記座標変換式を用いて前記第1の画像と前記第2の画像との合成処理を行い、前記歪み量が前記閾値を超える場合には、前記第2の画像を合成に不適切であると判断し、前記第2の画像を破棄する第4の機能と
を実現させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005212765A JP5011504B2 (ja) | 2005-07-22 | 2005-07-22 | 画像合成装置、画像合成方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005212765A JP5011504B2 (ja) | 2005-07-22 | 2005-07-22 | 画像合成装置、画像合成方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007036359A true JP2007036359A (ja) | 2007-02-08 |
JP5011504B2 JP5011504B2 (ja) | 2012-08-29 |
Family
ID=37795115
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005212765A Expired - Fee Related JP5011504B2 (ja) | 2005-07-22 | 2005-07-22 | 画像合成装置、画像合成方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5011504B2 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008276621A (ja) * | 2007-05-01 | 2008-11-13 | Casio Comput Co Ltd | 画像処理装置、画像変換方法及びプログラム |
JP2009020800A (ja) * | 2007-07-13 | 2009-01-29 | Casio Comput Co Ltd | 特徴点追跡装置及びプログラム |
JP2009122843A (ja) * | 2007-11-13 | 2009-06-04 | Fuji Xerox Co Ltd | 画像処理装置及びプログラム |
JP2010103876A (ja) * | 2008-10-27 | 2010-05-06 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
JP2011512111A (ja) * | 2008-02-13 | 2011-04-14 | クゥアルコム・インコーポレイテッド | 画像レジストレーション及びビデオ符号化のための共有ブロック比較アーキテクチャ |
CN102316271A (zh) * | 2010-07-01 | 2012-01-11 | 株式会社尼康 | 相机和图像处理装置 |
JP2012525072A (ja) * | 2009-04-22 | 2012-10-18 | クゥアルコム・インコーポレイテッド | 画像選択および結合の方法およびデバイス |
JP2017215337A (ja) * | 2011-03-31 | 2017-12-07 | ノバラム ディーエックス リミテッド | ソフトウェアアプリケーションおよびプロセッサ |
CN111105367A (zh) * | 2019-12-09 | 2020-05-05 | Oppo广东移动通信有限公司 | 人脸畸变校正方法、装置、电子设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10191136A (ja) * | 1996-12-27 | 1998-07-21 | Canon Inc | 撮像装置及び画像合成装置 |
JPH11187307A (ja) * | 1997-12-17 | 1999-07-09 | Canon Inc | 撮像装置及び撮像方法 |
JP2001222707A (ja) * | 2000-02-08 | 2001-08-17 | Sanyo Electric Co Ltd | 中間画像合成方法、中間画像合成装置、中間画像合成プログラムを記録した記録媒体 |
JP2002112075A (ja) * | 2000-09-29 | 2002-04-12 | Minolta Co Ltd | デジタルスチルカメラ |
JP2002163647A (ja) * | 2000-11-27 | 2002-06-07 | Sanyo Electric Co Ltd | レンズ歪み係数算出装置および算出方法、レンズ歪み係数算出プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2004208024A (ja) * | 2002-12-25 | 2004-07-22 | Canon Software Inc | 撮像装置および撮像方法およびプログラムおよび記録媒体 |
WO2005046221A1 (ja) * | 2003-11-11 | 2005-05-19 | Seiko Epson Corporation | 画像処理装置、画像処理方法、そのプログラムおよび記録媒体 |
-
2005
- 2005-07-22 JP JP2005212765A patent/JP5011504B2/ja not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10191136A (ja) * | 1996-12-27 | 1998-07-21 | Canon Inc | 撮像装置及び画像合成装置 |
JPH11187307A (ja) * | 1997-12-17 | 1999-07-09 | Canon Inc | 撮像装置及び撮像方法 |
JP2001222707A (ja) * | 2000-02-08 | 2001-08-17 | Sanyo Electric Co Ltd | 中間画像合成方法、中間画像合成装置、中間画像合成プログラムを記録した記録媒体 |
JP2002112075A (ja) * | 2000-09-29 | 2002-04-12 | Minolta Co Ltd | デジタルスチルカメラ |
JP2002163647A (ja) * | 2000-11-27 | 2002-06-07 | Sanyo Electric Co Ltd | レンズ歪み係数算出装置および算出方法、レンズ歪み係数算出プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2004208024A (ja) * | 2002-12-25 | 2004-07-22 | Canon Software Inc | 撮像装置および撮像方法およびプログラムおよび記録媒体 |
WO2005046221A1 (ja) * | 2003-11-11 | 2005-05-19 | Seiko Epson Corporation | 画像処理装置、画像処理方法、そのプログラムおよび記録媒体 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008276621A (ja) * | 2007-05-01 | 2008-11-13 | Casio Comput Co Ltd | 画像処理装置、画像変換方法及びプログラム |
JP2009020800A (ja) * | 2007-07-13 | 2009-01-29 | Casio Comput Co Ltd | 特徴点追跡装置及びプログラム |
JP2009122843A (ja) * | 2007-11-13 | 2009-06-04 | Fuji Xerox Co Ltd | 画像処理装置及びプログラム |
JP2011512111A (ja) * | 2008-02-13 | 2011-04-14 | クゥアルコム・インコーポレイテッド | 画像レジストレーション及びビデオ符号化のための共有ブロック比較アーキテクチャ |
US8368815B2 (en) | 2008-10-27 | 2013-02-05 | Sony Corporation | Image processing apparatus, image processing method, and program |
JP4623199B2 (ja) * | 2008-10-27 | 2011-02-02 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP2010103876A (ja) * | 2008-10-27 | 2010-05-06 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
US9153289B2 (en) | 2008-10-27 | 2015-10-06 | Sony Corporation | Image processing apparatus, image processing method, and program |
JP2012525072A (ja) * | 2009-04-22 | 2012-10-18 | クゥアルコム・インコーポレイテッド | 画像選択および結合の方法およびデバイス |
JP2014168270A (ja) * | 2009-04-22 | 2014-09-11 | Qualcomm Incorporated | 画像選択および結合の方法およびデバイス |
US8963949B2 (en) | 2009-04-22 | 2015-02-24 | Qualcomm Incorporated | Image selection and combination method and device |
CN102316271A (zh) * | 2010-07-01 | 2012-01-11 | 株式会社尼康 | 相机和图像处理装置 |
JP2012015830A (ja) * | 2010-07-01 | 2012-01-19 | Nikon Corp | カメラ |
JP2017215337A (ja) * | 2011-03-31 | 2017-12-07 | ノバラム ディーエックス リミテッド | ソフトウェアアプリケーションおよびプロセッサ |
CN111105367A (zh) * | 2019-12-09 | 2020-05-05 | Oppo广东移动通信有限公司 | 人脸畸变校正方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP5011504B2 (ja) | 2012-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5011504B2 (ja) | 画像合成装置、画像合成方法及びプログラム | |
JP5035372B2 (ja) | 三次元モデリング装置、三次元モデリング方法、ならびに、プログラム | |
JP4900401B2 (ja) | 撮影装置およびプログラム | |
JP4529840B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
TWI420901B (zh) | 攝像裝置、攝像方法及攝像程式 | |
JP5126344B2 (ja) | 撮像装置、撮像方法及びプログラム | |
JP4798236B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
JP6656035B2 (ja) | 画像処理装置、撮像装置および画像処理装置の制御方法 | |
KR20090088325A (ko) | 화상 처리 장치, 화상 처리 방법 및 촬상 장치 | |
JP2017168982A (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
JP4640032B2 (ja) | 画像合成装置、画像合成方法及びプログラム | |
JP2011130328A (ja) | 画像処理装置および方法、並びにプログラム | |
JP2009089220A (ja) | 撮像装置 | |
JP6647246B2 (ja) | 画像処理装置、撮像装置、画像処理装置の制御方法およびプログラム | |
JP2009258005A (ja) | 三次元測定装置及び三次元測定方法 | |
JP2008288797A (ja) | 撮像装置 | |
JP4807582B2 (ja) | 画像処理装置、撮像装置及びそのプログラム | |
JP4807194B2 (ja) | 画像処理装置及びプログラム | |
JP4632417B2 (ja) | 撮像装置、及びその制御方法 | |
JP2001250114A (ja) | 画像処理方法と画像処理装置及びコンピュータ読み取り可能な記録媒体 | |
JP5493839B2 (ja) | 撮像装置、画像合成方法及びプログラム | |
JP5289354B2 (ja) | 撮像装置 | |
JP2008048152A (ja) | 動画処理装置、動画撮影装置および動画撮影プログラム | |
JP2018207178A (ja) | 撮像装置、撮像装置の制御方法およびプログラム | |
JP5613145B2 (ja) | 撮影装置およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080709 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100622 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110715 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120424 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120507 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20120529 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150615 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5011504 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |