JP2011004190A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2011004190A5 JP2011004190A5 JP2009145826A JP2009145826A JP2011004190A5 JP 2011004190 A5 JP2011004190 A5 JP 2011004190A5 JP 2009145826 A JP2009145826 A JP 2009145826A JP 2009145826 A JP2009145826 A JP 2009145826A JP 2011004190 A5 JP2011004190 A5 JP 2011004190A5
- Authority
- JP
- Japan
- Prior art keywords
- exposure
- images
- image processing
- corrected
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Description
本発明にかかる画像処理は、撮像手段によって撮影された複数の画像を入力し、コード化露光処理により前記複数の画像それぞれの振れを補正し、前記振れを補正した複数の画像の間の相対移動量を算出し、前記相対移動量に基づき前記振れを補正した複数の画像の相対位置を補正し、前記相対位置を補正した複数の画像を合成することを特徴とする。
●関数の作成
関数作成部107は、振れ補正に使用するデコンボリューション関数を作成する。実空間でのコンボリューション演算は、空間周波数上で積の形式で記述することができる。画像データの撮影過程を表現する式(1)をフーリエ変換すると下式が得られる。
Iblur(u, v) = 1/(νT)・I(u, v)H(u) …(2)
ここで、u, vは空間周波数。
関数作成部107は、振れ補正に使用するデコンボリューション関数を作成する。実空間でのコンボリューション演算は、空間周波数上で積の形式で記述することができる。画像データの撮影過程を表現する式(1)をフーリエ変換すると下式が得られる。
Iblur(u, v) = 1/(νT)・I(u, v)H(u) …(2)
ここで、u, vは空間周波数。
領域抽出部110は、ステップS801、S803の判定により除外されなかった注目画素、つまり、T1≦D≦T2の画素を適正領域に含まれる画素（以下、適正画素）として、その位置を記録する(S804)。そして、ステップS805の判定により、画像の全画素に上記の判定を行うまで、上記処理を繰り返す。
図15は修復処理を説明するフローチャートである。環境情報取得部121は、被写体の環境の光量など撮影環境の情報を取得する(S1701)。露光条件制御部122は、環境情報取得部121が取得した撮影環境の情報に応じて露光条件を決定する(S1702)。露光条件制御部122は、被写体の環境の光量が少ない場合は、図5(a)に示すようなフラッタシャッタ用のシャッタ開閉パターンを選択し、露光条件を制御する。一方、被写体の環境の光量が充分な場合は、図4(a)に示すようなシャッタ開期間において連続的にシャッタが開（以下、通常露光）を選択し、露光条件を制御する。そして、露光条件制御部122は、決定した露光条件を露光制御部102と露光条件取得部106に通知し、撮像装置の露光を制御する(S1703)。以降、図3に示す実施例1のステップS201以降と同様の処理が行われるので詳細説明を割愛する。
図20に示す振れ補正を行う場合、修復処理が完了した後の画像に対して相対移動量を算出する際に、フラッタシャッタによる露光によって撮影した画像（図20の例では、補正画像1、3、5）のみ相対移動量を算出してもよい。そして、通常露光によって撮影した画像（図20の例では、補正画像2、4）の相対移動量は、当該画像の前後で撮影されたフラッタシャッタによる露光によって撮影された補正画像の相対移動量から補間演算によって算出すればよい。例えば、図20の補正画像2の相対移動量は、補正画像1と3の相対移動量から補間演算する。勿論、補正画像2の相対移動量をフラッタシャッタによる露光によって撮影されたすべての補正画像（図20の例では、補正画像1、3、5）の相対移動量から補間演算してもよい。
Claims (8)
- 撮像手段によって撮影された複数の画像を入力する入力手段と、
コード化露光処理により前記複数の画像それぞれの振れを補正する補正手段と、
前記振れを補正した複数の画像の間の相対移動量を算出する算出手段と、
前記相対移動量に基づき前記振れを補正した複数の画像の相対位置を補正し、前記相対位置を補正した複数の画像を合成する合成手段とを有することを特徴とする画像処理装置。 - さらに、撮影環境の情報を取得する取得手段と、
前記撮影環境の情報に基づき前記撮像手段の露光条件を制御する制御手段とを有することを特徴とする請求項1に記載された画像処理装置。 - 前記制御手段は、前記撮影環境の情報に基づき、前記露光条件としてフラッタシャッタによる露光または通常露光を設定することを特徴とする請求項2に記載された画像処理装置。
- 前記制御手段は、前記撮影環境の情報が光量不足を示す場合、前記露光条件として前記フラッタシャッタによる露光を設定することを特徴とする請求項3に記載された画像処理装置。
- 前記制御手段は、前記撮影環境の情報が光量充分を示す場合、前記露光条件として前記通常露光を設定することを特徴とする請求項3または請求項4に記載された画像処理装置。
- 前記制御手段は、前記撮影環境の情報が光量不足と光量充分の中間を示す場合、前記露光条件として前記フラッタシャッタによる露光と前記通常露光を設定し、前記フラッタシャッタによる撮影と前記通常露光による撮影が混在する撮影を前記撮像手段に実行させることを特徴とする請求項3に記載された画像処理装置。
- 撮像手段によって撮影された複数の画像を入力し、
コード化露光処理により前記複数の画像それぞれの振れを補正し、
前記振れを補正した複数の画像の間の相対移動量を算出し、
前記相対移動量に基づき前記振れを補正した複数の画像の相対位置を補正し、前記相対位置を補正した複数の画像を合成することを特徴とする画像処理方法。 - コンピュータを請求項1から請求項6の何れか一項に記載された画像処理装置の各手段として機能させるためのプログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009145826A JP5281495B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
| US12/813,268 US8289405B2 (en) | 2009-06-18 | 2010-06-10 | Image processing apparatus and method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009145826A JP5281495B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2011004190A JP2011004190A (ja) | 2011-01-06 |
| JP2011004190A5 true JP2011004190A5 (ja) | 2012-07-26 |
| JP5281495B2 JP5281495B2 (ja) | 2013-09-04 |
Family
ID=43353987
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009145826A Expired - Fee Related JP5281495B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US8289405B2 (ja) |
| JP (1) | JP5281495B2 (ja) |
Families Citing this family (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8436907B2 (en) * | 2008-05-09 | 2013-05-07 | Honeywell International Inc. | Heterogeneous video capturing system |
| JP5276529B2 (ja) * | 2009-06-18 | 2013-08-28 | キヤノン株式会社 | 画像処理装置およびその方法 |
| JP5424835B2 (ja) * | 2009-11-30 | 2014-02-26 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| JP5460278B2 (ja) * | 2009-12-09 | 2014-04-02 | キヤノン株式会社 | 画像処理装置及びその制御方法ならびにプログラム |
| JP5243477B2 (ja) * | 2010-04-13 | 2013-07-24 | パナソニック株式会社 | ブラー補正装置およびブラー補正方法 |
| JP5543280B2 (ja) | 2010-06-01 | 2014-07-09 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| JP5656705B2 (ja) * | 2010-06-01 | 2015-01-21 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法 |
| JP5859958B2 (ja) * | 2010-11-11 | 2016-02-16 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 画像処理装置、画像処理方法、およびプログラム |
| JP2012119858A (ja) * | 2010-11-30 | 2012-06-21 | Aof Imaging Technology Ltd | 撮影装置、撮影方法、およびプログラム |
| US9456152B2 (en) | 2011-07-12 | 2016-09-27 | Samsung Electronics Co., Ltd. | Device and method for blur processing |
| KR101705605B1 (ko) * | 2011-11-14 | 2017-02-23 | 삼성전자주식회사 | 코드화된 조명을 이용하는 촬상 장치 및 이미지 처리 장치와 그 방법 |
| US8964045B2 (en) * | 2012-01-31 | 2015-02-24 | Microsoft Corporation | Image blur detection |
| JP6046966B2 (ja) * | 2012-04-19 | 2016-12-21 | キヤノン株式会社 | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 |
| US9843789B2 (en) * | 2014-09-08 | 2017-12-12 | Panasonic Intellectual Property Management Co., Ltd. | Still-image extracting method and image processing device for implementing the same |
| JP6416646B2 (ja) * | 2015-02-02 | 2018-10-31 | 株式会社Ｓｏｋｅｎ | 位置測定装置 |
| JP2017126254A (ja) * | 2016-01-15 | 2017-07-20 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| JP6744747B2 (ja) | 2016-04-01 | 2020-08-19 | キヤノン株式会社 | 情報処理装置およびその制御方法 |
| JP2018025703A (ja) * | 2016-08-12 | 2018-02-15 | キヤノン株式会社 | 像ブレ補正装置、光学機器、および像ブレ補正方法 |
| JP2019114956A (ja) * | 2017-12-25 | 2019-07-11 | キヤノン株式会社 | 画像処理装置、撮像システム、移動体 |
| CN109274895A (zh) * | 2018-09-25 | 2019-01-25 | 杭州电子科技大学 | 编码曝光成像的快速相对运动场景拍摄装置及复原方法 |
| WO2021039160A1 (ja) * | 2019-08-30 | 2021-03-04 | パナソニックＩｐマネジメント株式会社 | 応力解析装置 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7646891B2 (en) * | 2002-12-26 | 2010-01-12 | Mitshubishi Denki Kabushiki Kaisha | Image processor |
| JP4136793B2 (ja) * | 2003-05-29 | 2008-08-20 | キヤノン株式会社 | 撮像装置および撮像装置の制御方法 |
| EP1512537B1 (en) * | 2003-08-11 | 2008-09-17 | Canon Kabushiki Kaisha | Method of forming image, image forming apparatus and program for carrying out the method |
| JP2006074693A (ja) | 2004-09-06 | 2006-03-16 | Toshiba Corp | 撮像装置 |
| JP4677748B2 (ja) * | 2004-09-15 | 2011-04-27 | 株式会社ニコン | 撮像装置 |
| JP4469309B2 (ja) * | 2005-06-22 | 2010-05-26 | 株式会社リコー | 手ぶれ補正方法、手ぶれ補正装置、及び撮像装置 |
| US7756407B2 (en) * | 2006-05-08 | 2010-07-13 | Mitsubishi Electric Research Laboratories, Inc. | Method and apparatus for deblurring images |
| US7580620B2 (en) * | 2006-05-08 | 2009-08-25 | Mitsubishi Electric Research Laboratories, Inc. | Method for deblurring images using optimized temporal coding patterns |
| JP5188205B2 (ja) * | 2007-06-12 | 2013-04-24 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | カメラによって或るシーンから取得される画像内の動いている物体の解像度を高めるための方法 |
| US8130278B2 (en) * | 2008-08-01 | 2012-03-06 | Omnivision Technologies, Inc. | Method for forming an improved image using images with different resolutions |
| JP2010161521A (ja) * | 2009-01-07 | 2010-07-22 | Nec Corp | 画像処理装置、撮像装置、画像ぶれの補正方法、及びプログラム |
| JP5300591B2 (ja) * | 2009-05-21 | 2013-09-25 | キヤノン株式会社 | 画像処理装置およびその方法 |
| JP5276529B2 (ja) * | 2009-06-18 | 2013-08-28 | キヤノン株式会社 | 画像処理装置およびその方法 |
| US7962031B2 (en) * | 2009-10-06 | 2011-06-14 | Apple Inc. | Pulsed control of camera flash |
-
2009
- 2009-06-18 JP JP2009145826A patent/JP5281495B2/ja not_active Expired - Fee Related
-
2010
- 2010-06-10 US US12/813,268 patent/US8289405B2/en not_active Expired - Fee Related
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2011004190A5 (ja) | ||
| US8289405B2 (en) | Image processing apparatus and method thereof | |
| JP5531194B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
| US8982249B2 (en) | Image capturing apparatus and method for controlling an image capturing apparatus for capturing and processing a plurality of pieces of exposure and dark image data to correct combined exposure image data in accordance with combined dark image data | |
| JP6711396B2 (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
| JP4345940B2 (ja) | 手ぶれ画像補正方法、記録媒体及び撮像装置 | |
| US20170269187A1 (en) | Image pickup apparatus having function of generating simulation image,control method therefor, and storage medium | |
| JP6254938B2 (ja) | 画像ノイズ除去装置、および画像ノイズ除去方法 | |
| US8976274B2 (en) | Apparatus and method for image pickup and correction | |
| JP2011250125A5 (ja) | ||
| JP2022525853A (ja) | 結合前ノイズ除去による高ダイナミックレンジ画像生成 | |
| JP2015144475A (ja) | 撮像装置、撮像装置の制御方法、プログラム及び記憶媒体 | |
| US11457158B2 (en) | Location estimation device, location estimation method, and program recording medium | |
| JP2009049753A5 (ja) | ||
| JP5211589B2 (ja) | 画像処理装置、電子カメラ、および画像処理プログラム | |
| JP2023174740A (ja) | 撮像装置 | |
| JP2013130529A (ja) | 検査装置、検査システム、検査方法、コンピュータを検査装置として機能させるためのプログラム、コンピュータを検査システムとして機能させるためのプログラム、当該プログラムを格納したコンピュータ読み取り可能な不揮発性のデータ記録媒体 | |
| JP6739955B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム、および記録媒体 | |
| WO2017217239A1 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| CN110692235B (zh) | 图像处理装置、图像处理程序及图像处理方法 | |
| JP2015079329A (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP5505072B2 (ja) | 画像データ処理装置および画像データ処理方法 | |
| JP5927053B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP5645704B2 (ja) | 画像処理装置、及びその制御方法 | |
| JP6386670B2 (ja) | 画像処理装置 |