JP5276529B2 - 画像処理装置およびその方法 - Google Patents
画像処理装置およびその方法 Download PDFInfo
- Publication number
- JP5276529B2 JP5276529B2 JP2009145825A JP2009145825A JP5276529B2 JP 5276529 B2 JP5276529 B2 JP 5276529B2 JP 2009145825 A JP2009145825 A JP 2009145825A JP 2009145825 A JP2009145825 A JP 2009145825A JP 5276529 B2 JP5276529 B2 JP 5276529B2
- Authority
- JP
- Japan
- Prior art keywords
- exposure
- imaging
- exposure time
- aperture value
- opening
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
- H04N23/6845—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by combination of a plurality of images sequentially taken
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Adjustment Of Camera Lenses (AREA)
- Image Processing (AREA)
Description
図1はディジタルカメラの外観図である。カメラボディ100の上部には、ビューファインダの接眼窓111、自動露出(AE)ロックボタン114、自動焦点(AF)の測距点を選択するボタン113、撮影操作をするためのレリーズボタン112がある。また、撮影モード選択ダイヤル117、外部表示部409、電子ダイヤル411などがある。
A/D423および画像処理部425は、測光部414によって決められた時間に基づき露光条件生成部427の制御によって露光された画像を処理し、被写体の複数の撮像データを取得する。
振れ補正部428は、コード化露光処理により、手振れなどによる画像の暈けを補正する。手振れによる画像の暈けは、畳込積分の形式で表現することができる。垂直方向への手振れを例にとると、暈け画像は下式のように表すことができる。
Iblur(x, y) = 1/T・∫0 TI(x, y+νt)h(t)dt …(1)
ここで、Iblur(x, y)は暈け画像、
Tは露光時間、
νは振れの速度、
I(x, y+νt)は被写体像、
h(t)は開閉パターン。
Iblur(u, v) = 1/(νT)・I(u, v)H(u) …(2)
I(u, v) = νT/H(u)・Iblur(u, v) …(3)
I(x, y) = iFFT{νT/H(u)・Iblur(u, v)} …(4)
Iblur(x, y) = 1/T・∫th(t)I{x・cosθ(T-t)+y・sinθ(T-t), -x・sinθ(T-t)+y・cosθ(T-t)}dt
= 1/T・∫th(T-t)I{x・cosθ(t)+y・sinθ(t), -x・sinθ(t)+y・cosθ(t)}dt …(5)
= 1/T・∫ωh(θ)/ω(θ)・I{x・cosθ+y・sinθ, -x・sinθ+y・cosθ}dθ …(6)
= 1/T・∫ωh'(θ)・I{x・cosθ+y・sinθ, -x・sinθ+y・cosθ}dθ …(7)
ここで、関数h(t)は開閉パターンを表し、シャッタ開は1、シャッタ閉は0、
積分範囲はt=0〜T、
積分範囲はω=0〜ω。
Iblur(r, Θ) = 1/T・∫ωh'(θ)I(r, Θ-θ)dθ
= 1/T・(h'*I)(r, Θ) …(8)
ここで、式(7)における(x, y)はr(cosΘ, sinΘ)である。
図6はPSFの作成(S204)を説明するフローチャートである。まず、入力した回転振れ情報に基づき、角度θを時間で微分して角速度ω(t)を算出する(S501)。角速度ω(t)とθ(t)と組み合わせることにより、角速度をθの関数として表すことが可能になる。これをω(θ)とする。
式(8)を周波数空間上に変換すると次式が得られる。
Iblur(f, ρ) = 1/T・H'(f, ρ)I(f, ρ) …(9)
ここで、fはrの周波数変換に対応する変数、
ρはΘの周波数変換に対応する変数。
図11はフラッタシャッタによる露光を説明する図である。図11(a)は適正な露光が得られる露光時間(適正露光時間)、シャッタを開いた状態を示す。図11(b)は適正露光時間の期間にフラッタシャッタを適用した状態を示す。フラッタシャッタによってシャッタを開閉すれば、適正露光時間の期間内に非露光期間が存在する。従って、図11(c)に示すように、フラッタシャッタによる露光量(露光期間の露光量の積分値)は、適正露光時間シャッタを開いた場合に比べて低下し、撮影画像は暗くなる。
本発明の目的は、次のようにしても達成される。上記実施例の機能または先に説明したフローチャートの処理や制御を実現するプログラムを記録した記録媒体をシステムまたは装置に供給し、そのシステムまたは装置のコンピュータ(CPUやMPU)に前記プログラムを実行させる。この場合、記録媒体から読み出されたソフトウェア自体が上記実施例の機能を実現することになり、そのプログラムと、そのプログラムを記憶する、コンピュータが読み取り可能な記録媒体は本発明を構成する。
Claims (6)
- コード化露光処理により撮像装置の撮像データの振れを補正する画像処理装置であって、
前記撮像装置の測光手段が被写体に応じて設定した露光時間および絞り値を入力する入力手段と、
前記コード化露光処理に使用するシャッタの開閉パターンにおけるシャッタ開の割合に基づき、前記露光時間または絞り値を調整する調整手段と、
前記調整した露光時間または絞り値による露光量の不足分に相当する、撮像データのゲイン調整値を設定する設定手段と、
前記開閉パターン、前記露光時間、前記絞り値に基づき前記撮像装置の撮影手段による撮像を制御する制御手段を有することを特徴とする画像処理装置。 - 前記調整手段は、前記撮像装置に絞り優先モードが設定された場合は前記露光時間を調整し、前記撮像装置にシャッタ速度優先モードが設定された場合は前記絞り値を調整することを特徴とする請求項1に記載の画像処理装置。
- さらに、前記ゲイン調整値に基づき前記撮影手段が撮像した撮像データをゲイン調整するゲイン調整手段を有することを特徴とする請求項1または請求項2に記載された画像処理装置。
- さらに、前記開閉パターンに基づき前記撮像データに前記コード化露光処理を施す補正手段を有することを特徴とする請求項1から請求項3の何れか一項に記載された画像処理装置。
- コード化露光処理により撮像装置の撮像データの振れを補正する画像処理方法であって、
前記撮像装置の測光手段が被写体に応じて設定した露光時間および絞り値を入力し、
前記コード化露光処理に使用するシャッタの開閉パターンにおけるシャッタ開の割合に基づき、前記露光時間または絞り値を調整し、
前記調整した露光時間または絞り値による露光量の不足分に相当する、撮像データのゲイン調整値を設定し、
前記開閉パターン、前記露光時間、前記絞り値に基づき前記撮像装置の撮影手段による撮像を制御することを特徴とする画像処理方法。 - コンピュータを請求項1から請求項4の何れか一項に記載された画像処理装置の各手段として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009145825A JP5276529B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
US12/789,676 US8237804B2 (en) | 2009-06-18 | 2010-05-28 | Image processing apparatus and method thereof |
US13/531,776 US8379097B2 (en) | 2009-06-18 | 2012-06-25 | Image processing apparatus and method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009145825A JP5276529B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011004189A JP2011004189A (ja) | 2011-01-06 |
JP2011004189A5 JP2011004189A5 (ja) | 2012-07-26 |
JP5276529B2 true JP5276529B2 (ja) | 2013-08-28 |
Family
ID=43353986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009145825A Expired - Fee Related JP5276529B2 (ja) | 2009-06-18 | 2009-06-18 | 画像処理装置およびその方法 |
Country Status (2)
Country | Link |
---|---|
US (2) | US8237804B2 (ja) |
JP (1) | JP5276529B2 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5276529B2 (ja) * | 2009-06-18 | 2013-08-28 | キヤノン株式会社 | 画像処理装置およびその方法 |
JP5281495B2 (ja) * | 2009-06-18 | 2013-09-04 | キヤノン株式会社 | 画像処理装置およびその方法 |
JP5243477B2 (ja) * | 2010-04-13 | 2013-07-24 | パナソニック株式会社 | ブラー補正装置およびブラー補正方法 |
JP5656705B2 (ja) * | 2010-06-01 | 2015-01-21 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法 |
JP5543280B2 (ja) | 2010-06-01 | 2014-07-09 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
CN102238339B (zh) * | 2011-06-21 | 2013-06-05 | 深圳市先河系统技术有限公司 | 一种逆光补偿方法 |
KR101705605B1 (ko) * | 2011-11-14 | 2017-02-23 | 삼성전자주식회사 | 코드화된 조명을 이용하는 촬상 장치 및 이미지 처리 장치와 그 방법 |
US9194965B2 (en) * | 2012-11-02 | 2015-11-24 | General Electric Company | System and method for X-ray image acquisition and processing |
JP6393091B2 (ja) * | 2014-06-19 | 2018-09-19 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
EP3179716B1 (en) * | 2014-08-27 | 2019-10-09 | Huawei Technologies Co., Ltd. | Image processing method, computer storage medium, device, and terminal |
CN108432222A (zh) * | 2015-12-22 | 2018-08-21 | 深圳市大疆创新科技有限公司 | 支持包围式成像的系统、方法和移动平台 |
US9858653B2 (en) * | 2016-02-02 | 2018-01-02 | Motorola Mobility Llc | Deblurring an image |
JP6961392B2 (ja) * | 2017-05-24 | 2021-11-05 | キヤノン株式会社 | 固体撮像素子、撮像装置及び撮像方法 |
CN109151332B (zh) * | 2018-06-26 | 2020-07-28 | 杭州电子科技大学 | 基于适应度函数的相机编码曝光最优码字序列搜索方法 |
US11880984B2 (en) | 2020-06-15 | 2024-01-23 | Arizona Board Of Regents On Behalf Of Arizona State University | Tracking-based motion deblurring via coded exposure |
US20220408019A1 (en) * | 2021-06-17 | 2022-12-22 | Fyusion, Inc. | Viewpoint path modeling |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05167915A (ja) * | 1991-12-13 | 1993-07-02 | Olympus Optical Co Ltd | 電子的撮像装置 |
JP3736915B2 (ja) * | 1996-09-25 | 2006-01-18 | セイコープレシジョン株式会社 | カメラ用シャッタの制御装置 |
JP4005188B2 (ja) * | 1997-10-08 | 2007-11-07 | オリンパス株式会社 | 電子カメラ |
JP2002214657A (ja) | 2001-01-23 | 2002-07-31 | Canon Inc | 像振れ補正装置 |
JP2005062370A (ja) * | 2003-08-08 | 2005-03-10 | Ricoh Co Ltd | 撮像装置 |
JP4452825B2 (ja) * | 2004-08-05 | 2010-04-21 | 国立大学法人電気通信大学 | 静止画像形成方法及びその記録装置 |
JP2007243774A (ja) | 2006-03-10 | 2007-09-20 | Olympus Imaging Corp | 電子的ぶれ補正装置 |
US7580620B2 (en) * | 2006-05-08 | 2009-08-25 | Mitsubishi Electric Research Laboratories, Inc. | Method for deblurring images using optimized temporal coding patterns |
JP5188205B2 (ja) * | 2007-06-12 | 2013-04-24 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | カメラによって或るシーンから取得される画像内の動いている物体の解像度を高めるための方法 |
JP5213670B2 (ja) * | 2008-01-16 | 2013-06-19 | 三洋電機株式会社 | 撮像装置及びぶれ補正方法 |
JP5276529B2 (ja) * | 2009-06-18 | 2013-08-28 | キヤノン株式会社 | 画像処理装置およびその方法 |
JP5281495B2 (ja) * | 2009-06-18 | 2013-09-04 | キヤノン株式会社 | 画像処理装置およびその方法 |
US8223259B2 (en) * | 2009-09-30 | 2012-07-17 | Mitsubishi Electric Research Laboratories, Inc. | Increasing temporal resolution of signals |
-
2009
- 2009-06-18 JP JP2009145825A patent/JP5276529B2/ja not_active Expired - Fee Related
-
2010
- 2010-05-28 US US12/789,676 patent/US8237804B2/en not_active Expired - Fee Related
-
2012
- 2012-06-25 US US13/531,776 patent/US8379097B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US8237804B2 (en) | 2012-08-07 |
US20120262589A1 (en) | 2012-10-18 |
JP2011004189A (ja) | 2011-01-06 |
US20100321509A1 (en) | 2010-12-23 |
US8379097B2 (en) | 2013-02-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5276529B2 (ja) | 画像処理装置およびその方法 | |
US8760526B2 (en) | Information processing apparatus and method for correcting vibration | |
US8379096B2 (en) | Information processing apparatus and method for synthesizing corrected image data | |
JP4522207B2 (ja) | カメラシステム、カメラ本体及び交換レンズ | |
JP4487191B2 (ja) | 画像処理装置および画像処理プログラム | |
CN105391918B (zh) | 图像处理装置及控制图像处理装置的方法 | |
JP5843454B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP7484866B2 (ja) | ブレ補正装置、交換レンズ、撮像装置及び像ブレ補正方法 | |
KR101599872B1 (ko) | 디지털 영상 처리 장치, 그 제어방법 및 이를 실행시키기 위한 프로그램을 저장한 기록매체 | |
JP2008092548A (ja) | 撮像装置、撮影方法及びプログラム | |
JP6652300B2 (ja) | 画像処理装置、撮像装置および制御方法 | |
KR101599881B1 (ko) | 화각 미리 보기 기능을 갖는 디지털 영상 신호 처리 장치, 이의 제어 방법 및 상기 방법을 기록한 기록 매체 | |
JP4567313B2 (ja) | カメラ | |
JP2005064699A (ja) | カメラ | |
JP2010233188A (ja) | 撮像装置、その制御方法及びプログラム | |
JP5377073B2 (ja) | 撮像装置、ぶれ修復方法及びプログラム | |
JP5038448B2 (ja) | カメラ | |
JP2011078074A (ja) | 撮像装置およびその制御方法 | |
JP5281494B2 (ja) | 画像処理装置およびその方法 | |
JP2015204566A (ja) | カメラシステム | |
JP5284195B2 (ja) | 画像処理装置、画像処理方法、プログラム及び記録媒体 | |
JP2020036091A (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
JP2006050139A (ja) | 光学機器 | |
US11653094B2 (en) | Imaging apparatus with shaking state information display | |
JP2015115808A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120608 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120608 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130517 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5276529 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |