JP6795961B2 - 画像処理装置、画像処理装置の制御方法、及び、プログラム - Google Patents
画像処理装置、画像処理装置の制御方法、及び、プログラム Download PDFInfo
- Publication number
- JP6795961B2 JP6795961B2 JP2016240565A JP2016240565A JP6795961B2 JP 6795961 B2 JP6795961 B2 JP 6795961B2 JP 2016240565 A JP2016240565 A JP 2016240565A JP 2016240565 A JP2016240565 A JP 2016240565A JP 6795961 B2 JP6795961 B2 JP 6795961B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- correction value
- correction
- value
- optical member
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 68
- 238000000034 method Methods 0.000 title claims description 39
- 238000012937 correction Methods 0.000 claims description 262
- 230000002093 peripheral effect Effects 0.000 claims description 66
- 238000004364 calculation method Methods 0.000 claims description 55
- 230000003287 optical effect Effects 0.000 claims description 34
- 230000008569 process Effects 0.000 claims description 25
- 230000006866 deterioration Effects 0.000 claims description 22
- 230000007423 decrease Effects 0.000 claims description 6
- 238000005286 illumination Methods 0.000 description 39
- 230000004075 alteration Effects 0.000 description 21
- 230000006870 function Effects 0.000 description 21
- 241000226585 Antennaria plantaginifolia Species 0.000 description 18
- 230000008859 change Effects 0.000 description 12
- 230000006835 compression Effects 0.000 description 11
- 238000007906 compression Methods 0.000 description 11
- 238000003384 imaging method Methods 0.000 description 7
- 238000003702 image correction Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 230000006837 decompression Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000011946 reduction process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 2
- 230000036039 immunity Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/02—Bodies
- G03B17/12—Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets
- G03B17/14—Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets interchangeably
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
- G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
- G03B7/091—Digital circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Structure And Mechanism Of Cameras (AREA)
Description
光学部材を通過した被写体の光学像を撮像素子が光電変換することによって生成された画像を取得する取得手段と、
前記画像を生成した際の前記光学部材の状態に応じて、前記光学部材に起因する画質の低下を補正するための第1の補正値を設定する設定手段と、
前記光学部材の状態に応じて変化する、前記光学部材に起因する画質の低下のうちの最も大きな画質の低下を補正するための補正値、予め定められた許容される補正値、および、前記第1の補正値に基づいて、第2の補正値を算出する算出手段と、
前記第2の補正値に基づいて、前記画像を補正する補正手段とを有することを特徴とする。
以下、発明の第1の実施形態について、主として周辺光量補正を行なう場合について説明する。図1は、発明の実施形態に係る撮像装置100の構成の一例を示すブロック図である。当該撮像装置100は、例えばデジタルカメラ、デジタルビデオカメラとして実現することができる。また、それ以外に、例えばパーソナルコンピュータ、携帯電話、スマートフォン、PDA、タブレット端末、携帯型メディアプレーヤなど、撮像機能を有する任意の情報処理端末或いは撮像装置として実現することもできる。なお、図1は、デジタルカメラ等として機能する場合を考慮して光学部材であるレンズユニット10を含む構成を示した。しかし、発明の実施形態として、撮像装置100が、一眼レフのデジタルカメラのように交換レンズが取り付け可能に構成されている場合、交換レンズがレンズユニット10に相当する。この場合、レンズユニット10は撮像装置100の構成要素からは除外される。
ここでは、像高hに対する当初の補正値の関数をF(h)、求めるシステム制約を加味した補正値の関数をG(h)とする。また、最大補正値を規定する像高をhmaxとする。
そこで、V'(h)を目標値として周辺光量補正を行えば、同一のレンズユニット10と撮像装置100の組み合わせであれば、絞り値、焦点距離、焦点位置の任意の組み合わせについて周辺の明るさを統一できる。そこで補正値算出部23は、S503おいて目標値としてV'(h)を記録する。
R(h)はS405で取得したレンズ状態情報に対応する状態をレンズユニット10が有する場合に想定される、現フレームの画像特性値(周辺光量落ち特性)を示す。このとき、現フレームでの周辺光量補正にR(h)の逆数で算出される図7(b)の補正値T(h)を適用すると、前述の動画品位の低下を招くおそれがある。そこで、S403で設定した目標値V'(h)になるような下記式3で定義される補正値T'(h)を適用する。
上記T'(h)を提供することにより、周辺光量補正後のフレーム画像は、常に図6(c)に示す特性を有する。よって、AE制御やユーザ操作により、レンズユニット10の状態がリアルタイムに変化した場合であっても、動画としてのチラつきを最大限抑えることが可能となる。
以下、発明の第2の実施形態について、主として歪曲収差補正を行なう場合について説明する。本実施形態における撮像装置100の構成は、実施形態1に示したものと同様であるため、詳細な説明は省略する。また、それ以外の構成についても、実施形態1と重複または対応する部分については説明を省略し、本実施形態に特有の部分については、必要に応じて実施形態1における図および符号を流用して説明する。
このように拡大率βを補正値D(h)に加算することで、βが適用補正値の初期値となる。これにより、樽型歪の場合にもS403で算出した拡大率が適用される。図9を参照して説明したように、樽型歪の場合も、図9(c)の内接矩形を設定した後、縮小処理を行なって元の画像サイズに設定しているが、式4のように歪変換の際に画像中心の拡大率をβに設定して予め拡大しておくことにより、最後の縮小処理の影響を相対的に低減することができる。これにより、装着されたレンズユニット10の状態が変化した場合でも画面中央の像倍率をほぼ一定に保つことができる。また、以上の補正値の算出及び、算出した補正値に基づく歪曲収差補正を動画撮影が終了するまで継続することで、像倍率変動の少ない動画の生成が可能となる。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (9)
- 光学部材を通過した被写体の光学像を撮像素子が光電変換することによって生成された画像を取得する取得手段と、
前記画像を生成した際の前記光学部材の状態に応じて、前記光学部材に起因する画質の低下を補正するための第1の補正値を設定する設定手段と、
前記光学部材の状態に応じて変化する、前記光学部材に起因する画質の低下のうちの最も大きな画質の低下を補正するための補正値、予め定められた許容される補正値、および、前記第1の補正値に基づいて、第2の補正値を算出する算出手段と、
前記第2の補正値に基づいて、前記画像を補正する補正手段と
を有することを特徴とする画像処理装置。 - 前記第1の補正値は像高に応じて変化する値であり、
前記第2の補正値は、前記最も大きな画質の低下を補正するための補正値と前記予め定められた許容される補正値に基づく関数と、前記第1の補正値に基づいて算出されることを特徴とする請求項1に記載の画像処理装置。 - 前記光学部材に起因する画質の低下は周辺光量落ちであって、
前記第1の補正値は、画像の各像高における補正ゲインであることを特徴とする請求項1または2に記載の画像処理装置。 - 前記第1の補正値は、各像高における光量の値を所定の値に一致させるための値であることを特徴とする請求項3に記載の画像処理装置。
- 前記光学部材の状態には、少なくとも、絞り、焦点距離、及び、焦点位置に関する状態が含まれることを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。
- 前記撮像素子が生成した現画像と当該現画像の直前に生成された直前画像との間で、前記画像の前記光学部材に起因する画質低下の度合いが所定レベル以上変化していないと判定される場合、前記補正手段は、前記直前画像について設定された前記第2の補正値に基づいて、前記現画像を補正することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
- 前記撮像素子を有することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 光学部材を通過した被写体の光学像を撮像素子が光電変換することによって生成された画像を取得する工程と、
前記画像を生成した際の前記光学部材の状態に応じて、前記光学部材に起因する画質の低下を補正するための第1の補正値を設定する工程と、
前記光学部材の状態に応じて変化する、前記光学部材に起因する画質の低下のうちの最も大きな画質の低下を補正するための補正値、予め定められた許容される補正値、および、前記第1の補正値に基づいて、第2の補正値を算出する工程と、
前記第2の補正値に基づいて、前記画像を補正する工程と
を有することを特徴とする画像処理装置の制御方法。 - コンピュータを、請求項1から7のいずれか1項に記載の画像処理装置における取得手段、設定手段、算出手段及び補正手段として動作させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016240565A JP6795961B2 (ja) | 2016-12-12 | 2016-12-12 | 画像処理装置、画像処理装置の制御方法、及び、プログラム |
US15/834,474 US10298865B2 (en) | 2016-12-12 | 2017-12-07 | Image processing apparatus, image capturing apparatus, method for controlling image processing apparatus, and non-transitory computer-readable storage medium for correcting image corresponding to change in state of an optical member |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016240565A JP6795961B2 (ja) | 2016-12-12 | 2016-12-12 | 画像処理装置、画像処理装置の制御方法、及び、プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020169381A Division JP7086155B2 (ja) | 2020-10-06 | 2020-10-06 | 画像処理装置、画像処理装置の制御方法、及び、プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018098609A JP2018098609A (ja) | 2018-06-21 |
JP2018098609A5 JP2018098609A5 (ja) | 2020-01-30 |
JP6795961B2 true JP6795961B2 (ja) | 2020-12-02 |
Family
ID=62488577
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016240565A Active JP6795961B2 (ja) | 2016-12-12 | 2016-12-12 | 画像処理装置、画像処理装置の制御方法、及び、プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10298865B2 (ja) |
JP (1) | JP6795961B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7297412B2 (ja) * | 2018-06-13 | 2023-06-26 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびレンズ装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003110936A (ja) | 2001-09-27 | 2003-04-11 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP2006148213A (ja) * | 2004-11-16 | 2006-06-08 | Matsushita Electric Ind Co Ltd | 映像処理装置 |
JP5034429B2 (ja) | 2006-10-16 | 2012-09-26 | ソニー株式会社 | レンズ装置、撮像装置及び収差補正方法 |
JP4958635B2 (ja) * | 2007-05-21 | 2012-06-20 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US8199243B2 (en) * | 2008-04-28 | 2012-06-12 | Panasonic Corporation | Imaging device and camera body |
JP5315158B2 (ja) * | 2008-09-12 | 2013-10-16 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP5656579B2 (ja) | 2009-11-30 | 2015-01-21 | キヤノン株式会社 | 光学部材に起因する画質の低下を補正可能な撮像装置、撮像装置の制御方法およびプログラム |
US8653429B2 (en) * | 2011-05-31 | 2014-02-18 | Hewlett-Packard Development Company, L.P. | Apparatus for controlling exposure of light sensitive elements |
JP5755204B2 (ja) * | 2012-09-12 | 2015-07-29 | キヤノン株式会社 | 撮像装置およびその制御方法、並びにレンズユニットおよびその制御方法 |
JP6468868B2 (ja) * | 2015-01-30 | 2019-02-13 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
-
2016
- 2016-12-12 JP JP2016240565A patent/JP6795961B2/ja active Active
-
2017
- 2017-12-07 US US15/834,474 patent/US10298865B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018098609A (ja) | 2018-06-21 |
US10298865B2 (en) | 2019-05-21 |
US20180167568A1 (en) | 2018-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5656579B2 (ja) | 光学部材に起因する画質の低下を補正可能な撮像装置、撮像装置の制御方法およびプログラム | |
US9723220B2 (en) | Imaging apparatus, control method, and program | |
JP6752667B2 (ja) | 画像処理装置と画像処理方法およびプログラム | |
US9357106B2 (en) | Information processing apparatus, imaging apparatus, and method for correcting images | |
JP2007180631A (ja) | 撮像装置および撮影方法 | |
JP5109104B2 (ja) | 一眼レフデジタルカメラ | |
WO2013136907A1 (ja) | 撮像装置及び電子ビューファインダ表示方法 | |
JP6468868B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
JP2012217168A (ja) | 撮像装置 | |
JP6108680B2 (ja) | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 | |
JP5436116B2 (ja) | 画像処理装置、撮像装置、及び制御方法 | |
JP2011049641A (ja) | 撮影装置、その制御方法、及びプログラム | |
US9912873B2 (en) | Image pickup apparatus equipped with display section and method of controlling the same | |
JP6795961B2 (ja) | 画像処理装置、画像処理装置の制御方法、及び、プログラム | |
JP2018006828A (ja) | 撮像装置、その制御方法とプログラム | |
JP2013192121A (ja) | 撮像装置及び撮像方法 | |
JP2006253970A (ja) | 撮像装置、シェーディング補正データ作成方法およびプログラム | |
JP7086155B2 (ja) | 画像処理装置、画像処理装置の制御方法、及び、プログラム | |
JP2008124793A (ja) | 撮像装置、撮像方法 | |
JP2008053810A (ja) | 撮像装置、および画像処理プログラム | |
JP5091734B2 (ja) | 撮像装置および撮像方法 | |
JP2004007303A (ja) | 撮像装置 | |
JP6624895B2 (ja) | 画像処理装置、撮像装置、制御方法及びプログラム | |
JP2014206592A (ja) | 撮像装置、その制御方法及びプログラム | |
JP2014171203A (ja) | 撮像装置及び画像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191211 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200804 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200811 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201006 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201016 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201113 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6795961 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |