JPWO2014050189A1 - 撮像装置及び画像処理方法 - Google Patents
撮像装置及び画像処理方法 Download PDFInfo
- Publication number
- JPWO2014050189A1 JPWO2014050189A1 JP2014538218A JP2014538218A JPWO2014050189A1 JP WO2014050189 A1 JPWO2014050189 A1 JP WO2014050189A1 JP 2014538218 A JP2014538218 A JP 2014538218A JP 2014538218 A JP2014538218 A JP 2014538218A JP WO2014050189 A1 JPWO2014050189 A1 JP WO2014050189A1
- Authority
- JP
- Japan
- Prior art keywords
- subject distance
- unit
- lens
- restoration
- restoration filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims description 81
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000012545 processing Methods 0.000 claims abstract description 60
- 238000000034 method Methods 0.000 claims description 37
- 230000008569 process Effects 0.000 claims description 28
- 238000001514 detection method Methods 0.000 claims description 25
- 230000000875 corresponding effect Effects 0.000 description 75
- 230000006870 function Effects 0.000 description 31
- 238000004891 communication Methods 0.000 description 27
- 238000010586 diagram Methods 0.000 description 22
- 230000033001 locomotion Effects 0.000 description 16
- 230000005540 biological transmission Effects 0.000 description 10
- 238000011156 evaluation Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000012937 correction Methods 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 3
- 238000006731 degradation reaction Methods 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000004075 alteration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 229920013655 poly(bisphenol-A sulfone) Polymers 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
- G02B13/0015—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras characterised by the lens design
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/09—Beam shaping, e.g. changing the cross-sectional area, not otherwise provided for
- G02B27/0905—Dividing and/or superposing multiple light beams
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
- G02B7/38—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals measured at different points on the optical axis, e.g. focussing on two or more planes and comparing image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/663—Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Abstract
Description
次に、コントラストAFについて、図4及び図5を参照して説明する。
図6は、フォーカスレンズ制御部320の機能ブロック図が示されている。フォーカスレンズ制御部320には、メインCPU214からレンズCPU340を介してレンズ移動指令が送られる。
図7は、点像復元処理を行うメインCPU214及びデジタル信号処理部206の要部ブロック図を示す。メインCPU214は、復元処理用の機能としてレンズ位置入力部214−2、第1の被写体距離推定部214−4、推定ばらつき取得部214−6、及び第2の被写体距離推定部214−8を備えている。
G(X,Y)=H(X,Y)*F(X,Y)
ただし、*はコンボリューションを示す。
G(X,Y)*R(X,Y)=F(X,Y)
このR(X,Y)を復元フィルタという。復元フィルタは、原画像と復元画像との2乗平均誤差を最小にする最小2乗フィルタ(ウィナーフィルタ)、制限付き逆畳み込みフィルタ、再帰フィルタ、準同形フィルタ等を利用することができる。
図8から図10は、復元フィルタ選択部206−4及び復元フィルタ記憶部206−6により行われる、本発明の第1の実施形態における復元フィルタの記憶及び選択の仕方を説明する図である。
又はINF以外の被写体距離が推定された場合、例えば、0.33mと0.5mとの間の被写体距離が推定され場合には、最大の推定ばらつきを考慮した第2の被写体距離は、0.5mと1mとの間の被写体距離になる。したがって、この第2の被写体距離に最も近い無限遠側の復元フィルタは、1mの被写体距離に対応して生成された復元フィルタである。
図11から図13は、本発明の第2の実施形態における復元フィルタの記憶及び選択の仕方を説明する図である。
Claims (9)
- 撮影レンズにより結像された被写体像を撮像し、該被写体像を示す画像を取得する撮像部と、
前記撮像部による撮像時の、焦点検出部より推定した被写体距離を求める第1の被写体距離推定部と、
少なくとも被写体距離に対応した前記撮影レンズの点像分布関数に基づいて作成した複数の復元フィルタから選択された1以上の復元フィルタを記憶する復元フィルタ記憶部と、
前記第1の被写体距離推定部段により推定した被写体距離に基づいて前記復元フィルタ記憶部に記憶された復元フィルタから前記被写体距離に対応する復元フィルタを選択する復元フィルタ選択部と、
前記復元フィルタ選択部により選択した復元フィルタを使用して前記撮像部により取得した画像の復元処理を行う復元処理部と、を備え、
前記復元フィルタ記憶部は、前記第1の被写体距離推定部段により推定される最も至近側の被写体距離に前記最も至近側の被写体距離に対する推定ばらつきの範囲のうちの無限遠側の最大の推定ばらつきだけ加算した被写体距離と、無限遠との範囲内に相当する復元フィルタを記憶する、
撮像装置。 - 前記第1の被写体距離推定部は、前記撮影レンズのフォーカスレンズのレンズ位置に基づいて被写体距離を推定する請求項1に記載の撮像装置。
- 前記撮影レンズは交換レンズであり、
前記第1の被写体距離推定部により推定した被写体距離に対する推定ばらつきの範囲のうちの無限遠側の最大の推定ばらつきは、交換レンズの個体差による推定ばらつき、及び交換レンズの温度特性による推定ばらつきのうちの少なくとも一方である請求項2に記載の撮像装置。 - 前記第1の被写体距離推定部により推定した被写体距離に対する推定ばらつきの範囲のうちの無限遠側の最大の推定ばらつきを取得する推定ばらつき取得部と、
前記第1の被写体距離推定部により推定した被写体距離に前記推定ばらつき取得部により取得した無限遠側の最大の推定ばらつきを加算した被写体距離を算出する第2の被写体距離推定部と、備え、
前記復元フィルタ選択部は、前記復元フィルタ記憶部に記憶された1以上の復元フィルタのうちの前記第2の被写体距離推定部により算出した被写体距離に最も近い無限遠側の復元フィルタを選択する請求項1から3のいずれか1項に記載の撮像装置。 - 前記撮影レンズは、前記復元フィルタ記憶部が内蔵された交換レンズである請求項1から4のいずれか1項に記載の撮像装置。
- 前記撮影レンズは交換レンズであり、
前記推定ばらつき取得部は、交換レンズから該交換レンズの個体差による推定ばらつき、及び交換レンズの温度特性による推定ばらつきのうちの少なくとも一方を取得する請求項4に記載の撮像装置。 - 前記撮影レンズは交換レンズであり、
前記推定ばらつき取得部は、
装着される交換レンズから該交換レンズのレンズ情報を取得するレンズ情報取得部と、複数の交換レンズ毎の推定ばらつきを記憶する推定ばらつき記憶部とを有し、前記レンズ情報取得部により取得したレンズ情報に対応する推定ばらつきを、前記推定ばらつき記憶部から取得する請求項4に記載の撮像装置。 - 前記復元処理部により復元処理して得られた画像を記録する記録部を備えた請求項1から7のいずれか1項に記載の撮像装置。
- 撮影レンズを有する撮像部から被写体像を示す画像を取得する画像取得工程と、
前記撮像部による撮像時の焦点検出部より推定した被写体距離を求める第1の被写体距離推定工程と、
少なくとも被写体距離に対応した前記撮影レンズの点像分布関数に基づいて作成した複数の復元フィルタから選択された1以上の復元フィルタを記憶する復元フィルタ記憶部を準備する工程と、
前記第1の被写体距離推定工程により推定した被写体距離に基づいて前記復元フィルタ記憶部に記憶された復元フィルタから前記被写体距離に対応する復元フィルタを選択する復元フィルタ選択工程と、
前記復元フィルタ選択工程により選択した復元フィルタを使用して前記撮像部により取得した画像の復元処理を行う復元処理工程と、を含み、
前記復元フィルタ記憶部は、前記第1の被写体距離推定工程により推定される最も至近側の被写体距離に前記最も至近側の被写体距離に対する推定ばらつきの範囲のうちの無限遠側の最大の推定ばらつきだけ加算した被写体距離と、無限遠との範囲内に相当する復元フィルタを記憶するものである画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014538218A JP5746795B2 (ja) | 2012-09-27 | 2013-04-23 | 撮像装置及び画像処理方法 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012213831 | 2012-09-27 | ||
JP2012213831 | 2012-09-27 | ||
PCT/JP2013/061842 WO2014050189A1 (ja) | 2012-09-27 | 2013-04-23 | 撮像装置及び画像処理方法 |
JP2014538218A JP5746795B2 (ja) | 2012-09-27 | 2013-04-23 | 撮像装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5746795B2 JP5746795B2 (ja) | 2015-07-08 |
JPWO2014050189A1 true JPWO2014050189A1 (ja) | 2016-08-22 |
Family
ID=50387609
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014538218A Active JP5746795B2 (ja) | 2012-09-27 | 2013-04-23 | 撮像装置及び画像処理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9363430B2 (ja) |
JP (1) | JP5746795B2 (ja) |
CN (1) | CN104685863B (ja) |
DE (1) | DE112013004760B4 (ja) |
WO (1) | WO2014050189A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104662890B (zh) * | 2012-09-27 | 2017-11-17 | 富士胶片株式会社 | 摄像装置及图像处理方法 |
CN105453539B (zh) * | 2013-08-02 | 2019-02-22 | 富士胶片株式会社 | 图像处理装置、摄像装置及图像处理方法 |
JP6594101B2 (ja) * | 2015-08-19 | 2019-10-23 | キヤノン株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001197354A (ja) * | 2000-01-13 | 2001-07-19 | Minolta Co Ltd | デジタル撮像装置および画像復元方法 |
US20010008418A1 (en) | 2000-01-13 | 2001-07-19 | Minolta Co., Ltd. | Image processing apparatus and method |
JP4389371B2 (ja) * | 2000-09-28 | 2009-12-24 | 株式会社ニコン | 画像修復装置および画像修復方法 |
JP3468231B2 (ja) * | 2001-07-02 | 2003-11-17 | ミノルタ株式会社 | 画像処理装置、画質制御方法、プログラム及び記録媒体 |
US8139130B2 (en) * | 2005-07-28 | 2012-03-20 | Omnivision Technologies, Inc. | Image sensor with improved light sensitivity |
KR100829581B1 (ko) * | 2006-11-28 | 2008-05-14 | 삼성전자주식회사 | 영상 처리 방법, 기록매체 및 장치 |
JP5111306B2 (ja) * | 2008-08-29 | 2013-01-09 | キヤノン株式会社 | 像ブレ補正機能を有する光学機器及びその制御方法 |
WO2010047336A1 (ja) * | 2008-10-20 | 2010-04-29 | 株式会社キャメロット | 画像撮影システム及び画像撮影方法 |
US8218823B2 (en) * | 2009-08-11 | 2012-07-10 | Eastman Kodak Company | Determining main objects using range information |
JP5387377B2 (ja) * | 2009-12-14 | 2014-01-15 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
WO2011096237A1 (ja) * | 2010-02-08 | 2011-08-11 | パナソニック株式会社 | 撮像装置 |
JP5501069B2 (ja) | 2010-03-31 | 2014-05-21 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP5454348B2 (ja) * | 2010-05-12 | 2014-03-26 | ソニー株式会社 | 撮像装置および画像処理装置 |
JP5654484B2 (ja) * | 2010-06-04 | 2015-01-14 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 画像処理装置、画像処理方法、集積回路、プログラム |
JP2011259314A (ja) * | 2010-06-10 | 2011-12-22 | Fujifilm Corp | 撮像装置、画像処理装置及びプログラム |
CN102625043B (zh) * | 2011-01-25 | 2014-12-10 | 佳能株式会社 | 图像处理设备、成像设备和图像处理方法 |
US8928783B2 (en) * | 2011-09-26 | 2015-01-06 | Ricoh Company, Ltd. | Imaging apparatus including switchable edge extraction |
WO2013145554A1 (ja) * | 2012-03-29 | 2013-10-03 | パナソニック株式会社 | 画像処理装置及び画像処理方法 |
JP6039301B2 (ja) * | 2012-08-09 | 2016-12-07 | キヤノン株式会社 | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 |
US8928772B2 (en) * | 2012-09-21 | 2015-01-06 | Eastman Kodak Company | Controlling the sharpness of a digital image |
US8724919B2 (en) * | 2012-09-21 | 2014-05-13 | Eastman Kodak Company | Adjusting the sharpness of a digital image |
CN104662890B (zh) * | 2012-09-27 | 2017-11-17 | 富士胶片株式会社 | 摄像装置及图像处理方法 |
US20150381965A1 (en) * | 2014-06-27 | 2015-12-31 | Qualcomm Incorporated | Systems and methods for depth map extraction using a hybrid algorithm |
-
2013
- 2013-04-23 DE DE112013004760.8T patent/DE112013004760B4/de not_active Expired - Fee Related
- 2013-04-23 WO PCT/JP2013/061842 patent/WO2014050189A1/ja active Application Filing
- 2013-04-23 JP JP2014538218A patent/JP5746795B2/ja active Active
- 2013-04-23 CN CN201380049879.2A patent/CN104685863B/zh active Active
-
2015
- 2015-03-18 US US14/661,361 patent/US9363430B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
DE112013004760T5 (de) | 2015-08-13 |
WO2014050189A1 (ja) | 2014-04-03 |
US20150195447A1 (en) | 2015-07-09 |
CN104685863B (zh) | 2017-11-03 |
CN104685863A (zh) | 2015-06-03 |
US9363430B2 (en) | 2016-06-07 |
DE112013004760B4 (de) | 2017-10-19 |
JP5746795B2 (ja) | 2015-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6033454B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP6086975B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP5948492B2 (ja) | 撮像装置及び合焦制御方法 | |
JP5866478B2 (ja) | 撮像装置、信号処理方法、信号処理プログラム | |
JP5901801B2 (ja) | 画像処理装置、撮像装置、プログラム及び画像処理方法 | |
JP5901782B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP6000446B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP5746794B2 (ja) | 撮像装置及び画像処理方法 | |
JPWO2015015935A1 (ja) | 撮像装置及び画像処理方法 | |
JP5990665B2 (ja) | 撮像装置及び合焦制御方法 | |
JP5746795B2 (ja) | 撮像装置及び画像処理方法 | |
JP6171105B2 (ja) | 撮像装置及び合焦制御方法 | |
JP6379307B2 (ja) | 撮像装置、合焦制御方法、及び合焦制御プログラム | |
JP5901780B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP5972485B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
JP5934844B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
WO2013145887A1 (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20150416 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150421 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150508 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5746795 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |