JP2009077274A - 画像処理装置、画像処理方法、及び撮像装置 - Google Patents
画像処理装置、画像処理方法、及び撮像装置 Download PDFInfo
- Publication number
- JP2009077274A JP2009077274A JP2007245720A JP2007245720A JP2009077274A JP 2009077274 A JP2009077274 A JP 2009077274A JP 2007245720 A JP2007245720 A JP 2007245720A JP 2007245720 A JP2007245720 A JP 2007245720A JP 2009077274 A JP2009077274 A JP 2009077274A
- Authority
- JP
- Japan
- Prior art keywords
- image
- illumination component
- unit
- low
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims description 25
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000005286 illumination Methods 0.000 claims abstract description 102
- 238000009499 grossing Methods 0.000 claims abstract description 81
- 238000000605 extraction Methods 0.000 claims description 45
- 238000000034 method Methods 0.000 claims description 32
- 230000006835 compression Effects 0.000 claims description 23
- 238000007906 compression Methods 0.000 claims description 23
- 230000000295 complement effect Effects 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 11
- 230000035945 sensitivity Effects 0.000 claims description 7
- 230000003595 spectral effect Effects 0.000 claims description 7
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 238000003786 synthesis reaction Methods 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 239000000284 extract Substances 0.000 abstract description 12
- 238000005070 sampling Methods 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 16
- 230000000875 corresponding effect Effects 0.000 description 8
- 239000003086 colorant Substances 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 239000000203 mixture Substances 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000002596 correlated effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
- H04N25/136—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements using complementary colours
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】照明成分抽出部61は、ローパスフィルタを用いたフィルタ処理を実行した後、ダウンサンプリングを実行する平滑処理を複数回実行して入力画像Vから解像度の異なる複数の平滑画像を生成し、低解像度側の平滑画像のエッジ部分を上層の高解像度側の平滑画像で置き換えながらアップサンプリングする逆平滑処理を複数回実行することでカラー画像である入力画像Vから照明成分Lを抽出する。
【選択図】図2
Description
以下、本発明の実施の形態1による撮像装置について説明する。図1は、本発明の実施の形態1による撮像装置のブロック図を示している。図1に示すように撮像装置1は、デジタルカメラから構成され、レンズ部2、撮像センサ3、アンプ4、A/D変換部5、画像処理部6(画像処理装置の一例)、画像メモリ7、制御部8、モニタ部9及び操作部10を備えている。
からなり、撮像装置1全体の動作制御を司る。
次に、本発明の実施の形態2による撮像装置ついて説明する。実施の形態2による撮像装置は、平滑処理のダウンサンプリングの比率を2n:1にしたことを特徴とする。なお、本実施の形態において、実施の形態1と同一のものは同一の符号を付して説明を省略する。また、撮像装置の全体構成、画像処理部6の構成、及び照明成分抽出部61の構成は、実施の形態1と同一であるため、図1,図2,図5を用いて説明する。
次に、本発明の実施の形態3による撮像装置ついて説明する。実施の形態3による撮像装置は、ローパスフィルタの係数が実施の形態1,2のものと相違する点を特徴としている。
KR/K=KR´/K´=KR´´/K´´
KG/K=KG´/K´=KG´´/K´´
KB/K=KB´/K´=KB´´/K´´
これにより、各色のフィルタ係数の比が一定になり、精度良く低周波画像を抽出することができる。また、更に、K=K´=K´´としてもよい。これにより、各ローパスフィルタ間で同色のフィルタ係数の和が等しい値になるため、ダウンサンプリングの比率としてどのような比率を採用しても、精度良く低周波画像を抽出することができる。
KYe/K=KYe´/K´=KYe´´/K´´=KYe´´´/K´´´
KMg/K=KMg´/K´=KMg´´/K´´=KMg´´´/K´´´
KG/K=KG´/K´=KG´´/K´´=KG´´´/K´´´
但し、KCy,KYe,KMg,KGは、CyのローパスフィルタにおけるCy,Ye,Mg,KGの画素に対応するフィルタ係数の和を示し、KCy´,KYe´,KMg´,KG´は、YeのローパスフィルタにおけるCy,Ye,Mg,KGの画素に対応するフィルタ係数の和を示し、KCy´´,KYe´´,KMg´´,KG´´は、MgのローパスフィルタにおけるCy,Ye,Mg,KGの画素に対応するフィルタ係数の和を示し、KCy´´´,KYe´´´,KMg´´´,KG´´´は、KGのローパスフィルタにおけるCy,Ye,Mg,KGの画素に対応するフィルタ係数の和を示す。また、K=K´=K´´=K´´´としてもよい。
6 画像処理部
61 照明成分抽出部
62 圧縮部
63 反射率成分抽出部
64 合成部
21,22,23 平滑部
31,32,33 逆平滑部
210 LPF部
220 ダウン部
310 アップ部
320 エッジ処理部
330 合成部
D1´〜D3´ 逆平滑画像
D1〜D3 平滑画像
Claims (8)
- 入力画像から照明成分を抽出する照明成分抽出手段と、
前記照明成分抽出手段により抽出された照明成分と前記入力画像とを基に、反射率成分を抽出する反射率成分抽出手段と、
前記照明成分抽出手段により抽出された照明成分のダイナミックレンジを圧縮する圧縮手段と、
前記圧縮手段によりダイナミックレンジが圧縮された照明成分と、前記反射率成分抽出手段により抽出された反射率成分とを合成する合成手段とを備え、
前記照明成分抽出手段は、所定サイズのローパスフィルタを用いたフィルタ処理を実行した後、ダウンサンプリングを実行する平滑処理を複数回実行して前記入力画像から解像度の異なる複数の平滑画像を生成し、低解像度側の平滑画像のエッジ部分を上層の高解像度側の平滑画像で置き換えながらアップサンプリングする逆平滑処理を複数回実行することで前記入力画像から照明成分を抽出し、
前記入力画像は、各画素で異なる分光感度を有するカラー画像であることを特徴とする画像処理装置。 - 前記カラー画像は、RGBベイヤー配列の画像であることを特徴とする請求項1記載の画像処理装置。
- 前記カラー画像は、補色フィルタ配列の画像であることを特徴とする請求項1記載の画像処理装置。
- 前記照明成分抽出部は、2n(nは正の整数):1の比率でダウンサンプリングすることを特徴とする請求項2又は3記載の画像処理装置。
- 前記ローパスフィルタは、各色のフィルタ係数の和が一定となるように各フィルタ係数が定められていることを特徴とする請求項2又は3記載の画像処理装置。
- 前記照明成分抽出手段は、注目画素の色に対応するローパスフィルタを用いたフィルタ処理を実行することを特徴とする請求項5記載の画像処理装置。
- 入力画像から照明成分を抽出する照明成分抽出ステップと、
前記照明成分抽出ステップにより抽出された照明成分と前記入力画像とを基に、反射率成分を抽出する反射率成分抽出ステップと、
前記照明成分抽出ステップにより抽出された照明成分のダイナミックレンジを圧縮する圧縮ステップと、
前記圧縮ステップによりダイナミックレンジが圧縮された照明成分と、前記反射率成分抽出ステップにより抽出された反射率成分とを合成する合成ステップとを備え、
前記照明成分抽出ステップは、所定サイズのローパスフィルタを用いたフィルタ処理を実行した後、ダウンサンプリングを実行する平滑処理を複数回実行して前記入力画像から解像度の異なる複数の平滑画像を生成し、低解像度側の平滑画像のエッジ部分を上層の高解像度側の平滑画像で置き換えながらアップサンプリングする逆平滑処理を複数回実行することで前記入力画像から照明成分を抽出し、
前記入力画像は、各画素で異なる分光感度を有するカラー画像であることを特徴とする画像処理方法。 - 請求項1〜6のいずれかに記載の画像処理装置を備えることを特徴とする撮像装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007245720A JP5109551B2 (ja) | 2007-09-21 | 2007-09-21 | 画像処理装置、画像処理方法、及び撮像装置 |
US12/211,308 US8086032B2 (en) | 2007-09-21 | 2008-09-16 | Image processing device, image processing method, and image pickup apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007245720A JP5109551B2 (ja) | 2007-09-21 | 2007-09-21 | 画像処理装置、画像処理方法、及び撮像装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012224874A Division JP2013017240A (ja) | 2012-10-10 | 2012-10-10 | 画像処理装置、画像処理方法、及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009077274A true JP2009077274A (ja) | 2009-04-09 |
JP5109551B2 JP5109551B2 (ja) | 2012-12-26 |
Family
ID=40471687
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007245720A Expired - Fee Related JP5109551B2 (ja) | 2007-09-21 | 2007-09-21 | 画像処理装置、画像処理方法、及び撮像装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8086032B2 (ja) |
JP (1) | JP5109551B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011142105A1 (en) * | 2010-05-11 | 2011-11-17 | Canon Kabushiki Kaisha | Image processing apparatus and control method for image processing apparatus |
KR20140053503A (ko) * | 2012-10-26 | 2014-05-08 | 에스케이텔레콤 주식회사 | 영상보정의 가속화를 위한 영상보정 장치 및 그 방법 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4772721B2 (ja) * | 2007-03-26 | 2011-09-14 | 株式会社東芝 | 画像処理装置及びその方法 |
KR101606797B1 (ko) * | 2009-10-28 | 2016-03-29 | 삼성디스플레이 주식회사 | 입체 영상 표시 장치 및 영상 표시 방법 |
US8766999B2 (en) * | 2010-05-20 | 2014-07-01 | Aptina Imaging Corporation | Systems and methods for local tone mapping of high dynamic range images |
JP5247910B1 (ja) * | 2012-03-30 | 2013-07-24 | Eizo株式会社 | 画像表示装置またはその方法 |
US9280811B2 (en) | 2014-03-06 | 2016-03-08 | Samsung Electronics Co., Ltd. | Multi-scale large radius edge-preserving low-pass filtering |
CN104658488B (zh) * | 2013-11-18 | 2017-09-29 | 华为技术有限公司 | 下采样方法及装置 |
JP6690125B2 (ja) * | 2015-03-19 | 2020-04-28 | 富士ゼロックス株式会社 | 画像処理装置及びプログラム |
CN107534740B (zh) * | 2015-03-31 | 2020-03-06 | 株式会社尼康 | 图像处理装置、摄像装置及计算机可读存储介质 |
JP2017049783A (ja) * | 2015-09-01 | 2017-03-09 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003008898A (ja) * | 2001-06-20 | 2003-01-10 | Sony Corp | 画像処理方法および装置 |
JP2003333610A (ja) * | 2002-05-15 | 2003-11-21 | Sony Corp | 画像処理装置、および画像処理方法、記録媒体、並びにプログラム |
JP2003346143A (ja) * | 2002-05-29 | 2003-12-05 | Fuji Photo Film Co Ltd | 画像処理方法及び画像処理プログラム |
JP2005175978A (ja) * | 2003-12-12 | 2005-06-30 | Canon Inc | プリンタに直接接続可能なデジタルカメラの画像処理システム |
JP2007134777A (ja) * | 2005-11-08 | 2007-05-31 | Konica Minolta Holdings Inc | 撮像装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6771838B1 (en) * | 2000-10-06 | 2004-08-03 | Hewlett-Packard Development Company, L.P. | System and method for enhancing document images |
US6941028B2 (en) * | 2001-04-30 | 2005-09-06 | Hewlett-Packard Development Company, L.P. | System and method for image enhancement, dynamic range compensation and illumination correction |
US20050073702A1 (en) * | 2003-10-02 | 2005-04-07 | Doron Shaked | Robust recursive envelope operators for fast retinex-type processing |
-
2007
- 2007-09-21 JP JP2007245720A patent/JP5109551B2/ja not_active Expired - Fee Related
-
2008
- 2008-09-16 US US12/211,308 patent/US8086032B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003008898A (ja) * | 2001-06-20 | 2003-01-10 | Sony Corp | 画像処理方法および装置 |
JP2003333610A (ja) * | 2002-05-15 | 2003-11-21 | Sony Corp | 画像処理装置、および画像処理方法、記録媒体、並びにプログラム |
JP2003346143A (ja) * | 2002-05-29 | 2003-12-05 | Fuji Photo Film Co Ltd | 画像処理方法及び画像処理プログラム |
JP2005175978A (ja) * | 2003-12-12 | 2005-06-30 | Canon Inc | プリンタに直接接続可能なデジタルカメラの画像処理システム |
JP2007134777A (ja) * | 2005-11-08 | 2007-05-31 | Konica Minolta Holdings Inc | 撮像装置 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011142105A1 (en) * | 2010-05-11 | 2011-11-17 | Canon Kabushiki Kaisha | Image processing apparatus and control method for image processing apparatus |
JP2011239231A (ja) * | 2010-05-11 | 2011-11-24 | Canon Inc | 画像処理装置、および、画像処理装置の制御方法 |
RU2523003C1 (ru) * | 2010-05-11 | 2014-07-20 | Кэнон Кабусики Кайся | Устройство обработки изображения и способ управления для устройства обработки изображения |
US9113024B2 (en) | 2010-05-11 | 2015-08-18 | Canon Kabushiki Kaisha | Apparatus and method for image processing using color image data and low frequency image data |
KR20140053503A (ko) * | 2012-10-26 | 2014-05-08 | 에스케이텔레콤 주식회사 | 영상보정의 가속화를 위한 영상보정 장치 및 그 방법 |
KR101958910B1 (ko) * | 2012-10-26 | 2019-03-15 | 에스케이 텔레콤주식회사 | 영상보정의 가속화를 위한 영상보정 장치 및 그 방법 |
Also Published As
Publication number | Publication date |
---|---|
US20090080771A1 (en) | 2009-03-26 |
JP5109551B2 (ja) | 2012-12-26 |
US8086032B2 (en) | 2011-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5109551B2 (ja) | 画像処理装置、画像処理方法、及び撮像装置 | |
JP5108172B2 (ja) | 画像データサイズ変換処理装置、電子スチルカメラ、および画像データサイズ変換処理用記録媒体 | |
JP4377428B2 (ja) | 固体撮像素子及びそれを用いた撮像装置 | |
JP5036482B2 (ja) | 画像処理装置及び画像処理方法、画像処理プログラム | |
JP5036421B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび撮像装置 | |
CN103563361B (zh) | 图像处理设备和方法以及成像设备 | |
KR101356286B1 (ko) | 화상 처리 장치, 화상 처리 방법, 프로그램 및 촬상 장치 | |
KR20090087811A (ko) | 촬상 장치, 화상 처리 장치, 화상 처리 방법, 화상 처리방법의 프로그램 및 화상 처리 방법의 프로그램을 기록한기록 매체 | |
WO2006137419A1 (ja) | 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム | |
JP5709131B2 (ja) | 画像処理システム | |
JP5135953B2 (ja) | 画像処理装置、画像処理方法、及び撮像装置 | |
WO2007145087A1 (ja) | 撮像装置及び信号処理方法 | |
JP5159715B2 (ja) | 画像処理装置 | |
JP6014349B2 (ja) | 撮像装置、制御方法、及びプログラム | |
JP5268321B2 (ja) | 画像処理装置及び画像処理方法、画像処理プログラム | |
JP4158280B2 (ja) | 画像処理装置およびその方法 | |
WO2014091706A1 (ja) | 撮像装置 | |
JP5036524B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび撮像装置 | |
JP5363966B2 (ja) | 撮像装置 | |
JP2007180893A (ja) | 画像処理装置および撮像装置 | |
JP4329485B2 (ja) | 画像信号処理装置及び画像信号処理方法 | |
JP7022544B2 (ja) | 画像処理装置及び方法、及び撮像装置 | |
JP2013017240A (ja) | 画像処理装置、画像処理方法、及び撮像装置 | |
US7250967B2 (en) | Apparatus for modifying reproduction frequency band of video signal | |
JP2000316169A (ja) | カラー撮像素子及びカラー撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100324 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110712 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110823 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111017 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120321 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120518 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120911 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120924 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151019 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |