JP2012175169A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2012175169A JP2012175169A JP2011032286A JP2011032286A JP2012175169A JP 2012175169 A JP2012175169 A JP 2012175169A JP 2011032286 A JP2011032286 A JP 2011032286A JP 2011032286 A JP2011032286 A JP 2011032286A JP 2012175169 A JP2012175169 A JP 2012175169A
- Authority
- JP
- Japan
- Prior art keywords
- change amount
- pixel
- component
- sensitivity level
- level value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008859 change Effects 0.000 claims abstract description 240
- 230000035945 sensitivity Effects 0.000 claims abstract description 116
- 238000004364 calculation method Methods 0.000 claims abstract description 87
- 230000002093 peripheral effect Effects 0.000 claims abstract description 22
- 238000000034 method Methods 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 20
- 238000003384 imaging method Methods 0.000 claims description 15
- 230000006866 deterioration Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 description 20
- 230000014509 gene expression Effects 0.000 description 12
- 238000006243 chemical reaction Methods 0.000 description 8
- 238000000605 extraction Methods 0.000 description 6
- 230000015556 catabolic process Effects 0.000 description 5
- 238000006731 degradation reaction Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 101000797092 Mesorhizobium japonicum (strain LMG 29417 / CECT 9101 / MAFF 303099) Probable acetoacetate decarboxylase 3 Proteins 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 238000012886 linear function Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
- H04N2209/046—Colour interpolation to calculate the missing colour values
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
【解決手段】実施形態によれば、画素補間処理部13は、変化量算出手段31と、変化量比較手段32と、演算手段33とを有する。変化量算出手段31は、注目画素と周辺画素とにおける既得色成分の感度レベル値の変化量を、注目画素を中心とする方向ごとについて算出する。変化量比較手段32は、変化量算出手段31で算出された変化量を比較する。演算手段33は、画像信号の高域成分と、低域成分との加算を経て、注目画素の不足色成分の感度レベル値を生成する。演算手段33は、変化量比較手段32での比較により変化量が少ないと判断された方向における高域成分を、低域成分に加算する。
【選択図】図3
Description
図1は、第1の実施形態にかかる画像処理装置を備えるカメラモジュールの構成を示すブロック図である。図2は、図1に示すカメラモジュールを備える電子機器であるデジタルカメラの構成を示すブロック図である。
Mh=|2×R5−R4−R6|+|G6−G7| ・・・(1)
Mv=|2×R5−R2−R8|+|G4−G9| ・・・(2)
Mdl=|2×R5−R1−R9|+|B1−B4| ・・・(3)
Mdr=|2×R5−R3−R7|+|B2−B3| ・・・(4)
Ga=(G4+G6+G7+G9)/4 ・・・(5)
Gb=(G6+G7)/2+(2×R5−R4−R6)/2×AA ・・・(6)
Gc=(G4+G9)/2+(2×R5−R2−R8)/2×AA ・・・(7)
Ba=(B1+B2+B3+B4)/4 ・・・(8)
Bb=(B1+B4)/2+(2×R5−R1−R9)/2×AA ・・・(9)
Bc=(B2+B3)/2+(2×R5−R3−R7)/2×AA ・・・(10)
Ba=(B2+B5)/2 ・・・(11)
Ra=(R3+R4)/2 ・・・(12)
Bb=(B2+B5)/2+(2×G7−G6−G8)/2×AA ・・・(13)
Rb=(R3+R4)/2+(2×G7−G6−G8)/2×AA ・・・(14)
Bc=(B2+B5)/2+(2×G7−G2−G12)/2×AA ・・・(15)
Rc=(R3+R4)/2+(2×G7−G2−G12)/2×AA ・・・(16)
図7は、第2の実施形態にかかる画像処理装置が備える画素補間処理部の概略構成を示すブロック図である。第1の実施形態と同一の部分には同一の符号を付し、重複する説明を省略する。画素補間処理部50は、変化量算出手段31、変化量比較手段32、演算手段51及びコアリング処理手段52を備える。コアリング処理手段52は、変化量算出手段31にて算出された変化量Mh、Mv、Mdl、Mdrについて、コアリング処理を実施する。コアリング処理では、信号の絶対値が閾値よりも低い場合に、閾値以下の信号を抑制することで、ノイズ成分を除去する。
Gd=(G4+G6+G7+G9)/4+(4×R5−R2−R4−R6−R8)/4×AA ・・・(17)
Bd=(B1+B2+B3+B4)/4+(4×R5−R1−R3−R7−R9)/4×AA ・・・(18)
Bd=(B2+B5)/2+(4×G7−G2−G6−G8−G12)/4×AA ・・・(19)
Rd=(R3+R4)/2+(4×G7−G2−G6−G8−G12)/4×AA ・・・(20)
図9は、第3の実施形態にかかる画像処理装置を備えるカメラモジュールの構成を示すブロック図である。第1及び第2の実施形態と同一の部分には同一の符号を付し、重複する説明を省略する。カメラモジュール73は、撮像レンズ1、イメージセンサ2、ADC3及び画像処理装置5を備える。画像処理装置5に設けられているAE/AWB演算回路21は、AE調整係数の算出結果が反映された輝度情報61を生成し、画素補間処理部60へ出力する。
Claims (5)
- 撮像により取得された画像信号について、画素ごとの既得色成分の感度レベル値の補間処理を実施し、前記画素ごとの不足色成分の感度レベル値を生成する画素補間処理部を有し、
前記画素補間処理部は、
不足色成分の感度レベル値を生成する対象とする注目画素と、前記注目画素の周辺に位置する周辺画素とにおける既得色成分の感度レベル値の変化量を、前記注目画素を中心とする方向ごとについて算出する変化量算出手段と、
前記注目画素の不足色成分に応じて予め設定された二方向について、前記変化量算出手段で算出された前記変化量を比較する変化量比較手段と、
前記画像信号の第1の周波域成分と、前記第1の周波域成分より高い周波数帯域の第2の周波域成分との加算を経て、前記注目画素の不足色成分の感度レベル値を生成する演算手段と、を有し、
前記演算手段は、前記二方向のうち、前記変化量比較手段での比較により前記変化量が少ないと判断された方向における前記第2の周波域成分を、前記第1の周波域成分に加算することを特徴とする画像処理装置。 - 前記二方向についての前記変化量の差分が、予め設定された差分閾値より小さい場合、前記演算手段は、前記周辺画素のうち前記注目画素の不足色成分と同じ色成分を既得色成分とする同色画素の感度レベル値の線形補間を実施することを特徴とする請求項1に記載の画像処理装置。
- 前記演算手段は、前記周辺画素のうち前記注目画素の不足色成分と同じ色成分を既得色成分とする同色画素の感度レベル値の線形補間により、前記第1の周波域成分を算出することを特徴とする請求項1又は2に記載の画像処理装置。
- 前記画素補間処理部は、前記変化量算出手段にて算出された前記変化量について、コアリング処理を実施するコアリング処理手段をさらに有し、
前記変化量比較手段は、前記コアリング処理手段における前記コアリング処理を経た前記変化量を比較することを特徴とする請求項1から3のいずれか一項に記載の画像処理装置。 - 前記演算手段は、前記第1の周波域成分に対する前記第2の周波域成分の重み付けを調整するための高域加算係数を、前記第2の周波域成分に乗算し、
前記画素補間処理部は、撮像時の輝度情報に応じて前記高域加算係数を調整するパラメータ調整手段をさらに有することを特徴とする請求項1から4のいずれか一項に記載の画像処理装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011032286A JP5631769B2 (ja) | 2011-02-17 | 2011-02-17 | 画像処理装置 |
US13/295,466 US8896731B2 (en) | 2011-02-17 | 2011-11-14 | Image processing apparatus, image processing method, and camera module |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011032286A JP5631769B2 (ja) | 2011-02-17 | 2011-02-17 | 画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012175169A true JP2012175169A (ja) | 2012-09-10 |
JP5631769B2 JP5631769B2 (ja) | 2014-11-26 |
Family
ID=46652419
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011032286A Expired - Fee Related JP5631769B2 (ja) | 2011-02-17 | 2011-02-17 | 画像処理装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8896731B2 (ja) |
JP (1) | JP5631769B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015216521A (ja) * | 2014-05-12 | 2015-12-03 | 日本放送協会 | 色情報補完装置およびそのプログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102014008686B4 (de) * | 2014-06-13 | 2017-04-06 | Basler Aktiengesellschaft | Verfahren und Vorrichtung zur Farbinterpolation |
CN107105987B (zh) * | 2015-01-08 | 2019-11-15 | 奥林巴斯株式会社 | 图像处理装置及其工作方法、记录介质和内窥镜装置 |
JP6810392B2 (ja) * | 2016-11-30 | 2021-01-06 | 日本電気株式会社 | 個体識別装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03259687A (ja) * | 1990-03-09 | 1991-11-19 | Toshiba Corp | 補間信号輪郭補正回路 |
JP2008042313A (ja) * | 2006-08-02 | 2008-02-21 | Mitsubishi Electric Corp | 補間処理装置および補間処理方法 |
JP2009095005A (ja) * | 2007-09-20 | 2009-04-30 | Victor Co Of Japan Ltd | 撮像装置及び映像信号処理方法 |
JP2009253681A (ja) * | 2008-04-07 | 2009-10-29 | Hitachi Ltd | 撮像装置 |
JP2010016883A (ja) * | 2009-10-13 | 2010-01-21 | Fujifilm Corp | 画像信号処理方法 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4320807B2 (ja) * | 1997-11-28 | 2009-08-26 | ソニー株式会社 | カメラ信号処理装置及びカメラ信号処理方法 |
US7053944B1 (en) * | 1999-10-01 | 2006-05-30 | Intel Corporation | Method of using hue to interpolate color pixel signals |
JP2001197512A (ja) | 2000-01-14 | 2001-07-19 | Mitsubishi Electric Corp | 色成分生成装置およびこれを用いた多色画像撮像装置、並びに色成分生成方法 |
EP1337115B1 (en) * | 2000-09-07 | 2010-03-10 | Nikon Corporation | Image processor and colorimetric system converting method |
KR100396898B1 (ko) * | 2001-09-13 | 2003-09-02 | 삼성전자주식회사 | 이미지센서 출력데이터 처리장치 및 처리방법 |
TW563365B (en) * | 2001-09-24 | 2003-11-21 | Winbond Electronics Corp | Image compensation processing method of digital camera |
US6933971B2 (en) * | 2002-05-14 | 2005-08-23 | Kwe International, Inc. | Reconstruction of color components in digital image processing |
JP3899118B2 (ja) * | 2004-02-19 | 2007-03-28 | オリンパス株式会社 | 撮像システム、画像処理プログラム |
US7502505B2 (en) * | 2004-03-15 | 2009-03-10 | Microsoft Corporation | High-quality gradient-corrected linear interpolation for demosaicing of color images |
JP4580791B2 (ja) | 2005-03-17 | 2010-11-17 | ユニデン株式会社 | 画素補完方法 |
US7609307B2 (en) * | 2006-09-13 | 2009-10-27 | National Chiao Tung University | Heterogeneity-projection hard-decision interpolation method for color reproduction |
US7825965B2 (en) * | 2007-09-07 | 2010-11-02 | Seiko Epson Corporation | Method and apparatus for interpolating missing colors in a color filter array |
JP4940086B2 (ja) * | 2007-10-03 | 2012-05-30 | キヤノン株式会社 | 色処理装置およびその方法 |
US8270713B2 (en) * | 2007-10-16 | 2012-09-18 | Aptina Imaging Corporation | Method and apparatus providing hardware-efficient demosaicing of image data |
US8564680B1 (en) * | 2007-12-13 | 2013-10-22 | Marvell International Ltd. | Method and apparatus for noise management for color data synthesis in digital image and video capture systems |
US20090295934A1 (en) * | 2008-05-27 | 2009-12-03 | The Hong Kong University Of Science And Technology | Color demosaicking using direction similarity in color difference spaces |
JP2010028373A (ja) | 2008-07-17 | 2010-02-04 | Toshiba Design & Manufacturing Service Corp | 画像処理装置および画像信号の補間処理方法 |
JP5109911B2 (ja) | 2008-10-03 | 2012-12-26 | 株式会社Jvcケンウッド | 撮像装置および補間処理方法 |
US8340407B2 (en) * | 2009-01-14 | 2012-12-25 | Cisco Technology, Inc. | System and method for image demosaicing |
JP5523802B2 (ja) | 2009-11-25 | 2014-06-18 | 株式会社東芝 | 画像処理装置 |
KR101335127B1 (ko) * | 2009-08-10 | 2013-12-03 | 삼성전자주식회사 | 에지 적응적 보간 및 노이즈 필터링 방법, 컴퓨터로 판독 가능한 기록매체 및 휴대 단말 |
-
2011
- 2011-02-17 JP JP2011032286A patent/JP5631769B2/ja not_active Expired - Fee Related
- 2011-11-14 US US13/295,466 patent/US8896731B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03259687A (ja) * | 1990-03-09 | 1991-11-19 | Toshiba Corp | 補間信号輪郭補正回路 |
JP2008042313A (ja) * | 2006-08-02 | 2008-02-21 | Mitsubishi Electric Corp | 補間処理装置および補間処理方法 |
JP2009095005A (ja) * | 2007-09-20 | 2009-04-30 | Victor Co Of Japan Ltd | 撮像装置及び映像信号処理方法 |
JP2009253681A (ja) * | 2008-04-07 | 2009-10-29 | Hitachi Ltd | 撮像装置 |
JP2010016883A (ja) * | 2009-10-13 | 2010-01-21 | Fujifilm Corp | 画像信号処理方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015216521A (ja) * | 2014-05-12 | 2015-12-03 | 日本放送協会 | 色情報補完装置およびそのプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5631769B2 (ja) | 2014-11-26 |
US20120212643A1 (en) | 2012-08-23 |
US8896731B2 (en) | 2014-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3824237B2 (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
US9055181B2 (en) | Solid-state imaging device, image processing apparatus, and a camera module having an image synthesizer configured to synthesize color information | |
JP5701785B2 (ja) | カメラモジュール | |
US8792025B2 (en) | Image processing apparatus, image processing method, and solid-state imaging apparatus | |
JP5523802B2 (ja) | 画像処理装置 | |
US20120050586A1 (en) | Image processing apparatus, image processing method, and camera module | |
JP2013066157A (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
US8648937B2 (en) | Image processing apparatus, image processing method, and camera module | |
US8559747B2 (en) | Image processing apparatus, image processing method, and camera module | |
JP5398750B2 (ja) | カメラモジュール | |
KR20110016812A (ko) | 촬상장치 및 촬상방법 | |
JP2011151739A (ja) | 画像処理装置 | |
KR101353863B1 (ko) | 화상 처리 장치, 화상 처리 방법 및 카메라 모듈 | |
JP5631769B2 (ja) | 画像処理装置 | |
KR101650842B1 (ko) | 영상 처리 장치, 영상 처리 방법, 및 이를 실행하기 위해 프로그램을 저장한 기록 매체 | |
CN109565556B (zh) | 图像处理装置、图像处理方法和存储介质 | |
US20120154625A1 (en) | Image processing apparatus, image processing method, and program recording medium | |
US8861887B2 (en) | Image processing apparatus, image processing method, and camera module with shading correction | |
CN113096046A (zh) | 一种图像处理方法及装置 | |
JP2012065069A (ja) | 欠陥検出補正装置、及びプログラム、並びに記憶媒体 | |
US9013606B2 (en) | Image processing apparatus and control method thereof | |
JP5649430B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
KR101315299B1 (ko) | 디지털 영상 처리장치 | |
JP5775413B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2015216521A (ja) | 色情報補完装置およびそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140305 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140909 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141008 |
|
LAPS | Cancellation because of no payment of annual fees |