JP2022066385A - 画像処理装置及び画像処理方法、プログラム - Google Patents
画像処理装置及び画像処理方法、プログラム Download PDFInfo
- Publication number
- JP2022066385A JP2022066385A JP2022032807A JP2022032807A JP2022066385A JP 2022066385 A JP2022066385 A JP 2022066385A JP 2022032807 A JP2022032807 A JP 2022032807A JP 2022032807 A JP2022032807 A JP 2022032807A JP 2022066385 A JP2022066385 A JP 2022066385A
- Authority
- JP
- Japan
- Prior art keywords
- white balance
- compression
- balance correction
- image data
- mosaic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 52
- 238000003672 processing method Methods 0.000 title claims 3
- 238000012937 correction Methods 0.000 claims abstract description 99
- 238000007906 compression Methods 0.000 claims abstract description 97
- 230000006835 compression Effects 0.000 claims abstract description 94
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000006866 deterioration Effects 0.000 abstract description 6
- 238000003384 imaging method Methods 0.000 abstract description 5
- 238000011161 development Methods 0.000 description 24
- 238000000034 method Methods 0.000 description 24
- 238000013144 data compression Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 7
- 229920006395 saturated elastomer Polymers 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000004040 coloring Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 229910005813 NiMH Inorganic materials 0.000 description 1
- 241000255969 Pieris brassicae Species 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
Description
図4は、本発明の第1の実施形態であるデジタルビデオカメラ3の内部構成を示すブロック図である。デジタルビデオカメラ3は、後述するように、撮像素子から出力されたモザイク画像データを圧縮した状態または非圧縮の状態で出力可能な撮像装置である。
第1の実施形態では、モザイク画像データを圧縮せずに記録または出力する場合にはモザイク画像データに対してホワイトバランス補正を行わず、圧縮をする場合には現像側と同じホワイトバランスゲインを設定する場合について説明した。本実施形態においては、モザイク画像データを圧縮して記録または出力する場合に、モザイク画像データに対して第1の実施形態とは異なる方法でホワイトバランスゲインを設定する方法について説明する。
WBB=(Gsum/2)/Bsum …(式1)
グレーワールド仮説に基づくホワイトバランスゲインでは、R、G、Bの分布のばらつきが最も少なくなるため、データ圧縮の観点からは有利である。
本実施形態では、モザイク画像データの圧縮の圧縮率を予め設定することができ、その圧縮率に応じてモザイクWB補正部3140に設定するホワイトバランスゲインを制御する場合について、図9のフローチャートを参照して説明する。
また本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現できる。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現できる。
Claims (10)
- 撮像素子から出力された複数の色信号を含むモザイク画像データに対して、少なくとも1つの色信号を増幅してホワイトバランス補正を行うホワイトバランス補正手段と、
前記モザイク画像データを圧縮して、圧縮された新たなモザイク画像データを取得する圧縮手段と、
少なくとも前記ホワイトバランス補正手段と前記圧縮手段とを制御する制御手段と、を備え、
前記制御手段は、
前記圧縮手段による圧縮を第1の圧縮率に設定した場合、前記ホワイトバランス補正手段によるホワイトバランス補正が実質的に無効となるように制御して、前記モザイク画像データを出力し、
前記圧縮手段による圧縮を前記第1の圧縮率よりも高い第2の圧縮率に設定した場合、前記ホワイトバランス補正手段によるホワイトバランス補正が有効となるように制御して、ホワイトバランス補正後の前記モザイク画像データを出力する、
ことを特徴とする画像処理装置。 - 前記制御手段は、前記圧縮手段による圧縮をオフに設定した場合、前記ホワイトバランス補正手段によるホワイトバランス補正が実質的に無効となるように制御して、前記モザイク画像データを出力することを特徴とする請求項1に記載の画像処理装置。
- ユーザによって設定された算出方法により、前記色信号を増幅するための第1のゲインを決定する第1のゲイン決定手段をさらに備え、前記制御手段は、前記圧縮手段による前記モザイク画像データの圧縮を第2の圧縮率に設定した場合に、前記第1のゲインに基づくゲインを用いて前記ホワイトバランス補正を行うように前記ホワイトバランス補正手段を制御することを特徴とする請求項1または2に記載の画像処理装置。
- 前記第1のゲイン決定手段は、前記第1のゲインを、ユーザが設定した色温度に基づいて決定することを特徴とする請求項3に記載の画像処理装置。
- 前記第1のゲイン決定手段は、前記第1のゲインを、ユーザが選択した光源の種類に基づいて決定することを特徴とする請求項3に記載の画像処理装置。
- 前記第1のゲイン決定手段は、前記第1のゲインを、前記モザイク画像データに含まれる複数の色信号から自動的に算出した値に決定することを特徴とする請求項3に記載の画像処理装置。
- 撮像素子から出力された複数の色信号を含むモザイク画像データに対して、少なくとも1つの色信号を増幅してホワイトバランス補正を行うホワイトバランス補正手段と、
前記モザイク画像データを圧縮して、圧縮された新たなモザイク画像データを取得する圧縮手段と、
少なくとも前記ホワイトバランス補正手段と前記圧縮手段とを制御する制御手段と、を備え、
前記制御手段は、
前記圧縮手段による圧縮をオフに設定した場合、前記ホワイトバランス補正手段によるホワイトバランス補正が実質的に無効となるように制御して、前記モザイク画像データを出力し、
前記圧縮手段による圧縮を第1の圧縮率に設定した場合、前記ホワイトバランス補正手段によるホワイトバランス補正が有効となるように制御して、ホワイトバランス補正後の前記モザイク画像データを出力する、
ことを特徴とする画像処理装置。 - 撮像素子から出力された複数の色信号を含むモザイク画像データに対して、少なくとも1つの色信号を増幅してホワイトバランス補正を行うホワイトバランス補正工程と、
前記モザイク画像データを圧縮して、圧縮された新たなモザイク画像データを取得する圧縮工程と、
少なくとも前記ホワイトバランス補正工程と前記圧縮工程とを制御する制御工程と、を有し、
前記制御工程では、
前記圧縮工程における圧縮を第1の圧縮率に設定した場合、前記ホワイトバランス補正工程におけるホワイトバランス補正が実質的に無効となるように制御して、前記モザイク画像データを出力し、
前記圧縮工程における圧縮を前記第1の圧縮率よりも高い第2の圧縮率に設定した場合、前記ホワイトバランス補正工程におけるホワイトバランス補正が有効となるように制御して、ホワイトバランス補正後の前記モザイク画像データを出力する、
ことを特徴とする画像処理方法。 - 撮像素子から出力された複数の色信号を含むモザイク画像データに対して、少なくとも1つの色信号を増幅してホワイトバランス補正を行うホワイトバランス補正工程と、
前記モザイク画像データを圧縮して、圧縮された新たなモザイク画像データを取得する圧縮工程と、
少なくとも前記ホワイトバランス補正工程と前記圧縮工程とを制御する制御工程と、を有し、
前記制御工程では、
前記圧縮工程における圧縮をオフに設定した場合、前記ホワイトバランス補正工程におけるホワイトバランス補正が実質的に無効となるように制御して、前記モザイク画像データを出力し、
前記圧縮工程における圧縮を第1の圧縮率に設定した場合、前記ホワイトバランス補正工程におけるホワイトバランス補正が有効となるように制御して、ホワイトバランス補正後の前記モザイク画像データを出力する、
ことを特徴とする画像処理方法。 - コンピュータを、請求項1乃至7のいずれか1項に記載の画像処理装置の各手段として機能させるためのプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017046509 | 2017-03-10 | ||
JP2017046509 | 2017-03-10 | ||
JP2017233650A JP7037346B2 (ja) | 2017-03-10 | 2017-12-05 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017233650A Division JP7037346B2 (ja) | 2017-03-10 | 2017-12-05 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022066385A true JP2022066385A (ja) | 2022-04-28 |
JP7240540B2 JP7240540B2 (ja) | 2023-03-15 |
Family
ID=63444839
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017233650A Active JP7037346B2 (ja) | 2017-03-10 | 2017-12-05 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
JP2022032807A Active JP7240540B2 (ja) | 2017-03-10 | 2022-03-03 | 画像処理装置及び画像処理方法、プログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017233650A Active JP7037346B2 (ja) | 2017-03-10 | 2017-12-05 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10726523B2 (ja) |
JP (2) | JP7037346B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7037346B2 (ja) * | 2017-03-10 | 2022-03-16 | キヤノン株式会社 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003224868A (ja) * | 2002-01-29 | 2003-08-08 | Nikon Corp | 画像圧縮装置、画像圧縮方法、画像圧縮プログラム、および画像伸張プログラム |
JP2005020124A (ja) * | 2003-06-24 | 2005-01-20 | Nikon Corp | 電子カメラ |
JP2009521139A (ja) * | 2005-12-08 | 2009-05-28 | イーストマン コダック カンパニー | 生データと処理済みデータを提供する画像ファイル |
JP2010278755A (ja) * | 2009-05-28 | 2010-12-09 | Nikon Corp | デジタルカメラ |
JP2014110623A (ja) * | 2012-12-04 | 2014-06-12 | Samsung Techwin Co Ltd | 画像処理装置、画像処理方法、およびプログラム |
WO2014136570A1 (ja) * | 2013-03-05 | 2014-09-12 | 富士フイルム株式会社 | 撮像装置、画像処理装置、画像処理方法及びプログラム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3951993B2 (ja) * | 2003-09-11 | 2007-08-01 | カシオ計算機株式会社 | 撮像装置及びこの撮像装置に用いられるカラーデータ計測方法 |
JP5927565B2 (ja) * | 2010-10-27 | 2016-06-01 | パナソニックIpマネジメント株式会社 | 撮像装置 |
WO2013065518A1 (ja) * | 2011-10-31 | 2013-05-10 | 富士フイルム株式会社 | 撮像装置及び画像処理方法 |
WO2013100032A1 (ja) * | 2011-12-28 | 2013-07-04 | 富士フイルム株式会社 | 画像処理装置及び方法並びに撮像装置 |
WO2016006304A1 (ja) * | 2014-07-08 | 2016-01-14 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
CN107431760B (zh) * | 2015-03-31 | 2018-08-28 | 富士胶片株式会社 | 摄像装置、摄像装置的图像处理方法以及存储介质 |
JP7037346B2 (ja) * | 2017-03-10 | 2022-03-16 | キヤノン株式会社 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
-
2017
- 2017-12-05 JP JP2017233650A patent/JP7037346B2/ja active Active
-
2018
- 2018-03-01 US US15/908,901 patent/US10726523B2/en active Active
-
2022
- 2022-03-03 JP JP2022032807A patent/JP7240540B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003224868A (ja) * | 2002-01-29 | 2003-08-08 | Nikon Corp | 画像圧縮装置、画像圧縮方法、画像圧縮プログラム、および画像伸張プログラム |
JP2005020124A (ja) * | 2003-06-24 | 2005-01-20 | Nikon Corp | 電子カメラ |
JP2009521139A (ja) * | 2005-12-08 | 2009-05-28 | イーストマン コダック カンパニー | 生データと処理済みデータを提供する画像ファイル |
JP2010278755A (ja) * | 2009-05-28 | 2010-12-09 | Nikon Corp | デジタルカメラ |
JP2014110623A (ja) * | 2012-12-04 | 2014-06-12 | Samsung Techwin Co Ltd | 画像処理装置、画像処理方法、およびプログラム |
WO2014136570A1 (ja) * | 2013-03-05 | 2014-09-12 | 富士フイルム株式会社 | 撮像装置、画像処理装置、画像処理方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7037346B2 (ja) | 2022-03-16 |
US20180260934A1 (en) | 2018-09-13 |
US10726523B2 (en) | 2020-07-28 |
JP2018152840A (ja) | 2018-09-27 |
JP7240540B2 (ja) | 2023-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8625021B2 (en) | Image capture with region-based adjustment of imaging properties | |
JP4035543B2 (ja) | 撮像装置 | |
JP5123137B2 (ja) | 撮像装置および撮像方法 | |
JP5553230B2 (ja) | 撮像装置および撮像処理方法 | |
JP2007053499A (ja) | ホワイトバランス制御装置及び撮像装置 | |
JP5822508B2 (ja) | 撮像装置及びその制御方法 | |
JP2008053931A (ja) | 撮像装置 | |
JP7240540B2 (ja) | 画像処理装置及び画像処理方法、プログラム | |
JP6883971B2 (ja) | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 | |
JP6148497B2 (ja) | 画像処理装置及び画像処理方法、プログラム並びに記憶媒体 | |
JP5948997B2 (ja) | 撮像装置及び撮像方法 | |
JP7229728B2 (ja) | 撮影装置、その制御方法、プログラム | |
JP2012090041A (ja) | 画像処理装置及び方法、並びにプログラム | |
US8041206B2 (en) | Imaging apparatus and method for controlling flash emission | |
KR100562405B1 (ko) | 디지털 카메라의 이미지 수정 방법 | |
JP6046952B2 (ja) | 撮像装置及びその制御方法 | |
JP7273642B2 (ja) | 画像処理装置及びその制御方法及びプログラム | |
JP2020048139A (ja) | 画像処理装置 | |
JP7134832B2 (ja) | 画像処理装置、その制御方法及びプログラム | |
JP7214484B2 (ja) | 映像信号処理装置、映像信号処理方法、及びプログラム | |
JP5091734B2 (ja) | 撮像装置および撮像方法 | |
JP6624895B2 (ja) | 画像処理装置、撮像装置、制御方法及びプログラム | |
JP4719453B2 (ja) | 撮像装置及びその制御方法 | |
JP2018061153A (ja) | 撮像装置、撮像装置の制御方法およびプログラム | |
JP2019205063A (ja) | 撮像装置およびその制御方法ならびにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220311 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230303 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7240540 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |