JP2021140663A - 画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 - Google Patents
画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 Download PDFInfo
- Publication number
- JP2021140663A JP2021140663A JP2020040027A JP2020040027A JP2021140663A JP 2021140663 A JP2021140663 A JP 2021140663A JP 2020040027 A JP2020040027 A JP 2020040027A JP 2020040027 A JP2020040027 A JP 2020040027A JP 2021140663 A JP2021140663 A JP 2021140663A
- Authority
- JP
- Japan
- Prior art keywords
- image
- white balance
- training
- image processing
- processing method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000012545 processing Methods 0.000 title claims description 42
- 238000012549 training Methods 0.000 claims abstract description 101
- 238000013528 artificial neural network Methods 0.000 claims abstract description 49
- 238000000034 method Methods 0.000 claims description 85
- 230000008569 process Effects 0.000 claims description 63
- 238000012937 correction Methods 0.000 claims description 44
- 238000003860 storage Methods 0.000 claims description 20
- 238000004364 calculation method Methods 0.000 claims description 12
- 238000004519 manufacturing process Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 18
- 230000004075 alteration Effects 0.000 description 17
- 230000003287 optical effect Effects 0.000 description 17
- 238000013527 convolutional neural network Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 230000003595 spectral effect Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 6
- 230000004913 activation Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000035945 sensitivity Effects 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Abstract
Description
図9は、本実施例における画像処理システム300のブロック図である。図10は、画像処理システム300の外観図である。画像処理システム300は、ネットワーク303を介して接続された学習装置301および撮像装置302を含む。
本発明は、上述の実施例の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
101b:取得部
101d:更新部
Claims (15)
- ホワイトバランスに関する情報を取得する取得工程と、
前記ホワイトバランスに関する情報に基づいて、学習結果が調整されるように訓練画像をニューラルネットワークに入力して出力画像を生成し、前記出力画像と正解画像との差に基づき前記ニューラルネットワークのパラメータを更新する更新工程と、を有することを特徴とする画像処理方法。 - 前記訓練画像および前記正解画像はそれぞれ、周期的に配列された複数の色成分を有することを特徴とする請求項1に記載の画像処理方法。
- 前記訓練画像または前記正解画像の各色成分のみで構成される色成分画像を生成する生成工程を更に有し、
前記生成工程は、前記訓練画像に対して前記ニューラルネットワークへ入力される前に実行され、前記正解画像に対して前記差の算出前に実行されることを特徴とする請求項2に記載の画像処理方法。 - 前記更新工程において、前記正解画像および前記出力画像に対して前記ホワイトバランスに関する情報を用いてホワイトバランス調整を行い、ホワイトバランス調整後の前記正解画像および前記出力画像を用いて前記差を算出することを特徴とする請求項1乃至3のいずれか一項に記載の画像処理方法。
- 前記更新工程において、ホワイトバランス調整後の前記正解画像および前記出力画像に対してガンマ補正を行うことを特徴とする請求項4に記載の画像処理方法。
- 前記更新工程において、前記訓練画像または前記出力画像と前記正解画像との色成分ごとの差を算出し、前記色成分ごとの差に対して前記ホワイトバランスに関する情報に基づく重み付けを行って加算することにより前記出力画像と正解画像との前記差を算出することを特徴とする請求項1乃至3のいずれか一項に記載の画像処理方法。
- 前記更新工程において、前記訓練画像および前記正解画像に対して前記ホワイトバランスに関する情報を用いてホワイトバランス調整を行い、ホワイトバランス調整後の前記訓練画像および前記正解画像を用いて前記差を算出することを特徴とする請求項1乃至3のいずれか一項に記載の画像処理方法。
- 前記更新工程において、ホワイトバランス調整後の前記訓練画像を前記ニューラルネットワークへ入力して前記出力画像を生成し、ホワイトバランス調整後の前記正解画像および前記出力画像に対してガンマ補正を行うことを特徴とする請求項7に記載の画像処理方法。
- 前記ホワイトバランス調整後の前記訓練画像または前記正解画像の輝度値に対して、所定の範囲でクリッピングすることを特徴とする請求項4、5、7、または8のいずれか一項に記載の画像処理方法。
- 前記取得工程において、前記訓練画像または前記正解画像の付加情報から前記ホワイトバランスに関する情報を取得することを特徴とする請求項1乃至9のいずれか一項に記載の画像処理方法。
- 前記ホワイトバランスに関する情報は、ホワイトバランス係数であることを特徴とする請求項1乃至10のいずれか一項に記載の画像処理方法。
- ホワイトバランスに関する情報を取得する取得部と、
前記ホワイトバランスに関する情報に基づいて、学習結果が調整されるように訓練画像をニューラルネットワークに入力して出力画像を生成し、前記出力画像と正解画像との差に基づき前記ニューラルネットワークのパラメータを更新する更新部と、を有することを特徴とする画像処理装置。 - 請求項1乃至11のいずれか一項に記載の画像処理方法をコンピュータに実行させることを特徴とする画像処理プログラム。
- 請求項13に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。
- ホワイトバランスに関する情報を取得する取得工程と、
前記ホワイトバランスに関する情報に基づいて、学習結果が調整されるように訓練画像をニューラルネットワークに入力して出力画像を生成し、前記出力画像と正解画像との差に基づき前記ニューラルネットワークのパラメータを更新する更新工程と、を有することを特徴とする学習済みモデルの製造方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020040027A JP7504629B2 (ja) | 2020-03-09 | 2020-03-09 | 画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020040027A JP7504629B2 (ja) | 2020-03-09 | 2020-03-09 | 画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021140663A true JP2021140663A (ja) | 2021-09-16 |
JP2021140663A5 JP2021140663A5 (ja) | 2023-03-09 |
JP7504629B2 JP7504629B2 (ja) | 2024-06-24 |
Family
ID=77668769
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020040027A Active JP7504629B2 (ja) | 2020-03-09 | 2020-03-09 | 画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7504629B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113852759A (zh) * | 2021-09-24 | 2021-12-28 | 豪威科技(武汉)有限公司 | 图像增强方法及拍摄装置 |
CN117058038A (zh) * | 2023-08-28 | 2023-11-14 | 北京航空航天大学 | 一种基于偶数卷积深度学习的衍射模糊图像修复方法 |
CN117197062A (zh) * | 2023-08-30 | 2023-12-08 | 武汉大学 | 一种基于rgb图像的叶片氮含量测量方法及系统 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000311243A (ja) | 1999-04-28 | 2000-11-07 | Sony Corp | 画像色補正方法及び装置 |
US10643306B2 (en) | 2017-10-11 | 2020-05-05 | Qualcomm Incoporated | Image signal processor for processing images |
JP7242185B2 (ja) | 2018-01-10 | 2023-03-20 | キヤノン株式会社 | 画像処理方法、画像処理装置、画像処理プログラム、および、記憶媒体 |
-
2020
- 2020-03-09 JP JP2020040027A patent/JP7504629B2/ja active Active
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113852759A (zh) * | 2021-09-24 | 2021-12-28 | 豪威科技(武汉)有限公司 | 图像增强方法及拍摄装置 |
CN113852759B (zh) * | 2021-09-24 | 2023-04-18 | 豪威科技(武汉)有限公司 | 图像增强方法及拍摄装置 |
CN117058038A (zh) * | 2023-08-28 | 2023-11-14 | 北京航空航天大学 | 一种基于偶数卷积深度学习的衍射模糊图像修复方法 |
CN117058038B (zh) * | 2023-08-28 | 2024-04-30 | 北京航空航天大学 | 一种基于偶数卷积深度学习的衍射模糊图像修复方法 |
CN117197062A (zh) * | 2023-08-30 | 2023-12-08 | 武汉大学 | 一种基于rgb图像的叶片氮含量测量方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
JP7504629B2 (ja) | 2024-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7242185B2 (ja) | 画像処理方法、画像処理装置、画像処理プログラム、および、記憶媒体 | |
JP5284537B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム、およびそれを用いた撮像装置 | |
US8659672B2 (en) | Image processing apparatus and image pickup apparatus using same | |
JP5188651B2 (ja) | 画像処理装置、およびそれを用いた撮像装置 | |
US7683950B2 (en) | Method and apparatus for correcting a channel dependent color aberration in a digital image | |
US8125546B2 (en) | Color filter array pattern having four-channels | |
US8253832B2 (en) | Interpolation for four-channel color filter array | |
JP7504629B2 (ja) | 画像処理方法、画像処理装置、画像処理プログラム、および記憶媒体 | |
US8508618B2 (en) | Image pickup apparatus and restoration gain data generation method | |
EP2436180A1 (en) | Four-channel color filter array interpolation | |
JP2020144489A (ja) | 画像処理方法、画像処理装置、プログラム、学習済みモデルの製造方法、および、画像処理システム | |
JP4328424B2 (ja) | 画像変換方法 | |
US11830173B2 (en) | Manufacturing method of learning data, learning method, learning data manufacturing apparatus, learning apparatus, and memory medium | |
JP5479187B2 (ja) | 画像処理装置及びそれを用いた撮像装置 | |
JP2012003454A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP7414745B2 (ja) | 学習データの製造方法、学習方法、学習データ製造装置、学習装置、およびプログラム | |
Brown | Color processing for digital cameras | |
JP2021189929A (ja) | 画像処理方法、プログラム、画像処理装置、および、画像処理システム | |
JP2021170197A (ja) | 画像処理方法、画像処理装置、画像処理プログラム、および学習済みモデルの製造方法 | |
JP2020061129A (ja) | 画像処理方法、画像処理装置、撮像装置、画像処理システム、プログラム、および、記憶媒体 | |
US20040155972A1 (en) | Signal processing method, a signal processor circuit, and imaging apparatus | |
US20240087086A1 (en) | Image processing method, image processing apparatus, program, trained machine learning model production method, processing apparatus, and image processing system | |
JP2023116364A (ja) | 画像処理方法、画像処理装置、画像処理システム、およびプログラム | |
JP2024032621A (ja) | 画像処理方法、画像処理装置、及びプログラム | |
WO2011121761A1 (ja) | 画像処理装置、およびそれを用いた撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230228 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230228 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240514 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240612 |