JP2023154575A5

JP2023154575A5 -

Info

Publication number: JP2023154575A5
Application number: JP2022063989A
Authority: JP
Filing date: 2022-04-07
Publication date: 2023-11-01

Description

図２は、画像処理部１０４が本実施形態で実行する画像合成に関する動作を機能ブロックで表現したものである。Ａ／Ｄ変換部１０３から画像処理部１０４に供給される入力画像データを構成する個々の画素データは、撮像部１０２が有する原色ベイヤ配列のカラーフィルタに応じた１つの色成分（Ｒ（赤）、Ｇ（緑）、またはＢ（青）成分）を有する。

色マトリクス処理部３０４は、画像データに、画像データの色域を出力装置の色域に合わせる色マトリクス処理を適用する。色マトリクス処理は、撮像部１０２（撮像素子）の分光特性および画像データの出力先の装置の色域に基づく公知の方法によって実現することができる。色マトリクス処理部３０４は、処理済みの画像データをガンマ処理部３０５に出力する。

また、画像処理部１０４は、生成した合成画像データから表示用の画像データを生成し、メモリ１１１のビデオメモリ領域に書き込むことで、表示部１０８に合成画像を表示させてもよい。

Ｓ５０４で、現像処理部２０１の色マトリクス処理部３０４は、入力された画像データに対して、出力先の装置の色域に合わせるための色マトリクス処理を適用する。具体的には、色マトリクス処理部３０４は、例えば以下の式（２）に示すように、入力画像データの各画素データについて、色成分の値Ｒ_in、Ｇ_in、Ｂ_inに３×３の係数ｋ₁₁～ｋ₃₃により構成されたマトリクスを適用する。これにより、各画素データが有する色成分の値を、出力先の装置が取り扱う色域に適した色成分の値Ｒ_out、Ｇ_out、Ｂ_outに変換する。

色マトリクス処理部３０４は、処理済みの画像データをガンマ処理部３０５に出力する。

ここでは低照度シーン撮影処理において適正露出より１Ｅｖアンダー露出で撮影を行うため、１８％反射率の無彩色被写体の階調値は２５６となる。そして、低照度シーン撮影処理で用いる高輝度優先ＯＥＴＦ６０２（第２のガンマカーブ）は、階調値の低い領域における立ち上がりが通常ＯＥＴＦ６０１よりも急な階調特性を有し、入力階調値２５６が出力階調値１２３に変換されるように設計されている。

具体的には、現像処理部２０１がローカルトーンマッピング処理部２０３に画像データを出力する。そして、ローカルトーンマッピング処理部２０３が、位置合わせ処理を行う前の各フレームの画像データに対してローカルトーンマッピング処理を適用する。ローカルトーンマッピング処理は、合成画像の代わりに合成前の画像を用いることを除き、第１実施形態と同様であってよい。

また、上述の実施形態で説明した低照度シーン撮影処理のうち、撮影に係る処理以外は撮像機能を有しない電子機器（画像処理装置）で実施してもよい。すなわち、画像処理装置はアンダー露出で撮影された複数フレーム分の画像データを外部装置から取得し、Ｓ４０２以降の処理を適用することができる。このような画像処理装置によっても、高輝度部の白とびを抑制しつつ、適切な明るさを有する合成画像を得ることができる。さらに、合成時にランダムノイズを低減することが可能である。