WO2022234753A1

WO2022234753A1 - 固体撮像装置及び電子機器

Info

Publication number: WO2022234753A1
Application number: PCT/JP2022/016843
Authority: WO
Inventors: 征志中田; 裕一郎馬場
Original assignee: ソニーセミコンダクタソリューションズ株式会社
Priority date: 2021-05-07
Filing date: 2022-03-31
Publication date: 2022-11-10
Also published as: US20240194712A1; CN117322002A; JPWO2022234753A1

Abstract

［課題］半値幅の狭いマルチスペクトルの情報を取得する。［解決手段］固体撮像装置は、受光素子と、光学フィルタと、マルチバンドパスフィルタと、を備える。受光素子は、入射する光を光電変換する。光学フィルタは、前記受光素子に入射する光の色を制御する。マルチバンドパスフィルタは、前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する。この光学フィルタは、複数の前記色に対応するフィルタであり、前記受光素子ごとに入射する前記色を制御する。マルチバンドパスフィルタは、透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する。

Description

固体撮像装置及び電子機器

　本開示は、固体撮像装置及び電子機器に関する。

　マルチスペクトル画像を取得する手法として、プラズモン方式やカラーフィルタ方式等、多くの手法が存在するが、センサからの出力は、これらの方式における分光カーブを維持した状態の出力を行うことが一般的である。

　また、半値幅 (FWHM: Full Width at Half Maximum) の狭いマルチスペクトルセンサであるほど、波長解析性能がよくなるため、 FWHM の狭いセンサを用いることが望ましい。一方で、センサ上のカラーフィルタのみを用いてこのような波長特性を実現するのは、材料開発の観点で困難である。

特開2016-012746

　そこで、本開示では、半値幅の狭いマルチスペクトルの情報を取得する撮像素子及び電子機器を提供する。

　一実施形態によれば、固体撮像装置は、受光素子と、光学フィルタと、マルチバンドパスフィルタと、を備える。前記受光素子は、入射する光を光電変換する。前記光学フィルタは、前記受光素子に入射する光の色を制御する。前記マルチバンドパスフィルタは、前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する。さらに、前記光学フィルタは、複数の前記色に対応するフィルタであり、前記受光素子ごとに入射する前記色を制御し、前記マルチバンドパスフィルタは、透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する。

　複数の前記色は、スペクトルのピーク周波数が異なっていてもよい。

　前記光学フィルタは、カラーフィルタ、プラズモンフィルタ又は有機光電変換膜のうち少なくとも 1 つであってもよい。

　前記マルチバンドパスフィルタは、透過帯域の半値幅が前記複数の色のそれぞれに対応する前記光学フィルタの半値幅より狭くてもよい。

　前記マルチバンドパスフィルタは、装置内において塗布、接着又は成膜により一体形成されていてもよい。

　前記マルチバンドパスフィルタは、前記複数の色のそれぞれに対応する前記光学フィルタの透過周波数帯において、複数の透過帯域を備えていてもよい。

　前記受光素子は、前記マルチバンドパスフィルタを介して、複数の分光ピークを有する信号を出力してもよい。

　前記受光素子は、前記マルチバンドパスフィルタを介して光が入射する、第 1 受光素子と、前記マルチバンドパスフィルタを介せずに光が入射する、第 2 受光素子と、を備えてもよく、前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、信号を取得してもよい。

　前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、スペクトル推定を実行してもよい。

　前記マルチバンドパスフィルタは、第 1 マルチバンドパスフィルタと、前記第 1 マルチバンドパスフィルタと異なる透過帯域を有する、第 2 マルチバンドパスフィルタと、を備えていてもよく、前記受光素子は、前記第 1 マルチバンドパスフィルタを介して光が入射する、第 3 受光素子と、前記第 2 マルチバンドパスフィルタを介して光が入射する、第 4 受光素子と、を備えていてもよく、前記第 3 受光素子の出力と、前記第 4 受光素子の出力とに基づいて、信号を取得してもよい。

　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
をさらに備えていてもよい。

　前記マルチバンドパスフィルタは、第 3 マルチバンドパスフィルタと、前記第 3 マルチバンドパスフィルタとは異なる透過帯域を有する、第 4 マルチバンドパスフィルタと、を備えていてもよく、前記受光素子は、像高に対して異なる透過帯域を有するように前記第 3 マルチバンドパスフィルタと、前記第 4 マルチバンドパスフィルタと、を介して光が入射されてもよく、前記波長抽出回路は、異なる前記像高における同一対象から受光した光に対する波長抽出パラメータを用いて、波長抽出を実行してもよい。

　前記波長抽出回路は、前記第 3 マルチバンドパスフィルタを介して取得した信号と、前記第 4 マルチバンドパスフィルタを介して取得した信号とを合成して、前記波長抽出を実行してもよい。

　前記波長抽出回路は、異なるフレームにおいて取得された信号に基づいて、前記波長抽出を実行してもよい。

　一実施形態によれば、電子機器は、ディスプレイと、撮像素子と、を備える。前記ディスプレイは、発光素子が射出する光で画像情報を表示する。前記撮像素子は、前記ディスプレイの発光面と逆側において、前記ディスプレイを介して撮像する、撮像素子であって、受光素子と、光学フィルタと、マルチバンドパスと、を備える。前記受光素子は、入射する光を光電変換する。前記光学フィルタは、前記受光素子に入射する光の色を制御する。前記マルチバンドパスフィルタは、前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する。さらに、前記光学フィルタは、複数の前記色に対応するフィルタであり、前記受光素子ごとに入射する前記色を制御し、前記マルチバンドパスフィルタは、透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する。

　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、を、前記撮像素子の内部に備えていてもよい。

　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、を、前記撮像素子の外部に備えていてもよい。

一実施形態に係る電子機器を模式的に示すブロック図。一実施形態に係る光学フィルタ及びマルチバンドパスフィルタの周波数特性の一例を示す図。一実施形態に係る光学フィルタ及びマルチバンドパスフィルタを介した白色光のスペクトルの一例を示す図。一実施形態に係る取得スペクトルに行列演算を施した結果の一例を示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。被写体の分光特性の一例を示す図。一実施形態に係る取得したスペクトルの一例を示す図。一実施形態に係るマルチバンドパスフィルタを用いて取得したスペクトルの一例を示す図。一実施形態に係るマルチバンドパスフィルタを用いて取得したスペクトルの一例を示す図。一実施形態に係る固体撮像装置の少なくとも一部を模式的に示す図。一実施形態に係るマルチバンドパスフィルタを介して取得したスペクトルの一例を示す図。一実施形態に係るマルチバンドパスフィルタを介して取得したスペクトルの一例を示す図。一実施形態に係る撮像素子の一例を模式的に示す図。一実施形態に係る光学フィルタの配置の一例を示す図。一実施形態に係る光学フィルタの配置の一例を示す図。一実施形態に係る電子機器の一例を示す図。

　以下、図面を参照して本開示における実施形態の説明をする。図面は、説明のために用いるものであり、実際の装置における各部の構成の形状、サイズ、又は、他の構成とのサイズの比等が図に示されている通りである必要はない。また、図面は、簡略化して書かれているため、図に書かれている以外にも実装上必要な構成は、適切に備えるものとする。

　本開示においては、例えば、マルチスペクトルカメラの撮像素子について説明しているが、ハイパースペクトルカメラについても同様に実装することが可能である。また、特に断りがない限り、本開示において半値幅とは、半値全幅のことを示す。

　図1は、一実施形態に係る電子機器を模式的に示すブロック図である。電子機器 1 は、固体撮像装置 10 と、処理回路 12 と、記憶回路 14 と、入出力部 16 と、を備える。電子機器 1 は、少なくとも撮像機能を備え、例えば、撮像機能を有するデジタルスティルカメラ、デジタルビデオカメラ、又は、さらに別の機能を備える、携帯端末、スマートフォン、タブレット端末、ヘッドマウントディスプレイ等であってもよい。

　固体撮像装置 10 は、光学系 100 と、画素 120 と、信号処理回路 140 と、記憶回路 160 と、インタフェース 180 と、を備える。固体撮像装置 10 は、外部から入射した光を受光し、画像情報、映像情報 (以下、画像情報と単に記載する) を取得して出力するデバイス又はモジュールである。

　光学系 100 は、受光素子に外部からの光を適切に入射させる光学系である。光学系 100 は、例えば、レンズ、絞り等を備える。また、後述するように、光学系 100 に光学フィルタの少なくとも一部又はマルチバンドパスフィルタの少なくとも一部が備えられてもよい。

　画素 120 は、受光素子と、画素回路と、を備える。受光素子は、入射した光の強度に基づいたアナログ信号を光電変換により取得して出力する。受光素子は、例えば、フォトダイオード又は有機光電変換膜であってもよい。画素回路は、受光素子が出力したアナログ信号を適切なタイミングで適切な倍率で出力する回路である。画素 120 は、光学系 100 により制御された光の強度に基づいたアナログ信号を出力する回路である。

　信号処理回路 140 は、画素 120 から出力された信号を適切に信号処理して出力する回路である。信号処理回路 140 は、例えば、画素 120 から出力されたアナログ信号をデジタル信号に変換する DAC (Digital to Analog Converter) を備えてもよい。また、信号処理回路 140 は、後述するように画素 120 から出力された信号において波長特性を抽出したり、又は、取得した信号に基づいて画像処理をしたりしてもよい。

　記憶回路 160 は、固体撮像装置 10 内においてデータを格納する回路である。記憶回路 160 は、例えば、信号処理回路 140 が処理したデジタル信号を格納してもよい。信号処理回路 140 は、任意のタイミングで記憶回路 160 に必要となるデータを書き込み、又は、データを読み出すことができる。また、信号処理回路 140 が汎用プロセッサでありソフトウェアによる情報処理がハードウェア資源を用いて具体的に実現される場合には、このソフトウェアに関するデータを記憶回路 160 が格納していてもよい。記憶回路 160 は、この他、インタフェース 180 と接続されていてもよい。

　インタフェース 180 は、信号処理回路 140 が処理した信号を固体撮像装置 10 の外部へと出力し、又は、外部から制御情報を含むデータの入力を受け付けるインタフェースである。インタフェース 180 に用いられる形式、規格等は、特に限定されるものではなく、適切なインタフェースを用いることができる。

　固体撮像装置 10 は、このように、外部からの情報に基づいて画像情報を適切に形成して出力する。固体撮像装置 10 の撮像手法は、例えば、ローリングシャッタ方式でもグローバルシャッタ方式でもよい。固体撮像装置 10 は、この他、種々の撮像方法、種々の画像処理に対応するものであってもよい。

　処理回路 12 、記憶回路 14 及び入出力部 16 は、電子機器 1 において、固体撮像装置 10 とは別途備えられる。

　処理回路 12 は、固体撮像装置 10 から出力された信号を適切に処理して出力する。また、外部からの制御信号を入出力部 16 を介して取得し、インタフェース 180 を介して固体撮像装置 10 の制御を実行してもよい。

　記憶回路 14 は、固体撮像装置 10 の外部における記憶領域を形成する。処理回路 12 は、必要に応じて記憶回路 14 にデータを書き込み、又は、記憶回路 14 からデータを読み込んでもよい。処理回路 12 がソフトウェアで種々の処理ができる場合、記憶回路 14 は、記憶回路 160 と同様に、このソフトウェアに必要なプログラム等が格納されていてもよい。

　入出力部 16 は、ユーザインタフェースであり、例えば、ディスプレイ、ボタン、タッチパネル等を備える。また、入出力部 16 は、外部へデータを転送し、又は、外部からデータを転送するためのインタフェースを備えていてもよい。例えば、ユーザは、入出力部 16 を介して電子機器 1 を操作し、固体撮像装置 10 における撮像を制御することができる。

　光学系 100 及び画素 120 についていくつかの限定されない例を挙げて説明する。例えば、図面においては、 2 受光素子～ 4 受光素子について示すが、受光素子は、 2 次元のアレイ状に配列されており、図面は、これらの受光素子の一部を示すものである。

　いくつかの実施形態において、固体撮像装置 10 は、入射した光を光電変換する受光素子と、受光素子に入射する光を制御する光学フィルタ (光学系 100 を含む場合がある) と、この光学フィルタから射出された光又は光学フィルタに入射する光について複数の周波数帯を透過させるマルチバンドパスフィルタと、を備える。

　光学フィルタは、例えば、受光素子に入射する色に関するフィルタであり、入射光のスペクトルを色情報に対応して制御するフィルタである。光学フィルタは、一般的なカラーフィルタ、プラズモンフィルタであってもよい。また、光学フィルタと受光素子とをまとめた概念として、有機光電変換膜を用いてもよい。

　光学フィルタは、受光素子ごとに備えられてもよい。この場合、受光素子ごとに、所定の周波数特性を有する光を受光する。複数の色に対応する光学フィルタが、異なる受光素子に対して備えられることで、カラー画像の再構成を実現することができる。これらの光学フィルタは、スペクトルにおいて色ごとに異なるピーク周波数を有していてもよい。

　マルチバンドパスフィルタは、透過帯域のピークのうち少なくとも 1 つがそれぞれの光学フィルタが透過するスペクトルのピークと異なる周波数を有する。

　また、マルチバンドパスフィルタのそれぞれの透過帯域の半値幅は、それぞれの色に対応する光学フィルタのスペクトルの半値幅よりも狭い。

　図2は、光学フィルタの透過特性と、マルチバンドパスフィルタの透過特性の一例を示す図である。光学フィルタは、それぞれ、 R (赤) 、 G (緑) 、 B (青) 、 Mg (マゼンダ) 、 Cy (シアン) 、 Ye (黄) 、 W (白) 、 IR (赤外) で示されるような所定の色に対するスペクトルを透過する透過特性を有する。光学フィルタは、固体撮像装置 10 がマルチスペクトルセンサとして機能するために適切な複数の種類が備えられる。

　一方で、 MBP (マルチバンドパスフィルタ) は、複数の周波数帯域に対する透過特性を有し、各光学フィルタの透過特性のピーク値とは、少なくとも 1 つの帯域が異なるピーク値周波数を有する。そして、マルチバンドパスフィルタのそれぞれの透過帯域における周波数特性は、それぞれの光学フィルタの周波数特性における半値幅よりも狭い半値幅を有する。

　図2に示されるように、マルチバンドパスフィルタは、それぞれの色の周波数帯域において、複数の透過帯域を有していてもよい。

　図3は、マルチバンドパスフィルタを介して取得したスペクトルの一例を示す図である。この図3では、白色光を、光学フィルタ及びマルチバンドパスフィルタを介して取得した場合の図であり、例として、図の簡略化のため、 R 、 G 、 Ye の光学フィルタからの出力を重ね合わせた図を示している。

　この図に示すように、マルチバンドパスフィルタを介して取得される信号は、 1 画素ごとに複数の周波数ピークを有する出力となる。この結果に行列演算を加えることで、狭帯域の分光結果を抽出することができる。

　図4は、行列演算を行った結果の一例を示す図である。図4は、一例として、 640nm の分光結果を取得するための行列演算を、光学フィルタ及びマルチバンドパスフィルタを介して取得した信号に対して実行した結果である。例えば、この図では、 2 × (Ye の強度) - 1.15 × (R の強度) - 2 × (G の強度) として、行列演算を設定し、図3のスペクトルを演算した結果である。

　なお、演算に用いる色の情報は、この 3 色に限定されるものではない。例えば、同じ 640nm の特性を取得したい場合であっても、さらに多くの色に対応する光学フィルタを介した受光結果を用いてもよい。

　この図に示すように、取得したい周波数 (波長) に対して適切な行列演算を設定し、光学フィルタ及びマルチバンドパスフィルタを介した光から受光素子が出力する信号からパラメータに基づいた演算を実行することで、取得したい周波数における対象物から受光した光の特性を取得することが可能となる。

　この演算は、図1における、固体撮像装置 10 内部の信号処理回路 140 で実行されてもよいし、固体撮像装置 10 外部の処理回路 12 で実行されてもよい。換言すると、上記の波長抽出、波長特性を取得する演算は、固体撮像装置 10 の内部又は外部の適切な箇所において実行することができる。

　以下に説明する光学フィルタ、マルチバンドパスフィルタは、図2に一例として示されるフィルタにしたがって形成される。

　(第 1 実施形態)
　図5は、一実施形態に係る固体撮像装置 10 における光学フィルタと撮像素子の配置の一例を示す図である。固体撮像装置 10 は、レンズ 101 と、マルチバンドパスフィルタ 102 と、撮像素子 110 と、を備える。

　撮像素子 110 は、複数の画素 120 を備える素子である。画素 120 は、撮像素子 110 において、 2 次元のアレイ状に配置され、各画素により取得された光の情報に基づいて、画像情報を構成する。撮像素子 110 は、画素 120 と、信号処理回路 140 と、インタフェース 180 を備えていてもよい。さらに、撮像素子 110 は、記憶回路 160 を備えていてもよい。

　レンズ 101 は、光学系 100 の一部として備えられる。レンズ 101 は、外部から入射される光を適切に屈折、回折することで、撮像素子 110 に備えられる画素 120 に入射光を伝搬する。

　マルチバンドパスフィルタ 102 は、例えば、固体撮像装置 10 において、撮像素子 110 とは別に形成されていてもよい。例えば、本実施形態では、マルチバンドパスフィルタ 102 は、レンズ 101 と、撮像素子 110 との間に配置される。外部から入射した光は、レンズ 101 により屈折等した後、マルチバンドパスフィルタ 102 を介して撮像素子 110 に入射される。

　このマルチバンドパスフィルタ 102 は、例えば、固体撮像装置 10 内において、透過膜に塗布され、接着され、又は、成膜されて形成されていてもよい。すなわち、形成の手法は、適切にマルチバンドパスフィルタ 102 が配置されるのであれば、特に限定されるものではない。

　このように、固体撮像装置 10 において、撮像素子 110 に光を適切に入射する光学系 100 及び撮像素子 110 の外部において、マルチバンドパスフィルタ 102 が備えられる形態であってもよい。

　(第 2 実施形態)
　図6は、一実施形態に係る固体撮像装置 10 における光学フィルタと撮像素子の配置の一例を示す図である。固体撮像装置 10 は、撮像素子 110 の内部にマルチバンドパスフィルタ 102 を備えてもよい。

　図7は、撮像素子 110 にマルチバンドパスフィルタ 102 が備えられる一例を示す図である。この図においては、一例として、それぞれが 1 つの受光素子を備える 2 つの画素 120 を示しているが、これに限定されるものではない。画素 120 は、別の例として、 2 つの受光素子に対して、 1 つの画素回路をそなえる構成であってもよいし、これらの構成に限定されるものではなく、適切に 1 つの受光領域において 1 つの色に関する情報を取得できる構成であればよい。

　画素 120 は、受光素子 121 と、平坦化膜 122 と、カラーフィルタ 123 と、オンチップレンズ 124 と、を備える。図7には、一例として、 2 つの画素 120a 、 120b が示されている。

　受光素子 121 は、上記に説明した受光素子であり、例えば、フォトダイオード等により形成される。受光素子 121 は、受光した光を光電変換し、強度に基づいたアナログ信号を画素回路へと出力する。

　平坦化膜 122 は、望ましい帯域 (例えば、可視光領域＋近赤外領域) における透過性を有する物質から形成され、受光素子 121 の上面を平坦化する層である。この平坦化膜 122 は、受光素子 121 の上面のみならず、必要に応じて、カラーフィルタ 123 の上面、又は、オンチップレンズ 124 の上面にも形成されていてもよい。

　カラーフィルタ 123 は、受光素子 121 に入射する光のスペクトル特性を制御するフィルタである。カラーフィルタ 123 は、上記における光学フィルタに相当するフィルタである。受光素子 121 が有機光電変換膜により形成され、それぞれに適切なスペクトル特性でアナログ信号を生成する場合には、必須の構成ではない。

　例えば、カラーフィルタ 123a は、 R に対応するフィルタであってもよいし、カラーフィルタ 123b は、 G に対応するフィルタであってもよい。受光素子 121 ごとに、適切なカラーフィルタ 123 が備えられてもよい。

　別の例として、カラーフィルタ 123 は、プラズモンフィルタであってもよい。この場合、開口の配置、大きさ等を適切に制御することで、異なる特性の光を透過させてもよい。また、カラーフィルタ 123 として、一般的なカラーフィルタと、プラズモンフィルタとを混在させる形態であってもよい。このように形成することで、可視光領域における画像情報を取得できるとともに、血流、血中酸素濃度等の情報を併せて取得することもできる。

　オンチップレンズ 124 は、光学系 100 により撮像素子 110 に集光された光を、さらに、適切に画素 120 ごとに集光するためのレンズである。このオンチップレンズ 124 は、受光素子 121 等を備える画素 120 において一体に、半導体装置として形成されてもよい。図においては、それぞれの受光素子 121 ごとにオンチップレンズ 124 が備えられるが、複数の受光素子 121 に対して 1 つのオンチップレンズ 124 が備えられる形態であってもよい。

　マルチバンドパスフィルタ 102 は、オンチップレンズ 124 の上面において備えられてもよい。すなわち、本形態においては、光学系 100 を介して撮像素子 110 に入射した光は、マルチバンドパスフィルタ 102 により帯域ごとに透過し、オンチップレンズ 124 により適切に屈折等し、さらに、カラーフィルタ 123 により色ごとにスペクトルが制御されて受光素子 121 に入射する。

　図8は、撮像素子 110 にマルチバンドパスフィルタ 102 が備えられる別の例を示す図である。この図に示すように、マルチバンドパスフィルタ 102 は、カラーフィルタ 123 と、受光素子 121 の間の任意の位置に配置されてもよい。

　すなわち、本形態においては、光学系 100 を介して撮像素子 110 Ni入射した光は、オンチップレンズ 124 により適切に屈折等し、カラーフィルタ 123 により色ごとにスペクトルが制御され、マルチバンドパスフィルタ 102 により帯域ごとに透過して受光素子 121 に入射する。

　図9は、撮像素子 110 にマルチバンドパスフィルタ 102 が備えられる別の例を示す図である。画素 120a 、 120b は、マルチバンドパスフィルタ 102 が備えられる画素であり、画素 120c 、 120d は、マルチバンドパスフィルタ 102 が備えられない画素である。

　同一の撮像素子 110 内に、マルチバンドパスフィルタ 102 を介して光が入射する受光素子 121 (第 1 受光素子) と、マルチバンドパスフィルタ 102 を介せずに光が入射する受光素子 121 (第 2 受光素子) とが混在していてもよい。

　図1に示す信号処理回路 140 又は処理回路 12 は、これらの第 1 受光素子及び第 2 受光素子の出力結果を用いて、波長情報を取得してもよい。ここで、波長情報とは、例えば、ある波長に対するスペクトルの特性を示す情報である。例えば、ある対象から反射又は透過してきた光の所定の波長における強度情報を示してもよい。

　固体撮像装置 10 又は電子機器 1 は、これらの第 1 受光素子及び第 2 受光素子の出力結果を用いて、特に、スペクトル推定を実行してもよい。スペクトル推定を実行することで、対象についての情報をより詳細に解析することも可能となる。

　固体撮像装置 10 は、この図9に示すように、 1 つの撮像素子 110 において、第 1 受光素子及び第 2 受光素子を備えてもよい。

　以上のように、撮像素子 110 内にマルチバンドパスフィルタ 102 を備える構成としてもよい。

　(第 3 実施形態)
　図10は、第 1 受光素子及び第 2 受光素子を備える別の例を示す図である。固体撮像装置 10 は、複数の撮像素子 110 を備えていてもよい。固体撮像装置 10 は、例えば、撮像素子 110a と撮像素子 110b と、を備える。

　撮像素子 110a には、レンズ 101 及びマルチバンドパスフィルタ 102 を介した光が入射する。一方で、撮像素子 110b には、レンズ 101 及びバンドパスフィルタ 103 を介した光が入射する。

　バンドパスフィルタ 103 は、例えば、可視光帯域の光を透過するフィルタであってもよい。バンドパスフィルタ 103 は、別の例として、可視光帯域及び赤外帯域の光を透過するフィルタであってもよい。

　このように、マルチバンドパスフィルタ 102 とバンドパスフィルタ 103 と、を撮像素子 110 の外部に備えることもできる。この場合、撮像素子 110a 内に配置される受光素子は、図9の第 1 受光素子と同様に動作し、撮像素子 110b 内に配置される受光素子は、図9の第 2 受光素子と同様に動作する。

　図9では、 1 つの撮像素子 110 において第 1 受光素子及び第 2 受光素子を備える構成であり、図10では、 1 つの撮像素子 110 において第 1 受光素子を備え、異なる撮像素子 110 において第 2 受光素子を備える構成である。このように、第 1 受光素子及び第 2 受光素子は、同じ撮像素子 110 内に配置されてもよいし、別々の撮像素子 110 において配置されてもよい。

　図9及び図10の構成とすることで、以下のように取得した情報からデータの補間をすることもできる。

　図11は、被写体の分光特性の一例を示す図である。この被写体を第 1 受光素子及び第 2 受光素子のそれぞれを介して撮像した特性が、図12及び図13に示される。

　図12は、例えば、第 2 受光素子をビューイングに用いる受光素子として、スペクトルを再構成したものである。ビューイングに用いるセンサは、可視光における全波長の情報を取得し、人間の目に見える画像と近い画像を取得することができる。一方で、ビューイングに用いる受光素子は、センシングに用いる受光素子と比較すると、取得した信号からのスペクトルの推定精度が低い。

　図13は、例えば、第 1 受光素子をセンシングに用いる受光素子として、スペクトルを抽出したものである。マルチバンドパスフィルタを介して取得したデータは、帯域ごとにビューイングに用いるセンサを用いて取得したデータと比較して精度が高い結果を取得することができる。一方で、被写体内に輝点がある場合等においては、当該輝点の情報を抽出できなかったり、当該輝点と帯域とが重なることで、ノイズが発生したりする。

　本実施形態における固体撮像装置 10 又は電子機器 1 は、第 1 受光画素及び第 2 受光画素を用いて取得した信号を信号処理により合成することで、より精度の高い連続的なスペクトルの推定をすることが可能となる。

　この推定は、例えば、第 1 受光画素を用いて取得した帯域ごとのデータに対して第 2 受光画素を用いて取得した連続的なスペクトルから、補間処理を実行することで実現されてもよい。別の例として、信号処理回路 140 又は処理回路 12 においてマルチバンドパスフィルタの情報とバンドパスフィルタの情報から連続的なスペクトルの推定を実行する学習済みのモデルを用いて、この推定がされてもよい。

　図14は、上記の手法により、合成されたスペクトルの推定結果の一例を示す図である。この図に示すように、図12及び図13の結果を用いて、図12のみを用いた場合、又は、図13のみを用いた場合よりも、精度の高い被写体の分光特性を推定することが可能となる。

　(第 4 実施形態)
　図15は、マルチバンドパスフィルタ 102 の別の配置例を示す図である。例えば、マルチバンドパスフィルタ 102 の周波数透過特性を有する材質で、レンズ 101 を生成してもよい。このような構成とすることで、レンズ 101 により適切な入射光の制御をするとともに、狭帯域のスペクトルを有する光を撮像素子 110 へと入射することも可能となる。

　図15においては、 1 つのレンズ 101 として示されているが、これに限定されるものではない。例えば、複数のレンズ 101 を備え、それぞれにマルチバンドパスフィルタ 102 の特性を備えるものと、備えないものとを混在させ、前述の図9、図10と同様の機能を持たせてもよい。

　前述したように、光学フィルタの周波数特性よりも狭い帯域幅を有するマルチバンドパスフィルタを用いることで、行列演算をすることで、望ましい帯域における特性を取得することができる。これとともに、以下に述べる効果をも奏することが可能である。

　図16は、一実施形態に係るマルチバンドパスフィルタを介して取得したスペクトルの特性を示す図である。図16は、一例として、 G の光について示している。破線は、 G の光のスペクトルを示し、実線は、マルチバンドパスフィルタの透過周波数特性を示し、点線は、受光素子が受光した信号を示す。

　例えば、矢印で示される帯域について考える。マルチバンドパスフィルタのこの帯域の半値幅は、実線の矢印で示される幅である。一方で、透過した G の光の半値幅は、点線の矢印で示される幅である。

　ある色に対して、センサの出力は、一定ではなく、ピークを有する形状となる。ピークの周辺においては、センサの出力が減少する。図16における矢印の帯域のように、ピークから減少しつつある帯域においては、マルチバンドパスフィルタ自体の帯域よりもさらに狭い半値幅の分光情報を取得することが可能となる。このため、 1 つの光に対するスペクトルの特性を取得する場合において、より精度の高い特性値を取得することが可能となる。

　(第 5 実施形態)
　前述の各実施形態においては、マルチバンドパスフィルタは、 1 種類を用いるものとしたが、これに限定されるものではない。固体撮像装置 10 は、複数の特性の異なるマルチバンドパスフィルタを用いてセンシングをすることも可能である。

　例えば、帯域幅の異なるマルチバンドパスフィルタを用いることもできる。このように帯域幅の異なる複数種類のマルチバンドパスフィルタを用いることで、例えば、より帯域幅の狭いフィルタの結果を用いて前述の各実施形態と同様の結果を取得し、さらに、帯域幅の広いフィルタの結果を用いて、演算により、ノイズ等の除去をすることもできる。

　別の例として、透過周波数帯域自体が異なるマルチバンドパスフィルタを用いることもできる。一例として、固体撮像装置 10 は、第 1 マルチバンドパスフィルタを介して光を受光する第 3 受光素子と、第 1 マルチバンドパスフィルタとは透過帯域が異なる第 2 マルチバンドパスフィルタを介して光を受光する第 4 受光素子と、を備えてもよい。前述の実施形態と同様に、 1 つの撮像素子内において、第 3 受光素子と第 4 受光素子が混在する形態であってもよいし、第 3 受光素子と第 4 受光素子とが別々の撮像素子に配置されていてもよい。

　固体撮像装置 10 内の信号処理回路 140 又は固体撮像装置 10 外の処理回路 12 は、第 3 受光素子と第 4 受光素子とからそれぞれ出力された結果に基づいて、波長情報を取得することができる。

　図17は、異なるマルチバンドパスフィルタを用いる場合におけるスペクトル特性を重ねたものである。●は、第 3 受光素子からの出力に基づく結果、×は、第 4 受光素子からの出力に基づく結果である。このように、ある程度の透過帯域幅を有した状態で、異なる帯域におけるスペクトルの情報を取得することが可能となる。

　例えば、第 1 マルチバンドパスフィルタにより取得された図13のグラフと、第 1 マルチバンドパスフィルタと第 2 マルチバンドパスフィルタにより取得された図17のグラフとを比較することで、異なる特性を有するマルチバンドパスフィルタを用いることで、より精度の高いスペクトル特性の推定をすることが可能となることがわかる。

　(第 6 実施形態)
　第 5 実施形態においては、受光素子ごとに異なるマルチバンドパスフィルタを介して受光をすることを説明したが、固体撮像装置 10 は、さらに細かい粒度で異なる特性を有するマルチバンドパスフィルタを備えることもできる。

　図 18 は、本実施形態に係る撮像素子 110 を模式的に示す図である。左図は、平面図であり、右図は、左図の A-A 断面図である。

　例えば、左図に示すように、受光素子 121 は、 3 × 3 個ごとに、オンチップレンズ 124 を備えてもよい。周辺にある受光素子 121a と、中央にある受光素子 121b は、対象の同じ位置からの像高の異なる像に対応する光を受光する。右図に示すように、受光素子 121a の上面には、第 3 マルチバンドパスフィルタ 102a が備えられ、受光素子 121b の上面には、第 3 マルチバンドパスフィルタ 102a とは異なる特性を有する第 4 マルチバンドパスフィルタ 102b が備えられる。異なる特性は、例えば、異なる透過帯域を有することであってもよい。

　光学フィルタは、図示していないが、限定されない一例として、同じオンチップレンズ 124 に属する受光素子において同じ色のカラーフィルタが備えられてもよい。

　このように配置することで、同じ対象からの像高により、異なる周波数帯域を有するマルチバンドパスフィルタを介した光のスペクトル情報を取得することができる。

　このような状態では、像高に応じて異なる帯域を有するスペクトル情報を取得することができる。例えば、フレームごとにスペクトルの特性を重ね合わせることで、対象の同じ位置からの受光した光のスペクトルを、図17に示すように重ね合わせることもできる。この結果、前述の第 5 実施形態と同様に、 1 つのマルチバンドパスフィルタを用いる場合と比較してより高精度なスペクトル情報の推定、例えば、波長抽出処理を実現することが可能となる。

　対象に動作がある場合においても適用することができるし、ユーザが手で把持してセンシングをする場合には、ユーザの手ぶれにより異なる像高から同じ位置の情報を取得することも可能である。また、別の例として、固体撮像装置 10 内において撮像素子 110 に微小な振動を与えるピエゾ素子を備えたり、電子機器 1 内において固体撮像装置 10 に微小な振動を与えるピエゾ素子を備えたりしてもよい。

　次に、色フィルタの実装例について説明する。

　図19は、一実施形態に係る受光素子における光学フィルタの配置例である。このように、マゼンダ、イエロー、シアン、ホワイト、赤、緑、青、赤外のスペクトルをそれぞれ受光するためのフィルタが配置されていてもよい。

　図20は、一実施形態に係る受光素子における光学フィルタの別の配置例である。この図に示すように、緑とイエローの組み合わせ、青とシアンの組み合わせ、赤とマゼンダの組み合わせとして、光学フィルタが配置されていてもよい。

　別の例として、固体撮像装置 10 は、波長帯域が制限された特定波長のみを光電変換する ALS (Ambient Light Sensor) を含む撮像素子と、少なくとも可視光において波長帯域が欠損していないマルチスペクトルセンサ (望ましくは 4 色以上) の双方の結果を用いて、スペクトルの推定を実現してもよい。

　この形態では、固体撮像装置 10 又は電子機器 1 は、 ALS 等の照度センサから、例えば、人間の目に自然な光の強度情報を取得し、マルチバンドパスフィルタを備えるマルチスペクトルセンサからは像高に依存したスペクトルの情報を取得することができる。このため、これらのセンサからの出力を適切に混合することで、前述の各実施形態における効果を奏するとともに、人間の目により自然に見える画像の再構成を実現することもできる。

　(実装例)
　前述においては、固体撮像装置 10 の形態について説明したが、電子機器 1 のいくつかの限定されない実装例について説明する。

　図21は、前述の各実施形態の固体撮像装置 10 を用いた電子機器 1 の実装例である。電子機器 1 は、例えば、スマートフォン、タブレット端末等であってもよい。

　電子機器 1 は、ディスプレイの表示面とは逆側に、ディスプレイを透過した光を受光する固体撮像装置 10 を備える。電子機器 1 は、電子機器 1 の外形サイズの近くまで表示面 350z が拡がっており、表示面 350z の周囲にあるベゼル 350y の幅を数 mm 以下にしている。通常、ベゼル 350y には、フロントカメラが搭載されることが多いが、本開示における固体撮像装置 10 を、破線で示すように表示面の略中央のディスプレイの裏側部分に備えてもよい。

　この固体撮像装置 10 は、フロントカメラとして機能するイメージセンサとして動作することができる。このように、固体撮像装置 10 をディスプレイの下側に備えることもできる。

　なお、 1 つの固体撮像装置 10 が備えられる形態を示したが、これに限定されず、複数の固体撮像装置 10 が同じディスプレイの下側の異なる位置に備えられてもよい。

　このように、固体撮像装置 10 は、ディスプレイと、このディスプレイの下側に、撮像素子としての固体撮像装置 10 と、を備えてもよい。

　ディスプレイは、発光素子を備え、発光素子が射出する光で画像情報を表示する。

　固体撮像装置 10 は、このディスプレイの発光面とは逆側において、ディスプレイを介して外部の光を取得し、撮像する。固体撮像装置 10 は、前述の各実施形態で示したように、入射する光を光電変換する受光素子と、受光素子に入射する光の色を制御する光学フィルタと、光学フィルタを介して入射した光又は光学フィルタに入射する光を複数の周波数帯域において取得するマルチバンドパスフィルタとを有する。

　光学フィルタは、取得したい複数の色のスペクトルに対してそれぞれの色に応じた透過帯域を有するフィルタであり、受光素子ごとに入射する色を制御する。

　マルチバンドパスフィルタは、透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの色に対応するフィルタにおける透過光のピークと異なる周波数を有する。

　前述したように、スマートフォンやタブレット端末においても、通常のカメラとして固体撮像装置 10 を備えることもできるし、これら以外のデバイスにおける撮像素子として、本開示の固体撮像装置 10 を備えることもできる。

　なお、前述の各実施形態においては、信号処理回路 140 又は処理回路 12 が汎用プロセッサであり、このプロセッサにおいて所定の波長の強度を抽出したり、スペクトルの特性を取得したりしたが、これに限定されるものではない。例えば、固体撮像装置 10 の内部又は外部において、電子機器 1 は、専用の波長抽出回路を備えてもよい。この波長抽出回路は、 ASIC でもよいし、汎用プロセッサを用いてソフトウェアで波長抽出が実行可能に備えられるものであってもよい。

　前述した実施形態は、以下のような形態としてもよい。

(1)
　入射する光を光電変換する、受光素子と、
　前記受光素子に入射する光の色を制御する、光学フィルタと、
　前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する、マルチバンドパスフィルタと、
　を備え、
　前記光学フィルタは、
　　複数の前記色に対応するフィルタであり、
　　前記受光素子ごとに入射する前記色を制御し、
　前記マルチバンドパスフィルタは、
　　透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する、
　固体撮像装置。

(2)
　複数の前記色は、スペクトルのピーク周波数が異なる、
　(1)に記載の固体撮像装置。

(3)
　前記光学フィルタは、カラーフィルタ、プラズモンフィルタ又は有機光電変換膜のうち少なくとも 1 つである、
　(1)又は(2)に記載の固体撮像装置。

(4)
　前記マルチバンドパスフィルタは、透過帯域の半値幅が前記複数の色のそれぞれに対応する前記光学フィルタの半値幅より狭い、
　(1)から(3)のいずれかに記載の固体撮像装置。

(5)
　前記マルチバンドパスフィルタは、装置内において塗布、接着又は成膜により一体形成されている、
　(1)から(4)のいずれかに記載の固体撮像装置。

(6)
　前記マルチバンドパスフィルタは、前記複数の色のそれぞれに対応する前記光学フィルタの透過周波数帯において、複数の透過帯域を備える、
　(1)から(5)のいずれかに記載の固体撮像装置。

(7)
　前記受光素子は、前記マルチバンドパスフィルタを介して、複数の分光ピークを有する信号を出力する、
　(6)に記載の固体撮像装置。

(8)
　前記受光素子は、
　　前記マルチバンドパスフィルタを介して光が入射する、第 1 受光素子と、
　　前記マルチバンドパスフィルタを介せずに光が入射する、第 2 受光素子と、
　を備え、
　前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、信号を取得する、
　(1)から(7)のいずれかに記載の固体撮像装置。

(9)
　前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、スペクトル推定を実行する、
　(8)に記載の固体撮像装置。

(10)
　前記マルチバンドパスフィルタは、
　　第 1 マルチバンドパスフィルタと、
　　前記第 1 マルチバンドパスフィルタと異なる透過帯域を有する、第 2 マルチバンドパスフィルタと、
　を備え、
　前記受光素子は、
　　前記第 1 マルチバンドパスフィルタを介して光が入射する、第 3 受光素子と、
　　前記第 2 マルチバンドパスフィルタを介して光が入射する、第 4 受光素子と、
　を備え、
　前記第 3 受光素子の出力と、前記第 4 受光素子の出力とに基づいて、信号を取得する
　(1)から(9)のいずれかに記載の固体撮像装置。

(11)
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　をさらに備える、(1)から(10)のいずれかに記載の固体撮像装置。

(12)
　前記マルチバンドパスフィルタは、
　　第 3 マルチバンドパスフィルタと、
　　前記第 3 マルチバンドパスフィルタとは異なる透過帯域を有する、第 4 マルチバンドパスフィルタと、
　を備え、
　前記受光素子は、像高に対して異なる透過帯域を有するように前記第 3 マルチバンドパスフィルタと、前記第 4 マルチバンドパスフィルタと、を介して光が入射され、
　前記波長抽出回路は、異なる前記像高における同一対象から受光した光に対する波長抽出パラメータを用いて、波長抽出を実行する、
　(11)に記載の固体撮像装置。

(13)
　前記波長抽出回路は、前記第 3 マルチバンドパスフィルタを介して取得した信号と、前記第 4 マルチバンドパスフィルタを介して取得した信号とを合成して、前記波長抽出を実行する、
　(12)に記載の固体撮像装置。

(14)
　前記波長抽出回路は、異なるフレームにおいて取得された信号に基づいて、前記波長抽出を実行する、
　(12)又は(13)に記載の固体撮像装置。

(15)
　発光素子が射出する光で画像情報を表示する、ディスプレイと、
　前記ディスプレイの発光面と逆側において、前記ディスプレイを介して撮像する、撮像素子であって、
　　入射する光を光電変換する、受光素子と、
　　前記受光素子に入射する光の色を制御する、光学フィルタと、
　　前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する、マルチバンドパスフィルタと、
　を有する撮像素子と、
　を備え、
　前記光学フィルタは、
　　複数の前記色に対応するフィルタであり、
　　前記受光素子ごとに入射する前記色を制御し、
　前記マルチバンドパスフィルタは、
　　透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する、
　電子機器。

(16)
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　を、前記撮像素子の内部に備える、(15)に記載の電子機器。

(17)
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　を、前記撮像素子の外部に備える、(15)に記載の電子機器。

　本開示の態様は、前述した実施形態に限定されるものではなく、想到しうる種々の変形も含むものであり、本開示の効果も前述の内容に限定されるものではない。各実施形態における構成要素は、適切に組み合わされて適用されてもよい。すなわち、特許請求の範囲に規定された内容及びその均等物から導き出される本開示の概念的な思想と趣旨を逸脱しない範囲で種々の追加、変更及び部分的削除が可能である。

1: 電子機器、
10: 固体撮像装置、
　100: 光学系、
　101: レンズ、
　102: マルチバンドパスフィルタ、
　103: バンドパスフィルタ、
　110: 撮像素子、
　120: 画素、
　121: 受光素子、
　122: 平坦化膜、
　123: カラーフィルタ、
　124: オンチップレンズ、
　140: 信号処理回路、
　160: 記憶回路、
　180: インタフェース、
12: 処理回路、
14: 記憶回路、
16: 入出力部、

Claims

　入射する光を光電変換する、受光素子と、
　前記受光素子に入射する光の色を制御する、光学フィルタと、
　前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する、マルチバンドパスフィルタと、
　を備え、
　前記光学フィルタは、
　　複数の前記色に対応するフィルタであり、
　　前記受光素子ごとに入射する前記色を制御し、
　前記マルチバンドパスフィルタは、
　　透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する、
　固体撮像装置。
　複数の前記色は、スペクトルのピーク周波数が異なる、
　請求項1に記載の固体撮像装置。
　前記光学フィルタは、カラーフィルタ、プラズモンフィルタ又は有機光電変換膜のうち少なくとも 1 つである、
　請求項1に記載の固体撮像装置。
　前記マルチバンドパスフィルタは、透過帯域の半値幅が前記複数の色のそれぞれに対応する前記光学フィルタの半値幅より狭い、
　請求項1に記載の固体撮像装置。
　前記マルチバンドパスフィルタは、装置内において塗布、接着又は成膜により一体形成されている、
　請求項1に記載の固体撮像装置。
　前記マルチバンドパスフィルタは、前記複数の色のそれぞれに対応する前記光学フィルタの透過周波数帯において、複数の透過帯域を備える、
　請求項1に記載の固体撮像装置。
　前記受光素子は、前記マルチバンドパスフィルタを介して、複数の分光ピークを有する信号を出力する、
　請求項6に記載の固体撮像装置。
　前記受光素子は、
　　前記マルチバンドパスフィルタを介して光が入射する、第 1 受光素子と、
　　前記マルチバンドパスフィルタを介せずに光が入射する、第 2 受光素子と、
　を備え、
　前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、信号を取得する、
　請求項1に記載の固体撮像装置。
　前記第 1 受光素子の出力と、前記第 2 受光素子の出力とに基づいて、スペクトル推定を実行する、
　請求項8に記載の固体撮像装置。
　前記マルチバンドパスフィルタは、
　　第 1 マルチバンドパスフィルタと、
　　前記第 1 マルチバンドパスフィルタと異なる透過帯域を有する、第 2 マルチバンドパスフィルタと、
　を備え、
　前記受光素子は、
　　前記第 1 マルチバンドパスフィルタを介して光が入射する、第 3 受光素子と、
　　前記第 2 マルチバンドパスフィルタを介して光が入射する、第 4 受光素子と、
　を備え、
　前記第 3 受光素子の出力と、前記第 4 受光素子の出力とに基づいて、信号を取得する
　請求項1に記載の固体撮像装置。
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　をさらに備える、請求項1に記載の固体撮像装置。
　前記マルチバンドパスフィルタは、
　　第 3 マルチバンドパスフィルタと、
　　前記第 3 マルチバンドパスフィルタとは異なる透過帯域を有する、第 4 マルチバンドパスフィルタと、
　を備え、
　前記受光素子は、像高に対して異なる透過帯域を有するように前記第 3 マルチバンドパスフィルタと、前記第 4 マルチバンドパスフィルタと、を介して光が入射され、
　前記波長抽出回路は、異なる前記像高における同一対象から受光した光に対する波長抽出パラメータを用いて、波長抽出を実行する、
　請求項11に記載の固体撮像装置。
　前記波長抽出回路は、前記第 3 マルチバンドパスフィルタを介して取得した信号と、前記第 4 マルチバンドパスフィルタを介して取得した信号とを合成して、前記波長抽出を実行する、
　請求項12に記載の固体撮像装置。
　前記波長抽出回路は、異なるフレームにおいて取得された信号に基づいて、前記波長抽出を実行する、
　請求項12に記載の固体撮像装置。
　発光素子が射出する光で画像情報を表示する、ディスプレイと、
　前記ディスプレイの発光面と逆側において、前記ディスプレイを介して撮像する、撮像素子であって、
　　入射する光を光電変換する、受光素子と、
　　前記受光素子に入射する光の色を制御する、光学フィルタと、
　　前記光学フィルタを介して入射した光、又は、前記光学フィルタに入射する光を、複数の周波数帯において取得する、マルチバンドパスフィルタと、
　を有する撮像素子と、
　を備え、
　前記光学フィルタは、
　　複数の前記色に対応するフィルタであり、
　　前記受光素子ごとに入射する前記色を制御し、
　前記マルチバンドパスフィルタは、
　　透過する周波数帯のピークのうち少なくとも 1 つが、それぞれの前記複数の色に対応するフィルタにおける透過光のピークと異なる周波数を有する、
　電子機器。
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　を、前記撮像素子の内部に備える、請求項15に記載の電子機器。
　前記受光素子が出力する信号について、所定波長の光の強度を抽出する、波長抽出回路、
　を、前記撮像素子の外部に備える、請求項15に記載の電子機器。