JP6976751B2 - 撮像装置および撮像装置の製造方法、並びに、電子機器 - Google Patents

撮像装置および撮像装置の製造方法、並びに、電子機器 Download PDF

Info

Publication number
JP6976751B2
JP6976751B2 JP2017132696A JP2017132696A JP6976751B2 JP 6976751 B2 JP6976751 B2 JP 6976751B2 JP 2017132696 A JP2017132696 A JP 2017132696A JP 2017132696 A JP2017132696 A JP 2017132696A JP 6976751 B2 JP6976751 B2 JP 6976751B2
Authority
JP
Japan
Prior art keywords
state image
image sensor
solid
image pickup
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017132696A
Other languages
English (en)
Other versions
JP2019016684A (ja
Inventor
勝治 木村
一真 谷田
文彦 半澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Priority to JP2017132696A priority Critical patent/JP6976751B2/ja
Priority to PCT/JP2018/023758 priority patent/WO2019009098A1/en
Priority to CN201880043503.3A priority patent/CN110809822A/zh
Priority to US16/625,186 priority patent/US11553118B2/en
Publication of JP2019016684A publication Critical patent/JP2019016684A/ja
Application granted granted Critical
Publication of JP6976751B2 publication Critical patent/JP6976751B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14618Containers
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14634Assemblies, i.e. Hybrid structures
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14683Processes or apparatus peculiar to the manufacture or treatment of these devices or parts thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14623Optical shielding

Landscapes

  • Engineering & Computer Science (AREA)
  • Power Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Studio Devices (AREA)
  • Endoscopes (AREA)

Description

本開示は、撮像装置および撮像装置の製造方法、並びに、電子機器に関し、特に、撮像装置内の光の内部反射によるフレア現象を低減し、好適な画質を得られる撮像装置および撮像装置の製造方法、並びに、電子機器に関する。
近年、カメラ付き移動体端末装置、およびデジタルスチルカメラなどの撮像装置において、カメラの高画素化および小型化、薄型化が進んでいる。小型化、薄型化の手法としては、固体撮像素子をCSP(Chip Size Package)型にすることが一般的である(例えば、特許文献1参照)。
国際公開公報2016−056510号
しかしながら、特許文献1の構造では、撮像装置内の光の内部反射(以下光の内乱と称す)によるフレア現象により、画質低下が発生することがあった。
本開示は、このような状況に鑑みてなされたものであり、特に、CSP型の固体撮像素子を用い、小型、低背な撮像装置と合わせて、撮像装置内の光の内乱によるフレア現象を低減し、好適な画質を得ることができる撮像装置を提供することを特徴とする。
本開示の一側面の撮像装置は、受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、前記固体撮像素子を固定するガラス基板とを有し、前記固体撮像素子および前記ガラス基板が一体となったCSP(Chip Size Package)固体撮像素子と、前記光電変換された電気信号を外部に転送する回路を有した回路基板と、前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることで、前記回路基板固定するためのスペーサと、前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材とを含むである。
前記CSP固体撮像素子には、前記受光した光を集光する複数のレンズからなるレンズ群の一部からなり、前記固体撮像素子の前段であって、かつ、前記レンズ群の一部である上位層レンズよりも前記固体撮像素子に近い位置に配置される、前記レンズ群の前記一部と異なる他の一部である下位層レンズをさらに含ませるようにすることができる。
前記光吸収材は、さらに、前記下位層レンズを透過する光のうち、前記CSP固体撮像素子の有効画素エリアに入射する入射光を遮光しない範囲で、前記下位層レンズの外周部を覆うように設けられるようにすることができる。
前記CSP固体撮像素子には、受光した光より赤外光を削除する赤外カットフィルタをさらに含ませるようにすることができ、前記固体撮像素子と前記ガラス基板とが透明の接着剤により接着され、前記ガラス基板と前記赤外カットフィルタとが透明の接着材により接着され、前記最下層レンズは、前記赤外カットフィルタ上、または、前記ガラス基板上の少なくともいずれかに配置されるようにすることができる。
前記回路基板を生成する材料は、その線膨張率が、前記固体撮像素子の線膨張率に近い材料とすることができる。
前記固定部には、方形の前記固体撮像素子の少なくとも2辺以上の辺を前記回路基板上の所定の位置に誘導させるようにすることができる。
前記固定部には、方形の前記固体撮像素子の4か所の角部を前記回路基板上の所定の位置に誘導させるようにすることができる。
前記CSP固体撮像素子は、受光した光より赤外光を削除する赤外カットフィルタをさらに含ませるようにすることができ、前記赤外カットフィルタは、前記ガラス基板と前記固体撮像素子との間に配置されるようにすることができる。
前記受光した光を集光するレンズ群の上位層レンズと、前記上位層レンズにより前記受光した光を所定の位置に合焦させる合焦部とをさらに含ませるようにすることができる。
前記合焦部には、前記上位層レンズを駆動することにより前記受光した光を所定の位置に合焦させるように調整するアクチュエータを含ませるようにすることができる。
前記アクチュエータには、前記上位層レンズを駆動させることで、前記合焦させる機能および手ぶれ補正機能の少なくともいずれかを設けるようにさせることができる。
前記ガラス基板には、反りおよび歪みの小さい、赤外カットフィルタとしての機能をもうけるようにさせることができる。
前記ガラス基板は、青板ガラスとすることができる。
前記受光した光を集光するレンズ群の一部からなる上位層レンズと、前記受光した光より赤外光を削除する赤外カットフィルタをさらに含ませるようにすることができ、前記赤外カットフィルタは、前記CSP固体撮像素子とは別体であって、かつ、前記上位層レンズと前記固体撮像素子との間に配置されるようにすることができる。
前記回路基板には、前記固体撮像素子より出力される画素信号を外部に出力するコネクタ、または、ACF(Anisotropic Conductive Film)端子を含ませるようにすることができる。
本開示の一側面の撮像装置の製造方法は、受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、前記固体撮像素子を固定するガラス基板とを有し、前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、前記光電変換された電気信号を外部に転送する回路を有した回路基板と、前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることでおよび、前記回路基板固定するためのスペーサと、前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材とを含み、前記スペーサは、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部を有する撮像装置の製造方法であって、前記CSP固体撮像素子を前記開口部に配置して前記回路基板に固定する工程と、前記スペーサの前記固定部で前記CSP固体撮像素子を前記回路基板上の所定の位置に誘導するようにはめ込んで前記CSP固体撮像素子を前記回路基板に固定する工程と、前記光吸収材が前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する工程を含む撮像装置の製造方法である。
本開示の一側面の電子機器は、受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、前記固体撮像素子を固定するガラス基板とを有し、前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、前記光電変換された電気信号を外部に転送する回路を有した回路基板と、前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることでおよび、前記回路基板固定するためのスペーサと、前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材とを含む電子機器である。
本開示の一側面においては、受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、前記固体撮像素子を固定するガラス基板とを有し、前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、前記光電変換された電気信号を外部に転送する回路を有した回路基板と、前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることで、前記回路基板固定するためのスペーサと、前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材とが設けられる。
本開示の一側面によれば、CSP型の固体撮像素子を用いる際に生じ易い固体撮像装置内部の光の内乱によるフレア現象を低減させることで、好適な画質を得られる固体撮像装置を提供することが可能となる。
本開示の撮像装置の第1の実施の形態の構成例を説明する図である。 スペーサに設けられた固定部の構成を説明する図である。 フレア現象を低減させる原理を説明する図である。 フレア現象を低減させる原理を説明する図である。 レンズの外周部に固定剤またはマスクを構成する例を説明する図である。 CSP固体撮像素子の側面周囲に固定剤を構成し、レンズの外周部にマスクを構成する例を説明する図である。 図1の撮像装置の製造方法を説明するフローチャートである。 本開示の撮像装置の第2の実施の形態の構成例を説明する図である。 本開示の撮像装置の第3の実施の形態の構成例を説明する図である。 本開示の撮像装置の第4の実施の形態の構成例を説明する図である。 本開示の撮像装置の第5の実施の形態の構成例を説明する図である。 本開示の撮像装置の第6の実施の形態の構成例を説明する図である。 本開示の撮像装置の第7の実施の形態の構成例を説明する図である。 固定部の配置例を説明する図である。 本開示の撮像装置の第8の実施の形態の構成例を説明する図である。 本開示の撮像装置の第9の実施の形態の構成例を説明する図である。 本開示の撮像装置の第10の実施の形態の構成例を説明する図である。 本開示のCSP固体撮像素子の構成例を説明する図である。 本開示の撮像装置の構成を適用した電子機器としての撮像装置の構成例を示すブロック図である 本開示の技術を適用した撮像装置の使用例を説明する図である。 体内情報取得システムの概略的な構成の一例を示すブロック図である。 内視鏡手術システムの概略的な構成の一例を示す図である。 カメラヘッドおよびCCUの機能構成の一例を示すブロック図である。 車両制御システムの概略的な構成の一例を示すブロック図である。 車外情報検出部および撮像部の設置位置の一例を示す説明図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、以下の順序で説明を行う。
1.第1の実施の形態
2.第2の実施の形態
3.第3の実施の形態
4.第4の実施の形態
5.第5の実施の形態
6.第6の実施の形態
7.第7の実施の形態
8.第8の実施の形態
9.第9の実施の形態
10.第10の実施の形態
11.CSP固体撮像素子の構成について
12.電子機器への適用例
13.撮像素子の使用例
14.体内情報取得システムへの応用例
15.内視鏡手術システムへの応用例
16.移動体への応用例
<<1.第1の実施の形態>>
図1は本開示の固体撮像素子を適用した撮像装置の第1の実施の形態を説明する構造図である。図1は、図中の上部が、撮像装置の側面断面図であり、下部が、上部のAB’断面の上面図である。ただし、図1の上部の左半分は、下部のAA’断面であり、図1の上部の右半分は、下部のBB’断面である。
図1の撮像装置は、CSP(Chip Size Package)固体撮像素子20、回路基板7、アクチュエータ8、スペーサ10、並びに、レンズ61,62より構成されている。図1の撮像装置におけるレンズは、レンズ61,62からなる2群に分離されており、上位層のレンズ61から光の透過方向に対して、最下位層のレンズ62を固体撮像素子1の直上に配置する構成とされている。
図1のCSP(Chip Size Package)固体撮像素子20は、固体撮像素子1、ガラス基板2、赤外カットフィルタ4、およびレンズ62が一体構造として形成された撮像素子である。
より詳細には、固体撮像素子1は、例えば、CCD(Charged Coupled Devices)またはCMOS(Complementary Metal Oxide Semiconductor)などからなるイメージセンサであり、レンズ6を介して入射する光を、光量に応じて光電変換により電荷を発生し、対応する電気信号からなる画素信号を出力する。固体撮像素子1およびガラス基板2は、透明の接着剤31により接着されている。赤外カットフィルタ4は、赤外光をカットするフィルタであり、ガラス基板2と透明の接着剤32により接着されている。最下位層のレンズ62は赤外カットフィルタ4上に成形されている。
CSP固体撮像素子20は、図1で示されるような構成により、組み立て工程においては、1部品として扱われる。
レンズ61は、レンズ61,62からなる2群を1つの光学系としたときの1群を構成しており、被写体光を固体撮像素子1の撮像面に対して集光するための1枚以上のレンズから形成される。
アクチュエータ8は、レンズ61を固体撮像素子1に対向する方向に対して、図中の上下および水平方向に駆動させることで、オートフォーカスおよび手振れ補正機能の少なくともいずれか一つ以上の機能を備える。
回路基板7は、CSP固体撮像素子20の電気信号を外部に出力する。スペーサ10は、回路基板7、およびCSP固体撮像素子20の光を吸収する、例えば、黒色樹脂などからなる固定剤13により接続することで、固定する。また、スペーサ10は、図中の上面部分においてアクチュエータ8を搭載することでレンズ6、およびアクチュエータ8を固定する。
回路基板7やスペーサ10は、CSP固体撮像素子20の固体撮像素子1およびアクチュエータ8の駆動に必要なコンデンサやアクチュエータ制御LSI(Large-Scale Integration)などの半導体部品12が実装される。
さらに、CSP固体撮像素子20は、図2で示されるように、スペーサ10に設けられた固定部11−1乃至11−4により、4か所の角部が、はめ込まれる構成とされており、角部がはめ込まれるだけで回路基板7に対して固定剤13が注入される前の状態でも、重力の作用のみで、回路基板7上の略適切な位置に誘導し固定することができる。換言すれば、固定部11−1乃至11−4は、CSP固体撮像素子20が、スペーサ10の開口部にはめ込まれると、CSP固体撮像素子20の4か所の角部を回路基板7上の適切な位置に誘導するように、スペーサ10に形成されているものである。
尚、固定部11−1乃至11−4は、CSP固体撮像素子20がスペーサ10の開口部の適切な位置に配置されるとき、CSP固体撮像素子20との間には、交差が許容される範囲で、極僅かに隙間が生じるサイズに構成されている。しかしながら、固定部11−1乃至11−4は、CSP固体撮像素子20に反り、歪み、または、収縮などが生じるときには、CSP固体撮像素子20に当接して適切な位置に誘導し、CSP固体撮像素子20の反り、歪み、または、収縮による、傾きやずれの発生を防止する構造である。
したがって、CSP固体撮像素子20は、固定部11−1乃至11−4に、4か所の角部を合わせて、スペーサ10に対してはめ込まれるように載置されることにより、自重による重力の作用を受けて、固定部11−1乃至11−4により、回路基板7上の適切な位置に誘導されるように配置することが可能となる。
また、回路基板7上の適切な位置に誘導されて配置された後、CSP固体撮像素子20とスペーサ10との間の空間に固定剤13が注入されても、位置がずれないので、固定剤13が乾燥して固着(硬化)するまでの間に、固定剤13が変形するなどしても、回路基板7に対して、CSP固体撮像素子20の歪み、反り、および傾きを防止することができる。
尚、スペーサ10にも回路基板7と同様の回路構成を持たせるような構成としてもよい。また、回路基板7の材質は、固体撮像素子1の材質であるシリコンの線膨張率に近い(線膨張率が類似した)材質であることや、所定の弾性率よりも低い低弾性率の材質であることが望ましい。
さらに、アクチュエータ8は、オートフォーカスおよび手振れ補正機能のいずれか一つ以上を有したものでもよいし、オートフォーカスおよび手振れ補正のいずれも有しない、短焦点のレンズホルダでもよい。
また、オートフォーカスや手振れ補正に関してはアクチュエータ以外で実現してもよい。
また、上述した固定剤13を用いることなく、CSP固体撮像素子20を回路基板7上に
固定しただけでは、図3の左上部で示されるような、光の内乱によるフレア現象が発生することが知られている。すなわち、図3の左上部においては、例えば、点線で示されるような入射光が入射すると、範囲Z1,Z2で示されるように、レンズ62の側面部の端面や、赤外カットフィルタ4の側面部の端面などで反射し、CSP固体撮像素子20に入射する。このような反射により、画像P1,P2で示されるようなフレア現象が発生する。尚、画像P11は、図3の左上部の構成におけるCSP固体撮像素子20の固体撮像素子1により撮像された画像の例である。
そこで、例えば、図3の左下部の一体構造として形成されたCSP固体撮像素子20のサイド(側面周辺)に、光を吸収する黒色樹脂などの光吸収材を含む固定剤13を埋め込むことで反射を防止することが考えられる。しかしながら、図3の左下部のように、CSP固体撮像素子20のサイド(側面周辺)に、光を吸収する黒色樹脂などからなる固定剤13を埋め込むように用いたとしても、サイド(側面周辺)の全体を完全に覆わないと、例えば、範囲Z11で示されるように、点線で示されるような入射光によりレンズ62の側面部の端部での反射が発生し、CSP固体撮像素子20に入射してしまうことがある。
結果として、光の内乱が発生し、画像P11で示されるようなフレア現象が発生してしまう。また、図4の左部における範囲Z41で示されるように、点線で示される入射光がスペーサ10に反射することにより、光の内乱が生じて、画像P41で示されるように、フレア現象が発生することも知られている。
図1の撮像装置は、上述したフレア現象を抑制するために、例えば、図3の右上部で示されるように、光を吸収する黒色樹脂などの光吸収材を含む固定剤13を、レンズ62の入射光の入射面の周辺部からレンズ62、赤外光カットフィルタ4、固体撮像素子1、ガラス基板2、および接着剤31,32を含む、側面周辺の全体を覆うように用いている。このため、図3の右上部で示される範囲Z21,Z22で示されるように、点線で示される入射光が入射しても吸収されて反射されることがなくなる。結果として、例えば、画像P21で示されるように、フレア現象による影響が低減される。
また、図4の右部で示されるように、光を吸収する黒色などの固定剤13をCSP固体撮像素子20の側面周囲の全体を覆いつつ、スペーサ4までの空間を全て埋めるように用いることで、範囲Z51で示されるように、点線で示される入射光がスペーサ4に反射されても吸収されることにより反射が抑制され、スペーサ4からの光の内乱によるフレア現象の発生も抑制することが可能となる。尚、光を吸収する黒色樹脂などの光吸収材からなる固定剤13は、例えば、反射率5%以下のものを使用することが好ましい。
なお、図1の撮像装置では、CSP固体撮像素子20の傾き防止のためにスペーサのガラス基板2および固体撮像素子1の傾きを補正する固定部11が搭載されているが、CSP固体撮像素子20と傾きを補正する固定部11との間に光を吸収する黒色樹脂などの光吸収材からなる固定剤13を充填できない場合は傾きを補正する固定部11の壁(表面)に黒色の光吸収材からなるマスク(図5を参照して説明するマスク81と同一のもの)を塗っておく処理(マスク処理)をすることで同じ効果を得ることができる。
すなわち、図3の右下部で示されるように、スペーサ4のガラス基板および固体撮像素子の傾きを補正する固定部11の表面に黒色の光吸収材からなるマスクを塗布するマスク処理を行うようにしてもよい。このような構成により、図3の右下部で示される範囲Z31で示されるように、点線で示される入射光が入射しても吸収されて反射されることがなくなる。結果として、例えば、画像P31で示されるように、フレア現象による影響が低減される。
上述した図3の右上部および右下部で示されるように、CSP固体撮像素子20の側面周辺の全体を覆うように、光を吸収する黒色樹脂などの光吸収材からなる固定剤13を設ける、または、固定部11の壁(表面)に光を吸収する黒色の光吸収材からなるマスクを塗布する例について説明してきた。しかしながら、図1の撮像装置においては、さらに、固定剤13、およびマスクのいずれかの光吸収材が、CSP固体撮像素子20の側面周辺の全体のみならず、最下位層のレンズ62の入射光が入射する入射面の一部も遮光するように設けられている。
すなわち、図5の左上部で示されるように、CSP固体撮像素子20の周囲に黒色樹脂などの光吸収材からなる固定剤13を埋め込む場合、レンズ62により集光される光の光路Lで示されるように、CSP固体撮像素子20に入射する入射光が有効画素エリアZ101内となる領域以外の黒マスクエリアZ102を覆うように、固定剤13は埋め込まれている(塗布されている)。
すなわち、有効画素エリアZ101に入射されるレンズ62からの光線は、CSP固体撮像素子20の有効画素エリアZ101の画素に対して外側から鋭角に入射されることが一般的であり、これによりフレア現象が発生する恐れがある。そこで、最下位層のレンズ62の外周部であるマスクエリアZ102には、図5の左部で図示されるように、最下位層レンズ62の外周部まで黒色樹脂などの光吸収材からなる固定剤13が埋め込まれている(塗布されている)。
尚、最下位層レンズ62の外周部を囲むマスクエリアZ102の大きさについては、上レンズ61や、CSP固体撮像素子20の画素のマイクロレンズの設計値から算出される。
また、固体撮像素子20の側面周辺およびレンズ62の外周部を含むマスクエリアZ102については、固定剤13ではなく、例えば、図5の右部で示されるように、黒色の光吸収材からなるマスク81により構成してもよい。このような構成においても、フレア現象の発生を抑制することができる。
さらに、図6の左部で示されるように、CSP固体撮像素子20の側面周辺については、固定剤13が埋め込まれるように構成され、レンズ62上のマスクエリアZ102については、マスク81が形成されるようにしてもよい。
ところで、固体撮像装置の生産時に、黒色樹脂などの光吸収材からなる固定剤13の塗布を塗布装置で最下位層レンズ62のマスクエリアZ102まで高精度で塗布する場合、塗布装置が高価のものとなる、または、高度な制御が必要になる可能性があり、いずれにおいてもコストを増大させる恐れがある。
そこで、図6の右部で示されるように、最下位層のレンズ62のマスクエリアZ102のみにマスク処理を施しておくことにより予めマスク81を形成しておくことで、固体撮像装置の生産時に黒色樹脂などの光吸収材からなる固定剤13の塗布の精度を軽減することができる。結果として、塗布装置に係る精度や制御の難易度を低減させることが可能となり、コストを低減させることが可能となる。
なお、最下位層のレンズ62へのマスク81の塗布は、予めCSP固体撮像素子20に形成する前の段階で、最下位層のレンズ62自体に直接するようにしてもよいし、最下位層のレンズ62をCSP固体撮像素子20に成形してから塗布するようにしてもよい。
<撮像装置の製造方法>
次に、図7のフローチャートを参照して、図1の撮像装置の製造方法について説明する。
ステップS11において、CSP固体撮像素子20が、回路基板7上に搭載される。
ステップS12において、スペーサ10の固定部11−1乃至11−4が、CSP固体撮像素子20の4か所の角部をそれぞれ回路基板7上の適切な位置に誘導するようにはめ込まれた状態で、スペーサ10が回路基板7に接着剤で搭載される。この結果、CSP固体撮像素子20は、自重の重力の作用により、固定部11−1乃至11−4により誘導されて、薄くたわみなどが発生し易い回路基板7上であっても、回路基板7上の電気的に接続が可能な適切な位置に配置される。
ステップS13において、CSP固体撮像素子20とスペーサ10との空間に光の内乱によるフレア現象を抑制するために、サイド(側面周辺)からの光の反射を抑制できるように光を吸収する黒色樹脂などの光吸収材からなる固定剤13が注入され、ステップS14において、固定剤13が硬化(固着)される。なお、固定剤13は、サイド(側面周囲)からの光の反射を抑制できるようにCSP固体撮像素子20の底辺部からレンズ62の外周部まで塗布される。固定剤13は、この結果、CSP固体撮像素子20、スペーサ10、および回路基板7が固定剤13を介して固着されることになる。固定剤13が注入された後、固定剤13が固着するまでの間も、CSP固体撮像素子20は、固定部11−1乃至11−4により適切な位置に配置された状態が維持されるので、歪み、反り、および傾きを発生させることなく、適切に固定される。
ステップS15において、スペーサ10に対して、アクチュエータ8が搭載される。
マスク81を用いる場合については、予め固定部11の壁(表面)にマスク81を塗布しておく工程が必要とされる。
さらに、最下位層のレンズ62の外周部にマスク81を塗布する場合には、最下位層のレンズ62の外周部にマスク81を塗布する工程が必要となる。
以上の一連の製造方法により、CSP固体撮像素子20が、薄くたわみやすい回路基板7に対して適切な位置に配置された状態で、固定剤13により固着させることが可能となる。
結果として、撮像装置の歩留まりや光学性能の低下を抑制することが可能となり、また、光の内乱によるフレア現象を抑制できる高性能な小型で、かつ、薄型の撮像装置を実現することが可能となる。
<<2.第2の実施の形態>>
近年、市場のカメラ小型化の要求により、図1の撮像装置におけるレンズ61,62からなる2群レンズをレンズ6の1群レンズに統合し、本開示の撮像装置についても同様の構成を採用するようにしてもよい。
また、例えば、レンズの構成として、図8の撮像装置で示されるように、最下位層のレンズ62を赤外カットフィルタ4上に配置するように構成してもよい。このような構成にすることで、図1の撮像装置と同様に光学的な歪みや傾きを低減した小型で、かつ、薄型の撮像装置を実現することができる。
尚、図8の撮像装置におけるCSP固体撮像素子20には、図1のCSP固体撮像素子20の構成に加えて、最下位層のレンズ62が、図中の最上層に加えられて一体化された構成となっている。
尚、複数のレンズからレンズ6が構成される場合について、2群以上に分けるようにしてもよい。また、各郡は、少なくとも1枚以上のレンズより構成される限り、それぞれの群を構成するレンズの枚数は、必要に応じて何枚であってもよい。
以上のような構成においても、撮像装置の歩留まりや光学性能の低下を抑制することが可能となり、また、光の内乱によるフレア現象を抑制できる高性能な小型で、かつ、薄型の撮像装置を実現することが可能となる。
<<3.第3の実施の形態>>
近年、市場のカメラ商品の多様化により、撮像装置の回路基板7の形状が商品毎に変更されることが知られている。そこで、図9で示されるように、コネクタ9に代えて、回路基板7上にACF(Anisotropic Conductive Film)機構91を設けるようにして、撮像装置としての生産方式を変更することなく、カメラ商品の多様化に応じた光学的な反り、歪み、および傾きを低減した小型で、かつ、薄型の撮像装置を実現するようにしてもよい。
<<4.第4の実施の形態>>
図1,図8,図9の撮像装置において採用されている赤外カットフィルタ4は、反りや歪が小さいものが使用されているが、反りや歪みが小さい赤外カットフィルタ4は高価であることが知られている。
また、赤外カットフィルタ4は、CSP固体撮像素子20に搭載においては、反りや歪みが固体撮像素子1の歪み、反り、および傾きに影響するため、高価な赤外カットフィルタ4を実装しなければならないことも知られている。
そこで、赤外カットフィルタ4は、CSP固体撮像素子20の外部構成として、撮像装置に搭載するようにしてもよい。
図10は、赤外カットフィルタ4をCSP固体撮像素子20の外部構成とし、アクチュエータ8の最下部に搭載するようにした撮像装置の構成例を示している。
図10の撮像装置は、赤外カットフィルタ4をCSP固体撮像素子20の外部である、アクチュエータ8の最下部に搭載している。このような構成により、安価な赤外カットフィルタ4を用いるようにしても、CSP固体撮像素子20の外部構成とされているので、光学的な歪みや傾きを低減することが可能となる。
結果として、撮像装置の歩留まりや光学性能の低下を抑制することが可能となり、また、光の内乱によるフレア現象を抑制できる高性能な小型で、かつ、薄型の撮像装置を実現することが可能となる。
尚、図10の撮像装置におけるCSP固体撮像素子20は、図1のCSP固体撮像素子20の構成から赤外カットフィルタ4が除かれた構成とされている。
さらに、図10の撮像装置におけるCSP固体撮像素子20は、ガラス基板2については、周囲にフレーム2aを設けて、固体撮像素子1とガラス基板2との間にキャビティ2bが設けられる構成とされており、いわゆる、キャビティ構造とされている。また、本開示の撮像装置においては、CSP固体撮像素子20は、図1,図8,図9で示されるようなキャビティ2bを持たない、いわゆる、キャビティレス構造でもよいし、キャビティ構造でもよい。
<<5.第5の実施の形態>>
以上においては、赤外カットフィルタ4をアクチュエータ8の最下部に搭載することで、CSP固体撮像素子20に一体化させないようにして、反りや歪みの小さい赤外カットフィルタ4を採用できるようにすることで、コストを低減させる例について説明してきたが、赤外カットフィルタ4に代えて、ガラス基板2と同様の材質であって、赤外光を削減可能なものを利用するようにしてもよい。
すなわち、反りや歪みが小さい赤外カットフィルタ4は、図1,図8,図9の撮像装置の基軸となるガラス基板2を代用することができる。
図11は、反りや歪みが小さい赤外カットフィルタ4に代えて、図1,図8,図9の撮像装置の基軸となるガラス基板2と同様の材質からなる赤外光の削減が可能なガラス基板41を用いた撮像装置の構成例を示している。
このような構成により、反りや歪みが小さい高価な赤外カットフィルタ4を用いることなく、反りや歪を抑制することができるので、光学的な反り、歪み、および傾きの少ない、小型で、かつ、薄型の撮像装置を、低コストで実現させることが可能となり、また、光の内乱によるフレア現象を抑制できる。
尚、図11の撮像装置におけるCSP固体撮像素子20は、図9のCSP固体撮像素子20の構成から赤外カットフィルタ4が除かれ、ガラス基板2に代えて、赤外光のカットが可能なガラス基板41が含まれた構成とされ、透明な接着剤33により固体撮像素子1と接着されている。赤外光のカットが可能なガラス基板41は、例えば、近赤外光を吸収する青板ガラスである。
<<6.第6の実施の形態>>
以上においては、赤外カットフィルタ4に代えて、ガラス基板41を用いる例について説明してきたが、赤外カットフィルタ4をガラス基板2と固体撮像素子1との間に挟み込むようにすることで、安価な赤外カットフィルタ4を用いるようにしてもよい。
図12の撮像装置は、赤外カットフィルタ4の反りや歪みを軽減のため、赤外カットフィルタ4を反りや歪の小さいガラス基板2と固体撮像素子1に挟みこむことで、赤外カットフィルタ4の反りや歪みを低減したCSP固体撮像素子20を搭載している。
このような構成により、反りや歪みが比較的大きい、安価な赤外カットフィルタ4を用いても、反りや歪みの少ないガラス基板2と固体撮像素子1で挟み込む構成とすることにより、安価な赤外カットフィルタ4の反りや歪を物理的に抑制することができるので、光学的な反り、歪み、および傾きの少ない、小型で、かつ、薄型の撮像装置を、低コストで実現させることが可能となり、また、光の内乱によるフレア現象を抑制できる。
尚、図12の撮像装置におけるCSP固体撮像素子20は、図9のCSP固体撮像素子20の構成における赤外カットフィルタ4とガラス基板2との配置が入れ替えられた構成とされている。
<<7.第7の実施の形態>>
以上においては、固定部11−1乃至11−4が、スペーサ10上のCSP固体撮像素子20の4か所の角部を適切な位置に誘導するように設けられる構成例について説明してきたが、それ以外の位置に設けられるように構成してもよい。
図13は、固定部11−1乃至11−4に代えて、固定部21−11乃至21−14が設けられる撮像装置の構成例が示されている。
すなわち、固定部21−11乃至21−14は、CSP固体撮像素子20の4辺のそれぞれの中央付近を適切な位置に誘導するようにスペーサ10上に設けられている。これに伴って、固定剤13は、CSP固体撮像素子20の4か所の角部付近に注入され、スペーサ10と固定される。
このように固定部11は、CSP固体撮像素子20の4辺のそれぞれを適切な位置に誘導するように設けられることで、CSP固体撮像素子20を回路基板7に対して高い精度で適切な位置に配置することができる。
固定部11の配置は、これ以外の配置であってもよく、例えば、図14の最上段で示されるように、スペーサ10上であって、CSP固体撮像素子20の各辺の端部に固定部11−21乃至11−24が設けられるようにしてもよい。この場合、固定剤13は、固定剤13−21乃至13−24に注入される。
同様に、例えば、図14の上から2段目で示されるように、スペーサ10上であって、CSP固体撮像素子20のいずれかの対角線上の角部に固定部11−31,11−32が設けられるようにしてもよい。この場合、固定剤13は、固定剤13−31,13−32に注入される。図14の上から2段目の例においても、固定部11−31,11−32により、CSP固体撮像素子20の4辺が固定される。
さらに、CSP固体撮像素子20の4辺の全てを適切な位置に誘導する固定部11ではなくても、その一部を適切な位置に誘導する構成により、固定部11が存在しない状態よりも高い精度で適切な位置に配置することができる。
例えば、図14の下から2段目で示されるように、スペーサ10上であって、CSP固体撮像素子20の3辺を適切な位置に誘導するように固定部11−41乃至11−43が設けられるようにしてもよい。この場合、固定剤13は、例えば、固定剤13−41乃至13−43に注入される。この場合、CSP固体撮像素子20の3辺が固定されることになるが、少なくとも対辺が固定される方向に対しては、CSP固体撮像素子20を適切な位置に配置することができる。
また、例えば、図14の最下段で示されるように、スペーサ10上であって、CSP固体撮像素子20の対辺となる2辺に固定部11−51,11−52が設けられるようにしてもよい。この場合、固定剤13は、例えば、固定剤13−51,13−52に注入される。この場合、CSP固体撮像素子20の図中の上下方向の対辺の2辺のみが固定されることになるが、少なくとも対辺が固定される図中の上下方向に対しては、CSP固体撮像素子20を適切な位置に配置することができる。
すなわち、少なくとも方形状のCSP固体撮像素子20の対辺となる2辺を適切な位置に誘導するように固定部11が設けられるようにすることで、CSP固体撮像素子20の配置精度を向上させることが可能となる。
<<8.第8の実施の形態>>
CSP固体撮像素子20の構成で、CSP固体撮像素子20とスペーサ11を固定する固定剤13として、本開示の光の内乱を抑制するための黒色樹脂などからなる光吸収材の固定剤13を入手できない場合、光の内乱の原因となる箇所への光を吸収する光吸収材からなるマスク81をマスク処理により設けることで光の内乱を抑制するようにしてもよい。
図15は、光の内乱の原因となる箇所への光を吸収する光吸収材からなるマスク81をマスク処理により設けることで光の内乱を抑制するようにした撮像装置の構成例である。
マスク81はCSP固体撮像素子20をスペーサ11に固定する前にマスク処理を施して設けるようにしてもよいし、CSP固体撮像素子20をスペーサ11に固定した後にマスク処理を施すようにしてもよい。
また、マスク81は、CSP固体撮像素子20の側面周辺の全体に形成されると共に、レンズ62の周辺部であって、入射光が有効画素領域に入射するように、例えば、図6のマスクエリアZ102に形成されるようにマスク処理されることが望ましい。
さらに、CSP固体撮像素子20の製造において、効率の良い工程での実施を行うことが可能である。
以上のような構成においても、光学的な反り、歪み、および傾きの少ない、小型で、かつ、薄型の撮像装置を、低コストで実現させることが可能となり、また、光の内乱によるフレア現象を抑制できる。
<<9.第9の実施の形態>>
CSP固体撮像素子20の構成において、最下位層のレンズ62が2枚以上で成形されるようにしてもよい。
図16は、最下位層のレンズ111が2枚以上で成形されたCSP固体撮像素子20の構成例が示されている。
撮像装置の生産時に最下位層レンズ111の一部であるマスクエリアZ102(図5,図6)に対して高精度に、黒色樹脂などの光吸収材からなる固定剤13、または、黒色の光吸収材からなるマスク81を塗布可能な塗布装置を用いることは、塗布装置として高価なものが必要になる、または、制御が高度になる可能性がある。
図16の撮像装置においては、最下位層のレンズ111の外周部となるマスクエリアZ102の黒塗りを予め処理しておくことにより、撮像装置の生産時に黒色樹脂からなる固定剤13またはマスク81の塗布の精度を軽減することができる。結果として、塗布装置の装置コスト、および制御コストのいずれも低減させることが可能となる。
なお、最下位層のレンズ111は、予め最下位層のレンズ111自体に黒塗りしてもよいし、または、最下位層のレンズ111をCSP固体撮像素子20に成形してから黒塗りしてもよい。また、最下位層のレンズ111の構成は、1枚以上であればよく、当然のことながら、2枚以上のレンズ群であってもよい。
ただし、図16で示されるように、レンズ111の中心付近が外周部よりも低い構成の場合、塗布した固定剤13が乾燥する前に重力の作用により中心に向かって流れ込む可能性があり、有効画素エリアZ101を狭くしてしまう恐れがある。そこで、図16のようにレンズ111の中心付近が外周部よりも低い構成の場合には、マスクエリアZ102に対してマスク処理を施すことによりマスク81を形成することが望ましい。また、図15で示されるようにレンズ62の外周部の方が低い構成の場合については、固定剤13がレンズ62の中心に流れ込む可能性は考慮する必要がないので、固体剤13でもマスク81でもよい。
<<10.第10の実施の形態>>
以上においては、撮像装置の構成として、CSP固体撮像素子20を用いる例について説明してきたが、固体撮像素子上のレンズに対するフレア現象を抑制する効果を奏する撮像装置としては、固体撮像素子であれば、CSP固体撮像素子以外の構成であってもよく、例えば、フリップチップ構造の固体撮像素子であってもよい。
図17は、CSP固体撮像素子20に代えて、フリップチップ構造を有したフリップチップ固体撮像素子121を有した撮像装置の構成例を示している。図10の撮像装置では、フリップチップ固体撮像素子121と回路基板131が半田132で接続されている。
フリップチップ固体撮像素子121は、その撮像面に透明の樹脂133によりレンズ群を形成する最下位層のレンズ62と接続されている。また、最下位層のレンズ62上に入射光が有効画素エリアZ101の全体に入射光が入射できるように、その外周部にマスクエリアZ102が設定され、黒色の光吸収材からなるマスク81が塗布されており、合わせて、サイド光からのフレア抑制のためサイド(側面周辺)の全体に黒色の光吸収材からなる固定剤13が埋め込まれている(塗布されている)。
すなわち、本開示の撮像装置における固体撮像素子は、フリップチップ構造であっても、CSP構造であってもよく、さらには、その他の構造であっても、構造に依存することなく、すべての構造においてフレア現象を低減させることが可能である。
本開示により、小型化、薄型化の手法とした固体撮像素子の光の内乱によるフレア現象を抑制することが可能となる。結果として、好適な画質を得ることができる小型で、かつ、薄型の高性能な撮像装置を実現することが可能となる。
<<11.CSP固体撮像素子の構成について>>
CSP固体撮像素子20の構成のうち、回路基板7の接続部位については、図18の上段部で示されるBGA(Ball Grid Array)端子151、または、図18の下段で示されるLGA(Land Grid Array)端子161のいずれの構成であってもよい。
いずれの接続部位の構成であっても、上述した構成により、光学的な反り、歪み、および傾きの少ない、小型で、かつ、薄型の撮像装置を実現させることが可能となり、また、光の内乱によるフレア現象を抑制することが可能となる。
<<12.電子機器への適用例>>
上述した撮像素子は、例えば、デジタルスチルカメラやデジタルビデオカメラなどの撮像装置、撮像機能を備えた携帯電話機、または、撮像機能を備えた他の機器といった各種の電子機器に適用することができる。
図19は、本技術を適用した電子機器としての撮像装置の構成例を示すブロック図である。
図19に示される撮像装置201は、光学系202、シャッタ装置203、固体撮像素子204、駆動回路205、信号処理回路206、モニタ207、およびメモリ208を備えて構成され、静止画像および動画像を撮像可能である。
光学系202は、1枚または複数枚のレンズを有して構成され、被写体からの光(入射光)を固体撮像素子204に導き、固体撮像素子204の受光面に結像させる。
シャッタ装置203は、光学系202および固体撮像素子204の間に配置され、駆動回路205の制御に従って、固体撮像素子204への光照射期間および遮光期間を制御する。
固体撮像素子204は、上述した固体撮像素子を含むパッケージにより構成される。固体撮像素子204は、光学系202およびシャッタ装置203を介して受光面に結像される光に応じて、一定期間、信号電荷を蓄積する。固体撮像素子204に蓄積された信号電荷は、駆動回路205から供給される駆動信号(タイミング信号)に従って転送される。
駆動回路205は、固体撮像素子204の転送動作、および、シャッタ装置203のシャッタ動作を制御する駆動信号を出力して、固体撮像素子204およびシャッタ装置203を駆動する。
信号処理回路206は、固体撮像素子204から出力された信号電荷に対して各種の信号処理を施す。信号処理回路206が信号処理を施すことにより得られた画像(画像データ)は、モニタ207に供給されて表示されたり、メモリ208に供給されて記憶(記録)されたりする。
このように構成されている撮像装置201においても、光学系202、および固体撮像素子204に、上述した図1,図5乃至図13,図15乃至図16の撮像装置のCSP固体撮像素子20、および図17の撮像装置のフリップチップ固体撮像素子121を適用することにより、フレア現象の発生を抑制し、好適な画質を得ることが可能となる。
<<13.撮像素子の使用例>>
図20は、上述の図1,図5乃至図13,図15乃至図17の撮像装置を使用する使用例を示す図である。
上述した撮像素子は、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々なケースに使用することができる。
・ディジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用に供される画像を撮影する装置
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、TVや、冷蔵庫、エアーコンディショナ等の家電に供される装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
<<14.体内情報取得システムへの応用例>>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
図21は、本開示に係る技術(本技術)が適用され得る、カプセル型内視鏡を用いた患者の体内情報取得システムの概略的な構成の一例を示すブロック図である。
体内情報取得システム10001は、カプセル型内視鏡10100と、外部制御装置10200とから構成される。
カプセル型内視鏡10100は、検査時に、患者によって飲み込まれる。カプセル型内視鏡10100は、撮像機能および無線通信機能を有し、患者から自然排出されるまでの間、胃や腸等の臓器の内部を蠕動運動等によって移動しつつ、当該臓器の内部の画像(以下、体内画像ともいう)を所定の間隔で順次撮像し、その体内画像についての情報を体外の外部制御装置10200に順次無線送信する。
外部制御装置10200は、体内情報取得システム10001の動作を統括的に制御する。また、外部制御装置10200は、カプセル型内視鏡10100から送信されてくる体内画像についての情報を受信し、受信した体内画像についての情報に基づいて、表示装置(図示せず)に当該体内画像を表示するための画像データを生成する。
体内情報取得システム10001では、このようにして、カプセル型内視鏡10100が飲み込まれてから排出されるまでの間、患者の体内の様子を撮像した体内画像を随時得ることができる。
カプセル型内視鏡10100と外部制御装置10200の構成および機能についてより詳細に説明する。
カプセル型内視鏡10100は、カプセル型の筐体10101を有し、その筐体10101内には、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、給電部10115、電源部10116、および制御部10117が収納されている。
光源部10111は、例えばLED(Light Emitting Diode)等の光源から構成され、撮像部10112の撮像視野に対して光を照射する。
撮像部10112は、撮像素子、および当該撮像素子の前段に設けられる複数のレンズからなる光学系から構成される。観察対象である体組織に照射された光の反射光(以下、観察光という)は、当該光学系によって集光され、当該撮像素子に入射する。撮像部10112では、撮像素子において、そこに入射した観察光が光電変換され、その観察光に対応する画像信号が生成される。撮像部10112によって生成された画像信号は、画像処理部10113に提供される。
画像処理部10113は、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)等のプロセッサによって構成され、撮像部10112によって生成された画像信号に対して各種の信号処理を行う。画像処理部10113は、信号処理を施した画像信号を、RAWデータとして無線通信部10114に提供する。
無線通信部10114は、画像処理部10113によって信号処理が施された画像信号に対して変調処理等の所定の処理を行い、その画像信号を、アンテナ10114Aを介して外部制御装置10200に送信する。また、無線通信部10114は、外部制御装置10200から、カプセル型内視鏡10100の駆動制御に関する制御信号を、アンテナ10114Aを介して受信する。無線通信部10114は、外部制御装置10200から受信した制御信号を制御部10117に提供する。
給電部10115は、受電用のアンテナコイル、当該アンテナコイルに発生した電流から電力を再生する電力再生回路、および昇圧回路等から構成される。給電部10115では、いわゆる非接触充電の原理を用いて電力が生成される。
電源部10116は、二次電池によって構成され、給電部10115によって生成された電力を蓄電する。図21では、図面が煩雑になることを避けるために、電源部10116からの電力の供給先を示す矢印等の図示を省略しているが、電源部10116に蓄電された電力は、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、および制御部10117に供給され、これらの駆動に用いられ得る。
制御部10117は、CPU等のプロセッサによって構成され、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、および、給電部10115の駆動を、外部制御装置10200から送信される制御信号に従って適宜制御する。
外部制御装置10200は、CPU,GPU等のプロセッサ、又はプロセッサとメモリ等の記憶素子が混載されたマイクロコンピュータ若しくは制御基板等で構成される。外部制御装置10200は、カプセル型内視鏡10100の制御部10117に対して制御信号を、アンテナ10200Aを介して送信することにより、カプセル型内視鏡10100の動作を制御する。カプセル型内視鏡10100では、例えば、外部制御装置10200からの制御信号により、光源部10111における観察対象に対する光の照射条件が変更され得る。また、外部制御装置10200からの制御信号により、撮像条件(例えば、撮像部10112におけるフレームレート、露出値等)が変更され得る。また、外部制御装置10200からの制御信号により、画像処理部10113における処理の内容や、無線通信部10114が画像信号を送信する条件(例えば、送信間隔、送信画像数等)が変更されてもよい。
また、外部制御装置10200は、カプセル型内視鏡10100から送信される画像信号に対して、各種の画像処理を施し、撮像された体内画像を表示装置に表示するための画像データを生成する。当該画像処理としては、例えば現像処理(デモザイク処理)、高画質化処理(帯域強調処理、超解像処理、NR(Noise reduction)処理および/若しくは手ブレ補正処理等)、並びに/又は拡大処理(電子ズーム処理)等、各種の信号処理を行うことができる。外部制御装置10200は、表示装置の駆動を制御して、生成した画像データに基づいて撮像された体内画像を表示させる。あるいは、外部制御装置10200は、生成した画像データを記録装置(図示せず)に記録させたり、印刷装置(図示せず)に印刷出力させてもよい。
以上、本開示に係る技術が適用され得る体内情報取得システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部10112に適用され得る。具体的には、図1,図5乃至図13,図15乃至図16の撮像装置のCSP固体撮像素子20、および図17の撮像装置のフリップチップ固体撮像素子121は、撮像部10112に適用することができる。撮像部10112に本開示に係る技術を適用することにより、フレア現象の発生を抑制し、好適な画質を得ることが可能となる。
<<15.内視鏡手術システムへの応用例>>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
図22は、本開示に係る技術(本技術)が適用され得る内視鏡手術システムの概略的な構成の一例を示す図である。
図22では、術者(医師)11131が、内視鏡手術システム11000を用いて、患者ベッド11133上の患者11132に手術を行っている様子が図示されている。図示するように、内視鏡手術システム11000は、内視鏡11100と、気腹チューブ11111やエネルギー処置具11112等の、その他の術具11110と、内視鏡11100を支持する支持アーム装置11120と、内視鏡下手術のための各種の装置が搭載されたカート11200と、から構成される。
内視鏡11100は、先端から所定の長さの領域が患者11132の体腔内に挿入される鏡筒11101と、鏡筒11101の基端に接続されるカメラヘッド11102と、から構成される。図示する例では、硬性の鏡筒11101を有するいわゆる硬性鏡として構成される内視鏡11100を図示しているが、内視鏡11100は、軟性の鏡筒を有するいわゆる軟性鏡として構成されてもよい。
鏡筒11101の先端には、対物レンズが嵌め込まれた開口部が設けられている。内視鏡11100には光源装置11203が接続されており、当該光源装置11203によって生成された光が、鏡筒11101の内部に延設されるライトガイドによって当該鏡筒の先端まで導光され、対物レンズを介して患者11132の体腔内の観察対象に向かって照射される。なお、内視鏡11100は、直視鏡であってもよいし、斜視鏡又は側視鏡であってもよい。
カメラヘッド11102の内部には光学系および撮像素子が設けられており、観察対象からの反射光(観察光)は当該光学系によって当該撮像素子に集光される。当該撮像素子によって観察光が光電変換され、観察光に対応する電気信号、すなわち観察像に対応する画像信号が生成される。当該画像信号は、RAWデータとしてカメラコントロールユニット(CCU: Camera Control Unit)11201に送信される。
CCU11201は、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)等によって構成され、内視鏡11100および表示装置11202の動作を統括的に制御する。さらに、CCU11201は、カメラヘッド11102から画像信号を受け取り、その画像信号に対して、例えば現像処理(デモザイク処理)等の、当該画像信号に基づく画像を表示するための各種の画像処理を施す。
表示装置11202は、CCU11201からの制御により、当該CCU11201によって画像処理が施された画像信号に基づく画像を表示する。
光源装置11203は、例えばLED(Light Emitting Diode)等の光源から構成され、術部等を撮影する際の照射光を内視鏡11100に供給する。
入力装置11204は、内視鏡手術システム11000に対する入力インタフェースである。ユーザは、入力装置11204を介して、内視鏡手術システム11000に対して各種の情報の入力や指示入力を行うことができる。例えば、ユーザは、内視鏡11100による撮像条件(照射光の種類、倍率および焦点距離等)を変更する旨の指示等を入力する。
処置具制御装置11205は、組織の焼灼、切開又は血管の封止等のためのエネルギー処置具11112の駆動を制御する。気腹装置11206は、内視鏡11100による視野の確保および術者の作業空間の確保の目的で、患者11132の体腔を膨らめるために、気腹チューブ11111を介して当該体腔内にガスを送り込む。レコーダ11207は、手術に関する各種の情報を記録可能な装置である。プリンタ11208は、手術に関する各種の情報を、テキスト、画像又はグラフ等各種の形式で印刷可能な装置である。
なお、内視鏡11100に術部を撮影する際の照射光を供給する光源装置11203は、例えばLED、レーザ光源又はこれらの組み合わせによって構成される白色光源から構成することができる。RGBレーザ光源の組み合わせにより白色光源が構成される場合には、各色(各波長)の出力強度および出力タイミングを高精度に制御することができるため、光源装置11203において撮像画像のホワイトバランスの調整を行うことができる。また、この場合には、RGBレーザ光源それぞれからのレーザ光を時分割で観察対象に照射し、その照射タイミングに同期してカメラヘッド11102の撮像素子の駆動を制御することにより、RGBそれぞれに対応した画像を時分割で撮像することも可能である。当該方法によれば、当該撮像素子にカラーフィルタを設けなくても、カラー画像を得ることができる。
また、光源装置11203は、出力する光の強度を所定の時間ごとに変更するようにその駆動が制御されてもよい。その光の強度の変更のタイミングに同期してカメラヘッド11102の撮像素子の駆動を制御して時分割で画像を取得し、その画像を合成することにより、いわゆる黒つぶれおよび白とびのない高ダイナミックレンジの画像を生成することができる。
また、光源装置11203は、特殊光観察に対応した所定の波長帯域の光を供給可能に構成されてもよい。特殊光観察では、例えば、体組織における光の吸収の波長依存性を利用して、通常の観察時における照射光(すなわち、白色光)に比べて狭帯域の光を照射することにより、粘膜表層の血管等の所定の組織を高コントラストで撮影する、いわゆる狭帯域光観察(Narrow Band Imaging)が行われる。あるいは、特殊光観察では、励起光を照射することにより発生する蛍光により画像を得る蛍光観察が行われてもよい。蛍光観察では、体組織に励起光を照射し当該体組織からの蛍光を観察すること(自家蛍光観察)、又はインドシアニングリーン(ICG)等の試薬を体組織に局注するとともに当該体組織にその試薬の蛍光波長に対応した励起光を照射し蛍光像を得ること等を行うことができる。光源装置11203は、このような特殊光観察に対応した狭帯域光および/又は励起光を供給可能に構成され得る。
図23は、図22に示すカメラヘッド11102およびCCU11201の機能構成の一例を示すブロック図である。
カメラヘッド11102は、レンズユニット11401と、撮像部11402と、駆動部11403と、通信部11404と、カメラヘッド制御部11405と、を有する。CCU11201は、通信部11411と、画像処理部11412と、制御部11413と、を有する。カメラヘッド11102とCCU11201とは、伝送ケーブル11400によって互いに通信可能に接続されている。
レンズユニット11401は、鏡筒11101との接続部に設けられる光学系である。鏡筒11101の先端から取り込まれた観察光は、カメラヘッド11102まで導光され、当該レンズユニット11401に入射する。レンズユニット11401は、ズームレンズおよびフォーカスレンズを含む複数のレンズが組み合わされて構成される。
撮像部11402は、撮像素子で構成される。撮像部11402を構成する撮像素子は、1つ(いわゆる単板式)であってもよいし、複数(いわゆる多板式)であってもよい。撮像部11402が多板式で構成される場合には、例えば各撮像素子によってRGBそれぞれに対応する画像信号が生成され、それらが合成されることによりカラー画像が得られてもよい。あるいは、撮像部11402は、3D(Dimensional)表示に対応する右目用および左目用の画像信号をそれぞれ取得するための1対の撮像素子を有するように構成されてもよい。3D表示が行われることにより、術者11131は術部における生体組織の奥行きをより正確に把握することが可能になる。なお、撮像部11402が多板式で構成される場合には、各撮像素子に対応して、レンズユニット11401も複数系統設けられ得る。
また、撮像部11402は、必ずしもカメラヘッド11102に設けられなくてもよい。例えば、撮像部11402は、鏡筒11101の内部に、対物レンズの直後に設けられてもよい。
駆動部11403は、アクチュエータによって構成され、カメラヘッド制御部11405からの制御により、レンズユニット11401のズームレンズおよびフォーカスレンズを光軸に沿って所定の距離だけ移動させる。これにより、撮像部11402による撮像画像の倍率および焦点が適宜調整され得る。
通信部11404は、CCU11201との間で各種の情報を送受信するための通信装置によって構成される。通信部11404は、撮像部11402から得た画像信号をRAWデータとして伝送ケーブル11400を介してCCU11201に送信する。
また、通信部11404は、CCU11201から、カメラヘッド11102の駆動を制御するための制御信号を受信し、カメラヘッド制御部11405に供給する。当該制御信号には、例えば、撮像画像のフレームレートを指定する旨の情報、撮像時の露出値を指定する旨の情報、並びに/又は撮像画像の倍率および焦点を指定する旨の情報等、撮像条件に関する情報が含まれる。
なお、上記のフレームレートや露出値、倍率、焦点等の撮像条件は、ユーザによって適宜指定されてもよいし、取得された画像信号に基づいてCCU11201の制御部11413によって自動的に設定されてもよい。後者の場合には、いわゆるAE(Auto Exposure)機能、AF(Auto Focus)機能およびAWB(Auto White Balance)機能が内視鏡11100に搭載されていることになる。
カメラヘッド制御部11405は、通信部11404を介して受信したCCU11201からの制御信号に基づいて、カメラヘッド11102の駆動を制御する。
通信部11411は、カメラヘッド11102との間で各種の情報を送受信するための通信装置によって構成される。通信部11411は、カメラヘッド11102から、伝送ケーブル11400を介して送信される画像信号を受信する。
また、通信部11411は、カメラヘッド11102に対して、カメラヘッド11102の駆動を制御するための制御信号を送信する。画像信号や制御信号は、電気通信や光通信等によって送信することができる。
画像処理部11412は、カメラヘッド11102から送信されたRAWデータである画像信号に対して各種の画像処理を施す。
制御部11413は、内視鏡11100による術部等の撮像、および、術部等の撮像により得られる撮像画像の表示に関する各種の制御を行う。例えば、制御部11413は、カメラヘッド11102の駆動を制御するための制御信号を生成する。
また、制御部11413は、画像処理部11412によって画像処理が施された画像信号に基づいて、術部等が映った撮像画像を表示装置11202に表示させる。この際、制御部11413は、各種の画像認識技術を用いて撮像画像内における各種の物体を認識してもよい。例えば、制御部11413は、撮像画像に含まれる物体のエッジの形状や色等を検出することにより、鉗子等の術具、特定の生体部位、出血、エネルギー処置具11112の使用時のミスト等を認識することができる。制御部11413は、表示装置11202に撮像画像を表示させる際に、その認識結果を用いて、各種の手術支援情報を当該術部の画像に重畳表示させてもよい。手術支援情報が重畳表示され、術者11131に提示されることにより、術者11131の負担を軽減することや、術者11131が確実に手術を進めることが可能になる。
カメラヘッド11102およびCCU11201を接続する伝送ケーブル11400は、電気信号の通信に対応した電気信号ケーブル、光通信に対応した光ファイバ、又はこれらの複合ケーブルである。
ここで、図示する例では、伝送ケーブル11400を用いて有線で通信が行われていたが、カメラヘッド11102とCCU11201との間の通信は無線で行われてもよい。
以上、本開示に係る技術が適用され得る内視鏡手術システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、内視鏡11100や、カメラヘッド11102の撮像部11402に適用され得る。具体的には、図1,図5乃至図13,図15乃至図16の撮像装置のCSP固体撮像素子20、および図17の撮像装置のフリップチップ固体撮像素子121は、撮像部10402に適用することができる。撮像部11402に本開示に係る技術を適用することにより、フレア現象の発生を抑制し、好適な画質を得ることが可能となる。
なお、ここでは、一例として内視鏡手術システムについて説明したが、本開示に係る技術は、その他、例えば、顕微鏡手術システム等に適用されてもよい。
<<16.移動体への応用例>>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
図24は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図24に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、および統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、および車載ネットワークI/F(interface)12053が図示されている。
駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、および、車両の制動力を発生させる制動装置等の制御装置として機能する。
ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声および画像のうちの少なくとも一方の出力信号を送信する。図24の例では、出力装置として、オーディオスピーカ12061、表示部12062およびインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイおよびヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
図25は、撮像部12031の設置位置の例を示す図である。
図25では、車両12100は、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドアおよび車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101および車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。撮像部12101および12105で取得される前方の画像は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
なお、図25には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部12031に適用され得る。具体的には、図1,図5乃至図13,図15乃至図16の撮像装置のCSP固体撮像素子20、および図17の撮像装置は、撮像部12031に適用することができる。撮像部12031に本開示に係る技術を適用することにより、フレア現象の発生を抑制し、好適な画質を得るが可能となる。
尚、本開示は、以下のような構成も取ることができる。
<1> 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
前記固体撮像素子を固定するガラス基板とを有し、
前記固体撮像素子および前記ガラス基板が一体となったCSP(Chip Size Package)固体撮像素子と、
前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
前記CSP固体撮像素子、および前記回路基板を固定するためのスペーサと、
前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
光を吸収する機能を有し、前記CSP固体撮像素子の側面を覆うように設けられる光吸収材と
を含む撮像装置。
<2>
前記CSP固体撮像素子は、前記受光した光を集光する複数のレンズからなるレンズ群の一部からなり、前記固体撮像素子の前段であって、かつ、前記レンズ群の一部である上位層レンズよりも前記固体撮像素子に近い位置に配置される、前記レンズ群の前記一部と異なる他の一部である下位層レンズをさらに含む
<1>に記載の撮像装置。
<3>
前記光吸収材は、さらに、前記下位層レンズを透過する光のうち、前記CSP固体撮像素子の有効画素エリアに入射する入射光を遮光しない範囲で、前記下位層レンズの外周部を覆うように設けられる
<2>に記載の撮像装置。
<4>
前記CSP固体撮像素子は、
受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
前記固体撮像素子と前記ガラス基板とが透明の接着剤により接着され、
前記ガラス基板と前記赤外カットフィルタとが透明の接着材により接着され、
前記下位層レンズは、前記赤外カットフィルタ上、または、前記ガラス基板上の少なくともいずれかに配置される
<2>に記載の撮像装置。
<5>
前記光吸収材は、光を吸収する機能を有し、前記CSP固体撮像素子とスペーサとを固定する固定剤である
<1>に記載の撮像装置。
<6>
前記光吸収材は、光を吸収する機能を有し、マスク処理されることで形成されるマスクである
<1>に記載の撮像装置。
<7>
前記光吸収材は、光を吸収する機能を有し、前記CSP固体撮像素子とスペーサとを固定する固定剤、および光を吸収する機能を有し、マスク処理されることで形成されるマスクである
<1>に記載の撮像装置。
<8> 前記回路基板を生成する材料は、その線膨張率が、前記固体撮像素子の線膨張率に近い材料である
<1>に記載の撮像装置。
<9> 前記固定部は、方形の前記固体撮像素子の少なくとも2辺以上の辺を前記回路基板上の所定の位置に誘導する
<1>に記載の撮像装置。
<10> 前記固定部は、方形の前記固体撮像素子の4か所の角部を前記回路基板上の所定の位置に誘導する
<1>に記載の撮像装置。
<11> 前記CSP固体撮像素子は、
受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
前記赤外カットフィルタは、前記ガラス基板と前記固体撮像素子との間に配置される
<1>に記載の撮像装置。
<12> 前記受光した光を集光するレンズ群の上位層レンズと、
前記上位層レンズにより前記受光した光を所定の位置に合焦させる合焦部とをさらに含む
<1>に記載の撮像装置。
<13> 前記合焦部は、前記上位層レンズを駆動することにより前記受光した光を所定の位置に合焦させるように調整するアクチュエータを含む
<12>に記載の撮像装置。
<14> 前記アクチュエータは、前記上位層レンズを駆動させることで、前記合焦させる機能および手ぶれ補正機能の少なくともいずれかを備える
<13>に記載の撮像装置。
<15> 前記ガラス基板は、反りおよび歪みの小さい、赤外カットフィルタとしての機能を備える
<1>に記載の撮像装置。
<16> 前記ガラス基板は、青板ガラスである
<15>に記載の撮像装置。
<17> 前記受光した光を集光するレンズ群の一部からなる上位層レンズと、
前記受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
前記赤外カットフィルタは、前記CSP固体撮像素子とは別体であって、かつ、前記上位層レンズと前記固体撮像素子との間に配置される
<1>に記載の撮像装置。
<18> 前記回路基板は、前記固体撮像素子より出力される画素信号を外部に出力するコネクタ、または、ACF(Anisotropic Conductive Film)端子を含む
<1>に記載の撮像装置。
<19> 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
前記固体撮像素子を固定するガラス基板とを有し、
前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、
前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
前記CSP固体撮像素子、および前記回路基板を固定するためのスペーサと、
前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
光を吸収する機能を有し、前記CSP固体撮像素子の側面を覆うように設けられる光吸収材とを含み、
前記スペーサは、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部を有する撮像装置の製造方法であって、
前記CSP固体撮像素子を前記回路基板に固定する工程と、
前記スペーサの前記固定部で前記CSP固体撮像素子を前記回路基板上の所定の位置に誘導するようにはめ込んで前記スペーサを前記回路基板に固定する工程と、
前記光吸収材が前記CSP固体撮像素子の側面を覆うように設けられる工程を含む
撮像装置の製造方法。
<20> 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
前記固体撮像素子を固定するガラス基板とを有し、
前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、
前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
前記CSP固体撮像素子、および前記回路基板を固定するためのスペーサと、
前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
光を吸収する機能を有し、前記CSP固体撮像素子の側面を覆うように設けられる光吸収材と
を含む電子機器。
1 固体撮像素子, 2 ガラス基板, 4 赤外カットフィルタ, 6 レンズ, 7 回路基板, 8 アクチュエータ, 9 コネクタ, 10 スペーサ, 11,11−1乃至11−4,11−21乃至11−24,11−31,11−32,11−41乃至11−43,11−51,11−52 固定部, 12 半導体部品, 13,13−1乃至13−4,13−21乃至13−24,13−31,13−32,13−41乃至1#−43,13−51,13−52 固定剤, 31,32 接着剤, 41 ガラス基板, 61 上位層レンズ, 62 下位層レンズ, 81 マスク, 91 ACF端子, 111 レンズ, 121 フリップチップ固体撮像素子

Claims (17)

  1. 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
    前記固体撮像素子を固定するガラス基板とを有し、
    前記固体撮像素子および前記ガラス基板が一体となったCSP(Chip Size Package)固体撮像素子と、
    前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
    前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることで、前記回路基板固定するためのスペーサと、
    前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
    光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材と
    を含む撮像装置。
  2. 前記CSP固体撮像素子は、前記受光した光を集光する複数のレンズからなるレンズ群の一部からなり、前記固体撮像素子の前段であって、かつ、前記レンズ群の一部である上位層レンズよりも前記固体撮像素子に近い位置に配置される、前記レンズ群の前記一部と異なる他の一部である下位層レンズをさらに含む
    請求項1に記載の撮像装置。
  3. 前記光吸収材は、さらに、前記下位層レンズを透過する光のうち、前記CSP固体撮像素子の有効画素エリアに入射する入射光を遮光しない範囲で、前記下位層レンズの外周部を覆うように設けられる
    請求項2に記載の撮像装置。
  4. 前記CSP固体撮像素子は、
    受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
    前記固体撮像素子と前記ガラス基板とが透明の接着剤により接着され、
    前記ガラス基板と前記赤外カットフィルタとが透明の接着材により接着され、
    前記下位層レンズは、前記赤外カットフィルタ上、または、前記ガラス基板上の少なくともいずれかに配置される
    請求項2に記載の撮像装置。
  5. 前記回路基板を生成する材料は、その線膨張率が、前記固体撮像素子の線膨張率に近い材料である
    請求項1に記載の撮像装置。
  6. 前記固定部は、方形の前記固体撮像素子の少なくとも2辺以上の辺を前記回路基板上の所定の位置に誘導する
    請求項1に記載の撮像装置。
  7. 前記固定部は、方形の前記固体撮像素子の4か所の角部を前記回路基板上の所定の位置に誘導する
    請求項1に記載の撮像装置。
  8. 前記CSP固体撮像素子は、
    受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
    前記赤外カットフィルタは、前記ガラス基板と前記固体撮像素子との間に配置される
    請求項1に記載の撮像装置。
  9. 前記受光した光を集光するレンズ群の上位層レンズと、
    前記上位層レンズにより前記受光した光を所定の位置に合焦させる合焦部とをさらに含む
    請求項1に記載の撮像装置。
  10. 前記合焦部は、前記上位層レンズを駆動することにより前記受光した光を所定の位置に合焦させるように調整するアクチュエータを含む
    請求項に記載の撮像装置。
  11. 前記アクチュエータは、前記上位層レンズを駆動させることで、前記合焦させる機能および手ぶれ補正機能の少なくともいずれかを備える
    請求項10に記載の撮像装置。
  12. 前記ガラス基板は、反りおよび歪みの小さい、赤外カットフィルタとしての機能を備える
    請求項1に記載の撮像装置。
  13. 前記ガラス基板は、青板ガラスである
    請求項12に記載の撮像装置。
  14. 前記受光した光を集光するレンズ群の一部からなる上位層レンズと、
    前記受光した光より赤外光を削除する赤外カットフィルタをさらに含み、
    前記赤外カットフィルタは、前記CSP固体撮像素子とは別体であって、かつ、前記上位層レンズと前記固体撮像素子との間に配置される
    請求項1に記載の撮像装置。
  15. 前記回路基板は、前記固体撮像素子より出力される画素信号を外部に出力するコネクタ、または、ACF(Anisotropic Conductive Film)端子を含む
    請求項1に記載の撮像装置。
  16. 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
    前記固体撮像素子を固定するガラス基板とを有し、
    前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、
    前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
    前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることでおよび、前記回路基板固定するためのスペーサと、
    前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
    光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材とを含み、
    前記スペーサは、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部を有する撮像装置の製造方法であって、
    前記CSP固体撮像素子を前記開口部に配置して前記回路基板に固定する工程と、
    前記スペーサの前記固定部で前記CSP固体撮像素子を前記回路基板上の所定の位置に誘導するようにはめ込んで前記CSP固体撮像素子を前記回路基板に固定する工程と、
    前記光吸収材が前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する工程を含む
    撮像装置の製造方法。
  17. 受光した光を光量に応じた電気信号に光電変換する固体撮像素子と、
    前記固体撮像素子を固定するガラス基板とを有し、
    前記固体撮像素子および前記ガラス基板が一体となったCSP固体撮像素子と、
    前記光電変換された電気信号を外部に転送する回路を有した回路基板と、
    前記CSP固体撮像素子が配置される開口部を有し、前記開口部に前記CSP固体撮像素子が配置されることでおよび、前記回路基板固定するためのスペーサと、
    前記開口部に設けられ、前記CSP固体撮像素子を実装する際に、前記CSP固体撮像素子を、前記回路基板上の所定の位置に誘導する固定部と、
    光を吸収する機能を有し、前記CSP固体撮像素子と前記スペーサとの間に注入されることで、前記CSP固体撮像素子の側面を覆うように設けられ、前記CSP固体撮像素子と前記スペーサとを固定する固定剤として機能する光吸収材と
    を含む電子機器。
JP2017132696A 2017-07-06 2017-07-06 撮像装置および撮像装置の製造方法、並びに、電子機器 Active JP6976751B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017132696A JP6976751B2 (ja) 2017-07-06 2017-07-06 撮像装置および撮像装置の製造方法、並びに、電子機器
PCT/JP2018/023758 WO2019009098A1 (en) 2017-07-06 2018-06-22 IMAGING APPARATUS, METHOD FOR MANUFACTURING SAME, AND ELECTRONIC APPARATUS
CN201880043503.3A CN110809822A (zh) 2017-07-06 2018-06-22 摄像装置、其制造方法和电子装置
US16/625,186 US11553118B2 (en) 2017-07-06 2018-06-22 Imaging apparatus, manufacturing method therefor, and electronic apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017132696A JP6976751B2 (ja) 2017-07-06 2017-07-06 撮像装置および撮像装置の製造方法、並びに、電子機器

Publications (2)

Publication Number Publication Date
JP2019016684A JP2019016684A (ja) 2019-01-31
JP6976751B2 true JP6976751B2 (ja) 2021-12-08

Family

ID=62986151

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017132696A Active JP6976751B2 (ja) 2017-07-06 2017-07-06 撮像装置および撮像装置の製造方法、並びに、電子機器

Country Status (4)

Country Link
US (1) US11553118B2 (ja)
JP (1) JP6976751B2 (ja)
CN (1) CN110809822A (ja)
WO (1) WO2019009098A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6976751B2 (ja) * 2017-07-06 2021-12-08 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像装置の製造方法、並びに、電子機器
TWI778829B (zh) * 2021-05-05 2022-09-21 勝麗國際股份有限公司 非迴焊式感測鏡頭
CN114786000A (zh) * 2022-04-12 2022-07-22 嘉兴智瞳科技有限公司 一种显微手术3d数字化成像系统及3d显微手术摄像机

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004226872A (ja) * 2003-01-27 2004-08-12 Sanyo Electric Co Ltd カメラモジュール及びその製造方法
JP4426946B2 (ja) * 2004-10-27 2010-03-03 オリンパス株式会社 デジタルカメラシステム
KR101298449B1 (ko) * 2005-10-14 2013-08-22 코니카 미놀타 어드밴스드 레이어즈 인코포레이티드 촬상 장치
JP4950542B2 (ja) * 2006-04-07 2012-06-13 岩手東芝エレクトロニクス株式会社 固体撮像装置およびその製造方法
US8599301B2 (en) * 2006-04-17 2013-12-03 Omnivision Technologies, Inc. Arrayed imaging systems having improved alignment and associated methods
JP2008092417A (ja) * 2006-10-04 2008-04-17 Matsushita Electric Ind Co Ltd 半導体撮像素子およびその製造方法並びに半導体撮像装置および半導体撮像モジュール
CN101165523B (zh) * 2006-10-20 2010-05-26 鸿富锦精密工业(深圳)有限公司 影像感测模组封装结构
JP4932745B2 (ja) * 2008-01-10 2012-05-16 シャープ株式会社 固体撮像装置およびそれを備えた電子機器
JP2010011230A (ja) * 2008-06-27 2010-01-14 I Square Research Co Ltd カメラモジュール
JP5047243B2 (ja) * 2008-09-26 2012-10-10 シャープ株式会社 光学素子ウエハモジュール、光学素子モジュール、光学素子モジュールの製造方法、電子素子ウエハモジュール、電子素子モジュールの製造方法、電子素子モジュールおよび電子情報機器
JP5162607B2 (ja) 2010-02-10 2013-03-13 株式会社AAC Technologies Japan R&D Center カメラモジュールの組み立て方法
JP5595786B2 (ja) * 2010-05-11 2014-09-24 シャープ株式会社 カメラモジュールおよびそれを備えた電子機器
JP5533339B2 (ja) * 2010-06-28 2014-06-25 ソニー株式会社 光電変換装置とそのパッケージ構造、並びに光電変換装置の製造方法
JP2012018993A (ja) * 2010-07-06 2012-01-26 Toshiba Corp カメラモジュールおよびその製造方法
CN202120913U (zh) * 2011-06-08 2012-01-18 旭丽电子(广州)有限公司 薄型化图像撷取模块
US9826131B2 (en) * 2013-09-23 2017-11-21 Heptagon Micro Optics Pte. Ltd. Compact camera module arrangements that facilitate dam-and-fill and similar encapsulation techniques
KR102380064B1 (ko) * 2014-02-18 2022-03-28 에이엠에스 센서스 싱가포르 피티이. 리미티드. 초점 길이 조정 및/또는 기울기의 축소를 위한 고객 맞춤화 가능한 스페이서를 포함하는 광학 모듈, 및 광학 모듈의 제조
CN106794674A (zh) 2014-10-06 2017-05-31 东洋制罐集团控股株式会社 涂装金属板和有机树脂涂覆的涂装金属板
CN107209342B (zh) * 2015-01-23 2020-03-27 夏普株式会社 相机模块的制造方法、像面侧组透镜、像面侧组透镜的制造方法和摄像元件
JP2018085353A (ja) 2015-03-24 2018-05-31 ソニー株式会社 固体撮像装置、固体撮像装置の製造方法、及び、電子機器
WO2017007425A1 (en) * 2015-07-09 2017-01-12 Heptagon Micro Optics Pte. Ltd. Optoelectronic modules including overmold supporting an optical assembly
JP6869717B2 (ja) * 2016-12-28 2021-05-12 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像装置の製造方法、並びに、電子機器
JP6976751B2 (ja) * 2017-07-06 2021-12-08 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像装置の製造方法、並びに、電子機器
JP7146376B2 (ja) * 2017-08-31 2022-10-04 ソニーセミコンダクタソリューションズ株式会社 撮像装置、および電子機器
JP2019066422A (ja) * 2017-10-04 2019-04-25 ソニーセミコンダクタソリューションズ株式会社 検査装置、および検査方法、並びに、プログラム

Also Published As

Publication number Publication date
WO2019009098A1 (en) 2019-01-10
US11553118B2 (en) 2023-01-10
CN110809822A (zh) 2020-02-18
US20200145562A1 (en) 2020-05-07
JP2019016684A (ja) 2019-01-31

Similar Documents

Publication Publication Date Title
JP7449317B2 (ja) 撮像装置
US11670656B2 (en) Imaging element, fabrication method, and electronic equipment
JP7146376B2 (ja) 撮像装置、および電子機器
US11647890B2 (en) Solid-state image pickup element, electronic equipment, and semiconductor apparatus
US11595551B2 (en) Camera module, method of manufacturing camera module, imaging apparatus, and electronic apparatus
EP3563414B1 (en) Camera module, method for producing camera module,and electronic apparatus
JP6976751B2 (ja) 撮像装置および撮像装置の製造方法、並びに、電子機器
WO2019171879A1 (ja) 撮像装置
WO2018142834A1 (ja) 電子部品、カメラモジュール及び電子部品の製造方法
WO2017169822A1 (ja) 固体撮像素子、撮像装置、内視鏡装置、および電子機器
WO2020084973A1 (ja) 撮像装置
US12027546B2 (en) Imaging element, fabrication method, and electronic equipment
US20210272995A1 (en) Imaging element and electronic apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200623

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210531

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211012

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211110

R150 Certificate of patent or registration of utility model

Ref document number: 6976751

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150