JPWO2019146299A1 - 撮像装置 - Google Patents

撮像装置 Download PDF

Info

Publication number
JPWO2019146299A1
JPWO2019146299A1 JP2019567908A JP2019567908A JPWO2019146299A1 JP WO2019146299 A1 JPWO2019146299 A1 JP WO2019146299A1 JP 2019567908 A JP2019567908 A JP 2019567908A JP 2019567908 A JP2019567908 A JP 2019567908A JP WO2019146299 A1 JPWO2019146299 A1 JP WO2019146299A1
Authority
JP
Japan
Prior art keywords
light
imaging device
unit
photoelectric conversion
shielding portion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019567908A
Other languages
English (en)
Other versions
JP7291082B2 (ja
Inventor
義史 財前
義史 財前
丸山 俊介
俊介 丸山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Publication of JPWO2019146299A1 publication Critical patent/JPWO2019146299A1/ja
Application granted granted Critical
Publication of JP7291082B2 publication Critical patent/JP7291082B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14665Imagers using a photoconductor layer
    • H01L27/14669Infrared imagers
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14623Optical shielding
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L24/00Arrangements for connecting or disconnecting semiconductor or solid-state bodies; Methods or apparatus related thereto
    • H01L24/01Means for bonding being attached to, or being formed on, the surface to be connected, e.g. chip-to-package, die-attach, "first-level" interconnects; Manufacturing methods related thereto
    • H01L24/26Layer connectors, e.g. plate connectors, solder or adhesive layers; Manufacturing methods related thereto
    • H01L24/28Structure, shape, material or disposition of the layer connectors prior to the connecting process
    • H01L24/29Structure, shape, material or disposition of the layer connectors prior to the connecting process of an individual layer connector
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L24/00Arrangements for connecting or disconnecting semiconductor or solid-state bodies; Methods or apparatus related thereto
    • H01L24/01Means for bonding being attached to, or being formed on, the surface to be connected, e.g. chip-to-package, die-attach, "first-level" interconnects; Manufacturing methods related thereto
    • H01L24/26Layer connectors, e.g. plate connectors, solder or adhesive layers; Manufacturing methods related thereto
    • H01L24/31Structure, shape, material or disposition of the layer connectors after the connecting process
    • H01L24/32Structure, shape, material or disposition of the layer connectors after the connecting process of an individual layer connector
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • H01L27/14627Microlenses
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14643Photodiode arrays; MOS imagers
    • H01L27/14649Infrared imagers
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14683Processes or apparatus peculiar to the manufacture or treatment of these devices or parts thereof
    • H01L27/14694The active layers comprising only AIIIBV compounds, e.g. GaAs, InP
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L2224/00Indexing scheme for arrangements for connecting or disconnecting semiconductor or solid-state bodies and methods related thereto as covered by H01L24/00
    • H01L2224/01Means for bonding being attached to, or being formed on, the surface to be connected, e.g. chip-to-package, die-attach, "first-level" interconnects; Manufacturing methods related thereto
    • H01L2224/26Layer connectors, e.g. plate connectors, solder or adhesive layers; Manufacturing methods related thereto
    • H01L2224/28Structure, shape, material or disposition of the layer connectors prior to the connecting process
    • H01L2224/29Structure, shape, material or disposition of the layer connectors prior to the connecting process of an individual layer connector
    • H01L2224/29001Core members of the layer connector
    • H01L2224/29005Structure
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L2224/00Indexing scheme for arrangements for connecting or disconnecting semiconductor or solid-state bodies and methods related thereto as covered by H01L24/00
    • H01L2224/01Means for bonding being attached to, or being formed on, the surface to be connected, e.g. chip-to-package, die-attach, "first-level" interconnects; Manufacturing methods related thereto
    • H01L2224/26Layer connectors, e.g. plate connectors, solder or adhesive layers; Manufacturing methods related thereto
    • H01L2224/31Structure, shape, material or disposition of the layer connectors after the connecting process
    • H01L2224/32Structure, shape, material or disposition of the layer connectors after the connecting process of an individual layer connector
    • H01L2224/321Disposition
    • H01L2224/32151Disposition the layer connector connecting between a semiconductor or solid-state body and an item not being a semiconductor or solid-state body, e.g. chip-to-substrate, chip-to-passive
    • H01L2224/32221Disposition the layer connector connecting between a semiconductor or solid-state body and an item not being a semiconductor or solid-state body, e.g. chip-to-substrate, chip-to-passive the body and the item being stacked
    • H01L2224/32225Disposition the layer connector connecting between a semiconductor or solid-state body and an item not being a semiconductor or solid-state body, e.g. chip-to-substrate, chip-to-passive the body and the item being stacked the item being non-metallic, e.g. insulating substrate with or without metallisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Power Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Optical Elements Other Than Lenses (AREA)

Abstract

化合物半導体を含み、光入射面を有する光電変換層と、前記光入射面に入射する光の光路に設けられ、450nm未満の波長の光を遮光する遮光部とを備えた撮像装置。

Description

本開示は、化合物半導体を含む光電変換層を有する撮像装置に関する。
近年、赤外領域に感度を有するイメージセンサ(撮像装置)が商品化されている。例えば、特許文献1に記載されているように、この撮像装置では、例えばInGaAs(インジウムガリウム砒素)等のIII−V族半導体を含む光電変換層が用いられ、この光電変換層において、赤外線が吸収されることで電荷が発生する(光電変換が行われる)。
特表2014−521216号公報
このような撮像装置では、ノイズを低減することが望まれている。
したがって、ノイズを低減することが可能な撮像装置を提供することが望ましい。
本開示の一実施の形態に係る撮像装置(1)は、化合物半導体を含み、光入射面を有する光電変換層と、光入射面に入射する光の光路に設けられ、450nm未満の波長の光を遮光する遮光部とを備えたものである。
本開示の一実施の形態に係る撮像装置(2)は、化合物半導体を含み、光入射面を有する光電変換層と、光入射面に入射する光の光路に設けられ、光電変換層に格子整合された化合物を含む遮光部とを備えたものである。
本開示の一実施の形態に係る撮像装置(1)(2)では、光電変換層に入射する光の光路に遮光部が設けられているので、例えば紫外領域の波長の光等の不要な光は光電変換層に到達しにくくなる。
本開示の一実施の形態に係る撮像装置(1)(2)によれば、光電変換層に入射する光の光路に遮光部を設けるようにしたので、例えば、紫外領域の波長の光等の高エネルギーの光に起因した光電変換層での欠陥の発生が抑えられる。よって、ノイズを低減することが可能となる。
尚、上記内容は本開示の一例である。本開示の効果は、上述したものに限らず、他の異なる効果であってもよいし、更に他の効果を含んでいてもよい。
本開示の一実施の形態に係る撮像装置の要部の構成を表す断面模式図である。 図1に示した遮光部の構成の他の例を表す断面模式図である。 図1に示した撮像装置に入射する光の経路について説明するための断面模式図である。 変形例に係る撮像装置の要部の構成を表す断面模式図である。 図1等に示した撮像装置の全体構成の一例を表すブロック図である。 積層型の撮像装置の構成例を表す模式図である。 図5に示した撮像装置を用いた電子機器(カメラ)の一例を表す機能ブロック図である。 体内情報取得システムの概略的な構成の一例を示すブロック図である。 内視鏡手術システムの概略的な構成の一例を示す図である。 カメラヘッド及びCCUの機能構成の一例を示すブロック図である。 車両制御システムの概略的な構成の一例を示すブロック図である。 車外情報検出部及び撮像部の設置位置の一例を示す説明図である。
以下、本開示における実施形態について、図面を参照して詳細に説明する。なお、説明する順序は、下記の通りである。
1.実施の形態(遮光部を有する撮像装置の例)
2.変形例(レンズ形状の遮光部を有する例)
3.適用例
4.応用例
<実施の形態>
[構成]
図1は、本開示の一実施の形態に係る撮像装置(撮像装置1)の要部の模式的な断面構成を表したものである。撮像装置1は、例えばIII−V族半導体などの化合物半導体材料を用いた赤外線センサ等に適用されるものであり、例えば、可視領域(例えば380nm以上780nm未満)〜短赤外領域(例えば780nm以上2400nm未満)の波長の光に、光電変換機能を有している。この撮像装置1には、例えば2次元配置された複数の受光単位領域P(画素P)が設けられている。図1には、2つの画素Pに相当する部分の断面構成について示す。
撮像装置1は、素子基板10および回路基板20の積層構造を有しており、素子基板10と回路基板20との間には、これらの接合面Sjが設けられている。素子基板10の一方の面(接合面Sjと反対の面)に光が入射し、素子基板10の半導体層(後述の半導体層10S)で信号電荷が発生する。この信号電荷が、画素P毎に、回路基板20で読みだされるようになっている。撮像装置1は、素子基板10の一方の面に遮光部15を有している。
素子基板10は、半導体層10Sを有している。この半導体層10Sは、接合面Sj側から、例えば、第1コンタクト層12、光電変換層13および第2コンタクト層14を含んでいる。素子基板10は、半導体層10Sと接合面Sjとの間に、電極11およびコンタクト電極17Eを有しており、半導体層10Sと回路基板20とは、電極11およびコンタクト電極17Eを介して電気的に接続されている。電極11は、パッシベーション膜16中に、コンタクト電極17Eは、層間絶縁膜17中に、各々設けられている。回路基板20は、コンタクト電極17E(素子基板10)に接するコンタクト電極22Eと、このコンタクト電極22Eを間にして、素子基板10に対向する支持基板21とを有している。コンタクト電極22Eは、層間絶縁膜22中に設けられている。以下、各部の構成について説明する。
層間絶縁膜17は、例えば、回路基板20に接して設けられ、層間絶縁膜22とともに、接合面Sjを構成している。この層間絶縁膜17中に、画素P毎にコンタクト電極17Eが設けられている。層間絶縁膜17は、例えば、無機絶縁材料により構成されている。この無機絶縁材料としては、例えば、窒化シリコン(SiN),酸化アルミニウム(Al23),酸化ケイ素(SiO2)および酸化ハフニウム(HfO2)等が挙げられる。
パッシベーション膜16は、例えば、層間絶縁膜17と第1コンタクト層12(半導体層10S)との間に設けられている。このパッシベーション膜16中に、コンタクト電極17Eに電気的に接続された電極11が設けられている。層間絶縁膜17は、例えば、無機絶縁材料により構成されている。この無機絶縁材料としては、例えば、窒化シリコン(SiN),酸化アルミニウム(Al23),酸化ケイ素(SiO2)および酸化ハフニウム(HfO2)等が挙げられる。パッシベーション膜16を、層間絶縁膜17と同一の無機絶縁材料により構成するようにしてもよい。
電極11は、光電変換層13で発生した信号電荷(正孔または電子、以下便宜上、信号電荷が正孔であるとして説明する。)を読みだすための電圧が供給される電極であり、画素P毎に分離して設けられている。電極11の一方の端部は、半導体層10S(より具体的には、第1コンタクト層12)に接し、電極11の他方の端部は、コンタクト電極17Eに接している。隣り合う電極11は、パッシベーション膜16により電気的に分離されている。
電極11は、例えば、チタン(Ti),タングステン(W),窒化チタン(TiN),白金(Pt),金(Au),ゲルマニウム(Ge),パラジウム(Pd),亜鉛(Zn),ニッケル(Ni)およびアルミニウム(Al)のうちのいずれかの単体、またはそれらのうちの少なくとも1種を含む合金により構成されている。電極11は、このような構成材料の単膜であってもよく、あるいは、2種以上を組み合わせた積層膜であってもよい。例えば、電極11は、チタンおよびタングステンの積層膜により構成されている。
コンタクト電極17Eは、電極11と回路基板20とを電気的に接続するためのものである。コンタクト電極17Eの一方の端部は、電極11に接し、コンタクト電極17Eの他方の端部は、接合面Sjに露出され、コンタクト電極22Eに接している。隣り合うコンタクト電極17Eは、層間絶縁膜17により電気的に分離されている。コンタクト電極17Eは、例えば銅(Cu)パッドにより構成されている。
パッシベーション膜16と光電変換層13との間に設けられた第1コンタクト層12は、例えば、全ての画素Pに共通して設けられている。第1コンタクト層12は、光電変換層13を間にして、遮光部15に対向している。この第1コンタクト層12は、隣り合う画素Pを電気的に分離するためのものであり、第1コンタクト層12には、例えば複数の拡散領域12Aが設けられている。第1コンタクト層12に、光電変換層13を構成する化合物半導体材料のバンドギャップよりも大きなバンドギャップの化合物半導体材料を用いることにより、暗電流を抑えることも可能となる。第1コンタクト層12には、例えばn型のInP(インジウムリン)を用いることができる。第1コンタクト層12の厚みは、例えば、100nm〜500nmである。
第1コンタクト層12に設けられた拡散領域12Aは、互いに離間して配置されている。拡散領域12Aは、画素P毎に配置され、それぞれの拡散領域12Aに電極11が接続されている。拡散領域12Aは、光電変換層13で発生した信号電荷を画素P毎に読み出すためのものであり、例えば、p型不純物を含んでいる。p型不純物としては、例えばZn(亜鉛)等が挙げられる。このように、拡散領域12Aと、拡散領域12A以外の第1コンタクト層12との間にpn接合界面が形成され、隣り合う画素Pが電気的に分離されるようになっている。拡散領域12Aは、例えば第1コンタクト層12の厚み方向に設けられ、光電変換層13の厚み方向の一部にも設けられている。
第1コンタクト層12と第2コンタクト層14との間に設けられた光電変換層13は、互いに対向する第1面S1(光入射面)および第2面S2を有している。光電変換層13の第1面S1に第2コンタクト層14が設けられ、光電変換層13の第2面S2に第1コンタクト層12が設けられている。光電変換層13は、例えば、全ての画素Pに共通して設けられている。この光電変換層13は、所定の波長の光を吸収して、信号電荷を発生させるものであり、例えば、i型のIII−V族半導体などの化合物半導体材料により構成されている。光電変換層13を構成する化合物半導体材料としては、例えば、InGaAs(インジウムガリウム砒素),InAsSb(インジウム砒素アンチモン),InAs(インジウム砒素),InSb(インジムアンチモン),PbS(硫化鉛),PbSe(セレン化鉛),GeAu(ゲルマニウム金)およびHgCdTe(水銀カドミウムテルル)等が挙げられる。Ge(ゲルマニウム)により光電変換層13を構成するようにしてもよい。光電変換層13では、例えば、可視領域から短赤外領域の波長の光の光電変換がなされるようになっている。光電変換層13の厚みは、例えば、3000nm〜10000nmである。
第2コンタクト層14は、例えば、全ての画素Pに共通して設けられている。この第2コンタクト層14は、光電変換層13を間にして第1コンタクト層12に対向している。第2コンタクト層14は、光電変換層13で発生した電荷のうち、信号電荷として用いられない電荷が移動する領域であり、例えば、n型の不純物を含む化合物半導体により構成されている。例えば、正孔が、信号電荷として電極11から読み出される場合には、この第2コンタクト層14に、電子が移動する。第2コンタクト層14に電荷排出用の電極を接続するようにしてもよい。第2コンタクト層14には、例えば、n型のInP(インジウムリン)を用いることができる。第2コンタクト層14の厚みは、例えば10nm〜400nmであり、100nm以下であることが好ましい。第2コンタクト層14の厚みを小さくすることにより、第2コンタクト層14に吸収される光が減り、光電変換層13の感度を向上させることが可能となる。例えば、この撮像装置1では、素子基板10と回路基板20とがCuCu接合により接続されている(後述)。これにより、例えば、バンプ接合などの他の接合方法を用いた場合に比べて、第2コンタクト層14の厚みを小さくすることができる。CuCu接合では、他の接合方法に比べて、第2コンタクト層14にかかる機械的強度が低減されるためである。
本実施の形態の撮像装置1は、光電変換層13の第1面S1に入射する光の光路に遮光部15を有している。具体的には、遮光部15は、第2コンタクト層14を間にして、光電変換層13に対向している。遮光部15は、例えば、450nm未満の波長の光を遮光するものである。詳細は後述するが、この遮光部15を、光電変換層13に入射する光の光路に設けることにより、第2コンタクト層14の厚みを小さくしても、例えば、紫外領域の波長の光等、不要な光が光電変換層13に到達しにくくなる。
遮光部15は、例えば、第2コンタクト層14に接し、第2コンタクト層14の全面に膜状に設けられている。この遮光部15は、例えば、可視領域から短赤外領域の波長の光(光電変換層13で光電変換される光)を透過し、450nm未満の波長の光を遮光するようになっている。遮光部15は、450nm未満の波長の光を反射してもよく、あるいは、吸収してもよい。
遮光部15は、例えば、第2コンタクト層14および光電変換層13に格子整合された化合物により構成されている。このような遮光部15の構成材料としては、例えば、InxGayAsz(1-x-y-z),InxGayAlzAs(1-x-y-z),InxGayAszSb(1-x-y-z),InP,InxAlyAszSb(1-x-y-z),InxAlyGaz(1-x-y-z)またはZnxCdySez(0≦x≦1、0≦y≦1、0≦z≦1)等が挙げられる。この遮光部15は、例えば、第2コンタクト層14上に、上記化合物をエピタキシャル成長させることにより形成することができる。
遮光部15は、上記化合物以外の材料により構成するようにしてもよい。例えば、遮光部15は、酸化シリコン(SiO2),窒化シリコン(SiN)および高誘電率絶縁膜(High−k膜)等の無機材料により構成するようにしてもよい。遮光部15は、アクリル等の有機材料により構成するようにしてもよい。あるいは、遮光部15は、ITO(Indium Tin Oxide)およびIZO(Indium Zinc Oxide)等の金属材料により構成するようにしてもよい。遮光部15を成膜する際には、紫外領域の波長の光の光電変換層13への入射を抑えることが好ましい。
遮光部15の厚みは、遮光する光の波長(λ)および遮光部15の構成材料の消衰係数(k)等を考慮して、十分な大きさに設定することが好ましい。例えば、ランベルト・ベールの法則(以下の式(1),(2))を用いて、進入深さ(z)を求める。遮光部15は、この進入深さzよりも大きな値を有することが好ましい。
Figure 2019146299
Figure 2019146299
例えば、遮光部15がInP膜により構成されるとき、InPの消衰係数(k)を式(2)に代入し、遮光部15に入射する光の波長(λ)を400nm以下とする。このときの進入深さ(z)の値から、遮光部15がInP膜により構成されるとき、20nm程度の厚みの遮光部15が、効果的に高エネルギーの光を遮光することがわかる。
図2に示したように、遮光部15は、第2コンタクト層14と離間して設けられていてもよい。例えば、光電変換層13の第1面S1に入射する光の光路に設けられた光学部品が、遮光部15を構成していてもよい。この光学部品としては、例えば、レンズ,プリズム,ミラーおよびウィンドウ等が挙げられる。この遮光部15を構成する光学部品は、例えば光学ガラス,フッ化マグネシウム(MgF2),セレン化亜鉛(ZnSe),硫化亜鉛(ZnS)または石英等を含んでいる。遮光部15は、レンズ形状等を有していてもよく、遮光部15に開口等が設けられていてもよい。
回路基板20の支持基板21は、層間絶縁膜22を支持するためのものであり、例えば、シリコン(Si)により構成されている。支持基板21と素子基板10(接合面Sj)との間に設けられた層間絶縁膜22は、例えば、無機絶縁材料により構成されている。この無機絶縁材料としては、例えば、窒化シリコン(SiN),酸化アルミニウム(Al23),酸化ケイ素(SiO2)および酸化ハフニウム(HfO2)等が挙げられる。層間絶縁膜22中に、画素P毎に、コンタクト電極22Eが設けられている。層間絶縁膜22に、コンタクト電極22Eに電気的に接続された画素回路(図示せず)が設けられていてもよい。この画素回路が、ROIC(Read out integrated circuit)を構成している。
コンタクト電極22Eは、電極11と画素回路とを電気的に接続するためのものである。コンタクト電極22Eの一方の端部は、接合面Sjに露出され、コンタクト電極17Eに接している。隣り合うコンタクト電極22Eは、層間絶縁膜22により電気的に分離されている。コンタクト電極22Eは、例えば銅(Cu)パッドにより構成されている。即ち、撮像装置1では、コンタクト電極17Eとコンタクト電極22Eとの間で例えばCuCu接合がなされている。
[撮像装置1の動作]
撮像装置1では、遮光部15および第2コンタクト層14を介して、光電変換層13へ光(例えば可視領域および赤外領域の波長の光)が入射すると、この光が光電変換層13において吸収される。これにより、光電変換層13では正孔(ホール)および電子の対が発生する(光電変換される)。このとき、例えば電極11に所定の電圧が印加されると、光電変換層13に電位勾配が生じ、発生した電荷のうち一方の電荷(例えば正孔)が、信号電荷として拡散領域12Aに移動し、拡散領域12Aから電極11へ収集される。この信号電荷が、コンタクト電極17E,22Eを通じて画素回路に移動し、画素P毎に読み出される。
[撮像装置1の作用・効果]
図3は、撮像装置1に入射する光(光L1,L2,L3)の経路を模式的に表している。本実施の形態の撮像装置1は、光電変換層13の第1面S1に入射する光の光路に遮光部15を有している。この遮光部15は、例えば、紫外領域の波長の光(光L3)等を遮光する。一方、赤外領域の波長の光(光L1)および可視領域の波長の光(光L2)は、遮光部15を透過して、第1面S1から光電変換層13に入射する。この撮像装置1では、第2コンタクト層14の厚みを小さくすることにより、光電変換層13の感度を向上させるとともに、遮光部15により、ノイズを低減することができる。以下、これについて説明する。
例えば、素子基板10と回路基板20とがCuCu接合により接続された撮像装置1では、第2コンタクト層14の厚みを100nm以下にすることができる。第2コンタクト層14の厚みを小さくすることにより、第2コンタクト層14に吸収される光L1,L2が減り、より多くの光L1,L2が光電変換層13で、光電変換される。即ち、光電変換層13の感度を向上させることができる。
しかし、このような光電変換層13の感度の向上により、光L3等の不要な光も光電変換層13に進入しやすくなる。光のエネルギー(E)を表す以下の式(3)から明らかであるように、光のエネルギー(E)は、光の波長(λ)が短いほど、大きくなる。したがって、光L3は、光L1,L2よりもより大きなエネルギーを有している。この高エネルギーの光L3が、光電変換層13に到達すると、光電変換層13内に結晶欠陥が生成し、この結晶欠陥がノイズ源となるおそれがある。
Figure 2019146299
特に、化合物半導体を含む光電変換層13は、シリコン(Si)により構成された光電変換層に比べて、結晶欠陥が生成しやすい。シリコン半導体では、格子間に原子が進入することにより結晶欠陥が生成し、2元系以上の元素を含む化合物半導体では、元素の置換(逆置換)により結晶欠陥が生成する。この化合物半導体中の結晶欠陥の生成エネルギーが、シリコン半導体中の結晶欠陥の生成エネルギーよりも小さいためである。
このような光L3等の高エネルギーの光に起因したノイズ源の問題に対し、撮像装置1では、遮光部15が設けられているので、光L3等の不要な光が光電変換層13に到達(進入)しにくくなる。したがって、第2コンタクト層14の厚みを小さくしても、光L3等の高エネルギーの光に起因した結晶欠陥の発生が抑えられる。よって、ノイズを低減することができる。
以上説明したように、本実施の形態の撮像装置1では、光電変換層13に入射する光(光L1,L2)の光路に遮光部15を設けるようにしたので、例えば、紫外領域の波長の光(光L3)等の高エネルギーの光に起因した光電変換層13での欠陥の発生が抑えられる。よって、ノイズを低減することが可能となる。
また、例えば、素子基板10と回路基板20とをCuCu接合により接続することにより、光電変換層13の第1面S1に設けられた第2コンタクト層14の厚みを小さくすることが可能となる。これにより、光電変換層13に光L1,L2が到達しやすくなり、撮像装置1の感度を向上させることができる。
また、第2コンタクト層14上に、化合物を含む遮光部15をエピタキシャル成長させて形成することが可能である。このような遮光部15は、簡便な方法で形成することができる。
以下、上記実施の形態の変形例について説明するが、以降の説明において上記実施の形態と同一構成部分については同一符号を付してその説明は適宜省略する。
<変形例>
図4は、上記実施の形態の変形例に係る撮像装置(撮像装置1A)の要部の断面構成を模式的に表したものである。この撮像装置1Aは、オンチップレンズとして設けられた遮光部(遮光部15A)を有している。この点を除き、撮像装置1Aは撮像装置1と同様の構成および効果を有している。
遮光部15Aは、画素P毎に設けられ、レンズ形状を有している。この遮光部15Aは、第2コンタクト層14を間にして、光電変換層13の第1面S1に設けられている。遮光部15Aは、第2コンタクト層14に接して設けられていてもよい。遮光部15Aは、光電変換層13に入射する光の光路に設けられ、例えば450nm未満の波長の光を遮光する。
遮光部15Aは、例えば、紫外領域の波長の光等に対する遮光機能とともに、オンチップレンズとしての役割を担っている。即ち、遮光部15Aは、撮像装置1Aに入射した光(赤外領域および可視領域の波長の光)を光電変換層13に集めるように構成されている。この遮光部15Aは、例えば有機材料または酸化シリコン(SiO2)等の無機材料により構成されている。
本変形例のように、遮光部15Aが遮光機能とともに、オンチップレンズとしての機能を有していてもよい。この場合にも、上記実施の形態と同等の効果を得ることができる。
図5は、上記実施の形態等において説明した撮像装置1,1Aの全体構成の一例を表したものである。撮像装置1,1Aは、例えば複数の画素Pが設けられた素子領域R1と、この素子領域R1を駆動する回路部130とを有している。回路部130は、例えば行走査部131、水平選択部133、列走査部134およびシステム制御部132を有している。
素子領域R1は、例えば行列状に2次元配置された複数の画素P(撮像装置1)を有している。画素Pには、例えば画素行ごとに画素駆動線Lread(例えば、行選択線およびリセット制御線)が配線され、画素列ごとに垂直信号線Lsigが配線されている。画素駆動線Lreadは、画素Pからの信号読み出しのための駆動信号を伝送するものである。画素駆動線Lreadの一端は、行走査部131の各行に対応した出力端に接続されている。
行走査部131は、シフトレジスタやアドレスデコーダ等によって構成され、素子領域R1の各画素Pを、例えば行単位で駆動する画素駆動部である。行走査部131によって選択走査された画素行の各画素Pから出力される信号は、垂直信号線Lsigの各々を通して水平選択部133に供給される。水平選択部133は、垂直信号線Lsigごとに設けられたアンプや水平選択スイッチ等によって構成されている。
列走査部134は、シフトレジスタやアドレスデコーダ等によって構成され、水平選択部133の各水平選択スイッチを走査しつつ順番に駆動するものである。この列走査部134による選択走査により、垂直信号線Lsigの各々を通して伝送される各画素の信号が順番に水平信号線135に出力され、当該水平信号線135を通して図示しない信号処理部等へ入力される。
この撮像装置1,1Aでは、図6に示したように、例えば、素子領域R1を有する素子基板10と、回路部130を有する回路基板20とが積層されている。但し、このような構成に限定されず、回路部130は、素子領域R1と同一の基板上に形成されていてもよいし、あるいは外部制御ICに配設されたものであってもよい。また、回路部130は、ケーブル等により接続された他の基板に形成されていてもよい。
システム制御部132は、外部から与えられるクロックや、動作モードを指令するデータなどを受け取り、また、撮像装置1,1Aの内部情報などのデータを出力するものである。システム制御部132はさらに、各種のタイミング信号を生成するタイミングジェネレータを有し、当該タイミングジェネレータで生成された各種のタイミング信号を基に行走査部131、水平選択部133および列走査部134などの駆動制御を行う。
<適用例>
上述の撮像装置1,1Aは、例えば赤外領域を撮像可能なカメラなど、様々なタイプの電子機器に適用することができる。図7に、その一例として、電子機器5(カメラ)の概略構成を示す。この電子機器5は、例えば静止画または動画を撮影可能なカメラであり、撮像装置1,1Aと、光学系(光学レンズ)310と、シャッタ装置311と、撮像装置1,1Aおよびシャッタ装置311を駆動する駆動部313と、信号処理部312とを有する。
光学系310は、被写体からの像光(入射光)を撮像装置1,1Aへ導くものである。この光学系310は、複数の光学レンズから構成されていてもよい。シャッタ装置311は、撮像装置1,1Aへの光照射期間および遮光期間を制御するものである。駆動部313は、撮像装置1,1Aの転送動作およびシャッタ装置311のシャッタ動作を制御するものである。信号処理部312は、撮像装置1,1Aから出力された信号に対し、各種の信号処理を行うものである。信号処理後の映像信号Doutは、メモリなどの記憶媒体に記憶されるか、あるいは、モニタ等に出力される。
<体内情報取得システムへの応用例>
更に、本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
図8は、本開示に係る技術(本技術)が適用され得る、カプセル型内視鏡を用いた患者の体内情報取得システムの概略的な構成の一例を示すブロック図である。
体内情報取得システム10001は、カプセル型内視鏡10100と、外部制御装置10200とから構成される。
カプセル型内視鏡10100は、検査時に、患者によって飲み込まれる。カプセル型内視鏡10100は、撮像機能及び無線通信機能を有し、患者から自然排出されるまでの間、胃や腸等の臓器の内部を蠕動運動等によって移動しつつ、当該臓器の内部の画像(以下、体内画像ともいう)を所定の間隔で順次撮像し、その体内画像についての情報を体外の外部制御装置10200に順次無線送信する。
外部制御装置10200は、体内情報取得システム10001の動作を統括的に制御する。また、外部制御装置10200は、カプセル型内視鏡10100から送信されてくる体内画像についての情報を受信し、受信した体内画像についての情報に基づいて、表示装置(図示せず)に当該体内画像を表示するための画像データを生成する。
体内情報取得システム10001では、このようにして、カプセル型内視鏡10100が飲み込まれてから排出されるまでの間、患者の体内の様子を撮像した体内画像を随時得ることができる。
カプセル型内視鏡10100と外部制御装置10200の構成及び機能についてより詳細に説明する。
カプセル型内視鏡10100は、カプセル型の筐体10101を有し、その筐体10101内には、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、給電部10115、電源部10116、及び制御部10117が収納されている。
光源部10111は、例えばLED(light emitting diode)等の光源から構成され、撮像部10112の撮像視野に対して光を照射する。
撮像部10112は、撮像素子、及び当該撮像素子の前段に設けられる複数のレンズからなる光学系から構成される。観察対象である体組織に照射された光の反射光(以下、観察光という)は、当該光学系によって集光され、当該撮像素子に入射する。撮像部10112では、撮像素子において、そこに入射した観察光が光電変換され、その観察光に対応する画像信号が生成される。撮像部10112によって生成された画像信号は、画像処理部10113に提供される。
画像処理部10113は、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)等のプロセッサによって構成され、撮像部10112によって生成された画像信号に対して各種の信号処理を行う。画像処理部10113は、信号処理を施した画像信号を、RAWデータとして無線通信部10114に提供する。
無線通信部10114は、画像処理部10113によって信号処理が施された画像信号に対して変調処理等の所定の処理を行い、その画像信号を、アンテナ10114Aを介して外部制御装置10200に送信する。また、無線通信部10114は、外部制御装置10200から、カプセル型内視鏡10100の駆動制御に関する制御信号を、アンテナ10114Aを介して受信する。無線通信部10114は、外部制御装置10200から受信した制御信号を制御部10117に提供する。
給電部10115は、受電用のアンテナコイル、当該アンテナコイルに発生した電流から電力を再生する電力再生回路、及び昇圧回路等から構成される。給電部10115では、いわゆる非接触充電の原理を用いて電力が生成される。
電源部10116は、二次電池によって構成され、給電部10115によって生成された電力を蓄電する。図8では、図面が煩雑になることを避けるために、電源部10116からの電力の供給先を示す矢印等の図示を省略しているが、電源部10116に蓄電された電力は、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、及び制御部10117に供給され、これらの駆動に用いられ得る。
制御部10117は、CPU等のプロセッサによって構成され、光源部10111、撮像部10112、画像処理部10113、無線通信部10114、及び、給電部10115の駆動を、外部制御装置10200から送信される制御信号に従って適宜制御する。
外部制御装置10200は、CPU,GPU等のプロセッサ、又はプロセッサとメモリ等の記憶素子が混載されたマイクロコンピュータ若しくは制御基板等で構成される。外部制御装置10200は、カプセル型内視鏡10100の制御部10117に対して制御信号を、アンテナ10200Aを介して送信することにより、カプセル型内視鏡10100の動作を制御する。カプセル型内視鏡10100では、例えば、外部制御装置10200からの制御信号により、光源部10111における観察対象に対する光の照射条件が変更され得る。また、外部制御装置10200からの制御信号により、撮像条件(例えば、撮像部10112におけるフレームレート、露出値等)が変更され得る。また、外部制御装置10200からの制御信号により、画像処理部10113における処理の内容や、無線通信部10114が画像信号を送信する条件(例えば、送信間隔、送信画像数等)が変更されてもよい。
また、外部制御装置10200は、カプセル型内視鏡10100から送信される画像信号に対して、各種の画像処理を施し、撮像された体内画像を表示装置に表示するための画像データを生成する。当該画像処理としては、例えば現像処理(デモザイク処理)、高画質化処理(帯域強調処理、超解像処理、NR(Noise reduction)処理及び/又は手ブレ補正処理等)、並びに/又は拡大処理(電子ズーム処理)等、各種の信号処理を行うことができる。外部制御装置10200は、表示装置の駆動を制御して、生成した画像データに基づいて撮像された体内画像を表示させる。あるいは、外部制御装置10200は、生成した画像データを記録装置(図示せず)に記録させたり、印刷装置(図示せず)に印刷出力させてもよい。
以上、本開示に係る技術が適用され得る体内情報取得システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部10112に適用され得る。これにより、検出精度が向上する。
<内視鏡手術システムへの応用例>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
図9は、本開示に係る技術(本技術)が適用され得る内視鏡手術システムの概略的な構成の一例を示す図である。
図9では、術者(医師)11131が、内視鏡手術システム11000を用いて、患者ベッド11133上の患者11132に手術を行っている様子が図示されている。図示するように、内視鏡手術システム11000は、内視鏡11100と、気腹チューブ11111やエネルギー処置具11112等の、その他の術具11110と、内視鏡11100を支持する支持アーム装置11120と、内視鏡下手術のための各種の装置が搭載されたカート11200と、から構成される。
内視鏡11100は、先端から所定の長さの領域が患者11132の体腔内に挿入される鏡筒11101と、鏡筒11101の基端に接続されるカメラヘッド11102と、から構成される。図示する例では、硬性の鏡筒11101を有するいわゆる硬性鏡として構成される内視鏡11100を図示しているが、内視鏡11100は、軟性の鏡筒を有するいわゆる軟性鏡として構成されてもよい。
鏡筒11101の先端には、対物レンズが嵌め込まれた開口部が設けられている。内視鏡11100には光源装置11203が接続されており、当該光源装置11203によって生成された光が、鏡筒11101の内部に延設されるライトガイドによって当該鏡筒の先端まで導光され、対物レンズを介して患者11132の体腔内の観察対象に向かって照射される。なお、内視鏡11100は、直視鏡であってもよいし、斜視鏡又は側視鏡であってもよい。
カメラヘッド11102の内部には光学系及び撮像素子が設けられており、観察対象からの反射光(観察光)は当該光学系によって当該撮像素子に集光される。当該撮像素子によって観察光が光電変換され、観察光に対応する電気信号、すなわち観察像に対応する画像信号が生成される。当該画像信号は、RAWデータとしてカメラコントロールユニット(CCU: Camera Control Unit)11201に送信される。
CCU11201は、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)等によって構成され、内視鏡11100及び表示装置11202の動作を統括的に制御する。さらに、CCU11201は、カメラヘッド11102から画像信号を受け取り、その画像信号に対して、例えば現像処理(デモザイク処理)等の、当該画像信号に基づく画像を表示するための各種の画像処理を施す。
表示装置11202は、CCU11201からの制御により、当該CCU11201によって画像処理が施された画像信号に基づく画像を表示する。
光源装置11203は、例えばLED(light emitting diode)等の光源から構成され、術部等を撮影する際の照射光を内視鏡11100に供給する。
入力装置11204は、内視鏡手術システム11000に対する入力インタフェースである。ユーザは、入力装置11204を介して、内視鏡手術システム11000に対して各種の情報の入力や指示入力を行うことができる。例えば、ユーザは、内視鏡11100による撮像条件(照射光の種類、倍率及び焦点距離等)を変更する旨の指示等を入力する。
処置具制御装置11205は、組織の焼灼、切開又は血管の封止等のためのエネルギー処置具11112の駆動を制御する。気腹装置11206は、内視鏡11100による視野の確保及び術者の作業空間の確保の目的で、患者11132の体腔を膨らめるために、気腹チューブ11111を介して当該体腔内にガスを送り込む。レコーダ11207は、手術に関する各種の情報を記録可能な装置である。プリンタ11208は、手術に関する各種の情報を、テキスト、画像又はグラフ等各種の形式で印刷可能な装置である。
なお、内視鏡11100に術部を撮影する際の照射光を供給する光源装置11203は、例えばLED、レーザ光源又はこれらの組み合わせによって構成される白色光源から構成することができる。RGBレーザ光源の組み合わせにより白色光源が構成される場合には、各色(各波長)の出力強度及び出力タイミングを高精度に制御することができるため、光源装置11203において撮像画像のホワイトバランスの調整を行うことができる。また、この場合には、RGBレーザ光源それぞれからのレーザ光を時分割で観察対象に照射し、その照射タイミングに同期してカメラヘッド11102の撮像素子の駆動を制御することにより、RGBそれぞれに対応した画像を時分割で撮像することも可能である。当該方法によれば、当該撮像素子にカラーフィルタを設けなくても、カラー画像を得ることができる。
また、光源装置11203は、出力する光の強度を所定の時間ごとに変更するようにその駆動が制御されてもよい。その光の強度の変更のタイミングに同期してカメラヘッド11102の撮像素子の駆動を制御して時分割で画像を取得し、その画像を合成することにより、いわゆる黒つぶれ及び白とびのない高ダイナミックレンジの画像を生成することができる。
また、光源装置11203は、特殊光観察に対応した所定の波長帯域の光を供給可能に構成されてもよい。特殊光観察では、例えば、体組織における光の吸収の波長依存性を利用して、通常の観察時における照射光(すなわち、白色光)に比べて狭帯域の光を照射することにより、粘膜表層の血管等の所定の組織を高コントラストで撮影する、いわゆる狭帯域光観察(Narrow Band Imaging)が行われる。あるいは、特殊光観察では、励起光を照射することにより発生する蛍光により画像を得る蛍光観察が行われてもよい。蛍光観察では、体組織に励起光を照射し当該体組織からの蛍光を観察すること(自家蛍光観察)、又はインドシアニングリーン(ICG)等の試薬を体組織に局注するとともに当該体組織にその試薬の蛍光波長に対応した励起光を照射し蛍光像を得ること等を行うことができる。光源装置11203は、このような特殊光観察に対応した狭帯域光及び/又は励起光を供給可能に構成され得る。
図10は、図9に示すカメラヘッド11102及びCCU11201の機能構成の一例を示すブロック図である。
カメラヘッド11102は、レンズユニット11401と、撮像部11402と、駆動部11403と、通信部11404と、カメラヘッド制御部11405と、を有する。CCU11201は、通信部11411と、画像処理部11412と、制御部11413と、を有する。カメラヘッド11102とCCU11201とは、伝送ケーブル11400によって互いに通信可能に接続されている。
レンズユニット11401は、鏡筒11101との接続部に設けられる光学系である。鏡筒11101の先端から取り込まれた観察光は、カメラヘッド11102まで導光され、当該レンズユニット11401に入射する。レンズユニット11401は、ズームレンズ及びフォーカスレンズを含む複数のレンズが組み合わされて構成される。
撮像部11402を構成する撮像素子は、1つ(いわゆる単板式)であってもよいし、複数(いわゆる多板式)であってもよい。撮像部11402が多板式で構成される場合には、例えば各撮像素子によってRGBそれぞれに対応する画像信号が生成され、それらが合成されることによりカラー画像が得られてもよい。あるいは、撮像部11402は、3D(dimensional)表示に対応する右目用及び左目用の画像信号をそれぞれ取得するための1対の撮像素子を有するように構成されてもよい。3D表示が行われることにより、術者11131は術部における生体組織の奥行きをより正確に把握することが可能になる。なお、撮像部11402が多板式で構成される場合には、各撮像素子に対応して、レンズユニット11401も複数系統設けられ得る。
また、撮像部11402は、必ずしもカメラヘッド11102に設けられなくてもよい。例えば、撮像部11402は、鏡筒11101の内部に、対物レンズの直後に設けられてもよい。
駆動部11403は、アクチュエータによって構成され、カメラヘッド制御部11405からの制御により、レンズユニット11401のズームレンズ及びフォーカスレンズを光軸に沿って所定の距離だけ移動させる。これにより、撮像部11402による撮像画像の倍率及び焦点が適宜調整され得る。
通信部11404は、CCU11201との間で各種の情報を送受信するための通信装置によって構成される。通信部11404は、撮像部11402から得た画像信号をRAWデータとして伝送ケーブル11400を介してCCU11201に送信する。
また、通信部11404は、CCU11201から、カメラヘッド11102の駆動を制御するための制御信号を受信し、カメラヘッド制御部11405に供給する。当該制御信号には、例えば、撮像画像のフレームレートを指定する旨の情報、撮像時の露出値を指定する旨の情報、並びに/又は撮像画像の倍率及び焦点を指定する旨の情報等、撮像条件に関する情報が含まれる。
なお、上記のフレームレートや露出値、倍率、焦点等の撮像条件は、ユーザによって適宜指定されてもよいし、取得された画像信号に基づいてCCU11201の制御部11413によって自動的に設定されてもよい。後者の場合には、いわゆるAE(Auto Exposure)機能、AF(Auto Focus)機能及びAWB(Auto White Balance)機能が内視鏡11100に搭載されていることになる。
カメラヘッド制御部11405は、通信部11404を介して受信したCCU11201からの制御信号に基づいて、カメラヘッド11102の駆動を制御する。
通信部11411は、カメラヘッド11102との間で各種の情報を送受信するための通信装置によって構成される。通信部11411は、カメラヘッド11102から、伝送ケーブル11400を介して送信される画像信号を受信する。
また、通信部11411は、カメラヘッド11102に対して、カメラヘッド11102の駆動を制御するための制御信号を送信する。画像信号や制御信号は、電気通信や光通信等によって送信することができる。
画像処理部11412は、カメラヘッド11102から送信されたRAWデータである画像信号に対して各種の画像処理を施す。
制御部11413は、内視鏡11100による術部等の撮像、及び、術部等の撮像により得られる撮像画像の表示に関する各種の制御を行う。例えば、制御部11413は、カメラヘッド11102の駆動を制御するための制御信号を生成する。
また、制御部11413は、画像処理部11412によって画像処理が施された画像信号に基づいて、術部等が映った撮像画像を表示装置11202に表示させる。この際、制御部11413は、各種の画像認識技術を用いて撮像画像内における各種の物体を認識してもよい。例えば、制御部11413は、撮像画像に含まれる物体のエッジの形状や色等を検出することにより、鉗子等の術具、特定の生体部位、出血、エネルギー処置具11112の使用時のミスト等を認識することができる。制御部11413は、表示装置11202に撮像画像を表示させる際に、その認識結果を用いて、各種の手術支援情報を当該術部の画像に重畳表示させてもよい。手術支援情報が重畳表示され、術者11131に提示されることにより、術者11131の負担を軽減することや、術者11131が確実に手術を進めることが可能になる。
カメラヘッド11102及びCCU11201を接続する伝送ケーブル11400は、電気信号の通信に対応した電気信号ケーブル、光通信に対応した光ファイバ、又はこれらの複合ケーブルである。
ここで、図示する例では、伝送ケーブル11400を用いて有線で通信が行われていたが、カメラヘッド11102とCCU11201との間の通信は無線で行われてもよい。
以上、本開示に係る技術が適用され得る内視鏡手術システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、撮像部11402に適用され得る。撮像部11402に本開示に係る技術を適用することにより、検出精度が向上する。
なお、ここでは、一例として内視鏡手術システムについて説明したが、本開示に係る技術は、その他、例えば、顕微鏡手術システム等に適用されてもよい。
<移動体への応用例>
本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット、建設機械、農業機械(トラクター)などのいずれかの種類の移動体に搭載される装置として実現されてもよい。
図11は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図11に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図11の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
図12は、撮像部12031の設置位置の例を示す図である。
図12では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
なお、図12には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、撮像部12031に適用され得る。撮像部12031に本開示に係る技術を適用することにより、より見やすい撮影画像を得ることができるため、ドライバの疲労を軽減することが可能になる。
以上、実施の形態等を挙げて説明したが、本開示内容は上記実施の形態等に限定されるものではなく、種々変形が可能である。例えば、上記実施の形態において説明した撮像装置1,1Aの層構成は一例であり、更に他の層を備えていてもよい。また、各層の材料や厚みも一例であって、上述のものに限定されるものではない。例えば、上記実施の形態等では、第1コンタクト層12、光電変換層13および第2コンタクト層14により半導体層10Sを構成する場合について説明したが、半導体層10Sは光電変換層13を含んでいればよい。例えば、第1コンタクト層12および第2コンタクト層14を設けなくてもよく、あるいは、他の層を含んでいてもよい。
また、上記実施の形態等では、便宜上、信号電荷が正孔である場合について説明したが、信号電荷は電子であってもよい。例えば、拡散領域がn型の不純物を含んでいてもよい。
また、撮像装置1,1Aに遮光部15,15Aを複数設けるようにしてもよい。
また、上記実施の形態等において説明した効果は一例であり、他の効果であってもよいし、更に他の効果を含んでいてもよい。
尚、本開示は、以下のような構成であってもよい。
(1)
化合物半導体を含み、光入射面を有する光電変換層と、
前記光入射面に入射する光の光路に設けられ、450nm未満の波長の光を遮光する遮光部と
を備えた撮像装置。
(2)
前記遮光部は無機材料を含む
前記(1)に記載の撮像装置。
(3)
前記遮光部は有機材料を含む
前記(1)に記載の撮像装置。
(4)
前記遮光部は金属を含む
前記(1)に記載の撮像装置。
(5)
前記遮光部はレンズ形状を有する
前記(1)ないし(3)のうちいずれか1つに記載の撮像装置。
(6)
化合物半導体を含み、光入射面を有する光電変換層と、
前記光入射面に入射する光の光路に設けられ、前記光電変換層に格子整合された化合物を含む遮光部と
を備えた撮像装置。
(7)
前記遮光部は、InxGayAsz(1-x-y-z),InxGayAlzAs(1-x-y-z),InxGayAszSb(1-x-y-z),InP,InxAlyAszSb(1-x-y-z),InxAlyGaz(1-x-y-z)またはZnxCdySezを含む(0≦x≦1、0≦y≦1、0≦z≦1)
前記(6)に記載の撮像装置。
(8)
前記遮光部は、赤外領域の波長の光および可視領域の波長の光を透過する
前記(1)ないし(7)のうちいずれか1つに記載の撮像装置。
(9)
更に、前記光電変換層を間にして前記遮光部に対向する第1コンタクト層と、
前記光電変換層を間にして、前記第1コンタクト層に対向する第2コンタクト層とを有する
前記(1)ないし(8)のうちいずれか1つに記載の撮像装置。
(10)
前記遮光部は、前記第2コンタクト層に接して設けられている
前記(9)に記載の撮像装置。
(11)
前記遮光部は、前記第2コンタクト層に離間して設けられている
前記(9)に記載の撮像装置。
(12)
前記第2コンタクト層は、100nm以下の厚みを有する
前記(9)ないし(11)のうちいずれか1つに記載の撮像装置。
(13)
更に、前記第1コンタクト層、前記光電変換層および前記第2コンタクト層を含む素子基板と、
前記光電変換層に電気的に接続された画素回路を有する回路基板とを有する
前記(9)ないし(12)のうちいずれか1つに記載の撮像装置。
(14)
前記素子基板と前記回路基板とがCu−Cu接合により電気的に接続されている
前記(13)に記載の撮像装置。
(15)
前記化合物半導体は、赤外領域の波長の光を吸収する
前記(1)ないし(14)のうちいずれか1つに記載の撮像装置。
(16)
前記化合物半導体は、InGaAs,InAsSb,InAs,InSb,PbS,PbSe,GeAuおよびHgCdTeのうちのいずれか1つである
前記(1)ないし(15)のうちいずれか1つに記載の撮像装置。
本出願は、日本国特許庁において2018年1月23日に出願された日本特許出願番号第2018−8583号を基礎として優先権を主張するものであり、この出願の全ての内容を参照によって本出願に援用する。
当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。

Claims (16)

  1. 化合物半導体を含み、光入射面を有する光電変換層と、
    前記光入射面に入射する光の光路に設けられ、450nm未満の波長の光を遮光する遮光部と
    を備えた撮像装置。
  2. 前記遮光部は無機材料を含む
    請求項1に記載の撮像装置。
  3. 前記遮光部は有機材料を含む
    請求項1に記載の撮像装置。
  4. 前記遮光部は金属を含む
    請求項1に記載の撮像装置。
  5. 前記遮光部はレンズ形状を有する
    請求項1に記載の撮像装置。
  6. 化合物半導体を含み、光入射面を有する光電変換層と、
    前記光入射面に入射する光の光路に設けられ、前記光電変換層に格子整合された化合物を含む遮光部と
    を備えた撮像装置。
  7. 前記遮光部は、InxGayAsz(1-x-y-z),InxGayAlzAs(1-x-y-z),InxGayAszSb(1-x-y-z),InP,InxAlyAszSb(1-x-y-z),InxAlyGaz(1-x-y-z)またはZnxCdySezを含む(0≦x≦1、0≦y≦1、0≦z≦1)
    請求項6に記載の撮像装置。
  8. 前記遮光部は、赤外領域の波長の光および可視領域の波長の光を透過する
    請求項1に記載の撮像装置。
  9. 更に、前記光電変換層を間にして前記遮光部に対向する第1コンタクト層と、
    前記光電変換層を間にして、前記第1コンタクト層に対向する第2コンタクト層とを有する
    請求項1に記載の撮像装置。
  10. 前記遮光部は、前記第2コンタクト層に接して設けられている
    請求項9に記載の撮像装置。
  11. 前記遮光部は、前記第2コンタクト層に離間して設けられている
    請求項9に記載の撮像装置。
  12. 前記第2コンタクト層は、100nm以下の厚みを有する
    請求項9に記載の撮像装置。
  13. 更に、前記第1コンタクト層、前記光電変換層および前記第2コンタクト層を含む素子基板と、
    前記光電変換層に電気的に接続された画素回路を有する回路基板とを有する
    請求項9に記載の撮像装置。
  14. 前記素子基板と前記回路基板とがCu−Cu接合により電気的に接続されている
    請求項13に記載の撮像装置。
  15. 前記化合物半導体は、赤外領域の波長の光を吸収する
    請求項1に記載の撮像装置。
  16. 前記化合物半導体は、InGaAs,InAsSb,InAs,InSb,PbS,PbSe,GeAuおよびHgCdTeのうちのいずれか1つである
    請求項1に記載の撮像装置。
JP2019567908A 2018-01-23 2018-12-12 撮像装置 Active JP7291082B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018008583 2018-01-23
JP2018008583 2018-01-23
PCT/JP2018/045705 WO2019146299A1 (ja) 2018-01-23 2018-12-12 撮像装置

Publications (2)

Publication Number Publication Date
JPWO2019146299A1 true JPWO2019146299A1 (ja) 2021-02-04
JP7291082B2 JP7291082B2 (ja) 2023-06-14

Family

ID=67395291

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019567908A Active JP7291082B2 (ja) 2018-01-23 2018-12-12 撮像装置

Country Status (4)

Country Link
US (1) US11329084B2 (ja)
EP (1) EP3745458A4 (ja)
JP (1) JP7291082B2 (ja)
WO (1) WO2019146299A1 (ja)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05347399A (ja) * 1992-06-12 1993-12-27 Japan Energy Corp 赤外線検出装置
JPH0677518A (ja) * 1992-08-26 1994-03-18 Nec Corp 半導体受光素子
JP2000036615A (ja) * 1998-07-21 2000-02-02 Sumitomo Electric Ind Ltd 受光素子及び受光素子モジュール
JP2000180621A (ja) * 1998-12-14 2000-06-30 Sony Corp オンチップカラーフィルタ及びこれを用いた固体撮像素子
JP2002502120A (ja) * 1998-02-02 2002-01-22 ユニアックス コーポレイション 有機半導体製画像センサ
JP2003243693A (ja) * 2002-02-19 2003-08-29 Oki Electric Ind Co Ltd 半導体受光素子,及び,半導体部品
JP2006269735A (ja) * 2005-03-24 2006-10-05 Sony Corp 固体撮像装置および固体撮像装置の製造方法
JP2006344681A (ja) * 2005-06-07 2006-12-21 Sumitomo Electric Ind Ltd 受光素子及び受光素子モジュール
JP2009038157A (ja) * 2007-07-31 2009-02-19 Sumitomo Electric Ind Ltd 受光素子アレイ、一次元受光素子アレイおよび二次元受光素子アレイ
JP2011222874A (ja) * 2010-04-13 2011-11-04 Sumitomo Electric Ind Ltd 半導体ウエハ、受光素子、受光素子アレイ、ハイブリッド型検出装置、光学センサ装置、および半導体ウエハの製造方法
JP2017028078A (ja) * 2015-07-22 2017-02-02 ソニー株式会社 撮像装置及びその製造方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6043550A (en) 1997-09-03 2000-03-28 Sumitomo Electric Industries, Ltd. Photodiode and photodiode module
FR2977982B1 (fr) 2011-07-11 2014-06-20 New Imaging Technologies Sas Matrice de photodiodes ingaas
US9111830B1 (en) * 2013-05-22 2015-08-18 Sensors Unlimited, Inc. Perforated blocking layer for enhanced broad band response in a focal plane array
JP2018008583A (ja) 2016-07-12 2018-01-18 株式会社デンソー 車両用粉塵計測システム

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05347399A (ja) * 1992-06-12 1993-12-27 Japan Energy Corp 赤外線検出装置
JPH0677518A (ja) * 1992-08-26 1994-03-18 Nec Corp 半導体受光素子
JP2002502120A (ja) * 1998-02-02 2002-01-22 ユニアックス コーポレイション 有機半導体製画像センサ
JP2000036615A (ja) * 1998-07-21 2000-02-02 Sumitomo Electric Ind Ltd 受光素子及び受光素子モジュール
JP2000180621A (ja) * 1998-12-14 2000-06-30 Sony Corp オンチップカラーフィルタ及びこれを用いた固体撮像素子
JP2003243693A (ja) * 2002-02-19 2003-08-29 Oki Electric Ind Co Ltd 半導体受光素子,及び,半導体部品
JP2006269735A (ja) * 2005-03-24 2006-10-05 Sony Corp 固体撮像装置および固体撮像装置の製造方法
JP2006344681A (ja) * 2005-06-07 2006-12-21 Sumitomo Electric Ind Ltd 受光素子及び受光素子モジュール
JP2009038157A (ja) * 2007-07-31 2009-02-19 Sumitomo Electric Ind Ltd 受光素子アレイ、一次元受光素子アレイおよび二次元受光素子アレイ
JP2011222874A (ja) * 2010-04-13 2011-11-04 Sumitomo Electric Ind Ltd 半導体ウエハ、受光素子、受光素子アレイ、ハイブリッド型検出装置、光学センサ装置、および半導体ウエハの製造方法
JP2017028078A (ja) * 2015-07-22 2017-02-02 ソニー株式会社 撮像装置及びその製造方法

Also Published As

Publication number Publication date
WO2019146299A1 (ja) 2019-08-01
EP3745458A1 (en) 2020-12-02
EP3745458A4 (en) 2021-03-17
US20210066372A1 (en) 2021-03-04
US11329084B2 (en) 2022-05-10
JP7291082B2 (ja) 2023-06-14

Similar Documents

Publication Publication Date Title
JP7270616B2 (ja) 固体撮像素子および固体撮像装置
JP7007088B2 (ja) 受光素子、撮像素子および電子機器
JP7272969B2 (ja) 固体撮像素子および撮像装置
JP6979974B2 (ja) 受光素子の製造方法
JP6903896B2 (ja) 受光素子の製造方法
JPWO2019131134A1 (ja) 受光素子および電子機器
US20230411432A1 (en) Solid-state imaging element and imaging apparatus
WO2020179290A1 (ja) センサおよび測距装置
WO2019171879A1 (ja) 撮像装置
JPWO2018180570A1 (ja) 固体撮像素子、電子機器、および半導体装置
JPWO2020080124A1 (ja) 半導体素子およびその製造方法
WO2021070586A1 (ja) 光電変換素子および撮像素子
JP2019179782A (ja) 半導体装置および半導体装置の製造方法
WO2017122537A1 (ja) 受光素子、受光素子の製造方法、撮像素子および電子機器
JP7291082B2 (ja) 撮像装置
JPWO2020137282A1 (ja) 撮像素子および電子機器
WO2021060098A1 (ja) 撮像素子
WO2022234806A1 (ja) 固体撮像素子
JP7344114B2 (ja) 撮像素子および電子機器
JPWO2020059495A1 (ja) 撮像素子、半導体素子および電子機器
JPWO2020090384A1 (ja) 撮像装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221005

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230602

R150 Certificate of patent or registration of utility model

Ref document number: 7291082

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150