JP7163329B2 - 対物レンズ、カメラ、及びそのような対物レンズを備える光遺伝学に適応したシステム - Google Patents

対物レンズ、カメラ、及びそのような対物レンズを備える光遺伝学に適応したシステム Download PDF

Info

Publication number
JP7163329B2
JP7163329B2 JP2019572737A JP2019572737A JP7163329B2 JP 7163329 B2 JP7163329 B2 JP 7163329B2 JP 2019572737 A JP2019572737 A JP 2019572737A JP 2019572737 A JP2019572737 A JP 2019572737A JP 7163329 B2 JP7163329 B2 JP 7163329B2
Authority
JP
Japan
Prior art keywords
lens
focal length
objective
lens unit
lenses
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019572737A
Other languages
English (en)
Other versions
JP2020525854A (ja
Inventor
シャバ ジョエル
シェネグロ ギヨーム
ガル シャルリエ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sorbonne Universite
Original Assignee
Sorbonne Universite
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sorbonne Universite filed Critical Sorbonne Universite
Publication of JP2020525854A publication Critical patent/JP2020525854A/ja
Application granted granted Critical
Publication of JP7163329B2 publication Critical patent/JP7163329B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/003Alignment of optical elements
    • G02B7/005Motorised alignment
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/004Optical devices or arrangements for the control of light using movable or deformable optical elements based on a displacement or a deformation of a fluid
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0025Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration
    • G02B27/0068Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration having means for controlling the degree of correction, e.g. using phase modulators, movable elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B3/00Simple or compound lenses
    • G02B3/12Fluid-filled or evacuated lenses
    • G02B3/14Fluid-filled or evacuated lenses of variable focal length
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2/00Filters implantable into blood vessels; Prostheses, i.e. artificial substitutes or replacements for parts of the body; Appliances for connecting them with the body; Devices providing patency to, or preventing collapsing of, tubular structures of the body, e.g. stents
    • A61F2/02Prostheses implantable into the body
    • A61F2/14Eye parts, e.g. lenses, corneal implants; Implanting instruments specially adapted therefor; Artificial eyes
    • A61F2/16Intraocular lenses

Description

本発明は、10度の物体視野をイメージャ上に撮像するための対物レンズに関する。本発明は、光遺伝学に適合した関連カメラ及び関連システムにも関する。
網膜は光受容体で構成され、光受容体は、光変換による網膜の光感受性に関与する高度に特殊化されたニューロンであり、つまり、視覚システム内でイベントのカスケードを伝播する電気信号と化学信号への光の変換であり、最終的に世界の表現を生成する。脊椎動物の網膜では、光受容体タンパク質であるロドプシンの活性化により光変換が開始される。
網膜色素変性症(RP)又は黄斑変性(MD)の場合など、光受容体の損失又は変性は、網膜内の視覚情報の光変換を完全には阻害しないにしてもひどく妥協する。視細胞の喪失及び/又は視細胞機能の喪失は、視力の低下、光感受性の低下、及び失明の主な原因である。
現在、遺伝子治療、幹細胞治療、光遺伝学、及び人工網膜を含む、網膜変性疾患に特化したいくつかの治療アプローチが開発されている。(Scholl et al., 2016, Science Translational Medicine, 8 (368), 368rv6)
例えば、光遺伝学と呼ばれる遺伝子工学及び神経工学技術により、脳内の他のニューロンに影響を与えることなく、定義されたニューロン集団の活動を制御することにより、被験者の網膜の光感受性を回復することが提案されている。欠陥遺伝子の置換又は修復、又はタンパク質欠乏又は機能不全の修正による遺伝的欠陥の回避を試みる従来の遺伝子治療とは対照的に、光遺伝学的アプローチを使用して、網膜の通常は非感光性の細胞に光に反応する能力を付与し、患者の有用な視力を回復することができる。双極細胞又は神経節細胞に細胞外電気刺激を提供する網膜チップインプラントとは異なり、光遺伝学ベースの治療法は、細胞内から細胞を刺激する。
光遺伝学(Deisseroth. Nat Methods 8 (1): 26-9, 2011)は、遺伝学と光学の組み合わせを意味し、生体組織の特定の細胞内の明確なイベントを制御する。光遺伝学は、(i)細胞膜での外因性の光反応性タンパク質の発現により標的細胞を光に敏感にするために遺伝子を改変し、(ii)光反応性タンパク質に光を提供できる照明デバイスを提供することから成る。
外因性の光反応性タンパク質の例は、哺乳類ニューロンでの発現用に設計されており、ウイルスベクターを使用して特定の神経集団に遺伝的に標的化することができる光活性化イオンチャネル及びポンプ(チャネルロドプシン-2[ChR2]、ハロロドプシン[NpHR])をエンコードする植物及び微生物(例、古細菌、細菌、及び真菌)に由来するオプシン遺伝子の使用を記載する国際公開第2007024391号パンフレット、国際公開第2008022772号パンフレット、又は国際公開第2009127705号パンフレットによって提供される。適切な波長の光にさらされると、オプシンを発現するニューロンで活動電位が誘発され、それによりこれらの細胞に対する光感受性が付与される。同様に、国際公開第2013013071231号パンフレットは、互いに及び最新技術(例:ChR2/VChR1)とは異なる活性化スペクトルを持っている新しいチャネルロドプシン、クロノスとクリムソンを開示し、複数の異なる波長の光を使用して、異なる細胞で遺伝的に発現される異なる活性化スペクトルを持つチャネルを発現することにより同じ組織内の異なる細胞セットを脱分極することができ、そして、異なる色の光で組織を照らす。
光遺伝学は、選択的なニューロンの活性化/抑制のための非常に強力なツールであり、例えば、人間を含む、生きている動物の神経機能を、特に目において(Busskamp et al., 2012, Gene Therapy 19 (2): 169-75)、回復するために使用できる(Boyden et al., 2005, Nature Neuroscience 8 (9): 1263-68)。
それにもかかわらず、選択された光の波長は、光反応性タンパク質の最適な波長に近いことが示されている(Nagel et al. 2003, Proceedings of the National Academy of Sciences 100 (24): 13940-45, Klapoetke et al. 2014, Nature Methods 11 (3) 338-46)、これらの光反応性タンパク質は、光に対する感度が非常に低いことが示されている(Asrican et al. 2013, Front Neural Circuits, 2013, 7:160 ; Busskamp et al. 2012, Gene Therapy 19 (2): 169-75)。したがって、光によるタンパク質活性化の最小レベルを得るために、標的細胞又はタンパク質が受ける光の強度は最小値を超えるものとする(Barrett et al., 2014, Visual Neuroscience 31 (4-5): 345-354)。結果として、適切な波長で充分な放射照度を提供する外部デバイスは必須である。
あるいは、これらの患者の視覚補綴システムで少なくとも部分的に視力を回復することが提案されている。これらのシステムは、網膜組織の一部が変性しているが、網膜の大部分は無傷のままであり、光依存性電気刺激によって直接刺激される可能性があるという事実を活用することにより、視覚障害のあるユーザーのために、控えめな視覚と向きの感覚を少なくとも部分的に再確立するのに役立つツールである網膜インプラントを備える。通常、網膜インプラントは患者の目に埋め込まれ、光刺激により残りの神経細胞を電気的に励起する。刺激されると、これらの残りの神経細胞は人工的に誘導された電気インパルスを視神経を通して脳の視覚部分に伝える。
網膜インプラントは、網膜上及び網膜下の2つのカテゴリに大きく分けることができる(Lin et al., 2015, Retinal prostheses in degenerative retinal diseases, J Chin Med Assoc.; 78(9):501-5)。網膜上デバイスは、網膜の内面、すなわち最初に入射光にさらされ、神経節細胞の神経線維が視神経に向かう途中の網膜の側面の上又は近くに配置される。網膜上インプラントは、通常、盲目の又は部分的に盲目の患者の視力を再構築又は改善するため、眼のレンズを通して網膜上の外眼装置(通常はカメラと入射光をデコードするためのマイクロ電子回路)によって投影された画像を受信できる複数のピクセル要素を備え、画像を電気信号に変換し、複数の刺激電極を介して信号を電気刺激にさらに伝達して、チップに隣接する網膜細胞を刺激するためのチップで構成される。対照的に、網膜下デバイスは、網膜の下、網膜とその下の網膜色素上皮又は他のより深い組織との間に配置される。現在利用可能な網膜下技術は、単一の剛性で一般的に平面のチップの移植に依存する。さらに、大きな視野をカバーするために、複数のチップを移植できることが望ましいことが示されている(Lee et al. (2016). Implantation of Modular Photovoltaic Subretinal Prosthesis. Ophthalmic Surgery, Lasers and Imaging Retina, 47(2), 171-174)。
人工網膜及び光遺伝学的治療は、2つの主要なコンポーネントに依存する。網膜上で設計された1番目のコンポーネントは、光子を電気化学信号に変換することで光感度を提供する:人工網膜システムのインプラントと、光遺伝学的治療で網膜細胞に遺伝的に導入された光依存性イオンチャネルタンパク質。2番目のコンポーネントは、視覚情報(通常はカメラ又はフォトダイオードの配列で取得)をエンコードし、前者のコンポーネントが必要とする入力信号に変換するために必要である。人工網膜では、入力信号は、能動電極のマトリックス又は受動部品を活性化できる光のパルスによって供給される電流である。光遺伝学遺伝子治療では、配信される入力信号は、定義された時空間的にオプトジェネティックタンパク質を活性化するのに必要な適切な強度と波長の光パルスである。
光の感度を回復するために使用されるアプローチに関係なく、視覚情報をリアルタイムでエンコードできる刺激装置が必要である。
本発明は、網膜色素変性症に冒された盲目の被験者の部分的な視力を回復するシステムで使用される刺激装置に埋め込まれるように構成された対物レンズを提供することを目的とする。
このため、出願人の研究のおかげで、出願人は、そのような対物レンズによって満たされるべき要件を表明した。
まず、対物レンズの大きさを小さくする必要がある(特に25ミリメートル未満)。
さらに、対物レンズは、特に30マイクロメートル(μm)未満の充分な解像度を提供する必要がある。
さらに、対物レンズは10度の物体視野を提供する必要がある。
対物レンズは、焦点距離が調整可能であり、40センチメートルを超える場所にある物体を撮像できるようにする必要がある。
このため、100ピクセルを超えるピクセルを備えるイメージャに対して10度の物体視野の結像を行う対物レンズであって、伝搬方向は対物レンズに対して定義され、対物レンズは、伝搬方向の順に、第1レンズユニットと、曲げミラーと、液体レンズと、第2レンズユニットを備える対物レンズが提案される。第1レンズユニットは、複数のレンズを備え、第1レンズユニットは第1焦点距離及び第1ディメンションを持ち、第1焦点距離は正であり、第1ディメンションは15ミリメートル未満である。曲げミラーは、90度の角度で曲がるように構成される。第2レンズユニットは、複数のレンズを備え、第2レンズユニットは第2焦点距離及び第2ディメンションを持ち、第2焦点距離は正であり、第1焦点距離と第2焦点距離の間の比率は、1.0と2.0の間に含まれ、第1ディメンションと第2ディメンションの間の比率は2以上である。
曲げミラーの存在と第1ディメンション上の制限により、対物レンズのサイズが小さくなった。
液体レンズを使用すると、焦点距離が調整可能になり、40センチメートルを超える物体を撮像できる。
さらに、正の焦点距離を持つ2つのレンズユニットを備えた特定のアーキテクチャであって、第1焦点距離と第2焦点距離の比は1.0~2.0で構成され、第1ディメンションと第2ディメンションの比は2以上であるアーキテクチャは、10度の物体視野に対して充分な解像度を提供する画質を得ることができる。
前述のとおり、対物レンズのアーキテクチャの利点は、レンズシーケンスと開口絞りの定義に関係なく得られる。
有利ではあるが必須ではない発明のさらなる側面によれば、対物レンズは、技術的に許容される任意の組み合わせで、以下の1つ以上の機能を組み込むことができる。
第1レンズユニット及び第2レンズユニットに属する各レンズの材料は、2つの異なる材料から選択される。
この機能により、充分な画像品質を維持しながら、関連するレンズの前述の数を減らすことができる。その結果、このような機能は、サイズが縮小された対物レンズの取得にも貢献する。
第1レンズユニットのレンズの数及び第2レンズユニットのレンズの数は4以下である。
この機能により、前述の対物レンズに存在するレンズの前述の数が減少し、前述の対物レンズの前述のサイズが著しく減少する。
第1レンズユニット及び第2レンズユニットの少なくとも一方は、両凸レンズ及び凹メニスカスを含む。
このような機能により、上記のレンズの数を制限し、充分な画質を維持できる。また、これにより、対物レンズの製造が容易になる。
第1レンズユニット及び第2レンズユニットに属する各レンズは、両凸レンズ又はメニスカスレンズのみから選択される。
このような機能により、上記のレンズの数を制限し、充分な画質を維持できる。また、これにより、対物レンズの製造が容易になる。
第1レンズユニットは、少なくとも2つのレンズで構成され、伝搬方向において第1レンズは収束レンズ及び発散レンズであり、発散レンズの焦点距離と収束レンズの焦点距離の間の絶対値における比率は、1.8から2.2の間に含まれる。
このような機能により、簡単に良い画質を得ることができる。これにより、縮小されたサイズの対物レンズも得られる。
第1焦点距離は、30.0ミリメートルと40.0ミリメートルの間に含まれる。
このような機能により、前述の第1レンズユニットの前述の焦点距離が制限される。これにより、サイズが縮小された対物レンズが生成される。
第2焦点距離は、20.0ミリメートルと35.0ミリメートルの間に含まれる。
このような機能により、前述の第2レンズユニットの前述の焦点距離が制限される。これにより、サイズがさらに縮小された対物レンズが作成される。
第2レンズユニットは、伝搬方向の順序で、発散レンズ及び収束レンズを含み、発散レンズの焦点距離と収束レンズの焦点距離の間の絶対値における比率は1.8から3.6の間に含まれる。
このような機能の存在により、前述の画像の前述の品質が向上する。
第1レンズユニットの第1レンズは、入射焦点距離を持ち、第2レンズユニットの最終レンズは、出口焦点距離を持ち、出口焦点距離と入射焦点距離の間の比率は、絶対値において0.7から1.0の間に含まれる。
このような機能により、10度全体の視野で良好な画質を得ることができる。
第1レンズユニットは、3つのレンズで構成されている。
このような機能により、上記のレンズの数を制限し、充分な画質を維持できる。また、これにより、製造レンズの製造が容易になる。
第2レンズユニットは、2つのレンズで構成されている。
このような機能により、上記のレンズの数を制限し、充分な画質を維持できる。また、これにより、対物レンズの製造が容易になる。
また、この仕様は、前述のとおり、100ピクセルを超えるイメージャと、対物レンズを備えたカメラに関するものである。
また、前述のカメラを備えた光遺伝学に適したシステムも提案されている。
光遺伝学に適合した上記のシステムは、少なくとも部分的には患者の眼に埋め込まれることを意図している。特に、システムのカメラは、患者の眼に移植されることを意図している。
これは、上記のシステムが上記の眼に埋め込まれるために品質と安全基準を尊重しなければならないことを導くかもしれない。さらに、これは、眼に移植されるために、サイズ及び形態に関して構造的にシステムの境界を定めることにつながる可能性がある。
本発明は、本発明の目的を制限することなく、添付の図面と対応する例示的な例として与えられる以下の説明に基づいてより良く理解されるであろう。添付図では:
対物レンズとイメージャを概略的に示し、この対物レンズは、第1レンズユニットと第2レンズユニットで構成される。 図1の第1レンズユニットの概略図を示す。 図1の第2レンズユニットの概略図を示す。 図1の要素を含む光遺伝学に適合したシステムを示す。
対物レンズ10とイメージャ12を図1に模式的に示す。
対物レンズ10は、イメージャ12に10度の物体視野を投影するように構成されている。
対物レンズ10の伝播方向Zが定義される。伝播方向Zは、対物レンズの一部である各光学素子の光軸として定義される。
対物レンズ10は、伝播方向Zの順に、第1レンズユニットU1、曲げミラーM、液体レンズLL、及び第2レンズユニットU2を含む。
第1レンズユニットU1は、複数のレンズを備えている。
第1レンズユニットU1のレンズ数は4個以下である。
第1レンズユニットU1に属する各レンズの材料は、2つの異なる材料から選択される。
例えば、2つの異なる材料はN-BK7とN-SF11である。
第1レンズユニットU1は、第1焦点距離fU1と第1ディメンションDU1を持っている。
最初の焦点距離fU1は正である。
一例によれば、第1焦点距離fU1は、30.0ミリメートル(mm)から40.0mmの間に含まれる。
第1ディメンションDU1は15mm未満である。
曲げミラーMは、90度の角度で曲がるようになっている。
第1レンズユニットU1に対して第1光軸OA1が定義され、液体レンズLL及び第2レンズユニットU2に対して第2光軸OA2が定義される。
「曲げミラーMは90度の角度で曲がるようになっている」という表現は、第1光軸OA1と第2光軸OA2が垂直であることを意味する。
図1の例では、曲げミラーMは、第1光軸OA1と第2光軸OA2に対して45度に配置された平面ミラーである。
液体レンズLLは、電圧を加えると焦点距離が変化するようになっている。
液体レンズの焦点距離の変化により、対物レンズ10は、第1レンズユニットU1から40センチメートル以上離れた場所にある物体の画像に構成する。
複数のレンズで構成される第2レンズユニットU2。
第2レンズユニットU2のレンズの数は4個以下である。
第2レンズユニットU2に属する各レンズの材料は、2つの異なる材料から選択される。
例えば、2つの異なる材料はN-BK7とN-SF11である。
第2レンズユニットU2には、第2焦点距離fU2と第2ディメンションDU2がある。
第2焦点距離fU2は正である。
第1焦点距離fU1と第2焦点距離fU2の比は、第1比率R1と呼ばれる。これは数学的に次のように表現できる。
Figure 0007163329000001
第1比率R1は1.0から2.5の間に含まれる。
数学的には、これは次のことを意味する。
Figure 0007163329000002
具体例として、第2焦点距離fU2は20.0mm~35.0mmの間に含まれる。
第1ディメンションDU1と第2ディメンションDU2の比率は、第2比率R2と呼ばれる。これは数学的に次のように表現できる。
Figure 0007163329000003
第2比率R2は2以上である。数学的には、これは次のことを意味する。
Figure 0007163329000004
第2比率R2は3以下である。数学的には、これは次のことを意味する。
Figure 0007163329000005
第1レンズユニットU1の具体例を図2に示す。
この場合、第1レンズユニットU1は3つのレンズで構成される。
伝播方向の順に、第1レンズユニットU1の第1レンズは第1レンズL1、第1レンズユニットU1の第2レンズは第2レンズL2、第1レンズユニットU1の第3レンズは第3レンズL3と呼ぶ。
第1レンズL1は収束レンズである。
第1レンズL1の焦点距離はfL1である。
焦点距離fL1は、対物レンズの入射焦点距離である。
また、第1レンズL1は両凸レンズである。
定義では、両凸レンズは、両面が凸面のレンズである。
この特定の例では、第1レンズL1は、両凸面の曲率半径が同じであることを意味する等凸レンズである。
第2レンズL2は発散レンズである。
第2レンズL2の焦点距離はfL2である。
第2レンズL2はメニスカスであり、1つの凸面と1つの凹面を持つレンズである。このようなメニスカスは、凸凹レンズとも呼ばれる。
この場合、第2レンズL2は負のメニスカスである。
第2レンズL2の焦点距離fL2と第1レンズL1の焦点距離fL1との絶対値の比率を第3比率R3と呼ぶ。
第3比率R3は1.8から2.2の間に含まれる。
数学的には、これは次のことを意味する。
Figure 0007163329000006
第3レンズL3は発散レンズである。
第3レンズL3は、焦点距離fL3を有する。
第3レンズL3はメニスカスである。
第3レンズL3は、この場合、正のメニスカスである。
第2レンズユニットU2の具体例を図3に示す。
その場合、第2レンズユニットU2は2つのレンズで構成される。
伝播方向の順に、第2レンズユニットU2の第1レンズを第4レンズL4、第2レンズユニットU2の第2レンズを第5レンズL5と呼ぶ。
第4レンズL4は発散レンズである。
第4レンズL4は焦点距離fL4を有する。
第4レンズL4はメニスカスである。
第4レンズL4は、この場合、負のメニスカスである。
第5レンズL5は収束レンズである。
第5レンズL5は、焦点距離fL5を有する。
第5レンズL5の焦点距離fL5は、対物レンズの出口焦点距離である。
具体例では、第5レンズL5は両凸レンズである。
より正確には、第5レンズL5は等凸レンズである。
別の変形例では、第5レンズL5はメニスカス、特に正のメニスカスである。
第4レンズL4の焦点距離と第5レンズL5の焦点距離との間の絶対値の比率は、第4比率R4と呼ばれる。これは数学的に次のように表現できる。
Figure 0007163329000007
第4比率R4は1.8から3.6の間に含まれる。
数学的には、これは次のことを意味する。
Figure 0007163329000008
絶対値での出口焦点距離と入射焦点距離の比率は、第5比率R5と呼ばれる。
図2及び3の特定の場合、第5比率R5は、第5レンズL5の焦点距離fL5と第1レンズL1の焦点距離fL1の絶対値の比率である。
数学的には、これは次のことを意味できる。
Figure 0007163329000009
第5比率R5は、0.7と1.0の間に含まれる。
数学的には、これは次のことを意味する。
Figure 0007163329000010
イメージャ12は、ピクセルの配列14とカバーガラス16のセットである。
ピクセルの配列14は100以上のピクセルを含む。
特定の例では、ピクセルの配列14は、240ピクセル当たり304ピクセルの配列である。
ピクセルの配列14は、例えば、CMOS技術で作られている。
カバーガラス16は、平行平面板である。
イメージャ12に関連する対物レンズ10の操作について説明する。
第1レンズユニットU1から40センチメートル以上離れた位置にある対物レンズ10の視野内の物体は、ピクセルの配列14上に結像される。
より正確には、物体は、波長が第1レンズL1、第2レンズL2、第3レンズL3を連続的に通過する可視範囲にある光線を放射する。この光線は、曲げミラーMで反射され、液体レンズLLを通過してから、第2レンズユニットU2、つまり第4レンズL4と第5レンズL5を通過する。その後、光線はカバーガラスに伝播し、ピクセルの配列14の1つのピクセルによって収集される。
これは、オブジェクトによって放出される各光線、より一般的にはイメージャ12と連携してシーンが対物レンズ10によって撮像されるときに撮像される各オブジェクトに対して発生する。
このような対物レンズ10の得られた光学性能は、「特定の実施形態の説明」と呼ばれるセクションに記載されている特定の例で詳述されている。
このセクションから、対物レンズはサイズを小さくし、レンズを移動するための機械装置を使用しないため、対物レンズの実装が容易になるようである。対物レンズは、充分な解像度を提供することも可能にする。さらに、対物レンズは、10度の物体視野を提供する。対物レンズは、焦点距離が調整可能であるため、40センチメートル以上にある物体を撮像できる。
したがって、対物レンズ10とイメージャ12を使用すると、網膜色素変性症の影響を受けたブリング被験者の視力を部分的に回復するシステムで使用される刺激装置に組み込むのに適したカメラを構成できる。
言い換えれば、そのようなカメラは、光遺伝学に適合したシステムの一部になるように構成されている。
対物レンズ10とイメージャ12を組み込んだ刺激装置18の例を図4に示す。このようなコンテキストでは、一連の対物レンズ10とイメージャ12は、視覚的なフロントエンドであるカメラ20である。
刺激装置18は、コントローラ22と投影ユニット24も備えている。
イメージャ12は、QVGA ATIS(非同期時間ベースのイメージセンサー)神経形態シリコン網膜である。特定の時間間隔でフレームを送信するのではなく、イメージャ12の各ピクセルは、光が局所的に変化するとすぐに、その座標をエンコードするイベントを非同期的に送信する。イベントはまた、対応する光強度レベルを計算するために、時間を通して光を統合する専用のピクセルベースの回路をトリガーする。したがって、各ピクセルは非同期で、他のピクセルと並行して動作し、フレームが情報を送信するのを待つ必要はない。各ピクセルは、何か新しいことがローカルで発生した場合にのみ情報を送信する。
これは、低遅延で帯域幅効率の高いエンコードスキームに変換され、生物学的同等物と同じ特性を共有する。実際、この表現を使用して網膜神経節細胞のイン・ビトロ応答を複製することが可能である。さらに、ピクセルは情報の変更のみを送信するため、冗長性は低く保たれ、後続の処理レイヤーに明らかな利点がある。このアプローチは、フレームを送信する従来の方法とは対照的であり、広範囲の照明で高速のデータ駆動型コントラスト検出を提供する。
このイメージャ14の使用にはいくつかの利点がある。視細胞の修復の場合、イメージャ14は、高速で高ダイナミックレンジのグレーレベル情報を提供する。網膜神経節細胞の活性化の場合、イメージャ14は、広い強度範囲にわたって前処理された輪郭又はイベント信号を提供する。イメージャ14の時間分解能も、人間の網膜の1つに一致する。低時間解像度での投影は、速度の判定、オブジェクトのカウント、数字の識別などの日常的なタスクで移動刺激を観察するときの行動パフォーマンスに影響を与える。
投影ユニット24は、光源及びDLP3000デジタルマイクロミラーデバイス(DMD)を制御するテキサスインスツルメントライトクラフターである。DMDは608x684のミラーアレイで構成され、ONとOFFという名前の2つの個別の角度位置間を0.7ミリ秒(ms)ごとに切り替え、ON位置は入射光をターゲットに向けて反射する。処理されたイベントは、対応するミラーをオンに設定することによりエンコードされる。グレーレベルは、パルス幅変調の形式でエンコードされる。
処理ユニットは、イベントベースのフィルタリングチェーンを実行するARMベースの組み込みLinux(登録商標)システムで構成されている。システムは、PCI Expressリンクを介して、イメージャ14及びDMDの低レベル管理を処理するFPGAボードと通信し、Linuxドライバーで抽象化される。視覚センサーから受信した情報は、フィルタリングパイプラインによって処理され、投影のためにDMDに送信される。このフィルターパイプラインは、遺伝的に導入されたイオンチャネルの電気生理学的特性に構成するように、ノイズ低減、照射される網膜領域のサイズ、及び各ピクセルの光パルスダイナミクスを処理する。フィルタリングパイプラインは、さまざまな種類のニューロンを刺激するために使用されるアルゴリズムも処理する。
そのような場合、投影ユニット24及びコントローラ22は、制御された光強度で物体を照明するためのデバイスを構成し、光強度は、満たされるべき複数の条件を満たしたときに制御され、複数の条件は、条件を含む。所定の時間の強度及び一定期間の線量に関する条件に対して、デバイスは、満たされる条件の少なくとも1つを満たさない強度のビームを生成するように構成された光源を備える。この装置は、入射ビームの強度を測定するように構成されたフォトダイオードと、入口から少なくとも1つの出口に光を伝えるように構成された光学システムとを含み、光源、フォトダイオード、及び光学システムは、デバイスが2つの異なる構成、つまり、光源から放射された光の第1部分が物体に伝達され、光源から放射された光の第2部分がフォトダイオードに伝達される動作構成と通常の動作では、光源によって生成された光が物体にもフォトダイオードにも送信されない制御構成とを持つように配置される。また、デバイスは、デバイスが制御構成にあるときにフォトダイオードで測定された強度と満たすべき条件に基づいて、第1部分の値を制御するように構成されたコントローラを備えている。
特定の実施形態によれば、満たすべき1つの条件は、任意の時点での光強度が最大強度以下であるということであり、満たすべき1つの条件は、任意の時点での光強度が最小以上であるということである。強度及び満たされるべき1つの条件は、その期間中の線量が最大値以下であることである。
さらに、光学システムは複数のリフレクターを備え、各リフレクターは、リフレクターが入射ビームをオブジェクトに向けて反射する第1の位置、リフレクターが入射ビームをフォトダイオードに向けて反射する第2の位置、反射器が入射ビームを物体にもフォトダイオードにも反射しない第3の位置という3つの位置を備え、コントローラは、各リフレクターの位置を指令するように構成され、コントローラが各リフレクターに第1位置又は第2位置にあるようにコマンドを出すと、デバイスは動作構成になり、各リフレクターが3番目の位置にあるように命令された場合、デバイスは制御構成になる。
コントローラは、デバイスが制御構成にあるときにフォトダイオードで測定された強度に基づき、満たすべき条件に基づいて、第1の位置で移動する反射器の数を推定するようにさらに構成させることができ、推定された数のミラーに第1の位置に移動するよう命令する。
具体的には、光源は光源のマトリックスであり、各光源には、光源が光を発しない無給電状態と、光源が光を発する給電状態という2つの状態があり、コントローラは、各光源の状態を制御するようになっている。
特定の例として、照明される平面がオブジェクトに対して定義され、光源と光学システムの少なくとも一方は、異なるレベルの光の強さで照らされるいくつかの独立した空間領域は、デバイスが動作構成にあるときに照らされる平面で定義できるように構成される。
さらに、光学システムは、点拡がり関数がシステム出力よりも30μm未満、好ましくは25μm未満であることを保証する光学部品を含んでもよい。特定の例として、光学システムは、光学収差を補正するように構成されたシステムを備え、光学収差を補正するように構成されたシステムは調整可能である。例えば、システムは液体レンズである光学収差を補正するように構成されている。
上記で考慮され、「特定の実施形態の詳細な説明」のセクションでも説明された実施形態及び代替実施形態を組み合わせて、本発明のさらなる実施形態を生成することができる。
特定の実施形態の詳細な説明
以下に、3つの実施形態をより詳細に説明する。
その後、各実施形態の対物レンズを構成する光学素子の数値データを表1、4、7に示す。数値データでは、光学素子の名前が与えられ、光学素子が属するユニット、その性質、第1半径Rinの値、第2半径Routの値、光学部品の厚さDin-out、光学部品の材料、光学部品の焦点距離、及びその位置が与えられる。
レンズの場合、光学部品の性質はそのレンズの性質(両凸、メニスカス、又はその他)である。
第1半径Rinの値は、入射光線の影響を受ける光学部品の第1表面の半径の値であり、考慮される光学部品の入射半径である。
同様に、第2半径Routの値は、入射光線の影響を受ける光学部品の第2表面の値であり、考慮される光学部品の出口半径である。
光学素子の厚さDin-outは、対象となる光学素子の第1面(入射面)と第2面(出射面)の間の距離である。厚さは、光学部品に定義された光軸に沿って測定された距離である。
焦点距離は、第1半径Rin、第2半径Rout、光学素子の厚さDin-out及び材料の光学指数に基づいて取得される。
光学系の位置は、前の光学系との距離である。より正確には、位置は、前の光学素子の出射面と考慮された光学素子の入射面との間の距離である。この距離は、光軸に沿って測定される。これが、第1レンズL1の位置がない理由を説明する。実際、第1レンズL1の参照はない。
表1、4、及び7で得られた値から、対物レンズを特徴付ける数値が推定される。各実施形態の対物レンズを構成する光学系の推定数値データを表2、5、8に示す。より正確には、光学系の推定数値データは、第1焦点距離fU1、第1ディメンションDU1、第2焦点距離fU2、第2ディメンションDU2、第1比率R1、第2比率R2、第3比率R3、第4比率R4、及び第5比率R5である。
第1焦点距離fU1は、第1レンズL1、第2レンズL2及び第3レンズL3の焦点距離と、これらのレンズL1、L2及びL3の相対位置に基づいて、例えばガルストランド法を用いて得られる。
第1ディメンションDU1は、第1レンズL1の厚さ、第1レンズL1と第2レンズL2の間の距離、第2レンズL2の厚さ、第2レンズL2と第3レンズL3の間の距離、及び第3レンズL3の厚さの合計に対応する。
第2焦点距離fU2は、例えばガルストランド法を用いて、第4レンズL4、第5レンズL5の焦点距離、及びこれらのレンズL4及びL5の相対位置に基づいて得られる。
第2ディメンションDU2は、第4レンズL4の厚さ、第4レンズL4と第5レンズL5との間の距離、及び第5レンズL5の厚さの合計に対応する。
念のため、第1比率R1は、第1焦点距離fU1と第2焦点距離fU2の比率であり、第2比率R2は、第1ディメンションDU1と第2ディメンションDU2の比率であり、第3比率R3は、第2レンズL2の焦点距離fL2と第1レンズL1の焦点距離fL1との間の絶対値の比率であり、第4比率R4は、第4レンズL4の焦点距離fL4とL5の第5レンズの焦点距離fL5との間の絶対値の比率であり、第5比率R5は、第1レンズL1の焦点距離fL1と第5レンズL5の焦点距離fL5との絶対値の比率である。
各実施形態の光学性能は、それぞれ表3、6及び9に見出すことができる。
これらの各表では、変調伝達関数(MTF)の値は、軸上及び軸外(撮像された視野の端)で1ミリメートルあたり30ラインに対して与えられ、対物レンズ10から40センチメートルまでのオブジェクトの距離と無限遠に対応する距離に対して与えられる。スポットサイズの二乗平均平方根(RMS)半径の対応する値が与えられる。
実施形態1
実施形態1は、光線追跡シミュレータのおかげでシミュレートされた。そのような実施形態1は、レンズL2、L3、及びL4である3つの特定のレンズのみを必要とする。他の光学部品は市販されている。
例えば、第1レンズL1は、OptoSigma(登録商標)からのリファレンスSLB-15B-20PMに対応してもよく、第5レンズは、Edmund Optics(登録商標)からのリファレンス番号63-665に対応してもよく、液体レンズはVarioptic(登録商標)からのリファレンスA58N0に対応してもよい。
Figure 0007163329000011
N-BK7のインデックスは1.5168で、アッベ数は64.17である。
N-SF11のインデックスは1.7847で、アッベ数は25.68である。
上記の結果により、次の表に示す推定値を取得できる。
Figure 0007163329000012
実施形態1では、以下の光学性能が得られる。
Figure 0007163329000013
これらの光学性能は、実施形態1による対物レンズ10が以下の望ましい要件に準拠していることを示す。望ましい要件とは、
より小さいサイズを有すること、
充分な解像度、
10度の物体視野を備えること、及び
調整可能な焦点距離を提供することにより、40センチメートルを超える位置にあるオブジェクトを撮像できること。
実施形態2
実施形態2は、光線追跡シミュレータのおかげでシミュレートされた。そのような実施形態2は、レンズL2、L3、L4、及びL5である4つの特定のレンズのみを必要とする。他の光学部品は市販されている。
例えば、液体レンズはVarioptic(登録商標)からのリファレンスA58N0に対応してもよい。
Figure 0007163329000014
これにより、次の表が得られる。
Figure 0007163329000015
実施形態2では、以下の光学性能が得られる。
Figure 0007163329000016
これらの光学性能は、実施形態2による対物レンズ10が以下の望ましい要件に準拠していることを示す。望ましい要件とは、
より小さいサイズを有すること、
充分な解像度、
10度の物体視野を備えること、及び
調整可能な焦点距離を提供することにより、40センチメートルを超える位置にあるオブジェクトを撮像できること。
実施形態3
実施形態3は、光線追跡シミュレータのおかげでシミュレートされた。そのような実施形態2は、レンズL1、L2、L3、及びL4である4つの特定のレンズのみを必要とする。他の光学部品は市販されている。
例えば、液体レンズはVarioptic(登録商標)からのリファレンスA58N0に対応してもよい。
Figure 0007163329000017
これにより、次の表が得られる。
Figure 0007163329000018
実施形態3では、以下の光学性能が得られる。
Figure 0007163329000019
これらの光学性能は、実施形態2による対物レンズ10が以下の望ましい要件に準拠していることを示す。望ましい要件とは、
より小さいサイズを有すること、
充分な解像度、
10度の物体視野を備えること、及び
調整可能な焦点距離を提供することにより、40センチメートルを超える位置にあるオブジェクトを撮像できること。

Claims (14)

  1. 100ピクセルを超えるピクセルを備えるイメージャ(12)に対して10度の物体視野の結像を行う対物レンズ(10)であって、伝搬方向(Z)は対物レンズ(10)に対して定義され、対物レンズ(10)は、伝搬方向(Z)の順に、
    複数のレンズ(L1、L2、L3)を備える第1レンズユニット(U1)であって、前記第1レンズユニット(U1)は第1焦点距離(fU1)及び第1ディメンション(DU1)を持ち、前記第1焦点距離(fU1)は正であり、前記第1ディメンション(DU1)は15ミリメートル未満である第1レンズユニット(U1)と、
    90度の角度で曲がるように構成される曲げミラー(M)と、
    液体レンズ(LL)と、
    複数のレンズ(L4、L5)を備える第2レンズユニット(U2)であって、前記第2レンズユニット(U2)は第2焦点距離(fU2)及び第2ディメンション(DU2)を持ち、前記第2焦点距離(fU2)は正であり、前記第1焦点距離(fU1)と前記第2焦点距離(fU2)の間の比率(R1)は、1.0と2.0の間に含まれ、前記第1ディメンション(DU1)と前記第2ディメンション(DU2)の間の比率(R2)は2以上である第2レンズユニット(U2)と
    を備える対物レンズ(10)。
  2. 前記第1レンズユニット(U1)及び前記第2レンズユニット(U2)に属する各レンズ(L1、L2、L3、L4、L5)の材料は、2つの異なる材料から選択される、請求項1に記載の対物レンズ。
  3. 前記第1レンズユニット(U1)の前記レンズ(L1、L2、L3)の数及び前記第2レンズユニット(U2)の前記レンズ(L4、L5)の数は4以下である、請求項1又は2に記載の対物レンズ。
  4. 前記第1レンズユニット(U1)及び前記第2レンズユニット(U2)の少なくとも一方は、両凸レンズ及び凹メニスカスを含む、請求項1から3のうちいずれか1項に記載の対物レンズ。
  5. 前記第1レンズユニット(U1)及び前記第2レンズユニット(U2)に属する各レンズ(L1、L2、L3、L4、L5)は、両凸レンズ又はメニスカスレンズのみから選択される、請求項1から4のうちいずれか1項に記載の対物レンズ。
  6. 前記第1レンズユニット(U1)は、前記伝搬方向において、収束レンズである第1レンズ(L1)及び発散レンズである第2レンズ(L2)を少なくとも含み、前記第2レンズ(L2)の焦点距離(fL2)と前記第1レンズ(L1)の焦点距離(fL1)の間の絶対値における比率(R3)は、1.8から2.2の間に含まれる、請求項1から5のうちいずれか1項に記載の対物レンズ。
  7. 前記第1焦点距離(fU1)は、30.0ミリメートルと40.0ミリメートルの間に含まれる、請求項1から6のうちいずれか1項に記載の対物レンズ。
  8. 前記第2焦点距離(fU2)は、20.0ミリメートルと35.0ミリメートルの間に含まれる、請求項1から7のうちいずれか1項に記載の対物レンズ。
  9. 前記第2レンズユニット(U2)は、前記伝搬方向の前記順序で、発散レンズである第4レンズ(L4)及び収束レンズである第5レンズ(L5)を少なくとも含み、前記第4レンズ(L4)の焦点距離(fL4)と前記第5レンズ(L5)の焦点距離(fL5)の間の絶対値における比率(R4)は1.8から3.6の間に含まれる、請求項1から8のうちいずれか1項に記載の対物レンズ。
  10. 前記第1レンズユニット(U1)の第1レンズ(L1)は、入射焦点距離(fL1)を持ち、前記第2レンズユニット(U2)の最終レンズ(L5)は、出口焦点距離(fL5)を持ち、前記出口焦点距離(fL5)と前記入射焦点距離(fL1)の間の比率(R5)は、絶対値において0.7から1.0の間に含まれる、請求項1から9のうちいずれか1項に記載の対物レンズ。
  11. 前記第1レンズユニット(U1)は、3つのレンズ(L1、L2、L3)で構成される、請求項1から10のうちいずれか1項に記載の対物レンズ。
  12. 前記第2レンズユニット(U2)は、2つのレンズ(L4、L5)で構成される、請求項1から11のうちいずれか1項に記載の対物レンズ。
  13. 100ピクセルを超えるピクセルを備えるイメージャ(12)と、請求項1から12のいずれか1項に記載の対物レンズ(10)とを備える、カメラ(20)。
  14. 請求項13に記載のカメラ(20)を含むことによって視力を少なくとも部分的に回復するように構成された、光遺伝学に適合したシステム。
JP2019572737A 2017-06-28 2018-06-28 対物レンズ、カメラ、及びそのような対物レンズを備える光遺伝学に適応したシステム Active JP7163329B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP17305805.8 2017-06-28
EP17305805.8A EP3422065A1 (en) 2017-06-28 2017-06-28 Objective, camera and system adapted for optogenetics comprising such objective
PCT/EP2018/067487 WO2019002509A1 (en) 2017-06-28 2018-06-28 OBJECTIVE, CAMERA AND SYSTEM ADAPTED TO OPTOGENETICS COMPRISING SUCH OBJECTIVE

Publications (2)

Publication Number Publication Date
JP2020525854A JP2020525854A (ja) 2020-08-27
JP7163329B2 true JP7163329B2 (ja) 2022-10-31

Family

ID=59315533

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019572737A Active JP7163329B2 (ja) 2017-06-28 2018-06-28 対物レンズ、カメラ、及びそのような対物レンズを備える光遺伝学に適応したシステム

Country Status (7)

Country Link
US (1) US11320649B2 (ja)
EP (2) EP3422065A1 (ja)
JP (1) JP7163329B2 (ja)
CN (1) CN110914730B (ja)
AU (1) AU2018292155B2 (ja)
CA (1) CA3067619A1 (ja)
WO (1) WO2019002509A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI701474B (zh) 2019-07-17 2020-08-11 大立光電股份有限公司 光學成像鏡頭組、取像裝置及電子裝置
TWI704389B (zh) 2019-08-14 2020-09-11 大立光電股份有限公司 光學攝像鏡頭組、取像裝置及電子裝置
CN114099133B (zh) * 2021-11-10 2023-05-26 华中科技大学 一种用于眼科手术的大视场大数值孔径手术物镜

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005352240A (ja) 2004-06-11 2005-12-22 Olympus Corp 光学系
JP2006504132A (ja) 2002-10-25 2006-02-02 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ズームレンズ
JP2009543152A (ja) 2006-07-13 2009-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ズーム光学系、並びにそれを備えたカメラ及びデバイス
JP2016528559A (ja) 2013-08-20 2016-09-15 オプトチューン アクチェンゲゼルシャフト 2つの液体レンズを有する光学ズームレンズ

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61275817A (ja) * 1985-05-31 1986-12-05 Sony Corp 監視装置
US7529475B2 (en) * 2004-05-21 2009-05-05 Olympus Corporation Optical system
WO2007024391A2 (en) 2005-07-22 2007-03-01 The Board Of Trustees Of The Leland Stanford Junior University Light-activated cation channel and uses thereof
EP1891976A1 (en) 2006-08-23 2008-02-27 Novartis Forschungsstiftung, Zweigniederlassung Friedrich Miescher Institute for Biomedical Research Use of light sensitive genes
KR101505699B1 (ko) * 2007-10-08 2015-03-24 블랙아이 옵틱스, 엘엘씨 액체 옵틱스 줌 렌즈 시스템 및 이미징 장치
PT2271369E (pt) 2008-04-18 2014-07-10 Novartis Forschungsstiftung Novas ferramentas terapêuticas e métodos para tratar a cegueira
JP2011013583A (ja) * 2009-07-03 2011-01-20 Sony Corp ズームレンズ、カメラモジュール及び電子機器
EP2776455B1 (en) 2011-11-12 2018-01-10 Massachusetts Institute of Technology Channelrhodopsins for optical control of cells
CN104856643A (zh) * 2015-04-27 2015-08-26 奉化科创科技服务有限公司 基于液体透镜调焦式的眼底相机成像系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006504132A (ja) 2002-10-25 2006-02-02 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ズームレンズ
JP2005352240A (ja) 2004-06-11 2005-12-22 Olympus Corp 光学系
JP2009543152A (ja) 2006-07-13 2009-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ズーム光学系、並びにそれを備えたカメラ及びデバイス
JP2016528559A (ja) 2013-08-20 2016-09-15 オプトチューン アクチェンゲゼルシャフト 2つの液体レンズを有する光学ズームレンズ

Also Published As

Publication number Publication date
CN110914730A (zh) 2020-03-24
AU2018292155A1 (en) 2020-01-16
CN110914730B (zh) 2022-01-11
EP3422065A1 (en) 2019-01-02
CA3067619A1 (en) 2019-01-03
US20210149188A1 (en) 2021-05-20
EP3646099A1 (en) 2020-05-06
WO2019002509A1 (en) 2019-01-03
AU2018292155B2 (en) 2023-07-27
US11320649B2 (en) 2022-05-03
KR20200081337A (ko) 2020-07-07
JP2020525854A (ja) 2020-08-27

Similar Documents

Publication Publication Date Title
JP7163329B2 (ja) 対物レンズ、カメラ、及びそのような対物レンズを備える光遺伝学に適応したシステム
CN113613715B (zh) 使用用于光源的辐射功率的命令法则控制光遗传学设备的方法以及相关联的设备
JP7453242B2 (ja) フィルタ処理を使用して光遺伝デバイスを制御するための方法および関連するデバイス
US20220203119A1 (en) Viewing apparatus and method for projecting a light signal
ES2954941T3 (es) Procedimiento y dispositivo para el procesamiento de señales asíncronas generadas por un sensor de luz basado en eventos

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210528

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220927

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221019

R150 Certificate of patent or registration of utility model

Ref document number: 7163329

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150