JP7357931B2 - 分子化学画像内視鏡撮像システム - Google Patents

分子化学画像内視鏡撮像システム Download PDF

Info

Publication number
JP7357931B2
JP7357931B2 JP2020545579A JP2020545579A JP7357931B2 JP 7357931 B2 JP7357931 B2 JP 7357931B2 JP 2020545579 A JP2020545579 A JP 2020545579A JP 2020545579 A JP2020545579 A JP 2020545579A JP 7357931 B2 JP7357931 B2 JP 7357931B2
Authority
JP
Japan
Prior art keywords
analysis
detector
image data
data set
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020545579A
Other languages
English (en)
Other versions
JP2021526035A (ja
Inventor
トレッド、パトリック
ネルソン、マシュー
ステュアート、ショーナ
Original Assignee
ケムイメージ コーポレーション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ケムイメージ コーポレーション filed Critical ケムイメージ コーポレーション
Publication of JP2021526035A publication Critical patent/JP2021526035A/ja
Application granted granted Critical
Publication of JP7357931B2 publication Critical patent/JP7357931B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0607Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for annular illumination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0669Endoscope light sources at proximal end of an endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters

Description

人体に外科手術を行う場合、外科医が、臓器、通路、または尿道や尿管などのその他の解剖学的構造を誤って切断したり、損傷したりしないことが不可欠である。血液、脂肪、動脈、静脈、筋肉若しくは筋膜などの介在組織、およびその他の高度に点在し吸収する媒体の存在は、手術部位のすぐ近くにあるそのような臓器、通路、解剖学的構造を高い正確さで特定することを非常に困難にする可能性がある。発光カテーテルが管、血管または臓器の不規則性を検出するのに用いられており、外科医が対象の解剖学的構造を特定して外科処置の適切な遂行を可能にするのを支援している。しかしながら、手術部位周辺の組織に損傷を与えることなく外科医が繊細な手術を行うのを支援するに際し、解剖学的構造のリアルタイム検出が可能な改良された術中撮像ツールが必要とされている。
この出願の発明に関連する先行技術文献情報としては、以下のものがある(国際出願日以降国際段階で引用された文献及び他国に国内移行した際に引用された文献を含む)。
(先行技術文献)
(特許文献)
(特許文献1) 米国特許出願公開第2012/0083678号明細書
(特許文献2) 米国特許出願公開第2016/0213252号明細書
(特許文献3) 米国特許第8,167,794号明細書
(特許文献4) 米国特許第9,041,932号明細書
(特許文献5) 米国特許出願公開第2018/0116494号明細書
(特許文献6) 米国特許第10,779,713号明細書
(特許文献7) 米国特許出願公開第2002/0016533号明細書
(特許文献8) 米国特許出願公開第2013/0176568号明細書
(特許文献9) 米国特許出願公開第2015/0198793号明細書
(特許文献10) 米国特許出願公開第2018/0263475号明細書
(特許文献11) 国際公開第2001/050955号
(特許文献12) 国際公開第2014/074569号
(特許文献13) 国際公開第2019/212472号
(非特許文献)
(非特許文献1) WANG et al."Three-Dimensional Imaging of Ureter with Endoscopic Optical Coherence Tomography," Urology,22 January 2011 (22.01.2011), Vol.77,lss.5,Pgs.1254-1258.
(非特許文献2) International Search Report and Written Opinion for International Application No.PCT/US2018/030155,dated July 9,2018.
ページ(1)
本開示は医用撮像システムを提供する。医用撮像システムは内視鏡と共に用いることができる。一般的に、医用撮像システムは照明光子を生成するように構成された照明源を含む。照明光子は1若しくはそれ以上のフィルターに伝送されるものであり、当該1若しくはそれ以上のフィルターは、第1の複数の照明光子をフィルターし、第1の通過帯域波長を有する第1の複数のフィルターされた光子と第2の通過帯域波長を有する第2の複数のフィルターされた光子とを生成するように構成されている。次いで、試料が前記第1の複数のフィルターされた光子および前記第2の複数のフィルターされた光子で照明されて第1の複数の相互作用した光子および第2の複数の相互作用した光子を生成する。1若しくはそれ以上の検出器は、前記第1の複数の相互作用した光子および第2の複数の相互作用した光子を検出し、1若しくはそれ以上の画像データセットを生成するように構成されている。
他の一実施形態において、前記撮像システムは、試料を照明し相互作用した光子を生成するように構成された照明源を含む。1若しくはそれ以上のフィルターは、第1の複数の相互作用した光子の1若しくはそれ以上をフィルターし第1の通過帯域波長を伝送し、第2の複数の相互作用した光子の1若しくはそれ以上をフィルターし第2の通過帯域波長を伝送するように構成されている。前記第1および第2の通過帯域波長は1若しくはそれ以上の検出器に伝送されるものであり、当該1若しくはそれ以上の検出器は前記第1の通過帯域波長および前記第2の通過帯域波長を検出し1若しくはそれ以上の画像データセットを生成するように構成されている。
更なる他の一実施形態では、撮像システムは、照明源であって、第1の複数の相互作用した光子を生成するための第1の波長を有する第1の複数の照明光子および第2の複数の相互作用した光子を生成するための第2の波長を有する第2の複数の照明光子の1若しくはそれ以上で試料を照明するように構成された前記照明源を特徴とする。1若しくはそれ以上の検出器は、前記第1の複数の相互作用した光子および前記第2の複数の相互作用した光子を検出して、1若しくはそれ以上の画像データセットを生成するように構成されている。
図1は、一実施形態による、二重偏光構成の複数のコンフォーマルフィルターを有する撮像システムを有する内視鏡を示す。 図1Aは、図1の実施形態による内視鏡の端面図である。 図1Bは、一実施形態による、CCD検出器を有するパターン化されたコンフォーマルフィルター構成を示す。 図2は、一実施形態による、複数の多変量光学素子(MOE)フィルターを有する撮像システムを有する内視鏡を示す。 図2Aは、図2の実施形態による内視鏡の端面図である。 図2Bは、図2の実施形態による内視鏡の先端部の断面図である。 図3は、一実施形態による、コンフォーマルフィルターを有する撮像システムを有する内視鏡を示す。 図3Aは、図3の実施形態による内視鏡の端面図である。 図4は、一実施形態による、光源照明変調のための二重偏光構成の複数のコンフォーマルフィルターを有する撮像システムを有する内視鏡を示す。 図4Aは、図4の実施形態による内視鏡の端面図である。 図4Bは、図4の実施形態による内視鏡の代替的な実施形態の端面図である。 図5は、一実施形態による、音響光学フィルターを有する撮像システムを有する内視鏡を示す。 図5Aは、図5の実施形態による内視鏡の端面図である。 図6は、一実施形態による、MOEフィルターホイールを有する撮像システムを有する内視鏡を示す。 図6Aは、図6の実施形態による内視鏡の端面図である。 図7は、一実施形態による、パターン化されたエタロンフィルター配置を有する撮像システムを有する内視鏡を示す。
本開示は、様々な医療処置において外科医を支援することができる術中医用撮像システムを特徴とする。本明細書に開示されるシステムは、スタンドアロンのデバイスとしての使用に適しており、またはロボットプラットフォームなどの他の医用撮像デバイスに組み込むことができる。一実施形態において、本明細書に開示されるシステムは内視鏡と共に使用され得る。本明細書に開示される医用撮像システムは、内視鏡手術中に腫瘍および解剖学的構造のリアルタイム検出を提供することができる。一般的に、本明細書に開示されるシステムは、生体試料を照明し、当該試料と相互作用した光子を収集し、前記相互作用した光子を検出して試料の画像データセットを生成し、画像データセットを分析する。相互作用した光子は、試料によって吸収された光子、試料によって反射された光子、試料によって散乱された光子、および試料によって放出された光子のうちの1若しくはそれ以上を有し得る。一実施形態において、医用撮像システムは多変量撮像を提供する。多変量撮像は、第1画像データセット(T1)と第2画像データセット(T2)に対応する2若しくはそれ以上の波長を生成するよう機能する。これら第1の画像データセットおよび第2の画像データセットは光学計算を用いて分析され得る。多変量撮像により、画像のコントラストが向上し、標的と背景との間の識別が強化される。特定の実施形態では、第1の画像データセットおよび第2の画像データセットはハイパースペクトル画像データを特徴とする。他の一実施形態では、医用画像システムは、>10Hz(ハイパーキューブ/秒)の画像フレームレートを特徴とする。
本明細書に開示されるシステムは、組織、臓器、解剖学的構造、生理学的システム、細胞、血液、脂肪、神経、筋肉などの様々な生体試料で用い得る。特定の実施形態において、前記システムは身体の様々な領域に用いられてもよく、それは本開示を考慮すれば当業者には明らかであろう。例えば、前記システムは胃腸管の調査および/または手術を行うのに使用され得る。そのような用途では、前記システムは、食道、胃、十二指腸、小腸、大腸/結腸、胆管、直腸、肛門などのいずれかに用い得る。前記システムはさらに、これらに限定されないが鼻、副鼻腔および下気道を含む気道の構造に用いられてもよい。他の実施形態では、本明細書に開示されるシステムは、膀胱、尿管、腎臓などの尿路を含む構造の調査および/または手術を行うのに用いられてもよい。更なる他の実施形態では、前記システムは、子宮頸部、子宮、卵管などの女性の生殖システムを含む構造に用いられてもよい。さらに、前記システムは、羊膜および胎児の医療処置を調査および/または実施するためなど、妊娠中に実施される医療処置に用いられてもよい。他の一実施形態では、本明細書に記載のシステムは、筋骨格系を含む構造、すなわち、硬膜外腔、滑液包、筋肉、靭帯、結合組織などを含む、手、膝、肘、肩、脊椎の構造を含む整形外科に関する構造を調査および/または実施するのに用いられてもよい。
さらに、前記システムは2若しくはそれ以上の異なる生体試料を区別するように構成され得る。例えば、本明細書に開示のシステムは尿管と周囲組織および脂肪とを区別するように構成され得る。一実施形態において、本明細書に開示のシステムは、癌を正常組織から区別し、癌の病期、癌の進行および癌のグレードのうちの1若しくはそれ以上を決定するのに用いることができる。他の一実施形態では、前記システムは、生体試料に見られる癌組織または腫瘍を除去する外科処置中に用いることができる。更なる他の一実施形態では、本明細書に記載のシステムを用いて、解剖学的構造をそのような解剖学的構造に関連する体液を特定することにより区別することができる。体液には、例えば、尿、唾液、痰、血液、糞便、粘液、膿、精液、リンパ液、創傷滲出液、乳房液、膣液などが挙げられる。関連する体液を有する解剖学的構造は当業者には明らかであろう。本明細書に開示されるように、本開示のシステムは生体組織に照明を提供する。このような照明は、波長や組織の種類に応じて生体試料に数センチメートルまで浸透する可能性があることが知られている。したがって、そのような照明浸透は、解剖学的構造の内部に含まれる体液の撮像を可能にする。さらに、体液は、それらの存在が解剖学的構造または他の生体試料の外側に存在する場所で直接的に撮像することができる。他の一実施形態では、本明細書に開示のシステムを用いて尿管の中または周囲の尿を検出することにより尿管を特定することができる。
他の一実施形態では、本システムは1若しくはそれ以上の造影増強剤の使用と共に用いることができる。造影増強剤は1若しくはそれ以上の染料(stain)または染色剤(dye)を含み得る。染料または染色剤を1つだけ使用する場合、その手順は染色という。複数の染色には、複数の染料または染色剤の使用が含まれる。本明細書で用いる場合、「染料」または「染色剤」は、生体試料中の物質に結合して色を誘発することができる任意の化学的または生物学的化合物である。例えば、染料または染色剤は、特定の細胞または生化学構造(例えば、細胞膜、細胞小臓器、核酸、タンパク質)に結合して、本明細書に記載のシステムを用いて見たときにコントラストを生じさせることができる。いくつかの実施形態において、染料または染色剤は、励起されると(すなわち、蛍光)、1若しくはそれ以上の波長で電磁放射を放出することにより色を生じさせることができる。
1若しくはそれ以上の染料または染色剤は、例えば生体内または生体外で用いることができる。いくつかの実施形態において、染料または染色剤は細胞を殺さない生物/個体での使用に適した任意の染料または染色剤、すなわち生物学的染料である。生物学的染料の例としては、これらに限定されないが、アゾ染料、アリールメタン染料、シアニン染料、チアジン染料、キサンテン染料(例えば、エオシン)、天然染料(例えば、アリザリンレッド)、ステロイド、トリパンブルー、ジャヌスグリーン、インドシアニングリーン、アリザリンレッド、ヨウ化プロピジウム、エリスロシン、7-アミノチノマイシンD、ナイルブルーが挙げられる。一実施形態において、造影増強剤は蛍光造影増強剤である。一実施形態において、造影増強剤は蛍光物質を含むことができる。好適な蛍光物質には、免疫蛍光化合物、好塩基性化合物、好酸性化合物、中性染料、および天然発光分子が含まれる。
本明細書に記載のシステムおよび方法とともに1若しくはそれ以上の染料または染色剤を用いる場合、使用者(例えば、外科医)は、生体試料中またはその周りの組織、病理、形態、位置、化学物質、および化学反応を手術中に特定することができる。例えば、いくつかの(1若しくはそれ以上の)生物学的染料は外科医が腫瘍を切除できるように癌性細胞を特定することができる。また、他の生物学的染料も生きている細胞(組織)と生きていない細胞とを識別することができる。本開示に記載されるようなスペクトル画像を得るため、造影増強剤が生体試料に適用されると、その適用された造影増強剤の照明波長範囲内の波長を有する光子で当該試料が照射され得る。
他の一実施形態では、造影増強剤は対象により摂取されてもよく、その場合、造影増強剤は体液中に現れることとなる。一実施形態において、造影増強剤は、本開示を考慮すれば当業者に明らかであるように、IVを介して、または他の手段を介して経口的に摂取され得る。造影増強剤が摂取されると、標的生体試料は本明細書に開示のシステムによって検査することができる。前記システムは、体液中の造影増強剤を検出して体液を含む構造と周囲組織などの周囲の生体試料との間にコントラストをもたらすように構成され得る。例えば、患者は、造影増強剤を含む溶液を経口摂取することができ、その後、特定の時間で造影増強剤が患者の尿中に現れる。本開示によるシステムを用いて患者の腎臓領域に対し内視鏡処置を行うことができる。前記システムは、尿管にある尿中に存在する造影増強剤を検出して尿管と他の周囲組織とを区別するように構成されている。
他の一実施形態では、生体組織は本開示によるシステムを用いて生体外で撮像することができる。そのような用途では、生体試料は手術部位の外に取り出され分析されてもよい。切除された組織に従来の染色法を適用して、試料の1若しくはそれ以上の生物学的特性を決定することができる。生体外技術は当技術分野で知られており、この開示を考慮すれば当業者には明らかであろう。
他の一実施形態では、試料にデジタル染色を適用することにより生体試料を増強することができる。アルゴリズムを用いてデジタル染色を画像データセットに適用する。デジタル染色の使用により、生体試料に物理的および/または化学的染色を適用する必要がなくなる。本明細書に開示のシステムを介して得られる画像データセットのいずれにもデジタル染色を適用することができる。ラマンデータのセットへのデジタル染色の適用の一例は、2011年9月30日にDrauch等により米国特許出願第13/200,779号として出願され、ペンシルバニア州ピッツバーグのケムイメージ社に譲渡された、「デジタル染色による肺癌のラマン化学分析のためのシステムおよび方法」と題する米国特許出願公開第2012/0083678号において見ることができ、その全体が参照により本明細書に組み込まれる。
本開示を限定する意図はないが、本開示は内視鏡を介して尿管を分析することに関する。他の医療撮像装置および他の種類の生体試料の検出が、本開示によってさらに企図され、また本開示を考慮すれば当業者には明らかであろう。
本明細書に開示される医用撮像装置は、1若しくはそれ以上の検出器を用いて多変量信号を生成することにより、リアルタイムの多変量撮像を提供する。検出器は多変量信号を検出して、1若しくはそれ以上の画像データセットを生成する。ここでは、この結果を実現する2つの方法を示す。そのような方法の1つは、試料を照明する工程と、試料と相互作用した光子を収集する工程と、信号を検出器に送る前に収集された信号を変調する工程とを含む。第2の方法は、試料との相互作用の前に照明源信号を変調する工程と、変調された信号の相互作用した光子を収集する工程と、当該信号の相互作用した光子を検出する工程とを含む。どちらのプロセスも変調信号を提供し、コントラストが強化された多変量化学画像をリアルタイムで生成し、繊細な医療処置を行う外科医を支援する。本明細書に含まれる実施形態はさらに、立体視で表示されるリアルタイム画像を提供するように構成することができる。このような構成はこの開示を考慮すれば当業者には明らかであろう。立体視は内視鏡処置などの医用撮像技術を用いる医療処置に必要な奥行き知覚を提供することにより、外科医をさらに支援する。本明細書に記載のシステムおよび方法は、本開示の例示的な実施形態を提供するものであり、本開示を特定の実施形態に限定することを意図するものではない。
以下に示す実施形態では、同様の参照文字は同様の部品を示す。
収集した光信号の変調
以下の実施形態は試料と相互作用した光子の収集後に光信号を変調することを特徴とする。
二重偏光配置のコンフォーマルフィルターを有するシステム
ここで図1を参照すると、生体試料100が照明源103によって照明および/または励起され得る。一実施形態において、照明源103は、石英タングステンハロゲン光源を有し得る。他の実施形態では、照明源は、メタルハライド光源、発光ダイオード(LED)、一定の波長範囲で放出する均一に選択されたエミッタを有するLEDアレイ、または多様な波長範囲にわたって放出する複数のエミッタを有するLEDアレイ、パルスLED、パルスLEDアレイ、レーザー、パルスレーザー、および/または広帯域照明光源などを有し得る。照明源103は照明光子を生成するものであり、当該照明光子は、照明源103から光ファイバ束104を介して内視鏡102の先端部へ方向付けられる。内視鏡102は、生体試料100と相互作用した光子101を偏光ビームスプリッタ107へ方向付けるよう構成されている。2つの独立して調整可能なコンフォーマルフィルター105a、105bは、偏光ビームスプリッタ107から出現する直交偏光成分をフィルターするために別個の直交ビーム経路に沿って配置される。本開示での使用に好適なコンフォーマルフィルターとしては、2013年1月4日にPriore等により出願され、ケムイメージ社に譲渡された、「コンフォーマルフィルターおよびその使用方法」と題する米国特許出願公開第2013/0176568号に開示されたものが挙げられる。
この配置では、フィルターされたビームの経路は、コンフォーマルフィルター105a、105bを通じて平行ではないが、適切な反射器、すなわちミラー109a、109bによってビームコンバイナ111に方向付けられる。代替的な実施形態において、ビームコンバイナは、偏光キューブまたは偏光ビームスプリッタとすることができる。他の一実施形態では、直交成分は、同じまたは異なる複数の通過帯域波長(multi-passband wavelengths)ΣλおよびΣλを有し得る。例示的な実施形態において、コンフォーマルフィルター105aは偏光された複数の通過帯域波長Σλを生成するように構成され、コンフォーマルフィルター105bは偏光された複数の通過帯域波長Σλを生成するように構成されている。例示的な実施形態において、複数の通過帯域波長ΣλおよびΣλは(不図示の)レンズアセンブリを介して検出器115に方向付けられる。他の一実施形態では、複数の通過帯域波長ΣλおよびΣλは、それらが検出器115に方向付けられるように結合され得る。いくつかの実施形態において、偏光ビームスプリッタ107からビームコンバイナ111へのビーム経路は、例えば無限遠補正光学系の必要性を回避するために対称にし得る。
図示の検出器115はCCD検出器を有する。しかしながら、本開示により、検出器115が、例えば、相補型金属酸化膜半導体、(CMOS)検出器、ヒ化インジウムガリウム(InGaAs)検出器、ケイ化白金(PtSi)検出器、、アンチモン化インジウム(「InSb」)検出器、テルル化水銀カドミウム(「HgCdTe」)検出器、またはこれらの組み合わせを含む、その他の好適な検出器を有し得ることが企図される。引き続き図1を参照すると、2つのコンフォーマルフィルター105aおよび105bは、コントローラ117を用いて同じ複数の通過帯域波長(Σλ=Σλ)に同時に調整され得る。他の一実施形態では、コントローラ117は、入力の直交成分をそれぞれ処理するため、複数の通過帯域波ΣλおよびΣλを各々独立して調整するように構成されていてもよい。したがって、適切な制御によって、コンフォーマルフィルター105aおよび105bは、同じ複数の通過帯域波長または2つの異なる複数の通過帯域波長(Σλ≠Σλ)に同時に調整され得る。コントローラ117は、使用者が所望のように各コンフォーマルフィルターを選択的に調整することを可能にするようにプログラム可能であり、またはソフトウェアで実施され得る。図1の実施形態では、(不図示の)高速スイッチング機構を設けて、検出器117により収集された各コンフォーマルフィルター105aおよび105bからのスペクトルデータに対応する2つの図(またはスペクトル画像)間を切り替えることができる。代替的に、2つのそのようなスペクトル図またはスペクトル画像は、コントラスト若しくは強度を高めるために、または比較の目的で、組み合わされ又は重ね合わされて単一の画像にされてよい。図1の例示的な実施形態は、コンフォーマルフィルター105aおよび105bから受信したフィルターされた信号を取得する単一のCCD検出器115を有する。
図1Bは、本開示の代替的なの実施形態を示す。この実施形態では、ビームコンバイナ111およびミラー109aが除去されてもよく、また2つの検出器が使用されてもよい。第1のコンフォーマルフィルター105aはフィルターしT1状態に対応する第1の複数の通過帯域波長を第1の検出器115aに伝送するように構成されており、この第1の検出器115aは第1の複数の通過帯域波長を検出し第1画像データセット(T1)を生成する。同様に、第2のコンフォーマルフィルター105bはフィルターしT2状態に対応する第2の複数の通過帯域波長を第2の検出器115bに伝送するように構成されており、この第2の検出器115bは第2の複数の通過帯域波長を検出し第2の画像データセット(T2)を生成する。
2014年1月15日にTreado等により出願され、ケムイメージ社に譲渡された、「コンフォーマルフィルターおよび二重偏光を用いて分析物を評価するシステムおよび方法」と題する米国特許出願公開第2014/0198315号は、上述のような二重偏光構成におけるコンフォーマルフィルターの使用を開示する。この参照文献はその全体が参照により本明細書に組み込まれる。
図1Aは内視鏡102の先端部の端面図を示す。先端部は、相互作用した光子101を収集するレンズ119と、生体試料100を照明して相互作用した光子101を生成する光ファイバ束103のファイバ端121とを特徴とする。検出器115は、コンフォーマルフィルター105aおよび105bから複数の通過帯域波長を検出し、1若しくはそれ以上の画像データセットを生成するように構成されている。画像データセットは、第1の複数の通過帯域波長Σλに対応するT1画像と、第2の複数の通過帯域波長Σλに対応するT2画像とを有し得る。一実施形態において、画像データセットはラマン画像データセットを有する。検出器115によって生成された1若しくはそれ以上の画像データセットは、以下で述べるようにさらに分析され得る。
MOEフィルター配置を有するシステム
図2は、収集された光信号を変調することを特徴とする他の一実施形態を示す。図2において、照明源103は、光ファイバ束104に沿って内視鏡102を通り、(図2Aに示す)内視鏡102の先端部の一連のファイバ端121で終わる照明光子を生成する。ファイバ端121は照明光子を放出して試料100を照明し、複数の相互作用した光子101を生成する。相互作用した光子は、第1の収集光学系231および第2の収集光学系233によって集光される。第1の収集光学系231は、相互作用した光子101のうち第1の部分を収集し、これらの光子を第1の多変量光学素子「(Multivariate Optical Element:MOE」フィルター237に渡す。この「MOE」フィルターは、相互作用した光子101の前記第1の部分をフィルターして、フィルターされた光子の第1の部分を生成する。当該フィルターされた光子の第1の部分は第1の検出器241によって検出される。さらに、第2の収集光学系233は、相互作用した光子101のうち第2の部分を収集し、これらの光子を、フィルターされた光子の第2の部分を生成するため第2のMOEフィルター238に渡す。フィルターされた光子の第2の部分は第2の検出器239によって検出される。一実施形態において、第1の検出器239および第2の検出器241はCCD検出器である。他の実施形態では、検出器239および検出器241は、例えば、相補型金属酸化膜半導体、(CMOS)検出器、ヒ化インジウムガリウム(InGaAs)検出器、ケイ化白金(PtSi)検出器、アンチモン化インジウム(「InSb」)検出器、テルル化水銀カドミウム(「HgCdTe」)検出器、またはこれらの組み合わせを含むその他の適切な検出器を有し得る。
一実施形態において、第1のMOEフィルター237は第1のフィルターされた通過帯域を生じるように構成されていてよい。一実施形態において、第1のMOEフィルター237は、ランダム化された標的または背景と一致する第1のフィルターされた通過帯域を生じるように構成されている。一実施形態において、第2のMOEフィルター238は、標的または試料100と一致する第2のフィルターされた通過帯域を生じるように構成されていてよい。第1のMOEフィルター231がランダム化された標的または背景に対応する第1のフィルターされた通過帯域を生成するように構成される実施形態では、第2のMOEフィルター238は標的または試料に対応する第2のフィルターされた通過帯域を生成するように構成されていてよい。この種の実施形態は標的と背景の両方の識別を可能にする。
MOEは一般的に当技術分野で知られている。MOEは、標的に特化した用途固有の回帰(またはパターン)でエンコードされた広帯域の光干渉フィルターを特徴とする。MOEは、フィルターのパターンに基づいて光学計算を実行することにより多変量光学計算を提供する。すなわち、MOEは、異なる波長で複数の測定値を取得して標的の完全なスペクトルを推定し、当該スペクトルに多変量統計を適用することによりこの情報を処理するのではなく、フィルターの多変量解析を用いることで測定が必要なパターンに一意に調整される。したがって、MOEは従来のフィルターよりもスループットや効率を向上させ、分析速度を向上させることができる。この開示を考慮すれば、好適なMOEは当業者には明らかであろう。
第1の検出器241は第1のMOEフィルター237からの第1のフィルターされた通過帯域を検出して第1の画像データセット(T1)を生成するように構成され、第2の検出器239は第2のMOEフィルター238から第2のフィルターされた通過帯域を検出して第2の画像データセット(T2)を生成するように構成されている。以下で述べるように、第1の画像データセットおよび第2の画像データセットはさらに分析されてもよい。
照明源信号の変調
以下の実施形態は、試料との相互作用の前に照明源信号を変調することを特徴とする。
コンフォーマルフィルター配置を有するシステム
図3は、フィルター305を透過する照明光子を生成するように構成された照明源103を示す。一実施形態において、フィルター305は本明細書に開示されるようにコンフォーマルフィルターを有する。他の一実施形態では、フィルター305は、液晶チューナブルフィルター("Lquid Crystal Tunable Filter:LCTF」)、または本開示を考慮すれば当業者には明らかなフィルターなどのその他のフィルターを有してもよい。一実施形態において、フィルター305は多重共役フィルターを含み得る。フィルター305は、第1の複数の通過帯域波長(Σλ)を通過させるようにフィルター構成を切り替え、次に第2の複数の通過帯域波長(Σλ)を通過させるように当該フィルターを構成するように切り替えられるよう構成された(不図示の)コントローラによって制御される。一実施形態において、コントローラが2つの状態間で切り替わる速度はミリ秒のオーダーである。フィルター305は、各複数の通過帯域波長ΣλおよびΣλを光ファイバ束309を介して内視鏡102の先端部に伝送し、そこで、図3Aに示すように、各複数の通過帯域波長はファイバ端321を介して内視鏡102の先端部を出て、試料100を照明し相互作用した光子329を生成する。相互作用した光子329は、内視鏡102の先端部に配置された第1の検出器331および第2の検出器335によって収集される。図示の実施形態の検出器331および335はCCD検出器を有する。しかしながら、本明細書に開示されるようなその他の検出器が用いられてもよい。第1の検出器331は実質的に第1の複数の通過帯域波長のみを検出するように構成され得る。一実施形態において、第1の検出器331は、フィルター305が第1の複数の通過帯域波長を伝送するのと同時に当該第1の複数の通過帯域波長を検出するようにタイミングを合わせる、すなわちオフオンすることができる。同様に、第2の検出器335は実質的に第2の複数の通過帯域波長のみを検出するように構成され得る。一実施形態において、第2の検出器335は、フィルター305が第2の複数の通過帯域波長を伝送するのと同時に第2の複数の通過帯域波長を検出するようにタイミングを合わせる、すなわちオフオンすることができる。他の一実施形態では、第1の複数の通過帯域波長と第2の複数の通過帯域波長間の変調のタイミングシーケンスと、対応する検出器による第1の複数の通過帯域波長と第2の複数の通過帯域波長の検出は、(不図示の)コントローラによって制御することができる。第1の検出器231は第1の複数の通過帯域波長を検出して第1の画像データセット(T1)を生成し、第2の検出器は第2の複数の通過帯域波長を検出して第2の画像データセット(T2)を生成する。一実施形態において、第1の画像データセットおよび第2の画像データセットは以下に述べるようにさらに分析されてもよい。
二重偏光配置のコンフォーマルフィルターを有するシステム
図4は照明源変調の他の一実施形態を示す。この実施形態において、照明源103は偏光ビームスプリッタ405へ伝送される光信号を生成し、偏光ビームスプリッタ405は当該光信号を第1の偏光信号および第2の偏光信号に分割する。第1の偏光信号は第1のフィルター409に伝送され、第2の偏光信号は第2のフィルター411に伝送される。一実施形態において、第1のフィルター409および第2のフィルター411はそれぞれ、本明細書で説明するコンフォーマルフィルターを有する。他の一実施形態では、第1のフィルター409および第2のフィルター411はLCTFを有する。一実施形態において、第1のフィルター409および第2のフィルター411はそれぞれ、多共役フィルターを有してもよい。第1のフィルター409は、第1の偏光信号をフィルターし第1の複数の通過帯域波長(multi-passband wavelengths)(Σλ)を透過するように構成され、第2のフィルター411は第2の偏光信号をフィルターし第2の複数の通過帯域波長(Σλ)を透過するように構成されている。第1の複数の通過帯域波長および第2の複数の通過帯域波長は、それぞれのフィルター409、411から、第1の光ファイバ束417および第2の光ファイバ束419を介して内視鏡102の先端部に伝送される。一実施形態において、第1の光ファイバ束417および第2の光ファイバ束419は偏光保持型光ファイバ束を有する。
図4Aおよび図4Bは、内視鏡102の先端部の異なる実施形態を示す。第1のファイバ束417および第2のファイバ束419は内視鏡102を通って先端部まで横断する。第1のファイバ束417は第1のファイバ端423で終端し、第2のファイバ束417は第2のファイバ端425で終端する。図4Aは第2のファイバ端425に対する第1のファイバ端423の配置の一例を示す。この実施形態において、第1のファイバ端423は内視鏡102の先端部の片側にまとめて分配され、第2のファイバ端425は内視鏡102の先端部の反対側にまとめて分配される。図4Bには、第1のファイバ端423および第2のファイバ端425が内視鏡102の先端部周りで交互になっている他の一実施形態が示されている。ファイバ端の好適な配置はこの開示を考慮すれば当業者には明らかであろう。試料100は、第1のファイバ端423および第2のファイバ端425からそれぞれ放出される第1の複数の通過帯域波長および第2の複数の通過帯域波長により照明されて、相互作用した光子435を生成する。相互作用した光子435は、内視鏡102の先端部に配置された第1の検出器437および第2の検出器441によって検出される。図示の実施形態では、第1の検出器437および第2の検出器441はCCD検出器である。しかしながら、本明細書に開示されているような他の好適な検出器を用いてもよく、そのような検出器は本開示を考慮すれば当業者には明らかであろう。一実施形態において、第1のファイバ束417および第2のファイバ束419は偏光維持型ファイバ束を有する。そのような実施形態では、(不図示の)偏光子が検出器437および検出器441の前に配置されてよく、それらは立体視のために配置され、偏光に基づいてT1状態とT2状態との間を区別するように構成されている。一実施形態において、第1の検出器437は実質的に第1の複数の通過帯域波長から生成された相互作用した光子のみを検出するように構成され、第2の検出器441は実質的に第2の複数の通過帯域波長から生成された相互作用した光子のみを検出するように構成される。したがって、第1の検出器437および第2の検出器441に対する第1のファイバ端部423および第2のファイバ端部425の位置は、第1の検出器437による第1の複数の通過帯域波長に対応する相互作用した光子の検出および第2の検出器441による第2の複数の通過帯域波長に対応する相互作用した光子の検出を最適化するように構成することができる。第1の検出器437および第2の検出器441が相互作用した光子435を検出すると、第1検出器437は第1画像データセット(T1)を生成するように構成され、第2の検出器441は第2の画像データセット(T2)を生成するように構成されている。一実施形態において、第1の画像データセットおよび第2の画像データセットはさらに分析されてもよい。
音響光学フィルター配置を有するシステム
図5は、音響光学チューナブルフィルター(Acousto-Optic Tunable Filter:AOTF)を用いる本開示の実施形態を示す。この実施形態は試料100を照明するための照明光子を生成する照明源103を特徴とする。フィルター507は照明源103から放出された光子をフィルターするように構成されている。一実施形態において、フィルター507はAOTFを有し、この場合、AOTFは単一の通過帯域波長を透過させる。10fpsを超えるサンプリングレートを実現するために、AOTFは標的の通過帯域波長と背景の通過帯域波長間ですばやく切り替えられる。他の一実施形態では、フィルターはAOTF技術に基づくコンフォーマルフィルターを有するものであり、その場合、AOTFが複数の通過帯域波長を同時に伝送する。T1状態とT2状態を切り替えるには、コンフォーマルフィルターAOTFをマイクロ秒の切り替え速度で直列に切り替える。他の実施形態では、T1状態およびT2状態が同時に選択される複数のコンフォーマルAOTFを用いてもよい。複数の音響光学フィルターを用いる実施形態では、各フィルターは様々な波長に調整することができ、各フィルターは異なる複数の通過帯域波長を同時に伝送する。
音響光学フィルターは当技術分野で知られており、一般的に光源光のビームを基板、通常は石英に通過させることによって動作する。基板は圧電トランスデューサ変調器によって振動される。RF周波数が変調器に適用され、それにより基板が振動する。光源光または放射が振動する基板を通過し、それにより、基板を通過する光源光が回折し、したがって光源光のためのフィルター勾配が生成される。音響光学フィルターから放射された光源光は圧電トランスデューサに適用されるRF周波数によって所望の通過帯域波長にフィルター処理することができる。音響光学フィルターの動作の詳細は、Turner,John F、およびTreado,Patrick J.による「近赤外音響光学チューナブル・フィルター・アダマール変換分光法」応用分光法、50.2(1996)、277-284に記載されており、この参照によりその全体が本明細書に組み込まれる。
フィルター507から伝送された通過帯域波長は光ファイバ束515を通じて内視鏡102の先端部に伝送される。図5Aは、内視鏡102の先端部を示し、光ファイバ束515からの複数のファイバ端519を特徴とする。ファイバ端519は試料100を照明して相互作用した光子521を生成するようフィルター507からの通過帯域波長を伝送するものであり、相互作用した光子521は内視鏡102の先端部に位置する第1の検出器525および第2の検出器529によって検出される。一実施形態において、1つの検出器、すなわち第1の検出器525のみを用いて複数の相互作用した光子521を検出する。他の一実施形態では、相互作用した光子521は検出器525および検出器529の両方によって検出される。他の一実施形態では、複数の音響光学フィルターが用いられ、第1の通過帯域波長および第2の通過帯域波長を生成する。第1の検出器525は第1の通過帯域波長を検出して第1の画像データセット(T1)を生成するように構成することができ、第2の検出器529は第2の通過帯域波長を検出して第2の画像データセット(T2)を生成するように構成することができる。一実施形態において、第1の画像データセットおよび第2の画像データセットは以下に述べるようにさらに分析されてもよい。
MOEフィルターホイール配置を有するシステム
図6は、本開示による他の一実施形態を示す。照明源103は照明光子を生成するものであり、当該照明光子は、フィルターホイール605に伝送され、そこでフィルターされてフィルターされた光子を生成する。フィルターホイール605は複数のフィルター要素609を有する。一実施形態において、各フィルター要素605はMOEを有する。本開示の使用に適したMOEは当業者に知られており、また本明細書に記載されている。各フィルター要素609は、異なっていてもよく、異なる通過帯域波長をフィルターし透過するように構成されていてもよい。例えば、フィルター要素609aは特定の種類の組織または解剖学的構造など背景に対応する波長を透過するように構成することができ、また、フィルター要素609bは組織の癌性腫瘍など組織試料の異常に対応する通過帯域波長を透過するように構成することができる。この種の実施形態では、外科医が正常組織を癌性組織から区別するのを支援するために外科処置中にフィルターホイール605を回転させることができる。他の一実施形態では、フィルター要素609は複数の異なる試料を検出するように構成されている。一実施形態において、フィルター要素609は尿管などの解剖学的構造から背景組織を識別するように構成されている。
フィルターされた光子は、光ファイバ束603を介して内視鏡102の先端部に伝送され、図6Aに示されるような複数のファイバ端621を通って内視鏡の先端部を出る。フィルターされた光子は、試料100を照明し、複数の相互作用した光子601を生成する。相互作用した光子601は1若しくはそれ以上の検出器619によって検出され、1若しくはそれ以上の検出器619は画像データセット(T1)を生成するように構成されている。一実施形態において、画像データセットは以下に述べるようにさらに分析されてもよい。
パターン化されたエタロンフィルター配置を有するシステム
図7は本開示の他の一実施形態を示す。照明源103は照明光子を生成し、当該照明光子は光ファイバ束104を介して内視鏡102の先端部へ、ファイバ端121へ伝達される。照明光子は、ファイバ端121を出て試料100を照明し、試料100から相互作用した光子101を生成する。相互作用した光子101は内視鏡102の先端部に配置された第1の検出器705および第2の検出器707によって検出される。一実施形態において、第1の検出器705および第2の検出器707はハイパースペクトルカメラを有する。一実施形態において、検出器705および検出器707は、検出器の各ピクセル上に配置されたファブリーペロー干渉(パターン化されたエタロン)フィルター構成を備える。パターン化されたエタロンフィルター配置および関連する検出器の好適な例は、Ximea Corporationから入手可能である。各ピクセルのフィルターは各ピクセルに対して1若しくはそれ以上の通過帯域波長を透過させるように構成されている。一実施形態において、第1の検出器705は、モザイクスナップショット配置においてパターン化されたエタロンフィルター配置を有する。モザイクスナップショットは1088×2048ピクセルにわたり取得することができる。一実施形態において、モザイクスナップショットは16個の波長帯域を有する4×4モザイクを有する。他の一実施形態では、モザイクスナップショットは11nm間隔で465nm~630nmの試料のスナップショットを有する。他の一実施形態では、モザイクスナップショットは約600nm~1,000nmの波長範囲にわたり25個の帯域を有する5×5モザイクを有してもよい。モザイクスナップショットには、約512×272の帯域あたりの空間解像度と最大2メガピクセルの補間が含まれてもよく、最大170データキューブ/秒を収集し得る。
他の一実施形態では、第1の検出器705および第2の検出器707は、スナップショットタイル構成を取得するためのパターン化されたエタロンフィルター配置を有してもよい。一実施形態において、前記スナップショットタイル構成は各ピクセルで或る通過帯域波長を伝送する。パターン化されたエタロン・スナップショット・タイル・フィルター構成は最大1088×2048ピクセルを取得することができる。一実施形態において、タイル状スナップショットは、最大32帯域のスペクトル分解能を有し、600nm~1,000nmの範囲の波長を12個の増分ステップで検出することができる。他の一実施形態では、帯域ごとの空間解像度は約256×256である。他の一実施形態では、上記タイル状スナップショットは最大170データキューブ/秒を検出することができる。パターン化されたエタロンフィルター配置はまた、分析されるべき試料および所望の結果に基づいて所定の応答を生じるようにカスタマイズされ得る。このようなカスタマイズはこの開示を考慮すれば当業者には明らかであろう。
一実施形態において、第1の検出器705および第2の検出器707はIMECモザイクフィルター配置を有する。そのような実施形態では、第1の検出器705および第2の検出器707のパターン化されたエタロンモザイクフィルター配置は、各ピクセルで1若しくはそれ以上の異なる波長帯域を透過するように構成されている。他の一実施形態では、第1の検出器705および第2の検出器707はパターン化されたエタロンタイル状フィルター配置を有する。そのような実施形態では、第1の検出器705および第2の検出器707のパターン化されたタイル状エタロンフィルター配置は、各ピクセルで異なる波長帯域を検出するように構成されている。他の一実施形態では、第2の検出器が排除され、その実施形態は、スナップショットモザイクのパターン化されたエタロンフィルター配置またはスナップショットタイル状のパターン化されたエタロンフィルター配置のいずれかを有する第1の検出器705を用いる。
検出器705および検出器707は、上記フィルター配置から伝送される各通過帯域波長について1若しくはそれ以上の画像データセットを生成するように構成されている。一実施形態において、検出器705および検出器707は第1の画像データセット(T1)および第2の画像データセット(T2)を生成するように構成されている。一実施形態において、画像データセットは以下に述べるようにさらに分析されてもよい。
更なる他の一実施形態では、照明源は特定の波長で照明光子を生成するように構成されていてもよい。例えば、照明源は複数のLEDを有することができ、その場合、試料を照明するため、LEDの第1の部分は第1の波長を生成するように構成され、LEDの第2の部分は第2の波長を生成するように構成されている。そのような実施形態では、第1の検出器は第1の波長から相互作用された光子を検出して第1の画像データセット(T1)を生成するように構成することができ、また、第2の検出器は第2の波長から相互作用された光子を検出して第2の画像データセット(T2)を生成するように構成することができる。複数の波長で照明光子を生成することができるその他の照明源または照明配置が用いられてもよい。一実施形態において、照明源は複数の波長を生成することができる変調レーザーを有する。
本明細書に記載の画像データセットは、紫外(UV)画像データセット、蛍光画像データセット、可視(VIS)画像データセット、ラマン画像データセット、近赤外(NIR)画像データセット、短波赤外(SWIR)データセット、中赤外(MIR)データセット、および長波赤外(LWIR)データセットの1若しくはそれ以上を有し得る。他の一実施形態では、画像データセットはハイパースペクトル画像データセットを有する。本開示の画像データセットはさらに分析されてもよい。一実施形態において、本明細書に開示されるシステムは、ファイバ・アレイ・スペクトル変換器(FAST)を含み得る。好適なFASTデバイスは、Nelson等により2010年4月13日に出願され、ケムイメージ社に譲渡された、「空間的およびスペクトル的に平行化されたファイバ・アレイ・スペクトル変換器システムおよび使用方法」と題する米国特許第8,098,373号に開示されており、その開示は参照によりその全体が組み込まれる。
一実施形態において、本明細書に開示されるシステムは、プロセッサと、当該プロセッサと動作可能に通信する非一時的なプロセッサ可読記憶媒体とを有し得る。記憶媒体は、実行時にプロセッサに画像データセットを分析させる1若しくはそれ以上のプログラミング命令を含むことができる。一実施形態において、分析は光学計算をデータセットに適用する工程を有し得る。他の一実施形態では、光学計算は、1若しくはそれ以上のT1、および(T1-T2)/(T1+T2)を有し得る。当技術分野で知られている他の光学計算を適用してもよい。一実施形態において、分析は1若しくはそれ以上のケモメトリックス技術を画像データセットに適用する工程を有し得る。ケモメトリック分析は、多変量曲線分解分析、主成分分析(PCA)、部分最小二乗判別分析(PLSDA)、k平均クラスタリング分析、バンド標的エントロピー分析、適応部分空間検出器分析、コサイン相関分析、ユークリッド距離分析、部分最小二乗回帰分析、スペクトル混合解像度分析、スペクトル角マッパーメトリック分析、スペクトル情報発散メトリック分析、マハラノビス距離メトリック分析、およびスペクトル非混合分析の1若しくはそれ以上を有し得る。いくつかの実施形態において、プロセッサはシステムの動作を制御するように構成されてもよい。例えば、チューナブルフィルターが用いられる実施形態では、プロセスは、コントローラがチューナブルフィルターに電圧を印加させて所望の通過帯域の透過をもたらすように構成することができる。さらに、プロセッサは、特定の照明に対して正しい検出器が動作するよう照明源および検出器のタイミングを制御するように構成されてもよい。他のプロセッサ構成が企図されるものであり、それはこの開示を考慮すれば当業者には明らかであろう。
本開示によるシステムはさらにディスプレイを含み得る。いくつかの実施形態において、ディスプレイは1若しくはそれ以上の検出器からの1若しくはそれ以上の結果を含み得る。他の一実施形態では、ディスプレイはプロセッサによる分析からの1若しくはそれ以上の結果を含み得る。一実施形態において、ディスプレイは1若しくはそれ以上の検出器からの1若しくはそれ以上の結果、およびプロセッサによる分析からの1若しくはそれ以上の結果を含み得る。

Claims (37)

  1. 術中デバイスであって、
    撮像システムであって、
    複数の照明光子を生成して、生体試料を照明し複数の相互作用した光子を生成するように構成された照明源と、
    前記複数の照明光子および前記複数の相互作用した光子の1若しくはそれ以上を受け取り、複数の通過帯域波長の第1のセットを有する第1の光学成分と複数の通過帯域波長の第2のセットを有する第2の光学成分を生成するように構成された光信号変調器であって、前記光信号変調器は、コンフォーマルフィルター、多変量光学素子、パターン化されたエタロンフィルター、音響光学チューナブルフィルター、液晶チューナブルフィルター、多重共役フィルター、および前記第1の光学成分と前記第2の光学成分を生成するためのそれらの組み合わせ、のうちの2若しくはそれ以上を有する、前記光信号変調器と、
    前記第1の光学成分および前記第2の光学成分を検出し、前記第1の光学成分に対応する第1の画像データセット(T1)と前記第2の光学成分に対応する第2の画像データセット(T2)を生成するように構成された単体の検出器と、
    前記第1の画像データセット(T1)と前記第2の画像データセット(T2)とを分析するように構成されたプロセッサと
    を含む撮像システムを有する
    術中デバイス。
  2. 請求項1に記載のデバイスにおいて、前記照明源は、ハロゲン光源、メタルハライド光源、発光ダイオード(LED)、LEDアレイ、パルスLED、パルスLEDアレイ、レーザー、およびパルスレーザーのうちの1若しくはそれ以上を含むものである、デバイス。
  3. 請求項1に記載のデバイスにおいて、前記検出器は、CCD検出器、相補型金属酸化膜半導体(CMOS)検出器、ヒ化インジウムガリウム(InGaAs)検出器、ケイ化白金(PtSi)検出器、アンチモン化インジウム(InSb)検出器、およびテルル化水銀カドミウム(HgCdTe)検出器の1若しくはそれ以上を有するものである、デバイス。
  4. 請求項1に記載のデバイスにおいて、前記プロセッサは、前記第1の画像データセット(T1)および前記第2の画像データセット(T2)の1若しくはそれ以上に光学計算を適用するように構成されている、デバイス。
  5. 請求項1に記載のデバイスにおいて、前記プロセッサはさらに、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つにデジタル染色を適用するように構成されている、デバイス。
  6. 請求項1に記載のデバイスにおいて、前記プロセッサは前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析して前記生体試料の構造を区別するように構成されている、デバイス。
  7. 請求項6に記載のデバイスにおいて、前記構造は尿管と周囲組織とを含むものである、デバイス。
  8. 請求項1に記載のデバイスにおいて、前記プロセッサは、多変量曲線分解分析、主成分分析(PCA)、部分的最小二乗判別分析(PLSDA)、k平均クラスタリング分析、バンド標的エントロピー分析、適応部分空間検出器分析、コサイン相関分析、ユークリッド距離分析、部分最小二乗回帰分析、スペクトル混合解像度分析、スペクトル角マッパーメトリック分析、スペクトル情報発散メトリック分析、マハラノビス距離メトリック分析、およびスペクトル非混合分析からなる群から選択される1若しくはそれ以上のケモメトリックス技術を適用することにより、前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析するように構成されている、デバイス。
  9. 請求項1に記載のデバイスにおいて、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つはハイパースペクトル画像を含むものである、デバイス。
  10. 請求項1に記載のデバイスにおいて、前記光信号変調器は前記複数の相互作用した光子を受け取るように構成された、パターン化されたエタロンフィルター配置を有するものである、デバイス。
  11. 請求項1に記載のデバイスにおいて、前記光信号変調器は前記複数の照明光子を変調するように構成されている、デバイス。
  12. 請求項11に記載のデバイスにおいて、前記光信号変調器は、二重偏光配置の複数のコンフォーマルフィルターおよび複数の多変量光学素子のうちの1若しくはそれ以上を有するものである、デバイス。
  13. 請求項1に記載のデバイスにおいて、前記光信号変調器は複数の相互作用した光子を変調するように構成されている、デバイス。
  14. 内視鏡装置であって、
    管状本体であって、当該管状本体を通るルーメンを有し、基端部と操作可能端部とを有するものである、前記管状本体と、
    前記操作可能端部に光学的に結合され生体試料を照明して複数の相互作用した光子を生成するように構成された照明源と、
    前記操作可能端部に配置された収集光学系と、
    前記収集光学系に光学的に結合され、前記複数の相互作用した光子を受け取り当該複数の相互作用した光子を複数の通過帯域波長の第1のセットを有する第1の光学成分と複数の通過帯域波長の第2のセットを有する第2の光学成分を生成するように構成された光信号変調器であって、前記光信号変調器は、コンフォーマルフィルター、多変量光学素子、パターン化されたエタロンフィルター、音響光学チューナブルフィルター、液晶チューナブルフィルター、多重共役フィルター、および前記複数の相互作用した光子を前記第1の光学成分と前記第2の光学成分に分離するためのそれらの組み合わせのうちの2若しくはそれ以上を有する、前記光信号変調器と、
    前記第1の光学成分および前記第2の光学成分をそれぞれ検出し、前記第1の光学成分に対応する第1の画像データセット(T1)と前記第2の光学成分に対応する第2の画像データセット(T2)を生成するように構成された第1の検出器と第2の検出器と、
    前記第1の画像データセット(T1)と前記第2の画像データセット(T2)とを分析するように構成されたプロセッサと
    を有する内視鏡装置。
  15. 請求項14に記載の装置において、前記照明源は、ハロゲン光源、メタルハライド光源、発光ダイオード(LED)、LEDアレイ、パルスLED、パルスLEDアレイ、レーザー、およびパルスレーザーのうちの1若しくはそれ以上を含むものである、装置。
  16. 請求項14に記載の装置において、前記光信号変調器は、二重偏光配置の複数のコンフォーマルフィルターおよび複数の多変量光学素子のうちの1若しくはそれ以上を有するものである、装置。
  17. 請求項14に記載の装置において、前記少なくとも1つの検出器は、CCD検出器、相補型金属酸化膜半導体(CMOS)検出器、ヒ化インジウムガリウム(InGaAs)検出器、ケイ化白金(PtSi)検出器、アンチモン化インジウム(InSb)検出器、テルル化水銀カドミウム(HgCdTe)検出器のうちの1若しくはそれ以上を有するものである、装置。
  18. 請求項14に記載の装置において、前記プロセッサは、前記第1の画像データセット(T1)および前記第2の画像データセット(T2)のうちの1若しくはそれ以上に光学計算を適用するように構成されている、装置。
  19. 請求項14に記載の装置において、前記プロセッサはさらに、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つにデジタル染色を適用するように構成されている、装置。
  20. 請求項14に記載の装置において、前記プロセッサは、前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析して前記生体試料の構造を区別するように構成されている、装置。
  21. 請求項14に記載の装置において、前記構造は尿管と周囲組織とを含むものである、装置。
  22. 請求項14に記載の装置において、前記プロセッサは、多変量曲線分解分析、主成分分析(PCA)、部分的最小二乗判別分析(PLSDA)、k平均クラスタリング分析、バンド標的エントロピー分析、適応部分空間検出器分析、コサイン相関分析、ユークリッド距離分析、部分最小二乗回帰分析、スペクトル混合解像度分析、スペクトル角マッパーメトリック分析、スペクトル情報発散メトリック分析、マハラノビス距離メトリック分析、およびスペクトル非混合分析からなる群から選択される1若しくはそれ以上のケモメトリックス技術を適用することにより前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析するように構成されている、装置。
  23. 請求項14に記載の装置において、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つはハイパースペクトル画像を含むものである、装置。
  24. 請求項14に記載の装置において、前記光信号変調器はパターン化されたエタロンフィルター配置を有するものである、装置。
  25. 内視鏡装置であって、
    管状本体であって、当該管状本体を通るルーメンを有し、基端部と操作可能端部とを有するものである、前記管状本体と、
    複数の照明光子を生成するように構成された照明源と、
    前記複数の照明光子を受け取り、当該複数の照明光子を複数の通過帯域波長の第1のセットを有する第1の光学成分と複数の通過帯域波長の第2のセットを有する第2の光学成分に分離するように構成された光信号変調器であって、前記光信号変調器は、コンフォーマルフィルター、多変量光学素子、パターン化されたエタロンフィルター、音響光学チューナブルフィルター、液晶チューナブルフィルター、多重共役フィルター、および前記第1の光学成分と前記第2の光学成分を生成するためのそれらの組み合わせ、のうちの2若しくはそれ以上を有する、前記光信号変調器と、
    前記ルーメンを通じて前記第1の光学成分および前記第2の光学成分を前記操作可能端部に伝送して生体試料を照明するように構成された光ファイバと、
    前記操作可能端部に配置された収集光学系と、
    前記第1の光学成分および前記第2の光学成分をそれぞれ検出し、前記第1の光学成分に対応する第1の画像データセット(T1)と前記第2の光学成分に対応する第2の画像データセット(T2)を生成するように構成された第1の検出器と前記管状本体の前記操作可能端部に配置された第2の検出器と、
    前記第1の画像データセット(T1)と前記第2の画像データセット(T2)とを分析するように構成されたプロセッサと
    を有する内視鏡装置。
  26. 請求項25に記載の装置において、前記照明源は、ハロゲン光源、メタルハライド光源、発光ダイオード(LED)、LEDアレイ、パルスLED、パルスLEDアレイ、レーザー、およびパルスレーザーのうちの1若しくはそれ以上を含むものである、装置。
  27. 請求項25に記載の装置において、前記光信号変調器は、二重偏光配置の複数のコンフォーマルフィルターおよび複数の多変量光学素子のうちの1若しくはそれ以上を有するものである、装置。
  28. 請求項25に記載の装置において、前記少なくとも1つの検出器は、CCD検出器、相補型金属酸化膜半導体(CMOS)検出器、ヒ化インジウムガリウム(InGaAs)検出器、ケイ化白金(PtSi)検出器、アンチモン化インジウム(InSb)検出器、およびテルル化水銀カドミウム(HgCdTe)検出器の1若しくはそれ以上を有するものである、装置。
  29. 請求項25に記載の装置において、前記プロセッサは、前記第1の画像データセット(T1)および前記第2の画像データセット(T2)のうちの1若しくはそれ以上に光学計算を適用するように構成されている、装置。
  30. 請求項25に記載の装置において、前記プロセッサはさらに、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つにデジタル染色を適用するように構成されている、装置。
  31. 請求項25に記載の装置において、前記プロセッサは前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析して前記生体試料の構造を区別するように構成されている、装置。
  32. 請求項31に記載の装置において、前記構造は尿管と周囲組織とを含むものである、装置。
  33. 請求項25に記載の装置において、前記プロセッサは、多変量曲線分解分析、主成分分析(PCA)、部分的最小二乗判別分析(PLSDA)、k平均クラスタリング分析、バンド標的エントロピー分析、適応部分空間検出器分析、コサイン相関分析、ユークリッド距離分析、部分最小二乗回帰分析、スペクトル混合解像度分析、スペクトル角マッパーメトリック分析、スペクトル情報発散メトリック分析、マハラノビス距離メトリック分析、およびスペクトル非混合分析からなる群から選択される1若しくはそれ以上のケモメトリックス技術を適用することにより前記第1の画像データセット(T1)および前記第2の画像データセット(T2)を分析するように構成されている、装置。
  34. 請求項25に記載の装置において、前記第1の画像データセット(T1)または前記第2の画像データセット(T2)のうちの少なくとも1つはハイパースペクトル画像を含むものである、装置。
  35. 請求項1に記載のデバイスにおいて、前記光信号変調器は、さらに、
    組織試料の異常に対応する通過帯域波長を送信するように構成され、前記異常は癌であるものである、デバイス。
  36. 請求項14に記載の内視鏡装置において、前記光信号変調器は、さらに、
    前記生体試料の異常に対応する通過帯域波長を送信するように構成され、前記異常は癌であるものである、内視鏡装置。
  37. 請求項25に記載の内視鏡装置において、前記光信号変調器は、さらに、
    前記生体試料の異常に対応する通過帯域波長を送信するように構成され、前記異常は癌であるものである、内視鏡装置。
JP2020545579A 2018-04-30 2018-04-30 分子化学画像内視鏡撮像システム Active JP7357931B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2018/030155 WO2019212472A1 (en) 2018-04-30 2018-04-30 Molecular chemical imaging endoscopic imaging systems

Publications (2)

Publication Number Publication Date
JP2021526035A JP2021526035A (ja) 2021-09-30
JP7357931B2 true JP7357931B2 (ja) 2023-10-10

Family

ID=68386485

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020545579A Active JP7357931B2 (ja) 2018-04-30 2018-04-30 分子化学画像内視鏡撮像システム

Country Status (4)

Country Link
EP (1) EP3787469A4 (ja)
JP (1) JP7357931B2 (ja)
CN (1) CN112105283A (ja)
WO (1) WO2019212472A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210353225A1 (en) * 2020-05-18 2021-11-18 Chemimage Corporation Systems and methods for detecting oral cancer using molecular chemical imaging

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003527916A (ja) 2000-03-28 2003-09-24 ボード・オブ・リージェンツ,ザ・ユニヴァーシティ・オヴ・テキサス・システム 診断用マルチスペクトルデジタル画像化のための方法および装置
US20060139780A1 (en) 2004-12-24 2006-06-29 Olympus Corporation Variable transmittance optical element and imaging optical system including the same arranged at distal end of an endoscope
JP2006192058A (ja) 2005-01-13 2006-07-27 Pentax Corp 画像処理装置
US20120083678A1 (en) 2010-09-30 2012-04-05 Chemimage Corporation System and method for raman chemical analysis of lung cancer with digital staining
JP2014136116A (ja) 2013-01-18 2014-07-28 Terumo Corp 尿管カテーテル
JP2014225839A (ja) 2013-05-17 2014-12-04 岩崎電気株式会社 撮像システム
JP2016511015A (ja) 2013-01-30 2016-04-14 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. ハイパースペクトルカメラガイドプローブを持つイメージングシステム
WO2018009670A1 (en) 2016-07-06 2018-01-11 Chemimage Corporation Systems and methods for detecting edema

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2643941B2 (ja) * 1987-06-11 1997-08-25 オリンパス光学工業株式会社 内視鏡用画像処理装置
IL115291A0 (en) * 1994-09-15 1995-12-31 Gabriel Med Inc Method and apparatus for transillumination of body members
JP4472794B2 (ja) * 1997-03-25 2010-06-02 パナソニック電工株式会社 グルコース濃度の定量装置
JP4133319B2 (ja) 2000-07-14 2008-08-13 ノバダック テクノロジーズ インコーポレイテッド コンパクトな蛍光内視鏡映像システム
US7257437B2 (en) * 2002-07-05 2007-08-14 The Regents Of The University Of California Autofluorescence detection and imaging of bladder cancer realized through a cystoscope
US7697975B2 (en) * 2003-06-03 2010-04-13 British Colombia Cancer Agency Methods and apparatus for fluorescence imaging using multiple excitation-emission pairs and simultaneous multi-channel image detection
US20050027166A1 (en) * 2003-06-17 2005-02-03 Shinya Matsumoto Endoscope system for fluorescent observation
WO2009005748A1 (en) 2007-06-29 2009-01-08 The Trustees Of Columbia University In The City Ofnew York Optical imaging or spectroscopy systems and methods
US9041932B2 (en) * 2012-01-06 2015-05-26 Chemimage Technologies Llc Conformal filter and method for use thereof
US8977331B2 (en) * 2012-12-13 2015-03-10 General Electric Company Systems and methods for nerve imaging
US10779713B2 (en) * 2014-12-09 2020-09-22 Chemimage Corporation Molecular chemical imaging endoscopic imaging systems
WO2016125207A1 (ja) * 2015-02-06 2016-08-11 オリンパス株式会社 光ファイバスキャナ及び走査型内視鏡装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003527916A (ja) 2000-03-28 2003-09-24 ボード・オブ・リージェンツ,ザ・ユニヴァーシティ・オヴ・テキサス・システム 診断用マルチスペクトルデジタル画像化のための方法および装置
US20060139780A1 (en) 2004-12-24 2006-06-29 Olympus Corporation Variable transmittance optical element and imaging optical system including the same arranged at distal end of an endoscope
JP2006178320A (ja) 2004-12-24 2006-07-06 Olympus Corp 分光透過率可変素子、及び分光透過率可変素子を備えた内視鏡装置
JP2006192058A (ja) 2005-01-13 2006-07-27 Pentax Corp 画像処理装置
US20120083678A1 (en) 2010-09-30 2012-04-05 Chemimage Corporation System and method for raman chemical analysis of lung cancer with digital staining
JP2014136116A (ja) 2013-01-18 2014-07-28 Terumo Corp 尿管カテーテル
JP2016511015A (ja) 2013-01-30 2016-04-14 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. ハイパースペクトルカメラガイドプローブを持つイメージングシステム
JP2014225839A (ja) 2013-05-17 2014-12-04 岩崎電気株式会社 撮像システム
WO2018009670A1 (en) 2016-07-06 2018-01-11 Chemimage Corporation Systems and methods for detecting edema

Also Published As

Publication number Publication date
EP3787469A4 (en) 2021-11-10
JP2021526035A (ja) 2021-09-30
CN112105283A (zh) 2020-12-18
EP3787469A1 (en) 2021-03-10
WO2019212472A1 (en) 2019-11-07

Similar Documents

Publication Publication Date Title
US20210068639A1 (en) Molecular chemical imaging endoscopic imaging systems
US11229400B2 (en) Discrimination of calculi and tissues with molecular chemical imaging
US6937885B1 (en) Multispectral/hyperspectral medical instrument
US7697975B2 (en) Methods and apparatus for fluorescence imaging using multiple excitation-emission pairs and simultaneous multi-channel image detection
JP4749805B2 (ja) ラマン散乱光観測装置
JP2011036695A (ja) マルチスペクトル/ハイパースペクトルの医療用計器
US20230239583A1 (en) Method and system for joint demosaicking and spectral signature estimation
JP7357931B2 (ja) 分子化学画像内視鏡撮像システム
RU2526929C2 (ru) Оптическое исследовательское устройство, выполненное с возможностью, по меньшей мере, частичного помещения в мутную среду
AU2017346249B2 (en) Multi-wavelength endoscopic system and image processing method using same
US20210353225A1 (en) Systems and methods for detecting oral cancer using molecular chemical imaging
WO2017215031A1 (zh) 一种高分子医学内窥镜
US20190090726A1 (en) Optical device using liquid crystal tunable wavelength filter
RU2716680C1 (ru) Многоволновая эндоскопическая система и способ обработки изображений с её использованием
Fawzy et al. Spectral imaging technology-A review on skin and endoscopy applications
JP6752116B2 (ja) 内視鏡装置及び生体内部器官観察方法
Smith et al. Molecular Chemical Imaging of Critical Anatomical Structures in vivo
JP2022527642A (ja) 狭帯域光観察を利用する医療機器
Luthman et al. A Multispectral Endoscope Based on SRDAs
JP2021010404A (ja) 観察装置、観察方法及び内視鏡装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210402

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210402

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220308

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220607

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220805

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220908

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221220

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230320

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230522

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230822

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230920

R150 Certificate of patent or registration of utility model

Ref document number: 7357931

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150