JP6813245B2 - 単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法、コンピュータシステム、及び単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体 - Google Patents

単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法、コンピュータシステム、及び単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体 Download PDF

Info

Publication number
JP6813245B2
JP6813245B2 JP2017519923A JP2017519923A JP6813245B2 JP 6813245 B2 JP6813245 B2 JP 6813245B2 JP 2017519923 A JP2017519923 A JP 2017519923A JP 2017519923 A JP2017519923 A JP 2017519923A JP 6813245 B2 JP6813245 B2 JP 6813245B2
Authority
JP
Japan
Prior art keywords
image
sample
physiological
computer
anatomical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017519923A
Other languages
English (en)
Other versions
JP2017538458A5 (ja
JP2017538458A (ja
Inventor
チェン,チェング
ブルース ファーグソン,ジェイアール.,トーマス
ブルース ファーグソン,ジェイアール.,トーマス
マイケル ジェイコブス,ケネス
マイケル ジェイコブス,ケネス
ペング,ジーヨング
Original Assignee
イースト カロライナ ユニバーシティ
イースト カロライナ ユニバーシティ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by イースト カロライナ ユニバーシティ, イースト カロライナ ユニバーシティ filed Critical イースト カロライナ ユニバーシティ
Publication of JP2017538458A publication Critical patent/JP2017538458A/ja
Publication of JP2017538458A5 publication Critical patent/JP2017538458A5/ja
Application granted granted Critical
Publication of JP6813245B2 publication Critical patent/JP6813245B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • A61B5/0044Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part for the heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • A61B5/0086Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters using infrared radiation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026Measuring blood flow
    • A61B5/0261Measuring blood flow using optical means, e.g. infrared light
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026Measuring blood flow
    • A61B5/0275Measuring blood flow using tracers, e.g. dye dilution
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4887Locating particular structures in or on the body
    • A61B5/489Blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7225Details of analog processing, e.g. isolation amplifier, gain or sensitivity adjustment, filtering, baseline or drift compensation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A61B2576/023Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part for the heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular
    • G06T2207/30104Vascular flow; Blood flow; Perfusion
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Description

本発明概念は一般に、器官及び/又は組織の可視化に関し、より詳細には、解剖学的構造、血流及び灌流の可視化に関する。
優先権の主張
本出願は、2014年10月14日出願の米国仮特許出願第62/063,673号、及び2015年3月20日出願の米国仮特許出願第62/136,010号からの優先権を主張するものであり、上記仮特許出願の開示は、その全体が本出願中に記載されているかのように、参照により本出願に援用される。
著作権の留保
本特許文書の開示の一部分は、著作権保護を受けている資料を含む。著作権所有者であるイーストカロライナ大学(ノースカロライナ州グリーンヴィル)は、本特許文書又は本特許開示のいずれによる、特許商標庁の特許ファイル又は記録に見られるままの複製に対して、異議を有しないが、それ以外の場合は全ての著作権を留保する。
可視光撮像は、医療目的での器官及び/又は組織の表面の詳細な解剖学的可視化に役立つ。しかしながら、可視光撮像は、生理機能、特に血流及び灌流の生理機能及び病態生理のリアルタイム撮像には有用ではない。一方、近赤外線(Near Infra‐Red:NIR)撮像は、標的器官及び/又は組織の解剖学的構造の表面を可視化するために使用できるものの、可視光解剖学的撮像には大幅に劣る。器官及び/又は組織の可視化のための改良された技術が望まれている。
本発明は、背景技術の課題を解決するためのものである。
本発明概念のいくつかの実施形態は、単一の画像上で解剖学的データと生理学的データとを結合するための方法を提供し、上記方法は:試料の画像を取得するステップであって、上記試料の上記画像は、上記試料の解剖学的構造を含む、ステップ;上記試料の血流及び灌流の生理学的マップを取得するステップ;並びに上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、上記試料の単一の画像へと結合するステップを含む。上記試料の上記単一の画像は、上記試料の解剖学及び生理機能を、上記単一の画像中でリアルタイムに表示する。画像を取得するステップ、生理学的マップを取得するステップ、及び結合するステップのうちの少なくとも1つは、少なくとも1つのプロセッサによって実施される。
更なる実施形態では、上記取得するステップは、約780nm〜約2500nmの波長の生の近赤外線(NIR)画像、及び約400nm〜約700nmの波長の可視光画像のうちの少なくとも1つを取得するステップを含んでよい。
また更なる実施形態では、上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、単一の画像へと結合する上記ステップは、上記画像及び/又は上記生理学的マップの1つ又は複数の特性を調整するステップを含んでよい。上記1つ又は複数の特性としては、カラー化、透明度及び重み付け関数のうちの少なくとも1つが挙げられる。上記生理学的マップは、流体力学的モデリングに基づく、血流及び灌流、主血管中の血流の流れの分布、速度及び/又は容積流量(cc/分)の定量化のうちの1つを示してよい。
いくつかの実施形態では、上記結合するステップは更に、以下の等式:
で表される8ビットRGBカラー画像を生成するステップを含み、ここでImg(i,j)は、標的組織/器官の8ビットグレースケール可視光画像であり、i及びjはそれぞれ水平方向及び垂直方向に沿った画素インデックスであり、各カラーチャネルに対するImg(i,j)を別個に調整することによって、所望の可視化効果を達成する。
更なる実施形態では、上記試料は、組織及び器官のうちの1つであってよい。上記取得するステップは、上記組織及び上記器官のうちの少なくとも1つの血管系の解剖学的構造を含む上記画像を取得するステップを含んでよい。
また更なる実施形態では、上記画像を取得する上記ステップは、上記試料を少なくとも1つの光源によって照明することによって進めてよい。光の一部分は上記少なくとも1つの光源から反射され、これによって、単回のデータ取得中に上記画像及び上記生理学的マップを取得できる。
いくつかの実施形態では、上記試料の生理学的マップを取得する上記ステップは:レーザスペックル撮像(laser speckle imaging:LSI)を用いて、1つ又は複数の画像から血流及び灌流の生理学的マップを;レーザドップラ撮像(laser doppler imaging:LDI)を用いて、1つ又は複数の画像から血流及び灌流の生理学的マップを;並びに蛍光画像から血流及び灌流の血管造影の類似を、のうちの少なくとも1つを取得するステップを含んでよい。
更なる実施形態では、本発明は更に、上記試料の解剖学及び生理機能をリアルタイムに表示するビデオを提供するために、複数の画像を対応する複数の生理学的マップと結合するステップを含んでよい。
本発明概念のまた更なる実施形態は、単一の画像上で解剖学的データと生理学的データとを結合するためのコンピュータシステムを提供し、上記システムは、プロセッサと、上記プロセッサに連結された、コンピュータ可読プログラムコードを含むメモリとを含み、上記コンピュータ可読プログラムコードは、上記プロセッサによって実行された場合に、上記プロセッサに以下を含む動作を実施させる:試料の画像を取得するステップであって、上記試料の上記画像は、上記試料の解剖学的構造を含む、ステップ;上記試料の血流及び灌流の生理学的マップを取得するステップ;並びに上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、上記試料の単一の画像へと結合するステップ。上記試料の上記単一の画像は、上記試料の解剖学及び生理機能を、上記単一の画像中でリアルタイムに表示する。
本発明概念のいくつかの実施形態は、単一の画像上で解剖学的データと生理学的データとを結合するためのコンピュータプログラム製品を提供し、上記コンピュータプログラム製品は、非一時的コンピュータ可読記憶媒体を含み、上記非一時的コンピュータ可読記憶媒体は、上記媒体中で具現化されるコンピュータ可読プログラムコードを有し、上記コンピュータ可読プログラムコードは:試料の画像を取得するためのコンピュータ可読プログラムコードであって、上記試料の上記画像は、上記試料の解剖学的構造を含む、コンピュータ可読プログラムコード;上記試料の血流及び灌流の生理学的マップを取得するためのコンピュータ可読プログラムコード;並びに上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、上記試料の単一の画像へと結合するためのコンピュータ可読プログラムコードを含む。上記試料の上記単一の画像は、上記試料の解剖学的構造及び生理機能を、上記単一の画像中でリアルタイムに表示する。
1つ又は複数の本発明概念のいくつかの実施形態によるシステムのブロック図である。 1つ又は複数の本発明概念の実施形態によるデータ処理システムのブロック図である。 1つ又は複数の本発明概念のいくつかの実施形態による、図2に示したデータ処理システムの、より詳細なブロック図である。 心臓の前壁の可視光画像である。 心臓の前壁の近赤外線(NIR)画像である。 レーザスペックルコントラスト撮像技術に基づく、ヒトの心臓の前壁における血流及び灌流を示す画像である。 図3及び4の画像を結合する、本発明概念の実施形態による画像である。 本発明概念のいくつかの実施形態に従って生成される結合画像を生成する、一連の画像である。 1つ又は複数の本発明概念の様々な実施形態による、画像を結合するための操作を示すフローチャートである。 1つ又は複数の本発明概念の様々な実施形態による、画像を結合するための操作を示すフローチャートである。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第1のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第1のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第1のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第1のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第2のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第2のアプローチを示す図である。 本発明概念のいくつかの実施形態による、ブタを用いた研究における小腸の解剖学的構造及び血流生理機能の両方の可視化のための第2のアプローチを示す図である。
本発明概念の特定の具体的実施形態について、添付の図面を参照して説明する。しかしながら、この発明概念は多数の異なる形態で具現化でき、本明細書に記載の実施形態に限定されるものと解釈してはならない。寧ろこれらの実施形態は、本開示を徹底的かつ完全なものとし、本開示が本発明概念の範囲を当業者に完全に伝達するように、提供される。図面において、同様の番号は同様の要素を示す。ある要素が別の要素に「接続される(connected)」又は「連結される(coupled)」と言及されている場合、上記要素は上記別の要素に直接接続若しくは連結でき、又は介在要素が存在してもよい。本明細書において使用される場合、用語「及び/又は(and/or)」は、関連する列挙された項目のうちの1つ又は複数の、いずれのあらゆる組み合わせを含む。
本明細書において使用される専門用語は、特定の実施形態を説明する目的だけのためのものであり、本発明概念の限定となることを意図したものではない。本明細書において使用される場合、単数形「ある(a、an)」及び「上記(the)」は、そうでないことが明言されていない限り、複数形も同様に含むことを意図したものである。更に、用語「含む(include)」、「備える、含む(comprise)」、「含む(including)」及び/又は「備える、含む(comprising)」は、本明細書中で使用される場合、言及されている特徴部分、完全体、ステップ、操作、要素及び/又は構成部品の存在を明示するが、1つ又は複数の他の特徴部分、完全体、ステップ、操作、要素、構成部品及び/又はその群の存在又は追加を排除するものではないことが理解されるだろう。
本明細書において使用される全ての用語(技術用語及び科学用語を含む)は、他の意味に定義されていない限り、本発明概念が属する技術分野の当業者によって通常理解されるものと同一の意味を有する。更に、通常使用される辞書において定義されている用語等の用語は、本明細書の文脈における上記用語の意味と矛盾しない意味を有するものとして解釈されるべきであり、本明細書中において明示的にそう定義されていない限り、理想化された、又は過度に形式的な意味に解釈されてはならないことが理解されるだろう。
上で議論したように、可視光撮像及び近赤外線(NIR)撮像は、解剖学的構造又は血流/灌流の1つ又は複数の可視化領域において不十分である。従って、本発明概念のいくつかの実施形態は、解剖学的構造の可視化と、例えばいずれの開放組織/器官のNIRスペクトルからの生画像データである画像データから引き出された生理学的機能とを組み合わせる。特に、本発明概念のいくつかの実施形態は、NIR撮像、可視光撮像等を用いて取得した解剖学的画像と、血流/灌流に関連する構造的細部とを組み合わせて、リアルタイムに提示するための新規の画像/ビデオを提供する。血流/灌流データは例えば、レーザスペックル若しくはレーザドップラ撮像技術(LDI)、又はいくつかの実施形態では蛍光撮像によって提供してよい。レーザスペックル撮像(LSI)を用いた血流/灌流データの提供については、例えば同一出願人による米国公開特許第2013/0223705号及び米国公開特許第2013/0245456号において議論されており、上記公開特許の内容は、その全体が本出願中に記載されているかのように、参照により本出願に援用される。本発明概念の実施形態は、LSI、LDI及び/又は蛍光撮像に限定されず、血流及び灌流の生理機能を提示するいずれの画像形態を使用してよいことが理解されるだろう。特に、血流及び灌流データは、本発明概念の範囲から逸脱することなく、本明細書において議論される実施形態に役立ついずれの効果的な方法によって提供してよい。
本発明概念のいくつかの実施形態は、解剖学的‐生理学的結果の提示並びにリアルタイムでの評価及び判断のための、新規の画像/ビデオの可視化を提供する。換言すると、上記新規の画像は、例えばNIR又は可視光撮像によって提供される有用な解剖学的画像と、血流及び灌流の情報との両方を、リアルタイムで操作できる同一の画像上で提供する。従って、上記新規の可視化(これ以降「ベロシティ・フロー・アナトミー(Velocity‐Flow‐Anatomy(VFA))画像又はビデオ」と呼ぶ)は、解剖学的構造と、血流及び灌流の生理機能との両方の情報を、リアルタイムで同時に含む。
本発明概念のいくつかの実施形態によるVFA画像/ビデオは、(1)極めて明確な解剖学的細部と、(2)リアルタイムの医療的決定を行うために十分な、下層の生理学的プロセスとを結合する。NIR/可視光画像は、最終的な可視化(VFA画像)の1つの層として使用され、これは、標的組織/器官表面及び血管系の解剖学的構造を明らかにする。例えばLSI、LDI及び蛍光技術によって定量化された血流及び灌流の生理学的マップは、最終的なVFA可視化の別の層として使用される。上記生理学的マップは、標的組織/器官及び血管系の機能性及び生理機能を提供する。本明細書において理解されるように、用語「生理学的マップ(physiologic map)」は、異なる複数のタイプの撮像によって生成されたマップを指し、例えばLSI及びLDIは「速度マップ(velocity map)」を生成できるが、用語「生理学的マップ」は一般に、いずれの撮像技術の使用から得られたマップを指してよい。例えば生理学的マップは、本発明概念の範囲から逸脱することなく、流体力学的モデリングに基づく、血流及び灌流、主血管中の血流の流れの分布、速度及び/若しくは容積流量(cc/分)の定量化のうちの1つ、並びに/又はこれらのいずれの組み合わせを示してよい。
組織/器官における、血流及び灌流の正常な生理機能、並びに血流及び灌流の異常の病態生理学的兆候の両方の態様を提供できる。本発明概念のいくつかの実施形態は、上記層それぞれの複数の態様、例えば上記層のカラー化及び透明度を調整するよう構成された、ソフトウェアアルゴリズムを提供する。いくつかの実施形態では、上記層のそれぞれは、生NIRデータ/可視光画像の同一の単回のビデオ取得から引き出してよい。
本発明概念のいくつかの実施形態は、従来の可視化方法を上回る明確な利点を提供できる。例えば本発明概念の実施形態は、NIR画像/可視光画像の解剖学的忠実度の大幅な改善を提供できる。更に、上記解剖学的な層は、速度の撮像のために重要な背景を提供し得る。改善された解剖学的忠実度は、速度の忠実度、速度データの解釈、解釈のタイミング、及び解釈の理解を改善し、これら全てにより、VFA画像/ビデオ結果の解釈がより直観的なものとなる。上記解剖学的忠実度により、標的心外膜冠動脈(流れ)及び周囲の心筋組織(灌流)といった、複数のレベルの分析の同時かつリアルタイムの判断が可能となる。最後に、本発明概念の実施形態によって提供される、解剖学及び生理学の結合は、機能データが本物であり、下層の生理機能及び/又は病態生理を正確に示していることを、ユーザ、即ち手術中の外科医に確信させる際に有用となり得る。VFA画像/ビデオは、未知のもの、即ち灌流の定量化を、既知のもの、即ち解剖学と結合して表示し、ここで解剖学的構成要素は、本明細書において図1〜11Cに関して更に議論されるように、有用な基準フレームを提供する。
まず図1を参照すると、本発明概念のいくつかの実施形態による、リアルタイム画像/ビデオにおいて解剖学的情報と速度情報とを結合するためのシステムについて議論する。本発明概念の実施形態によるいくつかのシステムは非侵襲的であり得ることが理解されるだろう。本明細書において使用される場合、「非侵襲的(non‐invasive)」は、染料の注入、物体による貫入、又は1つ若しくは複数の体内プローブによる接触を被験者が受ける必要がない、システム又は方法を指す。従って本明細書において使用される場合、用語「非侵襲的」は、被験者との接触が最小であるシステム又は方法を指す。本明細書において使用される場合、「被験者(subject)」は、撮像されるヒト又は物を指す。被験者は、家畜、死体検体又はヒト被験者を含むいずれの被験者とすることができる。本明細書において使用される場合、「灌流(perfusion)」は、スペックル撮像によって検出される、組織灌流分布レベルにおける血流を指す。
図1に示すように、システム100は、少なくとも1つの光源ユニット120、カメラ130、画像処理デバイス110及びVFAデバイス125を含む。図1のシステムはこれらの要素のみを含むものとして示されているが、本発明概念の範囲から逸脱することなく、他の要素もシステム内に存在してよいことが理解されるだろう。例えば本発明概念のいくつかの実施形態は、本発明概念の範囲から逸脱することなく、複数の光源120を含んでよい。複数の光源120は、異なる波長の光源を含んでよく、例えば近赤外線及び可視光を、各光/レーザデバイスによって提供してよい。
特に、いくつかの実施形態では、光源ユニット120は、例えば1つ又は複数のレーザ又は発光ダイオード(LED)によって提供してよい。いくつかの実施形態では、光源120は、約780nm〜約2500nmの波長を有するNIR光源である。いくつかの実施形態では、光源120は、約400nm〜約780nmの波長を有する可視光源であってよい。いくつかの実施形態では、それぞれの波長を有する可視光源及びNIR光源の両方を使用してよい。従って、本発明概念のいくつかの実施形態は、LSI及び/又はLDIを適用するために、試料を通る異なる透過性の2つの波長を用いるシステムを提供する。例えば上記2つの波長のうちの第1のものは、貫入がないか又は極めて浅い、青色光450〜495nm等の可視範囲内であってよい。この波長は、組織/器官表面の解剖学的構造を捕捉し、試料の位置マーカとして機能するが、血流及び灌流の表面下移動のマーカとしては機能しない。第2の波長は近赤外線(NIR)範囲内であってよく、これは遥かに深く貫入する。この波長により、下層の血流の生理機能が明らかになり、またこの波長は、試料の運動と、血流及び灌流の運動との両方に相関する。可視光の撮像測定をベースラインとして用いて、血流及び灌流の実際の運動を、標的の運動アーティファクトに影響されることなく、NIR撮像測定から引き出すことができる。更に、可視光によって捕捉される解剖学的構造の情報と、NIR光によって測定される生理学的特徴とを結合させる。2つの波長を使用するシステムに関する詳細は、2015年3月20日出願の米国仮特許出願第62/136010号において詳細に議論されており、上記仮特許出願の開示は、上述のように、参照により本出願に援用される。NIR生画像及び可視光画像に関する実施形態についてここで議論しているが、本発明概念の実施形態はこの構成に限定されない。本発明概念の範囲から逸脱することなく、解剖学的構造を十分に提示できる他のいずれの画像形態を使用できる。
光源120を用いて、関心対象領域140(これ以降「組織/器官」)を照明してよい。本明細書において使用される場合、「関心対象領域(region of interest)」は、撮像されている被験者の領域、例えば主血管及び組織、器官等を指す。光源120からの入射光127、例えばNIR光又は可視光が、組織/器官等の生体標的(関心対象領域140)に向けられている場合、上記光の一部は、標的の内部での複数の散乱を経て、最終的には図1に示すようにカメラ130に戻るように反射する(反射光)。
カメラ130は、反射光を集めて、例えば波長エネルギによって決定される照明光の貫入の深さに応じて異なる波長をそれぞれ有する、可視光又はNIR画像(NIR/可視光層115)を提供するよう構成される。いくつかの実施形態では、カメラ130は、単一波長(可視光/NIR)画像取得に関して、ルメネラ(Lumenera)Lt225 NIR CMOSカメラによって提供される。同時複数波長画像取得の用途に関しては、カスタム設計のビーム分割システムを、通常のカメラ本体の前方に配置してよい。
反射したNIR/可視光画像115は、解剖学的構造を明らかにする。いくつかの実施形態では、この解剖学的構造は、波長及びエネルギの関数である組織内への貫入に応じて、組織/器官の表面の数ミリメートル下側であってよい。得られる未修正画像の提示(図4の生NIR画像)は、同様の構造の可視光画像(図3)ほど詳細ではない。
図3は、心臓の前壁の可視光画像であり、図4は、冠動脈の解剖学的構造を明らかにする、心臓の前壁のNIR画像である。図3と図4との間の差異は、解剖学的構造のみならず、速度の違いにも基づく。
更に、図4のNIR画像は256グレースケール画像であるため、色によって達成される解剖学的な識別は、NIR生画像では失われる場合がある。このような忠実度の損失は、例えば医学におけるLSI及びLDIの用途を相当な程度限定する。解剖学及び解剖学的構造は、医学、特に手術及び介入処置における根本的な基準構成物である。解剖学的忠実度の損失により、生理学的及び病態生理学的血流及び灌流データの理解のための、並びにこのような撮像技術の使用をより直観的なものとするための、重要な枠組みが失われる。
従って図1に示すように、本発明概念の実施形態は、VFA画像/ビデオ135提供するように構成されたVFAデバイス125を提供する。特に図1に示すように、VFAデバイス125は、NIR/可視光解剖学的画像115を、画像処理デバイス110、例えばLSI、LDI又は蛍光によって提供される血流及び灌流情報117(生理学層)と結合して、より忠実度の高い解剖学的詳細を、上記解剖学的詳細の構成要素に関する血流及び灌流、即ち心外膜冠動脈における流れ及び周囲の心筋における灌流の生理学的マップデータと組み合わせて提供するよう構成される。従ってVFA画像/ビデオ135は、これら2つのタイプのデータを独自に結合する。ここで議論されている実施形態による新規のVFA画像135は、例えばLSI、LDI又は蛍光によって提供される血流及び灌流速度データを、生NIR画像/可視光画像115(図4)よりも良好な解剖学的忠実度で、そして可視光画像(図3)と殆ど同等の詳細さで、表示する。
LSI分析のVFA画像提示は、外科医及び医療撮像技師には既に知られており理解されている枠組みにおいて上記速度データを提示することによって、この新規の流れ及び灌流データの解釈を、より容易に理解可能でありかつ決定を行う際に有用なものとするための、方法論を生成する。上記解剖学的詳細は、既知のもの(解剖学)と未知のもの又は測定したもの(流れ及び灌流)とを結合するための基準フレームを提供する。解剖学的詳細は、生理学的及び病態生理学的状況の両方において、流れ及び灌流データの解釈及び理解の精度を改善する。これは、撮像技術が2つの異なる「レベル」の速度(及び流れ)データを提供する場合、例えば心臓の心外膜表面を撮像して、心外膜冠動脈における流れ(レベル1)及び周囲の心筋における灌流(レベル2)を測定する場合に特に当てはまる。
本発明概念のいくつかの実施形態では、解剖学的詳細及び生理学的マップ分析の両方は、同一の単一の生NIR画像データ/可視光画像から引き出すことができる。従って、これらの解剖学的データ及び分析データを結合すること、並びに例えばデータのカラー化、透明度、重ね合わせ及び統合を調整するために、本発明概念の実施形態によるアルゴリズムを使用することによって、新規のVFA分析画像135を、例えば図6に示すような組織/器官の解剖学的(血管構造)情報並びに機能的(血流及び灌流)情報の両方を含むように生成できる。
特に図6は、本発明概念のいくつかの実施形態による処理後のVFA画像を示す。従って図6は、図4と図5とを結合したVFA画像/ビデオ表示を示す。本発明概念のいくつかの実施形態では、各層のカラー化、透明度及び他の特徴を調整することによって、(冠)動脈流及び周囲の組織(心筋)の灌流の解剖学と機能性との両方を、同時かつリアルタイムに、最適に明らかにする。
ここで図7を参照して、本発明概念のいくつかの実施形態によるVFA画像/ビデオについて議論する。図7Aは、可視波長撮像によって提供される心臓の従来の解剖学的画像を示す。図7Bは、NIR撮像によって生成される解剖学画像を示す。図7Cは、試料の血流及び灌流を詳細に示すためにLSIを用いて生成された生理機能画像である。本発明概念の実施形態によるVFA画像は、7Bと7Cとを結合して、図7Dに示すように、試料の解剖学と生理機能(血流及び灌流)とを示す。この結合されたデータを作成する際に、このVFA分析画像に相当な値を付加するアプローチにより、上記結合されたデータは、上記構成要素(解剖学、速度)のいずれよりも視覚的に直観的なものとなり、従って、供給元/医師が迅速に理解及び解釈するのが容易になる。これは、以前よりも遥かに多くの生理学的及び病態生理学的データを自由に用いて、医師がより良好な健康管理を提供することに直接つながり得る。リアルタイムデータは容易に取得され、本発明概念の実施形態によるVFA画像において直観的に提示され、これにより、より良好な決定及びより良好かつ安全な手術が可能となる。
ここでは単一のVFA画像の生成について議論したが、本発明概念の実施形態はこの構成に限定されないことが理解されるだろう。例えば、本発明概念の範囲から逸脱することなく、一連のVFAビデオ画像を生成してよく、これらを集合させてVFAビデオ画像シーケンスとしてよい。
本発明概念の実施形態は、いずれの組織及び/又は器官系からの血流及び灌流データの確定的な取得に適用でき、ここで血流及び灌流は、評価、測定、臨床的な決定の実施、治療的な決定の実施、この技術によって引き出された生理学的撮像データを用いた製品開発、又は血流及び灌流の生理機能及び/若しくは病態生理への実験的調査のための重要な決定因子である。
ここで図2A及び2Bを参照して、本発明概念のいくつかの実施形態による、図1に示すシステム100において使用できるデータ処理システム200について議論する。データ処理システム200は、VFAデバイス120、カメラ130に含まれていてよく、又は本発明概念の範囲から逸脱することなく、システム100の様々な要素間を分割してよい。図2に示すように、図1のシステム100における使用に好適なデータ処理システム200の例示的な実施形態は、キーボード、キーパッド、タッチパッド等のユーザインタフェース244、I/Oデータポート246、及びプロセッサ238と通信するメモリ236を含む。I/Oデータポート246は、データ処理システム200と別のコンピュータシステム又はネットワークとの間で情報を転送するために使用できる。これらの構成部品は、本明細書に記載されているように動作するよう構成してよい多くの従来のデータ処理システムにおいて使用されているもののような、従来の構成部品であってよい。
ここで図2Bを参照して、本発明概念のいくつかの実施形態によるデータ処理システム200の、より詳細なブロック図について議論する。プロセッサ238は、アドレス/データバス347を介してディスプレイ345と通信し、アドレス/データバス348を介してメモリ236と通信し、またアドレス/データバス349を介してI/Oデータポート246と通信する。プロセッサ238は、いずれの市販の又はカスタムメイドのマイクロプロセッサ又はASICとすることができる。メモリ236は、データ処理システム200の機能性を実装するために使用されるソフトウェア及びデータを内包するメモリデバイスの全体的な階層の代表となる。メモリ236は以下のタイプのデバイスを含むことができるが、これらに限定されない:キャッシュ、ROM、PROM、EPROM、EEPROM、フラッシュメモリ、SRAM及びDRAM。
図2Bに示すように、メモリ236は、データ処理システム200において使用される複数のカテゴリのソフトウェア及びデータ;オペレーティングシステム1352;アプリケーションプログラム1354;入出力(I/O)デバイスドライバ358;並びにデータ356を含んでよい。当業者には理解されるように、オペレーティングシステム1352は:インターナショナル・ビジネス・マシーンズ・コーポレーション(International Business Machines Corporation(ニューヨーク州アーモンク))製のOS/2、AIX若しくはzOS;マイクロソフト・コーポレーション(Microsoft Corporation(ワシントン州レドモンド))製のWindows95、Windows98、Windows2000、WindowsXP若しくはVista;Unix;Linux(登録商標);LabView;又はQNX若しくはVxWorks等のリアルタイムオペレーティングシステムといった、データ処理システムと共に使用するために好適ないずれのオペレーティングシステムであってよい。I/Oデバイスドライバ358は典型的には、アプリケーションプログラム1354が、1つ又は複数のI/Oデータポート246及び特定のメモリ236といったデバイスと通信するために、オペレーティングシステム1352を通してアクセスする、ソフトウェアルーチンを含む。アプリケーションプログラム1354は、本発明概念のいくつかの実施形態によるシステムに含まれるデータ処理システム200の様々な特徴を実装するプログラムの実例であり、好ましくは、本発明概念のいくつかの実施形態による動作をサポートする少なくとも1つのアプリケーションを含む。最終的には、データ356は、アプリケーションプログラム1354、オペレーティングシステム1352、I/Oデバイスドライバ358、及びメモリ236内に存在し得る他のソフトウェアプログラムによって使用される、静的及び動的データを提示する。
図2Bに示すように、本発明概念のいくつかの実施形態によるデータ356は、取得された生画像360、解剖学層の画像/データ361、算出された血流/灌流量(速度データ)363、VFA画像/ビデオ364、及び血流の容積流量(cc/分)のデータ365を含んでよい。血流の容積流量(cc/分)のデータ365は、流体力学的モデリングに基づく主血管の血流の容積流量(cc/分)定量化を指す。
図2Bに示すデータ356は、5つの異なるファイル360、361、363、364及び365を含むが、本発明概念の実施形態はこの構成に限定されない。本発明概念の範囲から逸脱することなく、2つ以上のファイルを組み合わせて単一のファイルを作成する、単一のファイルを2つ以上のファイルに分割する等してよい。
図2Bに更に示すように、アプリケーションプログラム1354は、本発明概念のいくつかの実施形態によると、調整モジュール351、画像キャプチャモジュール352、NIR/可視光モジュール353、及びVFA処理モジュール354を含んでよい。本発明概念を、例えば図2Bにおける、調整モジュール351、画像キャプチャモジュール352、NIR/可視光モジュール353、及びVFA処理モジュール354がアプリケーションプログラムであるものを参照して例示しているが、当業者には理解されるように、本発明概念の教示からの利益を依然として得ながら、他の構成を利用することもできる。例えば調整モジュール351、画像キャプチャモジュール352、NIR/可視光モジュール353、及びVFA処理モジュール354を、オペレーティングシステム1352、又はデータ処理システム300の他のこのような論理区分に組み込んでもよい。従って本発明概念は、図2Bの構成に限定されるものと解釈してはならず、本明細書に記載の動作を実施できるいずれの構成を包含することを意図している。
更に、調整モジュール351、画像キャプチャモジュール352、NIR/可視光モジュール353、及びVFA処理モジュール354は、単一のデータ処理システム内に図示されているが、当業者には理解されるように、これらの機能性を1つ又は複数のデータ処理システムにわたって分散させてよい。従って本発明概念は、図2A及び2Bの構成に限定されるものと解釈してはならず、データ処理システム間の他の複数の構成及び/又は機能区分によって提供してよい。
図1に関して上で議論したように、光源、例えばNIR源及び/又は可視光源は、組織/器官の試料を照明してよく、光はカメラへと反射してよい。NIR/可視光モジュール353は、反射光からNIR画像361を提供してよく、画像キャプチャモジュール352は、例えばLSI、LDI又は蛍光を用いて画像(スペックル画像)360を提供してよい。血流及び灌流データを算出してよい(速度データ)。これらの画像を処理して、速度データ363、及び本明細書中で議論されている実施形態による少なくとも1つのVFA画像364を提供してよい。特にデータ356をVFA処理モジュール354が使用することによって、NIR画像361と速度データ363との組み合わせを提供できる。上で議論したように、NIR画像361の色、透明度等を、調整モジュール351で調整することによって、解剖学的データ及び生理学的データの両方を含むリアルタイムの有用な画像を提供できる。
いくつかの実施形態では、底部のベースとして一様の色、例えば黒色を使用し;生理学的画像又はその調整された形態を上記ベースの上の層として使用し;解剖学的画像又はその調整された形態を、上記生理学層の透明度を修正するために使用し;従って、解剖学的に比較的重要でない部分(解剖学的画像において強度が低い)は、生理学的画像をより多く透過させることになり、従ってより視認しにくくなる。
更なる実施形態では、底部のベースとして一様の色、例えば黒色を使用し;解剖学的画像又はその調整された形態を上記ベースの上の層として使用し;生理学的画像又はその調整された形態を、上記解剖学層の透明度を修正するために使用し;従って、生理学的に比較的重要でない部分(生理学的画像において価値が低い)は、解剖学的画像をより多く透過させることになり、従ってより視認しにくくなる。
NIR波長、レーザスペックル画像及びレーザドップラ技術の使用により、血流及び灌流の速度を定量化でき、従って血管系の機能性を明らかにすることができる。多くの臨床的状況において、解剖学的細部と、上記解剖学的細部の中の下層の生理学的プロセスとの組み合わせのリアルタイムの可視化を用いる新たな機会により、現在及び将来の治療戦略が変化することになる。
本発明概念の様々な実施形態による動作について、図8及び9のフローチャートに関してここで議論する。まず図8を参照すると、単一画像上での解剖学的データと生理学的データとの結合のための動作が、ブロック815において、試料の画像を取得することによって開始される。上記画像は例えば、約780nm〜約2500nmの波長の試料の生の近赤外線(NIR)画像、及び/又は約400nm〜約700nmの波長の試料の可視光画像であってよい。
上記試料の上記画像は、上記試料の解剖学的構造を含む。上記試料は例えば、組織及び/又は器官であってよい。上記試料の血流及び灌流の生理学的マップを取得する(ブロック825)。上記試料の上記生理学的マップは、例えばLSI、LDI又は蛍光を用いて取得してよい。上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、上記試料の単一の画像へと結合させる(ブロック835)。上記試料の上記単一の画像は、上記試料の解剖学及び生理機能を、上記単一の画像中でリアルタイムに表示する。図8に更に示すように、いくつかの任意の実施形態では、血流の容積流量(cc/分)を、流体力学的モデリングに基づいて、主血管において算出してよい(ブロック832)。
いくつかの実施形態では、上記試料の解剖学及び生理機能をリアルタイムに表示するビデオを提供するために、複数の画像を、対応する複数の生理学的マップと結合してよい。
いくつかの実施形態では、上記画像の上記解剖学的構造と、上記試料の上記生理学的マップとを、単一の画像へと結合する上記ステップは、上記画像及び/又は上記生理学的マップの1つ又は複数の特性を調整するステップを含む。上記1つ又は複数の特性としては、カラー化、透明度及び重み付け関数のうちの少なくとも1つが挙げられる。
ここで図9を参照すると、いくつかの実施形態では、上記取得するための動作は、上記試料を光源、例えばNIR源及び/又は可視光源によって照明することによって進められる(ブロック917)。これらの実施形態では、光の一部分は上記光源から反射され、これによって、単回のデータ取得中に上記画像及び上記生理学的マップが取得される(ブロック927)。
ここで、本明細書において議論されている実施形態による更なる動作について、図10A〜11Cに示されている図に関して議論する。本明細書において議論されているような、組織及び器官の解剖学的構造と血流生理機能との両方の可視化は、様々なアプローチによって達成できることが理解されるだろう。これより図10A〜11Cに関して、2つの異なるアプローチについて議論する。
まず図10A〜10Dを参照して、上で議論した動作に類似した二重層設計を用いた第1のアプローチについて議論する。図10A及び10Bは解剖学層を示し、これは、ある波長の照明(可視光及び/又は近赤外線)の生(オリジナル)画像フレームである。Img(i,j)は、標的組織/器官の8ビットグレースケール可視光画像であり、i及びjは、水平及び垂直方向に沿った画素インデックスである。この画像の明度、コントラスト及びガンマ値を調整することによって、より良好な可視化効果を達成できる。
図10Cは生理学層を示し、これは、例えばLSI又はLDI技術を用いて撮像された組織/器官の血流及び灌流の2D速度分布を反映するための、近赤外線光の1つ又は複数の生画像フレームに基づく、処理済み画像である。Img(i,j)は、(黒色及び白色で示されている)8ビットインデックス付きカラー画像であり、その数値は所定のカラーマップにマッピングされている。通常、色は青色から赤色まで(0〜255)の範囲であり、青色は流速がゼロ/最小であることを表し、赤色はシステムが検出できる最高の流速を表す。
最後に図10Dは、図10A〜10Cの組み合わせを示す。上記解剖学層又は上記解剖学層の一部を上記生理学層の上に重ねる従来の方法を用いると、下層が視認できなくなる(被覆される)か、又は部分的に視認できなくなる(部分的に被覆される)。同様に、上記生理学層又は上記生理学層の一部を上記解剖学層の上に重ねる従来の方法を用いると、下層が視認できなくなる(被覆される)か、又は部分的に視認できなくなる(部分的に被覆される)。従って本発明概念の実施形態は、解剖学層及び生理学層の両方の視認性を増大させるために適用される、透明度マップ/マトリクスを提供する。上記透明度マップは、以下の等式で表すことができる:
ここでImgは、可視又は近赤外線光の生(オリジナル)画像フレーム(10A及び10B)であり、xは、ゼロより大きく(>0)2以下である(≦2)調整可能なパラメータである。換言すると、T(i,j)における各画素値は0〜1であり、0は透明度ゼロを表し、1は100%の透明度を表す。パラメータxは、透明度マップのコントラストを制御し、x>1である場合、透明度はより大きなダイナミックレンジを有し、x<1である場合、透明度はより小さなダイナミックレンジを有する。
ここで図11A〜11Cを参照して、色及び明度設計を用いた、組織及び器官の解剖学的構造及び血流生理機能の両方の可視化のための第2のアプローチについて議論する。まず図11Aを参照すると、解剖学層が示されており、これは画像の明度によって表される。ある波長の照明(可視光及び/又は近赤外線)の生(オリジナル)画像フレーム。Img(i,j)は、標的組織/器官の8ビットグレースケール可視光画像であり、i及びjは、水平及び垂直方向に沿った画素インデックスである。この画像の明度、コントラスト及びガンマ値を調整することによって、より良好な可視化効果を達成できる。
図11Bは、(黒色及び白色で示されている)カラー画像として上記生理学層を示しており、これは、例えばLSI又はLDI技術を用いて撮像された組織/器官の血流及び灌流の2D速度分布を反映するための、近赤外線光の1つ又は複数の生画像フレームに基づく、処理済み画像である。まず8ビットインデックス付きカラー画像が生成され、その数値は所定のカラーマップにマッピングされている。図10A〜10Dに関して上で議論したように、通常、色は青色から赤色まで(0〜255)の範囲であり、青色は流速がゼロ/最小であることを表し、赤色はシステムが検出できる最高の流速を表す。次に上記8ビットインデックス付きカラー画像を、平準化されたRGBマップRGB(i,j)に変換し、各画素の色は、(R,G,B)の3つの値で表され、各値は0〜1の範囲である。RGB画像の各画素は、赤色、緑色及び青色の成分に対応する3つの数(R,G,B)で構成される。これら3つの数はそれぞれ、8ビット値を使用する場合は0〜255の範囲であり得、又は平準化された値を使用する場合は0〜1の範囲であり得、(R,G,B)は、画素内の色及び色の明度を決定する。
ここで図11Cを参照すると、解剖学層(図11A)及び生理学層(図11B)は、以下の等式で表される8ビットRGBカラー画像を生成することによって一体に融合される:
ここで各カラーチャネルに関するImg(i,j)を別個に異なる様式で調整することによって、最適な可視化効果を達成できる。従って図11Aの画像は明度を調整し、図11Bの画像は色を調整し、それによって、解剖学及び生理機能両方の組み合わせである図11Cの画像が提供される。
上で議論したように、近赤外線画像/可視光画像は、組織/器官の血管系の表面及び表面下の解剖学的構造を可視化できる。LSI、LDI又は蛍光等の血流測定技術は、血流及び灌流の速度を定量化でき、従って組織/器官の血管系の機能性を明らかにする。特定の臨床的状況では、組織/器官の血管系の解剖学的構造及び機能性の両方の可視化は重要である。従って本発明概念のいくつかの実施形態では、NIR画像をVFA画像の1つの層として使用し、これは、標的組織/器官の血管系の解剖学的構造を明らかにする。例えばLSI、LDI又は蛍光技術によって定量化された血流及び灌流の生理学的マップを、VFAの別の層として使用し、これは、標的組織/器官の血管系の機能性及び生理機能を明らかにする。本発明概念の実施形態は、これら2つの層のカラー化及び透明度を調整するよう構成され、特定の組織/器官の血管系の解剖学及び機能性の両方を提示する最終的な可視化(VFA画像)が得られる。
本発明概念の実施形態は、臨床的撮像のいずれのフォーマットにおいて使用してよく、これは本発明概念の範囲から逸脱することなく、外科的撮像(通常は患者体内での用途)と、その他の患者体外撮像手順(非外科的用途)との両方を含むことが理解されるだろう。
方法、デバイス、システム及び/又はコンピュータプログラム製品のブロック図及び/又はフローチャートによる図示を参照して、例示的実施形態を上で説明した。上記ブロック図及び/又はフローチャートによる図示のあるブロック、並びに上記ブロック図及び/又はフローチャートによる図示の複数のブロックの組み合わせは、コンピュータプログラム命令によって実装できることが理解される。これらのコンピュータプログラム命令を、汎用コンピュータ、専用コンピュータ、及び/又は他のプログラム可能なデータ処理装置のプロセッサに供給することによって、機械を製造してよく、これにより、上記コンピュータ及び/又は他のプログラム可能なデータ処理装置によって実行される上記命令は、上記ブロック図及び/又はフローチャートの1つ又は複数のブロックに明記された機能/作用を実装するための手段(機能性)及び/又は構造を生成する。
これらのコンピュータプログラム命令は、コンピュータ可読メモリに記憶させてもよく、これは特定の様式でコンピュータ又は他のプログラム可能なデータ処理装置を機能させることができ、これによって上記コンピュータ可読メモリに記憶された命令は、上記ブロック図及び/又はフローチャートの1つ又は複数のブロックに明記された機能/作用を実装する命令を含む物品を製造する。
上記コンピュータプログラム命令を、コンピュータ又は他のプログラム可能なデータ処理装置にロードして、上記コンピュータ又は他のプログラム可能な装置に一連の動作ステップを実施させることにより、コンピュータ実装型プロセスを生成してもよく、これにより、上記コンピュータ又は他のプログラム可能な装置によって実行される上記命令は、上記ブロック図及び/又はフローチャートの1つ又は複数のブロックに明記された機能/作用を実装するためのステップを提供する。
従って、例示的実施形態は、ハードウェア及び/又はソフトウェア(ファームウェア、常駐ソフトウェア、マイクロコード等)で実装してよい。更に例示的実施形態は、コンピュータが使用可能な記憶媒体又はコンピュータ可読記憶媒体上のコンピュータプログラム製品の形態を取ってよく、これは、命令実行システムによって又は命令実行システムを接続して使用するために、コンピュータが使用可能なプログラムコード又はコンピュータ可読プログラムコードを上記媒体中に備える。本文書の文脈において、コンピュータが使用可能な媒体又はコンピュータ可読媒体は、命令実行システム、装置若しくはデバイスによって、又は命令実行システム、装置若しくはデバイスを接続して使用するために、上記プログラムを内包、記憶、通信、伝播又は転送できる、いずれの媒体であってよい。
コンピュータが使用可能な媒体又はコンピュータ可読媒体は例えば、磁気、光、電磁気、赤外線又は半導体システム、装置、デバイス又は伝播媒体であってよいが、これらに限定されない。コンピュータ可読媒体のより具体的な例(非包括的なリスト)は、以下を含む:1つ又は複数のワイヤを有する電気的接続;携帯型コンピュータディスケット;ランダムアクセスメモリ(RAM);読み取り専用メモリ(ROM);消去可能なプログラマブル読み取り専用メモリ(EPROM又はフラッシュメモリ);光ファイバ;及び携帯型コンパクトディスク読み取り専用メモリ(CD‐ROM)。コンピュータが使用可能な媒体又はコンピュータ可読媒体はプログラムが印刷され紙又は別の好適な媒体でさえあってよいことに留意されたい。というのは、例えば上記紙又は別の媒体の光学スキャンによって上記プログラムを電気的にキャプチャでき、続いて必要な場合はコンパイル、解釈、又はその他の処理を好適な様式で実施でき、その後コンピュータメモリに記憶できるためである。
本明細書において議論されているデータ処理システムの動作を実行するためのコンピュータプログラムコードは、開発における利便性のために、Java(登録商標)、AJAX(非同期JavaScript)(登録商標)、C及び/又はC++といった高級プログラミング言語で書かれていてよい。更に、例示的実施形態の動作を実施するためのコンピュータプログラムコードはまた、限定するものではないがインタプリタ形式言語等の、他のプログラミング言語で書かれていてもよい。いくつかのモジュール又はルーチンは、性能及び/又はメモリ使用率の向上のために、アセンブリ言語又は更にマイクロコードで書かれていてよい。しかしながら、実施形態は特定のプログラミング言語に限定されない。更に、いずれの又はあらゆるプログラムモジュールの機能性は、個別のハードウェア構成部品、1つ若しくは複数の特定用途向け集積回路(ASIC)、又はフィールドプログラマブルゲートアレイ(FPGA)、又はプログラムされたデジタル信号プロセッサ、プログラムされた論理コントローラ(PLC)、又はマイクロコントローラを用いて実装してもよいことが理解されるだろう。
いくつかの代替実装形態において、上記ブロックに記載の機能/作用は、フローチャートに記載の順序以外の順序で実現できることにも留意されたい。例えば、連続して示されている2つのブロックは、関わる機能性/作用に応じて、実際には実質的に同時に実行でき、又はこれらのブロックを、場合によっては逆の順序で実行してよい。更に、フローチャート及び/若しくはブロック図の1つの所与のブロックの機能性を、複数のブロックに分割してよく、並びに/又はフローチャート及び/若しくはブロック図の2つ以上のブロックの機能性を少なくとも部分的に統合してよい。
図面及び明細書において、本発明概念の例示的実施形態を開示した。特定の用語が採用されているものの、これらの用語は一般的及び説明的な意味でのみ使用され、限定を目的としておらず、本発明概念の範囲は以下の「特許請求の範囲」によって定義される。
100 システム
110 画像処理デバイス
115 NIR/可視光層、生NIR画像/可視光画像
117 生理学層、灌流情報
120 光源ユニット、光源、VFAデバイス
127 入射光
130 カメラ、VFAデバイス、VFA分析画像
140 関心対象領域
200 データ処理システム
236 メモリ
238 プロセッサ
244 ユーザインタフェース
246 I/Oデータポート
345 ディスプレイ
347 アドレス/データバス
348 アドレス/データバス
349 アドレス/データバス
351 調整モジュール
352 オペレーティングシステム、画像キャプチャモジュール
353 NIR/可視光モジュール
354 アプリケーションプログラム、VFA処理モジュール
356 データ
358 I/Oデバイスドライバ
360 取得された生画像
361 解剖学層の画像/データ、NIR画像
363 算出された血流/灌流量、速度データ
364 VFA画像/ビデオ
365 血流の容積流量(cc/分)のデータ

Claims (25)

  1. 単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法であって、
    前記方法は:
    前記システムのプロセッサが試料の画像を取得するステップであって、前記試料の前記画像は、前記試料の生の近赤外線(NIR)画像又は前記試料の可視光画像のうちの少なくとも1つであり、前記試料の前記画像は、前記試料の解剖学的構造を含む、ステップ;
    前記プロセッサが前記試料の血流及び灌流の生理学的マップを取得するステップ;並びに
    前記プロセッサが、前記試料の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記試料の単一の画像へと結合するステップであって、前記試料の前記単一の画像は、前記試料の解剖学及び生理機能を、前記単一の画像中でリアルタイムに表示する、ステップを含み、
    前記試料の血流及び灌流の前記生理学的マップを取得する前記ステップは:レーザスペックル撮像(laser speckle imaging:LSI);レーザドップラ撮像(laser doppler imaging:LDI);又は蛍光撮像を用いて実行される、
    方法。
  2. 前記画像を取得する前記ステップは、780nm〜2500nmの波長の前記生の近赤外線(NIR)画像を取得するステップ、及び/又は400nm〜700nmの波長の前記可視光画像を取得するステップを含む、請求項1に記載の方法。
  3. 前記画像の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記単一の画像へと結合する前記ステップは、前記生の近赤外線(NIR)画像及び/又は前記可視光画像及び/又は前記生理学的マップの1つ又は複数の特性を調整するステップを含む、請求項1又は2に記載の方法。
  4. 前記1つ又は複数の特性は、カラー化、透明度及び重み付け関数のうちの少なくとも1つを含み;
    前記生理学的マップは、流体力学的モデリングに基づく、血流及び灌流、主血管中の血流の流れの分布、速度及び/又は容積流量(cc/分)の定量化のうちの1つを示す、請求項3に記載の方法。
  5. 前記結合するステップは更に、以下の等式:
    で表される8ビットRGBカラー画像を生成するステップを含み、
    ここでImg(i,j)は、標的組織/器官の8ビットグレースケール可視画像であり、i及びjはそれぞれ水平方向及び垂直方向に沿った画素インデックスであり、各カラーチャネルに対するImg(i,j)を別個に調整することによって、所望の可視化効果を達成する、請求項3に記載の方法。
  6. 前記試料は、組織及び器官のうちの1つを含み;
    前記取得された画像は、前記組織及び前記器官のうちの少なくとも1つの血管系の解剖学的構造を含む、請求項1から5のいずれか一項に記載の方法。
  7. 前記プロセッサが、前記試料の解剖学及び生理機能をリアルタイムに表示するビデオを提供するために、複数の画像を対応する複数の生理学的マップと結合するステップを更に含む、請求項1から6のいずれか一項に記載の方法。
  8. 単一の画像上で解剖学的データと生理学的データとを結合するためのコンピュータシステムであって、
    前記システムは:
    プロセッサ;及び
    前記プロセッサに連結された、コンピュータ可読プログラムコードを含むメモリ
    を備え、
    前記コンピュータ可読プログラムコードは、前記プロセッサによって実行された場合に、前記プロセッサに:
    試料の画像を取得するステップであって、前記試料の前記画像は、前記試料の生の近赤外線(NIR)画像又は前記試料の可視光画像のうちの少なくとも1つであり、前記試料の前記画像は、前記試料の解剖学的構造を含む、ステップ;
    前記試料の血流及び灌流の生理学的マップを取得するステップ;並びに
    前記試料の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記試料の単一の画像へと結合するステップであって、前記試料の前記単一の画像は、前記試料の解剖学及び生理機能を、前記単一の画像中でリアルタイムに表示する、ステップを含む動作を実施させ、
    前記試料の血流及び灌流の前記生理学的マップを取得する前記ステップは:レーザスペックル撮像(laser speckle imaging:LSI);レーザドップラ撮像(laser doppler imaging:LDI);又は蛍光撮像を用いて実行される、
    コンピュータシステム。
  9. 前記プロセッサは更に、780nm〜2500nmの波長の前記生の近赤外線(NIR)画像を取得するステップ、及び/又は400nm〜700nmの波長の前記可視光画像を取得するステップを含む動作を実施する、請求項8に記載のシステム。
  10. 前記画像の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記単一の画像へと結合する前記ステップは、前記生の近赤外線(NIR)画像又は前記可視光画像の少なくとも1つ及び/又は前記生理学的マップの1つ又は複数の特性を調整するステップを含む、請求項8に記載のシステム。
  11. 前記1つ又は複数の特性は、カラー化、透明度及び重み付け関数のうちの少なくとも1つを含む、請求項10に記載のシステム。
  12. 前記結合するステップは更に、以下の等式:
    で表される8ビットRGBカラー画像を生成するステップを含み、
    ここでImg(i,j)は、標的組織/器官の8ビットグレースケール可視画像であり、i及びjはそれぞれ水平方向及び垂直方向に沿った画素インデックスであり、各カラーチャネルに対するImg(i,j)を別個に調整することによって、所望の可視化効果を達成する、請求項10に記載のシステム。
  13. 前記試料は、組織及び器官のうちの1つを含み;
    前記取得された画像は、前記組織及び前記器官のうちの少なくとも1つの血管系の解剖学的構造を含む、請求項8から12のいずれか一項に記載のシステム。
  14. 前記試料を照明するよう構成された少なくとも1つの照明源を更に備え、
    前記少なくとも1つの源からの光の一部分は反射されて、単回のデータ取得中に前記画像及び前記生理学的マップを取得するために使用される、請求項8から12のいずれか一項に記載のシステム。
  15. 前記プロセッサは更に、前記試料の解剖学及び生理機能をリアルタイムに表示するビデオを提供するために、複数の画像を対応する複数の生理学的マップと結合するステップを含む動作を実施する、請求項8から14のいずれか一項に記載のシステム。
  16. 単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体であって、
    前記記録媒体は:
    非一時的コンピュータ可読記憶媒体であって、前記非一時的コンピュータ可読記憶媒体は、前記媒体中で具現化されるコンピュータ可読プログラムコードを有し、前記コンピュータ可読プログラムコードは:
    試料の画像を取得するためのコンピュータ可読プログラムコードであって、前記試料の前記画像は、前記試料の生の近赤外線(NIR)画像又は前記試料の可視光画像のうちの少なくとも1つであり、前記試料の前記画像は、前記試料の解剖学的構造を含む、コンピュータ可読プログラムコード;
    前記試料の血流及び灌流の生理学的マップを取得するためのコンピュータ可読プログラムコード;並びに
    前記画像の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記試料の単一の画像へと結合するためのコンピュータ可読プログラムコードであって、前記試料の前記単一の画像は、前記試料の解剖学的構造及び生理機能を、前記単一の画像中でリアルタイムに表示する、コンピュータ可読プログラムコードを含み、
    前記試料の血流及び灌流の前記生理学的マップを取得するステップは:レーザスペックル撮像(laser speckle imaging:LSI);レーザドップラ撮像(laser doppler imaging:LDI);又は蛍光撮像を用いて実行される、
    非一時的コンピュータ可読記憶媒体
    を備える、記録媒体。
  17. 前記試料の前記画像を取得するためのコンピュータ可読プログラムコードは、780nm〜2500nmの波長の前記生の近赤外線(NIR)画像を取得するステップ、及び/又は400nm〜700nmの波長の前記可視光画像を取得するためのコンピュータ可読プログラムコードを含む、
    請求項16に記載の記録媒体。
  18. 前記画像の前記解剖学的構造と、前記試料の前記生理学的マップとを、前記単一の画像へと結合するための前記コンピュータ可読プログラムコードは、前記近赤外線(NIR)画像又は前記可視光画像及び/又は前記生理学的マップの1つ又は複数の特性を調整するためのコンピュータ可読プログラムコードを含む、請求項17に記載の記録媒体。
  19. 前記1つ又は複数の特性は、カラー化、透明度及び重み付け関数のうちの少なくとも1つを含む、請求項18に記載の記録媒体。
  20. 前記結合するためのコンピュータ可読プログラムコードは更に、以下の等式:
    で表される8ビットRGBカラー画像を生成するためのコンピュータ可読プログラムコードを含み、
    ここでImg(i,j)は、標的組織/器官の8ビットグレースケール可視画像であり、i及びjはそれぞれ水平方向及び垂直方向に沿った画素インデックスであり、各カラーチャネルに対するImg(i,j)を別個に調整することによって、所望の可視化効果を達成する、請求項18に記載の記録媒体。
  21. 前記試料は、組織及び器官のうちの1つを含み;
    前記記録媒体は更に、前記組織及び前記器官のうちの少なくとも1つの血管系の解剖学的構造を含む画像を取得するためのコンピュータ可読プログラムコードを含む、請求項16から20のいずれか一項に記載の記録媒体。
  22. 前記試料は、少なくとも1つの源を用いて照明され、
    前記少なくとも1つの源からの光の一部分は反射され、これにより、単回のデータ取得中に前記画像及び前記生理学的マップが取得される、請求項16から20のいずれか一項に記載の記録媒体。
  23. 前記試料の解剖学及び生理機能をリアルタイムに表示するビデオを提供するために、複数の画像を対応する複数の生理学的マップと結合するためのコンピュータ可読プログラムコードを更に含む、請求項16から22のいずれか一項に記載の記録媒体。
  24. 前記方法は、非侵襲的な方法である、請求項1に記載の方法。
  25. 前記取得された画像は、非侵襲的な画像である、請求項8に記載のコンピュータシステム。
JP2017519923A 2014-10-14 2015-10-13 単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法、コンピュータシステム、及び単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体 Active JP6813245B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201462063673P 2014-10-14 2014-10-14
US62/063,673 2014-10-14
US201562136010P 2015-03-20 2015-03-20
US62/136,010 2015-03-20
PCT/US2015/055251 WO2016061052A1 (en) 2014-10-14 2015-10-13 Methods, systems and computer program products for visualizing anatomical structures and blood flow and perfusion physiology using imaging techniques

Publications (3)

Publication Number Publication Date
JP2017538458A JP2017538458A (ja) 2017-12-28
JP2017538458A5 JP2017538458A5 (ja) 2019-03-28
JP6813245B2 true JP6813245B2 (ja) 2021-01-13

Family

ID=55747200

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017519923A Active JP6813245B2 (ja) 2014-10-14 2015-10-13 単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法、コンピュータシステム、及び単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体

Country Status (6)

Country Link
US (1) US10722173B2 (ja)
EP (1) EP3188651A4 (ja)
JP (1) JP6813245B2 (ja)
CN (1) CN107405094A (ja)
CA (1) CA2963861C (ja)
WO (1) WO2016061052A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11553844B2 (en) 2014-10-14 2023-01-17 East Carolina University Methods, systems and computer program products for calculating MetaKG signals for regions having multiple sets of optical characteristics
WO2016061041A1 (en) 2014-10-14 2016-04-21 East Carolina University Methods, systems and computer program products for determining hemodynamic status parameters using signals derived from multispectral blood flow and perfusion imaging
US10390718B2 (en) 2015-03-20 2019-08-27 East Carolina University Multi-spectral physiologic visualization (MSPV) using laser imaging methods and systems for blood flow and perfusion imaging and quantification in an endoscopic design
US10058256B2 (en) 2015-03-20 2018-08-28 East Carolina University Multi-spectral laser imaging (MSLI) methods and systems for blood flow and perfusion imaging and quantification
JP6866399B2 (ja) * 2016-05-12 2021-04-28 ウィリアム マーシュ ライス ユニバーシティWilliam Marsh Rice University カメラ及びパルスオキシメータを使用した高解像度血液灌流撮像
CN114820494B (zh) * 2017-08-30 2023-08-29 威里利生命科学有限责任公司 用于可视化流动的使用机器学习的散斑对比度分析
CN107713997B (zh) * 2017-11-29 2023-06-30 复旦大学附属中山医院 一种流动血液成像装置
EP3505059A1 (en) * 2017-12-28 2019-07-03 Leica Instruments (Singapore) Pte. Ltd. Apparatus and method for measuring blood flow direction using a fluorophore
US11100631B2 (en) * 2017-12-28 2021-08-24 Cilag Gmbh International Use of laser light and red-green-blue coloration to determine properties of back scattered light
CA3106823A1 (en) 2018-07-19 2020-01-23 Activ Surgical, Inc. Systems and methods for multi-modal sensing of depth in vision systems for automated surgical robots
WO2020081651A1 (en) 2018-10-16 2020-04-23 Activ Surgical, Inc. Autonomous methods and systems for tying surgical knots
EP3952720A4 (en) 2019-04-08 2023-04-05 Activ Surgical, Inc. SYSTEMS AND METHODS FOR MEDICAL IMAGING
CN110141208A (zh) * 2019-04-12 2019-08-20 上海健康医学院 一种动态静态图像相结合的血流成像系统和方法
CN114599263A (zh) 2019-08-21 2022-06-07 艾科缇弗外科公司 用于医疗成像的系统和方法
JP7115458B2 (ja) * 2019-10-30 2022-08-09 カシオ計算機株式会社 電子装置、電子装置の作動方法及び電子装置の制御プログラム
CN112037217B (zh) * 2020-09-09 2021-04-30 南京诺源医疗器械有限公司 一种基于荧光成像的术中血流成像方法

Family Cites Families (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4541433A (en) 1984-06-01 1985-09-17 Medtronic, Inc. Cardiac output monitor
DE69011158T2 (de) 1989-03-06 1995-01-12 Kowa Co Gerät zur Diagnostik in der Augenheilkunde.
JPH02268727A (ja) 1989-04-10 1990-11-02 Kowa Co 眼科測定方法及び装置
EP0392744B1 (en) 1989-04-10 1995-03-01 Kowa Company Ltd. Ophthalmological measurement method and apparatus
JPH0428348A (ja) 1990-05-24 1992-01-30 Hitoshi Fujii 血流状態画像化装置
US6671540B1 (en) 1990-08-10 2003-12-30 Daryl W. Hochman Methods and systems for detecting abnormal tissue using spectroscopic techniques
US5161531A (en) 1990-09-14 1992-11-10 Duke University Method and apparatus for intravascularly measuring oxidative metabolism in body organs and tissues
JP3035336B2 (ja) 1990-11-27 2000-04-24 興和株式会社 血流測定装置
JP3021628B2 (ja) 1990-11-27 2000-03-15 興和株式会社 血流測定装置
MX9702434A (es) 1991-03-07 1998-05-31 Masimo Corp Aparato de procesamiento de señales.
US5490505A (en) 1991-03-07 1996-02-13 Masimo Corporation Signal processing apparatus
US5632272A (en) 1991-03-07 1997-05-27 Masimo Corporation Signal processing apparatus
DE19506484C2 (de) 1995-02-24 1999-09-16 Stiftung Fuer Lasertechnologie Verfahren und Vorrichtung zur selektiven nichtinvasiven Lasermyographie (LMG)
US5860922A (en) 1995-09-07 1999-01-19 Technion Research And Development Foundation Ltd. Determining blood flow by measurement of temperature
US5692510A (en) 1995-09-07 1997-12-02 Technion Research And Development Foundation Ltd. Determining coronary blood flow by cardiac thermography in open chest conditions
US5588436A (en) 1995-10-11 1996-12-31 Cook Pacemaker Corporation Pulsed doppler probe
GB9610700D0 (en) * 1996-05-22 1996-07-31 Moor Instr Ltd Apparatus for imaging microvascular blood flow
JP3417246B2 (ja) * 1996-09-25 2003-06-16 日本電気株式会社 階調表示方法
US6587701B1 (en) 1997-04-03 2003-07-01 Miroslaw F. Stranc Method of assessing tissue viability using near-infrared spectroscopy
JPH10290791A (ja) 1997-04-18 1998-11-04 Advance Co Ltd レーザー血流計
WO2001003050A1 (en) * 1999-07-02 2001-01-11 Hypermed Imaging, Inc. Imaging apparatus with means for fusing thermal and hyperspectral images
US20040111031A1 (en) 1999-07-22 2004-06-10 Alfano Robert R. Spectral polarizing tomographic dermatoscope
US20050182434A1 (en) 2000-08-11 2005-08-18 National Research Council Of Canada Method and apparatus for performing intra-operative angiography
US6915154B1 (en) 1999-09-24 2005-07-05 National Research Council Of Canada Method and apparatus for performing intra-operative angiography
US6701171B2 (en) 2000-03-31 2004-03-02 Københavns Universitet Method and apparatus for non-invasive detection of angiogenic and anti-angiogenic activity in living tissue
US6458086B1 (en) 2000-04-05 2002-10-01 Kenneth Lawrence Franco Implantable blood flow monitoring system
US6889075B2 (en) 2000-05-03 2005-05-03 Rocky Mountain Biosystems, Inc. Optical imaging of subsurface anatomical structures and biomolecules
AU2001286424A1 (en) 2000-08-16 2002-02-25 Cook Vascular Incorporated Doppler probe with shapeable portion
US6537223B1 (en) 2000-09-05 2003-03-25 Medi-Stim As Probe head
US7031504B1 (en) 2000-09-26 2006-04-18 Vital Images, Inc. Image data based retrospective temporal selection of medical images
JP4241038B2 (ja) 2000-10-30 2009-03-18 ザ ジェネラル ホスピタル コーポレーション 組織分析のための光学的な方法及びシステム
DE10059070C1 (de) 2000-11-28 2002-02-14 Pulsion Medical Sys Ag Vorrichtung zur Bestimmung von Gewebeperfusion und intraoperative Verwendung
JP5076203B2 (ja) 2001-06-21 2012-11-21 学校法人日本大学 血管疾患検査装置およびバイパス血管診断装置
US6870684B2 (en) 2001-09-24 2005-03-22 Kulicke & Soffa Investments, Inc. Multi-wavelength aperture and vision system and method using same
EP1300690B1 (en) 2001-10-02 2009-07-29 B-K Medical A/S Apparatus and method for velocity estimation in synthetic aperture imaging
US7113817B1 (en) 2001-10-04 2006-09-26 Wintec, Llc Optical imaging of blood circulation velocities
WO2003032808A2 (en) 2001-10-15 2003-04-24 University Of Massachusetts Tissue oxygen measurement system
CA2413483A1 (en) 2001-12-26 2003-06-26 Kevin R. Forrester Motion measuring device
EP1332718A1 (en) 2002-02-01 2003-08-06 Stichting Voor De Technische Wetenschappen Laser doppler perfusion imaging using a CMOS image sensor
US6922580B2 (en) 2002-06-04 2005-07-26 Koninklijke Philips Electronics N.V. Blood flow gated MRI
CA2390781C (en) 2002-06-14 2009-09-22 Institut National D'optique Line generator optical apparatus
US7404640B2 (en) 2002-06-14 2008-07-29 Physical Sciences, Inc. Monitoring blood flow in the retina using a line-scanning laser ophthalmoscope
JP4521155B2 (ja) 2002-11-27 2010-08-11 オリンパス株式会社 顕微鏡画像処理装置
JP2004321244A (ja) * 2003-04-21 2004-11-18 Olympus Corp 電子内視鏡システム
JP3490433B1 (ja) 2003-06-02 2004-01-26 株式会社サイバーファーム 生体情報監視システム
US8473035B2 (en) * 2003-09-15 2013-06-25 Beth Israel Deaconess Medical Center Medical imaging systems
JP4421259B2 (ja) 2003-10-16 2010-02-24 株式会社ニデック レーザ治療装置
EP1692543A1 (en) * 2003-12-03 2006-08-23 Koninklijke Philips Electronics N.V. Ultrasonic imaging system and method for simultaneous display of blood flow and perfusion parameters
KR100634499B1 (ko) 2004-01-12 2006-10-13 삼성전자주식회사 생체광자 측정을 통한 혈류 측정 장치 및 방법
US7447408B2 (en) 2004-07-02 2008-11-04 The General Hospital Corproation Imaging system and related techniques
US20090036784A1 (en) 2004-08-23 2009-02-05 Robarts Research Institute Determination of hemodynamic parameters
JP4649147B2 (ja) 2004-08-31 2011-03-09 株式会社東芝 超音波診断装置
GB2420641B (en) 2004-11-29 2008-06-04 Medicsight Plc Digital medical image analysis
DE602006013606D1 (de) 2005-02-10 2010-05-27 Koninkl Philips Electronics Nv Optischer blutflussmesser unter verwendung von selbstmisch-dopplereffekt
JP4767551B2 (ja) 2005-02-14 2011-09-07 セイコーインスツル株式会社 血液レオロジー測定装置および血液レオロジー計測方法
EP3095379A1 (en) 2005-04-15 2016-11-23 Surgisense Corporation Surgical instruments with sensors for detecting tissue properties, and systems using such instruments
WO2006111909A1 (en) 2005-04-20 2006-10-26 Cvl Cosmetics S.A. Instrument and method for high-speed perfusion imaging
WO2006116672A2 (en) 2005-04-27 2006-11-02 The Trustees Of Dartmouth College Systems and methods for tomographic image reconstruction
US7232240B2 (en) 2005-05-06 2007-06-19 Northrop Grumann Corporation Extended source laser illuminator
JP2007125144A (ja) 2005-11-02 2007-05-24 Omega Wave Kk レーザー血流画像装置
US20090177098A1 (en) 2006-01-16 2009-07-09 Kousuke Yakubo Examination System and Examination Method
JP4769952B2 (ja) 2006-02-22 2011-09-07 国立大学法人九州工業大学 レーザー光による指先血流測定を利用した個人認証方法及び個人認証装置
EP2023807B1 (en) 2006-06-02 2013-08-14 Cook Medical Technologies LLC Adjustable tension cuff assembly
AU2006203027B2 (en) 2006-07-14 2009-11-19 Canon Kabushiki Kaisha Improved two-dimensional measurement system
US7804984B2 (en) 2006-07-31 2010-09-28 Lumidigm, Inc. Spatial-spectral fingerprint spoof detection
JP4878251B2 (ja) * 2006-09-22 2012-02-15 日立アロカメディカル株式会社 超音波診断装置及び超音波画像表示方法
WO2008053474A2 (en) 2006-10-30 2008-05-08 Elfi-Tech Ltd. System and method for in vivo measurement of biological parameters
JP5092357B2 (ja) 2006-11-07 2012-12-05 ソニー株式会社 撮像表示装置、撮像表示方法
JP2008139543A (ja) 2006-12-01 2008-06-19 Osaka Prefecture Univ 蛍光顕微鏡
US20100056936A1 (en) 2006-12-01 2010-03-04 Hitoshi Fujii Blood flow rate imaging device
WO2008121844A1 (en) 2007-03-30 2008-10-09 The General Hospital Corporation System and method providing intracoronary laser speckle imaging for the detection of vulnerable plaque
WO2008130906A1 (en) 2007-04-17 2008-10-30 Mikos, Ltd. System and method for using three dimensional infrared imaging to provide psychological profiles of individuals
US7541602B2 (en) 2007-06-04 2009-06-02 Or-Nim Medical Ltd. System and method for noninvasively monitoring conditions of a subject
WO2009008745A2 (en) * 2007-07-06 2009-01-15 Industrial Research Limited Laser speckle imaging systems and methods
WO2009007973A1 (en) 2007-07-11 2009-01-15 Technion - Research & Development Foundation Ltd Enhanced smf passive optical networks using polarization beamforming
US20090041201A1 (en) 2007-08-06 2009-02-12 Carestream Health, Inc. Alignment apparatus for imaging system
US8868161B2 (en) 2007-09-13 2014-10-21 Jonathan Thierman Detection and display of measured subsurface data onto a surface
DE102007054906B4 (de) 2007-11-15 2011-07-28 Sirona Dental Systems GmbH, 64625 Verfahren zur optischen Vermessung der dreidimensionalen Geometrie von Objekten
US8406860B2 (en) 2008-01-25 2013-03-26 Novadaq Technologies Inc. Method for evaluating blush in myocardial tissue
CA2654625A1 (en) 2008-02-18 2009-08-18 The Board Of Regents For Oklahoma State University Dual beam optic with dichroic filter
DE102008010006B4 (de) 2008-02-19 2017-06-08 Siemens Healthcare Gmbh Verfahren zur dreidimensionalen Darstellung einer bewegten Struktur durch ein tomographisches Verfahren
RU2506896C2 (ru) 2008-04-14 2014-02-20 Новадак Текнолоджиз Инк. Определение местоположения и анализ перфорированных лоскутов для пластической и восстановительной хирургии
WO2010042253A2 (en) 2008-04-30 2010-04-15 Board Of Regents, The University Of Texas System An apparatus and method for noninvasive evalution of a target versus a non- target
WO2010004365A1 (en) 2008-07-10 2010-01-14 Ecole Polytechnique Federale De Lausanne (Epfl) Functional optical coherent imaging
DE102008040804B4 (de) 2008-07-28 2021-07-29 Carl Zeiss Meditec Ag Verfahren, Operationsmikroskop und Analysesystem zur quantitativen Darstellung des Blutflusses
JP5322548B2 (ja) 2008-09-17 2013-10-23 株式会社東芝 X線ct装置、医用画像処理装置および医用画像処理プログラム
ES2341079B1 (es) * 2008-12-11 2011-07-13 Fundacio Clinic Per A La Recerca Biomedica Equipo para vision mejorada por infrarrojo de estructuras vasculares,aplicable para asistir intervenciones fetoscopicas, laparoscopicas y endoscopicas y proceso de tratamiento de la señal para mejorar dicha vision.
WO2010096447A2 (en) 2009-02-17 2010-08-26 Board Of Regents, The University Of Texas System Quantitative imaging with multi-exposure speckle imaging (mesi)
WO2010096453A1 (en) 2009-02-17 2010-08-26 Board Of Regents, The University Of Texas System Methods of producing laser speckle contrast images
EP2430973B1 (en) 2009-05-13 2014-09-17 Kyushu Institute of Technology Blood flow image diagnosing device
CN102860827B (zh) 2009-09-18 2017-05-17 东芝医疗系统株式会社 磁共振成像装置以及磁共振成像方法
US8357281B2 (en) 2009-09-21 2013-01-22 Advanced Analytical Technologies, Inc. Multi-wavelength fluorescence detection system for multiplexed capillary electrophoresis
GB0921477D0 (en) 2009-12-08 2010-01-20 Moor Instr Ltd Apparatus for measuring blood parameters
JP5689662B2 (ja) 2009-12-09 2015-03-25 株式会社東芝 超音波診断装置、超音波画像処理装置、超音波画像処理プログラム、医用画像診断装置、医用画像処理装置及び医用画像処理プログラム
WO2011084528A1 (en) * 2009-12-15 2011-07-14 Emory University Office Of Technology Transfer System and method for providing real-time anatomical guidance in a diagnostic or therapeutic procedure
US9189851B2 (en) 2010-01-07 2015-11-17 Siemens Aktiengesellschaft Method of motion compensation for trans-catheter aortic valve implantation
JP5564654B2 (ja) 2010-05-31 2014-07-30 岩崎電気株式会社 Led照射装置
US20120078113A1 (en) * 2010-09-28 2012-03-29 Point of Contact, LLC Convergent parameter instrument
WO2012058381A2 (en) 2010-10-27 2012-05-03 The General Hospital Corporation Apparatus, systems and methods for measuring blood pressure within at least one vessel
JP5712573B2 (ja) * 2010-11-26 2015-05-07 花王株式会社 血流画像の形成方法
AU2010257224B2 (en) 2010-12-15 2014-09-18 Canon Kabushiki Kaisha Block patterns as two-dimensional ruler
JP5371946B2 (ja) 2010-12-24 2013-12-18 富士フイルム株式会社 内視鏡診断装置
CA2824134C (en) 2011-01-10 2019-05-14 East Carolina University Methods, systems and computer program products for noninvasive determination of blood flow distribution using speckle imaging techniques and hemodynamic modeling
US9226673B2 (en) 2011-01-10 2016-01-05 East Carolina University Methods, systems and computer program products for non-invasive determination of blood flow distribution using speckle imaging techniques and hemodynamic modeling
US20120191005A1 (en) 2011-01-22 2012-07-26 Emil Naumovich Sobol Diagnostic and Feedback Control for Efficacy and Safety of Laser Application for Tissue Reshaping and Regeneration
WO2012110955A1 (en) 2011-02-14 2012-08-23 Reuven Gladshtein Indications of cross-section of small branched blood vessels
US8780362B2 (en) 2011-05-19 2014-07-15 Covidien Lp Methods utilizing triangulation in metrology systems for in-situ surgical applications
CN103890780B (zh) 2011-09-29 2018-01-02 皇家飞利浦有限公司 失真降低的信号检测
JP5948831B2 (ja) 2011-12-08 2016-07-06 ソニー株式会社 測定装置、測定方法、プログラム及び記録媒体
JP5776006B2 (ja) 2011-12-09 2015-09-09 パナソニックIpマネジメント株式会社 三板カメラ装置
US9848787B2 (en) 2012-02-07 2017-12-26 Laser Associated Sciences, Inc. Perfusion assessment using transmission laser speckle imaging
US9593982B2 (en) 2012-05-21 2017-03-14 Digimarc Corporation Sensor-synchronized spectrally-structured-light imaging
JP2014000246A (ja) 2012-06-19 2014-01-09 Mitsubishi Electric Engineering Co Ltd 血管可視化装置および血管可視化方法
CA2914778A1 (en) 2012-06-21 2013-12-27 Novadaq Technologies Inc. Quantification and analysis of angiography and perfusion
US9298730B2 (en) 2012-07-04 2016-03-29 International Medical Solutions, Inc. System and method for viewing medical images
WO2014009859A2 (en) * 2012-07-10 2014-01-16 Aïmago S.A. Perfusion assessment multi-modality optical medical device
US9640218B2 (en) 2012-12-07 2017-05-02 Intel Corporation Physiological cue processing
US9351643B2 (en) 2013-03-12 2016-05-31 Covidien Lp Systems and methods for optical measurement for in-situ surgical applications
CN105228518B (zh) * 2013-03-12 2018-10-09 火山公司 用于诊断冠状微脉管疾病的系统和方法
US9435993B2 (en) 2013-03-24 2016-09-06 Bruker Nano, Inc. Three dimensional microscopy imaging
JP6062793B2 (ja) 2013-04-23 2017-01-18 ソフトケア有限会社 血流画像診断装置
CN103340601A (zh) * 2013-06-27 2013-10-09 中国科学院自动化研究所 基于内窥镜的多光谱成像系统和方法
CN103417196B (zh) 2013-08-23 2015-07-22 中山大学 一种静脉显影仪及显影方法
US9451223B2 (en) 2013-09-17 2016-09-20 PhotonEdge Inc. Simultaneous multiplexed imaging system and method
US20150148632A1 (en) 2013-11-26 2015-05-28 David Alan Benaron Calorie Monitoring Sensor And Method For Cell Phones, Smart Watches, Occupancy Sensors, And Wearables
US10004410B2 (en) 2013-12-19 2018-06-26 The Board Of Trustees Of The University Of Illinois System and methods for measuring physiological parameters
US9918666B2 (en) 2014-01-13 2018-03-20 The Board Of Regents, The University Of Texas System Systems and methods for physiological signal enhancement and biometric extraction using non-invasive optical sensors
DE102014002514B4 (de) 2014-02-21 2015-10-29 Universität Stuttgart Vorrichtung und Verfahren zur multi- oder hyperspektralen Bildgebung und / oder zur Distanz- und / oder 2-D oder 3-D Profilmessung eines Objekts mittels Spektrometrie
US10791982B2 (en) 2014-05-02 2020-10-06 Stephanie Littell Methods of measuring head, neck, and brain function and predicting and diagnosing memory impairment
JP2015223463A (ja) 2014-05-30 2015-12-14 ソニー株式会社 照明装置、照明方法及び内視鏡
US9980657B2 (en) 2014-05-30 2018-05-29 Microsoft Technology Licensing, Llc Data recovery for optical heart rate sensors
WO2016061041A1 (en) 2014-10-14 2016-04-21 East Carolina University Methods, systems and computer program products for determining hemodynamic status parameters using signals derived from multispectral blood flow and perfusion imaging
US9931040B2 (en) 2015-01-14 2018-04-03 Verily Life Sciences Llc Applications of hyperspectral laser speckle imaging
US10058256B2 (en) 2015-03-20 2018-08-28 East Carolina University Multi-spectral laser imaging (MSLI) methods and systems for blood flow and perfusion imaging and quantification
CN106236060B (zh) 2015-06-04 2021-04-09 松下知识产权经营株式会社 生物体信息检测装置
KR102491850B1 (ko) 2015-07-15 2023-01-26 삼성전자주식회사 레이저 스펙클 대조도 이미징 시스템 및 방법, 이를 적용한 장치
JP6273241B2 (ja) 2015-09-24 2018-01-31 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 放射線断層撮影方法及び装置並びにプログラム
CN108289590A (zh) 2015-11-17 2018-07-17 奥林巴斯株式会社 内窥镜系统、图像处理装置、图像处理方法和程序
US10115037B2 (en) 2016-03-21 2018-10-30 Konica Minolta Laboratory U.S.A., Inc. Patient identification using dynamic medical images
CN116269261A (zh) 2016-12-01 2023-06-23 松下知识产权经营株式会社 生物体信息处理方法及生物体信息处理系统

Also Published As

Publication number Publication date
US20170224274A1 (en) 2017-08-10
CA2963861C (en) 2023-10-03
CA2963861A1 (en) 2016-04-21
EP3188651A1 (en) 2017-07-12
US10722173B2 (en) 2020-07-28
EP3188651A4 (en) 2018-07-04
CN107405094A (zh) 2017-11-28
JP2017538458A (ja) 2017-12-28
WO2016061052A1 (en) 2016-04-21

Similar Documents

Publication Publication Date Title
JP6813245B2 (ja) 単一の画像上で解剖学的データと生理学的データとを結合するためのシステムの作動方法、コンピュータシステム、及び単一の画像上で解剖学的データと生理学的データとを結合するためのプログラムが記録された記録媒体
JP6830454B2 (ja) 血流及び灌流の画像化及び定量化を行うマルチスペクトルレーザ画像化(msli)方法及びシステム
JP6535717B2 (ja) 形成外科手術のための穿通枝皮弁の位置確認及び分析
JP6577877B2 (ja) 組織灌流を評価するための方法及びシステム
CA2909914C (en) Optical coherent imaging medical device
US11202589B2 (en) System and method for assessment of retinal and choroidal blood flow noninvasively using color amplification
JP2023088989A (ja) 内視鏡設計における血流および灌流撮像および定量化のためのレーザ撮像方法およびシステムを用いたマルチスペクトル生理機能視覚化(mspv)
CN105962881A (zh) 一种血管识别方法及设备
JP6564075B2 (ja) 医用画像を表示するための伝達関数の選択
US20220222840A1 (en) Control device, image processing method, and storage medium
KR20150037497A (ko) 대상체의 3차원 영상을 생성하기 위한 방법 및 장치
JP2002143140A (ja) 画像表示装置
JP2023178526A (ja) 画像処理装置、内視鏡システム、画像処理装置の作動方法、及び画像処理装置用プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180920

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190215

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190709

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200603

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201125

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201215

R150 Certificate of patent or registration of utility model

Ref document number: 6813245

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250