JP6645591B2 - 蛍光イメージング装置および蛍光イメージングシステム - Google Patents

蛍光イメージング装置および蛍光イメージングシステム Download PDF

Info

Publication number
JP6645591B2
JP6645591B2 JP2018561139A JP2018561139A JP6645591B2 JP 6645591 B2 JP6645591 B2 JP 6645591B2 JP 2018561139 A JP2018561139 A JP 2018561139A JP 2018561139 A JP2018561139 A JP 2018561139A JP 6645591 B2 JP6645591 B2 JP 6645591B2
Authority
JP
Japan
Prior art keywords
image
fluorescence
timing
unit
fluorescence imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018561139A
Other languages
English (en)
Other versions
JPWO2018131096A1 (ja
Inventor
石川　亮宏
亮宏 石川
博之 北本
博之 北本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimadzu Corp
Original Assignee
Shimadzu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimadzu Corp filed Critical Shimadzu Corp
Publication of JPWO2018131096A1 publication Critical patent/JPWO2018131096A1/ja
Application granted granted Critical
Publication of JP6645591B2 publication Critical patent/JP6645591B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00—Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4887—Locating particular structures in or on the body
    • A61B5/489—Blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/304—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using chemi-luminescent materials
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2505/00—Evaluating, monitoring or diagnosing in the context of a particular type of medical care
    • A61B2505/05—Surgical care
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64—Fluorescence; Phosphorescence
    • G01N21/645—Specially adapted constructive features of fluorimeters
    • G01N21/6456—Spatial resolved fluorescence measurements; Imaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10064—Fluorescence image

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Dermatology (AREA)
  • Vascular Medicine (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
  • Endoscopes (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)

Description

この発明は、蛍光イメージング装置に関し、特に、被検体内に蛍光物質を投与し、励起光を照射することにより発生した蛍光の画像を取得する蛍光イメージング装置および蛍光イメージングシステムに関する。
従来、被検体内に蛍光物質を投与し、励起光を照射することにより発生した蛍光の画像を取得する蛍光イメージング装置が知られている。このような蛍光イメージング装置は、たとえば、特開２０１６−１３５２５３号公報に開示されている。
上記特開２０１６−１３５２５３号公報に開示されている蛍光イメージング装置は、蛍光物質を被検体内に投与し、励起光を照射することにより発生した蛍光を検出し、蛍光の輝度の上昇から下降までの蛍光画像を取得する。そして、取得された蛍光画像に対して、蛍光強度や蛍光の検出時間等の指標に基づいて画像処理を行った蛍光画像を生成するように構成されている。
このような蛍光イメージング装置は、術中支援装置の一部として用いられ、手術中に録画された蛍光の画像を表示装置等に再生させることにより、手術中の関心領域（患部など）の特定や状態の確認などが行われる。他にも、上記蛍光イメージング装置は、録画した蛍光画像を確認することにより、手足の血管等の診断に用いられる。
特開２０１６−１３５２５３号公報
しかしながら、上記特開２０１６−１３５２５３号公報に開示されている蛍光イメージング装置では、蛍光物質を投与後、蛍光画像の輝度の上昇、ピーク（輝度の最大値）、下降までの期間全体に渡る蛍光画像を取得するため、関心領域の蛍光強度が最も強い部分などのユーザが確認したい部分の画像を検索するのに時間がかかり、かつ、特徴的な輝度の変化等を確認することが難しいとともに、録画機等に保存する際に、保存する画像のデータ量が大きくなるなどの問題点がある。なお、本明細書において、「関心領域」とは、蛍光画像のうち、たとえば、腫瘍などの観察したい領域のことである。
この発明は、上記のような課題を解決するためになされたものであり、この発明の１つの目的は、蛍光画像のうち、ユーザが確認したい部分を再生するための検索にかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画機等に保存する画像のデータ量を抑制することができる蛍光イメージング装置および蛍光イメージングシステムを提供することである。
上記目的を達成するために、この発明の第１の局面における蛍光イメージング装置は、被検体内に投与された蛍光物質に励起光を照射することにより発生した蛍光の画像を取得する画像取得部と、画像取得部で取得された蛍光の画像のうち、蛍光の画像を抽出する所定のタイミングを含む所定時間範囲の蛍光の画像を抽出する抽出部とを備える。
この発明の第１の局面による蛍光イメージング装置では、上記のように、蛍光の画像を取得する画像取得部と、所定のタイミングを含む所定時間範囲の蛍光の画像を抽出する抽出部とを備える。これにより、たとえば、蛍光強度が最大値近傍となるタイミングなど、ユーザが必要とする所定のタイミングを含む所定時間範囲の蛍光画像を抽出することができるので、関心領域の蛍光強度が最も強い部分などのユーザが確認したい部分の画像を抽出することができる。また、抽出する範囲を必要十分な時間範囲に限定すれば、蛍光画像のデータ量を減少させることができる。その結果、被検体内に蛍光物質を投与し、励起光を照射することにより発生した蛍光の上昇から下降までの期間全体にわたって撮影した画像を再生して観察する場合と比べ、ユーザが確認したい部分を再生するための検索にかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画機等に保存する画像のデータ量を抑制することができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、蛍光の画像を抽出する所定のタイミングを検出するタイミング検出手段をさらに備え、抽出部は、タイミング検出手段により検出された蛍光の画像を抽出するタイミングを含む所定時間範囲の蛍光の画像を抽出するように構成されている。このように構成すれば、抽出部は、たとえば、ユーザの操作や蛍光の画像の信号強度によってタイミング検出手段が検出した蛍光の画像を抽出するタイミングに基づいて、蛍光の画像を抽出する所定時間範囲を決定することができるので、所定時間範囲の蛍光画像を容易に抽出することができる。
この場合、好ましくは、タイミング検出手段は、蛍光の信号強度に基づいて、蛍光の画像を抽出するタイミングを検出するように構成されている。このように構成すれば、たとえば、蛍光の強度信号が所定の値になったタイミングや、蛍光の信号強度の変化量が増加から減少に転じたタイミングなどを蛍光の画像を抽出するタイミングとして検出することができるので、視認性の高い蛍光の画像を抽出するタイミングを自動で決定することができる。
さらに好ましくは、タイミング検出手段は、蛍光の信号強度に基づいて、信号強度が最大値となるタイミングになったことを検出するように構成されている。このように構成すれば、関心領域の蛍光の信号強度が最も大きいタイミングを含む所定時間範囲の蛍光画像を取得できるので、視認性の高い蛍光画像を確実に抽出することができる。
上記蛍光の信号強度に基づいて、蛍光の画像を抽出するタイミングを検出する構成において、好ましくは、タイミング検出手段は、蛍光の信号強度に基づいて、蛍光の信号強度が閾値以上になるタイミングを検出するように構成されている。このように構成すれば、蛍光の信号強度が一定値以上の範囲の蛍光画像を抽出することができるので、蛍光画像の視認性が低い部分を抽出することを回避して、不必要なデータ量の増大を抑制することができる。
上記タイミング検出手段により検出された蛍光の画像を抽出するタイミングを含む所定時間範囲の蛍光の画像を抽出する構成において、好ましくは、タイミング検出手段は、ユーザの操作入力に基づいて、蛍光の画像を抽出するタイミングを検出するように構成されている。このように構成すれば、蛍光の信号強度に関わらず、蛍光画像を取得するタイミングを検出することができるので、ユーザの意図を反映して、ユーザが取得したいタイミングの蛍光画像を確実に取得することができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、抽出部は、蛍光の画像を抽出するタイミングを中心として、蛍光の画像を抽出するタイミングより前の第１時間から蛍光の画像を抽出するタイミングより後の第２時間までの所定時間範囲の蛍光の画像を抽出するように構成されている。このように構成すれば、抽出するタイミングの前後の経過を含めて抽出することができるので、ユーザにとっての利便性を向上させることができる。また、抽出するタイミングから前後異なった時間範囲を抽出することができるので、抽出する蛍光画像の範囲を被検体や蛍光物質の代謝に応じて変更することができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、画像取得部は、励起光を照射する第１光源部と、蛍光を検出する第１検出部とを備えている。このように構成すれば、励起光を照射する光源部と、蛍光を検出する検出部とを個別に設ける場合と比較して、容易に蛍光の画像を取得することができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、画像取得部は、可視光の画像を取得するように構成され、抽出部によって抽出された蛍光の画像と、被検体により反射され、抽出部によって抽出された可視光の画像とを重ね合わせた再生用画像を生成する画像合成部をさらに備える。このように構成すれば、可視光の画像に関心領域の蛍光画像を合成した画像を取得することができるので、外観を表す可視光の画像における被検体内の関心領域を透視するようなイメージをユーザに視認させることができる。その結果、ユーザの利便性を向上させることができる。
この場合、好ましくは、画像取得部は、可視光を照射する第２光源部と、被検体により反射された可視光を検出する第２検出部とをさらに備える。このように構成すれば、蛍光の画像を取得する装置と、可視光の画像を取得する装置とを個別に備える場合と比較して、被検体の同一部位の蛍光の画像および可視光の画像を容易に取得することができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、所定時間範囲に相当する時間の画像取得部によって取得された画像を一時的に保存する一時保存部をさらに備える。このように構成すれば、期間全体ではなく、抽出部で抽出するために所定時間範囲に相当する時間分の取得された画像を一時保存部に保存することができるので、一時保存部の保存容量の大きさを必要最低限の大きさにすることができる。
上記第１の局面による蛍光イメージング装置では、好ましくは、抽出部によって抽出された画像および抽出部によって抽出された画像から生成された画像を録画する録画部をさらに備える。このように構成すれば、抽出部によって抽出された画像および抽出された画像から生成された画像を録画する際に、外部の録画機器を使用する必要がなくなるので、蛍光イメージング装置の利便性を向上させることができる。
この発明の第２の局面による蛍光イメージングシステムは、上記第１の局面における蛍光イメージング装置と、蛍光イメージング装置によって作成された再生用画像を録画する録画装置と、再生用画像を表示する表示装置とを備える。
この発明の第２の局面における蛍光イメージングシステムでは、上記のように、上記第１の局面における蛍光イメージング装置と、再生用画像を録画する録画装置と、再生用画像を表示する表示装置とを備える。これにより、たとえば、蛍光強度が最大値近傍となるタイミングなど、ユーザが必要とする所定のタイミングを含む所定時間範囲の再生用画像を抽出することができるので、関心領域の蛍光強度が最も強い部分などのユーザが確認したい部分の再生用画像を抽出することができる。また、抽出する範囲を必要十分な時間範囲に限定すれば、再生用画像のデータ量を減少させることができる。その結果、蛍光物質を投与し、蛍光の上昇から下降までの期間全体にわたって撮影した画像を再生して観察する場合と比べ、ユーザが確認したい部分を再生するための検索にかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画機等に保存する画像のデータ量を抑制することができる。また、表示装置を備えているので、再生用画像を録画しながら表示することが可能となる。
本発明によれば、上記のように、蛍光画像のうち、ユーザが確認したい部分を再生するための検索にかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画機等に保存する画像のデータ量を抑制することができる蛍光イメージング装置および蛍光イメージングシステムを提供することができる。
本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの表示部に表示される画像について説明するための図である。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの全体構成の模式図である。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの蛍光物質が蛍光を発生させる状態を示す図（断面図）である。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの表示部に表示される画像を具体的に示した図である。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの蛍光画像を抽出する範囲を説明するグラフである。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの蛍光画像を抽出する範囲の始点および蛍光の信号強度の最大値の決定方法を説明するグラフである。 本発明の第１実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの蛍光画像を抽出する範囲の終点の決定方法を説明するグラフである。 本発明の第２実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの蛍光画像を抽出する範囲を説明するグラフである。 本発明の第３実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第４実施形態による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第１実施形態の第１変形例による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第１実施形態の第２変形例による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第１実施形態の第３変形例による蛍光イメージング装置を備えた蛍光イメージングシステムの概略を示したブロック図である。 本発明の第１実施形態の第４変形例による蛍光イメージング装置を備えた蛍光イメージングシステムの表示部に表示される画像を具体的に示した図である。
以下、本発明を具体化した実施形態を図面に基づいて説明する。
［第１実施形態］
まず、図１〜図７を参照して、第１実施形態による蛍光イメージング装置１００を備えた蛍光イメージングシステム２００の構成について説明する。また、第１実施形態では、蛍光イメージングシステム２００は、たとえば、外科手術において、血管造影やリンパ管造影のために用いられる医療用イメージング装置である。また、蛍光イメージング装置１００は、手術中において、使用される術中支援装置（術中支援システム）の一部として用いられる。
たとえば、蛍光イメージングシステム２００は、乳癌センチネルリンパ節の手術において、造影された被検体Ｐ（患者）の血管やリンパ管およびリンパ節の位置や形状を、執刀医Ｑ（図３参照）等のユーザが確認するために用いられる。
（蛍光イメージングシステムの構成）
第１実施形態による蛍光イメージングシステム２００は、図１に示すように、蛍光イメージング装置１００と、表示部１２と、録画部１３と、操作部２０とを備えている。蛍光イメージング装置１００は、被検体Ｐの蛍光の画像および可視光の画像を抽出し、抽出された可視光の画像と可視光の画像とを合成した画像を出力するように構成されている。蛍光イメージング装置１００の詳しい構成は後述する。なお、表示部１２および録画部１３は、特許請求の範囲の「表示装置」および「録画装置」の一例である。
また、図２に示すように、表示部１２は、蛍光イメージング装置１００から出力された蛍光の画像１２ａ、可視光の画像１２ｂ、および、合成画像１２ｃを表示する。
また、録画部１３は、記憶素子やＨＤＤのような記憶装置を含み、蛍光イメージング装置１００から出力される画像を録画するように構成されている。
また、操作部２０は、執刀医Ｑや、蛍光イメージングシステム２００のオペレータ等のユーザによる蛍光イメージング装置１００に対する入力操作を受け付けるように構成されている。そして、操作部２０は、入力操作に基づいて、光源部１からの光の照射、照射の停止、明るさおよび感度の調整、表示部１２に表示される画像の表示方法などを操作するように構成されている。
（蛍光イメージング装置の構成）
第１実施形態による蛍光イメージング装置１００は、図１に示すように、画像取得部１４を備えている。
画像取得部１４は、被検体Ｐの画像を取得するように構成されている。画像取得部１４としては、最低限の構成として、光源部１と、可視光センサ５および近赤外線センサ６等の検出部とを備えていればよく、第１実施形態では、画像取得部１４は、光源部１と、ズームレンズ３と、プリズム４と、可視光センサ５と、近赤外線センサ６とを備えており、画像取得部１４自らが画像を撮像するように構成されている。ズームレンズ３およびプリズム４は、光学系部材として光源部１と可視光センサ５および近赤外線センサ６との間に設けられており、ズームレンズ３は、光源部１とプリズム４との間に設置され、プリズム４は、ズームレンズ３と可視光センサ５および近赤外線センサ６との間に設置されている。
光源部１は、たとえば、発光ダイオード（ＬＥＤ）を含む。光源部１は、可視光を被検体Ｐ（患者）に照射する可視光源部１ａと、被検体Ｐの体内の蛍光剤Ｐａ（図４参照）に近赤外線励起光（以下、「励起光ＩＲｅ」）を照射する励起光源部１ｂとを備えている。なお、可視光源部１ａは、特許請求の範囲の「第２光源部」の一例である。また、励起光源部１ｂは、特許請求の範囲の「第１光源部」の一例である。また、蛍光剤Ｐａは、特許請求の範囲の「被検体内に投与された蛍光物質」の一例である。また、本明細書において、「近赤外線」とは、可視光線よりも長い波長を有する光を意味し、たとえば、７００ｎｍ以上９００ｎｍ以下の範囲内の波長を有する光を意味するものとして記載している。
蛍光剤Ｐａは、たとえば、蛍光色素であるインドシアニングリーン（ＩＣＧ）からなる。インドシアニングリーン（ＩＣＧ）を蛍光剤Ｐａとして用いる場合、励起光ＩＲｅは、たとえば、８００ｎｍ以上８２０ｎｍ以下の波長を有する近赤外光である。そして、励起光ＩＲｅが、インドシアニングリーンに照射されることにより、インドシアニングリーンから約８３０ｎｍの波長を有する近赤外蛍光ＩＲが発生される。また、可視光源部１ａから照射された可視光は、反射光として被検体Ｐの皮膚表面から反射される。
また、光源部１は、蛍光イメージング装置１００の照射制御部２により制御される。照射制御部２は、制御回路として構成されており、光源部１からの光（可視光、励起光ＩＲｅ）の照射、照射の停止などを、操作部２０による入力操作に基づいて制御するように構成されている。
また、ズームレンズ３には、被検体Ｐの皮膚表面からの反射光（可視光）と、蛍光剤Ｐａから発生された近赤外蛍光ＩＲとが入射する。また、ズームレンズ３は、可視光および近赤外蛍光ＩＲの焦点距離の調整を行う。
また、プリズム４には、ズームレンズ３からの光が入射する。また、プリズム４は、被検体Ｐの皮膚表面からの反射光（可視光）と、近赤外蛍光ＩＲとを分離する機能を有する。
また、画像取得部１４は、プリズム４により分離された可視光を検出する可視光センサ５を備えている。可視光センサ５は、たとえば、電荷結合素子（ＣＣＤ）またはＣＭＯＳ等により構成されている。なお、可視光センサ５は、特許請求の範囲の「第２検出部」の一例である。
また、画像取得部１４は、励起光源部１ｂから照射される励起光ＩＲｅにより発生された近赤外蛍光ＩＲを検出する近赤外線センサ６を備えている。近赤外線センサ６は、たとえば、８２０ｎｍ以上８４０ｎｍ以下の範囲内の波長を有する近赤外線を検出可能に構成されている。近赤外線センサ６は、たとえば、ＣＣＤまたは光電子増倍管により構成されている。なお、近赤外線センサ６は、特許請求の範囲の「第１検出部」の一例である。
このような構成により、画像取得部１４は、被検体Ｐの同一の撮影位置を可視光と励起光ＩＲｅとを用いて、同時に撮影することができる。
また、蛍光イメージング装置１００は、タイミング検出手段７を備えている。タイミング検出手段７は、近赤外線センサ６によって取得された被検体Ｐの蛍光の画像（図５（Ａ）参照）を抽出部９によって抽出するタイミングを検出する。タイミング検出方法に関しては後述する。
また、蛍光イメージング装置１００は、一時保存部８を備えている。一時保存部８は記憶素子やＨＤＤのような記憶装置を含み、所定時間範囲Ｒに相当する時間の画像取得部１４によって取得された被検体Ｐの蛍光の画像１２ａを一時的に保存する。
また、蛍光イメージング装置１００は、抽出部９を備えている。抽出部９は、被検体Ｐ内に投与された蛍光剤Ｐａに励起光ＩＲｅを照射することにより発生した蛍光の画像１２ａのうち、蛍光の画像１２ａを抽出する所定のタイミングを含む所定時間範囲Ｒの蛍光の画像１２ａを抽出する。
可視光センサ５および近赤外線センサ６で検出された画像データは、タイミング検出手段７に送られ、抽出部９によって抽出するタイミングを検出される。タイミング検出手段７は、検出した抽出タイミングを抽出部９に送るとともに、画像データを一時保存部８に送る。タイミング検出手段７から一時保存部８に送られた画像データは、一時保存部８によって一時的に保存される。抽出部９は、タイミング検出手段７によって送られた画像を抽出するタイミングに基づいて、一時保存部８に保存されている画像データを抽出する。
なお、タイミング検出手段７、一時保存部８、抽出部９および画像合成部１０は、それぞれ、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やメモリ、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などで個別に構成されていてもよく、タイミング検出手段７と抽出部９とが１つのＣＰＵにソフトウェアとして構成されていてもよい。
また、蛍光イメージング装置１００は、画像合成部１０を備えている。ここで、第１実施形態では、図２に示すように、画像合成部１０は、近赤外蛍光ＩＲの信号強度に応じて可視光の画像１２ｂとは区別可能な色彩（たとえば、緑色）を用いて表示された蛍光の画像１２ａと、可視光を画像化した可視光の画像１２ｂとを合成して合成画像１２ｃを形成するように構成されている。具体的には、画像合成部１０は、抽出部９によって抽出された蛍光の画像１２ａと、被検体Ｐにより反射され、抽出部９によって抽出された可視光の画像１２ｂとを重ね合わせた合成画像１２ｃを生成するように合成されている。なお、画像合成部１０は、たとえば、画像処理回路として構成されている。また、合成画像１２ｃは、特許請求の範囲の「再生用画像」の一例である。
また、蛍光イメージング装置１００は、外部出力部１１を備えている。外部出力部１１は、抽出部９で抽出された蛍光の画像１２ａおよび可視光の画像１２ｂと、画像合成部１０で合成された合成画像１２ｃとを、蛍光イメージング装置１００の外部に設けられた表示部１２と、録画部１３とに出力するように構成されている。
また、図３に示すように、蛍光イメージング装置１００は、可視光源部１ａ、励起光源部１ｂ、可視光センサ５、および、近赤外線センサ６などが設けられる装置本体部３０を備えている。なお、可視光源部１ａ、励起光源部１ｂ、可視光センサ５、および、近赤外線センサ６などは、画像取得部１４内に配置されている。また、装置本体部３０には、アーム部３１が設けられている。画像取得部１４は、アーム部３１の先端に取り付けられており、画像取得部１４は、移動可能に構成されている。
また、表示部１２は、装置本体部３０とは別個に設けられている。たとえば、表示部１２は、執刀医Ｑ（ユーザ）の対面方向（矢印Ａ１方向側）に配置されているとともに、執刀医Ｑが被検体Ｐ（患者）に対して、処置を行う際に、表示部１２に表示される画像を視認可能な高さ位置に配置されている。
そして、図４に示すように、画像取得部１４内に設けられている励起光源部１ｂが照射された励起光ＩＲｅによって、被検体Ｐの内部の蛍光剤Ｐａは、近赤外蛍光ＩＲを発生させる。そして、画像取得部１４内に設けられている近赤外線センサ６は、被検体Ｐの内部の蛍光剤Ｐａから発生する近赤外蛍光ＩＲを検出するように構成されている。
図５は、表示部１２に表示される画像のイメージ図である。ここで、がん細胞は、増殖するために多数の血管を新生（形成）する。そのため、がん細胞の近傍には多数の血管が存在するので、がん細胞の近傍は蛍光剤Ｐａで標識された領域として観察できる。図５（Ａ）は、被検体Ｐの蛍光の画像１２ａを示しており、関心領域４０ａが蛍光剤Ｐａによって標識されている。また、図５（Ｂ）は、被検体Ｐの蛍光の画像１２ａと同一部位の可視光の画像１２ｂである。また、図５（Ｃ）は、蛍光の画像１２ａと可視光の画像１２ｂとを合成した合成画像１２ｃである。また、第１実施形態による蛍光イメージング装置１００では、操作部２０を介して、これらの画像の配置を変更することができる。
次に、図６〜図８を参照して、蛍光イメージング装置１００の画像抽出処理について具体的に説明する。
図６は、蛍光の画像１２ａの関心領域４０ａの蛍光の信号強度の時間変化を示すグラフ５０である。グラフ５０は、横軸が時間であり、縦軸が検出される蛍光の信号強度である。
第１実施形態による蛍光イメージング装置１００では、抽出部９は、タイミング検出手段７により検出された蛍光の画像１２ａを抽出するタイミングを含む所定時間範囲Ｒの蛍光の画像１２ａを抽出するように構成されている。具体的には、抽出部９は、蛍光の画像１２ａを抽出するタイミングを中心として、蛍光の画像１２ａを抽出するタイミングより前の所定時間Ｍから蛍光の画像１２ａを抽出するタイミングより後の所定時間Ｎまでの所定時間範囲Ｒの蛍光の画像１２ａを抽出するように構成されている。また、所定時間ＭおよびＮは、ユーザ（執刀医Ｑ等）によって任意に設定可能である。たとえば、所定時間ＭおよびＮは、トータルで１分以内の範囲で設定可能である。なお、所定時間ＭおよびＮは、特許請求の範囲の「第１時間」および「第２時間」の一例である。
また、タイミング検出手段７は、蛍光の画像１２ａの蛍光の信号強度に基づいて、蛍光の画像１２ａを抽出するタイミングを検出するように構成されている。第１実施形態では、タイミング検出手段７は、蛍光の信号強度に基づいて、信号強度が最大値となるタイミングになったことを検出するように構成されている。
まず、図６および図７を参照して、蛍光の信号強度の最大値の決定方法について説明する。タイミング検出手段７は、蛍光の画像１２ａの関心領域４０ａの信号強度が最大値Ｉｔｍａｘになる時間ｔｍａｘを検出するように構成されている。具体的には、タイミング検出手段７は、近赤外線センサ６によって撮影された動画から、１フレームずつ画像を切り出し、切り出したフレームごとの画像の蛍光の信号強度を比較することによって最大値と最大時間とを検出するように構成されている。すなわち、蛍光の画像１２ａを１フレーム切り出すごとに、それまでの蛍光の信号強度の最大値と、切り出した蛍光の画像１２ａの蛍光の信号強度とを比較し、大きい方を最大値とする。また、蛍光の信号強度が最大値となる時間をｔｍａｘとする。ここで、近赤外線センサ６は、高精細なハイビジョン画質（たとえば、解像度１０８０ｐ（約２．１メガピクセル）、６０ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ））の動画を撮影する。
図７（Ａ）は、検出開始からｔ１秒経過時点の蛍光の信号強度の変化を示すグラフ５０ａである。この時点では、ｔ１秒で検出されている蛍光の信号強度Ｉｔ１が最も大きい値となっているので、蛍光の信号強度の最大値はＩｔ１となる。また、光の信号強度が最大値となる画像の取得時間は、ｔ１となる。
図７（Ｂ）は、検出開始からｔ２秒経過時点の蛍光の信号強度の変化を示すグラフ５０ｂである。この時点では、ｔ２秒で検出されている蛍光の信号強度Ｉｔ２が最も大きい値となっているので、蛍光の信号強度の最大値はＩｔ２となる。また、光の信号強度が最大値となる画像の取得時間は、ｔ２となる。
図７（Ｃ）は、検出開始からｔ３秒経過時点の蛍光の信号強度の変化を示すグラフ５０ｃである。この時点では、ｔ３秒で検出されている蛍光の信号強度Ｉｔ３が最も大きい値となっているので、蛍光の信号強度の最大値はＩｔ３（Ｉｔｍａｘ）となる。また、光の信号強度が最大値の画像の取得時間は、ｔ３（ｔｍａｘ）となる。
図７（Ｄ）は、検出開始からｔ４経過時点の蛍光の信号強度の変化を示すグラフ５０ｄである。この時点では、ｔ４秒で検出されている蛍光の信号強度Ｉｔ４よりも、ｔｍａｘ秒の時点で検出されたＩｔｍａｘの検出強度の方が大きいため、蛍光の信号強度の最大値はＩｔｍａｘとなる。また、光の信号強度が最大値の画像の取得時間は、ｔｍａｘ（ｔ３）となる。その後、蛍光の信号強度が図６のように推移すると、ｔ３がｔｍａｘとして確定できる。そして、タイミング検出手段７は、ｔｍａｘを抽出部９に出力する。
次に、図６〜図８を参照して、抽出部９が抽出する所定時間範囲Ｒの決定方法について説明する。抽出部９は、タイミング検出手段７が検出したタイミング（ｔｍａｘ）を中心として、ｔｍａｘから所定時間Ｍ秒前のｔｍと、ｔｍａｘから所定時間Ｎ秒後のｔｎとによって決定される、所定時間範囲Ｒの蛍光の画像１２ａを取得するように構成されている。
まず、図７（Ａ）〜図７（Ｄ）を参照して、ｔｍａｘから所定時間Ｍ秒前のｔｍの決定方法について説明する。図７（Ａ）に示すグラフ５０ａは、検出開始からの時間ｔ１が、所定時間Ｍよりも小さい場合を示すグラフである。ｔ１が所定時間Ｍ以下なので、ｔｍは検出開始時間となる。
また、図７（Ｂ）は、検出時間ｔ２まで検出が進んだ状態を表すグラフ５０ｂである。具体的には、ｔ２は所定時間Ｍおよびｔ１よりも大きく、ｔｍａｘよりも小さい状態を示している。したがって、ｔｍは、ｔ２から所定時間Ｍ秒前の時間となる。
また、図７（Ｃ）は、蛍光の信号強度が最大値になる時間ｔ３まで検出が進んだ状態を表すグラフ５０ｃである。蛍光の信号強度が最大値になる時間なので、ｔ３とｔｍａｘが等しくなる。したがって、ｔｍは、ｔ３から所定時間Ｍ秒前の時間となる。
また、図７（Ｄ）は、蛍光の信号強が最大値を過ぎ、下降し始めた時間ｔ４まで検出が進んだ状態を表すグラフ５０ｄである。ｔｍは、蛍光の信号強度が最大値となる時間（ｔｍａｘ）から所定時間Ｍ秒前の時間なので、ｔｍはｔｍａｘからＭ秒前の時間となる。
したがって、ｔｍは、検出時間に応じて変更され、蛍光の信号強度が最大値となる時間（ｔｍａｘ）が決定された後は、ｔｍａｘから所定時間Ｍ秒前の時間に固定される。
次に、図８（Ａ）〜図８（Ｄ）を参照して、蛍光の信号強度が最大値となる時間（ｔｍａｘ）から所定時間Ｎ秒後の時間であるｔｎの決定方法について説明する。図８（Ａ）に示すグラフ５０ｅは、検出開始からの経過時間ｔ５が、ｔｍａｘから所定時間Ｎ秒経過した時間よりも小さい場合を示すグラフである。ｔ５がｔｍａｘからＮ秒以下なので、ｔｎはｔ５と同じである。
また、図８（Ｂ）は、検出時間ｔ６まで検出が進んだ状態を表すグラフ５０ｆである。具体的には、ｔ６はｔ５よりも大きく、ｔｍａｘから所定時間Ｎ秒経過した時間よりも小さい。したがって、ｔｎは、ｔ６と同一の時間となる。
また、図８（Ｃ）は、検出時間ｔ７がｔｍａｘから所定時間Ｎ進んだ時間と同一の時間まで進んだ状態を表すグラフ５０ｇである。ｔ７とｔｍａｘから所定時間Ｎ秒進んだ時間とが等しくなるので、ｔ７とｔｎとが等しくなる。
また、図８（Ｄ）は、検出時間ｔ８がｔｍａｘから所定時間Ｎ秒以上進んだ時間まで検出が進んだ状態を表すグラフ５０ｈである。ｔ８はｔｍａｘから所定時間Ｎ秒以上進んでいるので、ｔｎはｔｍａｘからＮ秒後の時間となる。
したがって、ｔｎは、蛍光の信号強度が最大値となる時間（ｔｍａｘ）から所定時間Ｎ秒が経過するまでは、時間とともに変更され、ｔｍａｘから所定時間Ｎ秒が経過した後は、ｔｍａｘから所定時間Ｎ秒後の時間に固定される。
以上の処理により、抽出部９は、タイミング検出手段７から取得した所定のタイミング（ｔｍａｘ）に基づいて、所定時間範囲Ｒ（Ｍ＋Ｎ）の蛍光の画像１２ａを一時保存部８から抽出し、画像合成部１０に出力する。また、一時保存部８は、所定時間範囲Ｒ（Ｍ＋Ｎ）の最大値分の蛍光の画像１２ａが一時的に保存できればよい。すなわち、一時保存部８は、ｔｍａｘからＭ秒以上前のデータを消去して、新たに取得された画像を一時的に保存する。
（第１実施形態の効果）
第１実施形態では、以下のような効果を得ることができる。
第１実施形態では、上記のように、蛍光イメージング装置１００は、被検体Ｐ内に投与された蛍光剤Ｐａに励起光ＩＲｅを照射することにより発生した蛍光の画像１２ａを取得する画像取得部１４と、画像取得部１４で取得された蛍光の画像１２ａのうち、蛍光の画像１２ａを抽出する所定のタイミングを含む所定時間範囲Ｒの蛍光の画像１２ａを抽出する抽出部９とを備える。これにより、蛍光強度が最大値となるタイミング（ｔｍａｘ）を含む所定時間範囲Ｒの合成画像１２ｃを抽出することができるので、関心領域４０ａの蛍光強度が最も強い部分の合成画像１２ｃを抽出することができる。また、抽出する範囲を所定時間範囲Ｒに限定するので、合成画像１２ｃのデータ量を減少させることができる。その結果、蛍光剤Ｐａを投与し、蛍光の上昇から下降までの期間全体にわたって撮影した画像を再生して観察する場合と比べ、執刀医Ｑが確認したい関心領域４０ａの蛍光の信号強度が最大値となるタイミング（ｔｍａｘ）を含む所定時間範囲Ｒの合成画像１２ｃを再生するための検索にかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画部１３に保存する合成画像１２ｃのデータ量を抑制することができる。
また、第１実施形態では、上記のように、蛍光イメージング装置１００は、蛍光の画像１２ａを抽出する所定のタイミングを検出するタイミング検出手段７をさらに備え、抽出部９は、タイミング検出手段７により検出された蛍光の画像１２ａを抽出するタイミングを含む所定時間範囲Ｒの蛍光の画像１２ａを抽出する構成されている。これにより、抽出される蛍光の画像１２ａの所定時間範囲Ｒは、執刀医Ｑの操作や蛍光の画像１２ａの信号の強度によって蛍光の画像１２ａを抽出するタイミングを決定することができるので、所定時間範囲Ｒの蛍光の画像１２ａを容易に抽出することができる。
また、第１実施形態では、上記のように、タイミング検出手段７は、蛍光の信号強度に基づいて、蛍光の画像１２ａを抽出するタイミングを検出するように構成されている。これにより、蛍光の強度信号が所定の値になったタイミングや、蛍光の信号強度の変化量が増加から減少に転じたタイミングなどを蛍光の画像１２ａを抽出するタイミングとして検出することができるので、視認性の高い蛍光の画像１２ａを抽出するタイミングを自動で決定することができる。
また、第１実施形態では、上記のように、タイミング検出手段７は、蛍光の信号強度に基づいて、信号強度が最大値となるタイミング（ｔｍａｘ）になったことを検出するように構成されている。これにより、関心領域４０ａの蛍光の信号強度が最も大きいタイミング（ｔｍａｘ）を含む所定時間範囲Ｒの蛍光の画像１２ａを取得できるので、視認性の高い蛍光の画像１２ａを確実に抽出することができる。
また、第１実施形態では、上記のように、抽出部９は、蛍光の画像１２ａを抽出するタイミングを中心として、蛍光の画像１２ａを抽出するタイミング（ｔｍａｘ）より前の所定時間Ｍから蛍光の画像１２ａを抽出するタイミングより後の所定時間Ｎまでの所定時間範囲Ｒの蛍光の画像１２ａを抽出するように構成されている。これにより、抽出するタイミングの前後の経過を含めて抽出することができるので、執刀医Ｑにとっての利便性を向上させることができる。また、抽出するタイミングから前後異なった時間範囲を抽出することができるので、抽出する蛍光の画像１２ａの範囲を被検体Ｐや蛍光剤Ｐａの代謝に応じて変更することができる。
また、第１実施形態では、上記のように、画像取得部１４は、励起光ＩＲｅを照射する励起光源部１ｂと、近赤外蛍光ＩＲを検出する近赤外線センサ６とを備えている。これにより、励起光ＩＲｅを照射する励起光源部１ｂと、近赤外蛍光ＩＲを検出する近赤外線センサ６とを個別に設ける場合と比較して、容易に蛍光の画像１２ａを取得することができる。
また、第１実施形態では、上記のように、画像取得部１４は、可視光の画像１２ｂを取得するように構成され、抽出部９によって抽出された蛍光の画像１２ａと、被検体Ｐにより反射され、抽出部９によって抽出された可視光の画像１２ｂとを重ね合わせた合成画像１２ｃを生成する画像合成部１０とをさらに備える。これにより、可視光の画像１２ｂに関心領域４０ａの蛍光の画像１２ａを合成した合成画像１２ｃを取得することができるので、外観を表す可視光の画像１２ｂにおける被検体Ｐ内の関心領域４０ａを透視するようなイメージを執刀医Ｑに視認させることができる。その結果、執刀医Ｑの利便性を向上させることができる。
また、第１実施形態では、上記のように、画像取得部１４は、可視光を照射する可視光源部１ａと、被検体Ｐにより反射されて可視光を検出する可視光センサ５とをさらに備える。これにより、蛍光の画像１２ａを取得する装置と、可視光の画像１２ｂを取得する装置とを個別に備える場合と比較して、被検体Ｐの同一部位の蛍光の画像１２ａおよび可視光の画像１２ｂを容易に取得することができる。
また、第１実施形態では、上記のように、所定時間範囲Ｒに相当する時間の画像取得部１４によって取得された画像を一時的に保存する一時保存部８をさらに備える。これにより、所定時間範囲Ｒに相当する時間分の取得された画像を一時保存部８に保存することができるので、一時保存部８の保存容量の大きさを必要最低限の大きさにすることができる。
また、第１実施形態では、上記のように、蛍光イメージングシステム２００は、蛍光イメージング装置１００と、蛍光イメージング装置１００によって作成された合成画像１２ｃを表示する表示部１２と、合成画像１２ｃを録画する録画部１３と、操作部２０とを備えている。これにより、蛍光強度が最大値となるタイミング（ｔｍａｘ）を含む所定時間範囲Ｒの合成画像１２ｃを抽出することができるので、関心領域４０ａの蛍光強度が最も強い部分の合成画像１２ｃを抽出することができる。また、抽出する範囲を所定時間範囲Ｒに限定するので、合成画像１２ｃのデータ量を減少させることができる。その結果、蛍光剤Ｐａを投与し、蛍光の上昇から下降までの期間全体（図６のｔ０からｔｚまでの期間）にわたって撮影した画像を再生して観察する場合と比べ、関心領域４０ａの蛍光の信号強度が最大値となるタイミング（ｔｍａｘ）を含む所定時間範囲Ｒの合成画像１２ｃを再生するまでにかかる時間を短縮することができ、かつ、容易に、特徴的な輝度の変化等を確認することができるとともに、録画部１３に保存する合成画像１２ｃのデータ量を抑制することができる。また、表示部１２を備えているので、合成画像１２ｃを録画しながら表示することが可能となる。
［第２実施形態］
次に、図１および図９を参照して、第２実施形態による蛍光イメージングシステム３００の構成について説明する。第２実施形態による蛍光イメージングシステム３００では、タイミング検出手段７が、蛍光の信号強度に基づいて、蛍光の信号強度が最大値となるタイミングになったことを検出するように構成されていた第１実施形態とは異なり、タイミング検出手段７は、蛍光の信号強度に基づいて、蛍光の信号強度が閾値以上になるタイミングを検出するように構成されている。なお、上記第１実施形態と同様の構成は、第１実施形態と同じ符号を付して図示するとともに説明を省略する。
図９は、第２実施形態による蛍光イメージングシステム３００において、タイミング検出手段７が検出する所定時間範囲Ｒを示すグラフ６０である。直線６１は、執刀医Ｑ等によってあらかじめ設定された閾値Ｉｔを示している。第２実施形態では、タイミング検出手段７は、蛍光の信号強度に基づいて、蛍光の信号強度が閾値Ｉｔ以上になるタイミングを検出するように構成されている。具体的には、タイミング検出手段７は、グラフ６０と直線６１とによって形成される閾値Ｉｔを超えた領域６０ａの部分となるように、所定時間範囲Ｒを設定する。これにより、抽出部９は、領域６０ａの部分のような、閾値Ｉｔを超えた所定時間範囲Ｒの画像を抽出することができる。
また、第２実施形態による蛍光イメージングシステム３００のその他の構成は、第１実施形態における蛍光イメージングシステム２００と同様である。
（第２実施形態の効果）
第２実施形態では、以下のような効果を得ることができる。
第２実施形態では、上記のように、タイミング検出手段７は、蛍光の信号強度に基づいて、蛍光の信号強度が閾値Ｉｔ以上になるタイミングを検出するように構成されている。これにより、蛍光の信号強度がＩｔ以上の領域６０ａの蛍光の画像１２ａを抽出することができるので、蛍光の画像１２ａの視認性が低い部分を抽出することを回避して、不必要なデータ量の増大を抑制することができる。
また、第２実施形態による蛍光イメージングシステム３００のその他の効果は、第１実施形態における蛍光イメージングシステム２００と同様である。
［第３実施形態］
次に、図１および図１０を参照して、第３実施形態による蛍光イメージングシステム４００の構成について説明する。第３実施形態による蛍光イメージングシステム４００は、蛍光の信号強度に基づいて蛍光の画像１２ａを抽出するタイミングを検出する第１実施形態とは異なり、執刀医Ｑの操作入力に基づいて、蛍光の画像１２ａを抽出するタイミングを検出するように構成されている。なお、上記第１実施形態と同様の構成は、第１実施形態と同じ符号を付して図示するとともに説明を省略する。
図１０は、第３実施形態による蛍光イメージングシステム４００において、タイミング検出手段７が、ユーザの入力によって検出する所定時間範囲Ｒを示すグラフ７０である。タイミング検出手段７は、ユーザの操作入力に基づいて、蛍光の画像１２ａを抽出するタイミングを検出するように構成されている。第３実施形態による蛍光イメージングシステム４００では、検出する所定のタイミングは、厳密にピーク（Ｉｔｍａｘ）のタイミング（ｔｍａｘ）である必要はなく、ユーザの再生確認したい場面を入力タイミング（ｔｉｎ）として取得し、入力タイミング（ｔｉｎ）の前後Ｍ、Ｎによって決定される所定時間範囲Ｒが取得される。
また、第３実施形態による蛍光イメージングシステム４００のその他の構成は、第１実施形態における蛍光イメージングシステム２００と同様である。
（第３実施形態の効果）
第３実施形態では、以下のような効果を得ることができる。
第３実施形態では、上記のように、タイミング検出手段７は、執刀医Ｑの操作入力に基づいて、蛍光の画像１２ａを抽出するタイミングを検出するように構成されている。これにより、蛍光の信号強度に関わらず、蛍光の画像１２ａを取得するタイミングを検出することができるので、執刀医Ｑの意図を反映して、執刀医Ｑが取得したいタイミングの蛍光の画像１２ａを確実に取得することができる。
また、第３実施形態による蛍光イメージングシステム４００のその他の効果は、第１実施形態における蛍光イメージングシステム２００と同様である。
［第４実施形態］
次に、図１１を参照して、第４実施形態による蛍光イメージングシステム５００の構成について説明する。第４実施形態による蛍光イメージングシステム５００は、蛍光イメージング装置１００の外部に設けられた録画部１３によって、蛍光の画像１２ａ、可視光の画像１２ｂおよび合成画像１２ｃを録画するように構成されている第１実施形態とは異なり、蛍光イメージング装置１００が録画部１３をさらに備えている。
図１１に示すように、第４実施形態による蛍光イメージングシステム５００では、蛍光イメージング装置１００は、録画部１３をさらに備える。そして、画像合成部１０は、外部出力部１１へ蛍光の画像１２ａ、可視光の画像１２ｂおよび合成画像１２ｃを送るとともに、録画部１３へと蛍光の画像１２ａ、可視光の画像１２ｂおよび合成画像１２ｃを送るように構成されている。
また、第４実施形態による蛍光イメージングシステム５００のその他の構成は、第１実施形態における蛍光イメージングシステム２００と同様である。
（第４実施形態の効果）
第４実施形態では、以下のような効果を得ることができる。
第４実施形態では、上記のように、蛍光イメージング装置１００は、録画部１３をさらに備える。これにより、抽出部９によって抽出された画像（蛍光の画像１２ａ、可視光の画像１２ｂ）および抽出された画像から生成された画像（合成画像１２ｃ）を録画する際に、外部の録画機器を使用する必要がなくなるので、蛍光イメージング装置の利便性を向上させることができる。
また、第４実施形態による蛍光イメージングシステム５００のその他の効果は、第１実施形態における蛍光イメージングシステム２００と同様である。
［変形例］
なお、今回開示された実施形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施形態の説明ではなく特許請求の範囲によって示され、さらに特許請求の範囲と均等の意味および範囲内でのすべての変更（変形例）が含まれる。
たとえば、上記第１〜第４実施形態では、蛍光イメージングシステムを、外科手術において血管造影およびリンパ管造影のために用いられる術中支援システムとして構成する例を示したが、本発明はこれに限られない。たとえば、蛍光イメージングシステムを診察室に設置して、皮膚がんの診断など、外科手術を必要としない診断に用いてもよい。
また、上記第１〜第４実施形態では、近赤外蛍光ＩＲを照射する励起光源部１ｂに、発光ダイオードを含む例を示したが、本発明はこれに限られない。すなわち、励起光源部１ｂに、発光ダイオード以外の発光部材を含んでもよい。たとえば、励起光源部１ｂに、ハロゲンなどの電球光源を設けてもよいし、励起光を照射する光源であれば、どのような光源であってもよい。
また、上記第１〜第４実施形態では、蛍光剤Ｐａを、インドシアニングリーンから構成する例を示したが、本発明はこれに限られない。すなわち、蛍光剤Ｐａを、インドシアニングリーン以外の蛍光剤から構成してもよい。
また、上記第１〜第４実施形態では、タイミング検出手段７でタイミングを検出したものを一時保存部８に一時的に保存する例を示したが、本発明はこれに限られない。たとえば、図１２に示す第１実施形態の第１変形例による蛍光イメージングシステム６００のように、一時保存部８に保存した画像をタイミング検出手段７で抽出する画像のタイミングを検出するように構成してもよい。しかし、このように構成した場合、タイミング検出手段７で抽出する画像のタイミング検出を行う際に、一時保存部８から画像データを読み込まなくてはならないので、図１の構成と比較した場合、タイミング検出における処理に時間がかかる。したがって、図１の構成を用いる方がよい。
また、上記第１〜第４実施形態では、蛍光の画像１２ａ、可視光の画像１２ｂおよび合成画像１２ｃを、表示部１２によって表示し、録画部１３によって録画する例を示したが、本発明はこれに限られない。たとえば、図１３に示す第１実施形態の第２変形例による蛍光イメージングシステム７００のように、録画部１３によって録画のみを行うように構成してもよい。
また、上記第１〜第４実施形態では、近赤外線の励起光ＩＲｅを照射する例を示したが、本発明はこれに限られない。被検体Ｐに照射する励起光ＩＲｅは、被検体Ｐに投与する蛍光剤Ｐａに応じた励起可能な波長の光であればよい。
また、上記第１〜第４実施形態では、画像取得部１４が蛍光の画像１２ａおよび可視光の画像１２ｂを撮像する例を示したが、本発明はこれに限られない。たとえば、図１４に示す第１実施形態の第３変形例による蛍光イメージングシステム８００のように、画像取得部１４は、外部に設けられた撮像装置２１で撮像された蛍光の画像１２ａおよび可視光の画像１２ｂを取得するように構成されていてもよい。この場合、画像取得部１４は、画像データの入力を受け付けるデータ入力部として構成され、撮像装置２１と有線または無線によりデータ受信可能なように接続される。
また、上記第１〜第４実施形態では、タイミング検出手段７は、蛍光の画像１２ａの関心領域４０ａの蛍光の信号強度に基づいて、蛍光の画像１２ａを抽出するタイミングを検出する例を示したが、本発明はこれに限られない。たとえば、蛍光の画像１２ａ全体（全画素領域）の蛍光の信号強度に基づいて蛍光の画像１２ａを抽出するタイミングを決定するように構成されていてもよい。
また、上記第１〜第４実施形態では、タイミング検出手段７は、蛍光の画像１２ａの関心領域４０ａの蛍光の信号強度に基づいて、蛍光の画像１２ａを抽出するタイミングを検出する例を示したが、本発明はこれに限られない。たとえば、図１に示す第１実施形態の第４変形例による蛍光イメージングシステム９００のタイミング検出手段７は、図１５に示すように、蛍光の画像１２ａの関心領域４０ａおよび関心領域４０ｂそれぞれの蛍光の信号強度（図１５（Ｃ）および図１５（Ｅ））に基づいて蛍光の画像１２ａを抽出するタイミングを決定してもよい。その際、たとえば、抽出部９は、関心領域４０ａおよび関心領域４０ｂそれぞれの蛍光の信号強度が最大値近傍の所定時間範囲Ｒ（Ｒ４０ａおよびＲ４０ｂ）の画像を抽出し、画像合成部１０は、可視光の画像１２ｂ（図１５（Ａ））、関心領域４０ａおよび関心領域４０ｂそれぞれの抽出された蛍光の画像１２ａ（図１５（Ｃ）および図１５（Ｅ））を１つに合成し、合成画像１２ｃ（図１５（Ｆ））を生成するように構成されていてもよい。なお、複数の関心領域は、たとえば、手術等では、通常２〜３カ所設定される。また、関心領域は最大で８カ所まで設定可能である。
また、上記第１〜第４実施形態では、表示部１２に蛍光の画像１２ａ、可視光の画像１２ｂおよび合成画像１２ｃを表示する例を示したが、本発明はこれに限られない。たとえば、合成画像１２ｃだけを表示してもよい。また、たとえば、画像を合成せずに、蛍光の画像１２ａと、可視光の画像１２ｂとを表示してもよい。その場合、蛍光イメージング装置は、画像合成部１０を備えなくてもよい。また、たとえば、蛍光の画像１２ａだけを表示してもよい。その場合、蛍光イメージング装置は、可視光源部１ａ、可視光センサ５および画像合成部１０を備えなくてもよい。
１ａ 可視光源部（第２光源部）
１ｂ 励起光源部（第１光源部）
５ 可視光センサ（第２検出部）
６ 近赤外線センサ（第１検出部）
７ タイミング検出手段
８ 一時保存部
９ 抽出部
１０ 画像合成部
１２ 表示部
１２ａ 蛍光の画像
１２ｂ 可視光の画像
１２ｃ 再生用画像
１３ 録画部
１４ 画像取得部
１００ 蛍光イメージング装置
２００、３００、４００、５００、６００、７００、８００、９００ 蛍光イメージングシステム
Ｉｔ 閾値
Ｍ 所定時間（第１時間）
Ｎ 所定時間（第２時間）
Ｐ 被検体
Ｐａ 蛍光剤（被検体内に投与された蛍光物質）
Ｑ 執刀医（ユーザ）
Ｒ 所定時間範囲

Claims (13)

  1. 被検体内に投与された蛍光物質に励起光を照射することにより発生した蛍光の画像を取得する画像取得部と、
    前記画像取得部で取得された前記蛍光の画像のうち、前記蛍光の画像を抽出する所定のタイミングを含む所定時間範囲の前記蛍光の画像を抽出する抽出部とを備えた、蛍光イメージング装置。
  2. 前記蛍光の画像を抽出する所定のタイミングを検出するタイミング検出手段をさらに備え、
    前記抽出部は、前記タイミング検出手段により検出された前記蛍光の画像を抽出するタイミングを含む所定時間範囲の前記蛍光の画像を抽出する構成されている、請求項１に記載の蛍光イメージング装置。
  3. 前記タイミング検出手段は、前記蛍光の信号強度に基づいて、前記蛍光の画像を抽出するタイミングを検出するように構成されている、請求項２に記載の蛍光イメージング装置。
  4. 前記タイミング検出手段は、前記蛍光の信号強度に基づいて、前記信号強度が最大値となるタイミングになったことを検出するように構成されている、請求項３に記載の蛍光イメージング装置。
  5. 前記タイミング検出手段は、前記蛍光の信号強度に基づいて、前記蛍光の前記信号強度が閾値以上になるタイミングを検出するように構成されている、請求項３または４に記載の蛍光イメージング装置。
  6. 前記タイミング検出手段は、ユーザの操作入力に基づいて、前記蛍光の画像を抽出するタイミングを検出するように構成されている、請求項２に記載の蛍光イメージング装置。
  7. 前記抽出部は、前記蛍光の画像を抽出するタイミングを中心として、前記蛍光の画像を抽出するタイミングより前の第１時間から前記蛍光の画像を抽出するタイミングより後の第２時間までの前記所定時間範囲の前記蛍光の画像を抽出するように構成されている、請求項１〜６のいずれか１項に記載の蛍光イメージング装置。
  8. 前記画像取得部は、励起光を照射する第１光源部と、
    前記蛍光を検出する第１検出部とを備えている、請求項１〜７のいずれか１項に記載の蛍光イメージング装置。
  9. 前記画像取得部は、可視光の画像を取得するように構成され、
    前記抽出部によって抽出された前記蛍光の画像と、前記被検体により反射され、前記抽出部によって抽出された可視光の画像とを重ね合わせた再生用画像を生成する画像合成部をさらに備える、請求項１〜８のいずれか１項に記載の蛍光イメージング装置。
  10. 前記画像取得部は、前記可視光を照射する第２光源部と、
    前記被検体により反射された前記可視光を検出する第２検出部とをさらに備える、請求項９に記載の蛍光イメージング装置。
  11. 前記所定時間範囲に相当する時間の前記画像取得部によって取得された画像を一時的に保存する一時保存部をさらに備える、請求項１〜１０のいずれか１項に記載の蛍光イメージング装置。
  12. 前記抽出部によって抽出された画像および前記抽出部によって抽出された画像から生成された画像を録画する録画部をさらに備える、請求項１〜１１のいずれか１項に記載の蛍光イメージング装置。
  13. 請求項１〜１２のいずれか１項に記載の蛍光イメージング装置と、
    前記蛍光イメージング装置によって作成された再生用画像を録画する録画装置と、
    前記再生用画像を表示する表示装置とを備える、蛍光イメージングシステム。
JP2018561139A 2017-01-11 2017-01-11 蛍光イメージング装置および蛍光イメージングシステム Active JP6645591B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/000662 WO2018131096A1 (ja) 2017-01-11 2017-01-11 蛍光イメージング装置および蛍光イメージングシステム

Publications (2)

Publication Number Publication Date
JPWO2018131096A1 JPWO2018131096A1 (ja) 2019-11-07
JP6645591B2 true JP6645591B2 (ja) 2020-02-14

Family

ID=62839640

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018561139A Active JP6645591B2 (ja) 2017-01-11 2017-01-11 蛍光イメージング装置および蛍光イメージングシステム

Country Status (4)

Country Link
US (1) US20190376892A1 (ja)
JP (1) JP6645591B2 (ja)
CN (1) CN110177505B (ja)
WO (1) WO2018131096A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111542748A (zh) * 2017-11-13 2020-08-14 索尼公司 信息处理装置、信息处理方法和荧光图像捕捉系统
CN109363768A (zh) * 2018-10-10 2019-02-22 南京诺源医疗器械有限公司 785nm波长光源近红外荧光造影手术引导系统
JP2020141728A (ja) * 2019-03-04 2020-09-10 株式会社島津製作所 イメージング装置およびイメージング方法
JP7281308B2 (ja) * 2019-03-07 2023-05-25 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置及び医療用観察システム
JP2022036701A (ja) * 2020-08-24 2022-03-08 株式会社島津製作所 治療支援システムおよび治療支援装置
MX2024006615A (es) * 2021-12-03 2024-08-26 Parasight System Inc Método de preparación de muestras fecales para análisis automatizado de imágenes.

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070048226A1 (en) * 2005-02-09 2007-03-01 Alfred E.Mann Institute For Biomedical Engineering At The University Of Southern California Biochemical marker detection device
KR100953773B1 (ko) * 2005-05-11 2010-04-21 올림푸스 메디칼 시스템즈 가부시키가이샤 생체 관측 장치용 신호 처리 장치
JP5626760B2 (ja) * 2010-03-31 2014-11-19 ソニー株式会社 蛍光像取得方法、蛍光像取得プログラム及び蛍光像取得装置
JP5707758B2 (ja) * 2010-07-13 2015-04-30 ソニー株式会社 撮像装置、撮像システム、手術用ナビゲーションシステム、及び撮像方法
US10278585B2 (en) * 2012-06-21 2019-05-07 Novadaq Technologies ULC Quantification and analysis of angiography and perfusion
JP5993237B2 (ja) * 2012-07-25 2016-09-14 オリンパス株式会社 蛍光観察装置
JP6354749B2 (ja) * 2013-03-15 2018-07-11 ソニー株式会社 微小粒子分析装置、微小粒子分析方法、プログラム及び微小粒子分析システム
CN105705084B (zh) * 2013-09-20 2019-07-12 国立大学法人旭川医科大学 血管内血流动态的图像处理方法及系统
WO2016035450A1 (ja) * 2014-09-01 2016-03-10 株式会社島津製作所 イメージング装置
WO2016157260A1 (ja) * 2015-03-31 2016-10-06 パナソニックＩｐマネジメント株式会社 可視光投影装置

Also Published As

Publication number Publication date
WO2018131096A1 (ja) 2018-07-19
JPWO2018131096A1 (ja) 2019-11-07
CN110177505A (zh) 2019-08-27
CN110177505B (zh) 2023-03-14
US20190376892A1 (en) 2019-12-12

Similar Documents

Publication Publication Date Title
JP6645591B2 (ja) 蛍光イメージング装置および蛍光イメージングシステム
US20190357773A1 (en) System and Method for Laser Imaging and Ablation of Cancer Cells Using Fluorescence
JP6533358B2 (ja) 撮像装置
JP5160276B2 (ja) 画像表示方法及び装置
JP5669416B2 (ja) 蛍光観察装置
JP2011167337A (ja) 画像取得方法および画像撮像装置
JP2011200367A (ja) 画像撮像方法および装置
JP2011131002A (ja) 蛍光画像撮像装置
JP6451494B2 (ja) イメージング装置
JP2006271870A (ja) 内視鏡用画像処理装置
JP6485275B2 (ja) イメージング装置
US20110267444A1 (en) Endoscope apparatus, method, and computer readable medium
US20190239749A1 (en) Imaging apparatus
TW201505602A (zh) ４ｄ多波長全彩影像皮膚檢測裝置
JP5637783B2 (ja) 画像取得装置およびその作動方法
JP2011067486A (ja) 画像取得方法および装置
JP2011110230A (ja) 蛍光画像撮像装置
JP2019048111A (ja) イメージング方法
KR101908632B1 (ko) 실시간 후두스트로보스코피, 고속 후두내시경 검사, 및 평면 스캔 디지털 카이모그래피를 위한 영상 생성 시스템 및 방법
JP6432533B2 (ja) イメージング装置
JP2010233939A (ja) 標識試薬投与制御方法及び装置並びに蛍光画像撮影方法及び装置
JP2019066398A (ja) イメージング装置
JP6485284B2 (ja) イメージング装置
JP5320233B2 (ja) 蛍光画像撮像装置
JP5480432B2 (ja) 蛍光画像撮像装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191223

R151 Written notification of patent or utility model registration

Ref document number: 6645591

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151