JP7326009B2 - ボアベースの医療システムにおいて患者を監視するためのカメラ監視システム及びカメラ監視システムを較正する方法 - Google Patents

ボアベースの医療システムにおいて患者を監視するためのカメラ監視システム及びカメラ監視システムを較正する方法 Download PDF

Info

Publication number
JP7326009B2
JP7326009B2 JP2019078421A JP2019078421A JP7326009B2 JP 7326009 B2 JP7326009 B2 JP 7326009B2 JP 2019078421 A JP2019078421 A JP 2019078421A JP 2019078421 A JP2019078421 A JP 2019078421A JP 7326009 B2 JP7326009 B2 JP 7326009B2
Authority
JP
Japan
Prior art keywords
camera
patient
mirror
bore
calibration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019078421A
Other languages
English (en)
Other versions
JP2019188137A (ja
Inventor
エム. ヘイル ギディオン
Original Assignee
ビジョン アールティ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from GBGB1806339.6A external-priority patent/GB201806339D0/en
Priority claimed from GBGB1808304.8A external-priority patent/GB201808304D0/en
Application filed by ビジョン アールティ リミテッド filed Critical ビジョン アールティ リミテッド
Publication of JP2019188137A publication Critical patent/JP2019188137A/ja
Application granted granted Critical
Publication of JP7326009B2 publication Critical patent/JP7326009B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/40ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N5/00Radiation therapy
    • A61N5/10X-ray therapy; Gamma-ray therapy; Particle-irradiation therapy
    • A61N5/1048Monitoring, verifying, controlling systems and methods
    • A61N5/1049Monitoring, verifying, controlling systems and methods for verifying the position of the patient with respect to the radiation beam
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5258Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
    • A61B6/5264Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise due to motion
    • A61B6/527Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise due to motion using data from a motion artifact sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N5/00Radiation therapy
    • A61N5/10X-ray therapy; Gamma-ray therapy; Particle-irradiation therapy
    • A61N5/1048Monitoring, verifying, controlling systems and methods
    • A61N5/1075Monitoring, verifying, controlling systems and methods for testing, calibrating, or quality assurance of the radiation treatment apparatus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/236Image signal generators using stereoscopic image cameras using a single 2D image sensor using varifocal lenses or mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/25Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/254Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • A61B2090/3618Image-producing devices, e.g. surgical cameras with a mirror
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N5/00Radiation therapy
    • A61N5/10X-ray therapy; Gamma-ray therapy; Particle-irradiation therapy
    • A61N5/1048Monitoring, verifying, controlling systems and methods
    • A61N5/1049Monitoring, verifying, controlling systems and methods for verifying the position of the patient with respect to the radiation beam
    • A61N2005/1059Monitoring, verifying, controlling systems and methods for verifying the position of the patient with respect to the radiation beam using cameras imaging the patient
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Radiation-Therapy Devices (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Description

本開示は、3Dカメラシステムに関する。より具体的には、本開示は、走査及び/又は治療中に患者の位置付け及び動きを監視するための3Dカメラシステムに関する。本発明は、患者の動き、例えば不規則な呼吸の検出が治療の成功にとって重要である、放射線治療装置及びコンピュータ断層撮影(CT)スキャナ等と一緒に使用するのに特に適している。さらに、本開示は、本明細書に開示される3Dカメラシステムによって構成される患者監視システムを較正する方法に関する。この方法は、放射線治療中に患者の位置付け及び位置を監視するための患者監視システムによって必要とされるような、患者の位置を非常に高い精度で監視するための患者監視システムを較正するのに適している。
医療用途におけるMR及びCTイメージング等のイメージング技術は、一般に、広範囲に及ぶ疾患を患う患者を診断するため、特に癌を診断するため及び患者の癌治療を計画するために使用される。少なくとも癌診断に使用されるイメージング技術はCT及びMR走査システムを含み、それらシステムのイメージング・モダリティから一連の3D診断画像が生成される。3D画像データは一般に専門の医師に提供され、専門の医師は画像を評価及び解析してその後の癌の治療を評価及び計画する。治療計画が専門の臨床医及び医師のチームによって設定されると、患者は放射線治療に曝され、患者は、放射線ビームを患者の体の特定の標的領域に集束させるように構成される放射線ビームを含む放射線治療装置に位置付けされることを含む。
一般に、放射線療法は、内部に存在する腫瘍を破壊又は排除するように、放射線ビームを患者の体の所定の領域に照射することから構成される。このような治療は、通常、定期的にそして繰り返し行われる。各医療介入において、選択された領域を可能な限り最も高い精度で照射して放射線ビームが有害となる隣接組織を照射しないようにするために、放射線源を患者に対して位置付けしなければならない。さらに、治療中に、患者は、機械式カウチ(couch)に横になっており、様々な異なる位置及び角度から放射線源によって照射される。放射線の正確な照射を確実にし、放射線ビームが有害となる隣接組織への放射線照射を回避するために、選択された領域を可能な限り最も高い精度で照射するために、放射線源を患者に対して位置付けしなければならず、患者は、治療計画段階中に及び各医療介入時に採用された姿勢に照射されたのと同一の姿勢を取らなければならない。
現在の放射線治療システムは、治療中に生じる患者の動きを監視するように構成される監視システムを利用している。このような動きの追跡は、異なる視点から取り込まれた患者の表面の対応する部分の特定を容易にするために患者の表面に光を投影する光プロジェクタを用いて構成された現在のシステムにおいて行われている。患者の画像は、治療室のアイソセンタに対する画像を取り込むカメラの相対位置を特定するデータと共に取得及び処理され、患者の表面上の点に対応する多数の点から構成される3D位置を特定する。そのようなデータは、前の機会に生成されたデータと比較することができ、一貫した方法で患者を位置付けするため、又は患者が位置から外れたときに警告を出すために使用される。典型的には、そのような比較は、ライブ画像に基づいて生成されたデータによって特定された患者の表面上の点と、前の機会に生成されたデータによって特定された患者の表面上の点との間の位置の差を最小にする変換を決定するためのプロクラステス(Procrustes)解析を行うことを含む。
放射線治療セットアップに配置された現在の監視システムは、患者の表面の非常に正確な(例えば、サブミクロンの)モデルを生成するように構成される。そうするために、画像取込み装置/カメラの相対的な位置及び向き、並びに各画像検出器/カメラのレンズの光学設計によって引き起こされるあらゆる光学的歪み(例えば、バレル、ピンクッション、及び口ひげ(moustache)歪み及び偏心/接線方向歪み)等の固有の内部カメラパラメータ、及びカメラ/画像取込み装置の他の内部パラメータ(例えば、焦点距離、画像中心、アスペクト比スキュー、画素間隔等)を確立するために、監視システムが較正される。一旦既知となると、内部カメラパラメータは、取得した画像を操作して歪みのない画像を得るために利用され得る。次に、異なる位置から取得した画像を処理し、それらの画像から3次元位置、及び画像取込み装置/カメラの相対位置及び向きを導出することによって、3次元位置測定値を決定することができる。
こうして、標準的な放射線治療室に位置付けされている間に患者を正確に監視し追跡することができる現在のシステムが存在しており、そこでカウチは、放射線治療のガントリ設定に対して移動するように構成され得る。
しかしながら、放射線療法の設計として、MR及びCTシステムでは、組み合わされ且つ完全に統合された診断及び治療システムとして構成され得るように現在のシステムを開発し続けている。こうして、癌の診断及び治療において、これらのイメージング・モダリティ及び治療モダリティを単一のボアベースのシステムに組み合わせる傾向があり、これは、癌診断の診断段階だけでなく、治療段階に必要な焦点合わせされたビームを用いた放射線治療段階に必要なイメージング・モダリティを実行できる。つまり、癌は患者の体内に含まれているため、患者の体内の解剖学的構造の画像を取得するための撮像マシンを提供することは有益である。このようなマシンは、治療の過程で患者の体内の解剖学的構造を再イメージングすることを可能にする放射線治療装置と同じ部屋に設けられることが増えている。治療セッション中に患者が治療位置と撮像位置との間を移動するので、このようなマシンで患者の位置付けをさらに監視することは困難である。他のシステムでは、走査と治療との両方の間に、患者はボアの内側でカウチに横になっている。
診断及び治療の全ての段階において、患者を監視できること、特に走査及び治療中にカウチに位置付けされている間に患者のあらゆる潜在的な動きを監視できることが重要である。しかしながら、既存の患者監視カメラシステムは、患者が医療装置のボアの内側に位置付けされたときに、カメラによって患者の良好な視野を提供するという観点から最適な方法で治療室に構成及び配置されていない。さらに、患者を監視するためのカメラ監視システムで使用される様々なカメラを較正するための現在の解決策は、患者の走査及び/又は治療中に患者の正確な監視を生成できるように、新しく統合されたボアベース医療装置を考慮して十分に更新する必要がある。
こうして、既存の解決策では、ボアの内側に位置付けされている間に患者の正確な監視を捕捉することは困難であり得る。従って、上述した問題の少なくともいくつかに対処する、カメラ設定を監視するための解決策を提供する必要がある。少なくとも本開示は、少なくとも従来技術に対する代替案を提供する。
ボアベースの医療システム内に横たわる患者の十分な監視が保証されることを確実にするために、本開示を通してカメラ監視システムが提供される。さらに、カメラ監視システムを較正して患者の正確な監視を可能にする方法が提供される。
カメラ監視システムがボアベース医療装置に適したカメラ・セットアップを提供することを確実にするために、そのようなシステムが患者の表面を監視することができる高いレベルの精度を維持しながら、3Dカメラシステムの物理的サイズを縮小することが望ましい。
こうして、本開示の一態様によれば、回路基板上に取り付けられた第1及び第2の画像センサを有する3Dカメラが提供され、第1及び第2の画像センサは、回路基板の反対側の面に取り付けられる。回路基板は、第1及び第2のミラーも含むハウジング内に収容され、第1及び第2のミラーは、第1の画像センサには第1のミラーを介して撮像される対象物の第1の視野(view)が提示され、第2の画像センサには第2のミラーを介して撮像される対象物の第2の視野が提示されるようにハウジング内に位置付けされる。画像センサの像面(image planes)の有効位置を必ずしもハウジングの内側に配置する必要はないので、このように第1及び第2の画像センサを回路基板の反対側の面に取り付け、1組のミラーを介して撮像される対象物の視野を得ることにより、カメラシステムのハウジングの全体のサイズを小さくすることができる。
さらに、監視システムは、通常、画像を画像センサ上に焦点合わせするためのレンズを必要とする。従来では、このようなレンズ構成は、画像センサの視線と整列された画像センサの前に向き合せされていた。ミラーを介して見るべき対象物の画像を取得するように画像センサを配置することによって、レンズを画像センサの有効視線に対してある角度で配置することができる。そのような構成では、レンズ構成の長さは、画像センサの像面の物理的な分離内にあり、従ってカメラシステムのサイズを縮小することができる。
カメラシステムの視野は、複数対の画像センサ、関連するレンズ構成、及びミラーを設けることによって拡大することができ、異なる対の画像検出器に関連するミラーが互いに対して傾斜している(angled)。3対の画像センサがカメラに設けられる実施形態では、画像センサに関連するミラーは、広角を提供するために2つの菱形台形の表面に設けられ得る。
本発明の実施形態は、撮像される表面上に光のパターンを投影するためのスペックルプロジェクタを含み得る。プロジェクタは、3Dカメラによって撮像される表面上に光のパターンを投影する光プロジェクタ等であり得る。画像センサが回路基板の反対側の面に設けられる場合に、プロジェクタ、好ましくは光又はスペックルプロジェクタを、回路基板と整列させるように位置付けしてもよい。そのような配置によって、カメラシステムの全体サイズを縮小することもできる。さらに、スペックルプロジェクタを回路基板と整列させることは、画像センサから見たときの投影スペックルパターンの対称配置を容易にし、これは、他の画像センサと比べて画像センサのうちの1つで見たときの投影スペックルパターンが大きく歪むのを回避するのに役立ち、2つの異なる視点から見た対象物の画像の対応する部分の識別(特定)を容易にする。
上述した3Dカメラは、放射線治療を受けている患者を監視するための患者監視システム(すなわち、カメラ監視システム)に組み込むことができる。そのような実施形態では、患者監視システムは、患者の表面の一部のコンピュータモデルを生成し、生成したモデルを記憶したモデルと比較し、そのような比較に基づいて位置付け命令を生成し、及び/又は患者が閾値量より多く位置ずれしていることが検出された場合に、警告を出すか又は治療を中止するように構成することができる。
本開示の別の態様では、走査及び/又は治療中に患者の正確な表面モデルを得るために、カメラ監視システムが十分に較正されていることが重要である。
こうして、本開示の第2の態様では、患者の位置を監視するための患者監視システム(すなわち、カメラ監視システム)を較正する方法が提供され、この監視システムは、第1の位置と第1の位置から物理的に隔てられた第2の位置とにおける患者の画像を取得するように構成される。第1の部分上に第1組の較正マーク及び第2の部分上に第2組の較正マークを有する較正対象物が、提供され、且つ第1組の較正マークが第1の位置の近傍に見え及び第2組の較正マークが第2の位置の近傍に見えるように位置付けされる。次に、患者監視システムは、第1及び第2の位置の近傍に位置付けされた第1組及び第2組の較正マークを用いて、位置付けされた較正対象物の取得した画像を使用して較正される。
出願人は、治療装置が規定されたセットアップ領域及び治療領域、又は規定された治療領域及び撮像領域を有する場合のように、患者位置を互いに固定された関係を有する2つの位置で監視する必要がある場合に、患者位置付け監視システムの較正を単純化できることを理解した。そのようなシステムでは、位置監視システムが2つの固定位置の間で患者の動きを監視する必要はなく、2つの位置の間を移動するときに広い範囲に亘って患者を監視するために監視システムを較正する必要がある。むしろ、識別された領域の近傍のみで患者を監視するように患者監視システムを較正することによって患者監視を達成することができ、患者はそれらの領域間を移動するので、患者の動きは、第1の位置及び第2の位置における患者のモデルのモデル空間が、2つの位置の間の物理的距離に対応する量だけオフセットされるように監視システムが較正される限り、それら特定の領域で見たときの患者の画像から生成したモデルを比較することによって決定することができる。これは、2組の較正マークの間隔が、監視システムが監視するように配置された2つの位置の間の物理的間隔に対応する、2組の較正マークを有する較正対象物を撮像することによって達成できる。次に、較正対象物をこれらの位置で見える較正マークを用いて位置付けすることができ、次に、マークの画像を利用してシステムを較正することができる。
監視システムは複数の3Dカメラを含むことができ、少なくとも1つの3Dカメラは第1の位置における対象物の画像を取得するように配置され、少なくとも1つの3Dカメラは第2の位置における対象物の画像を取得するように配置される。いくつかの実施形態では、3Dカメラは立体カメラを含み得る。他の実施形態では、3Dカメラは、監視される対象物の表面上への構造化光の投影の画像を取得するように動作可能な3Dカメラ又は3D飛行時間型カメラを含み得る。
較正対象物は、それぞれが円形のマークのアレイを含む第1組及び第2組の較正マークを有する較正プレートを含むことができ、アレイ内の円形マークは互いに対して既知の位置に配置される。いくつかの実施形態では、第1組及び第2組の較正マークは、互いに対して所定の角度だけ傾斜してもよい。較正マークは、円形マークのアレイに対して固定された関係で較正対象物の表面上に配置された1つ又は複数の線をさらに含み得る。
較正対象物を位置付けすることは、空間内の位置を強調するようにレーザ照明システムを利用することと、較正対象物の表面上のマークをレーザ照明システムによって投影される光と整列させる(align)こととを含み得る。このような実施形態では、レーザ照明システムは、放射線治療装置の治療室のアイソセンタ、放射線治療を受けている患者のセットアップ位置の中心を特定する点、又は放射線治療を受けている患者の内部画像を取得するための撮像装置と固定関係にある点に対応する空間内の位置を強調するように構成してもよい。
代替的に又は追加的に、較正対象物は、較正対象物の位置付けを補助するために利用され得る一組の放射線不透過性マーカを含み得る。そのような実施形態では、較正対象物を位置付けすることは、放射線不透過性マーカを含む較正対象物を照射してこの較正対象物の照射画像を取得することと、取得した画像を解析して、治療室のアイソセンタ等の照射位置に対する較正対象物の相対位置を決定することと、を含み得る。
位置付けされた較正対象物の画像を使用して、対象物の画像を取得するカメラの像面の相対位置及び/又は向きを決定することができる。位置付けされた較正対象物の画像を使用して、レンズ歪みの存在等のカメラの内部特性を決定することもできる。
較正対象物のマークの部分によって正方形の角部を識別することができ、位置付けされた較正対象物の画像を使用して、そのような正方形の中心に対する対象物の画像を取得するカメラの像面の相対位置及び/又は向きを決定することができる。較正対象物の位置付けは、正方形の中心を、治療室に対する固定位置又は撮像装置のアイソセンタ又はレーザ照明システムによって強調された空間内の点に配置するようなものである。
監視システムを較正することにより、監視システムが、第1のモデル空間内の第1の位置の近傍で観察された対象物のモデルを生成し、第2のモデル空間内の第2の位置の近傍で観察された対象物のモデルを生成することができ、第1及び第2のモデル空間は、第1の位置と第2の位置との間の物理的距離に対応するベクトルだけオフセットされる。
いくつかの実施形態では、患者は、患者を監視すべき2つの位置に位置付けされる間に所定の角度だけ回転され得る。そのようなシステムでは、較正画像の処理は、患者の監視を容易にするために、システムに、同じ所定の角度だけ回転される表面モデルを生成させるようなものであり得る。
本開示の更なる態様は、固定した物理的距離だけ隔てられた第1の位置及び第2の位置に対する患者の位置付けを監視するように動作可能な患者位置付けモニタを較正するための較正対象物を提供する。較正対象物は、較正対象物の表面上に位置付けされた第1組の較正マークと第2組の較正マークとを含むことができる。第1組及び第2組の物理的マークは、患者位置付けモニタによる監視が行われる第1の位置と第2の位置との間の距離に対応する距離だけ互いに物理的に隔てられる。いくつかの実施形態では、第1組の較正マーク及び第2組の較正マークは、互いに対してある角度だけ回転させることができる。いくつかの実施形態では、較正対象物は、一組の放射線不透過性マーカを含み得る。
本開示の範囲内に含まれる更なる詳細及び追加の実施形態が、以下の図面の詳細な説明において説明される。さらに、本開示全体に亘って、システムのプロジェクタはスペックルプロジェクタとして規定されるが、表面上に光のパターンを投影するあらゆるタイプのプロジェクタを使用できることを理解されたい。さらに、本開示は、カメラ監視システムのプロセッサが3Dワイヤメッシュモデルを作成するように構成されることを述べているが、当業者は、例えば点群モデル等の他の適切な3Dモデル生成方法を使用してもよいことを知っており、これは、本開示の範囲内に含まれるであろう。
本開示の態様は、添付の図面と併せて解釈される以下の詳細な説明から最もよく理解され得る。図面は概略図であり、明確化のために単純化されており、それら図面は特許請求の範囲の理解を向上させるための詳細を単に示しており、他の詳細は省略されている。各態様の個々の特徴は、他の態様及び実施形態のいずれか又は全ての特徴とそれぞれ組み合わせることができる。これら及び他の態様、特徴、及び/又は技術的効果は、以下に説明する図を参照して説明され、明らかになるであろう。
放射線治療装置及び患者監視システムの例示的な概略斜視図である。 監視される患者の画像を処理するように構成されたコンピュータの概略ブロック図である。 本開示の一実施形態によるカメラシステムの外観の概略斜視図である。 図3のカメラシステムの切断断面図である。 図3のカメラシステムの下部の横断平面図である。 本開示の第2の実施形態によるカメラシステムの外観の概略斜視図である。 図6のカメラシステムの切断断面図である。 図6のカメラシステムにおける画像センサ及びミラーの配置の概略図である。 カメラ監視システムに使用される運動及びカウチ監視カメラの一例を示す図である。 図9による運動監視カメラの内部部品を示す図である。 図9及び図10による運動監視カメラの内部部品の側面図である。 セットアップ位置にある機械式カウチ上の患者の概略平面図である。 治療位置にある図12の機械式カウチの上の患者の概略平面図である。 本開示の一実施形態に従って較正される監視システムの使用のフロー図である。 本開示の実施形態で使用するための例示的な較正プレートの平面図である。 図12及び図13の機械式カウチ上に位置付けされた図15の例示的な較正プレートの概略平面図である。 組み合わされた放射線治療及び撮像装置の機械式カウチ上の患者の概略平面図である。 図17の組み合わされた放射線治療及び撮像装置の機械式カウチ上に位置付けされた較正プレートの概略平面図である。 ボアベース医療装置に対して取り付けられたカメラ監視システムの一実施形態を示す図である。 ボアベース医療装置に関連した別のセットアップにおけるカメラ監視システムの実施形態を示す図である。 ボアベース医療装置に関連したセットアップにおけるカメラ監視システムの側面図である。 カウチ・マーカを含むボアベース医療装置のカウチを示す図である。 ボアベース医療装置に関連したセットアップにおけるカメラ監視システムの正面図である。
添付の図面に関連して以下に記載される詳細な説明は、様々な構成の説明として意図されている。詳細な説明は、様々な概念の完全な理解を与える目的で特定の詳細を含む。しかしながら、当業者には、これらの概念がこれらの具体的な詳細なしに実施し得ることは明らかであろう。装置及び方法のいくつかの態様は、様々なブロック、機能ユニット、モジュール、構成要素、回路、ステップ、プロセス、アルゴリズム等(総称して「要素」と呼ばれる)等によって説明される。特定の用途、設計上の制約、又は他の理由に応じて、これらの要素は、電子ハードウェア、コンピュータプログラム、又はこれらの任意の組合せを使用して実装され得る。
放射線治療装置と共に使用するための患者位置付け監視システムの使用の概要について最初に図1~4を参照して説明する。
図1は、患者監視システム10の概略斜視図の例示図であり、患者監視システム10において、放射線治療を適用するためのリニア加速器等の治療装置11を見えるように配置された、治療室の天井から吊り下げられた3つの立体カメラのセットが設けられる。図示の例では、治療装置11は、中央ボア12を有する治療装置11である。より詳細に説明するように、監視システム10のカメラは、治療装置11の真正面のセットアップ位置と、ボア12の中心点に中心が置かれた治療位置とを監視するように配置される。
治療装置11に隣接して、治療中に患者がその上に横たわる機械式カウチ13が設けられる。治療装置11及び機械式カウチ13は、コンピュータ(図示せず)の制御下で、機械式カウチの位置を横方向及び縦方向に長手方向に変化させ、カウチの表面に横たわっている患者を治療装置11のボア12の中央に位置付けることができるように配置される。
図2は、図1の患者監視システム10によって取得された画像を処理するためのコンピュータ14の概略ブロック図である。コンピュータがコンピュータ監視システム10の立体カメラから受信した画像を処理するために、コンピュータ14は、ソフトウェアによって複数の機能モジュール15~19に構成される。この例では、機能モジュール15~19は、立体カメラから受信した患者の画像を処理して患者の表面上の点の3D位置測定値を決定するための3D位置決定モジュール15と、3D位置決定モジュール15によって生成された位置データを処理して、そのデータを撮像面の3Dワイヤメッシュモデルに変換するモデル生成モジュール16と、撮像面の3Dワイヤメッシュモデルを記憶するための生成モデルストア17と、以前に生成した3Dワイヤメッシュモデルを記憶するための標的モデルストア18と、生成したモデルを標的モデルと一致させるのに必要な変換を決定するためのマッチングモジュール19と、を含む。
使用中に、この実施形態では、監視システム10の立体カメラは、機械式カウチ13の上に横たわる患者のビデオ画像を取得する。これらのビデオ画像はコンピュータ14に渡され、コンピュータ14は、カメラの相対位置及び向き、並びに焦点距離、レンズ歪み等の内部カメラ特性を特定するデータと共に患者の画像を処理して、生成モデルストア17に記憶される患者の表面のモデルを生成する。この生成されたモデルは、標的モデルストア18に記憶された、以前の治療セッション中に生成された患者の記憶したモデルと比較される。次に、マッチングモジュール19は、生成したモデルを標的モデルと一致させるのに必要な変換を決定する。患者を位置付けするときに、現在のモデル表面と以前のセッションから取得した標的モデル表面との間の差が特定され、これらの表面を整列させるのに必要な位置付け命令が決定されて機械式カウチ13に送られる。その後、治療中に初期セットアップから閾値を超えたずれが識別され得る場合に、コンピュータは、患者が再位置付けされ得るまで治療を中止させるように治療装置11に命令を送信する。
ここで、本発明の一実施形態による立体カメラ20の構成について図3~図5を参照して詳細に説明する。
先ず図3を参照すると、この図は、治療中にカウチに横になっている少なくとも患者の画像を記録し、これらの画像からモデル生成器において3D表面モデルを作成するように構成された3D立体カメラ20の外観の概略斜視図である。立体カメラ20は、この実施形態では上部22及び下部24から構成されるハウジングを含み、ハウジングの下部24は、2つの翼25a、25bの形態で上部22の下で且つその両側に延びる。この実施形態では、ハウジングの上部22は、ハウジングの下部24の上面から3cm上方に延びてもよく、幅3.46cm、その最大点での深さ9.47cmを有してもよい。ハウジングの下部24は、翼25a、25bの最大範囲において、2.9cmの高さ及び20.4cmの幅を有してもよい。
ハウジングの上部22は、カメラ20の中央に設けられており、スペックルプロジェクタを収容するキャビティを規定する。立体カメラ20の切断断面図である図4に最もよく確認されるように、スペックルプロジェクタは、この実施形態では赤外線LED光源を含む光源26と、コリメータ27と、レンズアセンブリ28とを含む。光源26及びコリメータ27は、赤外光のコリメートビームをレンズアセンブリ28に供給するように配置される。レンズアセンブリ28は、光ビームを部分的に遮断する擬似ランダムパターン化透明体を含むことができ、光源26、コリメータ27、及びレンズアセンブリ28が共同して、赤外線光の擬似ランダムパターンをカメラ20の近傍に存在する表面上に投影させる。
図5は、図3の立体カメラシステムの下部24の平面図である。図4の切断側面図のおおよその位置は、図5の線X’-X’’で示されている。
ハウジングは、上部22及び下部24によって規定され、且つハウジング22の下部22の中央に主に位置する回路基板30を含む(図4及び図5参照)。この回路基板30は、ハウジング22、24の中心線に沿ってカメラハウジング22、24の前面に対して直角に位置付けされ、且つハウジング24の下部24の深さ全体に沿って延びて、ハウジング24の下部24によって取り囲まれるキャビティを2つの等しい部分に効果的に分割する。
この実施形態では、回路基板30の部分32が、スペックルプロジェクタの後ろ側でハウジング22の上部22内に上向きに延びている(図4参照)。この実施形態では、カメラシステムを電源に接続し、且つカメラシステムから画像データを送信するためのUSBインターフェイス34が、回路基板30のこの部分32に設けられる。他の実施形態では、回路基板30のサイズをさらに縮小することができる場合に、回路基板30のこの部分を省略することができ、その場合に、カメラのハウジング22、24の全深さを、スペックルプロジェクタをハウジングの上部22に収容するのに十分なサイズに制限するように減らすことができる。
この実施形態では1/3インチCMV300CMOSセンサとして構成され得る第1の画像センサ36及び第2の画像センサ38が、回路基板30上で回路基板30の他端でUSBインターフェイス34に設けられ、第1の画像センサ36及び第2の画像センサ38は、回路基板30のカメラハウジング22、24の前面に向かい合う反対側の面に設けられる(図5参照)。この実施形態に示されている画像センサは同じ回路基板の各面に設けられるが、画像センサは2つの別々の回路基板に取り付けることもできることに留意されたい。こうして、図示の実施形態では、画像センサは同じ回路基板を介して「背中合わせ」に構成されるが、これらの画像センサは2つの別々の回路基板を介して「背中合わせに」配置することもできる。
第1のレンズアセンブリ40は、カメラハウジングの下部24の一方の翼25b内で第1の画像センサ36の前のブラケット42に取り付けられ、第2のレンズアセンブリ44は、カメラハウジングの下部24の他方の翼25aにおいて第2の画像センサ38の前の第2のブラケット46に取り付けられる。第1のレンズアセンブリ40及び第2のレンズアセンブリ44は、回路基板30の反対側の面から離れる方向に垂直に延びている。
第1の画像センサ36は、スペックルプロジェクタによって光のパターンがカメラ20の前の窓47を通して、第1のレンズアセンブリ40及びハウジング24の下部の一端に設けられた角度付きミラー48を介して投影される表面を見るように構成される。この窓47は、図3に示されるように装置の右側に、そして図5に示される装置の平面図の装置の左側に現れる。
第2の画像センサ38は、スペックルプロジェクタによって光のパターンが第2の窓を通して、第2のレンズアセンブリ44及びハウジング24の下部の反対側の端部に設けられた第2の角度付きミラー52を介して投影される表面を見るように構成される。この第2の窓50は、図3に示されるように装置の左側に、そして図5の平面図に示されるように装置の右側に現れる。
この実施形態では、装置に含まれるミラー48、52は、赤外線の反射率を有するCOMAR25MP16ミラー等の市販の15×25mmミラーである。ミラー48、52は、これらミラーの中心点同士の間の距離が15.154cmとなるように、ハウジングの下部24内に配置される。ミラー48、52及び画像センサ36、38の中心点は全て、回路基板30の平坦面に垂直な軸線に沿って整列している。この実施形態では1.6mmの回路基板30の厚さ、回路基板の周りにミラー48、52の対称的な配置を可能にし、画像センサ36、38のそれぞれの中心は、それら画像センサが見るミラー48、52の中心から7.49cmとされる。
この実施形態では、ミラー48、52はそれぞれ、回路基板30の表面に対して43.5°の角度をなしている。画像センサ36、38及びミラー48、52のこの配置によって、図5においてA及びBとして示される位置で画像センサ36、38の有効像面を生じさせ、像面がハウジング24の外側に位置し、互いに対して6°だけ(すなわち、向きの相対的な変化が、ミラーへの入射角とミラーからの反射角との両方に影響を与えるので、2つのミラーの間で90°から3°の2倍)傾けられる(toed)。
上述したカメラ設計は、従来の設計と比較して、患者監視に必要なカメラのサイズを大幅に縮小させる。カメラシステムの全幅は、画像センサ36、38によって得られる画像が十分に異なるように画像センサ36、38の像面を十分に分離させる必要があるという要件によって大きく左右され、患者とカメラシステムとの間の距離及び画像センサ36、38の画素密度が与えられると、3次元位置測定を所望の精度レベルで行うことができる。
回路基板の反対側の面に画像センサ36、38を設け、且つミラー48、52での反射を見ることによって画像センサが対象物を見ることによって、上述した設計は、レンズアセンブリ40、44がハウジング内に位置付けされる配置を容易にする。また、レンズアセンブリ40、44の長さも、画像センサ36、38の像面の有効位置A、Bを分離するように作用する物理的距離の一部を形成する。
回路基板30、画像センサ36、38、及びミラー48、52の対称配置もまた、どちらかのセンサ36、38が他方よりも多少歪んでいる投影を見ることなしに、画像センサ36、38が見たときの投影された光のパターンが実質的に同様になるように、スペックルプロジェクタと装置の中心との整列を容易にし、これは画像センサ36、38によって取得した画像内の一致点の識別を容易にする。
図6は、本発明の第2の実施形態による3D立体カメラ100の概略斜視図である。この実施形態の立体カメラ100は、プロジェクタ110がハウジング112の上部内に収容されるという点で、前の実施形態の立体カメラ20と類似している。プロジェクタ110は、前の実施形態のプロジェクタ26、27、28と類似している。前の実施形態と同様に、ハウジング114の下部は、ハウジング112の上部の下側に突き出し、上部の両側に延びる。ハウジングの下部114は、前の実施形態のハウジングと比較してより大きな深さを有するが、ハウジング112の上部の遥か後ろまで延びていない。第1及び第2の窓116、118が、ハウジング114の下部の前において、プロジェクタ110の下に位置するハウジングの中心部から離れたハウジングの両端部に設けられる。好ましくは、このタイプの運動監視カメラは、対象物内の異なる対象物同士の間の衝突が起こり得る治療室においてセットアップするのに特に適している。このカメラは、この構造によって非常に広い視野をカバーできるため、衝突の可能性があるかどうかを監視するのに特に適している。
図7に示されるように、回路基板120が、6つのレンズ構成から構成されるセットと共にハウジングの下部114内に収容され、そのうちの3つ121、122、123が図7に示されている。この実施形態では、ハウジングの下部114の深さが前の実施形態よりも大きいので、ハウジングの下部114は、回路基板120の一部がプロジェクタ110の背後に突出することなく、回路基板120の全体を収容することができるので、プロジェクタ110を収容するのに必要なサイズを超えないようにカメラの厚さを小さくすることができる。レンズ構成121、122、123はブラケット124によって定位置に保持される。3つの更なるレンズ構成125、126、127の対称配置(図7では見えない)が、回路基板120の反対側にある別のブラケット(これも図7では見えない)によって定位置に保持される。
前の実施形態では、第1及び第2の画像センサ36、38を有するカメラ20について説明した。この実施形態では、1対の画像センサ36、38を有するのではなく、6つの画像センサ130~135が回路基板120上に設けられており、これにより、特定のミラー配置と共に、この実施形態の立体カメラ100が前の実施形態のカメラ20よりも広角にすることができる。図8に示されるように、画像センサ130~135は、3対の画像センサ130/131、132/133、134/135として回路基板120上に設けられており、各対の画像センサは回路基板12の反対側の面に設けられる。レンズ構成121~123、125~127が、各画像センサ130~135の前に設けられる。画像センサ130~135は、3つのミラー150/152/154、151/153/154から構成される2セットで配置された6つのミラー150~155のうちの1つを検査する(review)ように配置され、ここで、各セットのミラーは菱形台形の表面上に配置されており、ミラー面は回路基板120の向きに対して約45°の角度で傾斜している。
このようにして、中央の1対の画像センサ132、133によって見られるミラー152、153には、画像センサ36、38が前の実施形態においてレンズ構成40、44及びミラー48、52を介して対象物を見るのと同様の方法で、中央のレンズ構成126、122を介して画像が提示される。上側の1対の画像センサ130、131には、上側の1対のレンズ構成125、121及び菱形台形ミラー装置の上側ミラー面150、151を介して画像が提示され、下側の1対の画像センサ134、135には、下側の1対のレンズ構成127、123及びミラー装置の下側ミラー面154、155を介して画像が提示される。ミラー装置のミラー面150/152/154、151/153/154がそれぞれ互いに対して角度が付けられているので、これは、上側の画像センサ130、131及び下側の画像センサ134、135の有効像面を中央の1対の画像センサ132、133の有効像面に対して向き合わせする効果を有し、こうして、画像センサ130~135の合成された視野角は、前の実施形態における1対の画像センサ36、38よりも大きく、従って、カメラは、前の実施形態のカメラよりも患者の大部分を見ることができる。
上述した実施形態では画像センサ及びミラーの特定の配置について説明したが、他の実施形態では、装置のサイズの縮小を達成するために代替の配置を潜在的に利用することができることが理解されよう。こうして、例えば単一のミラーを介して画像を取得するのではなく、複数のミラーの配置を介して画像を潜在的に取得することができる。さらに、画像センサ、レンズアセンブリ、及びミラーを対称的に配置するのではなく、非対称的配置を利用することができることが理解されよう。
第2の実施形態では、単一のプロジェクタ110を有するカメラについて説明したが、他の実施形態では、光のパターンが投影されるボリュームを増大させることが望まれる場合に、追加のプロジェクタを設けることができる。そのようなボリュームは、レンズ構成121~123、125~127及びミラー150~155を介して1つ又は複数の画像センサ130~135によって見られた。
第2の実施形態では、1対の画像センサを有するカメラよりも大きな視野を有することを可能にする3対の画像センサを有するカメラについて説明したが、同様の利点が、2対の画像センサ、あるいは3対以上の画像センサを利用して達成される得られることが理解されよう。
異なる実施形態の説明から明らかになるように、本明細書に記載のカメラ監視システムでは、複数の異なるカメラを使用することができる。1つ又は複数のカメラは、前の段落及び/又は以下の段落で説明するように構成することができる。
従って、説明全体を通して、患者が治療及び/又は走査の前にカウチに位置付けされるときに、少なくとも患者を監視するために利用されるセットアップ・カメラが規定されることに留意されたい。
さらに、カメラ監視システムは、治療及び/又は走査中に患者を監視するように構成された1つ又は複数の運動監視カメラを含むことができる。この又はこれらの運動監視カメラは、説明全体を通して、「運動監視カメラ」及び/又は「治療カメラ」及び/又は「中央に位置付けされたカメラ」として規定される。中央に位置付けされる規定は、カメラを中央に位置付けするという理解に限定するものではない。本明細書に記載の全ての実施形態に共通するのは、運動監視カメラが治療及び/又は走査中に視野を患者の標的領域に向き合わせするように構成することである。しかしながら、明らかなように、これ又はこれらの監視カメラは、治療室/走査のセットアップにおいて異なる構成に位置付けすることができる。
ここで図9~図11を参照すると、運動監視カメラ400の前述した以外の他の例が説明されている。運動監視カメラ400は、医療装置内の少なくとも患者の表面及び/又は較正対象物に面するように向き合せされるように構成された前部401を含む。前部401は、実質的に5つの部分を含み、中央部分403が、カメラ400内に、カメラの較正に使用するために構成された小型(compact)プロジェクタを収容するように構成される。小型プロジェクタは、垂直共振器型面発光レーザ(VCSEL)等のレンズ-レンズ半導体ソリューションとして構成することができる。これらのタイプのレーザダイオードは、上面から垂直にアレンジされたレーザビーム放射を含む。較正のためにVCSEL半導体LEDを使用すると、よりコンパクトなカメラ構造が可能になり、プロジェクタのLEDが、そのような統合が可能でない従来のプロジェクタとは異なり、同じPCB上でわずか数mm離れて存在するように構成される。こうして、少なくとも図9~図11に示されるカメラ構造では、カメラの高さを最小限に抑え、こうしてボアベース医療装置の少なくともボア内に挿入し得る非常に小型のカメラを可能にする。
さらに、図9に示されるように、前部401は中央から左部分402及び右部分404を含むように構成され、左部分402及び右部分404は、カメラ内部に一組のミラーを含む。左部分402及び右部分404はそれぞれ、カメラ内部の2つの前面カバー405、406によって覆われている空間によって、組み合わされたプロジェクタ及び較正ユニットを含む中央部分403から隔てられている。一般に、カメラの別の作動距離を提供するためにミラーのみが互いから隔てられる必要があるという事実のために、本明細書に記載されるようなカメラの構造によって、カメラの容易な再構成が可能になる。こうして、カメラの中央に位置付け及び構造を有する回路基板及びレンズは、作動距離の変更が好ましい場合に、ミラーの移動のみが必要とされる一方で、それらの特徴を適所に残すことを可能にする。
ここで図10を参照すると、図9の運動監視カメラの内部部品がより詳細に示されている。図3~図5及び図6~図8の実施形態に対応して見られるように、カメラは一般に、左部分402に第1のミラー407を含み、それに対応して右部分404に第2のミラー410を含む。中央部分は、第1のレンズ408及び第2のレンズ409を含み、第1及び第2のレンズ408、409は、PCB430の両側に位置付けされる。PCB430は、図5及び図8に関連して説明したように配置されるように構成される。しかしながら、図10に示される実施形態では、更なるプロジェクタPCB411が示される。このプロジェクタPCB411はPCB430に接続され、プロジェクタPCBは低出力干渉パターンを生成するように構成されたプロジェクタを含む。図に確認されるように、プロジェクタPCB411は、カメラPCB430の平面に対して略垂直に向き合わせされる。プロジェクタPCB411のプロジェクタは、撮像される患者の表面等の対象物に干渉パターンを実質的に向き合わせするように構成される。こうして、図示されるように、プロジェクタは、本明細書で説明した実施形態に関して前に規定したように、下部24に実質的に一体化される。こうして、図9~図11に示される実施形態では、本明細書に記載の他の実施形態のように上部を含まない。これにより、実質的により小型のカメラが可能になる。
図11を参照すると、図9及び図10の運動監視カメラの側面図が示されている。図11に示され且つ前述したように、このタイプの運動監視カメラは、プロジェクタPCB411を有する一体型プロジェクタを用いて構成される。さらに、この運動監視カメラは、ミラー及び画像センサの互いに対する内部構造及び向きにより、ボアベース医療装置での使用に最適化される。すなわち、本明細書に記載の実施形態で説明されるように、監視カメラがボアベースのシステム内に取り付けられるときに、カメラの内側のミラーは、カメラが取り付けられるボアの表面に対して内向き且つ下向きに向くように構成される。こうして、ミラー407、410は、図10に示されるように、例えばカメラPCB430の平面によって規定されるカメラの中心を向くように傾斜している。同時に、図11により正確に示されるように、ミラー410(及びミラー407、図示せず)は、カメラが取り付けられるか、又は少なくとも当接するボアベースの装置の表面に対して下方向を向いている。このようなミラーの向きは、カメラによって取得した画像において、画像を回転させて見えるようにする。しかしながら、これらのタイプの監視カメラによって記録された画像のそのような回転は、実質的に回転するセンサを含むように構成されるカメラによって回避される。これは図11により詳細に示されており、ミラー410及びセンサ412は、ミラー410及びセンサ412が略垂直な視平面を含むように傾斜していることが分かる。換言すれば、3Dカメラは、カメラの上部がボアの内側上面と実質的に整列するように、ボアの内側上面に沿ってボアベース医療装置のボアに挿入されるように構成される。カメラは、第1のミラー及び第2のミラーがカメラの上部からカメラの底部に向かう下向きに傾斜しており、さらに第1及び第2のミラーがカメラの中心に向けて内向きに傾斜しており、さらに、第1及び第2のセンサから略垂直な視野平面を提供するように、第1及び第2のセンサが第1及び第2のミラーに対して傾斜しているように構成される。
本明細書に記載の実施形態に鑑みて、他のタイプのカメラをカメラ監視システムに使用することもできる。すなわち、本明細書に記載の実施形態では、セットアップ段階中に患者の位置付けを監視するために1つ又は複数のセットアップ・カメラも使用される。これらのセットアップ・カメラタイプのカメラは、それらセットアップ・カメラが患者とカメラとの間の距離として規定される異なる作動距離で構成され得るという点で、運動監視カメラとは異なり得る。あるいはまた、同じタイプのカメラ構造をセットアップ・カメラと監視カメラとの両方に使用することができる。
明らかになるように、第3のタイプのカメラは、カメラ監視システムの一部を形成してもよい。この第3のタイプのカメラ、すなわちカウチ監視カメラは、第1のタイプのセットアップ・カメラ及び第2のタイプの運動監視カメラとは僅かに異なるように構成され得る。すなわち、第3のタイプのカメラは、治療/走査セットアップにおいて、カウチ又はカウチに取り付けられた一意に識別可能な特徴をカバーする視野を有するように主に構成及び配置される。さらに、カウチ監視カメラは、カウチ監視カメラの視野内に配置された対象物を照明するように構成された照明体を用いて構成することができる。
特に、カウチ監視カメラは、一実施形態では、図21Aに関して説明するように、カウチ上の再帰反射マーカを照らすための近赤外LEDをオプションで含む立体視カメラとすることができる。
あるいはまた、カウチに配置されたマーカはアクティブなマーカであり得、この実施形態では、マーカはそれ自体を照らすので、カウチ監視カメラからの照明は必要とされない。
代替実施形態では、カウチは、その上に一意に規定される特徴を有する構造及び/又は物体で構成することができ、図21に関して説明するように、カウチ監視カメラを介した特徴の追跡を使用してカウチの動きを追跡することができる。カウチの位置は、カウチ較正中に又はカウチ制御システム内のフィードバック機構を介して決定されたカウチ位置を思い出すことによって決定してもよい。従って、一実施形態では、セットアップ・カメラ位置と治療位置との間の、任意の潜在的なカウチ移動オフセットに関連する一組の記憶されたオフセット値は、カウチが、カウチの移動中に経験し易いことが知られているあらゆるたるみ/ドリフトを考慮するために較正セットアップで利用され得る。別のオプションは、カウチによって提供されるフィードバック信号を利用して、カウチによるあらゆるオフセットを調整することであり得る。
カウチ監視カメラの更なる詳細及び使用は、図19~図22の説明において明らかになるであろう。
ここで図12~図16を参照すると、本明細書に記載のカメラ監視システムの較正の例示的実施形態がここに説明される。最初に図12を参照すると、治療装置11のボア12の前方に配置されたセットアップ位置にある機械式カウチ13上の患者220の概略平面図が示されている。図13は、図12の機械式カウチ13上の治療位置にある患者220の概略平面図である。
図に示される実施形態では、レーザ照明システム(図示せず)は、患者220の位置付けを容易にするために、第1のレーザ光平面(plane)222、第2のレーザ光平面224、及び第3のレーザ光平面(第3の光平面は図示せず)を投影する。第1の光平面222は、ある軸線に沿って治療室のアイソセンタ226(すなわち、治療装置11が放射線ビームを向けるように配置される空間内の点)と整列され、その軸線に沿って機械式カウチ13は、治療装置11のボア12内に入るように構成される。第2の光平面224は、第1の光平面222に対して垂直に配置され、第1の光平面222と治療室のアイソセンタ226の前方の一定距離の点228で交差するように配置される。第3の光平面(図示せず)は、治療室のアイソセンタ226の高さに対応するレベルで第1及び第2のレーザ光平面に対して互いに垂直になるように投影される。
この例における患者監視システム10は、3つのカメラ230、232、234を含む。カメラ230、232、234は、中央に位置付けされたカメラ232が治療装置11のボア12内を覗くように配置されるが、2つの外側カメラ230、234は、治療装置11の前方のセットアップ領域を見るように配置される。セットアップ領域は、レーザ光平面222、224の交差部によって強調された点228を実質的に中心としている。カメラの視野のアウトラインは、カメラ230、232、234から出る破線によって図12及び図13に示されている。換言すれば、2つのカメラ234、230は、一組のセットアップ・カメラ230、234を構成しており、これらセットアップ・カメラは、患者220をカウチ13上に位置付けする間に、患者220の画像を記録するように構成される。
使用時には、最初に、患者220は、図12に示されるセットアップ位置にある機械的カウチ13上で機械的カウチ13と共に位置付けされる。このセットアップ位置では、患者220は、照射される患者の部分(患者の標的領域とも呼ばれる)がレーザ照明システムによって強調された点228に位置するように位置付けされる。セットアップ位置では、患者220の表面は、患者監視システム10の2つの外側カメラ230、234(すなわち、2つのセットアップ・カメラ)によって見られ、それによって患者監視システム(本開示を通してカメラ監視システム又は単に監視システムとも呼ばれる)が、プロセッサを介して患者220のモデル表面を生成して、以前に記憶したモデルと比較することができ、それによって生成した表面と記憶したモデル表面との間の差異を識別し、患者220の位置付けは、患者220の表面が記憶したモデルによって規定された表面と一致するように調整される。換言すれば、セットアップ・カメラ230、234は、カウチ上に横たわっている患者220の画像を記録し、これらの画像を患者監視プロセッサに送信する。プロセッサは、患者のコンピュータ表面モデルを生成するように構成され、そのコンピュータ表面モデルは、同じ患者の以前のコンピュータモデルと比較される。記憶したモデルと生成したモデルとの間に何らかのずれが存在する場合に、臨床医に通知され、患者は現在カウチに横たわっているので、患者の実際のカウチ位置とその後に生成されたコンピュータ表面モデルの更新とが、記憶したコンピュータモデルと一致するように患者の位置を変えるべきである。
続いて、治療中に、機械式カウチ13は、図13に示される位置に移動されるように、一定量だけ並進させられる。この位置では、患者監視システム10の2つの外側カメラ230、234(すなわち、詳細な説明全体に亘ってセットアップ・カメラとも呼ばれる)によって以前見た患者220の表面の部分(すなわち、標的領域)が、患者監視システム10の中央カメラ232(詳細な説明全体に亘って運動監視カメラとも呼ばれる)によって見られるようになる。これにより、患者220の表面のモデルを生成して、記憶したモデルと比較して、予測位置からの患者220の位置付けのずれを検出することが可能になる。
こうして、換言すれば、詳細な説明全体に亘ってカメラ監視システム又は患者監視システムとしても規定される監視システムは、放射線治療システム、CTスキャナ、MRスキャナ、又はこれらの組合せ等の医療装置の使用中のカウチに横になっている患者の少なくとも標的領域の画像を記録するように構成された少なくとも1つの運動監視カメラを有する。さらに、監視システムは、治療又は走査の前に患者をカウチに位置付けする間に、少なくとも同じ標的領域の画像を記録するように構成された少なくとも1つのセットアップ・カメラを含む。
理論的には、機械式カウチ13が、レーザ照明システム228によって強調された空間内の点と治療室のアイソセンタ226との間の固定距離に対応する一定量だけ並進するので、カウチ13の位置を変えることによって、レーザ照明システムによって強調された空間228内の点に以前に位置していた患者の部分を治療室のアイソセンタ226に位置させ、患者の標的領域が治療装置11によって照射されることになる。しかしながら、実際には、機械的カウチは、ある程度のたるみ及び他の機械的不正確性の影響を受ける。このため、機械式カウチ13の位置付け精度を頻繁に確認する必要がある。しかしながら、そうであっても、これらの確認の間にエラーが発生したときに患者220を正しく位置付けできない可能性がある。
図示された患者監視システム10は、機械式カウチ13による位置付けの際の物理的及び機械的エラーによって生じる潜在的なずれを検出するための手段を提供する。そうするために、患者220がセットアップ位置にあり、且つ治療位置が一致しているときに、患者の表面のモデルを生成する必要がある。特に、外側カメラ230、234からの画像に基づいて生成したモデルは、中央カメラ232からの画像に基づいて生成したモデルと一致させる必要がある。この一貫性は、患者監視システムを較正することによって達成でき、セットアップ位置及び治療位置に位置する患者の画像に基づいて生成されたモデルは、これら2つの位置の間の差に対応する並進によって互いに対してオフセットされる2つのモデル空間において生成される。
この一貫性を達成する監視システム10を較正する方法を、図14~図16を参照して説明する。
最初に図14を参照すると、この図は本開示の実施形態に従って較正される監視システム10の使用のフロー図である。最初のステップ(S1)において、レーザ照明システムは、治療室のアイソセンタ226の位置と治療室のアイソセンタ226から設定距離だけ離れた位置にある固定位置228とを特定するように設定される。
典型的には、これは二段階プロセスで達成されるであろう。最初に、治療室のアイソセンタ226の位置の特定は、この特許の導入部で説明したような従来の技術を使用して確立することができ、次にレーザ照明システムは、治療室のアイソセンタ226を通過する光の面222を投影するように設定される。好ましくは、この光平面222は、治療室カウチ13がそれに沿って移動するように配置される軸線と整列している。次に、第2のレーザ光の平面224を治療室のアイソセンタ226の特定された部分から一定の距離だけ照射するように設定することができ、第3の平面の光(図示せず)は、第1及び第2の平面に対して互いに垂直となるように設定される。
レーザ照明システムが、選択された固定点228を通過する光平面222、224を治療室のアイソセンタ26からある距離だけ投影するようにレーザ照明システムを調整すると、光平面222の一方も治療室のアイソセンタ226自体を通過し、この実施形態では較正プレートの形態である較正対象物は、機械式カウチ13上に配置され、且つレーザ照明システムによって投影されるレーザ光の平面222、224と整列される(S2)。
図15は、本明細書に記載の監視システムの実施形態で使用するための例示的な較正プレート250の平面図である。
一実施形態では、較正対象物250は、高精度パターンの較正マークがその上に機械加工又は印刷されている、アルミニウム等の堅い剛性材料で作られている長方形の較正プレート250の形態である。この実施形態では、較正マークは2組の較正マーク252、254を含み、1組は較正プレート250の両端にあり、各セットの較正マーク252、54は円のアレイを含む。図15に示されるように、2組の較正マークは、較正プレート250の反対側の端部領域を覆うように構成され、且つ各較正マーク領域の中央領域を含むように構成される。各中央領域には、4つの円255~262が規定され、4つの円は、較正マーク領域の他の円よりも僅かに大きい半径で構成される。較正マーク252、254の各セット内のより大きな円255~258、259~262の中心は、正方形の角部に対応する。
加えて、較正マークはまた、較正プレート250の表面上にエッチングされた一組の線265~267を含み、これらの線は、較正プレートの中心に沿って延びる中心線265と、中心線265に対して垂直な2本の交差線266、267とを含む。2本の交差線266、267は正方形の中心に対応する位置で中心線265と交差し、その角部は較正マークのより大きい円255~258、259、262の中心に対応する。中心線265と2本の交差線266、267との間の交点同士の間の距離は、治療室のアイソセンタ226とレーザ照射システムによって投影される光平面222、224の交差点228との間のオフセットに対応する。
図16は、図12及び図13の治療システムの機械式カウチ13上に位置付けされた例示的な較正プレート250の概略平面図である。こうして、図16は、治療位置にあるカウチ13をレーザ強調表示システムからのレーザ光平面222、224と共に示しており、レーザ強調表示システムは、較正プレート250の中心線265及び交差線267のうちの1つと整列している。交差線266、267と中心線265との交点同士の間の距離の対応により、レーザ光平面222、224と治療室のアイソセンタ226との交点によって強調された点228間の距離を用いて、交差線267及び中心線265をレーザ光平面222、224と整列させる。較正プレート250が平らで、第3のレーザ光平面のレーザ光がスキミングされると、較正プレート250の表面は、他方の交差線266と中心線265との間の交点を治療室のアイソセンタ 226に位置付けされる。
較正プレート250をこの位置(すなわち、図16に示されるような治療位置)に配置した状態で、2つの較正セットの較正マーク252、254の画像を監視システム10のカメラ230~234によって取り込むことができる(S3)。より具体的には、治療室のアイソセンタ226の近傍に配置された一組の較正マーク252の画像は、監視システム10の中央カメラ232によって取り込まれ、レーザ照明面222、224の交差点228の近傍に配置された一組の較正マーク254の画像は、監視システム10の他の2つのカメラ230、234によって取り込まれる。
次に、カメラ230~234によって取得した画像を使用して、監視システム10を較正することができる(S4)。
これを達成するために、最初に、カメラ230~234によって取り込まれた画像は、画像内に現れるように、較正プレート250上のより大きな円255~258、259~262の位置を画像内で識別するように処理される。これは、従来の技術を使用して自動的に行われるか、あるいはユーザが4つの円を手動で識別することができる。
円255~258、259~262の相対位置から、各画像について、識別された円の推定中心を説明する第1の射影変換が決定され、推定中心は、較正プレート250及び画像を取得するカメラ230、232、234の相対的な向きによる投影され歪んだ正方形の角部を規定する。
次に、この計算された変換は、カメラ230、232、234によって撮像される較正領域252、254内の各円の推定三次元座標中心を決定するために利用される。次に、これら計算された座標中心を使用して、画像を取得した位置に対する較正プレート250の表面に対応する平面の推定位置及び向きを特定する。
各カメラ230、232、234によって取得された画像内の各画素が、次に処理されて、円の中心の推定位置を含む平面内で各画素がどこに対応するかが決定される。次に、推定された円の中心が順番に処理され、計算された平面内の各円の中心から所定の距離内にある点に対応する画像内の画素が識別される。これらの領域は、較正プレート250上に現れる円の半径より僅かに大きい距離まで、較正プレート250の平面内にある点を包含するように選択することができる。こうして、このようにして、各円について、推定された中心位置を中心とし、問題の円の外縁を僅かに超えて延びるプレートの部分の出現に対応する1組の画素が識別される。各組の各画素のグレースケール値は、円の中心の座標の改善された推定値を決定するために利用される。各画素がセット内で表す較正プレートの表面を含む推定平面内の点の位置に対するx座標及びy座標が決定される。次に、これらの計算されたx座標及びy座標を利用して、円の中心のx座標及びy座標の改善された推定値を推定する。
次に、新しく推定された円の中心に対応する画像内の点の座標が、これらのx、y座標から決定され、次に、より大きい円255~258、259~262の中心のこれらの更新された推定値を利用して、較正プレート250の位置及び向きを説明するためのより正確な推定変換を決定する。次に、実際の円の中心位置の正確な推定がなされ、較正プレート250の相対的な向きを説明するのに必要な真の(すなわち、最終的な)変換が決定されるまで、上記プロセスを繰り返すことができる。
次に、最終的に決定された変換を使用して、カメラ230~234によって取り込まれた画像に現れる較正プレート250上の全ての円の予想位置が計算される。各円について、円の中心までの予め設定された距離内の点に対応する一組の画素が識別され、次に、画像のこれらの部分のグレースケール値を使用して改善された円の中心座標が計算される。
カメラ230、232、234によって見たときの、較正プレート250上の円の表現のそれぞれの全ての中心の座標が計算されると、治療室のアイソセンタ226に対する中央カメラ232の相対的な向き、及びレーザ光平面222、224の交差部228によって強調された空間内の点に対する他のカメラ230、234の相対的な向きは、画像内のこれらの点の相対位置から計算され、較正シートの表面上のこれらの円の既知の相対位置は、“A Versatile Camera Calibration Technique for High Accuracy 3D Machine Vision Metrology Using Off the Shelf TV Camera and Lenses,”Roger Tsai, IEEE Journal of Robotics and Automation, Vol. Ra-3, No.4 August 1987に詳細に説明されており、この文献は参照により本明細書に組み込まれる。さらに、較正プレート250上のマークに対応する個々の画像内の点の相対位置から、カメラ画像内の焦点距離及び半径方向の歪み等の内部カメラパラメータも決定することができる。
治療室のアイソセンタ226とレーザ光平面222、224の交差部によって強調される位置228との間の距離に対応する一定距離だけ分離された、較正プレート250上の2組の較正マーク252、254に基づいて監視システムを較正することにより、中央カメラ232及び外側の2つのカメラ230、234によって生成されたモデルのモデル空間は、これら2つの点226、228の間の物理的距離に対応する並進によってオフセットするように配置される。
続いて、使用時に、患者220が機械的カウチ13上で図12に示されるようなセットアップ位置にある機械的カウチ13に位置付けされると、患者20の部分のモデルが、レーザ光平面222、224の交差部228によって強調された空間内の点に対するカメラ230、34の相対位置を特定する較正データを使用して、監視システム10の外側の2つのカメラ230、234によって取得された画像に基づいて生成され得る(S5)。
次に、患者が図13に示されるような治療位置に再位置付けされると(S6)、患者220のこの部分が監視システム10の中央カメラ232によって撮像され、患者220の撮像部分のモデルを生成するのが可能になる(S7)。中央カメラ232によって取得した画像を使用して生成したモデルの場合に、そのようなモデルは、レーザ光平面222、224の交差部228によって強調された空間内の点に対する中央カメラ232の相対位置ではなく、治療室のアイソセンタ226に対する中央カメラ232の相対位置を特定する較正データを利用して生成される。
理論的には、機械式カウチ13の物理的並進が、強調表示されたセットアップ位置228と治療室のアイソセンタ226との間のオフセットに正確に対応する場合に、外側の2つのカメラ230、234及び中央カメラ232からの画像を処理することによって生成されるモデルが対応しているはずである。何らかの差異が生じる場合に、これは、機械式カウチ13の位置付け誤差、又は患者220がセットアップ位置から治療位置に移動している間に患者220が移動した場合の位置付け誤差のいずれかを特定する。
このように、監視システム10の較正によって、監視システム10が機械式カウチ13の移動又は患者の移動の不正確さに起因して生じ得る患者の位置付けにおけるエラーを特定することが可能になる。さらに、このようなエラーの検出は、セットアップ位置と治療位置との間の患者220の移動中に、監視システム10が患者を観察下におく必要なしに達成される。
上記のアプローチは、画像データの処理を簡素化し、異なる位置にあるモデルを比較するのを可能にする。監視システム10のカメラ230、232、234からの画像を処理する場合に、外側の2つのカメラ230、234、あるいは中央カメラ232の画像からモデルを生成するときに患者220が異なる位置にいるという事実を考慮する必要はない。外側の2つのカメラ230、234及び中央カメラ232によって生成されたモデル空間内のモデルの座標は、治療室のアイソセンタ226とレーザ照明システムによって強調された空間228内の点との間の距離を自動的に考慮する。
ここで、本発明による較正方法の使用の更なる例を説明する。
セットアップ位置と治療位置との間の患者220の動きを監視するための監視システム10を較正するのに適していることに加えて、上記の方法は、患者が複数の治療位置の間で移動する他の状況における患者の動きを監視するために適合され得る。
図17及び図18は、組み合わされた放射線治療及び撮像装置の概略平面図である。図17では、組み合わされた放射線治療及び撮像装置を治療位置にある機械式カウチ13上の患者220に使用する状態を示しているが、図18では、機械式カウチ13は、患者監視システムを較正するための較正プレート350を支持する別の向きで示している。
この例では、第1の監視システム380は、患者220が撮像装置384、例えばCT又はMRIスキャナ等のボア382内に位置するときに、患者220を監視するように構成される。一方、第2の監視システム386は、患者220を放射線治療マシン388によって照射するときに患者220を監視するように構成される。この例では、放射線治療マシン388は、治療室アイソセンタ392の周りを回転するように構成されるガントリ390を有し、このガントリ390は、(この例ではロボットアーム上の機械式カウチである)機械式カウチ13の移動と共に、複数の異なる角度及び向きからの患者220の照射を容易にする。
使用中に、機械式カウチ13が(図17に図示される)治療位置に向き合わせされると、放射線は患者の標的領域に対応する位置にある治療室のアイソセンタ392に向けられる。換言すれば、放射線療法で治療すべき患者の標的領域は、標的領域のみが放射線に曝されるのを確実にするように、治療室のアイソセンタに位置付けされるように構成される。患者220の内部の解剖学的構造の画像を取得して標的領域を特定するために、定期的に、患者のこの部分を撮像装置384のボア382の中心の固定位置394に配置するように機械式カウチ13を回転及び並進させる。図示の例では、この第2の固定位置394は、放射線治療マシン388のガントリ390が回転するように配置される軸線に対して直角な平面に沿って治療室のアイソセンタ392から変位している。
患者220の位置付けを監視するために監視装置380、386を較正するときに、図18に示されるように機械式カウチ13を位置付けすることができ、較正プレート350を機械式カウチ13の上に配置することができ、それによって較正マークを有する
(bearing)較正プレート350の中心領域は、治療室のアイソセンタ392及び撮像装置384のボア382の中心394にそれぞれ配置される。これは、治療室のアイソセンタ392と撮像装置384のボア382の中心394との間の既知の固定距離だけ較正マークを互いに分離させ、且つ治療室のアイソセンタ392及び撮像装置384のボア382の中心394を強調するレーザ照明システム(図示せず)からのレーザ光の投影に基づいて較正プレート350を整列させることによって達成することができる。
次に、第1の監視システム380及び第2の監視システム386によって、較正マークのパターン画像を取得することができ、次に、撮像装置384のボア382の中心394及び治療室のアイソセンタ392に対する第1及び第2の監視システム380、386のカメラの像面の相対位置は、監視システム380、386によって取り込まれた較正マークの画像に基づいて決定することができる。
図15に示されるものと同様のマークを有する較正プレート350の場合に、監視システムのカメラの位置及び向きは、正方形の角部に対応する一組の円255~258、259~262の識別に基づいて決定され、システムの較正は、これから説明するように、撮像位置と治療位置との間で患者220を90°だけ回転するのを考慮するようなものであり得る。
図18に示されるように位置付けされると、第1組の較正マーク252の画像が第1の監視システム380によって取得され、第2組の較正マーク254の画像が第2の監視システム386によって取得される。次に、第1の監視システム380によって取得された第1組の較正マーク252の画像が、正方形の角部であるとして第1組の較正マーク252内の特定の円255~258の識別、例えば正方形の左上角部として円255、正方形の右上角部として円256、正方形の左下角部として円257、正方形の右下角部として円258を特定することに基づいて処理される。次に、第2の監視システム386によって取得された第2組の較正マーク254の画像は、正方形の角部を規定する第2組の較正マーク254内の特定の円259~262の識別、例えば正方形の左上角部として円261、正方形の右上角部として円259、正方形の左下角部として円262、正方形の右下角部として円260を特定することに基づいて処理される。第1組の較正マーク252及び第2組の較正マーク254からの特定の円を互いに90°だけ回転した正方形の角部として特定することによって、これにより、第1及び第2の監視システム380、386のモデル空間が、90°だけ回転されるだけでなく、治療室のアイソセンタ392と撮像装置384のボア382の中心394との間の距離に対応する距離だけ並進されるように、第1及び第2の監視システム380、386が較正され、こうして、2つの監視システムによって生成されたモデル同士の間の比較が容易になる。
監視システム及び較正方法の上記の2つの特定の例について説明してきたが、監視システム及び較正方法の様々な詳細が変更され得ることが理解されるであろう。
こうして、例えば第2の記載例では、撮像装置384及び治療装置388は互いに直角であると記載されており、システムは、正方形の角部を含む特定の円の識別によって撮像位置と治療位置との間の患者の回転を説明するものとして記載されている。他の実施形態では、他の回転角度は、較正マークのパターンを較正プレート250に設けることによって考慮され得、いくつかのマークは、2つの異なる領域、つまり、治療室のアイソセンタ及び撮像アイソセンタの近傍に位置する領域のマークが、治療位置と撮像位置との間の固定した回転角に対応する角度で傾斜されるように、所定の角度だけ回転され、こうして、較正時に監視システムはモデル空間内に同じ角度だけ回転したモデルを生成する。
上述した実施形態では特定のパターンの較正マークについて説明したが、他の実施形態では他のパターンを使用して監視システムのカメラの相対位置及び向きを決定することができることをさらに理解されよう。
上述した例では長方形の較正プレート250の形態の較正対象物について説明したが、他の形態の較正対象物を使用することもできることも理解されよう。こうして、例えば、形状が長方形ではなく、較正対象物は、ロッドによって接続された較正マークを有する2つの平面領域を含み得、ここでロッドは、例えば、セットアップ領域と治療領域との間の距離、又は治療領域と撮像領域との間の距離等の第1の監視位置と第2の監視位置との間の距離に対応する固定距離だけ較正領域を隔てるように作用する。
いくつかの実施形態では、較正プレート250等の較正対象物は、監視システムカメラ230~234、380、386の相対位置、及び治療室のアイソセンタ226、392等の照射位置、又は撮像装置に対する固定位置394の特定を補助するために一組の放射線不透過性マーカを含むように構成することができる。
このような実施形態では、前の実施形態で説明したように位置付けされ撮像されることに加えて、較正対象物は、治療装置によってさらに照射されて、治療室のアイソセンタ226、392の近傍に位置する放射線不透過性マーカの照射画像を取得することができる。次に、取得した放射線画像を解析して、較正対象物の位置付けと治療室のアイソセンタ226、392との間の対応関係を特定することができる。患者監視システム10を較正するときに、治療室のアイソセンタ226、392の特定された位置は、患者監視システム10の座標系を固定するために使用され、患者監視システム10は、特定された位置に関してモデルを生成し、モデル空間においてその位置から一定の距離を置いて配置される。このように、放射線不透過性マーカを含む較正対象物を提供することによって、患者監視システム10を治療室のアイソセンタ226、392に対してより正確に較正することができる。このようにしてシステムを較正することにより、レーザ強調表示システムの潜在的な不正確性に起因するいかなるエラーも回避される。
上述した実施形態では、患者を監視するための立体カメラを含む監視システムを較正するものとして説明したが、患者監視システムを較正するための説明されるアプローチは、一般に、モデル化される対象物の表面上に投影される構造化光のパターンの撮像に基づくカメラ及び飛行時間型カメラ等の他の形態の3Dカメラを利用する患者監視システムを含む、他の形態の患者監視システムにも適用可能である。
前の段落で規定されたもの以外の他のタイプの較正対象物も使用できることに留意されたい。すなわち、一実施形態では、較正プレートはアクティブな較正プレートであり得る。アクティブな較正プレートは、能動的に照明するように構成される、すなわちその上に照明マーカを含む較正プレートとして規定される。較正プレートのパターンは、本明細書に記載の通りであり得るが、他のタイプの較正パターンも考えられ得る。
本開示の前の段落では、例えばボアベース医療装置によって治療を受けている及び/又は走査されている患者の監視に関する複数の実施形態について説明してきた。特に、説明した実施形態は、カメラ監視システムを介して、セットアップ段階における患者の動き、及び、例えば走査及び/又は治療段階における患者の動きをどのように監視するかに関する。前述したように、医療診断及び治療の分野には、例えば癌患者の走査及び治療に関する処置を最適化することを目的とする傾向がある。その点で、図12~図18に関しても述べたように、CT及びMRスキャナ等の走査モダリティと放射線治療スキャナとを組み合わせることが目的とされ、こうして患者の監視を可能にするカメラ監視システムが必要とされる一方、患者はボアベース医療装置内に位置付けされる。そのようなシステムの一例が、本開示全体に亘って説明されるように、カメラ監視システム及び較正方法を用いて少なくとも図17及び図18に関して説明された。
しかしながら、そのようなシステムの更なる発展において、医療装置の放射線治療部分は、CT及び/又はMRスキャナ等のボアベース撮像装置の一体部分を形成することが考えられる。そのような場合に、カウチは、組み合わされた走査及び治療のボアベースのシステムのボア内に位置付けされるだけでよい。図19~図22に概略的に示されているこのようなシステムでは、本明細書に記載されているように患者の監視を可能にするための同様の必要性がある。
こうして、走査モダリティと治療モダリティとの両方を統合したボアベース医療装置のためのカメラ監視システムの実施形態について、これでさらに詳細に説明する。
図19を参照すると、一実施形態のカメラ監視システムが示されている。カメラ監視システムは、ボアベース医療装置501に関連して配置されるように構成され、ボアベース医療装置501は、ボア511を有し、放射線治療の放射線ビームと共にCT又はMRイメージング・モダリティを囲むエンクロージャ構造510を有する。エンクロージャ構造510のボア511は、カウチ512を受容するように構成され、使用中に患者はカウチ512上に位置付けされることになる。
図に確認されるように、カメラ監視システム500は、エンクロージャ構造に関連して配置されるように構成され、より詳細には、ボア511の内側の方向に向けられた第1の視野を有し、医療装置の使用中に、特に放射線治療中に、患者の少なくとも標的領域の画像を記録するように構成される少なくとも1つの運動監視カメラ520を有する。運動監視カメラは、好ましくは、ボア内にある距離を延ばすので、運動監視カメラがエンクロージャ構造510によって実質的に覆われていることを示すために点線で示されている。
カメラ監視システムは、ボア511の外側の方向に第2の視野を向いており、患者をカウチ512上に位置付けする間に患者の画像を記録するように構成される少なくとも1つのセットアップ・カメラ522をさらに含む。運動カメラ520とセットアップ・カメラ522との両方は、少なくとも1つの患者監視プロセッサ530とデータ通信するように構成され、この患者監視プロセッサは、各カメラから画像データを受信するように構成される。この実施形態に関して説明した運動監視プロセッサは、図2に関して説明したコンピュータ14に実質的に対応する。運動監視プロセッサは、i)セットアップ段階でセットアップ・カメラ522からの画像データを処理して、カウチに横たわっている患者の3D表面を生成し、生成した3Dモデル表面を患者監視プロセッサに記憶された基準面と相関させ、その後、ii)監視段階において運動監視カメラ520から受信した画像データを処理して、カウチ512に横たわっている患者の及びカウチ512が医療装置のボア511内に移動したときの時間依存3D表面モデルを生成するように構成される。このように、患者監視プロセッサ530は、基準面に対する患者の時間依存3D表面モデルのあらゆる動きを追跡するように構成され、ここで、基準面に対する時間依存3D表面モデルの動きは、変位値として出力される。
図は少なくとも2つのセットアップ・カメラ521、522を示しているが、カメラをセットアップするために1つのみカメラを使用してもよいことを理解されたい。
本明細書に記載の全ての実施形態について、一実施形態では、運動監視プロセッサは変位値を出力するように構成されることを理解されたい。本明細書に記載の実施形態では、1つ又は複数の変位値を出力できることを理解されたい。この/これらの変位値は、設定された閾値と比較されるように構成され、変位値が設定された閾値を超える場合に、変位インジケータが臨床医に対して例えばコンピュータ画面上に表示される。これにより、潜在的な患者の動きに関する臨床医への情報が可能になり、放射線療法の標的領域が放射線ビームの焦点を考慮して移動させられ得る。このようにして、臨床医は、治療が潜在的に中止され、そして患者を再位置付けすべきであることを知らされる。
代替実施形態では、変位値は設定された閾値と比較されるように構成され、変位値が設定された閾値を超える場合に、制御信号が医療装置に送信され、制御信号は治療及び走査プロセスを中止するように構成される。
図19にも示される更なる実施形態では、カメラ監視システムは、カウチの端部に向かう方向に向き合わせされ、ボア511から離れる方向を向く第3の視野を有する少なくとも1つのカウチ監視カメラ523を含み得る。これによって、本開示の前の実施形態で説明したように、カウチの動きを追跡するのが可能になる。こうして、図19~図22に示されるカウチ監視カメラは、図12~図13等に関して説明したカウチ監視カメラに対応して構成され得ることに留意されたい。しかしながら、主な違いは、図19~図22の実施形態では、カウチ監視カメラ及びセットアップ・カメラは、それぞれの視野がボア511から離れる方向に向くように構成されることである。これは、図19~図22のカメラが、図12~図13等に図示され説明されたエンクロージャ構造と異なるように構成されるためである。しかしながら、動作及び機能の原理は同様である。カウチ監視カメラ523を使用することによって、患者セットアップ・カメラ521、522及び運動監視カメラ520を較正するために簡易較正プレートを使用することが可能である。各位置での較正データと共に、カウチ監視カメラは、較正プレート位置同士の間のオフセットが既知となるように、2つのグループのカメラの間の共通の較正を決定する。
運動監視カメラ520及びセットアップ・カメラ521、522と整列させて、カウチカメラ523は、カウチ画像データを運動監視プロセッサに送信するように構成され、プロセッサは、カウチ画像データを利用して、セットアップ段階におけるカウチの位置と、前述したように監視段階におけるカウチの位置と間のカウチの移動を評価するように構成される。
一実施形態では、運動監視カメラ520、及びセットアップ・カメラ521、522は、監視カメラ及びセットアップ・カメラの第1及び第2の視野内でそれぞれカウチに光を投影するように構成されたプロジェクタを有する3D立体カメラシステムとして構成され、ここで、視野は少なくとも患者の標的領域と相関するように向き合せされる。前述したように他のタイプのカメラを使用してもよいことに留意されたい。
より詳細には、図19に示されるように、少なくとも1つの運動監視カメラ520は、少なくとも1つのセットアップ・カメラ521と共にカメラマウント524上に位置付けされるように構成される。こうして、図19に確認されるように、遠藤監視カメラ520は、カメラマウント524の第1の分岐部525に位置付けされ、この第1の分岐部525は、医療装置のボア511内に少なくとも部分的に延びる。
さらに、この実施形態では、セットアップ・カメラ521、522は、カメラマウント524の第2の分岐部526上に配置されるように構成される。さらに、カメラマウント524は、カウチ監視カメラ523と共に構成してもよく、カウチ監視カメラ523は、第2の分岐部526上に配置してもよい。他の適切な構造を使用してもよいことに留意されたい。これは、カメラ監視システムをボアベース医療装置に対してどのように配置するかの一例として提供されているに過ぎない。カメラ521、522の位置は、治療システムの本体内にあり得る。それらカメラが例えば患者を見下ろす天井に配置される場合に、治療士の体がカメラの視野を遮らないので、それらの位置は、治療士が治療のために患者をセットアップすることによるいかなる閉塞(occlusion)も最小化されるような位置である。
ここで図20を参照すると、ボアベース医療装置501のカメラ監視システムの実施形態が示されている。この実施形態では、前述したのと同じタイプのカメラも使用される。こうして、同じ番号が適用され、相違のみについてより詳細に説明する。図20に示されるように、この実施形態では、運動監視カメラ620は、ボア511の内側640の一部に一体化されるように構成される。一体化された運動監視カメラ620は、ボア511内で患者の少なくとも標的領域をカバーする視野と共に配置及び位置付けされる。
さらに詳細には図示していないが、一実施形態では、カメラ監視システムは、少なくとも2つの運動監視カメラを含むことができ、第1の運動監視カメラ620がボア511の第1の側640に一体化するように構成され、第2の運動監視カメラ(図示せず)が、ボア511の第2の側(図示せず)に一体化するように構成されることを理解されたい。こうして、第1及び第2の運動監視カメラは、エンクロージャ構造の対向する2つの側面の一体化部分として構成され、患者の標的領域と相関する共通の視野を共有するように向き合わせされる。
ここで図21及び図22を参照すると、ボアベース医療装置のボア内に部分的に挿入されているカメラ監視システムの例示的な図が示されている。図21は、カウチ712がボア711内に少なくとも部分的に位置付けされているボアベース医療装置の概略側面図を示す。図に示されるように、システムは、それぞれのカメラが向き合わせされるセットアップアイソセンタ751と治療アイソセンタ752とを含むように構成される。こうして、図示されるように、セットアップ・カメラ721は、セットアップアイソセンタ751を少なくともカバーする視野を有するように構成される一方、運動監視カメラ720は、治療アイソセンタを少なくともカバーするように構成される。特に治療室のアイソセンタは、患者が放射線ビームの焦点の位置から外れないようにするために重要である。
図21にさらに示されるように、カメラ監視システムは、カウチ監視カメラ723が一意に識別可能な特徴760を覆う視野をカバーするように構成されるように、ボアベース医療装置と接続される。従って、一実施形態では、カウチには、追跡可能な一意に識別可能な特徴が組み込まれる。この一例は、カウチの脚部に取り付けられたCCTVタイプのカメラであり得る。特徴認識アルゴリズムを使用して、(おそらく生の画像に適用されているハフ(Hough)変換の後に)固有の特徴について訓練されたその特徴の形状を検出することができる。この特徴の重心が計算され、較正されたカメラ内の1対のセンサを使用してx、y及びz座標が計算され得る。この特徴を連続的に追跡することによって、カウチの動き/位置を決定することができる。
代替実施形態では、カウチは、カウチに関連して位置付け又は配置されたマーカを使用することによって監視してもよい。こうして、図21Aに示される一実施形態では、マーカ760が、カウチの脚端部に配置され、ボアシステムの前方(あるいはその上方)に配置されたカウチ監視カメラ723から観察される。図21Aに示されるカウチ712は、図21に示されるのと同様の方法でボア内に挿入されることを理解されたい。こうして、マーカ750は、図21に示されるマーカ760と実質的に同じカウチの端部に位置付けされる。マーカ750は、1つ又は複数のアクティブな放射体又は再帰反射マーカ750A、750B、750Cから構成してもよい。完全な3Dマーカ追跡のために、好ましくは3つのマーカが使用され得る。これにより、カウチの移動中にカウチの位置を追跡して患者の位置に関する情報を取得することができる。
図22は、図21に示されるようなボアベース医療装置の正面図を示す。図22に示されるように、システムは、一体化されるように構成されるか、又は少なくともボアベース医療装置内に延びる2つの運動監視カメラ720’、720’’で構成され得る。この図は運動監視カメラ720’、720’’の裏側を示しており、こうしてカメラは対象物、例えばボア内の患者を撮像していると考えられることに留意されたい。運動監視カメラ720’、720’’は、第1の分岐部725及び第2の分岐部726を有するカメラマウントに取り付けられる。これらの分岐部725、726のそれぞれも、セットアップ・カメラ721’、721’’を含んでおり、これらのカメラは、セットアップ・カメラの視野が運動監視カメラ720’、720’’によって遮られないように分岐部に位置付けされる。こうして、運動監視カメラ720’、720’’は治療アイソセンタを含む視野をカバーするように構成され、セットアップ・カメラ721’、721’’は、他のそれぞれのカメラの視野を遮ることなくセットアップアイソセンタをカバーするように構成される。
さらに、分岐部726、725は、ボアベース医療装置のエンクロージャ構造の表面に当接する、又は少なくともその表面に追従するように構成された、ボアベース医療装置上に取り付けられた位置に実質的にあることを理解されたい。
更なる実施形態は以下を含む。
実施形態1:一定距離離れた第1及び第2の位置における患者の位置付けを監視するための患者監視システムを較正する方法であって、この方法は、
第1及び第2の位置の近傍にある患者の画像を取得するように動作可能な監視システムを提供するステップと、
第1組の較正マーク及び第2組の較正マークを有する較正対象物を提供するステップであって、第1組の較正マークは、第1の位置と第2の位置との間の距離に対応する距離だけ第2組の較正マークからオフセットされる、提供するステップと、
第1組の較正マークが第1の位置の近傍に配置され、第2組の較正マークが第2の位置の近傍に配置されるように較正対象物を位置付けするステップと、
監視システムを使用して第1組及び第2組の較正マークの画像を取得するステップと、
取得した画像に基づいて監視システムを較正するステップと、を含む。
実施形態2:監視システムは複数の3Dカメラを含み、少なくとも1つの3Dカメラが第1の位置の近傍にある対象物の画像を取得するように配置され、少なくとも1つの3Dカメラが第2の位置の近傍にある対象物の画像を取得するように配置される、実施形態1に記載の方法。
実施形態3:3Dカメラは、立体カメラ、3D飛行時間型カメラ、及び監視される対象物の表面に構造化光を投影するために利用する3Dカメラを含むグループから選択された3Dカメラを含む、実施形態2に記載の方法。
実施形態4:第1組の較正マーク及び第2組の較正マークは、円形のマークのアレイを含み、アレイ内の円形のマークは互いに対して既知の位置に配置される、実施形態1~3のいずれか1つに記載の方法。
実施形態5:較正マークは、円形のマークのアレイに対して固定関係で較正対象物の表面上に配置された1つ又は複数の線をさらに含む、実施形態4に記載の方法。
実施形態6:レーザ照明システムを利用して空間内の位置を強調する(highlight)ステップをさらに含み、第1及び第2の較正マークが第1の位置の近傍に配置され、第2組の較正マークが第2の位置の近傍に配置されるように較正対象物を位置付けするステップは、較正対象物の表面上のマークをレーザ照明システムによって照射された光と整列させるステップを含む、実施形態1~5のいずれか1つに記載の方法。
実施形態7:レーザ照明システムによって強調された空間内の位置は、放射線治療装置の治療室のアイソセンタ、放射線治療を受けている患者のセットアップ位置の中心を特定する点、及び放射線治療を受けている患者の内部画像を取得するための撮像装置と固定関係を有する点を含むグループから選択された位置に対応する位置を含む、実施形態6に記載の方法。
実施形態8:取得した画像に基づいて監視システムを較正するステップは、取得した画像を処理して、撮像された較正対象物の表面上の点に対する位置付けされた対象物の取得した画像の像面の相対位置及び/又は向きを決定するステップを含む、実施形態1~7のいずれか1つに記載の方法。
実施形態9:取得した画像を処理して、位置付けされた較正対象物に対する取得した画像に対応する像面の位置又は向きを決定するステップは、取得した画像を利用して、取得した画像に現れる較正対象物の表面に設けられた較正マークに関する固定点に対する取得した画像に対応する像面の位置又は向きを決定するステップを含む、実施形態8に記載の方法。
実施形態10:較正マークの少なくともいくつかは、正方形の角部に対応する点を規定し、取得した画像を処理して、取得した画像に現れる較正対象物の表面に設けられた較正マークに関する固定点に対する取得した画像に対応する像面の位置又は向きを決定するステップは、取得した画像を利用して、較正マークによって識別された正方形の中心に対する取得した画像に対応する像面の位置又は向きを決定するステップを含む、実施形態9に記載の方法。
実施形態11:較正対象物は1組の放射線不透過性マーカを含み、方法は、治療装置を利用して、位置付けされた較正対象物を照射して較正対象物の照射画像を取得するステップと、取得した画像を解析して、治療室のアイソセンタに対する較正対象物の相対位置を決定するステップとをさらに含む、実施形態1~10のいずれか1つに記載の方法。
実施形態12:取得した画像に基づいて監視システムを較正するステップは、監視システムを較正して、第1のモデル空間内の第1の位置の近傍で観察される対象物のモデルを生成し、第2のモデル空間内の第2の位置の近傍で観察される対象物のモデルを生成するステップを含み、第1及び第2のモデル空間は、第1の位置と第2の位置との間の物理的距離に対応するベクトルだけオフセットされる、実施形態1~11のいずれか1つに記載の方法。
実施形態13:取得した画像に基づいて監視システムを較正するステップは、監視システムを較正して、第1のモデル空間内の第1の位置の近傍で観察される対象物のモデルを生成し、第2のモデル空間内の第2の位置の近傍で観察される対象物のモデルを生成するステップを含み、第1及び第2のモデル空間は、互いに対してある角度だけ回転している、実施形態1~12のいずれか1つに記載の方法。
実施形態14:較正マークは較正マークのアレイを含み、取得した画像に基づいて監視システムを較正するステップは、取得した画像のアレイを利用して、取得した画像内にアレイが現れることに基づいて、取得した画像に存在するレンズ歪みを特定するステップを含む、実施形態1~13のいずれか1つに記載の方法。
実施形態15:一定の物理的距離だけ隔てられた第1の位置と第2の位置に対する患者の位置付けを監視するように動作可能な患者位置付けモニタを較正するための較正対象物であって、較正対象物は、較正対象物の表面に位置付けされた第1組の較正マーク及び第2組の較正マークを含み、第1組及び第2組の物理的マークは、患者位置付けモニタによって監視されるように動作可能である、第1の位置と第2の位置との間の距離に対応する距離だけ互いに物理的に隔てられた較正対象物の表面上の点同士の間に固定関係を有する。
実施形態16:第1組の較正マーク及び第2組の較正マークは、互いに対してある角度だけ回転される、実施形態15に記載の較正対象物。
実施形態17:放射線対象物は1組の放射線不透過性マーカを含む、実施形態16に記載の較正対象物。
詳細な説明及び/又は特許請求の範囲のいずれかに記載された上記の装置の構造的特徴は、対応するプロセスによって適切に置き換えられるとき、方法のステップと組み合わせることができることが意図されている。
使用されるとき、単数形「1つの(a, an)」、及び「その(the)」は、他に明記されていない限り、複数形も含むことを意図する(すなわち、「少なくとも1つの」という意味を有する)。用語「含む、有する(includes, including)」、及び/又は「備える、有する、含む(comprises, comprising)」は、本明細書で使用されるとき、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ又は複数の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はこれらのグループの存在又は追加を排除するものではないことをさらに理解されよう。要素が別の要素に「接続(connected)」又は「結合(coupled)」されると言及されるとき、その要素は他の要素に直接的に接続又は結合され得るが、他に明記されていない限り、介在要素も存在し得ることも理解されよう。さらに、本明細書で使用される「接続された」又は「結合された」は、無線で接続された又は結合されたことを含み得る。本明細書で使用されるとき、用語「及び/又は」は、列挙された関連する項目のうちの1つ又は複数のありとあらゆる組合せを含む。他に明記されていない限り、開示された方法のステップは、ここに述べられた正確な順序に限定されるものではない。
本明細書を通して、「一実施形態」又は「実施形態」又は「一態様」又は「し得る/することができる(may)」として含まれる特徴への言及は、その実施形態に関連して説明される特定の特徴、構造、又は特性が、本開示の少なくとも1つの実施形態に含まれることを意味する。さらに、特定の特徴、構造、又は特性は、本開示の1つ又は複数の実施形態において適切に組み合わせることができる。前述の説明は、当業者が本明細書に記載の様々な態様を実施できるようにするために提供される。これらの態様に対する様々な修正は当業者には容易に明らかとなり、本明細書に規定された一般的な原理は他の態様に適用することができる。
特許請求の範囲は、特許請求の範囲の文言と一致する全範囲を与えられるべきであり、単数形の要素への言及は、特に明記しない限り、「唯一の」を意味することを意図しておらず、むしろ「1つ又は複数」を意味することと意図している。他に具体的に述べられていない限り、「いくつかの」という用語は、1つ又は複数を指す。
従って、その範囲は以下の特許請求の範囲によって判断されるべきである。

Claims (12)

  1. ボアベース医療装置(11、501)内の対象物を監視するための3Dカメラ(20、100、400)であって、当該3Dカメラは、
    前記ボアベース医療装置(11、501)に配置された前記対象物に面するように構成された第1及び第2の窓(116、118)を備えた前部(401)を有するハウジング(22、24、112)と、
    前記前部(401)に対して垂直に前記ハウジング(22、24、112)に取り付けられた回路基板(30)を中央にして背中合せに取り付けられた第1及び第2の画像センサ(36、38)と、
    前記ハウジング(22、24、112)内で前記回路基板の一方の表面から離れる方向に位置付けされ、前記第1の画像センサ(36)に対して角度が付けられた第1のミラー(48、407)であって、前記第1の画像センサ(36)には第1の窓(116)を通して撮像される前記対象物の第1の視野が提示される、第1のミラーと、
    前記ハウジング(22、24、112)内で前記回路基板の他方の表面から離れる方向に位置付けされ、前記第2の画像センサ(38)に対して角度が付けられた第2のミラー(52、410)であって、前記第2の画像センサ(38)には第2の窓(118)を通して撮像される前記対象物の第2の視野が提示される、第2のミラーと、
    前記ハウジングに取り付けられ、前記第1及び第2の画像センサ(36、38)によって撮像される前記対象物に光を投影するように構成されたプロジェクタ(26、27、28、110)と、を有しており、
    当該3Dカメラ(20、100、400)は、前記前部(401)がボア(12、382)の表面と整列するように、前記ボアベース医療装置(11、501)の前記ボア(12、382)に挿入されるように構成され、
    前記第1の視野の延長方向が前記第2の視野の延長方向と交差する、
    3Dカメラ。
  2. 前記第1の画像センサ(36)と前記第1のミラー(48、407)との間に位置付けされる第1のレンズ構成(40)をさらに有しており、前記第1の画像センサ(36)には、前記第1のレンズ構成(40)及び前記第1のミラー(48、407)を介して撮像される対象物の第1の視野が提示される、請求項1に記載の3Dカメラ。
  3. 前記第2の画像センサ(38)と前記第2のミラー(52、410)との間に位置付けされる第2のレンズ構成(44)をさらに有しており、前記第2の画像センサ(38)には、前記第2のレンズ構成(44)及び前記第2のミラー(52、410)を介して撮像される対象物の第2の視野が提示される、請求項2に記載の3Dカメラ。
  4. 前記第1及び第2のレンズ構成(40、44)は、前記回路基板(30)の表面に対して略垂直である軸線に沿って延びる、請求項3に記載の3Dカメラ。
  5. 前記1のミラー(48、47)は、前記回路基板(30)の表面に対して45°の角度で傾斜しており前記第2のミラー(52、410)は、前記回路基板(30)の前記表面に対して-45°の角度で傾斜している、請求項1乃至4のいずれか一項に記載の3Dカメラ。
  6. 前記1のミラー(48、47)は、前記回路基板(30)の表面に対して43.5°の角度で傾斜しており前記第2のミラー(52、410)は、前記回路基板(30)の前記表面に対して-43.5°の角度で傾斜している、請求項1乃至4のいずれか一項に記載の3Dカメラ。
  7. 第3及び第4の画像センサ(132、133、134、135)をさらに有しており、前記第3及び第4の画像センサ(132、133、134、135)は、前記回路基板(120)を中央にして背中合せに取り付けられ、当該3Dカメラは、前記ハウジング内で前記回路基板の前記一方の表面から離れる方向に位置付けされる第3のミラー(152、14)と前記ハウジング内で前記回路基板の前記他方の表面から離れる方向に位置付けされる第4のミラー(153、155)とをさらに有しており、前記第3の画像センサ(133、135)には前記第3のミラー(153、155)を介して撮像される前記対象物の第3の視野が提示され、前記第4の画像センサ(132、134)には前記第4のミラー(152、154)を介して撮像される前記対象物の第4の視野が提示される、請求項1乃至6のいずれか一項に記載の3Dカメラ。
  8. 前記第3の画像センサ(133、135)と前記第3のミラー(153、155)との間に位置付けされる第3のレンズ構成(122、123)と、前記第4の画像センサ(132,134)と前記第4のミラー(152、154)との間に位置付けされる第4のレンズ構成(126,127)とをさらに有しており、前記第3の画像センサ(133、135)には前記第3のレンズ構成(122、123)及び前記第3のミラー(153、155)を介して撮像される前記対象物の第3の視野が提示され、前記第4の画像センサ(132、134)には前記第4のレンズ構成(126、127)及び前記第4のミラー(152、154)を介して撮像される前記対象物の第4の視野が提示される、請求項7に記載の3Dカメラ。
  9. 前記第3及び第4のミラー(152、153、154、155)は、前記第1及び第2のミラー(150、151)に対して傾斜している、請求項8に記載の3Dカメラ。
  10. 前記プロジェクタは、スペックルプロジェクタ(26、27、28、110)であり、且つ光源、コリメータ、及びレンズ構成を有する、請求項1乃至9のいずれか一項に記載の3Dカメラ。
  11. 前記光源、前記コリメータ、及び前記レンズ構成は、前記回路基板を含む平面内に垂直な軸線に沿って整列している、請求項10に記載の3Dカメラ。
  12. ボアベース医療装置(11、501)のためのカメラ監視システムであって、当該カメラ監視システムは、
    患者の診断画像を記録するように動作可能な撮像装置と、
    前記ボアベース医療装置内に組み込まれ、放射線を患者に照射するように動作可能である治療装置と、
    前記ボアベース医療装置のボア(12)に対して患者を位置付けするように動作可能である機械式カウチ(13)と、を有しており、
    当該カメラ監視システムは、
    請求項1乃至11のいずれか一項に記載の1つ又は複数の3Dカメラ(20、100、400)と、
    前記1つ又は複数の3Dカメラの画像センサによって取得した画像を処理し、撮像される対象物の表面の3Dモデルを生成するように動作可能であるプロセッサと、を含んでいる、
    カメラ監視システム。
JP2019078421A 2018-04-18 2019-04-17 ボアベースの医療システムにおいて患者を監視するためのカメラ監視システム及びカメラ監視システムを較正する方法 Active JP7326009B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
GBGB1806339.6A GB201806339D0 (en) 2018-04-18 2018-04-18 3D camera system
GB1806339.6 2018-04-18
GB1808304.8 2018-05-21
GBGB1808304.8A GB201808304D0 (en) 2018-05-21 2018-05-21 Calibration method for calibrating a patient monitoring system

Publications (2)

Publication Number Publication Date
JP2019188137A JP2019188137A (ja) 2019-10-31
JP7326009B2 true JP7326009B2 (ja) 2023-08-15

Family

ID=66217750

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019078421A Active JP7326009B2 (ja) 2018-04-18 2019-04-17 ボアベースの医療システムにおいて患者を監視するためのカメラ監視システム及びカメラ監視システムを較正する方法

Country Status (4)

Country Link
US (2) US11612762B2 (ja)
EP (1) EP3557531A1 (ja)
JP (1) JP7326009B2 (ja)
CN (1) CN110392247B (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11627944B2 (en) 2004-11-30 2023-04-18 The Regents Of The University Of California Ultrasound case builder system and method
US11631342B1 (en) 2012-05-25 2023-04-18 The Regents Of University Of California Embedded motion sensing technology for integration within commercial ultrasound probes
US10380919B2 (en) 2013-11-21 2019-08-13 SonoSim, Inc. System and method for extended spectrum ultrasound training using animate and inanimate training objects
US11576645B2 (en) * 2015-03-02 2023-02-14 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for scanning a patient in an imaging system
US11576578B2 (en) * 2015-03-02 2023-02-14 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for scanning a patient in an imaging system
CN104644205A (zh) 2015-03-02 2015-05-27 上海联影医疗科技有限公司 用于影像诊断的患者定位方法及系统
US11600201B1 (en) 2015-06-30 2023-03-07 The Regents Of The University Of California System and method for converting handheld diagnostic ultrasound systems into ultrasound training systems
US10896628B2 (en) 2017-01-26 2021-01-19 SonoSim, Inc. System and method for multisensory psychomotor skill training
US11810473B2 (en) * 2019-01-29 2023-11-07 The Regents Of The University Of California Optical surface tracking for medical simulation
US11495142B2 (en) 2019-01-30 2022-11-08 The Regents Of The University Of California Ultrasound trainer with internal optical tracking
EP3821943B1 (en) 2019-11-12 2024-03-27 Vision RT Limited Bore based medical system comprising a camera carrier configured to be mounted in the bore-based medical systems and utilized for positioning and monitoring of patients during radiotherapy treatment
JP7381362B2 (ja) * 2020-02-19 2023-11-15 キヤノンメディカルシステムズ株式会社 監視装置、被検体監視方法及び医用画像診断装置
US11839777B2 (en) * 2020-09-21 2023-12-12 Shanghai United Imaging Healthcare Co., Ltd. Medical systems including a positioning lamp and a projection device and control methods of the medical systems
CN112515695B (zh) * 2020-12-02 2024-05-10 上海西门子医疗器械有限公司 Ct机系统及其状态监测方法
US20220322973A1 (en) * 2021-04-08 2022-10-13 Mazor Robotics Ltd. Systems and methods for monitoring patient movement
GB2623776A (en) * 2022-10-26 2024-05-01 Elekta ltd Optical surface tracking camera placement for radiotherapy

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010191325A (ja) 2009-02-20 2010-09-02 Fujifilm Corp 撮影装置
WO2013025530A1 (en) 2011-08-12 2013-02-21 Intuitive Surgical Operations, Inc. An image capture unit in a surgical instrument
WO2013160682A1 (en) 2012-04-26 2013-10-31 Vision Rt Limited 3d camera system
US20160256712A1 (en) 2013-10-17 2016-09-08 Koninklijke Philips . N.V. Medical apparatus with a radiation therapy device and a radiation detection system
WO2017139871A1 (en) 2016-02-18 2017-08-24 Vrvana Inc. Head-mounted display for virtual and mixed reality with inside-out positional, user body and environment tracking

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0820603B2 (ja) * 1987-02-27 1996-03-04 オリンパス光学工業株式会社 ビデオスコ−プ装置
US4873572A (en) * 1987-02-27 1989-10-10 Olympus Optical Co., Ltd. Electronic endoscope apparatus
US6973202B2 (en) 1998-10-23 2005-12-06 Varian Medical Systems Technologies, Inc. Single-camera tracking of an object
US8194121B2 (en) * 2002-05-16 2012-06-05 C2Cure, Inc. Miniature camera head
GB2418495B (en) 2004-09-24 2010-04-28 Vision Rt Ltd Image processing system for use with a patient positioning device
US8235530B2 (en) * 2009-12-07 2012-08-07 C-Rad Positioning Ab Object positioning with visual feedback
WO2012149548A2 (en) 2011-04-29 2012-11-01 The Johns Hopkins University System and method for tracking and navigation
WO2013134597A1 (en) * 2012-03-08 2013-09-12 The Johns Hopkins University A method and apparatus for real-time mechanical and dosimetric quality assurance measurements in radiation therapy
EP3106093B1 (en) * 2012-07-20 2019-05-15 Heinrich Deutschmann Patient positioning and imaging system
US10327708B2 (en) * 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
JP5730339B2 (ja) * 2013-01-25 2015-06-10 富士フイルム株式会社 立体内視鏡装置
EP2861149B1 (en) 2013-06-28 2015-10-28 Koninklijke Philips N.V. Computed tomography system
GB2530790B (en) 2014-10-02 2016-10-19 Vision Rt Ltd Method of calibrating a patient monitoring system for use with a radiotherapy treatment apparatus
GB2538274B8 (en) * 2015-05-13 2017-09-27 Vision Rt Ltd A target surface
US9789338B1 (en) * 2016-04-13 2017-10-17 Vision Rt Ltd. Patient monitoring system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010191325A (ja) 2009-02-20 2010-09-02 Fujifilm Corp 撮影装置
WO2013025530A1 (en) 2011-08-12 2013-02-21 Intuitive Surgical Operations, Inc. An image capture unit in a surgical instrument
JP2014524290A (ja) 2011-08-12 2014-09-22 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 外科手術器具の画像取込み装置
WO2013160682A1 (en) 2012-04-26 2013-10-31 Vision Rt Limited 3d camera system
JP2015515350A (ja) 2012-04-26 2015-05-28 ビジョン アールティ リミテッド 3dカメラシステム
US20160256712A1 (en) 2013-10-17 2016-09-08 Koninklijke Philips . N.V. Medical apparatus with a radiation therapy device and a radiation detection system
JP2016538901A (ja) 2013-10-17 2016-12-15 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 放射線治療装置と放射線検出システムを伴う医療機器
WO2017139871A1 (en) 2016-02-18 2017-08-24 Vrvana Inc. Head-mounted display for virtual and mixed reality with inside-out positional, user body and environment tracking
JP2019516261A (ja) 2016-02-18 2019-06-13 アップル インコーポレイテッドApple Inc. インサイドアウト方式のポジション、ユーザボディ、及び環境トラッキングを伴うバーチャルリアリティ及びミックスドリアリティ用ヘッドマウントディスプレイ

Also Published As

Publication number Publication date
CN110392247A (zh) 2019-10-29
EP3557531A1 (en) 2019-10-23
JP2019188137A (ja) 2019-10-31
CN110392247B (zh) 2024-02-27
US11612762B2 (en) 2023-03-28
US20230181932A1 (en) 2023-06-15
US20190321657A1 (en) 2019-10-24

Similar Documents

Publication Publication Date Title
JP7326009B2 (ja) ボアベースの医療システムにおいて患者を監視するためのカメラ監視システム及びカメラ監視システムを較正する方法
US10835199B2 (en) Optical geometry calibration devices, systems, and related methods for three dimensional x-ray imaging
JP5425808B2 (ja) 追跡品質を保証する立体視撮像対における単一x線画像の使用
US9557158B2 (en) System and method for determining the position of objects in a radiation room for radiation therapy
Brahme et al. 4D laser camera for accurate patient positioning, collision avoidance, image fusion and adaptive approaches during diagnostic and therapeutic procedures
US7502443B1 (en) Radiation therapy machine with triple KV/MV imaging
CN111132730B (zh) 与放射治疗设备一起使用的患者监测系统的校准方法
EP3175426B1 (en) Online patient reconstruction and tracking for patient setup in radiation therapy using an iterative closest point algorithm
US20180345040A1 (en) A target surface
GB2371964A (en) Surface imaging for patient positioning in radiotherapy
JP2005027743A (ja) 放射線治療位置決め装置
KR102223769B1 (ko) 방사선 진단 및 치료 장치의 모션 평가 시스템 및 방법
US11590366B2 (en) Live view camera for radiation therapy
WO2022116114A1 (zh) 监测方法、装置及计算机存储介质
JP7444387B2 (ja) 医用画像処理装置、医用画像処理プログラム、医用装置、および治療システム
Hoisak et al. A history of surface guidance methods in radiation therapy
CN111615413B (zh) 摆位方法、装置及放射治疗系统
Li et al. Performance assessment of 3D surface imaging technique for medical imaging applications
Esfandiari Photogrammetric Advances to C-arm Use in Surgery
Kahrs et al. Measurement of distances between anatomical structures using a translating stage with mounted endoscope
Langen et al. Optical and Remote Monitoring IGRT
Willoughby et al. Sanford L. Meeks

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211213

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211213

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230104

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230329

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230615

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230711

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230802

R150 Certificate of patent or registration of utility model

Ref document number: 7326009

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150