JP2024043353A - 医用画像処理システム、および、医用画像処理方法 - Google Patents

医用画像処理システム、および、医用画像処理方法 Download PDF

Info

Publication number
JP2024043353A
JP2024043353A JP2022148493A JP2022148493A JP2024043353A JP 2024043353 A JP2024043353 A JP 2024043353A JP 2022148493 A JP2022148493 A JP 2022148493A JP 2022148493 A JP2022148493 A JP 2022148493A JP 2024043353 A JP2024043353 A JP 2024043353A
Authority
JP
Japan
Prior art keywords
image
dimensional
ray
imaging device
mri
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022148493A
Other languages
English (en)
Inventor
和喜 松崎
亨 白猪
勲 高橋
Original Assignee
富士フイルムヘルスケア株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルムヘルスケア株式会社 filed Critical 富士フイルムヘルスケア株式会社
Priority to JP2022148493A priority Critical patent/JP2024043353A/ja
Priority to CN202310626498.1A priority patent/CN117731311A/zh
Priority to EP23193107.2A priority patent/EP4338676A1/en
Priority to US18/241,457 priority patent/US20240096478A1/en
Publication of JP2024043353A publication Critical patent/JP2024043353A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/48—Diagnostic techniques
    • A61B6/486—Diagnostic techniques involving generating temporal series of image data
    • A61B6/487—Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5223—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data generating planar views from image data, e.g. extracting a coronal view from a 3D image
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01R—MEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R33/00—Arrangements or instruments for measuring magnetic variables
    • G01R33/20—Arrangements or instruments for measuring magnetic variables involving magnetic resonance
    • G01R33/44—Arrangements or instruments for measuring magnetic variables involving magnetic resonance using nuclear magnetic resonance [NMR]
    • G01R33/48—NMR imaging systems
    • G01R33/4808—Multimodal MR, e.g. MR combined with positron emission tomography [PET], MR combined with ultrasound or MR combined with computed tomography [CT]
    • G01R33/4812—MR combined with X-ray or computed tomography [CT]
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01R—MEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R33/00—Arrangements or instruments for measuring magnetic variables
    • G01R33/20—Arrangements or instruments for measuring magnetic variables involving magnetic resonance
    • G01R33/44—Arrangements or instruments for measuring magnetic variables involving magnetic resonance using nuclear magnetic resonance [NMR]
    • G01R33/48—NMR imaging systems
    • G01R33/54—Signal processing systems, e.g. using pulse sequences ; Generation or control of pulse sequences; Operator console
    • G01R33/56—Image enhancement or correction, e.g. subtraction or averaging techniques, e.g. improvement of signal-to-noise ratio and resolution
    • G01R33/5608—Data processing and visualization specially adapted for MR, e.g. for feature analysis and pattern recognition on the basis of measured MR data, segmentation of measured MR data, edge contour detection on the basis of measured MR data, for enhancing measured MR data in terms of signal-to-noise ratio by means of noise filtering or apodization, for enhancing measured MR data in terms of resolution by means for deblurring, windowing, zero filling, or generation of gray-scaled images, colour-coded images or images displaying vectors instead of pixels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10081—Computed x-ray tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10088—Magnetic resonance imaging [MRI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10116—X-ray image
    • G06T2207/10121—Fluoroscopy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30021—Catheter; Guide wire

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Quality & Reliability (AREA)
  • Pulmonology (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

【課題】Ｘ線透視像を用いて行う手技を支援するための高精細なガイド画像を、ＣＴ装置やＭＲＩ装置で事前に撮像された３Ｄ画像から生成して表示する。【解決手段】透視画像を撮像する際にＸ線撮像装置に設定されるパラメータの値を取得する。被検体を撮像しておいた３次元ＣＴ画像と３次元ＭＲＩ画像とを位置合わせした後、Ｘ線撮像装置のパラメータの値を用いて、３次元ＣＴ画像と３次元ＭＲＩ画像にそれぞれコーンビームの光線通過方向を設定し、２次元投影像を生成する。生成した２次元投影像を重畳して、ガイド画像として表示させる。【選択図】図１

Description

本発明は、カテーテル検査等においてＸ線撮像装置に撮像される被検体の透視像に対して、同じ被検体のガイド画像を、予め撮像しておいた３Ｄ画像から生成する技術に関する。
Ｘ線撮像装置において患者の透視像を撮像して表示しながら、患者の血管や胆管等の管構造にワイヤ等を挿入する手技を行われている。この際、リアルタイムで撮像される透視像とともに、直前にＸ線源を回転させて取得しておいた３Ｄマスク像を表示する３Ｄロードマップ技術が知られている（特許文献１）。３Ｄマスク画像として血管像を表示することにより、ワイヤ等の血管への挿入を支援することができる。
３Ｄロードマップ技術では、手技の直前に３Ｄマスク像を撮像することにより、３Ｄマスク像とリアルタイムで撮像した透視像との位置合わせを不要にしている。しかしながら、手技の直前の３Ｄマスク像の撮像は、患者の被曝量や造影剤量を増加させるため、患者にとって負担になる。
この問題を解決するため、特許文献１には、事前に撮像しておいた３Ｄマスク像の撮像時の設定条件を、リアルタイムの透視像を撮像するＸ線撮像装置に設定して透視像を撮像するとともに、透視像と３Ｄマスク像とのサブトラクション結果により、透視像と３Ｄマスク像の位置ずれを修正する技術が提案されている。
特開2008-161643号公報
特許文献１のロードマップ技術は、事前撮像する３Ｄマスク像は、Ｘ線撮像装置のＸ線源を回転させて取得することが前提となっている。事前撮像する３Ｄマスク像は、Ｘ線撮像装置で取得することにより、リアルタイムで撮像される透視像と３Ｄマスク像との撮像時の設定条件を一致させることができる。また、３Ｄマスク像と透視像とを位置合わせするだけで一致させることができる。
一方、３Ｄ画像の取得方法としては、Ｘ線撮像装置を用いる方法以外に、ＣＴ装置やＭＲＩ（磁気共鳴イメージング）装置を用いる方法があることが知られている。ＣＴ装置で撮像された３Ｄ画像は、Ｘ線撮像装置よりも高精細に患者の骨格等を表示することが可能である。また、ＭＲＩ装置で撮像された３Ｄ画像は、造影剤を用いることなく、胆管や血管等の管構造の像を高精細に抽出して表示することが可能である。
しかしながら、Ｘ線撮像装置は、点光源であるＸ線源から患者に対してＸ線を照射し、患者を透過したＸ線を、平面のＸ線検出器に投影して撮像するため、Ｘ線源に近い患者の体表近くの組織と、Ｘ線源から遠くＸ線検出器に近い領域の組織とでは、透視像上における拡大率が異なるという特徴がある。これに対し、ＣＴ装置やＭＲＩ装置で撮像された３Ｄ画像は、Ｘ線撮像装置とは撮像原理が異なり、３Ｄの画像再構成処理を行って生成されているため、２次元平面に投影しても投影像は、Ｘ線撮像装置の透視像とは一致しない。そのため、ＣＴ装置やＭＲＩ装置で撮像された３Ｄ画像からマスク像を生成しても、透視像とは、画像上の患者の組織の位置が一致せず、患者へのワイヤの挿入を支援する画像としては適さない。
本発明の目的は、Ｘ線透視像を用いて行う手技を支援するための高精細なガイド画像を、ＣＴ装置やＭＲＩ装置で事前に撮像された３Ｄ画像から生成して表示することにある。
上記目的を達成するために、本発明は、Ｘ線撮像装置により撮像する透視画像を見ながら被検体に行う手技の、ガイド画像となる被検体画像を生成する医用画像処理システムを提供する。医用画像処理システムは、３次元画像取得部と、画像位置合わせ部と、組織構造抽出部と、パラメータ取得部と、投影計算部と、画像重畳部とを有する。３次元画像取得部は、予めＣＴ装置により被検体を撮像しておいた３次元ＣＴ画像と、予め磁気共鳴イメージング装置により被検体を撮像しておいた３次元ＭＲＩ画像とを受け取る。画像位置合わせ部は、３次元ＣＴ画像と、３次元ＭＲＩ画像とを位置合わせする。組織構造抽出部は、位置合わせ後の３次元ＭＲＩ画像から予め定めた特定の組織の像を抽出することにより、３次元ＭＲＩ特定組織画像を生成する。パラメータ取得部は、透視画像を撮像する際にＸ線撮像装置に設定される複数種類のパラメータのうち、予め定めた種類のパラメータの値を取得する。投影計算部は、パラメータ取得部が取得したパラメータの値を用いて、３次元ＣＴ画像と３次元ＭＲＩ特定組織画像にそれぞれ、Ｘ線撮像装置においてＸ線が被検体を通過する方向に対応した光線通過方向を設定し、光線通過方向に沿って３次元ＣＴ画像と３次元ＭＲＩ特定組織画像をそれぞれ投影して、２次元投影像を生成する。画像重畳部は、３次元ＣＴ画像の２次元投影像と３次元ＭＲＩ組織構造画像の２次元投影像とを重畳した重畳画像を生成し、生成した重畳画像をガイド画像として表示させる。
本発明によれば、顕微鏡の焦点距離に基づいて顕微鏡の視野位置を特定できるため、手術器具のポインタが検出できない場合であっても、手術ナビゲーションを行うことができる。
実施形態１の医用画像処理システム１の構成を示すブロック図。 実施形態１の医用画像処理システム１の動作を示すフローチャート。 （ａ）実施形態１の医用画像処理システム１において、３次元ＭＲＩ画像の特定組織（血管）をコーンビームの光線通過方向に沿って投影した２次元投影像を示す図、（ｂ）実施形態１の医用画像処理システム１において、３次元ＭＲＩ画像の特定組織（血管）を平行ビームの光線通過方向に沿って投影した２次元投影像を示す図。 （ａ）実施形態１の医用画像処理システム１において生成されたガイド画像を示す図、（ｂ）手技中のＸ線撮像装置の透視画像（造影前）を示す図、（ｃ）手技中のＸ線撮像装置の透視画像（造影後）を示す図、（ｄ）実施形態１の医用画像処理システム１において生成された比較画像を示す図。 （ａ）実施形態１の医用画像処理システム１において設定されるコーンビームの光線通過方向を示す図、（ｂ）実施形態１の医用画像処理システム１において設定される平行ビームの光線通過方向を示す図。 （ａ）実施形態２の医用画像処理システムにおいて生成された放射状のパターンを示す図、（ｂ）実施形態２の医用画像処理システムにおいて生成されたドット状のパターンを示す図。 （ａ）実施形態２の医用画像処理システムにおいて、放射状のパターンを生成するために、Ｘ線源の光軸に平行に複数の管状構造にコーンビームの光線通過方向を設定した状態を示す図、（ｂ）実施形態２の医用画像処理システムにおいてドット状のパターンを生成するために、Ｘ線源の光軸に平行に複数の管状構造に平行ビームの光線通過方向を設定した状態を示す図。 （ａ）実施形態２の医用画像処理システムにおいて生成されたガイド画像を示す図、（ｂ）手技中のＸ線撮像装置の透視画像（造影前）を示す図、（ｃ）手技中のＸ線撮像装置の透視画像（造影後）を示す図、（ｄ）実施形態２の医用画像処理システムにおいて生成された比較画像を示す図、（ｅ）実施形態２の医用画像処理システムにおいて生成された、放射状のパターンが重畳されたガイド画像を示す図、（ｆ）実施形態２の医用画像処理システムにおいて生成された、ドット状のパターンが重畳された比較画像を示す図。 実施形態３の医用画像処理システムの動作を示すフローチャート。
以下、本発明の実施形態の医用画像処理システムについて図面を用いて説明する。
図１は医用画像処理システム１の構成を示す図である。図２は、医用画像処理システム１の動作を示すフローチャートである。図３および図４は、表示画面の一例である。
医用画像処理システム１は、医師が、Ｘ線撮像装置により撮像された透視画像を見ながら被検体にカテーテルを挿入する等の手技を行う際に、透視画像と並べる等して表示されガイド画像となる被検体画像を生成する装置である。ガイド画像は、医師が被検体の構造や特定の組織（例えば、胆管や血管や腸管等の管）の位置や形状を正確に把握するための画像である。
Ｘ線撮像装置で撮像した透視画像における被検体の組織は、Ｘ線源からの距離や、Ｘ線検出パネルとの距離、組織を通過するＸ線の軌跡とＸ線源の光軸となす角度によって、異なる拡大倍率で、透視画像上に投影される。そのため、透視画像上の被検体の組織の位置関係やサイズは、透視画像特有の位置関係やサイズになる。本実施形態では、Ｘ線撮像装置で撮像した画像の特徴を考慮し、組織の拡大倍率や位置関係が、透視画像と同じになるように、ガイド画像（被検体画像）を生成する。これにより医師は、透視画像と同じ見え方をするガイド画像を参照して、被検体の構造や特定の組織を把握することができる。よって、医用画像処理システム１は、カテーテルを挿入する等の医師の手技を支援することができる。
医用画像処理システム１は、医師が手技を行っている最中に、リアルタイムでガイド画像（被検体画像）を生成し、その時点で撮像された透視画像と並べて表示することが可能である。
また、医用画像処理システム１は、医師が手技を行う前に、医師が被検体の構造や組織の位置関係や形状を正確に把握したり、手技をシミュレーション等する際に、Ｘ線撮像装置とは切り離された状態でも用いることも可能である。
＜医用画像処理システム１の構造＞
図１に示すように、医用画像処理システム１は、３次元画像取得部２０と、Ｘ線撮像装置パラメータ取得部１０と、画像処理部３０と、入力部４０と、表示部５０とを備えている。画像処理部３０は、画像位置合わせ部３１と、投影計算部３２と、画像重畳部３３と、組織構造抽出部３４とを含む。
３次元画像取得部２０は、予めＣＴ装置により被検体を撮像しておいた３次元ＣＴ画像と、予め磁気共鳴イメージング（ＭＲＩ）装置により被検体を撮像しておいた３次元ＭＲＩ画像とを受け取る。画像の受け取り方法は、どのような方法であってもよいが、図１では一例として、３次元画像取得部２０が、医用画像サーバ４に接続されており、ＣＴ装置やＭＲＩ装置等から医用画像サーバ４に予め格納されている３次元ＣＴ画像と３次元ＭＲＩ画像とを取り込む構成である。また、３次元画像取得部２０は、入力部４０を介して、医師から３次元ＣＴ画像と３次元ＭＲＩ画像とを受け取る構成としてもよい。
３次元ＣＴ画像は、被検体を構成する組織のＸ線吸収係数に対応する画素値を有するため、被検体の骨格等のＸ線吸収係数の大きな組織の画素値が大きい（白い画素）。一方、３次元ＭＲＩ画像は、手技の対象の組織が高信号になる撮像方法で撮像された画像を選択する。例えば、手技対象の組織が胆管である場合、造影剤を用いない血管撮像方法であるＭＲＣＰ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｃｈｏｌａｎｇｉｏ Ｐａｎｃｒｅａｔｏｇｒａｐｈｙ）画像を用いる。
Ｘ線撮像装置パラメータ取得部１０は、手技の際に被検体の透視画像を撮像するために、Ｘ線撮像装置に設定される複数種類のパラメータのうち、予め定めた種類のパラメータの値を取得する。
Ｘ線撮像装置パラメータ取得部１０が、値を取得するパラメータとしては、Ｘ線撮像装置が透視画像を撮像する際のＸ線源とＸ線検出パネルまでの距離（ＳＩＤ：Source to image receptor distance）と、Ｘ線検出パネルのサイズとを含む。また、Ｘ線源の回転（傾斜）が可能である場合には、Ｘ線源と回転軸までの距離（ＳＡＤ：source-axis distance）を取得することが好ましい。さらに、Ｘ線検出パネルを構成する一つ一つの検出器サイズも取得することが好ましい。
Ｘ線撮像装置パラメータ取得部１０は、接続されているＸ線撮像装置やＸ線撮像装置撮像パラメータデータベース３から、パラメータの値を取り込む構成であってもよいし、入力部４０を介して、医師からパラメータの値を受け付けてもよい。Ｘ線撮像装置撮像パラメータデータベースには、手技の種類や、対象部位や、被検体の性別や年齢ごとに、透視画像を撮像するのに適したパラメータが予め格納されているデータベースである。
画像位置合わせ部３１は、３次元画像取得部２０が取得した３次元ＣＴ画像と３次元ＭＲＩ画像とを位置合わせする。位置合せ方法は，公知の画素値を用いた位置合せ方法や、公知の特徴点をランドマークとした位置合せ方法等、所望の方法を用いて行う。
組織構造抽出部３４は、画像位置合わせ部３１が位置合わせ後の３次元ＭＲＩ画像から予め定めた特定の組織（例えば、血管）の像を抽出することにより、３次元ＭＲＩ特定組織画像を生成する。抽出方法としては、クリッピング法等の公知の方法を用いることができる。
投影計算部３２は、Ｘ線撮像装置パラメータ取得部１０が取得したパラメータの値を用いて、Ｘ線撮像装置においてＸ線が被検体を通過する方向に対応した光線通過方向（レイ）を、３次元ＣＴ画像と３次元ＭＲＩ特定組織画像にそれぞれ設定する（図５（ａ）参照）。すなわち、点光源であるＸ線源からＸ線検出パネル全体に到達するコーンビームのＸ線が、被検体を通過する方向と同じ光線通過方向を、３次元ＣＴ画像と３次元ＭＲＩ特定組織画像にそれぞれ設定する。
投影計算部３２は、設定したコーンビームの光線通過方向に沿って３次元ＣＴ画像と３次元ＭＲＩ特定組織画像をそれぞれ投影して、２次元投影像を生成する。投影計算部３２の２次元投影像の生成方法としては、レイサム（画素値の総和），最大値投影（ＭＩＰ）等を用いる。
２次元投影像は、設定された光線通過方向の中心（Ｘ線源）からの距離や、投影面（Ｘ線検出パネル）との距離、組織を通過する光線と光軸（Ｘ線源の光軸）となす角度によって、異なる拡大倍率で、投影面に投影される。
例えば、投影計算部３２が３次元ＭＲＩ特定組織画像をコーンビームの光線通過方向に投影した２次元投影像（図３（ａ）参照）は、図５（ｂ）のように平行ビームに光線通過方向を設定して投影した２次元投影像（比較画像）（図３（ｂ）参照）と比較して、Ｘ線源に近い位置の組織ほど拡大倍率が大きく、かつ、Ｘ線パネルの周縁に向かってずれた位置に投影される。これにより、被検体の組織（図３（ａ）、（ｂ）では一例として胆管）の位置関係やサイズが、Ｘ線撮像装置で撮像した透視画像と同様の、２次元投影画像を投影計算部３２により生成することができる。
投影計算部３２が生成する３次元ＣＴ画像の２次元投影像は、被検体の骨や体輪郭等の構造が表れた画像となる。一方、３次元ＭＲＩ画像の２次元投影像は、手技の対象とする組織（例えば胆管や血管等の管構造）等軟組織の形態情報が表れた画像となる。
画像重畳部３３は、３次元ＣＴ画像の２次元投影像と３次元ＭＲＩ組織構造画像の２次元投影像とを重畳した重畳画像を生成し、生成した重畳画像をガイド画像として表示部５０に表示させる（図４（ａ）参照）。
医用画像処理システム１は、手技の最中の場合、Ｘ線撮像装置で撮像した透視画像（図４（ｂ）、（ｃ））と、生成したガイド画像（図４(ａ））を並べて表示部５０に表示することができる。図４（ｃ）は、造影剤注入後の透視画像である。
これにより医師は、Ｘ線撮像装置で撮像される透視画像と、組織の拡大率および位置関係が同じ高精細なガイド画像（図４（ａ））を参照することにより、造影剤注入前であっても、被検体の胆管や血管等の管構造の軟組織および骨格等の形状や位置関係を把握することができる。
また、投影計算部３２は、平行ビームで投影した３次元ＣＴ画像の２次元投影像と、３次元ＭＲＩ組織構造画像の２次元投影像（図３（ｂ））とを生成し、画像重畳部３３が重畳した画像（図４（ｄ））を比較画像として、コーンビームの光線通過方向で投影した２次元投影像（図４（ａ））と並べて表示部５０に表示してもよい。
コーンビームによる２次元投影像（図４（ａ））と，平行ビームによる２次元投影像（図４（ｄ））を並べて表示することにより、コーンビームによる拡大率の影響（Ｘ線源に近いほど拡大倍率が大きくなり、光軸から周縁部に向かって像の位置がずれること）を，医師が理解することができる。
医用画像処理システム１の３次元画像取得部２０、Ｘ線撮像装置パラメータ取得部１０および画像処理部３０は、ＣＰＵ（演算処理部）とメモリと記憶装置により構成することができる。記憶装置に予め格納されているプログラムやプログラム実行に必要なデータをメモリにロードして実行することにより、３次元画像取得部２０、Ｘ線撮像装置パラメータ取得部１０および画像処理部３０の機能をソフトウエアにより実現する。また、３次元画像取得部２０、Ｘ線撮像装置パラメータ取得部１０および画像処理部３０の機能の一部または全部をハードウエアによって実現することも可能である。例えば、ＡＳＩＣ（Application Specific Integrated Circuit）のようなカスタムＩＣや、ＦＰＧＡ（Field-Programmable Gate Array）のようなプログラマブルＩＣを用いて、各部（１０，２０，３０）の機能を実現するように回路設計を行えばよい。
＜医用画像処理システム１の動作＞
医用画像処理システム１の各部の動作を図２のフローを用いて説明する。
（ステップ２０１）
Ｘ線撮像装置パラメータ取得部１０は、手技の際にＸ線撮像装置に設定されるＸ線源とＸ線検出パネルまでの距離（ＳＩＤ）と、Ｘ線検出器のサイズ等のパラメータ値を、接続されているＸ線撮像装置、または、医師から入力部４０を介して取得する。
（ステップ２０２）
３次元画像取得部２０は、手技を行う被検体について、事前に撮像された３次元ＣＴ画像を医用画像サーバ４等から取得する。
（ステップ２０３）
３次元画像取得部２０は、手技を行う被検体について、事前に撮像された３次元ＭＲＩ画像とを医用画像サーバ４等から取得する。
（ステップ２０４）
画像位置合わせ部３１は、ステップ２０２で取得した３次元ＣＴ画像と、ステップ２０３で取得した３次元ＭＲＩ画像とを位置合わせする。
（ステップ２０５）
組織構造抽出部３４は、ステップ２０４で位置合わせ後の３次元ＭＲＩ画像から予め定めた特定の組織（例えば、胆管）の像を抽出し、３次元ＭＲＩ特定組織画像を生成する。
（ステップ２０６）
投影計算部３２は、ステップ２０１で取得したパラメータの値を用いて、コーンビームの光線通過方向（レイ）を、３次元ＣＴ画像に設定し、２次元投影像を生成する。
（ステップ２０７）
投影計算部３２は、ステップ２０１で取得したパラメータの値を用いて、コーンビームの光線通過方向（レイ）を、３次元ＭＲＩ特定組織画像に設定し、２次元投影像を生成する。
（ステップ２０８）
画像重畳部３３は、ステップ２０６で生成した３次元ＣＴ画像の２次元投影像と、ステップ２０７で生成した３次元ＭＲＩ組織構造画像の２次元投影像とを重畳し、重畳画像を生成する。
（ステップ２０９）
画像重畳部３３は、ステップ２０８生成した重畳画像をガイド画像として表示部５０に表示させる（図４（ａ）参照）。
（ステップ２１０）
投影計算部３２は、ステップ２０１で取得したパラメータの値を用いて、平行ビームの光線通過方向（レイ）を、３次元ＣＴ画像に設定し、２次元投影像を生成する。
（ステップ２１１）
投影計算部３２は、ステップ２０１で取得したパラメータの値を用いて、平行ビームの光線通過方向（レイ）を、３次元ＭＲＩ特定組織画像に設定し、２次元投影像を生成する。
（ステップ２１２）
画像重畳部３３は、ステップ２１０で生成した３次元ＣＴ画像の２次元投影像と、ステップ２１１で生成した３次元ＭＲＩ組織構造画像の２次元投影像とを重畳し、重畳画像を生成する。
（ステップ２０９）
画像重畳部３３は、生成した重畳画像を比較画像として、ガイド画像と並べて表示部５０に表示させる（図４（ｄ）参照）。
医師は、Ｘ線撮像装置で撮像される透視画像と、組織の拡大率および位置関係が同じで、かつ、高精細なガイド画像（図４（ａ））を参照することにより、被検体の血管構造等の軟組織および骨格等の形状や位置関係を把握することができる。
また、コーンビームによるガイド画像（図４（ａ））と，平行ビームによる比較画像（図４（ｄ））を並べて表示することにより、コーンビームによる拡大率の影響を医師が理解することができる。
さらに、医用画像処理システム１は、手技中である場合、Ｘ線撮像装置２から透視画像（図４（ｂ）または図４（ｃ））を取り込んで、ガイド画像（図４（ａ））と比較画像（図４（ｄ））と並べて表示してもよい。
本実施の形態で表示されるガイド画像（図４（ａ））は、組織の拡大率および位置関係が、Ｘ線撮像装置の透視画像と同じであり、しかも、３次元ＣＴ画像と３次元ＭＲＩ画像からそれぞれ生成された２次元投影像の重畳画像であるため、被検体の骨格や輪郭と、血管等の組織が高精度に表れている。よって、医師は、透視画像とガイド画像（図４（ａ））とを高精度に比較することが可能である。
＜実施形態２＞
実施形態２の医用画像処理システムについて説明する。
実施形態２の医用画像処理システムは、実施形態１の医用画像処理システム１と同様の構成であり、図４（ａ）に示したように、コーンビームの光線通過方向（レイ）を、３次元ＣＴ画像および３次元特定組織ＭＲＩ画像に設定し、それぞれ２次元投影像を生成した後、重畳したガイド画像（図４（ａ））を生成する。
さらに、実施形態２の医用画像処理装置は、実施形態１のガイド画像（図４（ａ））は、Ｘ線源の光軸から離れた組織ほど、光軸から周縁部に向かって像の位置がずれていることを、医師に視覚的に把握してもらうために、図６（ａ）のような放射状のパターンを生成する。
具体的には、投影計算部３２は、図７（ａ）のように、Ｘ線源の光軸に平行に複数の管状構造を配置した３次元画像に、投影計算部３２がステップ２０６、２０７で設定したのと同一のコーンビーム状の光線通過方向を設定して、２次元平面に投影することにより、放射状のパターンを生成する処理を、ステップ２０７よりも後に実行する。コーンビーム状の光線通過方向は、図２のステップ２０１で取得したＸ線装置撮像パラメータ値を用いてステップ２０６，２０７で設定したものである。生成された放射状のパターンは、図６（ａ）のように、Ｘ線源の光軸から離れた組織ほど、パターンの線が長くなっており、光軸から周縁部に向かって像の位置がずれていることを、見る者に直観的にイメージさせることができる。
画像重畳部３３は、生成した放射状のパターンを、図８（ｅ）のように、ガイド画像（図８（ｄ））に重畳し、表示部５０に表示する。これにより、医師は、ガイド画像に生じている組織のずれ量とずれの方向を、認識することができる。
同様に、投影計算部３２は、図７（ｂ）のように、Ｘ線源の光軸に平行に複数の管状構造を配置した３次元画像に、ステップ２１０、２１１で設定したのと同一の平行ビーム状の光線通過方向を設定して、２次元平面に投影したドット状のパターンを生成してもよい。
ドット状のパターンは、平行ビームで２次元平面に投影した投影像は、Ｘ線源の光軸から離れても、像の位置ずれは生じていないことを、見る者に直観的にイメージさせることができる。
画像重畳部３３は、生成したドット状のパターンを、図８（ｆ）のように、比較画像（図８（ｄ））に重畳し、表示部５０に表示する。これにより、医師は、比較画像には、組織のずれは生じていないことを認識することができる。
また、図８のように、パターンを重畳していないガイド画像（図８（ａ））や比較画像（図８（ｄ））や、Ｘ線撮像装置の透視像（図８（ｂ）、（ｃ））を、合わせて表示部５０に表示することにより、医師は、直観的に特定組織（血管）の構造と位置を把握することができる。
なお、放射状のパターンおよびドット状のパターンは、予め生成して記憶装置に格納しておき、画像重畳部３３は、記憶装置から放射状のパターンおよびドット状のパターンを読み出してガイド画像（図８（ｄ））や、比較画像（図８（ｄ））に重畳する構成にしてもよい。この場合、放射状のパターンは、Ｘ線撮像装置に設定可能なパラメータ値（ＳＩＤと、Ｘ線検出器のサイズ）の組み合わせごとに予め生成して記憶装置内に格納しておくことが好ましいが、代表的ないくつかのパターンのみ格納しておき、パラメータ値の組み合わせが近いパターンを選択する構成としてもよい。
実施形態２の医用画像処理システムの他の構成、動作および効果は、実施形態１と同様であるので説明を省略する。
＜実施形態３＞
実施形態３の医用画像処理システムについて図９のフローを用いて説明する。
実施形態３の医用画像処理システムは、実施形態１の医用画像処理システム１と同様の構成である。実施形態３の医用画像処理システムは、図９に示すように、その動作は、ステップ２０１～２１３まで実施形態１の図２のフローと同様であるが、ステップ２０９および２１３の後に、Ｘ線撮像装置パラメータ取得部１０が、Ｘ線源の被検体に対する角度をＸ線撮像装置２またはＸ線撮像装置撮像パラメータＤＢから取得するステップ２１４を行う点が実施形態１と異なっている。
ステップ２１４において、Ｘ線撮像装置パラメータ取得部１０が、Ｘ線源の被検体に対する角度を取得した後、ステップ２１５に進み、投影計算部３２は、Ｘ線源の角度が、予め定めた初期角度（２回目以降は、前回のステップ２１４の実行時の角度）から回転しているかどうか判定し、回転している場合、ステップ２０６、２１０に戻る。
ステップ２０６および２０７では、それぞれステップ２１４で取得した角度に、コーンビームの光線通過方向を回転させて設定し、３次元ＣＴ画像および3次元ＭＲＩ特定組織画像の２次元投影像をそれぞれ生成する。ステップ２０８、２０９で２次元投影像の重畳画像（ガイド画像）を生成し、表示する。
ステップ２１０および２１１では、それぞれステップ２１４で取得した角度に、平行ビームの光線通過方向を回転させて設定し、３次元ＣＴ画像および3次元ＭＲＩ特定組織画像の２次元投影像をそれぞれ生成する。ステップ２１２、２１３で２次元投影像の重畳画像（比較画像）を生成し、表示する。
再びステップ２１４において、Ｘ線撮像装置パラメータ取得部１０がＸ線源の被検体に対する角度を取得し、ステップ２１５において、Ｘ線源の角度が、前回のステップ２１４の実行時の角度から回転している場合、ステップ２０６、２１０に戻って、ステップ２０６～２１３を繰り返す。
このように実施形態３では、Ｘ線撮像装置のＸ線源の被検体に対する角度が、手技の途中に回転した場合にも、その角度に応じた角度で、コーンビームで投影したガイド画像および平行ビームで投影した比較画像をリアルタイムに表示することができる。
実施形態３の医用画像処理システムの他の構成、動作および効果は、実施形態１と同様であるので説明を省略する。
１ 医用画像処理システム
２ Ｘ線撮像装置
３ Ｘ線撮像装置撮像パラメータデータベース
４ 医用画像サーバ
１０ Ｘ線撮像装置パラメータ取得部
２０ ３次元画像取得部
３０ 画像処理部
３１ 画像位置合わせ部
３２ 投影計算部
３３ 画像重畳部
３４ 組織構造抽出部
４０ 入力部
５０ 表示部

Claims (9)

  1. Ｘ線撮像装置により撮像する透視画像を見ながら被検体に行う手技の、ガイド画像となる被検体画像を生成する医用画像処理システムであって、
    予めＣＴ装置により前記被検体を撮像しておいた３次元ＣＴ画像と、予め磁気共鳴イメージング装置により前記被検体を撮像しておいた３次元ＭＲＩ画像とを受け取る３次元画像取得部と、
    前記３次元ＣＴ画像と、前記３次元ＭＲＩ画像とを位置合わせする画像位置合わせ部と、
    位置合わせ後の前記３次元ＭＲＩ画像から予め定めた特定の組織の像を抽出することにより、３次元ＭＲＩ特定組織画像を生成する組織構造抽出部と、
    前記透視画像を撮像する際に前記Ｘ線撮像装置に設定される複数種類のパラメータのうち、予め定めた種類のパラメータの値を取得するパラメータ取得部と、
    前記パラメータ取得部が取得したパラメータの値を用いて、前記３次元ＣＴ画像と３次元ＭＲＩ特定組織画像にそれぞれ、前記Ｘ線撮像装置においてＸ線が前記被検体を通過する方向に対応した光線通過方向を設定し、前記光線通過方向に沿って前記３次元ＣＴ画像と３次元ＭＲＩ特定組織画像をそれぞれ投影して、２次元投影像を生成する投影計算部と、
    前記３次元ＣＴ画像の２次元投影像と３次元ＭＲＩ組織構造画像の２次元投影像とを重畳した重畳画像を生成し、生成した重畳画像を前記ガイド画像として表示させる画像重畳部と
    を有することを特徴とする医用画像処理システム。
  2. 請求項１に記載の医用画像処理システムであって、前記光線通過方向は、コーンビームであることを特徴とする医用画像処理システム。
  3. 請求項２に記載の医用画像処理システムであって、前記画像重畳部は、前記重畳画像に、前記コーンビームの前記光線通過方向を表す放射状のパターンをさらに重畳することを特徴とする医用画像処理システム。
  4. 請求項１に記載の医用画像処理システムであって、前記予め定めた種類のパラメータは、前記Ｘ線撮像装置が前記透視画像を撮像する際のＸ線源とＸ線検出パネルまでの距離と、前記Ｘ線検出パネルのサイズとを含むことを特徴とする医用画像処理システム。
  5. 請求項４に記載の医用画像処理システムであって、前記パラメータ取得部は、前記Ｘ線撮像装置から設定されている前記パラメータの値を取り込むことを特徴とする医用画像処理システム。
  6. 請求項４に記載の医用画像処理システムであって、前記パラメータ取得部は、Ｘ線撮像装置の撮像パラメータが予め格納されているデータベースから前記パラメータの値を取り込む
    ことを特徴とする医用画像処理システム。
  7. 請求項１に記載の医用画像処理システムであって、前記画像重畳部は、前記透視画像と並べて、前記ガイド画像を表示装置に表示させることを特徴とする医用画像処理システム。
  8. 請求項１に記載の医用画像処理システムであって、前記パラメータ取得部は、前記パラメータとして、前記Ｘ線撮像装置のＸ線源の前記被検体に対する角度を取得し、
    前記投影計算部は、前記パラメータ取得部が取得した前記Ｘ線源の角度が、予め定めた角度から回転している場合、取得した前記角度に前記光線通過方向を回転させ、前記２次元投影像を生成することを特徴とする医用画像処理システム。
  9. Ｘ線撮像装置により撮像する透視画像を見ながら被検体に行う手技の、ガイド画像となる被検体画像を生成する医用画像処理方法であって、
    前記透視画像を撮像する際に前記Ｘ線撮像装置に設定される複数種類のパラメータのうち、予め定めた種類のパラメータの値を取得するステップと、
    予めＣＴ装置により前記被検体を撮像しておいた３次元ＣＴ画像と、予め磁気共鳴イメージング装置により前記被検体を撮像しておいた３次元ＭＲＩ画像とを受け取るステップと、
    前記３次元ＣＴ画像と、前記３次元ＭＲＩ画像とを位置合わせするステップと、
    位置合わせ後の前記３次元ＭＲＩ画像から予め定めた特定の組織の像を抽出することにより、３次元ＭＲＩ特定組織画像を生成するステップと、
    取得された前記パラメータの値を用いて、前記３次元ＣＴ画像と３次元ＭＲＩ特定組織画像にそれぞれ、前記Ｘ線撮像装置においてＸ線が前記被検体を通過する方向に対応した光線通過方向を設定し、前記光線通過方向に沿って前記３次元ＣＴ画像と３次元ＭＲＩ特定組織画像をそれぞれ投影して、２次元投影像を生成するステップと、
    前記３次元ＣＴ画像の２次元投影像と３次元ＭＲＩ組織構造画像の２次元投影像とを重畳した重畳画像を生成し、生成した重畳画像を前記ガイド画像として表示させるステップと
    を有することを特徴とする医用画像処理方法。
JP2022148493A 2022-09-16 2022-09-16 医用画像処理システム、および、医用画像処理方法 Pending JP2024043353A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2022148493A JP2024043353A (ja) 2022-09-16 2022-09-16 医用画像処理システム、および、医用画像処理方法
CN202310626498.1A CN117731311A (zh) 2022-09-16 2023-05-30 医用图像处理系统以及医用图像处理方法
EP23193107.2A EP4338676A1 (en) 2022-09-16 2023-08-24 Medical image processing system and medical image processing method
US18/241,457 US20240096478A1 (en) 2022-09-16 2023-09-01 Medical image processing system and medical image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022148493A JP2024043353A (ja) 2022-09-16 2022-09-16 医用画像処理システム、および、医用画像処理方法

Publications (1)

Publication Number Publication Date
JP2024043353A true JP2024043353A (ja) 2024-03-29

Family

ID=87801641

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022148493A Pending JP2024043353A (ja) 2022-09-16 2022-09-16 医用画像処理システム、および、医用画像処理方法

Country Status (4)

Country Link
US (1) US20240096478A1 (ja)
EP (1) EP4338676A1 (ja)
JP (1) JP2024043353A (ja)
CN (1) CN117731311A (ja)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5010287B2 (ja) 2007-01-05 2012-08-29 株式会社東芝 Ｘ線撮影装置および３次元ロードマップ位置合わせ方法
EP3481319A4 (en) * 2016-07-05 2020-02-12 7D Surgical Inc. SYSTEMS AND METHODS FOR CARRYING OUT AN INTRAOPERATIVE IMAGE REGISTER

Also Published As

Publication number Publication date
US20240096478A1 (en) 2024-03-21
EP4338676A1 (en) 2024-03-20
CN117731311A (zh) 2024-03-22

Similar Documents

Publication Publication Date Title
JP6768878B2 (ja) 画像表示の生成方法
JP4901531B2 (ja) Ｘ線診断装置
US7508388B2 (en) Method for extending the display of a 2D image of an object region
JP5989312B2 (ja) 画像処理表示装置及び画像処理表示プログラム
JP4130244B2 (ja) Ｘ線画像化方法
JP5319180B2 (ja) Ｘ線撮影装置、画像処理装置および画像処理プログラム
EP2372660A2 (en) Projection image generation apparatus and method, and computer readable recording medium on which is recorded program for the same
US20080300477A1 (en) System and method for correction of automated image registration
CN1550221A (zh) 用手术中图像在手术前三维图像中进行无标记引导的方法
WO2014024422A1 (ja) カテーテル先端回転角度検出装置、方法、及び、プログラム
JP7337556B2 (ja) 医用画像処理装置、ｘ線診断装置及び医用画像処理方法
KR20170057141A (ko) Ct 이미지를 위한 국소 적용 투명성
JP6806655B2 (ja) 放射線撮像装置、画像データ処理装置及び画像処理プログラム
Navab et al. Camera-augmented mobile C-arm (CAMC) application: 3D reconstruction using a low-cost mobile C-arm
JP6461024B2 (ja) 画像位置合せ装置、方法およびプログラム
US10631948B2 (en) Image alignment device, method, and program
JP2020036819A (ja) Ｘ線撮影装置およびｘ線画像処理方法
US20190304107A1 (en) Additional information display device, additional information display method, and additional information display program
JP2024043353A (ja) 医用画像処理システム、および、医用画像処理方法
JP2007021193A (ja) 画像処理装置及び画像処理プログラム
CN109155068B (zh) 组合式x射线/相机介入中的运动补偿
WO2020217807A1 (ja) 画像の向き設定装置、方法およびプログラム
JP6392190B2 (ja) 画像位置合せ装置、画像位置合せ装置の作動方法およびプログラム
JP5623144B2 (ja) ３ｄ画像に対応するビューを２ｄ画像上に重ね合わせている医用撮像方法及び、対象の注目領域の画像を収集するシステム
EP4128145B1 (en) Combining angiographic information with fluoroscopic images