JP6877569B2 - ずれ検出装置、方法およびプログラム - Google Patents

ずれ検出装置、方法およびプログラム Download PDF

Info

Publication number
JP6877569B2
JP6877569B2 JP2019550924A JP2019550924A JP6877569B2 JP 6877569 B2 JP6877569 B2 JP 6877569B2 JP 2019550924 A JP2019550924 A JP 2019550924A JP 2019550924 A JP2019550924 A JP 2019550924A JP 6877569 B2 JP6877569 B2 JP 6877569B2
Authority
JP
Japan
Prior art keywords
region
medical images
deviation
stent
alignment result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019550924A
Other languages
English (en)
Other versions
JPWO2019087674A1 (ja
Inventor
太 櫻木
太 櫻木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2019087674A1 publication Critical patent/JPWO2019087674A1/ja
Application granted granted Critical
Publication of JP6877569B2 publication Critical patent/JP6877569B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/12Arrangements for detecting or locating foreign bodies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/005Specific pre-processing for tomographic reconstruction, e.g. calibration, source positioning, rebinning, scatter correction, retrospective gating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/149Segmentation; Edge detection involving deformable models, e.g. active contour models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2/00Filters implantable into blood vessels; Prostheses, i.e. artificial substitutes or replacements for parts of the body; Appliances for connecting them with the body; Devices providing patency to, or preventing collapsing of, tubular structures of the body, e.g. stents
    • A61F2/95Instruments specially adapted for placement or removal of stents or stent-grafts
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2240/00Manufacturing or designing of prostheses classified in groups A61F2/00 - A61F2/26 or A61F2/82 or A61F9/00 or A61F11/00 or subgroups thereof
    • A61F2240/001Designing or manufacturing processes
    • A61F2240/008Means for testing implantable prostheses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30052Implant; Prosthesis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular
    • G06T2207/30104Vascular flow; Blood flow; Perfusion

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Optics & Photonics (AREA)
  • Pulmonology (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本開示は、CT(Computed Radiography)画像等の医用画像に含まれる構造物のずれを検出するずれ検出装置、方法およびプログラムに関するものである。
現在、動脈瘤等に対する治療として、動脈にステントを留置する手術が行われている。このような手術の直後においては、事前に計画した位置にステントが留置されるが、時間の経過に伴い、ステントの移動および変形が生じる場合がある。このような事前に計画した位置からのステントの移動および変形により、ステントにより塞がれていた大動脈瘤への血流が再開してしまう可能性がある。また、ステントを留置する際には、血管の分岐を塞がないようにしているが、ステントの移動および変形により、血管の分岐を塞いでしまう可能性もある。
したがって、ステントの移動量および変形量を定量化することにより、上述した可能性があるか否かを事前に把握しておくことが重要である。しかしながら、ステントが留置された血管自体が時間の経過により移動するため、血管とともにステントも移動する。このため、撮影時期が異なる経時的なCT画像等によっては、血管に対するステントの移動量および変形量を検出することは困難であった。
ここで、撮影時期が異なる医用画像を用いて、血管の位置合わせをするための各種手法が提案されている。例えば、特開2017−18457号公報には、冠動脈CT画像と遅延造影CT画像とを用いた差分処理を行って差分画像を生成する画像処理を行うことにより心筋梗塞部を識別する際に、冠動脈CT画像および遅延造影CT画像の外輪郭同士の位置ずれが最小となるように、冠動脈CT画像と遅延造影CT画像との位置合わせを行う手法が提案されている。また、特開2006−87631号公報には、造影剤の注入の前後に亘って連続的に収集した複数の画像のうちの第1の画像と第2の画像に表示された各種部位との位置合わせがなされた第3の画像を生成し、第2の画像と第3の画像とのサブトラクション画像を生成することにより、ステントを留置する手術の前後において、それぞれの造影剤注入後の画像同士の差分画像を作成する手法が提案されている。
しかしながら、特開2017−18457号公報および特開2006−87631号公報に記載された手法は、いずれも経時的な画像間における血管の位置ずれを検出するものであり、血管に留置されたステントの移動量および変形量を検出するものではない。上述したように、ステントが留置された血管自体が時間の経過により移動するため、血管とともにステントも移動する。このため、撮影時期が異なる医用画像を用いて、血管に対するステントの移動量および変形量を含むずれを検出することは困難であった。
本開示は上記事情に鑑みなされたものであり、血管に留置されたステント等の、医用画像に含まれる構造物のずれを検出できるようにすることを目的とする。
本開示によるずれ検出装置は、同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得する第1の取得部と、
2つの医用画像のそれぞれから、第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得する第2の取得部と、
2つの医用画像のそれぞれについての第2の領域を位置合わせして第1の位置合わせ結果を取得する位置合わせ部と、
2つの医用画像のそれぞれについての第1の領域および第1の位置合わせ結果に基づいて、2つの医用画像間における、第2の構造物に対する第1の構造物のずれを表すずれ情報を取得するずれ情報取得部とを備える。
「ずれ情報」には、2つの医用画像間における第2の構造物に対する第1の構造物の移動量および第1の構造物の変形量を含む。
なお、本開示によるずれ検出装置においては、第2の取得部は、2つの医用画像のそれぞれから、第1の構造物および第2の構造物を含む第3の領域を取得し、2つの医用画像のそれぞれにおいて、第3の領域から第1の領域を除去して第2の領域を取得するものであってもよい。
また、本開示によるずれ検出装置においては、位置合わせ部は、非剛体位置合わせにより第1の位置合わせ結果を取得するものであってもよい。
また、本開示によるずれ検出装置においては、ずれ情報取得部は、2つの医用画像のそれぞれについての第1の領域を位置合わせして第2の位置合わせ結果を取得し、第2の位置合わせ結果から第1の位置合わせ結果に基づく成分を除去して、ずれ情報を取得するものであってもよい。
また、本開示によるずれ検出装置においては、ずれ情報取得部は、非剛体位置合わせにより第2の位置合わせ結果を取得するものであってもよい。
また、本開示によるずれ検出装置においては、ずれ情報取得部は、2つの医用画像のうちの一方の医用画像についての第1の領域を、第1の位置合わせ結果に基づいて変形し、2つの医用画像のうちの他方の医用画像についての第1の領域と変形された第1の領域とに基づいて、ずれ情報を取得するものであってもよい。
また、本開示によるずれ検出装置においては、医用画像がステントが留置された血管を含み、
第1の構造物がステントであり、
第2の構造物が血管であってもよい。
また、本開示によるずれ検出装置においては、位置合わせ部は、2つの医用画像のそれぞれについての血管の領域である血管領域の芯線を位置合わせすることにより、第1の位置合わせ結果を取得するものであってもよい。
本開示によるずれ検出方法は、同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得し、
2つの医用画像のそれぞれから、第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得し、
2つの医用画像のそれぞれについての第2の領域を位置合わせして第1の位置合わせ結果を取得し、
2つの医用画像のそれぞれについての第1の領域および第1の位置合わせ結果に基づいて、2つの医用画像間における、第2の構造物に対する第1の構造物のずれを表すずれ情報を取得する。
なお、本開示によるずれ検出方法をコンピュータに実行させるためのプログラムとして提供してもよい。
本開示による他のずれ検出装置は、コンピュータに実行させるための命令を記憶するメモリと、
記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得し、
2つの医用画像のそれぞれから、第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得し、
2つの医用画像のそれぞれについての第2の領域を位置合わせして第1の位置合わせ結果を取得し、
2つの医用画像のそれぞれについての第1の領域および第1の位置合わせ結果に基づいて、2つの医用画像間における、第2の構造物に対する第1の構造物のずれを表すずれ情報を取得する処理を実行する。
本開示によれば、撮影時期が異なる2つの医用画像のそれぞれから、2つの医用画像間における、ずれ検出の対象となる第1の構造物を表す第1の領域が取得され、2つの医用画像のそれぞれから、第1の構造物と連動して移動する第2の構造物を表す第2の領域が取得される。そして、2つの医用画像のそれぞれについての第2の領域が位置合わせされて第1の位置合わせ結果が取得され、2つの医用画像のそれぞれについての第1の領域および第1の位置合わせ結果に基づいて、2つの医用画像間における、第2の構造物に対する第1の構造物のずれを表すずれ情報が取得される。このため、第2の領域に対する第1の領域のずれを検出することができる。
本開示の実施形態によるずれ検出装置を適用した、診断支援システムの概要を示すハードウェア構成図 ずれ検出装置の概略構成を示す図 ステント領域の取得を説明するための図 血管領域の取得を説明するための図 第1の位置合わせ結果の取得を説明するための図 第2の位置合わせ結果の取得を説明するための図 ずれ情報の取得を説明するための図 本実施形態において行われる処理を示すフローチャート
以下、図面を参照して本開示の実施形態について説明する。図1は、本開示の実施形態によるずれ検出装置を適用した、診断支援システムの概要を示すハードウェア構成図である。図1に示すように、診断支援システムでは、本実施形態によるずれ検出装置1、3次元画像撮影装置2、および画像保管サーバ3が、ネットワーク4を経由して通信可能な状態で接続されている。そして、診断支援システムにおいては、被検体のステントを留置した大動脈等の血管についての、撮影時期が異なる2つの3次元画像を取得し、2つの3次元画像間における血管に対するステントのずれを検出する処理を行う。
3次元画像撮影装置2は、被検体の診断対象となる部位を撮影することにより、その部位を表す3次元画像を生成する装置であり、具体的には、CT装置、MRI(Magnetic Resonance Imaging)装置、およびPET(Positron Emission Tomography)装置等である。3次元画像撮影装置2により生成された3次元画像は画像保管サーバ3に送信され、保存される。なお、本実施形態においては、大動脈に対するステントのずれを検出するものであるため、被検体の診断対象部位を大動脈を含む胸部とする。また、3次元画像撮影装置2はCT装置であり、被検体の胸部についての複数のアキシャル断面の断層画像からなる3次元画像が生成されるものとする。なお、3次元画像が医用画像に対応する。
画像保管サーバ3は、各種データを保存して管理するコンピュータであり、大容量外部記憶装置およびデータベース管理用ソフトウェアを備えている。画像保管サーバ3は、有線あるいは無線のネットワーク4を介して他の装置と通信を行い、画像データ等を送受信する。具体的には3次元画像撮影装置2で生成された3次元画像等の画像データをネットワーク経由で取得し、大容量外部記憶装置等の記録媒体に保存して管理する。なお、画像データの格納形式およびネットワーク4経由での各装置間の通信は、DICOM(Digital Imaging and COmmunication in Medicine)等のプロトコルに基づいている。また、本実施形態においては、同一被検体についての撮影時期が異なる複数の3次元画像が、画像保管サーバ3に保存されている。
ずれ検出装置1は、1台のコンピュータに、本開示のずれ検出プログラムをインストールしたものである。コンピュータは、診断を行う医師が直接操作するワークステーションまたはパーソナルコンピュータでもよいし、それらとネットワークを介して接続されたサーバコンピュータでもよい。ずれ検出プログラムは、DVD(Digital Versatile Disc)あるいはCD−ROM(Compact Disc Read Only Memory)等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。または、ネットワークに接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて医師が使用するコンピュータにダウンロードされ、インストールされる。
図2は、コンピュータにずれ検出プログラムをインストールすることにより実現されるずれ検出装置の概略構成を示す図である。図2に示すように、ずれ検出装置1は、標準的なワークステーションの構成として、CPU(Central Processing Unit)11、メモリ12およびストレージ13を備えている。また、ずれ検出装置1には、液晶ディスプレイ等のディスプレイ14、並びにキーボードおよびマウス等の入力部15が接続されている。
ストレージ13は、ハードディスクまたはSSD(Solid State Drive)等のストレージデバイスからなる。ストレージ13には、ネットワーク4を経由して画像保管サーバ3から取得した、被検体の3次元画像および処理に必要な情報を含む各種情報が記憶されている。
また、メモリ12には、ずれ検出プログラムが記憶されている。ずれ検出プログラムは、CPU11に実行させる処理として、同一被検体についての撮影時期が異なる2つの3次元画像のそれぞれから、2つの3次元画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得する第1の取得処理、2つの3次元画像のそれぞれから、第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得する第2の取得処理、2つの3次元画像のそれぞれについての第2の領域を位置合わせして第1の位置合わせ結果を取得する位置合わせ処理、並びに2つの3次元画像のそれぞれについての第1の領域および第1の位置合わせ結果に基づいて、2つの3次元画像間における、第2の構造物に対する第1の構造物のずれを表すずれ情報を取得するずれ情報取得処理を規定する。
そして、CPU11がプログラムに従いこれらの処理を実行することで、コンピュータは、画像取得部21、第1の取得部22、第2の取得部23、位置合わせ部24およびずれ情報取得部25として機能する。なお、本実施形態においては、ずれ検出プログラムによって、各部の機能を実行するようにしたが、これに限らず、例えば複数のIC(Integrated Circuit)、プロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、およびメモリ等を適宜組み合わせることによって各部の機能を実行するようにしてもよい。
画像取得部21は、同一被検体についての撮影時期が異なる2つの3次元画像G1,G2を画像保管サーバ3から取得する。なお、3次元画像G1,G2が既にストレージ13に記憶されている場合には、ストレージ13から3次元画像G1,G2を取得するようにしてもよい。以降の説明において、3次元画像G1が3次元画像G2よりも撮影時期が前であるものとする。
第1の取得部22は、2つの3次元画像G1,G2のそれぞれから、2つの3次元画像G1,G2間におけるずれの検出の対象となるステントを表すステント領域を取得する。なお、ステントが第1の構造物に対応し、ステント領域が第1の領域に対応する。図3はステント領域の取得を説明するための図である。また、ステント領域の取得は、3次元画像G1,G2において同一の処理により行われるため、ここでは3次元画像G1からのステント領域の取得についてのみ説明する。
図3に示すように、3次元画像G1にはステント31が留置された血管32が含まれている。ステント31は金属からなるため、CT画像である3次元画像G1においては、ステント31の領域は人体の組織と比較して高いCT値を有する。このため、第1の取得部22は、あらかじめ定められたしきい値よりも高いCT値を有する領域を3次元画像G1から抽出する二値化処理を行うことにより、3次元画像G1からステント領域As1を取得する。また、第1の取得部22は、3次元画像G2からステント領域As2を取得する。
第2の取得部23は、2つの3次元画像G1,G2のそれぞれから、ステント31と連動して移動する血管32を表す血管領域を取得する。具体的には、3次元画像G1,G2のそれぞれから、ステント31および血管32を含む領域を連動領域Am1,Am2として取得し、連動領域Am1,Am2のそれぞれからステント領域As1,As2を除去して血管領域を取得する。なお、血管が第2の構造物に対応し、血管領域が第2の領域に対応し、連動領域が第3の領域に対応する。
図4は血管領域の取得を説明するための図である。ここで、血管領域の取得は、3次元画像G1,G2において同一の処理により行われるため、ここでは3次元画像G1からの血管領域の取得について説明する。
第2の取得部23は、例えば、特開2010−200925号公報および特開2010−220742号公報等に記載された手法により、3次元画像G1からステント31および血管32を含む連動領域Am1を取得する。この手法では、まず、3次元画像G1を構成するボクセルデータの値に基づいて、血管の芯線を構成する複数の候補点の位置と主軸方向とを算出する。もしくは、3次元画像G1についてヘッセ行列を算出し、算出されたヘッセ行列の固有値を解析することにより、血管の芯線を構成する複数の候補点の位置情報と主軸方向とを算出する。そして、候補点周辺のボクセルデータについて血管、とくに血管らしさを表す特徴量を算出し、算出された特徴量に基づいてそのボクセルデータが血管を表すものであるか否かを判別する。特徴量に基づく判別は、マシンラーニングによりあらかじめ取得された評価関数に基づいて行う。これにより、3次元画像G1から連動領域Am1およびその芯線33が抽出される。なお、先に連動領域Am1を抽出し、連動領域Am1領域に対して細線化処理を行うことにより、芯線33を抽出してもよい。また、連動領域および芯線を抽出する手法は,上記手法に限定されるものではなく,任意の手法を用いることが可能である。
第2の取得部23は、連動領域Am1から第1の取得部22が取得したステント領域As1を除去することにより、血管領域Av1を取得する。具体的には、連動領域Am1からステント領域As1の画素値を減算することにより、連動領域Am1とステント領域As1とを位置合わせし、相対応する画素間において連動領域Am1の画素値からステント領域As1の画素値を減算することにより、連動領域Am1からステント領域As1の成分を除去して血管領域Av1を取得する。また、第2の取得部23は、上記と同様にして3次元画像G2から連動領域Am2を取得し、さらに連動領域Am2からステント領域As2を除去することにより、血管領域Av2を取得する。
位置合わせ部24は、3次元画像G1,G2のそれぞれについての血管領域Av1,Av2を位置合わせして第1の位置合わせ結果を取得する。本実施形態においては、血管領域Av1を血管領域Av2に一致させるように、非剛体位置合わせを行って、血管領域Av1における各画素位置を、血管領域Av2における対応する画素位置に一致させるための変形ベクトルVm1を第1の位置合わせ結果として取得する。
非剛体位置合わせとしては、例えばBスプラインおよびシンプレートスプライン(Thin Plate Spline)等の関数を用いて、血管領域Av1における各画素位置を、血管領域Av2における対応する画素位置に非線形に変換することによる手法を用いることができるが、これに限定されるものではない。
図5は第1の位置合わせ結果の取得を説明するための図である。なお、図5においては、血管領域Av1を破線で、血管領域Av2を実線で、変形ベクトルVm1を実線の矢印で示している。また、実際には血管領域Av1,Av2における全画素位置について、変形ベクトルVm1が取得されるが、図5においては説明を簡単なものとするために、血管領域Av1,Av2における輪郭線上の一部の画素位置についての変形ベクトルVm1のみを示している。
ずれ情報取得部25は、3次元画像G1,G2についてのステント領域As1,As2および第1の位置合わせ結果である変形ベクトルVm1に基づいて、3次元画像G1,G2間における、血管32に対するステント31のずれを表すずれ情報を取得する。具体的には、3次元画像G1,G2のそれぞれについてのステント領域As1,As2を位置合わせして第2の位置合わせ結果を取得し、第2の位置合わせ結果から第1の位置合わせ結果に基づく成分を除去して、ずれ情報を取得する。なお、ずれ情報としては、血管32に対するステント31の移動量およびステントの変形量を含む。
ずれ情報取得部25は、まず、3次元画像G1,G2のそれぞれについてのステント領域As1,As2を位置合わせして第2の位置合わせ結果を取得する。本実施形態においては、ステント領域As1をステント領域As2に一致させるように、非剛体位置合わせを行って、ステント領域As1における各画素位置をステント領域As2における対応する画素位置に一致させるための変形ベクトルVm2を第2の位置合わせ結果として取得する。
図6は第2の位置合わせ結果の取得を説明するための図である。なお、図6においては、ステント領域As1を破線で、ステント領域As2を実線で、変形ベクトルVm2を実線の矢印で示している。また、図6においてはステントの網目模様を省略している。また、実際にはステント領域As1,As2における全画素位置について、変形ベクトルVm2が取得されるが、図6においては説明を簡単なものとするために、ステント領域As1,As2における輪郭線上の一部の画素位置についての変形ベクトルVm2を示している。
ずれ情報取得部25は、第2の位置合わせ結果から第1の位置合わせ結果に基づく成分を除去して、ずれ情報を取得する。具体的には、対応する画素位置における変形ベクトルVm1から変形ベクトルVm2を減算して差分ベクトルVsを算出することにより、第2の位置合わせ結果から第1の位置合わせ結果に基づく成分を除去する。算出された差分ベクトルVsの大きさがずれ情報となる。このように取得されたずれ情報は、血管32の位置ずれの影響が除去され、3次元画像G1,G2間における血管32に対するステント31のずれ、すなわちステント31のみの移動量および変形量を表すものとなる。図7は、ずれ情報、すなわち差分ベクトルVsを示す図である。図7に示すように、ずれ情報すなわち差分ベクトルVsは、血管32の位置ずれの影響が除去され、3次元画像G1,G2間におけるステント31の移動量および変形量を表すものとなっている。
次いで、本実施形態において行われる処理について説明する。図8は本実施形態において行われる処理を示すフローチャートである。まず、画像取得部21が3次元画像G1,G2を取得し(ステップST1)、第1の取得部22が、3次元画像G1,G2のそれぞれからステント領域As1,As2を取得する(ステップST2)。次いで、第2の取得部23が、3次元画像G1,G2のそれぞれから血管領域Av1,Av2を取得し(ステップST3)、位置合わせ部24が、3次元画像G1,G2のそれぞれについての血管領域Av1,Av2を位置合わせして、第1の位置合わせ結果を取得する(ステップST4)。そして、ずれ情報取得部25が、3次元画像G1,G2についてのステント領域As1,As2および第1の位置合わせ結果である変形ベクトルVm1に基づいて、3次元画像G1,G2間における、血管32に対するステント31のずれを表すずれ情報を取得し(ステップST5)、処理を終了する。
このように、本実施形態においては、3次元画像G1,G2からステント領域As1,As2および血管領域Av1,Av2を取得し、血管領域Av1,Av2を位置合わせして第1の位置合わせ結果を取得し、ステント領域As1,As2および第1の位置合わせ結果に基づいて、3次元画像G1,G2間における血管32に対するステント31のずれを表すずれ情報を取得するようにした。このため、血管32に対するステント31のずれを検出することができる。
なお、上記実施形態においては、ずれ情報取得部25は、3次元画像G1,G2のそれぞれについて、ステント領域As1,As2を位置合わせして第2の位置合わせ結果を取得し、第2の位置合わせ結果から第1の位置合わせ結果に基づく成分を除去してずれ情報を取得している。しかしながら、3次元画像G1,G2のうちの一方の3次元画像(ここでは3次元画像G1とする)についてのステント領域As1を、第1の位置合わせ結果に基づいて変形し、他方の3次元画像G2についてのステント領域As1と変形されたステント領域As1とに基づいて、ずれ情報を取得してもよい。このように取得されるずれ情報は、上記実施形態において取得されるずれ情報と等価なものとなるため、上記実施形態と同様に、血管32に対するステント31のずれを検出することができる。
また、上記実施形態において、位置合わせ部24は、3次元画像G1,G2のそれぞれについての血管領域Av1,Av2の芯線のみを位置合わせすることにより第1の位置合わせ結果を取得してもよい。ここで、血管は経時によってその位置がずれるが、血管の径が変わるようなことは殆ど無い。このため、芯線を位置合わせすることにより取得される血管領域Av1,Av2間の変形ベクトルは、血管領域Av1,Av2の全領域についての変形ベクトルと実質的に等価なものとなる。したがって、血管領域Av1,Av2の芯線を位置合わせすることにより、少ない演算量にて、第1の位置合わせ結果を取得できる。
なお、このように第1の位置合わせ結果を取得した場合、変形ベクトルVm1は芯線上の各画素位置についてのみ算出される。このため、血管領域の芯線以外の画素位置における変形ベクトルVm1については、例えば芯線上の各画素位置に直交する面を規定し、その面上の画素位置においては、芯線上の画素位置における変形ベクトルVm1と同一の変形ベクトルを第1の位置合わせ結果として取得すればよい。
また、上記実施形態においては、大動脈に留置されたステント31についてのずれ情報を取得しているが、ステントを留置する必要がある血管であれば、大動脈に限定されるものではない。例えば冠動脈または脳動脈等に留置されたステントのずれ情報を取得する際にも、本実施形態を適用できる。
また、上記実施形態においては、医用画像としてCT画像を用いているが、これに限定されるものではなく、MRI画像およびPET画像等であってもよい。
以下、本実施形態の作用効果について説明する。
血管の芯線を位置合わせすることにより、第1の位置合わせ結果を取得するための演算量を低減して、高速に第1の位置合わせ結果を取得することができる。
1 ずれ検出装置
2 3次元画像撮影装置
3 画像保管サーバ
4 ネットワーク
11 CPU
12 メモリ
13 ストレージ
14 ディスプレイ
15 入力部
21 画像取得部
22 第1の取得部
23 第2の取得部
24 位置合わせ部
25 ずれ情報取得部
31 ステント
32 血管
As1,As2 ステント領域
Av1,Av2 血管領域
G1,G2 3次元画像
Vm1,Vm2 変形ベクトル
Vs 差分ベクトル

Claims (10)

  1. 同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、該2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得する第1の取得部と、
    前記2つの医用画像のそれぞれから、前記第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得する第2の取得部と、
    前記2つの医用画像のそれぞれについての前記第2の領域を位置合わせして第1の位置合わせ結果を取得する位置合わせ部と、
    前記2つの医用画像のそれぞれについての前記第1の領域および前記第1の位置合わせ結果に基づいて、前記2つの医用画像間における、前記第2の構造物に対する前記第1の構造物のずれを表すずれ情報を取得するずれ情報取得部とを備えたずれ検出装置。
  2. 前記第2の取得部は、前記2つの医用画像のそれぞれから、前記第1の構造物および前記第2の構造物を含む第3の領域を取得し、前記2つの医用画像のそれぞれにおいて、前記第3の領域から前記第1の領域を除去して前記第2の領域を取得する請求項1に記載のずれ検出装置。
  3. 前記位置合わせ部は、非剛体位置合わせにより前記第1の位置合わせ結果を取得する請求項1または2に記載のずれ検出装置。
  4. 前記ずれ情報取得部は、前記2つの医用画像のそれぞれについての前記第1の領域を位置合わせして第2の位置合わせ結果を取得し、該第2の位置合わせ結果から前記第1の位置合わせ結果に基づく成分を除去して、前記ずれ情報を取得する請求項1から3のいずれか1項に記載のずれ検出装置。
  5. 前記ずれ情報取得部は、非剛体位置合わせにより前記第2の位置合わせ結果を取得する請求項4に記載のずれ検出装置。
  6. 前記ずれ情報取得部は、前記2つの医用画像のうちの一方の医用画像についての前記第1の領域を、前記第1の位置合わせ結果に基づいて変形し、前記2つの医用画像のうちの他方の医用画像についての前記第1の領域と前記変形された第1の領域とに基づいて、前記ずれ情報を取得する請求項1から3のいずれか1項に記載のずれ検出装置。
  7. 前記医用画像がステントが留置された血管を含み、
    前記第1の構造物が前記ステントであり、
    前記第2の構造物が前記血管である請求項1から6のいずれか1項に記載のずれ検出装置。
  8. 前記位置合わせ部は、前記2つの医用画像のそれぞれについての前記血管の領域である血管領域の芯線を位置合わせすることにより、前記第1の位置合わせ結果を取得する請求項7に記載のずれ検出装置。
  9. 同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、該2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得し、
    前記2つの医用画像のそれぞれから、前記第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得し、
    前記2つの医用画像のそれぞれについての前記第2の領域を位置合わせして第1の位置合わせ結果を取得し、
    前記2つの医用画像のそれぞれについての前記第1の領域および前記第1の位置合わせ結果に基づいて、前記2つの医用画像間における、前記第2の構造物に対する前記第1の構造物のずれを表すずれ情報を取得するずれ検出方法。
  10. 同一被検体についての撮影時期が異なる2つの医用画像のそれぞれから、該2つの医用画像間における、ずれの検出の対象となる第1の構造物を表す第1の領域を取得する手順と、
    前記2つの医用画像のそれぞれから、前記第1の構造物と連動して移動する第2の構造物を表す第2の領域を取得する手順と、
    前記2つの医用画像のそれぞれについての前記第2の領域を位置合わせして第1の位置合わせ結果を取得する手順と、
    前記2つの医用画像のそれぞれについての前記第1の領域および前記第1の位置合わせ結果に基づいて、前記2つの医用画像間における、前記第2の構造物に対する前記第1の構造物のずれを表すずれ情報を取得する手順とをコンピュータに実行させるずれ検出プログラム。
JP2019550924A 2017-10-31 2018-10-04 ずれ検出装置、方法およびプログラム Active JP6877569B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017210164 2017-10-31
JP2017210164 2017-10-31
PCT/JP2018/037248 WO2019087674A1 (ja) 2017-10-31 2018-10-04 ずれ検出装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2019087674A1 JPWO2019087674A1 (ja) 2020-11-12
JP6877569B2 true JP6877569B2 (ja) 2021-05-26

Family

ID=66333033

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019550924A Active JP6877569B2 (ja) 2017-10-31 2018-10-04 ずれ検出装置、方法およびプログラム

Country Status (3)

Country Link
US (1) US11335002B2 (ja)
JP (1) JP6877569B2 (ja)
WO (1) WO2019087674A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112669293A (zh) * 2020-12-31 2021-04-16 上海商汤智能科技有限公司 图像检测方法和检测模型的训练方法及相关装置、设备

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004068406A2 (en) * 2003-01-30 2004-08-12 Chase Medical, L.P. A method and system for image processing and contour assessment
JP2006087631A (ja) 2004-09-22 2006-04-06 Sangaku Renkei Kiko Kyushu:Kk 画像診断装置、画像処理装置、及び画像処理プログラムを記録した記録媒体
US8335357B2 (en) * 2005-03-04 2012-12-18 Kabushiki Kaisha Toshiba Image processing apparatus
US20070297657A1 (en) * 2006-06-23 2007-12-27 Julian Mattes Quantification and visualization of the motion and deformation of one or several objects inside a living entity
US9629571B2 (en) 2007-03-08 2017-04-25 Sync-Rx, Ltd. Co-use of endoluminal data and extraluminal imaging
US10716528B2 (en) 2007-03-08 2020-07-21 Sync-Rx, Ltd. Automatic display of previously-acquired endoluminal images
JP5702572B2 (ja) * 2009-10-29 2015-04-15 株式会社東芝 X線撮影装置
JP4931027B2 (ja) * 2010-03-29 2012-05-16 富士フイルム株式会社 医用画像診断支援装置および方法、並びにプログラム
EP2599033B1 (en) * 2010-07-29 2021-03-31 Sync-RX, Ltd. Co-use of endoluminal data and extraluminal imaging
IN2014CN01639A (ja) * 2011-09-06 2015-05-08 Koninkl Philips Nv
JP6381875B2 (ja) * 2012-08-16 2018-08-29 キヤノンメディカルシステムズ株式会社 画像処理装置、医用画像診断装置及び血圧モニタ
JP5669977B1 (ja) * 2013-08-29 2015-02-18 日本メジフィジックス株式会社 心筋輪郭抽出技術
US9697603B2 (en) 2014-12-19 2017-07-04 Toshiba Medical Systems Corporation Medical image data processing system and method for vessel segmentation using pre- and post-contrast data
KR102369652B1 (ko) * 2014-12-23 2022-03-11 삼성전자주식회사 의료영상 장치, 영상 처리 장치 및 영상 융합 방법
CN105982685A (zh) * 2015-03-03 2016-10-05 东芝医疗系统株式会社 医学图像处理装置和方法、医学图像诊断装置和方法
JP5839638B1 (ja) * 2015-06-01 2016-01-06 川澄化学工業株式会社 管状治療具設計装置、管状治療具の製造方法、および管状治療具設計プログラム
JP6670560B2 (ja) 2015-07-14 2020-03-25 株式会社根本杏林堂 画像処理方法、画像処理プログラム、画像処理装置及び画像処理システム
EP3346923B1 (en) * 2015-09-10 2020-12-16 Koninklijke Philips N.V. Enhanced imaging of a vascular treatment

Also Published As

Publication number Publication date
US11335002B2 (en) 2022-05-17
US20200250827A1 (en) 2020-08-06
JPWO2019087674A1 (ja) 2020-11-12
WO2019087674A1 (ja) 2019-05-09

Similar Documents

Publication Publication Date Title
JP2021106887A (ja) 医用画像表示装置、方法およびプログラム
US10052032B2 (en) Stenosis therapy planning
JP7129869B2 (ja) 疾患領域抽出装置、方法及びプログラム
JP4327139B2 (ja) 画像処理方法および画像処理プログラム
CN109313803B (zh) 一种用于映射对象的身体的至少部分的图像中的结构的至少部分的方法和装置
JP2020032045A (ja) 梗塞領域を判別する判別器の学習装置、方法およびプログラム、梗塞領域を判別する判別器、並びに梗塞領域判別装置、方法およびプログラム
US11348242B2 (en) Prediction apparatus, prediction method, prediction program
WO2019216125A1 (ja) 梗塞領域を判別する判別器の学習装置、方法およびプログラム、梗塞領域を判別する判別器、並びに梗塞領域判別装置、方法およびプログラム
JP6877569B2 (ja) ずれ検出装置、方法およびプログラム
US20200188027A1 (en) Virtual stent placement apparatus, virtual stent placement method, and virtual stent placement program
WO2020217807A1 (ja) 画像の向き設定装置、方法およびプログラム
WO2021084916A1 (ja) 領域同定装置、方法およびプログラム
US20200170713A1 (en) Virtual stent placement apparatus, virtual stent placement method, and virtual stent placement program
JP6829175B2 (ja) 位置合わせ装置、方法およびプログラム
EP3607527B1 (en) Quantitative evaluation of time-varying data
JP6968209B2 (ja) 位置合わせ装置、方法およびプログラム
US20230386113A1 (en) Medical image processing apparatus and medical image processing method
JPWO2019150717A1 (ja) 葉間膜表示装置、方法およびプログラム
JP7502125B2 (ja) 医用画像処理装置、医用画像処理システム、及び、医用画像処理方法
WO2020217758A1 (ja) 疑似アンギオ画像生成装置、方法およびプログラム
WO2022270150A1 (ja) 画像処理装置、方法およびプログラム
US10332257B2 (en) Visualization of at least one characteristic variable
JPWO2020013198A1 (ja) 画像診断支援装置、方法及びプログラム、並びに心臓シミュレーションシステム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210406

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210427

R150 Certificate of patent or registration of utility model

Ref document number: 6877569

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE

Ref document number: 6877569

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250