JP6008635B2 - 手術支援装置、方法およびプログラム - Google Patents

手術支援装置、方法およびプログラム Download PDF

Info

Publication number
JP6008635B2
JP6008635B2 JP2012163500A JP2012163500A JP6008635B2 JP 6008635 B2 JP6008635 B2 JP 6008635B2 JP 2012163500 A JP2012163500 A JP 2012163500A JP 2012163500 A JP2012163500 A JP 2012163500A JP 6008635 B2 JP6008635 B2 JP 6008635B2
Authority
JP
Japan
Prior art keywords
region
organ
cut surface
image
blood vessel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012163500A
Other languages
English (en)
Other versions
JP2014018619A (ja
Inventor
太 櫻木
太 櫻木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012163500A priority Critical patent/JP6008635B2/ja
Priority to EP13822305.2A priority patent/EP2878278B1/en
Priority to PCT/JP2013/004235 priority patent/WO2014017041A1/ja
Publication of JP2014018619A publication Critical patent/JP2014018619A/ja
Priority to US14/601,439 priority patent/US10524823B2/en
Application granted granted Critical
Publication of JP6008635B2 publication Critical patent/JP6008635B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/32Surgical cutting instruments
    • A61B17/3205Excision instruments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4887Locating particular structures in or on the body
    • A61B5/489Blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/02Devices for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computerised tomographs
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/504Clinical applications involving diagnosis of blood vessels, e.g. by angiography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00743Type of operation; Specification of treatment sites
    • A61B2017/00809Lung operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/008Cut plane or projection plane definition

Description

本発明は、肝臓・肺などの臓器の切除手術を行う医師を支援するための手術支援装置、方法及びプログラムに関するものである。
近年、肝臓・肺などの臓器において患部を切除する手術を行う際、臓器機能をできるだけ温存させるために、手術前に画像診断によって適切な切除領域を決めておくことが行われている。
非特許文献1には、肝実質・腫瘍部・門脈・肝静脈の3D像を統合した肝臓の3次元画像において、切除領域や切除せずに残す領域(非切除領域)を非表示または半透明表示にし、それらの領域に内包される血管領域を視認可能にした画像を生成し提供することによって、術中に切断面上で処理すべき血管枝の状態を予め確認できるようにする技術が提案されている。
三浦 行矣他、"肝切除術シミュレーション-その基礎と臨床応用-"、MEDIX VOL.35、2001年9月、p.9-14
ところで、実際の手術では、手術視野や臓器の状態、術前のシミュレーションでは想定できなかった様々な要因、術者の技術レベル等に起因して、シミュレーション時に決めておいた切断面とはややずれた位置を切断してしまうことがあるため、切断面近傍における血管の走行状態を事前に確認しておく必要がある。また、手術中に、ずれた位置を切断し予期せぬ血管が出てきた場合に、切断面近傍における血管の走行状態を確認し、その血管がどの血管なのかをすぐに識別したいという要望がある。
しかし、上記従来の技術では、切除領域や非切除領域に内包される血管領域の全体が一律に表示されるので、その中から注目する部分をすぐに特定し確認することは困難である。
本発明は、上記事情に鑑み、切断面近傍における血管の走行状態の観察に適した画像を提供する手術支援装置、方法およびプログラムを提供することを目的とするものである。
本発明の手術支援装置は、切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、臓器の3次元画像から生成する画像生成手段と、切断深さを指定する入力を受け付ける深さ入力受付手段と、臓器における切除領域と該切除領域以外の領域である非切除領域との境界面のうち、その境界面の外縁から内側に境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定手段とを備え、画像生成手段が、3次元画像から、臓器を該臓器中の血管領域のうち切断面の近傍領域内に存在する部分血管領域のみが視認可能な態様で示す画像を生成するものであることを特徴とする。
上記本発明の手術支援装置において、切断面の近傍領域は、切断面の内縁から外縁に向かってその切断面に直交する方向の幅が大きくなる領域であってもよい。
また、切断面の近傍領域は、切断面の内縁においてその切断面に直交する方向に予め設定された第1の幅を有し、切断面の外縁においてその切断面に直交する方向に予め設定された第2の幅を有する領域であってもよい。
また、切断面の近傍領域は、切断面の内縁においてその切断面に直交する方向に予め設定された第1の幅を有し、切断面の内縁から外縁に向かってその切断面に直交する方向の幅が予め設定された比率で大きくなる領域であってもよい。
上記本発明の手術支援装置は、前記第1の幅を指定する入力を受け付ける幅入力受付手段を備え、切断面の近傍領域は、切断面の内縁においてその切断面に直交する方向に前記指定された第1の幅を有する領域であってもよい。
また、上記本発明の手術支援装置において、切断面の近傍領域は、切断面から切除領域側にのみ存在する領域であってもよいし、切断面から非切除領域側にのみ存在する領域であってもよい。
また、前記部分血管領域のみが視認可能な態様は、切断面の近傍領域内に存在する臓器中の実質領域を非表示にする態様または部分血管領域よりも低い不透明度で表示にする態様であってもよい。ここで、実質領域とは、臓器本来の生理機能を営む組織領域を意味し、血管領域、腫瘍領域以外の部分をいう。
本発明の手術支援方法は、切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、臓器の3次元画像から生成する画像生成ステップと、切断深さを指定する入力を受け付ける深さ入力受付ステップと、臓器における切除領域と該切除領域以外の領域との境界面のうち、その境界面の外縁から内側に境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定ステップとを備え、画像生成ステップが、3次元画像から、臓器を該臓器中の血管領域のうち切断面の近傍領域内に存在する部分血管領域のみが視認可能な態様で示す画像を生成するステップであることを特徴とする。
本発明の手術支援プログラムは、コンピュータを、切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、臓器の3次元画像から生成する画像生成手段と、切断深さを指定する入力を受け付ける深さ入力受付手段と、臓器における切除領域と該切除領域以外の領域との境界面のうち、その境界面の外縁から内側に境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定手段として機能させるための手術支援プログラムであって、画像生成手段が、3次元画像から、臓器を該臓器中の血管領域のうち切断面の近傍領域内に存在する部分血管領域のみが視認可能な態様で示す画像を生成するものであることを特徴とする。
本発明の手術支援装置、方法およびプログラムによれば、切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、臓器の3次元画像から生成する際に、切断深さを指定する入力を受け付け、臓器における切除領域と該切除領域以外の領域である非切除領域との境界面のうち、その境界面の外縁から内側に境界面に沿った前記指定された切断深さの範囲内の部分を切断面とし、3次元画像から、臓器を該臓器中の血管領域のうち切断面の近傍領域内に存在する部分血管領域のみが視認可能な態様で示す画像を生成するようにしたので、切断面近傍における血管の走行状態を注目して観察するとき、全体の血管領域のうちその注目して観察する限られた部分のみが表示された、観察に適した画像を提供することができる。
上記本発明の手術支援装置、方法およびプログラムにおいて、切断面の近傍領域が、切断面の内縁から外縁に向かってその切断面に直交する方向の幅が大きくなる領域である場合、切断深さが大きくなっても、血管の走行状態を深いところまで容易に観察することができる画像を提供することができる。
また、上記本発明の手術支援装置において、切断面の近傍領域が、切断面から非切除領域側にのみ存在する領域である場合には、傷つけないように特に注意する必要がある非切除領域側の血管の観察に適した画像を提供することができる。
手術支援システムの概略構成を示すブロック図 境界面の距離マップを作成する処理を説明するための図 切断面の近傍領域の一設定例を示す図 切断面の近傍領域の他の設定例を示す図 切断面の近傍領域の他の設定例を示す図 切断面の近傍領域の他の設定例を示す図 切断深さの設定による血管領域の可視範囲を説明するための図 切断深さの設定による血管領域の可視範囲を説明するための図 シミュレーション画像の一例を示す図 シミュレーション画像の他の例を示す図 手術支援システムの作用を説明するためのフローチャート
以下、図面を参照して、本発明の手術支援装置、方法およびプログラムの一実施形態について説明する。本実施の形態では、肝臓・肺などの臓器において一部の領域を切除する手術をする前あるいは手術中に、実際の手術で臓器を切断すべき面に沿って徐々に深く切断していくのと同じような感覚で、切断深さ(切込み量)の設定値を徐々に大きくしながら、その切断深さで切断された状態の臓器を擬似的に示した画像であって、臓器中の血管領域Vのうち切断面CP(切断すべき面全体の中の切断深さで切断されている部分)の近傍領域AR内に存在する部分血管領域VPのみを視認可能な態様で示した画像を提供することができる手術支援システムについて説明する。
図1は、本発明の手術支援装置の一実施形態を備えた手術支援システムの概略構成を示す図である。手術支援装置1は、一台のコンピュータに、本発明の手術支援プログラムの一実施形態をインストールしたものである。コンピュータは、診断を行う医師が直接操作するワークステーションやパソコンでもよいし、またはそれらとネットワークを介して接続されるサーバコンピュータでもよい。手術支援プログラムは、DVD,CD−ROM等の記録メディアに格納されて配布され、その記録媒体からコンピュータにインストールされる。もしくは、ネットワークに接続されたサーバコンピュータの記憶装置、あるいはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて医師が使用するコンピュータにダウンロードされ、インストールされる。
手術支援装置1は、CPU、メモリなどを備えている。また、手術支援装置1には、ストレージ2と、ディスプレイ3と、マウス、キーボード等4の入力装置とが接続されている。メモリには、手術支援プログラムと手術支援プログラムが参照するデータ(処理パラメータ等)が記憶されている。手術支援プログラムは、CPUに実行させる処理として、画像取得処理、臓器領域抽出処理、血管領域抽出処理、切除領域抽出処理、入力受付処理、切断面設定処理および画像生成処理を規定している。そして、CPUがプログラムに従いこれらの処理を実行することで、コンピュータは、図1に示すような画像取得部10、臓器領域抽出部20、血管領域抽出部30、切除領域決定部40、入力受付部50(深さ入力受付手段、幅入力受付手段)、切断面設定部60(切断面設定手段)および画像生成部70(画像生成手段)、表示制御部80として機能することになる。
ストレージ2には、3次元画像として、CT(Computed Tomography)装置やMRI(Magnetic Resonance Imaging)装置が出力したスライスデータから再構成されたボリュームデータ、MS(Multi Slice)CT装置やコーンビームCT装置が出力したボリュームデータ等が記憶されている。
画像取得部10は、切除すべき患部を含む臓器を表す3次元画像を取得する。本実施形態においては、被検体の肝臓を撮影したX線CT画像を処理対象画像として用いる。画像取得部10は、予め撮影されてストレージ2に記憶されている3次元画像をメモリにロードする。
臓器領域抽出部20は、画像取得部10によって取得した3次元画像から臓器領域を抽出する。3次元画像を構成する各ボクセルデータの値について、肝臓の輪郭らしさを表す特徴量を算出し、算出した特徴量を機械学習により予め取得された評価関数に基づいて評価することで、そのボクセルデータが肝臓の輪郭を表すものであるか否かを判断する。この判断を繰り返すことにより、肝臓全体の輪郭を表すボクセルデータが抽出される。本実施形態では、評価関数の取得にアダブーストアルゴリズムを用いている。なお、肝臓領域の抽出には、臓器の抽出が行えるものであれば種々の周知の方法を用いることができ、他のマシンラーニング法や統計解析法、例えば線形判別法やニューラルネットワーク、サポートベクターマシン等を用いて行ってもよい。
血管領域抽出部30は、臓器領域抽出部20によって抽出された臓器領域から血管領域Vを抽出する。まず、肝臓領域5内の局所領域ごとに、3×3のヘシアン(Hessian)行列の固有値を算出することにより線状構造の探索を行う。線状構造が含まれる領域では、ヘシアン行列の3つの固有値のうち1つは0に近い値となり、他の2つは相対的に大きな値となる。また、値が0に近い固有値に対応する固有ベクトルは、線状構造の主軸方向を示すものとなる。血管領域抽出部30は、この関係を利用して、局所領域ごとに、ヘシアン行列の固有値に基づいて線状構造らしさを判定し、線状構造が識別された局所領域については、その中心点を候補点として検出する。
そして、探索により検出された候補点を、所定のアルゴリズムに基づいて連結する。これにより、候補点および候補点同士を連結する血管枝(エッジ)からなる木構造が構築される。検出された複数の候補点の座標情報や、血管枝の方向を示すベクトル情報は、候補点や血管枝の識別子とともにメモリに記憶される。続いて、検出された候補点ごとに、周辺のボクセルの値に基づき、血管経路に垂直な断面において、血管の輪郭(血管の外壁)を識別する。形状の識別は、Graph-Cutsに代表される公知のセグメンテーション手法を用いて行う。以上の処理により、抽出された血管領域Vの特定に必要な情報が生成され、メモリに記憶される。
切除領域決定部40は、臓器領域抽出部20によって抽出された臓器領域から異常領域を抽出し、抽出された異常領域に関連する血管領域Vの部分を特定し、特定された部分の血管領域Vにより支配される臓器の支配領域を切除領域41として決定し、決定された切除領域41以外の臓器領域を非切除領域42として決定する。
異常領域の抽出方法としては、たとえば臓器の3次元画像をディスプレイ3に表示させ、マウス等4の入力装置により領域を指定するユーザ入力を受け付け、その指定された領域を異常領域として抽出するようにしてもよいし、周知の技術によって自動的に抽出するようにしてもよい。自動的に異常領域を抽出する方法としては周知の種々の方法を適用することができ、たとえば特開2003−225231号公報、特開2003−271924号公報、および“久保田等,「ヘリカルCT像を用いた肺がん計算機診断支援システムの評価」,電子情報通信学会,信学技報,pp.41-46,MI2001-41(2001-09)”に示されている肺がんを検出する方法や、“脇田等,「多時相腹部X線CT像の時相間濃度特徴計測に基づく肝臓がん検出」,コンピュータ支援画像診断学会論文誌,Vol.10,No.1,Mar 2007”に示されている肝臓がんの検出方法などを用いることができる。
異常領域に関連する血管領域Vの部分を特定する方法としては、たとえば、血管領域Vをディスプレイ3に表示させ、マウス等4の入力装置により血管上の位置の指定するユーザ入力を受付け、その指定された位置から異常領域を含む臓器側に延びる領域を異常領域に関連する血管領域Vの部分として特定するようにしてもよいし、周知の技術によって自動的に特定するようにしてもよい。
支配領域の取得方法としては、たとえば対象組織が肝臓である場合、ボロノイ図(Voronoi diagram)を用いて、肝臓領域内の血管以外の領域(肝臓実質等)がどの血管の支配領域に属するかを特定することによって、各血管の支配領域を肝区域として特定する方法(特開2003−033349号公報や、“R Beichel et al.、“Liver segment approximation in CT data for surgical resection planning”、Medical Imaging 2004: Image Processing. Edited by Fitzpatrick, J. Michael; Sonka, Milan、2004年、Proceedings of the SPIE, Volume 5370, pp. 1435-1446”など参照)などを用いて支配領域を取得することができる。
入力受付部50は、マウス等4の入力装置を介して切断深さd、切断面CPの近傍画像の幅(たとえばW,W0,W1)などのユーザによる種々の設定を受け付ける。具体的には、ディスプレイ3に切断深さなどを設定させるための設定画面を表示させ、その設定画面に対するユーザによる入力を受け付ける。
切断面設定部60は、臓器領域における切除領域41と非切除領域42との境界面Bのうち、境界面Bの外縁から内側に境界面Bに沿った切断深さの範囲内の部分を切断面CPとして設定する。まず、境界面Bを構成する各々のボクセルについて、境界面Bの外縁を構成するボクセルからの境界面Bに沿った最短距離を求めることによって、境界面Bを構成する全ボクセルのそれぞれに距離が対応づけられてなる距離マップを作成する。具体的には、図2に示すように、境界面Bの外縁を構成するボクセル群P0を抽出し、ボクセル群P0を構成する各々のボクセルP0i(i=1,2,…)について順次、そのボクセルP0iに隣接する境界面B上の他のボクセルのうちボクセル群P0に含まれていないボクセルP1j(∈ボクセル群P1)を検出し、検出されたボクセルP1jのボクセルP0iからの距離ΔDを求め、求められた距離をそのボクセルP1jに対応づけて記憶する。この際、ボクセル列P0の異なる2以上のボクセルにおいて同一のボクセルP1jが重複して検出された場合には、2以上のボクセルそれぞれからの距離ΔDを求め、いずれか短い方の距離をそのボクセルP1jに対応づけて記憶する。
次いで、ボクセル群P1を構成する各々のボクセルP1j(j=1,2,…)について順次、そのボクセルP1jに隣接する境界面B上の他のボクセルのうちボクセル群P0およびボクセル群P1に含まれていないボクセルP2k(∈ボクセル群P2)を検出し、ボクセルP1jからの距離ΔDを求め、求められた距離にボクセルP1jに対応付けて記憶されている距離を加算してなる距離をそのボクセルP2kに対応づけて記憶する。この際、ボクセル列P1の異なる2以上のボクセルにおいて同一のボクセルP2kが重複して検出された場合には、2以上のボクセルそれぞれからの距離ΔDを求め、いずれか短い方の距離をそのボクセルP2kに対応づけて記憶する。次いで、ボクセル群P2、ボクセル群P3、…について同じような処理を行うことによって、境界面Bを構成する全ボクセルのそれぞれに距離が対応づけられてなる距離マップを作成する。
そして、作成した距離マップを参照して、境界面Bを構成する全のボクセルのうち、入力受付部50により受け付けたユーザ入力の切断深さd以下の距離が対応づけられているボクセルの集合を特定し、切断面CPとして設定する。
画像生成部70は、画像取得部10によって取得した3次元画像から、臓器を示す画像であって、臓器中の血管領域Vがその全体のうち切断面CPの近傍領域AR内に存在する部分血管領域VPのみが視認可能な態様で示された画像(以下、「シミュレーション画像」ともいう)を生成する。画像生成部70は、切断面CPの近傍領域ARを設定する近傍領域設定部71と、その設定された近傍領域ARの情報に基づいて3次元画像からシミュレーション画像を生成するシミュレーション画像生成部72を備えている。
近傍領域設定部71は、切断面CPから切除領域41側および非切除領域42側のいずれか一方または両方に任意の厚みを有する領域を切断面CPの近傍領域ARとして設定する。たとえば、切断面CPを構成する各ボクセルから切除領域41側に幅Wの間隔で離れた位置にあるボクセルの集合AP1(ボクセル群AP1)と、非切除領域42方面に同じ幅Wの間隔で離れた位置にあるボクセルの集合AP2(ボクセル群AP2)を求め、それらのボクセル群AP1,AP2を内包する領域を切断面CPの近傍領域ARとして設定する。ボクセル群AP1,AP2を内包する領域としては、図3に示すように、それらのボクセル群AP1,AP2を内包する最小範囲の領域を求めるようにしてもよいし、図4に示すように、それらのボクセル群AP1,AP2を表面上の点とする曲面をRBF(Radial Basis Function)やスプライン曲面近似を用いて求め、その曲面により内包される領域を求めるようにしてもよい。
上記方法により設定された近傍領域ARは、切断面CPの内縁から外縁に亘って一定の厚みWを有することとなる。しかし、近傍領域設定部71は、これに限らず、たとえば切断面CPの内縁から外縁に向かって切断面CPに直交する方向の幅が大きくなる領域を近傍領域ARとして設定するものであってもよい。図5に示すように、切断面CPの内縁において切断面CPに直交する方向に予め設定された第1の幅W0を有し、切断面CPの内縁から外縁に向かって切断面CPに直交する方向の幅が予め設定された比率αで大きくなる領域を近傍領域ARとして設定するようにしてもよいし、図6に示すように、切断面CPの内縁において切断面CPに直交する方向に予め設定された第1の幅をW0有し、切断面CPの外縁において切断面CPに直交する方向に予め設定された第2の幅W1(>W0)を有する領域を近傍領域ARとして設定するようにしてもよい。
また、図3〜6では、近傍領域ARが、切断面CPから切除領域41側と非切除領域42側の両方に任意の厚みを有する領域である場合を例示しているが、近傍領域ARは、切断面CPから切除領域41側のみ、または切断面CPから非切除領域42側のみに任意の厚みを有する領域であってもよい。この場合、近傍領域ARは、たとえば上述した方法により求められた両側に厚みを有する近傍領域ARを切除領域41または非切除領域42と積領域を取ることで求めることができる。
図7と図8では、異なる切断深さd1,d2(>d1)の設定下における近傍領域ARと血管領域Vの位置関係を示している。図7では、近傍領域AR内に血管領域Vが含まれず、血管領域Vが可視化されていない場合を示しており、図8では、近傍領域AR内に血管領域Vの一部が含まれ、その部分VPが可視化されている場合を示している。このように、切断深さが変化することによって血管領域Vの可視化される範囲が変化する。
シミュレーション画像生成部72は、近傍領域設定部71によって設定された近傍領域ARの情報に基づいて、たとえば図9および図10に示すような、臓器を示す画像であって、臓器中の血管領域Vがその全体のうち切断面CPの近傍領域AR内に存在する部分血管領域VPのみが視認可能な態様で示されたシミュレーション画像を生成する。たとえば、まず、3次元画像を構成する各ボクセルに不透明度およびR、G、Bの色情報を与える。そのとき、臓器中の血管領域Vには、その全体のうち近傍領域AR内に存在する部分血管領域VPを構成する各ボクセルにのみ80〜100%の不透明度(部分実質領域よりも高い不透明度)を与え、近傍領域AR内の存在する部分実質領域を構成する各ボクセルには0〜20%の不透明度(部分血管領域VPよりも低い不透明度)を与える。また、近傍領域AR内に腫瘍領域が存在する場合には、腫瘍領域を構成する各ボクセルにも80〜100%の不透明度(部分実質領域よりも高い不透明度)を与える。そして、視点からレイキャスティングを行うことにより、シミュレーション画像として、臓器を示すボリュームレンダリング画像を生成する。
また、シミュレーション画像生成部72は、上記シミュレーション画像を生成する際に、境界面Bから切除領域41側のボクセルに非切除領域42側のボクセルとは異なる色情報を与えて前記レイキャスティングを行うことにより、図10に示すような、切除領域41側と非切除領域42側が識別可能な態様で示されたシミュレーション画像を生成するようにしてもよい。また、切除領域41側および非切除領域42側の各ボクセルには、境界面Bからの距離に応じた色情報を与えるようにしてもよい。また、シミュレーション画像には、図9および図10に示すように、部分血管領域VPと境界面Bとの交線BLが描画されるようにしてもよい。さらに、図9に示すように、門脈と、肝静脈をさらに色分けしてそれぞれを識別可能にしてもよい。
表示制御部80は、画像生成部70によって生成されたシミュレーション画像をディスプレイ3に表示させる。
図11は、本実施形態の手術支援システムの作用を説明するためのフローチャートである。以下、このフローチャートを参照しながら説明する。まず、本実施形態の手術支援システムにおいては、ディスプレイ3に選択メニューが表示され、その選択メニューにおいて本実施形態による手術支援機能が選択されたことが検出されると、被検体のIDの一覧がディスプレイ3に表示される。そして、そのディスプレイ3に表示された被検体のIDの一覧の中から手術対象である被検体のIDが選択され、手術支援装置1によってユーザによる選択操作が検出されると、手術支援装置1の画像取得部10によってその選択された被検体に関連する3次元画像が取得される(S1)。
次に、画像取得部10によって取得された3次元画像が臓器領域抽出部20に入力され、臓器領域抽出部20は、入力された3次元画像から臓器領域を抽出する(S2)。次に、臓器領域抽出部20によって抽出された臓器領域は血管領域抽出部30に入力され、血管領域抽出部30は、臓器領域から血管領域Vを抽出する(S3)。一方、臓器領域抽出部20によって抽出された臓器領域は切除領域決定部40にも入力され、切除領域決定部40は、臓器領域から異常領域を抽出し、抽出された異常領域に関連する血管領域Vの部分を特定し、特定された部分の血管領域Vにより支配される臓器の支配領域を切除領域41として決定し、決定された切除領域41以外の臓器領域を非切除領域42として決定する(S4)。
そして、ディスプレイ3に切断深さdを設定させるための設定画面が表示され、入力受付部50によって、その表示された画面に対してマウス等4の入力装置を用いて切断深さdを設定するユーザによる入力を受け付けると(S5)、切断面設定部60は、臓器領域における切除領域41と非切除領域42との境界面Bのうち、境界面Bの外縁から内側に境界面Bに沿った切断深さdの範囲内の部分を切断面CPとして設定する(S6)。ここで、切断面設定部60は、境界面Bを構成する各々のボクセルについて、境界面Bの外縁を構成するボクセルからの境界面Bに沿った最短距離を求めることによって、境界面Bを構成する全ボクセルのそれぞれに距離が対応づけられてなる距離マップを作成し、作成された距離マップを参照して、境界面Bを構成する全のボクセルのうち、入力受付部50により受け付けたユーザ入力の切断深さd以下の距離が対応づけられているボクセルの集合を特定し、切断面CPとして設定する。
次いで、画像生成部70は、画像取得部10によって取得された3次元画像から、臓器を示す画像であって、臓器中の血管領域Vがその全体のうち切断面CPの近傍領域AR内に存在する部分血管領域VPのみが視認可能な態様で示されたシミュレーション画像を生成する(S7)。画像生成部70は、切断面CPから切除領域41側および非切除領域42側のいずれか一方または両方に任意の厚みを有する領域を切断面CPの近傍領域ARとして設定し、設定された近傍領域AR内に存在する臓器中の実質領域が非表示または半透明に表示された、臓器を示すボリュームレンダリング画像を生成する。そして、画像生成部70によって生成された臓器を示すシミュレーション画像は表示制御部80に出力され、表示制御部80は、入力されたシミュレーション画像をディスプレイ3に表示させる(S8)。
次いで、本実施形態による手術支援機能を終了させる指示の有無を検出し(S9)、終了させる指示が検出されない場合にはステップS5に戻り、終了させる支持が検出された場合には、そこで処理を終了する。なお、終了させる指示が検出されず、入力受付部50によって、切断深さdを変更するユーザによる入力を受け付けた場合には、切断面設定部60により、その変更後の切断深さdを用いて切断面CPの設定が更新される。また、切断面CPの更新に応じて、画像生成部70により、切断面CPの近傍領域ARが更新され、新たにシミュレーション画像が生成され、その生成された画像が表示制御部80によりディスプレイ3に表示されることとなる。
上記の構成により、本実施形態の手術支援システムによれば、切除領域41が特定されている臓器をその臓器中の血管領域Vが視認可能な態様で示す画像を、臓器の3次元画像から生成する際に、切断深さを指定する入力を受け付け、臓器における切除領域41と該切除領域41以外の領域である非切除領域42との境界面Bのうち、その境界面Bの外縁から内側に境界面Bに沿った前記指定された切断深さの範囲内の部分を切断面CPとし、3次元画像から、臓器を該臓器中の血管領域Vのうち切断面CPの近傍領域AR内に存在する部分血管領域VPのみが視認可能な態様で示す画像を生成するようにしているので、切断面CP近傍における血管の走行状態を注目して観察するとき、全体の血管領域Vのうちその注目して観察する限られた部分のみが表示された、観察に適した画像を提供することができる。
なお、上記実施形態では、手術支援装置1に臓器領域抽出部20、血管領域抽出部30および切除領域決定部40を設け、手術支援装置1において臓器領域抽出処理、血管領域抽出処理および切除領域抽出処理の各処理が行われるようにした場合について説明したが、それらの各処理が他のコンピュータ等において既に実行され、その結果が参照可能な状態にある場合には、臓器領域抽出部20、血管領域抽出部30および切除領域決定部40の構成は必ずしも必要ではない。
また、上記実施形態は、対象の臓器が肝臓である場合の処理を中心に説明しているが、本発明における臓器としては肝臓に限らず、肺等他の臓器の手術支援にも応用することができる。
1 手術支援装置
2 ストレージ
3 ディスプレイ
4 マウス、キーボード
10 画像取得部
20 臓器領域抽出部
30 血管領域抽出部
40 切除領域決定部
50 入力受付部
60 切断面設定部
70 画像生成部
71 近傍領域設定部
72 シミュレーション画像生成部
80 表示制御部

Claims (11)

  1. 切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、前記臓器の3次元画像から生成する画像生成手段と、
    切断深さを指定する入力を受け付ける深さ入力受付手段と、
    前記臓器における前記切除領域と該切除領域以外の領域である非切除領域との境界面のうち、該境界面の外縁から内側に前記境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定手段とを備え、
    前記画像生成手段が、前記3次元画像から、前記臓器中の血管領域のうち前記切断面の近傍領域内に存在する部分血管領域と前記近傍領域を除いた前記臓器と、を表した画像を生成するものであることを特徴とする手術支援装置。
  2. 前記画像生成手段が、前記近傍領域内に存在する前記臓器を表す部分実質領域を、前記部分血管領域よりも低い不透明度で表示する態様で示す画像を生成することを特徴とする請求項1記載の手術支援装置。
  3. 前記画像生成手段が、前記部分血管領域のうち前記切除領域の血管領域と前記非切除領域の血管領域とを識別可能に表示することを特徴とする請求項1または2記載の手術支援装置。
  4. 前記切断面の近傍領域が、前記切断面の内縁から外縁に向かって該切断面に直交する方向の幅が大きくなる領域であることを特徴とする請求項1〜3のいずれか1項記載の手術支援装置。
  5. 前記切断面の近傍領域が、前記切断面の内縁において該切断面に直交する方向に予め設定された第1の幅を有し、前記切断面の外縁において該切断面に直交する方向に予め設定された前記第1の幅より大きい第2の幅を有する領域であることを特徴とする請求項記載の手術支援装置。
  6. 前記切断面の近傍領域が、前記切断面の内縁において該切断面に直交する方向に予め設定された第1の幅を有し、前記切断面の内縁から外縁に向かって該切断面に直交する方向の幅が予め設定された比率で大きくなる領域であることを特徴とする請求項記載の手術支援装置。
  7. 前記第1の幅を指定する入力を受け付ける幅入力受付手段を備え、
    前記切断面の近傍領域が、前記切断面の内縁において該切断面に直交する方向に前記指定された第1の幅を有する領域であることを特徴とする請求項または記載の手術支援装置。
  8. 前記切断面の近傍領域が、前記切断面から前記切除領域側にのみ存在する領域であることを特徴とする請求項1からのいずれか1項記載の手術支援装置。
  9. 前記切断面の近傍領域が、前記切断面から前記非切除領域側にのみ存在する領域であることを特徴とする請求項1からのいずれか1項記載の手術支援装置。
  10. 画像生成手段と、深さ入力受付手段と、切断面設定手段とを備えた手術支援装置における手術支援装置の作動方法であって、
    前記画像生成手段が、切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、前記臓器の3次元画像から生成する画像生成ステップと、
    前記深さ入力受付手段が、切断深さを指定する入力を受け付ける深さ入力受付ステップと、
    前記切断面設定手段が、前記臓器における前記切除領域と該切除領域以外の領域との境界面のうち、該境界面の外縁から内側に前記境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定ステップとを備え、
    前記画像生成ステップが、前記3次元画像から、前記臓器中の血管領域のうち前記切断面の近傍領域内に存在する部分血管領域と前記近傍領域を除いた前記臓器と、を表した画像を生成するものであることを特徴とする手術支援装置の作動方法。
  11. コンピュータを、
    切除領域が特定されている臓器を該臓器中の血管領域が視認可能な態様で示す画像を、前記臓器の3次元画像から生成する画像生成手段と、
    切断深さを指定する入力を受け付ける深さ入力受付手段と、
    前記臓器における前記切除領域と該切除領域以外の領域との境界面のうち、該境界面の外縁から内側に前記境界面に沿った前記指定された切断深さの範囲内の部分を切断面とする切断面設定手段として機能させるための手術支援プログラムであって、
    前記画像生成手段が、前記3次元画像から、前記臓器中の血管領域のうち前記切断面の近傍領域内に存在する部分血管領域と前記近傍領域を除いた前記臓器と、を表した画像を生成するものであることを特徴とする手術支援プログラム。
JP2012163500A 2012-07-24 2012-07-24 手術支援装置、方法およびプログラム Active JP6008635B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012163500A JP6008635B2 (ja) 2012-07-24 2012-07-24 手術支援装置、方法およびプログラム
EP13822305.2A EP2878278B1 (en) 2012-07-24 2013-07-09 Surgical operation support device, method and program
PCT/JP2013/004235 WO2014017041A1 (ja) 2012-07-24 2013-07-09 手術支援装置、方法およびプログラム
US14/601,439 US10524823B2 (en) 2012-07-24 2015-01-21 Surgery assistance apparatus, method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012163500A JP6008635B2 (ja) 2012-07-24 2012-07-24 手術支援装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2014018619A JP2014018619A (ja) 2014-02-03
JP6008635B2 true JP6008635B2 (ja) 2016-10-19

Family

ID=49996869

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012163500A Active JP6008635B2 (ja) 2012-07-24 2012-07-24 手術支援装置、方法およびプログラム

Country Status (4)

Country Link
US (1) US10524823B2 (ja)
EP (1) EP2878278B1 (ja)
JP (1) JP6008635B2 (ja)
WO (1) WO2014017041A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010504129A (ja) * 2006-09-22 2010-02-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 肺結節の高度コンピュータ支援診断
US20150063668A1 (en) * 2012-03-02 2015-03-05 Postech Academy-Industry Foundation Three-dimensionlal virtual liver surgery planning system
JP6122495B2 (ja) 2013-06-11 2017-04-26 敦 丹治 骨切支援システム、情報処理装置、画像処理方法、および画像処理プログラム
JP6691209B2 (ja) 2015-09-26 2020-04-28 ボストン サイエンティフィック サイムド,インコーポレイテッドBoston Scientific Scimed,Inc. 解剖学的シェル編集用の方法
EP3353752B1 (en) * 2015-09-26 2021-08-04 Boston Scientific Scimed Inc. Adjustable depth anatomical shell editing
JP6496698B2 (ja) 2015-10-30 2019-04-03 株式会社Aze 医用画像処理装置、その制御方法、及びプログラム
JP6698824B2 (ja) * 2016-04-11 2020-05-27 富士フイルム株式会社 画像表示制御装置および方法並びにプログラム
WO2018030015A1 (ja) * 2016-08-08 2018-02-15 国立大学法人京都大学 切離プロセス推定装置及び切離プロセスナビゲーションシステム
JP6747956B2 (ja) * 2016-12-07 2020-08-26 株式会社OPExPARK 情報統合装置
CN106682636B (zh) 2016-12-31 2020-10-16 上海联影医疗科技有限公司 血管提取方法及其系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4304571A1 (de) * 1993-02-16 1994-08-18 Mdc Med Diagnostic Computing Verfahren zur Planung und Kontrolle eines chirurgischen Eingriffs
JP4688361B2 (ja) 2001-07-23 2011-05-25 株式会社日立メディコ 臓器の特定領域抽出表示装置及びその表示方法
US7058210B2 (en) 2001-11-20 2006-06-06 General Electric Company Method and system for lung disease detection
JP3934959B2 (ja) 2002-03-13 2007-06-20 株式会社日立製作所 医療画像処理システム
US7660623B2 (en) * 2003-01-30 2010-02-09 Medtronic Navigation, Inc. Six degree of freedom alignment display for medical procedures
JP4698966B2 (ja) * 2004-03-29 2011-06-08 オリンパス株式会社 手技支援システム
JP2006346022A (ja) * 2005-06-14 2006-12-28 Ziosoft Inc 画像表示方法及び画像表示プログラム
US7840044B2 (en) * 2005-11-01 2010-11-23 Edda Technology Inc. Method and system for liver lobe segmentation and pre-operative surgical planning
JP2008167793A (ja) * 2007-01-09 2008-07-24 Ge Medical Systems Global Technology Co Llc 手術支援方法および装置
EP2438584A4 (en) * 2009-05-12 2014-04-30 Edda Technology Inc SYSTEM, METHOD, APPARATUS AND COMPUTER PROGRAM FOR INTERACTIVE PREOPERATIVE ASSESSMENT
JP5355257B2 (ja) * 2009-07-01 2013-11-27 株式会社東芝 医用画像表示装置および医用画像表示方法
JP5011426B2 (ja) 2010-08-11 2012-08-29 富士フイルム株式会社 画像診断支援装置、方法及びプログラム
JP5559642B2 (ja) * 2010-08-30 2014-07-23 富士フイルム株式会社 手術支援装置、手術支援方法および手術支援プログラム

Also Published As

Publication number Publication date
EP2878278A4 (en) 2016-04-20
EP2878278B1 (en) 2018-04-18
US20150133764A1 (en) 2015-05-14
JP2014018619A (ja) 2014-02-03
US10524823B2 (en) 2020-01-07
EP2878278A1 (en) 2015-06-03
WO2014017041A1 (ja) 2014-01-30

Similar Documents

Publication Publication Date Title
JP6008635B2 (ja) 手術支援装置、方法およびプログラム
JP5797124B2 (ja) 手術支援装置、手術支援方法および手術支援プログラム
JP5559642B2 (ja) 手術支援装置、手術支援方法および手術支援プログラム
JP5263995B2 (ja) ネットワーク構築装置および方法ならびにプログラム
JP4545169B2 (ja) 画像表示方法、装置およびプログラム
JP5395823B2 (ja) 手術支援装置、手術支援方法および手術支援プログラム
US9147289B2 (en) Method for visualizing the quality of an ablation process
US20120249546A1 (en) Methods and systems for visualization and analysis of sublobar regions of the lung
JP5011426B2 (ja) 画像診断支援装置、方法及びプログラム
JP6072008B2 (ja) ユーザ操作されるオンザフライの経路プランニング
JP5572470B2 (ja) 診断支援装置および方法並びにプログラム
JP5934071B2 (ja) 管状構造の最短経路探索装置および方法並びにプログラム
JP2010517633A (ja) 中空臓器を通る3d経路計画のためのシステム
EP3515310B1 (en) Volume presentation for planning a location of an injection point
JP2007144177A (ja) 低コントラストの管形状対象のための半自動セグメント分割手法の方法及び装置
JP2010528750A (ja) 管状構造の検査
US20140333617A1 (en) Pattern and surgery support set, apparatus, method and program
JP6434635B2 (ja) マッピング画像表示制御装置および方法並びにプログラム
JP5422145B2 (ja) 医用画像処理装置
JP5380231B2 (ja) 医用画像表示装置および方法ならびにプログラム
JP2003339644A (ja) 臓器の切除領域抽出表示装置
CN108472001A (zh) 医用图像处理装置、其控制方法及程序
KR101540402B1 (ko) 의료용 바늘의 삽입 경로의 생성 방법
JP2023051235A (ja) 画像処理装置、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160624

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160913

R150 Certificate of patent or registration of utility model

Ref document number: 6008635

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250