JP5930539B2 - 医用画像表示装置および方法並びにプログラム - Google Patents

医用画像表示装置および方法並びにプログラム Download PDF

Info

Publication number
JP5930539B2
JP5930539B2 JP2012200429A JP2012200429A JP5930539B2 JP 5930539 B2 JP5930539 B2 JP 5930539B2 JP 2012200429 A JP2012200429 A JP 2012200429A JP 2012200429 A JP2012200429 A JP 2012200429A JP 5930539 B2 JP5930539 B2 JP 5930539B2
Authority
JP
Japan
Prior art keywords
image
cross
tubular tissue
unit
dimensional image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012200429A
Other languages
English (en)
Other versions
JP2014054359A (ja
Inventor
善則 板井
善則 板井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012200429A priority Critical patent/JP5930539B2/ja
Priority to CA2884341A priority patent/CA2884341A1/en
Priority to AU2013317199A priority patent/AU2013317199A1/en
Priority to PCT/JP2013/005326 priority patent/WO2014041789A1/ja
Priority to EP13836430.2A priority patent/EP2896367B1/en
Publication of JP2014054359A publication Critical patent/JP2014054359A/ja
Priority to US14/637,547 priority patent/US9558589B2/en
Application granted granted Critical
Publication of JP5930539B2 publication Critical patent/JP5930539B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5223—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data generating planar views from image data, e.g. extracting a coronal view from a 3D image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/08—Volume rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/68—Analysis of geometric attributes of symmetry
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/31—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the rectum, e.g. proctoscopes, sigmoidoscopes, colonoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5205—Devices using data or image processing specially adapted for radiation diagnosis involving processing of raw data to produce diagnostic data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10081—Computed x-ray tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30028—Colon; Small intestine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30172—Centreline of tubular or elongated structure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/028—Multiple view windows (top-side-front-sagittal-orthogonal)

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Geometry (AREA)
  • Quality & Reliability (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は、被検体の３次元画像から管状組織領域を抽出し、その管状組織領域の３次元画像を表示する医用画像表示装置および方法並びにプログラムに関するものである。
近年、ＣＴ（Computed Tomography）装置などのモダリティによって撮影された３次元画像から患者の大腸、小腸、気管支および血管などの管状組織を抽出し、その抽出した管状組織の３次元画像を画像診断に用いることが行われている。
たとえば、大腸コロノグラフィーにおいては、大腸領域の３次元画像に基づいて、その大腸領域の内部を通過する内視鏡の経路を決定し、その決定した経路に沿って視点を動かしながら実際にその視点から内視鏡によって撮影された画像と類似した仮想内視鏡画像を生成し、この仮想内視鏡画像を表示することによって目標とする地点までの経路をナビゲーションする技術が提案されている。
特開２００４−２８３３７３号公報
ここで、大腸領域の３次元画像を抽出する際、たとえば残渣や閉塞などが存在すると、その部分のＣＴ値は大腸領域のＣＴ値、すなわち空気のＣＴ値とは異なる値となるため大腸領域として抽出されず、図８に示すように、大腸領域が複数の領域に分離されることがしばしばある。図８に示す例の場合、点Ｐ４と点Ｐ５との間と、点Ｐ２と点Ｐ３との間とが分離部分となっている。
このように大腸領域が分離して抽出されると、内視鏡経路も分離したものとなるため分離部分における仮想内視鏡画像を生成および表示することができない。そこで、たとえば、分離された２つの大腸領域間を予め決まった規則で直線や曲線で結んで内視鏡経路とすることが考えられるが、大腸は軟組織であるため撮影する際の患者の体位による変形が大きく、上述した直線や曲線が実際の大腸領域の経路と合致する可能性は低い。
なお、特許文献１においては、血管の芯線を抽出する際、自動的に一旦抽出した芯線を２次元画像上でユーザが修正することが開示されているが、このように２次元画像上での芯線の修正は、実際の血管の３次元的な構造を把握し難いため正確な芯線の修正を行うことが困難である。
また、特許文献１においては、血管の芯線を抽出する際、血管に閉塞がある場合には、芯線の通過点を新たにユーザが追加し、その通過点を含む芯線を再抽出する方法が提案されている。
しかしながら、この方法においても、ユーザが新たに追加した点に基づいて、予め決まった規則で芯線が再抽出されるため、大腸のように変形が大きい組織の場合には、必ずしも正確な芯線が抽出されるとは限らない。
本発明は、上記事情に鑑み、大腸領域などの管状組織領域が複数の領域に分離して抽出された場合においても、簡易かつ正確にその分離部分の経路の編集などを行うことができる医用画像表示装置および方法並びにプログラムを提供することを目的とするものである。
本発明の医用画像表示装置は、被検体の３次元画像を取得する３次元画像取得部と、３次元画像取得部によって取得された３次元画像から被検体内の管状組織領域を取得する管状組織領域取得部と、管状組織領域取得部よって取得された管状組織領域が分離している場合に、その分離部分に繋がる２つの管状組織領域の端点をそれぞれ特定する端点特定部と、端点特定部によって特定された２つの端点を含む断面画像を生成する断面画像生成部と、断面画像生成部によって生成された断面画像と管状組織領域の３次元画像とを表示させる表示制御部と、上記２つの管状組織領域間を結ぶ経路の入力を受け付ける経路受付部とを備えたことを特徴とする。
また、上記本発明の医用画像表示装置においては、断面画像生成部を、管状組織領域の３次元画像の投影面の法線ベクトルと断面画像の法線ベクトルとの内積が最大となる断面画像を生成するものとできる。
また、端点特定部を、入力装置を用いてユーザによって入力された点を上記２つの端点として特定するものとできる。
また、端点特定部を、上記２つの端点を自動的に検出して特定するものとできる。
また、表示制御部を、断面画像と管状組織領域の３次元画像とを重ねて表示させるものとできる。
また、表示制御部を、断面画像と管状組織領域の３次元画像とを並べて表示させるものとできる。
また、断面画像生成部が、経路受付部において受け付けられた経路を芯線として用いて断面画像としてＣＰＲ画像（Curved Planer Reformation）を生成するものとできる。
また、経路受付部を、２つの管状組織領域間を結ぶ線の経路を複数回受け付けるものとし、断面画像生成部を、上記経路の入力毎にＣＰＲ画像を生成するものとできる。
また、管状組織を、大腸、小腸、気管支または血管とすることができる。
本発明の医用画像表示方法は、被検体の３次元画像を取得し、その取得した３次元画像から被検体内の管状組織の形状を表す管状組織領域を取得し、その取得した管状組織領域が分離している場合に、その分離部分に繋がる２つの管状組織領域の端点をそれぞれ特定し、その特定した２つの端点を含む断面画像を生成し、その生成した断面画像と管状組織領域の３次元画像とを表示させ、上記２つの管状組織領域間を結ぶ経路の入力を受け付けることを特徴とする。
本発明の医用画像表示プログラムは、コンピュータを、被検体の３次元画像を取得する３次元画像取得部と、３次元画像取得部によって取得された３次元画像から被検体内の管状組織の形状を表す管状組織領域を取得する管状組織領域取得部と、管状組織領域取得部よって取得された管状組織領域が分離している場合に、その分離部分に繋がる２つの管状組織領域の端点をそれぞれ特定する端点特定部と、端点特定部によって特定された２つの端点を含む断面画像を生成する断面生成部と、断面生成部によって生成された断面画像と管状組織領域の３次元画像とを表示させる表示制御部と、上記２つの管状組織領域間を結ぶ経路の入力を受け付ける経路受付部として機能させることを特徴とする。
本発明の医用画像表示装置および方法並びにプログラムによれば、被検体の３次元画像から被検体内の管状組織の形状を表す管状組織領域を取得し、その取得した管状組織領域が分離している場合に、その分離部分に繋がる２つの管状組織領域の端点をそれぞれ特定し、その特定した２つの端点を含む断面画像を生成し、その生成した断面画像と管状組織領域の３次元画像とを表示させ、上記２つの管状組織領域間を結ぶ経路の入力を受け付けるようにしたので、ユーザは、３次元画像を見ながら管状組織領域の３次元的な構造を把握しつつ、断面画像によって上述した分離部分の構造を把握して経路の入力を行うことができるので、簡易かつ正確に分離部分の経路の編集を行うことができる。
また、断面画像を生成する際、管状組織領域の３次元画像の投影面の法線ベクトルと断面画像の法線ベクトルとの内積が最大となる断面画像を生成するようにした場合には、断面画像上における管状組織領域をユーザの視点方向からより見易くすることができる。
また、断面画像を生成する際、ユーザによって入力された経路を芯線として用いて断面画像としてＣＰＲ画像を生成し、かつ上記経路の入力毎にＣＰＲ画像を再生成するようにした場合には、ユーザがＣＰＲ画像を確認しながら、経路に入力に最適なＣＰＲ画像を選択して表示させることができる。
本発明の医用画像表示装置の一実施形態を用いた内視鏡画像診断支援システムの概略構成を示すブロック図 本発明の医用画像表示装置の一実施形態を用いた内視鏡画像診断支援システムの作用を説明するためのフローチャート 大腸領域の３次元画像および内視鏡経路の一例を示す図 断面画像の生成方法を説明するための図 図４に示す大腸領域の３次元画像を上方から見た図 大腸領域の３次元画像と断面画像とを重ね合せて表示した一例を示す図 断面画像のその他の生成方法を説明するための図 大腸領域が複数の領域に分離して抽出された例を説明するための図
以下、本発明の医用画像表示装置および方法並びにプログラムの一実施形態を用いた内視鏡画像診断支援システムについて、図面を参照しながら詳細に説明する。図１は、第１の実施形態を用いた内視鏡画像診断支援システムの概略構成を示すブロック図である。
本内視鏡画像診断支援システムは、図１に示すように、内視鏡画像診断支援装置１と、３次元画像保管サーバ２と、ディスプレイ３と、入力装置４とを備えている。
内視鏡画像診断支援装置１は、コンピュータに本実施形態の医用画像表示プログラムがインストールされたものである。
そして、内視鏡画像診断支援装置１は、中央処理装置（ＣＰＵ）および半導体メモリや、本実施形態の医用画像表示プログラムがインストールされたハードディスクやＳＳＤ(Solid State Drive)等のストレージデバイスを備えており、これらのハードウェアによって、図１に示すような３次元画像取得部１０、管状組織領域取得部１１、内視鏡経路取得部１２、端点特定部１３、断面画像生成部１４、経路受付部１５、仮想内視鏡画像生成部１６および表示制御部１７が構成されている。そして、ハードディスクにインストールされた本実施形態の医用画像表示プログラムが中央処理装置によって実行されることによって上記各部がそれぞれ動作する。
３次元画像取得部１０は、内視鏡装置を用いた手術前または検査前などに予め撮影された被検体の３次元画像５を取得するものである。３次元画像５としては、たとえばＣＴ装置やＭＲＩ（Magnetic Resonance Imaging）装置などから出力されたスライスデータから再構成されたボリュームデータや、ＭＳ（Multi Slice）ＣＴ装置やコーンビームＣＴ装置から出力されたボリュームデータなどがある。３次元画像５は、３次元画像保管サーバ２に被検体の識別情報とともに予め保管されており、３次元画像取得部１０は、入力装置４において入力された被検体の識別情報に対応する３次元画像５を３次元画像保管サーバ２から読み出すものである。
管状組織領域取得部１１は、３次元画像取得部１０によって取得された３次元画像５が入力され、その入力された３次元画像５から被検体内の管状組織領域を取得するものである。上記管状組織としては、たとえば大腸、小腸、気管支または冠動脈などの血管があるが、これに限らずその他の管状組織でもよい。なお、本実施形態においては大腸の形状を抽出して取得するものとする。
大腸領域を抽出する方法としては、具体的には、まず、３次元画像５に基づいて体軸に垂直な断面（軸位断；axial）の軸位断画像を複数生成し、その各軸位断画像に対して、公知の手法により、体表を基準に体外と体内領域を分離する処理を行う。たとえば、入力された軸位断画像に対して二値化処理を施し、輪郭抽出処理により輪郭を抽出し、その抽出した輪郭内部を体内(人体)領域として抽出する。次に、体内領域の軸位断画像に対して閾値による二値化処理を行い、各軸位断画像における大腸の領域の候補を抽出する。具体的には、大腸の管内には空気が入っているため、空気のＣＴ値に対応する閾値（たとえば、−６００以下）を設定して二値化処理を行い、各軸位断画像の体内の空気領域を大腸領域候補として抽出する。最後に、各軸位断画像データ間で、抽出された体内の大腸領域候補がつながる部分のみを抽出することによって大腸領域を取得する。なお、大腸領域を取得する方法としては、上記の方法に限らず、その他にもRegion Growing法やLevel Set法など公知な方法を用いるようにしてもよい。
内視鏡経路取得部１２は、上記のようにして取得された大腸領域の３次元画像を細線化して大腸の中心線を推定することによって大腸の木構造を抽出し、これを内視鏡経路として取得するものである。なお、細線化処理については、公知な方法を採用することができ、たとえば“安江正宏,森 健策,齋藤豊文,他:3次元濃淡画像の細線化法と医用画像への応用における能力の比較評価.電子情報通信学会論文誌J79‐D‐H(10):1664-1674,1996”や、“齋藤豊文,番正聡志,鳥脇純一郎:ユークリッド距離に基づくスケルトンを用いた3次元細線化手法の改善一ひげの発生を制御できる一手法.電子情報通信学会論文誌(E日刷中),2001”などに記載の方法を用いることができる。
そして、内視鏡経路取得部１２は、上述したようにして取得した内視鏡経路の情報を表示制御部１７に出力するものであり、内視鏡経路は、表示制御部１７によってディスプレイ３に表示されるものである。
端点特定部１３は、上述したように取得された大腸領域および内視鏡経路が分離している場合に、その分離部分に繋がる２つの大腸領域の端点をそれぞれ特定するものである。具体的には、本実施形態においては、ディスプレイ３に表示された大腸領域が分離している場合、ユーザによってその分離部分近傍の２つの大腸領域の点が入力装置４を用いてそれぞれ選択される。具体的には、たとえばディスプレイ３に表示された内視鏡経路の端点が選択される。そして、端点特定部１３は、入力装置４によって選択された点の位置情報を取得することによって、分離した２つの大腸領域の２つの端点をそれぞれ特定するものである。そして、端点特定部１３は、２つの端点の位置情報を断面画像生成部１４に出力するものである。
断面画像生成部１４は、３次元画像取得部１０によって取得された３次元画像に基づいて、端点特定部１３から出力された２つの端点を含む断面画像を生成するものである。そして、断面画像生成部１４は、生成した断面画像を表示制御部１７に出力するものであり、断面画像は、表示制御部１７によってディスプレイ３に表示されるものである。なお、具体的な断面画像の生成方法については、後で詳述する。
経路受付部１５は、ディスプレイ３に表示された分離された２つの大腸領域間を結ぶ経路の入力を受け付けるものである。具体的には、本実施形態においては、ディスプレイ３に表示された断面画像上において、ユーザによって入力装置４を用いて分離した２つの大腸領域間を結ぶ経路が入力され、経路受付部１５は、その入力された経路の情報を取得するものである。そして、経路受付部１５は、入力された経路の情報を表示制御部１７に出力するものであり、上記経路は、表示制御部１７によってディスプレイ３に表示されるものである。
仮想内視鏡画像生成部１６は、管状組織領域取得部１１において取得された大腸領域の３次元画像が入力されるとともに、内視鏡経路取得部１２において取得された内視鏡経路と経路受付部１５においてユーザによって入力された経路とが入力されるものである。そして、仮想内視鏡画像生成部１６は、内視鏡経路とユーザによって入力された経路とを合わせた線上における所定の点を視点とした仮想内視鏡画像を生成するものである。具体的には、仮想内視鏡画像生成部１６は、上述した視点から放射線状に伸ばした複数の視線上の３次元画像を所定の投影面に投影した中心投影による投影画像を仮想内視鏡画像として取得するものである。なお、中心投影の具体的な方法としては、たとえば公知のボリュームレンダリング手法等を用いることができる。また、仮想内視鏡画像の画角（視線の範囲）や視野の中心（投影方向の中心）は、使用者による入力などによって予め設定されているものとする。
そして、仮想内視鏡画像生成部１６は、上述したようにして生成した仮想内視鏡画像を表示制御部１７に出力するものであり、仮想内視鏡画像は、表示制御部１７によってディスプレイ３に表示されるものである。
表示制御部１７は、管状組織領域取得部１１において取得された大腸領域の３次元画像
が入力され、その３次元画像に対してボリュームレンダリングやサーフェスレンダリングを施して、大腸全体の３次元画像をボクセルモデルまたはサーフェスモデルによってディスプレイ３に表示させるものである。また、表示制御部１７は、内視鏡経路取得部１２において取得された内視鏡経路と、経路受付部１５において取得された経路とが入力され、これらの経路を大腸全体の３次元画像内に重ねて表示させるものである。
また、表示制御部１７は、断面画像生成部１４において生成された断面画像と大腸全体の３次元画像と重ねてディスプレイ３に表示させるものである。また、表示制御部１７は、仮想内視鏡画像生成部１６において生成された仮想内視鏡画像をディスプレイ３に表示させるものである。
入力装置４は、ユーザによる上述したような種々の情報の入力を受け付けるものであり、たとえばキーボードやマウスなどのポインティングデバイスによって構成されるものである。
次に、本実施形態の内視鏡画像診断支援システムの作用について、図２に示すフローチャートを参照しながら説明する。
まず、入力装置４において被検体の識別情報が入力され、内視鏡画像診断支援装置１の３次元画像取得部１０は、その入力された被検体の識別情報に対応する３次元画像５を３次元画像保管サーバ２から読み出して取得する（Ｓ１０）。
３次元画像取得部１０によって取得された３次元画像は、管状組織領域取得部１１に入力され、管状組織領域取得部１１は、入力された３次元画像に基づいて大腸領域を抽出して取得する（Ｓ１２）。
管状組織領域取得部１１によって取得された大腸領域の３次元画像は、表示制御部１７に出力され、表示制御部１７は、大腸領域全体の３次元画像をディスプレイ３に表示させる（Ｓ１４）。図３に、ディスプレイ３に表示された大腸領域の一例を示している。
また、管状組織領域取得部１１によって取得された大腸領域の３次元画像は内視鏡経路取得部１２に入力され、内視鏡経路取得部１２は、入力された大腸領域の３次元画像に基づいて上述したようにして内視鏡経路を取得する。そして、内視鏡経路取得部１２によって取得された内視鏡経路は表示制御部１７に出力され、表示制御部１７は、入力された内視鏡経路をディスプレイ３に表示させる。このとき表示制御部１７は、大腸領域の３次元画像に重ねて内視鏡経路を表示させる。図３に、ディスプレイに表示された内視鏡経路の一例を示している。
ここで、上述したように、大腸領域の３次元画像を抽出し、この大腸領域に基づいて内視鏡経路を取得した場合、図３に示すように大腸領域が複数の領域に分離している場合があり、このような場合、この分離部分についての正確な内視鏡経路を取得することができない。図３に示す例では、内視鏡経路上の端点Ｐ４と端点Ｐ５の間が分離しており、また、内視鏡経路上の端点Ｐ２と端点Ｐ３の間が分離している。
そこで、本実施形態においては、図３に示す分離部分における内視鏡経路のユーザによる入力を受け付けるが、具体的には、以下のような処理を行う。
まず、ディスプレイ３に表示された大腸領域の３次元画像を見たユーザがその分離部分を確認し、ユーザによってその分離部分近傍の２つの大腸領域の端点が入力装置４を用いてそれぞれ入力される（Ｓ１８）。具体的には、本実施形態においては、図３に示す内視鏡経路上の端点Ｐ４および端点Ｐ５や端点Ｐ２および端点Ｐ３が、入力装置４を用いて選択される。そして、入力装置４を用いて選択された端点Ｐ４および端点Ｐ５や、端点Ｐ２および端点Ｐ３の位置情報が、端点特定部１３によって取得され、端点特定部１３は、入力された位置情報を、分離された２つの大腸領域の端点の位置情報として特定する（Ｓ２０）。
次に、端点特定部１３によって特定された端点の位置情報が断面画像生成部１４に入力され、断面画像生成部１４は、３次元画像取得部１０から出力された被検体の３次元画像５を用いて、入力された端点の位置情報を含む断面画像を生成する（Ｓ２２）。具体的には、たとえば、断面画像生成部１４が、図３に示す端点Ｐ４および端点Ｐ５の位置情報を取得した場合には、端点Ｐ４と端点Ｐ５を含む断面画像であって、その断面画像の法線ベクトルと大腸領域の３次元画像の投影面の法線ベクトルとの内積が最大となる断面画像を生成する。図４は、端点Ｐ４と端点Ｐ５とを結ぶ直線が、上述した投影面上に存在する場合を示しており、この場合、端点Ｐ４と端点Ｐ５とを含む断面Ｌのうち、断面Ｌと投影面とがなす各θが最小となる断面Ｌの画像が生成される。図４に示す例の場合、θが０°となる断面Ｌ、すなわち投影面の法線ベクトルと断面Ｌの法線ベクトルとが平行となる断面Ｌの画像が生成される。なお、図５は、図４に示す大腸領域の画像を上方から見た図である。
また、２つの端点は、上述したように必ずしも投影面上に存在するものではなく、いずれか一方の端点が投影面上に存在しなかったり、２つの端点の両方とも投影面上に存在しなかったりする場合があるので、断面画像生成部１４は、２つの端点を含む断面画像であって、その断面画像の法線ベクトルと大腸領域の３次元画像の投影面の法線ベクトルとの内積が最大となる断面画像を生成することになる。このような断面画像を生成することによって、大腸領域が分離した部分の断面画像をユーザの視点方向から見易くすることができる。
そして、断面画像生成部１４によって生成された断面画像は表示制御部１７に出力され、表示制御部１７は、入力された断面画像をディスプレイ３に表示する（Ｓ２４）。図６は、上述したように端点Ｐ４と端点Ｐ５を含む断面画像を大腸領域の３次元画像に重ねて表示した場合の一例を示すものである。
次に、ディスプレイ３に表示された断面画像上において、ユーザによって入力装置４を用いて分離した２つの大腸領域間を結ぶ経路が入力され、経路受付部１５は、その入力された経路の情報を取得する（Ｓ２６）。具体的には、図６に示すように、断面画像上に現れている大腸領域の範囲Ｒ内において、ユーザによって端点Ｐ４と端点Ｐ５とを結ぶ経路が入力され、経路受付部１５は、その入力された経路を分離された２つの大腸領域間を結ぶ経路として受け付ける。そして、経路受付部１５は、入力された経路の情報を表示制御部１７に出力し、表示制御部１７は、ユーザによって入力された分離部分における経路をディスプレイ３に表示させる。なお、ユーザによる経路の入力は、一度に限らず、一旦入力した経路を消去した後に再び経路の入力が可能であり、すなわち、ユーザは、所望の経路が決定するまで何度も経路の入力を行って編集することが可能である。
そして、たとえば決定ボタンなどを押下されることによって、ユーザにより入力された経路が最終的に決定すると（Ｓ２８）、経路受付部１５は、その最終的な経路の情報を仮想内視鏡画像生成部１６に出力する。
仮想内視鏡画像生成部１６は、内視鏡経路取得部１２から取得された内視鏡経路と、経路受付部１５から出力された経路とを取得し、これらの２つの経路を繋げることによって最終的な１本の内視鏡経路を取得し、その内視鏡経路に基づいて仮想内視鏡画像を生成する（Ｓ３０）。なお、仮想内視鏡画像の生成については、最終的な内視鏡経路に沿って視点を移動させて各視点における仮想内視鏡画像を順次生成するようにしてもよいし、最終的な内視鏡経路をディスプレイ３に表示させ、その表示された内視鏡経路上においてユーザによって入力装置４を用いて指定された視点の仮想内視鏡画像を生成するようにしてもよい。
そして、仮想内視鏡画像生成部１６によって生成された仮想内視鏡画像は表示制御部１７に出力され、表示制御部１７は、入力された仮想内視鏡画像をディスプレイ３に表示させる（Ｓ３２）。
上記実施形態の内視鏡画像診断支援システムによれば、被検体の３次元画像から大腸領域を抽出して取得し、その取得した大腸領域が分離している場合に、その分離部分に繋がる２つの大腸領域の端点をそれぞれ特定し、その特定した２つの端点を含む断面画像を生成し、その生成した断面画像と大腸領域の３次元画像とを表示させ、上記２つの大腸領域間を結ぶ経路の入力を受け付けるようにしたので、ユーザは、３次元画像を見ながら大腸領域の３次元的な構造を把握しつつ、断面画像によって上述した分離部分の構造を把握して経路の入力を行うことができるので、簡易かつ正確に分離部分の経路の編集を行うことができる。
なお、上記実施形態の説明においては、ユーザによって端点Ｐ４と端点Ｐ５とが選択され、この端点Ｐ４と端点Ｐ５とを含む断面画像を生成する場合について説明したが、ユーザによって端点Ｐ２と端点Ｐ３とが選択された場合には、端点Ｐ２と端点Ｐ３とを含む断面画像が生成され、その断面画像が大腸領域の３次元画像に重ねて表示される。断面画像の生成方法としては、上記と同様であり、端点Ｐ２と端点Ｐ３とを含む断面画像であって、その断面画像の法線ベクトルと大腸領域の３次元画像の投影面の法線ベクトルとの内積が最大となる断面画像が生成される。そして、その断面画像上において、ユーザによって２つの分離した大腸領域を結ぶ経路が入力され、新しい１本の内視鏡経路が決定される。
また、上記実施形態においては、端点Ｐ４および端点Ｐ５や、端点Ｐ２および端点Ｐ３をユーザが選択するようにしたが、これを自動的に検出するようにしてもよい。たとえば、内視鏡経路取得部１２によって取得された内視鏡経路の端点を端点特定部１３が自動的に検出するようにすればよい。
また、上記実施形態においては、図６に示すように、断面画像として平面の断面画像を生成する場合について説明したが、断面画像としてはこれに限らず、ＣＰＲ（Curved Planer Reformation）画像を表示するようにしても良い。
ＣＰＲ画像を表示する場合には、ＣＰＲ画像を生成する際に芯線となる経路の情報が必要となる。したがって、ＣＰＲ画像を表示する場合には、その表示の前に、まず、ユーザによって２つの分離した大腸領域間を結ぶ経路が入力される。たとえば、上記実施形態の例では、端点Ｐ４と端点Ｐ５とを結ぶ経路がユーザによって適当に入力される。
そして、このようにユーザによって入力された経路を芯線として断面画像生成部１４においてＣＰＲ画像が生成され、このＣＰＲ画像が表示制御部１７によってディスプレイ３に表示される。なお、ＣＰＲ画像の生成方法については、たとえば特開２０１２−２４５１７号公報に記載のとおり既に公知であるので、ここでは詳細な説明は省略する。
次に、たとえばディスプレイ３に表示されたＣＰＲ画像を観察したユーザが、現在表示されているＣＰＲ画像において大腸領域の分離部分が明確に現れておらず、正しい内視鏡経路を入力するのにあまり適していないと考えた場合には、再度、ユーザによって端点Ｐ４と端点Ｐ５とを結ぶ経路が入力され、その経路を芯線とするＣＰＲ画像が再度生成され、その再度生成されたＣＰＲ画像が前のＣＰＲ画像から切り替えられて表示される。このようにしてユーザによる経路の入力とその経路を芯線としてＣＰＲ画像の表示が繰り返されて行われて、最終的な経路が決定される。
また、上記実施形態においては、大腸領域の３次元画像と断面画像とを重ねて表示するようにしたが、これに限らず、大腸領域の３次元画像と断面画像とを並べて表示するようにしてもよい。特に、図３に示したように、大腸領域の分離部分が複数存在する場合には、その複数の分離部分の断面画像、たとえば端点Ｐ４および端点Ｐ５を含む断面画像と、端点Ｐ２および端点Ｐ３を含む断面画像とを並べて表示させることによって一覧性を向上させることができる。
また、上記実施形態においては、断面画像を生成する際、２つの端点を含む断面画像であって、その断面画像の法線ベクトルと大腸領域の３次元画像の投影面の法線ベクトルとの内積が最大となる断面画像を生成するようにしたが、断面画像の決定方法としてはこれに限らず、たとえば２つの端点を含む断面画像を複数生成し、その複数の断面画像をディスプレイ３に表示させ、その複数の断面画像の中からユーザが適切な１枚を選択し、そのユーザによって選択された断面画像を大腸領域の３次元画像に重ねて表示させるようにしてもよい。もしくは、上記のように２つの端点を含む断面画像を複数生成し、図７に示すように、この複数の断面画像を２つの端点を結ぶ直線を軸として回転させながら切り替えて表示させ、その切り替えて表示される複数の断面画像の中からユーザが適切な１枚を選択するようにしてもよい。なお、断面画像の切り替えについてもユーザがマウスなどを用いて行うようにしてもよい。
１ 内視鏡画像診断支援装置
２ ３次元画像保管サーバ
３ ディスプレイ
４ 入力装置
１０ ３次元画像取得部
１１ 管状組織領域取得部
１２ 内視鏡経路取得部
１３ 端点特定部
１４ 断面画像生成部
１５ 経路受付部
１６ 仮想内視鏡画像生成部
１７ 表示制御部

Claims (11)

  1. 被検体の３次元画像を取得する３次元画像取得部と、
    該３次元画像取得部によって取得された３次元画像から前記被検体内の管状組織領域を取得する管状組織領域取得部と、
    該管状組織領域取得部よって取得された管状組織領域が分離している場合に、該分離部分に繋がる２つの前記管状組織領域の端点をそれぞれ特定する端点特定部と、
    該端点特定部によって特定された２つの端点を含む断面画像を生成する断面画像生成部と、
    該断面画像生成部によって生成された断面画像と前記管状組織領域の３次元画像とを表示させる表示制御部と、
    前記２つの管状組織領域間を結ぶ経路の入力を受け付ける経路受付部とを備えたことを特徴とする医用画像表示装置。
  2. 前記断面画像生成部が、前記管状組織領域の３次元画像の投影面の法線ベクトルと前記断面画像の法線ベクトルとの内積が最大となる前記断面画像を生成するものであることを特徴とする請求項１記載の医用画像表示装置。
  3. 前記端点特定部が、入力装置を用いてユーザによって入力された点を前記２つの端点として特定するものであることを特徴とする請求項１または２記載の医用画像表示装置。
  4. 前記端点特定部が、前記２つの端点を自動的に検出して特定するものであることを特徴とする請求項１または２記載の医用画像表示装置。
  5. 前記表示制御部が、前記断面画像と前記管状組織領域の３次元画像とを重ねて表示させるものであることを特徴とする請求項１から４いずれか１項記載の医用画像表示装置。
  6. 前記表示制御部が、前記断面画像と前記管状組織領域の３次元画像とを並べて表示させるものであることを特徴とする請求項１から４いずれか１項記載の医用画像表示装置。
  7. 前記断面画像生成部が、前記経路受付部において受け付けられた経路を芯線として用いて前記断面画像としてＣＰＲ画像（Curved Planer Reformation）を生成するものであることを特徴とする請求項１から６いずれか１項記載の医用画像表示装置。
  8. 前記経路受付部が、前記２つの管状組織領域間を結ぶ線の経路を複数回受け付けるものであり、
    前記断面画像生成部が、前記経路の入力毎に前記ＣＰＲ画像を生成するものであることを特徴とする請求項７記載の医用画像表示装置。
  9. 前記管状組織が、大腸、小腸、気管支または血管であることを特徴とする請求項１から８いずれか１項記載の医用画像表示装置。
  10. 被検体の３次元画像を取得し、
    該取得した３次元画像から前記被検体内の管状組織の形状を表す管状組織領域を取得し、
    該取得した管状組織領域が分離している場合に、該分離部分に繋がる２つの前記管状組織領域の端点をそれぞれ特定し、
    該特定した２つの端点を含む断面画像を生成し、
    該生成した断面画像と前記管状組織領域の３次元画像とを表示させ、
    前記２つの管状組織領域間を結ぶ経路の入力を受け付けることを特徴とする医用画像表示方法。
  11. コンピュータを、
    被検体の３次元画像を取得する３次元画像取得部と、
    該３次元画像取得部によって取得された３次元画像から前記被検体内の管状組織の形状を表す管状組織領域を取得する管状組織領域取得部と、
    該管状組織領域取得部よって取得された管状組織領域が分離している場合に、該分離部分に繋がる２つの前記管状組織領域の端点をそれぞれ特定する端点特定部と、
    該端点特定部によって特定された２つの端点を含む断面画像を生成する断面画像生成部と、
    該断面画像生成部によって生成された断面画像と前記管状組織領域の３次元画像とを表示させる表示制御部と、
    前記２つの管状組織領域間を結ぶ経路の入力を受け付ける経路受付部として機能させるための医用画像表示プログラム。
JP2012200429A 2012-09-12 2012-09-12 医用画像表示装置および方法並びにプログラム Expired - Fee Related JP5930539B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2012200429A JP5930539B2 (ja) 2012-09-12 2012-09-12 医用画像表示装置および方法並びにプログラム
CA2884341A CA2884341A1 (en) 2012-09-12 2013-09-09 Medical image display apparatus, method, and program
AU2013317199A AU2013317199A1 (en) 2012-09-12 2013-09-09 Medical image display device, method, and programme
PCT/JP2013/005326 WO2014041789A1 (ja) 2012-09-12 2013-09-09 医用画像表示装置および方法並びにプログラム
EP13836430.2A EP2896367B1 (en) 2012-09-12 2013-09-09 Medical image display device, method, and programme
US14/637,547 US9558589B2 (en) 2012-09-12 2015-03-04 Medical image display apparatus, method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012200429A JP5930539B2 (ja) 2012-09-12 2012-09-12 医用画像表示装置および方法並びにプログラム

Publications (2)

Publication Number Publication Date
JP2014054359A JP2014054359A (ja) 2014-03-27
JP5930539B2 true JP5930539B2 (ja) 2016-06-08

Family

ID=50277931

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012200429A Expired - Fee Related JP5930539B2 (ja) 2012-09-12 2012-09-12 医用画像表示装置および方法並びにプログラム

Country Status (6)

Country Link
US (1) US9558589B2 (ja)
EP (1) EP2896367B1 (ja)
JP (1) JP5930539B2 (ja)
AU (1) AU2013317199A1 (ja)
CA (1) CA2884341A1 (ja)
WO (1) WO2014041789A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6026932B2 (ja) * 2013-03-22 2016-11-16 富士フイルム株式会社 医用画像表示制御装置および方法並びにプログラム
JP6659501B2 (ja) * 2016-09-14 2020-03-04 富士フイルム株式会社 軟骨定量化装置、方法およびプログラム
JP7553381B2 (ja) * 2021-02-22 2024-09-18 ザイオソフト株式会社 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6694163B1 (en) * 1994-10-27 2004-02-17 Wake Forest University Health Sciences Method and system for producing interactive, three-dimensional renderings of selected body organs having hollow lumens to enable simulated movement through the lumen
US5611025A (en) * 1994-11-23 1997-03-11 General Electric Company Virtual internal cavity inspection system
US6343936B1 (en) * 1996-09-16 2002-02-05 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination, navigation and visualization
US5891030A (en) * 1997-01-24 1999-04-06 Mayo Foundation For Medical Education And Research System for two dimensional and three dimensional imaging of tubular structures in the human body
US6928314B1 (en) * 1998-01-23 2005-08-09 Mayo Foundation For Medical Education And Research System for two-dimensional and three-dimensional imaging of tubular structures in the human body
US7477768B2 (en) * 1999-06-29 2009-01-13 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination of objects, such as internal organs
US7324104B1 (en) * 2001-09-14 2008-01-29 The Research Foundation Of State University Of New York Method of centerline generation in virtual objects
JP4421203B2 (ja) 2003-03-20 2010-02-24 株式会社東芝 管腔状構造体の解析処理装置
US7300398B2 (en) * 2003-08-14 2007-11-27 Siemens Medical Solutions Usa, Inc. Method and apparatus for registration of virtual endoscopic images
JP4343723B2 (ja) * 2004-01-30 2009-10-14 オリンパス株式会社 挿入支援システム
US7711163B2 (en) * 2005-05-26 2010-05-04 Siemens Medical Solutions Usa, Inc. Method and system for guided two dimensional colon screening
JP4822142B2 (ja) * 2006-05-02 2011-11-24 国立大学法人名古屋大学 内視鏡挿入支援システム及び内視鏡挿入支援方法
US9968256B2 (en) * 2007-03-08 2018-05-15 Sync-Rx Ltd. Automatic identification of a tool
JP5554028B2 (ja) * 2009-07-28 2014-07-23 株式会社東芝 医用画像処理装置、医用画像処理プログラム、及びｘ線ｃｔ装置
CN102782719B (zh) * 2009-11-27 2015-11-25 道格微系统有限公司 用于确定管状结构的拓扑支撑的评估的方法和系统及其在虚拟内窥镜检查中的使用
US9401047B2 (en) * 2010-04-15 2016-07-26 Siemens Medical Solutions, Usa, Inc. Enhanced visualization of medical image data
JP5572470B2 (ja) 2010-07-28 2014-08-13 富士フイルム株式会社 診断支援装置および方法並びにプログラム
JP5675227B2 (ja) * 2010-08-31 2015-02-25 富士フイルム株式会社 内視鏡画像処理装置および作動方法、並びに、プログラム

Also Published As

Publication number Publication date
CA2884341A1 (en) 2014-03-20
AU2013317199A1 (en) 2015-04-30
EP2896367B1 (en) 2017-11-29
EP2896367A4 (en) 2016-04-20
WO2014041789A1 (ja) 2014-03-20
US20150178989A1 (en) 2015-06-25
JP2014054359A (ja) 2014-03-27
US9558589B2 (en) 2017-01-31
EP2896367A1 (en) 2015-07-22

Similar Documents

Publication Publication Date Title
JP5918548B2 (ja) 内視鏡画像診断支援装置およびその作動方法並びに内視鏡画像診断支援プログラム
US20170296032A1 (en) Branching structure determination apparatus, method, and program
US8548213B2 (en) Method and system for guiding catheter detection in fluoroscopic images
JP5369078B2 (ja) 医用画像処理装置および方法、並びにプログラム
JP5947707B2 (ja) 仮想内視鏡画像表示装置および方法並びにプログラム
US20160228075A1 (en) Image processing device, method and recording medium
JP5785120B2 (ja) 医用画像診断支援装置および方法並びにプログラム
JP2006246941A (ja) 画像処理装置及び管走行トラッキング方法
US20120026162A1 (en) Diagnosis assisting apparatus, diagnosis assisting program, and diagnosis assisting method
US9198603B2 (en) Device, method and program for searching for the shortest path in a tubular structure
JP5826082B2 (ja) 医用画像診断支援装置および方法並びにプログラム
US10398286B2 (en) Medical image display control apparatus, method, and program
JP5930539B2 (ja) 医用画像表示装置および方法並びにプログラム
JP5554028B2 (ja) 医用画像処理装置、医用画像処理プログラム、及びｘ線ｃｔ装置
JP4022192B2 (ja) 挿入支援システム
US11056149B2 (en) Medical image storage and reproduction apparatus, method, and program
US9905004B2 (en) Image processing device, method, and recording medium having stored therein program
JP6026357B2 (ja) 仮想内視鏡画像生成装置および方法並びにプログラム
JP5918734B2 (ja) 医用画像処理装置およびその作動方法並びに医用画像処理プログラム
JP2011182946A (ja) 医用画像表示装置及び医用画像表示方法
Rigas et al. Methodology for micro-CT data inflation using intravascular ultrasound images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151013

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160425

R150 Certificate of patent or registration of utility model

Ref document number: 5930539

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees