JP5657467B2 - 医療用画像表示システム - Google Patents
医療用画像表示システム Download PDFInfo
- Publication number
- JP5657467B2 JP5657467B2 JP2011108509A JP2011108509A JP5657467B2 JP 5657467 B2 JP5657467 B2 JP 5657467B2 JP 2011108509 A JP2011108509 A JP 2011108509A JP 2011108509 A JP2011108509 A JP 2011108509A JP 5657467 B2 JP5657467 B2 JP 5657467B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- volume
- stereoscopic
- unit
- relative position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Endoscopes (AREA)
Description
図1は本発明の一実施形態の医療用画像表示システムの構成を示すブロック図である。
磁気センサ内蔵の超音波内視鏡102は、患部の断層画像を取得する断層画像取得手段として機能する。その出力は、ビデオプロセッサ部を有するCCU109へ供給される。なお、超音波内視鏡102に代えて、術中の断層画像を取得可能なCT装置やMRI装置であっても良い。
画像相関演算部104は、前記立体画像と前記ボリューム画像の相対位置を検出する相対位置検出手段の一部として機能する。
表面画像生成部106は、前記立体画像から表面形状画像としてのサーフェスレンダリング画像を構築する表面形状画像構築部として機能する。
3D硬性鏡側のCCU108は、3D硬性鏡101からの右眼及び左眼用の二系統の3D撮像信号を入力し、3D映像信号として出力する一方、ズームやフォーカスなどの光学パラメータを生成し出力する。
磁気ナビ装置110は、3D硬性鏡101,超音波内視鏡102,及び手術器具などの処置具(図示略)にそれぞれ取り付けた磁気センサからの磁気を、例えばタイムシェアリングで受信して各装置からの磁気の強さ及び方向を検出することによって、各装置の位置や向きを検出し、位置情報として出力する位置検出装置として機能する。なお、位置検出装置としては、磁気式のナビゲーション装置に代えて光学式のナビゲーション装置を用いる構成としてもよい。
1.3D硬性鏡101の3D画像に、超音波(US)の3Dボリューム画像を位置合わせして重ねて表示するので、被検体の患部の外観(表面)画像もその内部の奥行き画像も立体的に観察することができる。超音波の3Dボリューム画像については、血管像、腫瘍などを選択して表示することも可能である。
3.画像相関演算部104が、3Dボリューム画像(例えば内包された血管像)だけでなく、超音波内視鏡102のバーチャル3Dイメージ(例えばUSプローブの像)を3D画像の中に重ね合わせることもできる。これに加えて、超音波内視鏡102によるスキャン断面や、ボリューム画像を取得した範囲を3D表示で重ね合わせることもできる。
これにより、実画像とこれに重畳される画像との区別がしやすくなり、術者の疲労軽減に効果がある。従って、深さを含む奥行き方向の情報も認識しやすくなる。
これにより、画面全体に色々な色が存在する場合や、画面が特定臓器などの特定の色にかたよる場合に、重畳しようとする画像に対してより認識しやすい色設定が可能となる。
これにより、重畳しようとする画像が複数存在する場合などに、演算が比較的容易であり、複数の重畳するもの毎に色を変えることができ、かつ観察実画像とは区別しやすい。
ステップS1:3D内視鏡の左右画像から被写体の各点までの距離情報を演算する。例えば、磁気ナビ装置による内視鏡位置,内視鏡方向,距離,倍率,フォーカスにより演算する。
ステップS3:注目したい対象臓器のボリューム画像を予め生成しておく。
ステップS4:表面形状情報とボリューム画像情報との位置合わせをする。
ステップS6:ボリューム画像を、内視鏡の左右眼に対応する視点から見た左右画像に生成する。
ステップS7:内視鏡画像の色を測定する。
ステップS8:左右のボリューム画像を、内視鏡画像の色の補色で生成する。
ステップS10:処置具の形状データから、内視鏡視野に対する処置具の表示位置を演算する。この演算は、左右眼に対応してそれぞれ行う。
ステップS12:内視鏡の右眼画像に右のボリューム画像を重畳し、内視鏡の左眼画像に左のボリューム画像を重畳する。
Claims (4)
- 患部を立体観察する立体観察装置と、
この立体観察装置で得られる立体画像を表示する表示装置と、
患部の断層画像を取得する断層画像取得手段と、
前記断層画像取得手段で取得した複数の断層画像からボリューム画像を構築するボリューム画像構築手段と、
前記立体画像と前記ボリューム画像の相対位置を検出する第1の相対位置検出手段と、
前記ボリューム画像を前記表示装置に、前記相対位置に基づいて前記立体画像と重ねて表示する画像重畳手段と、
患部に挿入される手術器具の前記立体画像に対する相対位置を検出する第2の相対位置検出手段と、
前記手術器具が表示される領域には前記重畳されるボリューム画像を表示しないように制御する表示制御手段と、を具備し、
前記第1の相対位置検出手段は、
処置が進行する過程で、前記立体観察装置で取得される立体画像から、患部を含む被検体上の各点までの距離情報を演算する演算部と、
前記立体画像から前記距離情報を用いて前記被検体の表面形状画像を構築する表面形状画像構築部と、
前記表面形状画像と前記ボリューム画像の相対位置を求める相関部と、
前記表面形状画像から、処置の進行に伴って生ずる前記表面形状画像の変形に対応して、前記ボリューム画像構築手段で構築される前記ボリューム画像を変形させる変形部と、
を含むことを特徴とする医療用画像表示システム。 - 前記第1の相対位置検出手段は、前記断層画像取得手段で取得したボリューム画像と、前記立体画像から構築した表面形状画像との輪郭の特徴点の相関を取ることによって、2つの画像の重ね合わせをマッチングさせる
ことを特徴とする請求項1に記載の医療用画像表示システム。 - 前記画像重畳手段は、重畳画像の色調を前記立体画像の対応位置の色調に基づいて決定する色調設定手段を有すること、
を特徴とする請求項1または請求項2に記載の医療用画像表示システム。 - 前記色調設定手段は、前記重畳画像の色調を前記立体画像の対応位置の補色関係にある色に決定する
ことを特徴とする請求項3に記載の医療用画像表示システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011108509A JP5657467B2 (ja) | 2011-05-13 | 2011-05-13 | 医療用画像表示システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011108509A JP5657467B2 (ja) | 2011-05-13 | 2011-05-13 | 医療用画像表示システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012235983A JP2012235983A (ja) | 2012-12-06 |
| JP5657467B2 true JP5657467B2 (ja) | 2015-01-21 |
Family
ID=47459460
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011108509A Expired - Fee Related JP5657467B2 (ja) | 2011-05-13 | 2011-05-13 | 医療用画像表示システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5657467B2 (ja) |
Families Citing this family (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6205125B2 (ja) * | 2012-12-11 | 2017-09-27 | オリンパス株式会社 | 内視鏡装置の挿入支援情報検出システム及び内視鏡装置 |
| JP6649260B2 (ja) * | 2014-02-04 | 2020-02-19 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 血管の深さ及び位置の可視化並びに血管断面のロボットガイド可視化 |
| US10772684B2 (en) * | 2014-02-11 | 2020-09-15 | Koninklijke Philips N.V. | Spatial visualization of internal mammary artery during minimally invasive bypass surgery |
| DE102014107443A1 (de) * | 2014-05-27 | 2015-12-03 | Carl Zeiss Meditec Ag | Mikroskop-System mit Tiefenvorschau |
| JP6323183B2 (ja) | 2014-06-04 | 2018-05-16 | ソニー株式会社 | 画像処理装置および画像処理方法 |
| CN107106119A (zh) | 2014-10-30 | 2017-08-29 | 皇家飞利浦有限公司 | 弯曲结构的超声可视化 |
| US10376335B2 (en) | 2015-05-20 | 2019-08-13 | Siemens Healthcare Gmbh | Method and apparatus to provide updated patient images during robotic surgery |
| US9622831B2 (en) * | 2015-05-20 | 2017-04-18 | Siemens Healthcare Gmbh | Method and apparatus to provide updated patient images during robotic surgery |
| US10271906B2 (en) | 2015-11-06 | 2019-04-30 | Biosense Webster (Israel) Ltd. | Updating a volumetric map |
| JP6698824B2 (ja) * | 2016-04-11 | 2020-05-27 | 富士フイルム株式会社 | 画像表示制御装置および方法並びにプログラム |
| EP3463032B1 (en) * | 2016-05-31 | 2020-12-23 | Koninklijke Philips N.V. | Image-based fusion of endoscopic image and ultrasound images |
| WO2019155931A1 (ja) * | 2018-02-09 | 2019-08-15 | ソニー株式会社 | 手術システム、画像処理装置及び画像処理方法 |
| JP6512320B2 (ja) * | 2018-02-21 | 2019-05-15 | 株式会社島津製作所 | イメージング装置 |
| JP7134656B2 (ja) * | 2018-03-15 | 2022-09-12 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用表示制御装置、および表示制御方法 |
| JP7128135B2 (ja) * | 2019-03-08 | 2022-08-30 | 富士フイルム株式会社 | 内視鏡画像学習装置、方法及びプログラム、内視鏡画像認識装置 |
| CN115087384A (zh) * | 2020-03-03 | 2022-09-20 | 奥林巴斯株式会社 | 外科手术系统及外科手术方法 |
| EP4364636A4 (en) * | 2021-06-29 | 2024-07-03 | NEC Corporation | Image processing device, image processing method, and storage medium |
| WO2023148812A1 (ja) * | 2022-02-01 | 2023-08-10 | 日本電気株式会社 | 画像処理装置、画像処理方法及び記憶媒体 |
| WO2025009009A1 (ja) * | 2023-07-03 | 2025-01-09 | オリンパスメディカルシステムズ株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
Family Cites Families (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01108690A (ja) * | 1987-10-22 | 1989-04-25 | Hitachi Medical Corp | 3次元手術シミュレーション装置 |
| CA2003497C (en) * | 1989-11-21 | 1999-04-06 | Michael M. Greenberg | Probe-correlated viewing of anatomical image data |
| JPH05305073A (ja) * | 1992-05-01 | 1993-11-19 | Olympus Optical Co Ltd | 挿入具の位置検出表示装置 |
| JPH0984746A (ja) * | 1995-07-19 | 1997-03-31 | Olympus Optical Co Ltd | 磁気共鳴観測システム |
| US5841830A (en) * | 1997-02-19 | 1998-11-24 | Picker International, Inc. | 3D CT fluoroscopy |
| JPH11309A (ja) * | 1997-06-12 | 1999-01-06 | Hitachi Ltd | 画像処理装置 |
| EP1196089A2 (en) * | 1999-03-31 | 2002-04-17 | Ultraguide Ltd. | Apparatus and methods for medical diagnostic and for medical guided interventions and therapy |
| US7343195B2 (en) * | 1999-05-18 | 2008-03-11 | Mediguide Ltd. | Method and apparatus for real time quantitative three-dimensional image reconstruction of a moving organ and intra-body navigation |
| JP2002017729A (ja) * | 2000-07-11 | 2002-01-22 | Toshiba Corp | 超音波内視鏡診断装置 |
| JP4674948B2 (ja) * | 2000-09-29 | 2011-04-20 | オリンパス株式会社 | 手術ナビゲーション装置および手術ナビゲーション装置の作動方法 |
| DE10210646A1 (de) * | 2002-03-11 | 2003-10-09 | Siemens Ag | Verfahren zur Bilddarstellung eines in einen Untersuchungsbereich eines Patienten eingebrachten medizinischen Instruments |
| JP2004089421A (ja) * | 2002-08-30 | 2004-03-25 | Shimadzu Corp | 手術支援装置 |
| JP4590189B2 (ja) * | 2004-01-30 | 2010-12-01 | オリンパス株式会社 | バーチャル画像表示装置 |
| JP2006061274A (ja) * | 2004-08-25 | 2006-03-09 | Konica Minolta Medical & Graphic Inc | プログラム、及び内視鏡システム |
| US7889905B2 (en) * | 2005-05-23 | 2011-02-15 | The Penn State Research Foundation | Fast 3D-2D image registration method with application to continuously guided endoscopy |
| JP4989262B2 (ja) * | 2007-03-15 | 2012-08-01 | 株式会社日立メディコ | 医用画像診断装置 |
| JP5219129B2 (ja) * | 2007-03-20 | 2013-06-26 | 国立大学法人静岡大学 | 形状情報処理方法、形状情報処理装置及び形状情報処理プログラム |
| FR2916957B1 (fr) * | 2007-06-05 | 2010-08-27 | Gen Electric | Procede et systeme de recalage d'images |
| JP5134316B2 (ja) * | 2007-09-05 | 2013-01-30 | 株式会社東芝 | 医用画像診断装置 |
| EP2210213A4 (en) * | 2007-10-18 | 2012-10-03 | Univ North Carolina | METHODS, SYSTEMS, AND COMPUTER-READABLE MEDIA FOR MAPPING REGIONS IN A MODEL OF AN OBJECT COMPRISING AN ANATOMICAL STRUCTURE FROM AN IMAGE DATA SET USED IN DIAGNOSIS OR THERAPEUTIC INTERVENTION |
| JP5372407B2 (ja) * | 2008-05-23 | 2013-12-18 | オリンパスメディカルシステムズ株式会社 | 医療機器 |
| CN104605928B (zh) * | 2009-05-08 | 2018-01-05 | 圣犹达医疗用品国际控股有限公司 | 用于在基于导管的消融治疗中控制损伤尺寸的系统 |
| WO2010136922A1 (en) * | 2009-05-28 | 2010-12-02 | Koninklijke Philips Electronics N.V. | Re-calibration of pre-recorded images during interventions using a needle device |
-
2011
- 2011-05-13 JP JP2011108509A patent/JP5657467B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012235983A (ja) | 2012-12-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5657467B2 (ja) | 医療用画像表示システム | |
| US11883118B2 (en) | Using augmented reality in surgical navigation | |
| JP6395995B2 (ja) | 医療映像処理方法及び装置 | |
| EP3395282B1 (en) | Endoscopic view of invasive procedures in narrow passages | |
| US6690964B2 (en) | Method and device for visualization of positions and orientation of intracorporeally guided instruments during a surgical intervention | |
| JP6242569B2 (ja) | 医用画像表示装置及びx線診断装置 | |
| CN101669831B (zh) | 基准图像显示方法 | |
| JP5348889B2 (ja) | 穿刺治療支援装置 | |
| JP6116754B2 (ja) | 低侵襲手術において画像データを立体視表示するための装置およびその装置の作動方法 | |
| JPH11309A (ja) | 画像処理装置 | |
| CA2808757A1 (en) | System and method for determining camera angles by using virtual planes derived from actual images | |
| JP4989262B2 (ja) | 医用画像診断装置 | |
| RU2676521C2 (ru) | Интеграция ультразвуковой и рентгеновской модальностей | |
| JP3707830B2 (ja) | 術式支援用画像表示装置 | |
| US10951837B2 (en) | Generating a stereoscopic representation | |
| WO2014076931A1 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| KR102278893B1 (ko) | 의료영상처리장치 및 이를 이용한 의료영상정합방법 | |
| JP4875416B2 (ja) | 医用ガイドシステム | |
| JP5470185B2 (ja) | 医用画像処理装置及び治療支援システム | |
| EP2954846B1 (en) | Swipe to see through ultrasound imaging for intraoperative applications | |
| JP2010069018A (ja) | 医用ガイドシステム | |
| JP2002253480A (ja) | 医療処置補助装置 | |
| JPH0984746A (ja) | 磁気共鳴観測システム | |
| WO2015091226A1 (en) | Laparoscopic view extended with x-ray vision | |
| JP2009247641A (ja) | 超音波画像処理装置及び手術支援装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131004 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140311 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140314 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140512 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141111 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141126 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5657467 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |