JP5030335B2 - 医用画像表示装置 - Google Patents

医用画像表示装置 Download PDF

Info

Publication number
JP5030335B2
JP5030335B2 JP2001061939A JP2001061939A JP5030335B2 JP 5030335 B2 JP5030335 B2 JP 5030335B2 JP 2001061939 A JP2001061939 A JP 2001061939A JP 2001061939 A JP2001061939 A JP 2001061939A JP 5030335 B2 JP5030335 B2 JP 5030335B2
Authority
JP
Japan
Prior art keywords
image
subject
image output
data
output means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001061939A
Other languages
English (en)
Other versions
JP2002263053A5 (ja
JP2002263053A (ja
Inventor
幸人 古橋
弘 松崎
明人 斉藤
隆男 柴▲崎▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2001061939A priority Critical patent/JP5030335B2/ja
Priority to US10/091,861 priority patent/US20020128547A1/en
Publication of JP2002263053A publication Critical patent/JP2002263053A/ja
Publication of JP2002263053A5 publication Critical patent/JP2002263053A5/ja
Application granted granted Critical
Publication of JP5030335B2 publication Critical patent/JP5030335B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Endoscopes (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、医用画像表示装置に関するものである。
【0002】
【従来の技術】
特開平10−143652号公報は、画面全体に表示された実写画像である2次元ライブ画像に、データ像である3次元医用画像を重畳して表示するにあたって、この3次元医用画像の重畳領域を任意に設定可能な構成を開示している。また、視野のすべてにデータ像を作成、表示して仮想的に内腔を観察する内視鏡が知られている。
【0003】
【発明が解決しようとする課題】
しかしながら、上記した特開平10−143652号公報では、実写画像の中の一部分に対応したデータ像しか重畳表示していない。したがって、細径の内視鏡では実写画像の視野が狭いために現在被検体のどの部分を観察しているのかが把握しにくい。また、視野のすべてにデータ像を作成、表示する内視鏡においては、被検体の実写画像とデータ像の位置関係がわからないという問題がある。
【0004】
本発明はこのような課題に着目してなされたものであり、その目的とするところは、狭い実写画像をより広いデータ像と重畳することによって、実写画像とデータ像との位置関係及び観察領域が被検体のどの部分であるかを容易に把握できる医用画像表示装置を提供することにある。
【0005】
【課題を解決するための手段】
上記の目的を達成するために、第1の発明は、医用画像表示装置であって、画像入力手段により撮影された被検体の実写画像を出力する第1の画像出力手段と、上記画像入力手段および被検体の位置姿勢を検出する3次元位置姿勢計測手段と、上記3次元位置姿勢計測手段からの位置姿勢情報を用いて、予め記録された被検体のデータより被検体のデータ像を生成し出力する第2の画像出力手段と、上記第1の画像出力手段および上記第2の画像出力手段と接続され、上記第1の画像出力手段および上記第2の画像出力手段と接続され、上記第1の画像出力手段および上記第2の画像出力手段から出力された被検体の出力画像を重畳して表示する画像表示手段とを有し、上記第2の画像出力手段の出力する被検体の領域は、上記第1の画像出力手段の出力する被検体領域よりも広く、上記画像表示手段は、上記第1の画像出力手段からの画像出力を表示する第1の表示領域と、上記第1の表示領域の周囲に配置され、上記第2の画像出力手段からの画像出力を表示する第2の表示領域と、を有し、上記第1の表示領域と上記第2の表示領域は境界部分にのみ重複する部分を有している
【0009】
また、第の発明は、第1の発明に係る医用画像表示装置において、上記第2の画像出力手段から出力される被検体データ像はワイヤフレーム像である。
【0010】
また、第の発明は、第1の発明に係る医用画像表示装置において、上記第2の画像出力手段から出力される被検体データ像は、被検体を点で描画した像である。
【0011】
また、第の発明は、第1の発明に係る医用画像表示装置において、上記第2の画像出力手段から出力される被検体データ像は、第1の画像出力手段からの画像を透過して表示するサーフェス画像である。
【0019】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を詳細に説明する。図1は、本実施形態に係る医用画像表示装置の構成を示す図である。
【0020】
画像入力手段としての硬性鏡3により取り込まれた被検体1の光像はカメラヘッド5により電気信号に変換される。第1の画像出力手段としてのCCU(カメラコントロールユニット)6はこの信号をNTSCやPAL等の映像信号に変換して、これを硬性鏡3の視野に相当する実写画像として画像重畳部10に出力する。
【0021】
被検体1には赤外線LED200が固定的に取付けられている。LED取付け位置姿勢情報格納部101にはあらかじめ計測された、赤外線LED200と被検体1の3次元データとの3次元的な位置姿勢情報が格納されている。
【0022】
カメラヘッド5には赤外線LED2が取り付けられている。この赤外線LED2と赤外線LED200とを計測範囲に含むように位置センサ4が設けられている。位置センサ4により赤外線LED2と赤外線LED200とから赤外線を検出した情報と、LED取付け位置姿勢情報格納部101に格納されたLED取付け位置姿勢情報とを用いて位置姿勢演算部7で演算を行うことにより、移動している硬性鏡3の被検体に対する相対的な位置と姿勢を3次元的に検出することができる。
【0023】
位置姿勢演算部7からの位置姿勢情報はデータ像生成部9に入力される。被検体3次元データ格納部8にはCTやMRI等の手法によりあらかじめ取得した被検体1のスライス画像に基づいて作成した被検体3次元データが格納されている。また、硬性鏡光学パラメータ格納部100には予め計測された硬性鏡3の光学的なパラメータ(中心位置、拡大率、歪情報等)が格納されている。
【0024】
第2の画像出力手段としてのデータ像作成部9は位置姿勢演算部7からの位置姿勢情報と、硬性鏡光学パラメータ格納部100の情報とに基いて被検体3次元データを被写体3次元データ格納部8から読み出して硬性鏡3の実写像視野外側のデータ像を生成し、画像重畳部10に出力する。データ像生成部19で生成したデータ像は、硬性鏡光学パラメータ格納部100の情報を利用しているので、硬性鏡3の視野を拡大した画像に一致するものである。
【0025】
画像重畳部10は、CCU6からの視野内実写画像とデータ像生成部9からの視野外データ像とを重畳してCRT11に送る。
【0026】
図2はCRT11の表示画面に表示された被検体1の実写画像と視野外側のデータ像とを重畳して表示した例を示す図である。第1の表示領域としての表示画面の略中央の円形領域には実写画像51が表示され、その周囲の第2の表示領域には実写画像と接続するように視野外データ像50が表示されている。このように狭い実写画像51をより広いデータ像50と重畳することによって実写画像51とデータ像50との位置関係及び観察領域が被検体のどの部分であるかを容易に把握できる。
【0027】
図3は、被検体1の実写画像51と視野外側のデータ像50とを重畳して表示する第1の変形例であり、この変形例では、実写画像51が表示される表示領域を四角形にしている。
【0028】
図4は、被検体1の実写画像と視野外側のデータ像とを重畳して表示する第2の変形例を示す図である。この変形例では第1の領域としての表示画面の略中央に表示される実写画像51と、第1の表示領域の周囲に配置された第2の領域に表示されるデータ像50との境界部分にドーナツ状の重複部12を設けている。この部分では実写画像51とデータ像50とが重ね合わされて表示されるので、実写画像51とデータ像50の位置関係を把握しやすくなる。すなわち、重複部12において実写画像51にデータ像50が一致しているかどうかを目視にて確認することができる。
【0029】
図5は、被検体1の実写画像と視野外側のデータ像とを重畳して表示する第3の変形例を示す図である。この変形例では第1の領域としての表示画面の略中央には実写画像51を表示し、この第1の表示領域の周囲に配置された第2の領域にはデータ像50を表示し、さらに第1の表示領域に表示されている実写画像51には、対応するデータ像50の輪郭部50’を重畳している。このように、実写画像51にデータ像50の輪郭部50’を重ね合わせることによって、実写画像51の見やすさを損なうことなく、実写画像51内部の映像とデータ像50との位置関係が容易に把握できる。すなわち、実写画像51内部についてもデータ像50が一致しているかどうかを目視にて確認することができる。
【0030】
また、上記した実施形態では、実写画像51を表示画面の略中央に表示したが、これに限定されることはなく、例えば図6に示すように実写画像51を表示画面の右下部に表示するようにしてもよい。
【0031】
なお、上記第2の表示領域に表示されるデータ像としては、ワイヤフレーム像、被検体を点で描画した像、あるいは上記第1の表示領域に表示される実写画像を透過して表示するサーフェス画像を用いることができる。
【0032】
【発明の効果】
請求項に記載の発明によれば、狭い実写画像の周囲により広いデータ像を表示するようにしたので、実写画像とデータ像との位置関係及び観察領域が被検体のどの部分であるかを容易に把握でき、また、狭い実写画像の視野を拡張し、観察領域が被検体のどの部分であるかを容易に把握できる。
【0034】
また、請求項に記載の発明によれば、実写画像とデータ像が重ねて表示され部分があるので、実写画像とデータ像の位置関係を把握しやすくなる。
【図面の簡単な説明】
【図1】本実施形態に係る医用画像表示装置の構成を示す図である。
【図2】CRT11の表示画面に表示された被検体1の実写画像と視野外側のデータ像とを重畳して表示した例を示す図である。
【図3】被検体1の実写画像と視野外側のデータ像とを重畳して表示する第1の変形例を示す図である。
【図4】被検体1の実写画像と視野外側のデータ像とを重畳して表示する第2の変形例を示す図である。
【図5】被検体1の実写画像と視野外側のデータ像とを重畳して表示する第3の変形例を示す図である。
【図6】実写画像を表示する変形例を示す図である。
【符号の説明】
1 被検体
2 赤外線LED
3 硬性鏡
4 位置センサ
5 カメラヘッド
6 CCU(カメラコントロールユニット)
7 位置姿勢演算部
8 被検体3Dデータ格納部
9 データ像生成部
10 画像重畳部
11 CRT
12 重複部
50 データ像
50’ 輪郭部
51 実写画像

Claims (4)

  1. 画像入力手段により撮影された被検体の実写画像を出力する第1の画像出力手段と、
    上記画像入力手段および被検体の位置姿勢を検出する3次元位置姿勢計測手段と、
    上記3次元位置姿勢計測手段からの位置姿勢情報を用いて、予め記録された被検体のデータより被検体のデータ像を生成し出力する第2の画像出力手段と、
    上記第1の画像出力手段および上記第2の画像出力手段と接続され、上記第1の画像出力手段および上記第2の画像出力手段から出力された被検体の出力画像を重畳して表示する画像表示手段とを有し、
    上記第2の画像出力手段の出力する被検体の領域は、上記第1の画像出力手段の出力する被検体領域よりも広く、
    上記画像表示手段は、
    上記第1の画像出力手段からの画像出力を表示する第1の表示領域と、
    上記第1の表示領域の周囲に配置され、上記第2の画像出力手段からの画像出力を表示する第2の表示領域と、
    を有し、
    上記第1の表示領域と上記第2の表示領域は境界部分にのみ重複する部分を有している、
    ことを特徴とする医用画像表示装置。
  2. 上記第2の画像出力手段から出力される被検体データ像はワイヤフレーム像であることを特徴とする請求項1に記載の医用画像表示装置。
  3. 上記第2の画像出力手段から出力される被検体データ像は、被検体を点で描画した像であることを特徴とする請求項1に記載の医用画像表示装置。
  4. 上記第2の画像出力手段から出力される被検体データ像は、第1の画像出力手段からの画像を透過して表示するサーフェス画像であることを特徴とする請求項1に記載の医用画像表示装置。
JP2001061939A 2001-03-06 2001-03-06 医用画像表示装置 Expired - Fee Related JP5030335B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001061939A JP5030335B2 (ja) 2001-03-06 2001-03-06 医用画像表示装置
US10/091,861 US20020128547A1 (en) 2001-03-06 2002-03-06 Medical image display apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001061939A JP5030335B2 (ja) 2001-03-06 2001-03-06 医用画像表示装置

Publications (3)

Publication Number Publication Date
JP2002263053A JP2002263053A (ja) 2002-09-17
JP2002263053A5 JP2002263053A5 (ja) 2008-03-06
JP5030335B2 true JP5030335B2 (ja) 2012-09-19

Family

ID=18921153

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001061939A Expired - Fee Related JP5030335B2 (ja) 2001-03-06 2001-03-06 医用画像表示装置

Country Status (2)

Country Link
US (1) US20020128547A1 (ja)
JP (1) JP5030335B2 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003334162A (ja) * 2002-03-14 2003-11-25 Olympus Optical Co Ltd 内視鏡画像処理装置
US7620229B2 (en) * 2003-08-14 2009-11-17 Fujifilm Corporation Method and apparatus for aiding image interpretation and computer-readable recording medium storing program therefor
JP2006198032A (ja) * 2005-01-18 2006-08-03 Olympus Corp 手術支援システム
JP2007244746A (ja) * 2006-03-17 2007-09-27 Olympus Medical Systems Corp 観察システム
US9636188B2 (en) * 2006-03-24 2017-05-02 Stryker Corporation System and method for 3-D tracking of surgical instrument in relation to patient body
EP2123232A4 (en) * 2007-01-31 2011-02-16 Nat University Corp Hamamatsu University School Of Medicine DEVICE, METHOD, AND PROGRAM FOR DISPLAYING ASSISTANCE INFORMATION FOR SURGICAL OPERATION
JP5283157B2 (ja) * 2007-03-20 2013-09-04 国立大学法人静岡大学 手術支援情報表示装置、手術支援情報表示方法及び手術支援情報表示プログラム
WO2009050589A2 (en) * 2007-04-16 2009-04-23 The Governors Of The University Of Calgary Methods, devices, and systems relating to cameras configured to be positioned within the bore of a magnet and mr bore space illumination
US8788967B2 (en) * 2008-04-10 2014-07-22 Perceptive Pixel, Inc. Methods of interfacing with multi-input devices and multi-input display systems employing interfacing techniques
JP5569711B2 (ja) 2009-03-01 2014-08-13 国立大学法人浜松医科大学 手術支援システム
JP5421828B2 (ja) 2010-03-17 2014-02-19 富士フイルム株式会社 内視鏡観察支援システム、並びに、内視鏡観察支援装置、その作動方法およびプログラム
JP5535725B2 (ja) 2010-03-31 2014-07-02 富士フイルム株式会社 内視鏡観察支援システム、並びに、内視鏡観察支援装置、その作動方法およびプログラム
JP5380348B2 (ja) 2010-03-31 2014-01-08 富士フイルム株式会社 内視鏡観察を支援するシステムおよび方法、並びに、装置およびプログラム
JP5551957B2 (ja) 2010-03-31 2014-07-16 富士フイルム株式会社 投影画像生成装置およびその作動方法、並びに投影画像生成プログラム
JP5808004B2 (ja) * 2011-08-24 2015-11-10 国立大学法人 奈良先端科学技術大学院大学 画像処理装置、画像処理方法、およびプログラム
JP5961504B2 (ja) 2012-09-26 2016-08-02 富士フイルム株式会社 仮想内視鏡画像生成装置およびその作動方法並びにプログラム
JP5934070B2 (ja) 2012-09-26 2016-06-15 富士フイルム株式会社 仮想内視鏡画像生成装置およびその作動方法並びにプログラム
JP2016158886A (ja) * 2015-03-02 2016-09-05 パナソニックIpマネジメント株式会社 内視鏡及び内視鏡システム
US11666203B2 (en) * 2018-10-04 2023-06-06 Biosense Webster (Israel) Ltd. Using a camera with an ENT tool

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5961454A (en) * 1993-08-13 1999-10-05 The Brigham And Women's Hospital Fusion of anatomical data sets into stereotactic coordinates
JPH0984746A (ja) * 1995-07-19 1997-03-31 Olympus Optical Co Ltd 磁気共鳴観測システム
JP3683977B2 (ja) * 1996-03-22 2005-08-17 株式会社東芝 医用画像診断装置
JPH10234664A (ja) * 1997-02-27 1998-09-08 Toshiba Corp 画像処理装置
JP3856406B2 (ja) * 1997-02-27 2006-12-13 株式会社東芝 画像処理装置
JPH11309A (ja) * 1997-06-12 1999-01-06 Hitachi Ltd 画像処理装置
WO1999000052A1 (en) * 1997-06-27 1999-01-07 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for volumetric image navigation
US6385476B1 (en) * 1999-09-21 2002-05-07 Biosense, Inc. Method and apparatus for intracardially surveying a condition of a chamber of a heart

Also Published As

Publication number Publication date
US20020128547A1 (en) 2002-09-12
JP2002263053A (ja) 2002-09-17

Similar Documents

Publication Publication Date Title
JP5030335B2 (ja) 医用画像表示装置
KR102657956B1 (ko) 해부학적 구조를 스캐닝하고 스캐닝 결과를 디스플레이하기 위한 시스템 및 방법
US10706610B2 (en) Method for displaying an object
US9662042B2 (en) Endoscope system for presenting three-dimensional model image with insertion form image and image pickup image
US8376951B2 (en) Ultrasonic diagnostic apparatus and method for displaying probe operation guide
JP6083103B2 (ja) 画像内遮蔽領域の画像補完システム、画像処理装置及びそのプログラム
KR100911066B1 (ko) 화상 표시 시스템, 화상 표시 방법 및 기록 매체
WO2016043063A1 (ja) 画像処理装置および画像処理方法
JP3707830B2 (ja) 術式支援用画像表示装置
EP2631696B1 (en) Image generator
JP5570769B2 (ja) 内視鏡装置、計測方法、およびプログラム
JPH0436364B2 (ja)
JP3834967B2 (ja) 死角範囲表示装置
CN112969404A (zh) 医疗图像处理装置、医疗图像处理方法及程序、诊断辅助装置
JPH09220203A (ja) 被写体のサーモグラフ画像情報にモアレトポグラフ画像情報を重ねる装置
JP3041420B1 (ja) 内視鏡システムおよび内視鏡画像の奥行き情報検出用制御プログラムを記録した記録媒体
JP2008035881A (ja) 内視鏡装置
WO2017199657A1 (ja) 内視鏡装置、計測方法、およびプログラム
JPH04288122A (ja) 視線表示装置
US20230032791A1 (en) Measuring method and a measuring device
WO2021014991A1 (ja) 内視鏡形状表示制御装置、内視鏡形状表示制御装置の作動方法、および内視鏡形状表示制御装置の作動プログラム
JP4823539B2 (ja) 内視鏡挿入形状検出装置
JP2005348307A (ja) 画像生成方法および画像生成装置
JP6906342B2 (ja) 内視鏡システム
JP2006020746A (ja) 画像表示装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080117

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080117

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101005

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110614

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120605

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120626

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150706

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees