JP6336025B2 - 情報処理装置、情報処理装置の作動方法およびプログラム - Google Patents
情報処理装置、情報処理装置の作動方法およびプログラム Download PDFInfo
- Publication number
- JP6336025B2 JP6336025B2 JP2016254379A JP2016254379A JP6336025B2 JP 6336025 B2 JP6336025 B2 JP 6336025B2 JP 2016254379 A JP2016254379 A JP 2016254379A JP 2016254379 A JP2016254379 A JP 2016254379A JP 6336025 B2 JP6336025 B2 JP 6336025B2
- Authority
- JP
- Japan
- Prior art keywords
- body surface
- processing apparatus
- information processing
- image
- probe
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 60
- 238000000034 method Methods 0.000 title claims description 28
- 239000000523 sample Substances 0.000 claims description 176
- 238000003384 imaging method Methods 0.000 claims description 45
- 238000002595 magnetic resonance imaging Methods 0.000 claims description 36
- 210000002445 nipple Anatomy 0.000 claims description 10
- 210000000481 breast Anatomy 0.000 description 40
- 238000002604 ultrasonography Methods 0.000 description 27
- 230000006870 function Effects 0.000 description 20
- 239000013598 vector Substances 0.000 description 20
- 230000003902 lesion Effects 0.000 description 15
- 230000004048 modification Effects 0.000 description 11
- 238000012986 modification Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 9
- 230000008859 change Effects 0.000 description 9
- 238000005259 measurement Methods 0.000 description 9
- 238000003745 diagnosis Methods 0.000 description 4
- 230000007717 exclusion Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000002603 single-photon emission computed tomography Methods 0.000 description 2
- 206010018852 Haematoma Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000009206 nuclear medicine Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
Images
Landscapes
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Description
前記プローブ位置と前記特定手段により特定された前記目標位置とを表示部に表示させる表示制御手段と、を有し、前記特定手段は、前記被検体の体表上の突起物がある領域の位置情報を取得し、前記突起物がある領域に含まれない前記体表上の位置を前記目標位置として特定する。
図1は、本実施例における超音波撮影システムの構成を示す。同図に示すように、本実施例における情報処理装置100は、第2画像撮像装置182と位置姿勢計測装置184とデータサーバ190とに接続されている。
体表点位置特定部112は、指定された注目点904に基づく被検体の体表における体表点905の位置を特定する。ここでは、注目点904の位置情報と乳房の表面901の形状データに基づいて、体表点905の位置を算出し、体表点マーク生成部116へと出力する。
ステップS3000で三次元医用画像取得部102の処理は、データサーバ190から情報処理装置100へと入力される、仰臥位の乳房のMRI画像900を取得する。
ステップS3010で注目点位置指定部104は、データサーバ190から情報処理装置100へと入力される位置情報に基づいて、注目点904(病変領域903の中心)を指定する。
ステップS3020で表面形状算出部110は、MRI画像900から乳房の表面901の形状データを抽出する。本実施例では、MRI画像900を適切な閾値で2値化して、乳房領域を含む体内領域を表すラベル画像を取得する。そして、ラベル画像のボクセル値が切り替わる境界面におけるボクセルの位置座標ベクトル群として、乳房の表面901の形状を表現する。
ステップS3030で体表点位置特定部112は、被検体の内部の注目点904の位置に基づく被検体の体表面の位置を特定する。MRI画像900中の注目点904から乳房の表面901に伸ばした体表点905の位置を算出することで当該体表点905の位置を特定する。本実施例では、乳房の表面901の形状を表現する位置座標ベクトル群を構成する各位置から注目点904の位置までの距離を夫々算出する。そして、距離が最小となる位置を選択し、選択された位置を体表点905の位置とする。
ステップS3040で3Dボディマーク生成部114の処理は、乳房の表面901の形状データに基づいて3Dボディマーク800を生成する。具体的には、乳房の表面901の形状を表現する位置座標ベクトル群(点群)に基づいて、3Dボディマーク800を生成する。例えば非特許文献1に開示されるような周知のポワソン方程式を利用してメッシュを生成する手法によって3角形メッシュを生成する。
ステップS3050で体表点マーク生成部116の処理は、体表点905の位置に体表点マーク805を生成する。例えば、体表点の位置に半径5mmのメッシュ球を生成し、それを体表点マーク805として用いる。
ステップS3060で断層画像取得部106の処理は、第2画像撮像装置182から情報処理装置100へと逐次入力される、超音波断層画像700を取得する。
ステップS3070で位置姿勢取得部108は、位置姿勢計測装置184から情報処理装置100へと逐次入力される、センサ座標系620における超音波プローブ611の位置姿勢を取得する。
ステップS3080でプローブマーク生成部118は、超音波プローブ611の位置姿勢に応じたプローブマーク811を生成する。例えば、ステップS3070で取得された超音波プローブの位置姿勢に基づいて、予め作成しておいた、超音波プローブ611の形状を近似的に表す直方体モデルの位置姿勢を変換し、それをプローブマーク811として用いる。
ステップS3090で表示制御部120は、3Dボディマーク800上に、体表点マーク805とプローブマーク811を合成する。
ステップS3100で表示制御部120は、超音波プローブ611により得られる超音波画像の撮影位置と特定された体表点905の位置とを表示部124に表示させる。表示制御部120はステップS3090にて合成された画像を表示部124に表示させる。ステップS3060で取得した超音波断層画像700上の所定の位置に、当該3Dボディマーク800を重畳表示する。かかるマーク、画像の表示は超音波プローブの位置が変更されることに応じて表示制御部120により動的に変更される。
ステップS3110で情報処理装置100は、全体の処理を終了するか否かの判定を行う。例えば、表示部206上に配置された終了ボタンを操作者がマウス205でクリックするなどして、終了の判定を入力する。終了すると判定した場合には、情報処理装置100の処理の全体を終了させる。一方、終了すると判定しなかった場合には、ステップS3060へと処理を戻し、新たに取得される超音波断層画像700および超音波プローブの位置姿勢データに対して、ステップS3060からステップS3100までの処理を再度実行する。
本実施例では、3Dボディマーク800上の体表点の位置に体表点マーク805を表示する場合を、ステップS3090における表示制御部120の処理の例として説明したが、本発明の実施はこれに限らない。例えば、体表点の位置に体表点マーク805は表示せずに、体表点から注目点までの距離などの情報を表示してもよい。または、体表点マーク805上に体表点から注目点までの距離などの情報を重ねて表示してもよい。
本実施例では、注目点904から乳房の表面901までの距離が最小となる点を体表点905の位置とする場合を、ステップS3030における体表点位置特定部112の処理の例として説明したが、本発明の実施はこれに限らない。例えば、注目点904からMRI座標系のY軸方向(重力軸方向)に伸ばした線分と乳房の表面901との交点を体表点905の位置としてもよい。この場合、超音波プローブ611の位置を体表点905の位置に合わせて、超音波プローブ611の姿勢をアキシャル断面またはサジタル断面に合わせれば、超音波断層画像700が表す平面内に病変領域703が含まれることになる。
本実施例では、注目点904から乳房の表面901までの距離が最小となる点を体表点905の位置とする場合を例として説明した。しかし、体表点905の位置が例えば乳頭902の位置と略一致する場合には、超音波プローブ611の位置を体表点905の位置に合わせて適切な超音波画像を取得することが困難となる。そこで本変形例では、体表点位置特定部112は、撮影部位または患者情報の少なくともいずれかに対応して記憶された被検体の所定領域の情報を取得する。そのうえで、体表点位置特定部112により特定される被検体の体表上の位置が該所定領域に含まれないように体表上の位置を特定する。
本実施例では、第1画像撮像装置180としてMRI装置を用い、これにより得られるMRI画像を例として説明したが、本発明の実施はこれに限らない。例えば、CT画像を撮影するX線CT装置、光音響トモグラフィ装置、OCT装置、PET/SPECT、3次元超音波装置などを用いることができる。
本実施例では、実施例1の処理に加え、超音波プローブを対象物体の表面に沿って動かすべき方向に関する情報を、3Dボディマーク上に併せて表示する場合について説明する。以下、本実施例に係る情報処理装置について、実施例1との相違部分についてのみ説明する。
ステップS5015で注目点選択部405は、注目点904が複数複数存在する場合に、プローブを誘導する対象となる注目点の選択情報を取得する。例えば、表示部206上に注目点の数だけ配置された選択ボタンを操作者がマウス205でクリックするなどして、注目点の選択情報を入力する。
ステップS5075で誘導方向決定部413は、超音波プローブ611を誘導するための、乳房の表面901に沿った方向を表す3次元ベクトルを算出する。具体的には、まず、超音波プローブの先端の中央部612のMRI座標系910における位置Xcから体表点905の位置Xsに向かう3次元ベクトルVcsを算出する。そして、Xcにおける乳房の表面901の法線ベクトルVcとベクトルVcsとのなす角が90度となるように、プローブ座標系610のX軸周りにベクトルVcsを回転させて、乳房の表面901に沿った方向を表す3次元ベクトルVcs’を算出する。
ステップS5085で矢印マーク生成部419は、超音波プローブ611を誘導する方向を表す3次元ベクトルVcs’に基づいて、矢印マーク1006を生成する。例えば、ベクトルVcs’の方向に合わせて、予め作成しておいた3次元矢印モデルの位置姿勢を変換し、それを矢印マーク1006として用いる。
ステップS5090で表示制御部420は、3Dボディマーク800上に体表点マーク805とプローブマーク811と矢印マーク1006とを合成する。そして、ステップS5060で取得した超音波断層画像700上の所定の位置に、当該3Dボディマーク800を重畳する。
ステップS5100で表示制御部420は上述の処理で合成された画像を表示部124に表示させる。かかるマーク、画像の表示は超音波プローブの位置が変更されることに応じて表示制御部420により動的に変更される。
本実施例では、超音波プローブ611の位置姿勢と注目点904の位置情報と乳房の表面901の形状データに基づいて超音波プローブの誘導方向を表すベクトルを算出する場合を、ステップS5075における誘導方向決定部413の処理の例として説明した。しかし、超音波プローブ611の位置からベクトルの方向に伸ばした直線の上に、例えば乳頭902が存在する場合には、ベクトルに沿って超音波プローブ611を操作しつつ適切な超音波画像を取得することが困難となる。そこで本変形例では、超音波撮像に適さない乳頭902等の位置と上述の直線との距離が所定の距離(例えば20mm)よりも短いかどうかを判定し、所定の距離よりも短い場合には、3次元ベクトルを算出し直す。具体的には、超音波撮像に適さない乳頭902等の位置から超音波プローブ611の位置までの距離が前記所定の距離よりも常に大きくなるような経由点を乳房の表面901の上に設定し、その経由点に向かう3次元ベクトルを算出し直す。
本実施例では、超音波プローブ611を対象物体の表面に沿って動かすべき方向に関する情報を、3Dボディマーク上に併せて表示する場合を例として説明した。本変形例ではこれに限らず、指定された注目点904を適切に撮影するために超音波プローブ611の姿勢を変更させる指示を表示させる。
実施例2の矢印マーク(第1の矢印マーク1006)に加えて、表示制御部120は図11に示すように、体表点905から注目点904へと向かう方向を示す第二の矢印マーク1106を表示部124に表示させる。
本実施例では、現在の超音波プローブ611の位置に応じて体表点905の位置を複数の候補位置から動的に選択する場合を例として説明した。本変形例ではこれに限らず、所定のタイミングの超音波プローブ611の位置に基づいて、体表点905の位置を複数の候補位置から一意に定める。この所定のタイミングは、例えば、表示部206上に配置されたボタンを操作者がマウス205でクリックしたタイミングとすればよい。または、超音波プローブ611が被検体に接触して被検体内部の超音波画像が取得され始めたタイミングとしてもよい。該タイミングは、例えば、超音波プローブ611が被検体に接触していない状態の超音波画像と現在の超音波画像との差分が一定以上か否かで判定すればよい。
上述の実施例では、注目点904及び体表点905を特定することとしていたが、これに限らず、注目する領域、及びこれに基づく体表の領域を指定することとしても良い。
104 注目点位置指定部
106 断層画像取得部
108 位置姿勢取得部
110 表面形状算出部
112 体表点位置特定部
114 3Dボディマーク生成部
116 体表点マーク生成部
118 プローブマーク生成部
120 表示制御部
Claims (11)
- プローブを用いて行われる被検体の内部を示す第1の画像の撮影を支援する情報処理装置であって、
前記第1の画像を撮影するモダリティとは異なるモダリティを用いて撮影された前記被検体の第2の画像における前記被検体の内部の指定された位置を取得する取得手段と、
前記指定された位置に基づいて、前記第1の画像を撮影する際の前記プローブの前記被検体の体表上における目標位置を特定する特定手段と、
前記プローブ位置と前記特定手段により特定された前記目標位置とを表示部に表示させる表示制御手段と、を有し、
前記特定手段は、前記被検体の体表上の突起物がある領域の位置情報を取得し、前記突起物がある領域に含まれない前記体表上の位置を前記目標位置として特定することを特徴とする情報処理装置。 - 前記表示制御手段は、前記特定手段が前記体表上の位置を前記突起物がある領域に含まれないように移動させて特定した場合に、当該体表上の目標位置を、移動させずに特定した場合とは異なる態様で表示部に表示させることを特徴とする、請求項1に記載の情報処理装置。
- 前記表示制御手段は、更に、前記指定された位置と前記特定された目標位置との関係に関する情報を表示部に表示させることを特徴とする、請求項1または請求項2に記載の情報処理装置。
- 前記指定された位置と前記特定された目標位置との関係に関する情報は、前記指定された位置と前記特定された位置との間の距離を表す情報であることを特徴とする、請求項3に記載の情報処理装置。
- 前記突起物は乳頭を含むことを特徴とする請求項1乃至4のいずれか1項に記載の情報処理装置。
- 前記第1の画像は、超音波画像であることを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。
- 前記特定手段は、前記指定された位置から前記突起物がある領域を除いた前記体表までの距離が最小となるような、前記被検体の体表における位置を前記目標位置として特定することを特徴とする請求項1乃至6のいずれか1項に記載の情報処理装置。
- 前記第2の画像は、磁気共鳴映像装置により得られた画像であることを特徴とする請求項1乃至7のいずれか1項に記載の情報処理装置。
- 前記特定手段は、前記指定された位置から前記体表までの距離が最小となるような前記被検体の体表における位置が前記突起物がある領域に含まれる場合に、前記突起物がある領域に含まれない前記体表上の位置を前記目標位置として特定することを特徴とする請求項1乃至8のいずれか1項に記載の情報処理装置。
- プローブを用いて行われる被検体の内部を示す第1の画像の撮影を支援する情報処理装置の作動方法であって、
前記第1の画像を撮影するモダリティとは異なるモダリティを用いて撮影された前記被検体の第2の画像における前記被検体の内部の指定された位置を取得する取得工程と、
前記指定された位置に基づいて、前記第1の画像を撮影する際の前記プローブの前記被検体の体表上における目標位置を特定する特定工程と、
前記プローブ位置と前記特定工程において特定された前記目標位置とを表示部に表示させる表示制御工程と、を有し、
前記特定工程において、前記被検体の体表上の突起物がある領域の位置情報を取得し、前記突起物がある領域に含まれない前記体表上の位置を前記目標位置として特定することを特徴とする情報処理装置の作動方法。 - 請求項10に記載の作動方法をコンピュータに実行させることを特徴とするプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011189022 | 2011-08-31 | ||
JP2011189022 | 2011-08-31 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012150472A Division JP6071282B2 (ja) | 2011-08-31 | 2012-07-04 | 情報処理装置、超音波撮影装置および情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017056281A JP2017056281A (ja) | 2017-03-23 |
JP6336025B2 true JP6336025B2 (ja) | 2018-06-06 |
Family
ID=58388753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016254379A Active JP6336025B2 (ja) | 2011-08-31 | 2016-12-27 | 情報処理装置、情報処理装置の作動方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6336025B2 (ja) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1816957A4 (en) * | 2004-11-02 | 2009-10-21 | Metrohealth System | METHOD AND DEVICE FOR DETERMINING THE CORRELATION BETWEEN ROOM COORDINATES OF CHEST |
JP5454841B2 (ja) * | 2008-05-08 | 2014-03-26 | 株式会社東芝 | 医用画像処理装置 |
-
2016
- 2016-12-27 JP JP2016254379A patent/JP6336025B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017056281A (ja) | 2017-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6071282B2 (ja) | 情報処理装置、超音波撮影装置および情報処理方法 | |
JP6039903B2 (ja) | 画像処理装置、及びその作動方法 | |
JP5950619B2 (ja) | 情報処理装置 | |
JP2023053108A (ja) | 同時x平面撮像を用いた画像レジストレーション及び誘導 | |
JP5430203B2 (ja) | 画像処理装置、画像処理方法 | |
JP5858636B2 (ja) | 画像処理装置、その処理方法及びプログラム | |
JP5538862B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム | |
JP2012213558A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5417609B2 (ja) | 医用画像診断装置 | |
JP6049202B2 (ja) | 画像処理装置、方法、及びプログラム | |
JP5631453B2 (ja) | 画像処理装置、画像処理方法 | |
JP2020036708A (ja) | 手術支援装置及び手術ナビゲーションシステム | |
WO2016054775A1 (zh) | 超声虚拟内窥成像系统和方法及其装置 | |
JP4512833B2 (ja) | 物体内部位計測システム、物体内部位計測用演算装置、物体内部位計測用プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
JP6487999B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6263248B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6400160B2 (ja) | 情報処理装置 | |
JP6336025B2 (ja) | 情報処理装置、情報処理装置の作動方法およびプログラム | |
RU2735068C1 (ru) | Система и способ для визуализации на дисплее изображения частично уплощенной поверхности внутренней поверхности полости, а также постоянный машиночитаемый носитель | |
JP2014212904A (ja) | 医用投影システム | |
JP6251002B2 (ja) | 画像処理装置及び画像処理方法、コンピュータプログラム | |
EP4128145B1 (en) | Combining angiographic information with fluoroscopic images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170125 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171003 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180302 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180403 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180501 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6336025 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |