JP2019013852A - 画像処理装置、システム、画像処理方法、医用画像撮像方法およびプログラム - Google Patents
画像処理装置、システム、画像処理方法、医用画像撮像方法およびプログラム Download PDFInfo
- Publication number
- JP2019013852A JP2019013852A JP2018208363A JP2018208363A JP2019013852A JP 2019013852 A JP2019013852 A JP 2019013852A JP 2018208363 A JP2018208363 A JP 2018208363A JP 2018208363 A JP2018208363 A JP 2018208363A JP 2019013852 A JP2019013852 A JP 2019013852A
- Authority
- JP
- Japan
- Prior art keywords
- image
- region
- imaging
- interest
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 92
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000034 method Methods 0.000 title description 41
- 238000003384 imaging method Methods 0.000 claims abstract description 194
- 238000004364 calculation method Methods 0.000 claims description 25
- 238000002595 magnetic resonance imaging Methods 0.000 description 99
- 210000000481 breast Anatomy 0.000 description 63
- 238000006243 chemical reaction Methods 0.000 description 26
- 230000008569 process Effects 0.000 description 23
- 238000002059 diagnostic imaging Methods 0.000 description 17
- 206010028980 Neoplasm Diseases 0.000 description 16
- 238000010586 diagram Methods 0.000 description 14
- 230000009466 transformation Effects 0.000 description 14
- 210000002445 nipple Anatomy 0.000 description 12
- 238000012986 modification Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 10
- 238000009877 rendering Methods 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 7
- 238000004088 simulation Methods 0.000 description 5
- 238000002591 computed tomography Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 3
- 230000005484 gravity Effects 0.000 description 3
- 230000031700 light absorption Effects 0.000 description 3
- 238000009607 mammography Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 239000000523 sample Substances 0.000 description 3
- 239000011358 absorbing material Substances 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 210000000062 pectoralis major Anatomy 0.000 description 2
- 210000002976 pectoralis muscle Anatomy 0.000 description 2
- 238000002600 positron emission tomography Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000008021 deposition Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
Abstract
Description
第1の形状状態における被検体の第1の画像を取得する第1の画像取得手段と、
前記第1の画像上に前記被検体の関心領域を設定する関心領域設定手段と、
前記第1の形状状態から第2の形状状態への前記被検体の変形情報を取得する変形情報取得手段と、
前記変形情報に基づいて、前記第1の形状状態における前記関心領域に対応する前記第2の形状状態における領域を算出する領域算出手段と、
前記領域に基づいて、前記第2の形状状態における前記被検体の撮像領域を設定する撮像領域設定手段と、
を備える。
本実施形態に係る画像処理装置は、乳房を被検体として、2枚の平板(保持板)で乳房を保持する際の変形推定結果に基づいて、光音響断層画像(PAT画像)の撮像領域を変形前のMRI(Magnetic Resonance Imaging)画像中における対応領域に変換・表示することで、撮像領域の確認・調整を可能とするものである。なお、本実施形態における撮像領域とは、PAT画像を撮像する際の目安となる候補領域のことを表すものとする。実際にPAT画像を撮像する範囲(近赤外光パルスの照射範囲)については、撮像領域を参考にして別途設定してもよい。以下、本実施形態に係る画像診断システムおよび当該画像診断システムに含まれる画像処理装置について説明する。
図1は、本実施形態に係る画像診断システム1の構成を示す。画像診断システム1は、画像処理装置100と、第1医用画像撮像装置180と、第2医用画像撮像装置182と、表示部184と、操作部186と、データサーバ190とを有している。
画像処理装置100は、データサーバ190、第2医用画像撮像装置182、表示部184、操作部186と接続されている。画像処理装置100は、医用画像取得部102と、外観画像取得部104と、変形情報取得部106と、撮像領域設定部108と、対応領域算出部110と、調整判定部111と、表示画像生成部112と、終了判定部113と、関心領域設定部114と、変換領域算出部116とを備えており、不図示のCPUによりプログラムを読み出して実行することにより各機能ブロックの動作が制御される。
次に、図5のフローチャートを参照して、本実施形態に係る画像処理装置100が実施する処理の手順について説明する。
本実施形態では、変形情報を算出する際の誤差に関する情報に基づいて、対応領域または撮像領域を再設定する場合を例として説明したが、本発明の実施の形態はこれに限らない。例えば、予め所定のマージンを既知の情報として画像処理装置100が保持しているものとし、その所定のマージンに基づいて算出した領域を再設定するようにしてもよい。その際に、対応領域を狭めに再設定する際の所定のマージンと、撮像領域を広めに再設定する際の所定のマージンとは、夫々異なる値であってもよい。
本実施形態では、変形情報を算出する際の誤差に関する情報に基づいて、対応領域や撮像領域を再設定する場合を例として説明したが、本発明の実施の形態はこれに限らない。例えば、対応領域や撮像領域とは異なる別の領域を新たに設定して、対応領域や撮像領域とは異なる態様で表示してもよい。その場合、3次元のMRI画像のボリュームレンダリング画像を、新たに設定した領域に基づいて表示してもよい。または、新たに設定した領域と3次元の撮像領域との両方に基づいて表示してもよく、その際には、新たに設定した領域と3次元の撮像領域との間の領域を、異なる態様のボリュームレンダリング画像で表示してもよい。
本実施形態では、3次元の対応領域に基づいて3次元のMRI画像のボリュームレンダリング画像を表示する場合を例として説明したが、本発明の実施の形態はこれに限らない。例えば、MRI画像のアキシャル断面(XY平面)と、アキシャル断面で3次元の対応領域を切り取った図形とを表示してもよい。また、アキシャル断面のうち対応領域の内部または外部のみを表示してもよい。その際に、腫瘍701を含むアキシャル断面を選択して表示してもよいし、Z=0とZ=d(保持後の平板間の距離)との間のアキシャル断面を順次表示して、腫瘍701の全体が含まれているかどうかを確認できるようにしてもよい。また、MRI画像のアキシャル断面に限らず、サジタル断面(YZ平面)やコロナル断面(XZ平面)上で対応領域の確認ができるようにしてもよい。さらに、変形MRI画像のアキシャル断面、サジタル断面、コロナル断面に限らず、曲断面を含む任意の断面で対応領域を確認できるようにしてもよい。また、本変形例における断面画像は、断面から所定の範囲内における画素値の最大値を断面上に投影した最大値投影画像(MIP(Maximum Intensity Projection)画像)であってもよい。すなわち、表示画像生成部112は、対応領域外または対応領域内における第1の画像(MRI画像)のボリュームレンダリング画像または最大値投影画像を生成してもよい。
本実施形態では、第1医用画像撮像装置180としてMRI装置を用いる場合を例として説明したが、本発明の実施の形態はこれに限らない。例えば、X線CT(Computed Tomography)装置、PET(Positron Emission Tomography)/SPECT(Single Photon Emission CT)装置、3次元超音波装置などを用いることができる。また、その他の何れのモダリティであってもよい。その場合、第1の画像には、X線CT画像、断層画像、超音波画像など、様々な画像が含まれる。これらのモダリティを用いる場合には、平板圧迫変形の推定のみならず、撮像体位が異なることによる変形(例えば仰臥位から伏臥位への重力変形)の推定も行って、変形関数F(x,y,z)を求めておけばよい。なお、仰臥位から伏臥位への重力変形の推定には、例えば非特許文献2(後述する。)に開示されている、重力変形シミュレーションに基づく手法を用いることができる。非特許文献2は、 Y.Hu,et al."A statistical motion model based on biomechanical simulations,"Proc.MICCAI 2008,Part I,LNCS 5241,pp.737−744,2008.である。
本実施形態では、第2医用画像撮像装置182によるPAT画像の撮像領域603の初期設定および調整を外観画像400上で行う場合を例として説明したが、本発明の実施の形態はこれに限らない。例えば、PAT装置座標系C_PATにおける撮像領域を表す4頂点の座標値を不図示のキーボードなどを用いて直接入力してもよい。
第2実施形態では、MRI画像中で設定した関心領域に基づいてPAT画像の撮像領域を自動で設定する場合について説明する。以下、本実施形態に係る画像処理装置について、第1実施形態との相違部分を中心に説明する。
図8は、本実施形態に係る画像診断システム8の構成を示す。なお、図1と同じ機能を有する処理部については同じ番号、記号を付けており、その説明を省略する。
画像処理装置800は、データサーバ190、第2医用画像撮像装置182、表示部884、操作部186と接続されている。画像処理装置100は、医用画像取得部102と、外観画像取得部104と、変形情報取得部106と、撮像領域設定部108と、表示画像生成部812と、終了判定部813と、関心領域設定部814と、変換領域算出部116とを備えている。ここで、画像処理装置800には、第1実施形態で説明した画像処理装置100の構成における対応領域算出部110が含まれていない。
次に、図9のフローチャートを参照して、本実施形態に係る画像処理装置800が実施する処理の手順について説明する。
第1および第2実施形態では、第2医用画像撮像装置182として、2枚の平板で被検体を保持する方式のPAT装置を用いる場合を例として説明したが、本発明の実施の形態はこれに限らず、何れの保持方式であってもよい。本実施形態では、被検体を2つの保持部材で挟みこむのではなく、1つの保持部材を体に押し付けることで、被検体が薄くなるように圧迫して保持する方式のPAT装置を用いる場合について説明する。特に、保持部材として伸縮性の保持膜を用いる場合について説明する。以下、本実施形態に係る画像処理装置について、第1実施形態との相違部分を中心に説明する。
図11は、本実施形態に係る画像診断システム11の構成を示す。なお、図1と同じ機能を有する処理部については同じ番号、記号を付けており、その説明を省略する。
画像処理装置1100は、データサーバ190、第2医用画像撮像装置1182、表示部184、操作部186と接続されている。画像処理装置1100は、医用画像取得部102と、外観画像取得部104と、変形情報取得部1106と、撮像領域設定部108と、対応領域算出部110と、調整判定部111と、表示画像生成部112と、終了判定部113と、関心領域設定部114と、変換領域算出部116とを備えている。
次に、図13のフローチャートを参照して、本実施形態に係る画像処理装置1100が実施する処理の手順について説明する。本実施形態では、図5を参照して説明した第1実施形態に係る画像処理装置100が実施する処理と比較して、ステップS13020、ステップS13040、ステップS13100、およびステップS13120の処理が、対応するステップS5020、ステップS5040、ステップS5100、およびステップS5120の処理と異なっている。
本実施形態では、1枚の保持膜により被検体が薄くなるように圧迫して保持する場合を例として説明したが、本発明の実施形態はこれに限らない。例えば、保持部材としてアーチ状や盥状の形状の容器(保持容器とする)を当てることで、乳房が薄くなるように保持する構成であってもよい。保持容器の形状が既知である場合には、保持容器の形状に合わせて、MRI画像中の被検体の形状が一致するようにMRI画像の変形を推定すればよい。また、保持容器の形状が未知の場合や、保持容器と被検体の間にマッチング剤やマッチング液が存在する場合には、距離計測装置で取得した乳房側面の外形形状に合わせてMRI画像の変形を推定してもよい。また、平面状の保持板を乳頭方向から押し当てて保持する保持形態であってもよい。この場合には、距離計測装置で取得した乳房側面の外形形状と平面の形状を組み合わせて、乳房の外形形状とすればよい。
本実施形態では、撮像領域1403が2次元の矩形領域である場合を例として説明したが、本発明の実施形態はこれに限らない。例えば、撮像領域1403は、可動ステージ1207によって撮像ユニット1209を移動(スキャン)させる方式に応じて、円や楕円で囲まれた領域としてもよい。あるいは、任意の閉曲線で囲まれた領域としてもよい。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
第1の形状状態における被検体の第1の画像を取得する第1の画像取得手段と、
前記第1の形状状態から第2の形状状態への前記被検体の変形情報を取得する変形情報取得手段と、
前記変形情報に基づいて、前記第1の形状状態における前記第1の画像上の関心領域に対応する前記第2の形状状態における領域を算出する領域算出手段と、
前記領域に基づいて、前記第2の形状状態における前記被検体の撮像領域を設定する撮像領域設定手段と、
を備えることを特徴とする。
Claims (10)
- 第1の形状状態における被検体の第1の画像を取得する第1の画像取得手段と、
前記第1の画像上に前記被検体の関心領域を設定する関心領域設定手段と、
前記第1の形状状態から第2の形状状態への前記被検体の変形情報を取得する変形情報取得手段と、
前記変形情報に基づいて、前記第1の形状状態における前記関心領域に対応する前記第2の形状状態における領域を算出する領域算出手段と、
前記領域に基づいて、前記第2の形状状態における前記被検体の撮像領域を設定する撮像領域設定手段と、
を備えることを特徴とする画像処理装置。 - 前記関心領域設定手段は、ユーザ操作に基づいて前記第1の画像上で前記関心領域の入力を受け付けることにより前記関心領域を再設定することを特徴とする請求項1に記載の画像処理装置。
- 前記領域算出手段は、前記関心領域の再設定に応じて前記領域を再算出することを特徴とする請求項2に記載の画像処理装置。
- 前記撮像領域設定手段は、前記領域の再算出に応じて、前記撮像領域を再設定することを特徴とする請求項3に記載の画像処理装置。
- 前記変形情報取得手段は、前記第1の形状状態から前記第2の形状状態への前記被検体の変形を推定する際の誤差に関する情報をさらに取得し、
前記領域算出手段は、前記変形情報と、前記誤差に関する情報とに基づいて前記領域を算出することを特徴とする請求項1乃至4の何れか1項に記載の画像処理装置。 - 前記第1の画像は、前記被検体のMRI画像であることを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
- 前記撮像領域は、前記被検体の第2の画像の撮像のための領域であることを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 前記第2の画像は、前記被検体の光音響断層画像であることを特徴とする請求項7に記載の画像処理装置。
- 第1の形状状態における被検体の第1の画像を取得する工程と、
前記第1の画像上に前記被検体の関心領域を設定する工程と、
前記第1の形状状態から第2の形状状態への前記被検体の変形情報を取得する工程と、前記変形情報に基づいて、前記第1の形状状態における前記関心領域に対応する前記第2の形状状態における領域を算出する工程と、
前記領域に基づいて、前記第2の形状状態における前記被検体の撮像領域を設定する工程と、
を有することを特徴とする画像処理方法。 - 請求項9に記載の画像処理方法の各工程をコンピュータに実行させるためのプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014006216 | 2014-01-16 | ||
JP2014006216 | 2014-01-16 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014230106A Division JP6431342B2 (ja) | 2014-01-16 | 2014-11-12 | 画像処理装置、画像処理方法およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019013852A true JP2019013852A (ja) | 2019-01-31 |
Family
ID=65357928
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018208363A Pending JP2019013852A (ja) | 2014-01-16 | 2018-11-05 | 画像処理装置、システム、画像処理方法、医用画像撮像方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2019013852A (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013198722A (ja) * | 2012-01-16 | 2013-10-03 | Canon Inc | 情報処理装置、情報処理方法及びプログラム |
JP2013212419A (ja) * | 2013-07-16 | 2013-10-17 | Toshiba Corp | 超音波診断装置、超音波画像処理装置、及び超音波画像処理プログラム |
-
2018
- 2018-11-05 JP JP2018208363A patent/JP2019013852A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013198722A (ja) * | 2012-01-16 | 2013-10-03 | Canon Inc | 情報処理装置、情報処理方法及びプログラム |
JP2013212419A (ja) * | 2013-07-16 | 2013-10-17 | Toshiba Corp | 超音波診断装置、超音波画像処理装置、及び超音波画像処理プログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102727258B (zh) | 图像处理装置、超声波摄影系统及图像处理方法 | |
US9396576B2 (en) | Method and apparatus for estimating the three-dimensional shape of an object | |
JP6431342B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6489801B2 (ja) | 画像処理装置、画像診断システム、画像処理方法およびプログラム | |
US11532083B2 (en) | Systems and methods for determining a region of interest in medical imaging | |
JP6489800B2 (ja) | 画像処理装置、画像診断システム、画像処理方法およびプログラム | |
AU2018301580B2 (en) | Three-dimensional ultrasound image display method | |
JP2014530348A (ja) | 元の放射線画像を更新するための放射線画像システム及び方法 | |
US8391573B2 (en) | Method and apparatus for motion correcting medical images | |
JP6888041B2 (ja) | 医用矢状面画像を取得する方法、医用矢状面画像を取得するニューラルネットワークのトレーニング方法及びコンピュータ装置 | |
Tan et al. | Influence of scan resolution, thresholding, and reconstruction algorithm on computed tomography-based kinematic measurements | |
JP2019013852A (ja) | 画像処理装置、システム、画像処理方法、医用画像撮像方法およびプログラム | |
CN111667903A (zh) | 医学图像处理方法和装置 | |
JP2011142961A (ja) | 3次元ct測定装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181203 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181203 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190823 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190821 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190913 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20191202 |