JP6490820B2 - 超音波撮像装置、画像処理装置、及び方法 - Google Patents
超音波撮像装置、画像処理装置、及び方法 Download PDFInfo
- Publication number
- JP6490820B2 JP6490820B2 JP2017537650A JP2017537650A JP6490820B2 JP 6490820 B2 JP6490820 B2 JP 6490820B2 JP 2017537650 A JP2017537650 A JP 2017537650A JP 2017537650 A JP2017537650 A JP 2017537650A JP 6490820 B2 JP6490820 B2 JP 6490820B2
- Authority
- JP
- Japan
- Prior art keywords
- volume data
- image
- ultrasonic
- subject
- alignment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 85
- 238000003384 imaging method Methods 0.000 title claims description 56
- 238000000034 method Methods 0.000 title description 43
- 239000000523 sample Substances 0.000 claims description 49
- 238000002604 ultrasonography Methods 0.000 claims description 47
- 230000009466 transformation Effects 0.000 claims description 23
- 238000006243 chemical reaction Methods 0.000 claims description 20
- 238000012937 correction Methods 0.000 claims description 20
- 238000001514 detection method Methods 0.000 claims description 12
- 238000003672 processing method Methods 0.000 claims description 7
- 210000002784 stomach Anatomy 0.000 claims 1
- 238000002591 computed tomography Methods 0.000 description 119
- 238000004364 calculation method Methods 0.000 description 29
- 210000004204 blood vessel Anatomy 0.000 description 22
- 238000005070 sampling Methods 0.000 description 21
- 230000005540 biological transmission Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 238000002595 magnetic resonance imaging Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 7
- 210000000056 organ Anatomy 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 5
- 238000013519 translation Methods 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 210000004185 liver Anatomy 0.000 description 3
- 210000003240 portal vein Anatomy 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 210000000232 gallbladder Anatomy 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 230000002792 vascular Effects 0.000 description 2
- 210000001631 vena cava inferior Anatomy 0.000 description 2
- 101100328887 Caenorhabditis elegans col-34 gene Proteins 0.000 description 1
- 230000003187 abdominal effect Effects 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 201000007270 liver cancer Diseases 0.000 description 1
- 208000014018 liver neoplasm Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 210000001113 umbilicus Anatomy 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/13—Tomography
- A61B8/14—Echo-tomography
Landscapes
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Description
以下、実施例1の超音波撮像装置の具体的な一構成例について詳述する。図1に示すように、本実施例の超音波撮像装置は、超音波探触子7と、位置センサ8と、画像生成部107と、画像処理装置108とを備え、さらに、送信部102、送受切替部101、受信部105、位置検出ユニット6、ユーザインタフェース(UI)121、および、制御部106とを備えて構成される。なお、図1に示す超音波撮像装置の構成例は、他の実施例においても共通に利用される。
ステップS301においては、CTボリューム座標変換算出部26は、各特徴部位位置推定・識別部23、24から、超音波・CT対応特徴部位情報25を受け付ける。
図9は、実施例2における画像処理装置108の機能を示す機能ブロック図である。図9に示すように、画像処理装置108は、超音波画像取得部28と、超音波探触子位置情報取得部29と、超音波ボリュームデータ生成部21と、超音波ボリュームデータの特徴部位位置推定・識別部23と、CTボリュームデータ受け付け部22と、CTボリュームデータの特徴部位位置推定・識別部24とを含む。また、画像処理装置108は、超音波・CT対応特徴部位情報25と、CTボリューム座標変換算出部26と、初期位置合わせ済CTボリューム生成部32と、画像表示部31と、更に、特徴部位識別および位置合わせ結果の修正部33とを含む。
ステップS707においては、ステップS706において画像類似度が収束していない場合は、詳細位置合わせ部34は、より高い画像類似度を得るために、制御点移動量を更新する。そして、更新された制御点移動量を用い、ステップS704〜S706を改めて実施する。
2 ROM
3 RAM
4 記憶装置
5 バス
6 位置検出ユニット
7 超音波探触子
8 位置センサ
9 画像入力部
10 画像撮像装置
11 媒体入力部
12 記憶媒体
13 入力制御部
14 入力装置
15 表示制御部
16 ディスプレイ
17A、17B 名称
18A、18B マーカ
19 タッチパネル操作ボタン
20A フットスイッチ
20B USBケーブル
21 超音波ボリュームデータ生成部
22 CTボリュームデータ受付部
23 超音波ボリュームの特徴部位位置推定・識別部
24 CTボリュームの特徴部位位置推定・識別部
25 超音波・CT対応特徴部位情報
26 CTボリューム座標変換算出部
27 リアルタイム2D-CT画像算出部
28 超音波画像取得部
29 超音波探触子位置情報取得部
30 リアルタイム2D超音波画像取得部
31 画像表示部
32 初期位置合わせ済CTボリューム生成部
33 特徴部位識別および位置合わせ結果の修正部
34 詳細位置合わせ部
50 立方体
100 超音波撮像装置
101 送受切替部
102 送信部
105 受信部
106 制御部
107 画像生成部
108 画像処理装置
120 ユーザ
121 ユーザインタフェース(UI)
Claims (12)
- 被検体に超音波を送信し、被検体からの超音波を受信する超音波探触子と、
前記超音波探触子に取り付けられた位置センサと、
前記超音波探触子の受信信号から超音波画像を生成するとともに、前記超音波画像と前記位置センサから得た前記超音波探触子の位置情報から第1ボリュームデータを生成する画像生成部と、
前記第1ボリュームデータと、前記被検体についての第2ボリュームデータを受け取って処理する画像処理装置と、
前記超音波画像と、位置合わせ後の前記第2ボリュームデータから生成した画像とを表示する画像表示部とを備え、
前記画像処理装置は、
前記第1ボリュームデータと前記第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別し、前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとの位置合わせを行い、
前記画像表示部は、
前記第1ボリュームデータと前記第2ボリュームデータ各々から推定した特徴部位の名称と位置関係を、前記超音波画像と位置合わせ後の前記第2ボリュームデータから生成した画像各々に表示する、
ことを特徴とする超音波撮像装置。 - 請求項1に記載の超音波撮像装置であって、
前記画像処理装置は、
前記位置センサから前記超音波探触子の位置情報を受け取って、位置合わせ後の前記第2ボリュームデータから、前記位置センサの検出位置の前記超音波探触子から得られる前記超音波画像と同じ位置の画像を生成する、
ことを特徴とする超音波撮像装置。 - 請求項1に記載の超音波撮像装置であって、
前記画像処理装置は、
前記第1ボリュームデータと前記第2ボリュームデータ各々から前記被検体の所定の特徴部位を推定および識別する特徴部位推定・識別部と、
前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとを位置合わせする位置合わせ部とを備える、
ことを特徴とする超音波撮像装置。 - 請求項3に記載の超音波撮像装置であって、
前記画像表示部は、
前記位置合わせ部で位置合わせした前記第1ボリュームデータと前記第2ボリュームデータとを重畳した画像を表示する、
ことを特徴とする超音波撮像装置。 - 被検体に超音波を送信し、被検体からの超音波を受信する超音波探触子と、
前記超音波探触子に取り付けられた位置センサと、
前記超音波探触子の受信信号から超音波画像を生成するとともに、前記超音波画像と前記位置センサから得た前記超音波探触子の位置情報から第1ボリュームデータを生成する画像生成部と、
前記第1ボリュームデータと、前記被検体についての第2ボリュームデータを受け取って処理する画像処理装置とを備え、
前記画像処理装置は、
前記第1ボリュームデータと前記第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別し、前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとの位置合わせを行い、
前記第1ボリュームデータ以外の、前記超音波探触子で撮像して得られたボリュームデータから前記被検体の所定の特徴部位を推定および識別し、
前記第2ボリュームデータの特徴部位の位置情報と、対応する前記第1ボリュームデータ以外の前記ボリュームデータの特徴部位の位置情報を用いて、前記第2ボリュームデータの位置合わせの座標変換情報を出力する、
ことを特徴とする超音波撮像装置。 - 請求項3に記載の超音波撮像装置であって、
前記画像処理装置は、
前記特徴部位推定・識別部において、前記第1ボリュームデータと前記第2ボリュームデータ各々から推定および識別された前記特徴部位を修正する修正部を更に備える、
ことを特徴とする超音波撮像装置。 - 請求項3に記載の超音波撮像装置であって、
前記位置合わせ部は、前記第1ボリュームデータと前記第2ボリュームデータに対し、画像ベースの剛体位置合わせを実施する、
ことを特徴とする超音波撮像装置。 - 請求項3に記載の超音波撮像装置であって、
前記位置合わせ部は、前記第1ボリュームデータと前記第2ボリュームデータに対し、画像ベースの非剛体位置合わせを実施する、
ことを特徴とする超音波撮像装置。 - 画像処理装置であって、
被検体についての超音波画像の第1ボリュームデータと、前記被検体についての超音波画像とは異なる画像の第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別する特徴部位推定・識別部と、
前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとを位置合わせする位置合わせ部と、
前記超音波画像と、位置合わせ後の前記第2ボリュームデータから生成した画像とを表示部に表示するよう制御する表示制御部とを備え、
前記表示制御部は、
前記第1ボリュームデータと前記第2ボリュームデータ各々から推定した特徴部位の名称と位置関係を、前記超音波画像と位置合わせ後の前記第2ボリュームデータから生成した画像各々に表示するよう制御する、
ことを特徴とする画像処理装置。 - 画像処理装置であって、
被検体についての超音波画像の第1ボリュームデータと、前記被検体についての超音波画像とは異なる画像の第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別する特徴部位推定・識別部と、
前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとを位置合わせする位置合わせ部と、
前記第1ボリュームデータ以外の、超音波探触子で撮像して得られたボリュームデータから前記被検体の所定の特徴部位を推定および識別し、前記第2ボリュームデータの特徴部位の位置情報と、対応する前記第1ボリュームデータ以外の前記ボリュームデータの特徴部位の位置情報を用いて、前記第2ボリュームデータの位置合わせの座標変換情報を出力する修正部とを備える、
ことを特徴とする画像処理装置。 - 画像処理装置における画像処理方法であって、
前記画像処理装置は、
被検体についての超音波画像の第1ボリュームデータと、前記被検体についての超音波画像とは異なる画像の第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別し、
前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとを位置合わせを行い、
前記超音波画像と、位置合わせ後の前記第2ボリュームデータから生成した画像とを表示するよう制御し、
前記第1ボリュームデータと前記第2ボリュームデータ各々から推定した特徴部位の名称と位置関係を、前記超音波画像と位置合わせ後の前記第2ボリュームデータから生成した画像各々に表示するよう制御する、
ことを特徴とする画像処理方法。 - 画像処理装置における画像処理方法であって、
前記画像処理装置は、
被検体についての超音波画像の第1ボリュームデータと、前記被検体についての超音波画像とは異なる画像の第2ボリュームデータ各々から前記被検体の特徴部位を推定および識別し、
前記特徴部位の位置情報を用いて、前記第1ボリュームデータと前記第2ボリュームデータとを位置合わせを行い、
前記第1ボリュームデータ以外の、超音波探触子で撮像して得られたボリュームデータから前記被検体の所定の特徴部位を推定および識別し、
前記第2ボリュームデータの特徴部位の位置情報と、対応する前記第1ボリュームデータ以外の前記ボリュームデータの特徴部位の位置情報を用いて、前記第2ボリュームデータの位置合わせの座標変換情報を出力する、
ことを特徴とする画像処理方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015172627 | 2015-09-02 | ||
JP2015172627 | 2015-09-02 | ||
PCT/JP2016/071731 WO2017038300A1 (ja) | 2015-09-02 | 2016-07-25 | 超音波撮像装置、画像処理装置、及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017038300A1 JPWO2017038300A1 (ja) | 2018-04-26 |
JP6490820B2 true JP6490820B2 (ja) | 2019-03-27 |
Family
ID=58187167
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017537650A Active JP6490820B2 (ja) | 2015-09-02 | 2016-07-25 | 超音波撮像装置、画像処理装置、及び方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6490820B2 (ja) |
WO (1) | WO2017038300A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2018316801B2 (en) * | 2017-08-16 | 2023-12-21 | Mako Surgical Corp. | Ultrasound bone registration with learning-based segmentation and sound speed calibration |
JP6887942B2 (ja) * | 2017-12-27 | 2021-06-16 | 株式会社日立製作所 | 超音波撮像装置、画像処理装置、及び方法 |
CN112055870A (zh) * | 2018-03-02 | 2020-12-08 | 皇家飞利浦有限公司 | 图像配准合格评价 |
JP7171228B2 (ja) * | 2018-05-09 | 2022-11-15 | キヤノンメディカルシステムズ株式会社 | 超音波診断装置及び医用情報処理プログラム |
WO2021117349A1 (ja) * | 2019-12-10 | 2021-06-17 | 富士フイルム株式会社 | 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム |
JP2021186284A (ja) * | 2020-05-29 | 2021-12-13 | 株式会社日立製作所 | 超音波撮像装置、治療支援システムおよび画像表示方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006167267A (ja) * | 2004-12-17 | 2006-06-29 | Hitachi Medical Corp | 超音波診断装置 |
JP5574742B2 (ja) * | 2010-02-18 | 2014-08-20 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 超音波診断装置 |
JP5717543B2 (ja) * | 2011-05-30 | 2015-05-13 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 超音波診断装置及びその制御プログラム |
JP6109556B2 (ja) * | 2012-12-12 | 2017-04-05 | 東芝メディカルシステムズ株式会社 | 超音波診断装置及び画像処理プログラム |
JP6293429B2 (ja) * | 2013-07-24 | 2018-03-14 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | データ解析装置、データ解析装置のプログラム及び超音波診断装置 |
-
2016
- 2016-07-25 WO PCT/JP2016/071731 patent/WO2017038300A1/ja active Application Filing
- 2016-07-25 JP JP2017537650A patent/JP6490820B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2017038300A1 (ja) | 2018-04-26 |
WO2017038300A1 (ja) | 2017-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6490820B2 (ja) | 超音波撮像装置、画像処理装置、及び方法 | |
US10403009B2 (en) | System and method for generating partial surface from volumetric data for registration to surface topology image data | |
CN107016717B (zh) | 用于患者的透视视图的系统和方法 | |
EP2680778B1 (en) | System and method for automated initialization and registration of navigation system | |
JP6537981B2 (ja) | 複数の三次元ビューからの大きな対象のセグメンテーション | |
US11653897B2 (en) | Ultrasonic diagnostic apparatus, scan support method, and medical image processing apparatus | |
JP6383483B2 (ja) | 超音波撮像装置、および、画像処理装置 | |
JP5990834B2 (ja) | 診断画像生成装置および診断画像生成方法 | |
KR20150027637A (ko) | 의료영상들을 정합하는 방법 및 장치 | |
US10433815B2 (en) | Ultrasound diagnostic image generating device and method | |
US20180360427A1 (en) | Ultrasonic diagnostic apparatus and medical image processing apparatus | |
CN107106128B (zh) | 用于分割解剖目标的超声成像装置和方法 | |
KR102273020B1 (ko) | 의료 영상 정합 방법 및 그 장치 | |
CN108697410B (zh) | 超声波拍摄装置、图像处理装置及其方法 | |
CN117731322A (zh) | 超声成像方法、设备及可读存储介质 | |
KR20100117698A (ko) | 초음파 영상을 정렬시키는 초음파 시스템 및 방법 | |
JP6887942B2 (ja) | 超音波撮像装置、画像処理装置、及び方法 | |
JP6204544B2 (ja) | 診断画像生成装置 | |
US20220249174A1 (en) | Surgical navigation system, information processing device and information processing method | |
KR20150026354A (ko) | 의료영상들을 정합하는 방법 및 장치 | |
JP6991354B2 (ja) | 画像データ処理方法、デバイス及びシステム | |
JP7270331B2 (ja) | 医用画像診断装置及び画像処理装置 | |
JP7299100B2 (ja) | 超音波診断装置及び超音波画像処理方法 | |
US20220287686A1 (en) | System and method for real-time fusion of acoustic image with reference image | |
JP6598565B2 (ja) | 画像処理装置、画像処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180104 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181023 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181206 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190129 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6490820 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |