JP2022056714A - Information processing device, program, and information processing method - Google Patents
Information processing device, program, and information processing method Download PDFInfo
- Publication number
- JP2022056714A JP2022056714A JP2020164604A JP2020164604A JP2022056714A JP 2022056714 A JP2022056714 A JP 2022056714A JP 2020164604 A JP2020164604 A JP 2020164604A JP 2020164604 A JP2020164604 A JP 2020164604A JP 2022056714 A JP2022056714 A JP 2022056714A
- Authority
- JP
- Japan
- Prior art keywords
- catheter
- image
- indicator
- bookmark
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 37
- 238000003672 processing method Methods 0.000 title claims description 3
- 238000002059 diagnostic imaging Methods 0.000 claims abstract description 24
- 239000003550 marker Substances 0.000 claims description 53
- 238000000034 method Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 16
- 238000013145 classification model Methods 0.000 claims description 12
- 230000008859 change Effects 0.000 description 22
- 239000000523 sample Substances 0.000 description 21
- 230000006870 function Effects 0.000 description 15
- 238000012545 processing Methods 0.000 description 14
- 210000004204 blood vessel Anatomy 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000005259 measurement Methods 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 238000011282 treatment Methods 0.000 description 5
- 238000002608 intravascular ultrasound Methods 0.000 description 4
- 208000031481 Pathologic Constriction Diseases 0.000 description 3
- 208000037804 stenosis Diseases 0.000 description 3
- 230000036262 stenosis Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 238000002697 interventional radiology Methods 0.000 description 2
- 238000012014 optical coherence tomography Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000002583 angiography Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
Images
Landscapes
- Endoscopes (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
Description
本発明は、情報処理装置、プログラムおよび情報処理方法に関する。 The present invention relates to an information processing apparatus, a program and an information processing method.
ラジアル走査型の画像診断用カテーテルの超音波センサを長手方向に移動させながら複数の断層像を撮影し、長手方向の断層像を自動的に表示する血管内超音波撮像システムが提案されている。 An intravascular ultrasonic imaging system has been proposed in which a plurality of tomographic images are taken while moving an ultrasonic sensor of a radial scanning type diagnostic imaging catheter in the longitudinal direction, and the tomographic images in the longitudinal direction are automatically displayed.
特許文献1の血管内超音波システムでは、医師等のユーザが所望の断層面を簡単な操作で表示させることができない。
In the intravascular ultrasonic system of
情報処理装置は、ラジアル走査型の画像診断用カテーテルにより取得した複数のカテーテル画像に基づく三次元画像を出力する三次元画像出力部と、前記画像診断用カテーテルの長手方向に対応する第1インジケータを出力する第1インジケータ出力部と、前記第1インジケータを介して取得した第1ブックマークを記録する第1記録部とを備える。 The information processing apparatus has a three-dimensional image output unit that outputs a three-dimensional image based on a plurality of catheter images acquired by a radial scanning type diagnostic imaging catheter, and a first indicator corresponding to the longitudinal direction of the diagnostic imaging catheter. It includes a first indicator output unit for output and a first recording unit for recording a first bookmark acquired via the first indicator.
一つの側面では、ユーザが所望の断面を簡単な操作で表示させられる情報処理装置等を提供することを目的とする。 One aspect is to provide an information processing apparatus or the like that allows a user to display a desired cross section with a simple operation.
[実施の形態1]
図1は、カテーテルシステム10の構成を説明する説明図である。カテーテルシステム10は、情報処理装置20、MDU(Motor Driving Unit)33および画像診断用カテーテル40を備える。画像診断用カテーテル40は、MDU33を介して情報処理装置20に接続されている。
[Embodiment 1]
FIG. 1 is an explanatory diagram illustrating the configuration of the
画像診断用カテーテル40は、プローブ部41と、プローブ部41の端部に配置されたコネクタ部45とを有する。コネクタ部45は、MDU33に接続される。以下の説明では画像診断用カテーテル40のコネクタ部45から遠い側を先端側と記載する。
The
プローブ部41の内部に、シャフト43が挿通されている。シャフト43の先端側に、センサ42が接続されている。シャフト43およびセンサ42は、プローブ部41の内部で回転および進退可能である。
A
センサ42は、たとえば超音波の送受信を行なう超音波トランスデューサ、または、近赤外光の照射と反射光の受信を行なうOCT(Optical Coherence Tomography)用の送受信部である。以下の説明では、画像診断用カテーテル40は循環器の内側から超音波断層像を撮影する際に用いられるIVUS(Intravascular Ultrasound)用カテーテルである場合を例にして説明する。
The
情報処理装置20には、表示装置31および入力装置32が接続されている。入力装置32は、たとえばキーボード、マウス、トラックボールまたはマイク等の入力デバイスである。表示装置31と入力装置32とは、一体に積層されて、タッチパネルを構成していてもよい。入力装置32は、音声入力を受け付けるマイクであってもよい、入力装置32は、ジェスチャ入力または視線入力等を受け付けるセンサであってもよい。表示装置31および入力装置32と情報処理装置20とは、一体に構成されていてもよい。
A
情報処理装置20は、制御部21、主記憶装置22、補助記憶装置23、通信部24、表示部25、入力部26、カテーテル制御部271およびバスを備える。制御部21は、本実施の形態のプログラムを実行する演算制御装置である。制御部21には、一または複数のCPU(Central Processing Unit)、GPU(Graphics Processing Unit)、TPU(Tensor Processing Unit)またはマルチコアCPU等が使用される。制御部21は、バスを介して情報処理装置20を構成するハードウェア各部と接続されている。
The
主記憶装置22は、SRAM(Static Random Access Memory)、DRAM(Dynamic Random Access Memory)、フラッシュメモリ等の記憶装置である。主記憶装置22には、制御部21が行なう処理の途中で必要な情報および制御部21で実行中のプログラムが一時的に保存される。
The
補助記憶装置23は、SRAM、フラッシュメモリ、ハードディスクまたは磁気テープ等の記憶装置である。補助記憶装置23には、分類モデル62、ブックマークDB(Database)66、制御部21に実行させるプログラム、およびプログラムの実行に必要な各種データが保存される。通信部24は、情報処理装置20とネットワークとの間の通信を行なうインターフェースである。情報処理装置20は、通信部24を介して図示を省略するHIS(Hospital Information System)およびX線血管撮影装置等に接続されている。
The
表示部25は、表示装置31とバスとを接続するインターフェースである。入力部26は、入力装置32とバスとを接続するインターフェースである。カテーテル制御部271は、MDU33の制御、センサ42の制御、および、センサ42から受信した信号に基づく画像の生成等を行なう。
The
カテーテル制御部271の機能および構成は、従来から使用されている超音波診断装置と同様であるため、詳細については説明を省略する。なお、制御部21が、カテーテル制御部271の機能を実現してもよい。
Since the function and configuration of the
MDU33は、プローブ部41の内部でセンサ42を回転させる。カテーテル制御部271は、センサ42の一回転ごとに1枚のカテーテル画像51(図2参照)を生成する。生成されるカテーテル画像51は、プローブ部41を中心とし、プローブ部41に略垂直な横断層像である。
The MDU 33 rotates the
MDU33は、プローブ部41の内部でセンサ42およびシャフト43を回転させながら、さらにセンサ42を進退させることも可能である。センサ42を引っ張りながら、または押し込みながら回転させる操作により、カテーテル制御部271はプローブ部41に略垂直な複数枚のカテーテル画像51を連続的に生成する。以下の説明ではカテーテル画像51を生成することを、「カテーテル画像51を撮影する」と表現する場合がある。
The
連続的に撮影されたカテーテル画像51は、三次元画像の生成に使用可能である。したがって、画像診断用カテーテル40は長手方向に沿って複数のカテーテル画像51を順次取得する三次元走査用カテーテルの機能を実現する。以下の説明では、三次元画像を生成可能な複数のカテーテル画像51を撮影する走査を三次元走査と記載する場合がある。
The continuously imaged
センサ42の進退操作には、プローブ部41全体を進退させる操作と、プローブ部41の内部でセンサ42を進退させる操作との両方を含む。進退操作は、MDU33により所定の速度で自動的に行なわれても、ユーザにより手動で行なわれても良い。
The operation of advancing / retreating the
なお、画像診断用カテーテル40は機械的に回転および進退を行なう機械走査方式に限定しない。複数の超音波トランスデューサを環状に配置したセンサ42を用いた、電子ラジアル走査型の画像診断用カテーテル40であってもよい。
The
図2は、カテーテルシステム10の概要を説明する説明図である。制御部21は、カテーテル画像51を取得して、分類モデル62に入力する。分類モデル62は、カテーテル画像51の入力を受け付けて、カテーテル画像51を受け付けて、カテーテル画像51を構成する各部分について、描出されているオブジェクトごとに分類した分類データ52を出力するモデルである。
FIG. 2 is an explanatory diagram illustrating an outline of the
本実施の形態においては、分類モデル62は1枚のカテーテル画像51を受け付けて、それぞれの画素に対して、第1領域521、第2領域522、第3領域523および第4領域524の4種類のラベルのいずれかを関連づけた分類データ52を出力する。
In the present embodiment, the
図2においては、分類データ52を、それぞれの画素に関連づけられたラベルごとに異なるハッチングを施した画像の模式図で示す。たとえば、第1領域521は血管壁、第2領域522はプラーク、第3領域523は血管内腔、第4領域524は血管の外部にそれぞれ対応するラベルが付けられた画素の領域である。
In FIG. 2, the
分類モデル62は、たとえばセマンテックセグメンテーションを行なう学習済モデルである。分類モデル62は、複数枚のカテーテル画像51を受け付けて、1枚または複数組の分類データ52を出力するモデルであってもよい。分類モデル62は、種々の画像処理を組み合わせてカテーテル画像51から血管壁等の領域を抽出するモデルであってもよい。
The
制御部21は、複数枚のカテーテル画像51に基づいて、三次元カテーテルデータ53を生成する。三次元カテーテルデータ53は、ボクセルデータである。複数枚のカテーテル画像51に基づいて三次元カテーテルデータ53を作成する方法は公知であるため、説明を省略する。
The
制御部21は、複数組の分類データ52に基づいて三次元分類データ54を生成する。三次元分類データ54は、たとえばボクセルデータである。三次元分類データ54は、それぞれの領域の境界を示す複数のポリゴンにより構成されたポリゴンデータであってもよい。複数組の分類データ52に基づいて三次元分類データ54を作成する方法は公知であるため、説明を省略する。
The
制御部21は、第4領域524を透明な状態にした三次元分類データ54を表示装置31に表示する。以下の説明では三次元分類データ54を表示装置31に表示した画像を三次元分類画像と記載する場合がある。制御部21は、ユーザの操作に基づいて三次元分類データ54の向きおよび倍率を変更する。三次元画像の表示状態を変更するユーザインタフェースは公知であるため、詳細については説明を説明する。
The
制御部21は、ユーザの操作または事前の指定に基づいて、たとえば第1領域521を透明または半透明に表示してもよい。第1領域521が透明または半透明に表示されることにより、ユーザは第2領域522の外形形状を確認できる。同様に、第1領域521および第2領域522が透明または半透明に表示されることにより、ユーザは第3領域523の外形形状を確認できる。
The
ユーザは、三次元分類データ54に対して横切断面571を指定できる。横切断面571は、三次元分類データ54をプローブ部41に垂直な面で切断する断面である。制御部21は、ユーザが指定した横切断面571の位置で三次元カテーテルデータ53を切断した横断層像57を出力する。
The user can specify the
横断層像57は、たとえば横切断面571に最も近接するカテーテル画像51である。制御部21は、横切断面571の前後に位置するカテーテル画像51を合成して横断層像57を生成しても良い。制御部21は、カテーテル画像51が存在する位置に合わせて横切断面571の指定を受け付けても良い。
The
ユーザは、三次元分類データ54に対して縦切断面581を指定できる。縦切断面581は、三次元分類データ54をプローブ部41の中心軸に対応する直線を含む平面で切断する断面である。制御部21は、ユーザが指定した縦切断面581の位置で三次元カテーテルデータ53を切断した縦断層像58を出力する。
The user can specify the
ユーザは、横切断面571をプローブ部41の長手方向に沿った任意の位置に移動させることができる。ユーザは、三次元分類データ54の中心軸、すなわちプローブ部41を軸として、任意の向きに縦切断面581を回転させることができる。
The user can move the
ユーザは、横切断面571および縦切断面581を適宜変更しながら横断層像57および縦断層像58を観察して、治療方針等を判断する。三次元分類データ54を用いて横切断面571および縦切断面581を指定するため、ユーザは観察中の部位の立体構造を容易に把握し、速やかに適切な治療方針等を判断できる。
The user observes the
制御部21は、ユーザから横切断面571および縦切断面581を示すブックマークの保存指示を受け付ける。制御部21は、保存指示を受け付けたブックマークを、三次元カテーテルデータ53および三次元分類データ54と関連づけて記録する。ユーザは、必要に応じてブックマークを指定して、過去に指定した横断層像57および縦断層像58を再表示できる。
The
ブックマークを使用することにより、ユーザは、たとえばカルテに添付する画像、治療前後の評価に使用する画像、およびカンファレンス等に使用する画像を速やかに選択できる。ブックマークは、三次元分類データ54に関連づけられているため、ユーザはブックマークに対応する横断層像57および縦断層像58の位置関係を容易に確認できる。
By using bookmarks, the user can quickly select, for example, an image to be attached to a medical record, an image to be used for evaluation before and after treatment, an image to be used for a conference, and the like. Since the bookmark is associated with the three-
制御部21は、事前に指定された順番で三次元分類データ54の回転、拡大、縮小、透明化、切断等を自動的に行なう動画を生成して、表示しても良い。制御部21は、事前に指定された条件に基づいて、自動的にブックマークを記録してもよい。ユーザは、手間を掛けずにルーチン的な確認および記録を行なえる。重点的な観察を要する部分のみ、後述する操作をユーザが行なうことで、ユーザの負担を低減するカテーテルシステム10を提供できる。
The
制御部21は、カテーテル制御部271から複数枚のカテーテル画像51を順次取得して、リアルタイムで三次元分類データ54の作成および横切断面571または縦切断面581の指定の受付を行なってもよい。そのようにする場合、三次元分類データ54は三次元走査の進行に伴い徐々に伸びていくように表示される。
The
制御部21は、HISまたは外部の大容量記憶装置に保存された複数枚のカテーテル画像51を読みだして、三次元カテーテルデータ53および三次元分類データ54を作成してもよい。制御部21は、HISまたは外部の大容量記憶装置に保存された三次元カテーテルデータ53および三次元分類データ54を読みだしてもよい。
The
図3は、ブックマークDB66のレコードレイアウトを説明する説明図である。ブックマークDB66は、データID(Identifier)と、三次元カテーテルデータ53と、三次元分類データ54と、ブックマークとを関連づけて記録したDBである。ブックマークDB66は、データIDフィールド、三次元カテーテルデータフィールド、三次元分類データフィールド、第1ブックマークフィールドおよび第2ブックマークフィールドを有する。
FIG. 3 is an explanatory diagram illustrating the record layout of the
第1ブックマークフィールドは、第1ブックマークIDフィールドおよび位置フィールドを有する。第2ブックマークフィールドは、第2ブックマークIDフィールドおよび角度フィールドを有する。 The first bookmark field has a first bookmark ID field and a position field. The second bookmark field has a second bookmark ID field and an angle field.
データIDフィールドには、三次元カテーテルデータ53に固有に付与されたデータIDが記録されている。データIDは、たとえば患者の電子カルテ等に紐づけられている。三次元カテーテルデータフィールドには、三次元カテーテルデータ53が記録されている。三次元分類データフィールドには、三次元カテーテルデータ53に対応する三次元分類データ54が記録されている。
In the data ID field, a data ID uniquely assigned to the three-
第1ブックマークIDフィールドには、ユーザが横切断面571を指定して記録した横断面のブックマークに固有に付与された第1ブックマークIDが記録されている。位置フィールドには、ブックマークの位置が記録されている。第1ブックマークの位置は、たとえば三次元走査を開始した位置からの距離、または、三次元走査を開始してから何枚目のカテーテル画像51に対応する位置であるかに基づいて記録される。
In the first bookmark ID field, the first bookmark ID uniquely assigned to the bookmark of the cross section recorded by the user by designating the
第2ブックマークIDフィールドには、ユーザが縦切断面581を指定して記録した縦断面のブックマークに固有に付与された第2ブックマークIDが記録されている。角度フィールドには縦切断面581の傾きを示す角度が記録されている。角度は、カテーテル画像51の撮影を開始する際のセンサ42の角度を0度としてセンサ42の回転方向に沿って定義される。
In the second bookmark ID field, a second bookmark ID uniquely assigned to the bookmark of the vertical section recorded by the user by designating the
制御部21は、三次元カテーテルデータフィールドに記録された三次元カテーテルデータ53および位置フィールドに記録された位置に基づいて、第1ブックマークIDに対応する横断層像57を再現できる。同様に制御部21は、三次元カテーテルデータフィールドに記録された三次元カテーテルデータ53および角度フィールドに記録された角度に基づいて、第2ブックマークIDに対応する縦断層像58を再現できる。横断層像57および縦断層像58を記録しないことにより、ブックマークDB66のサイズを低減できる。
The
三次元カテーテルデータフィールドおよび三次元分類データフィールドには、それぞれたとえば外部の大容量記憶装置に記録された三次元カテーテルデータ53および三次元分類データ54のファイル名が記録されていてもよい。第1ブックマークフィールドおよび第2ブックマークフィールドは、それぞれ横断層像57および縦断層像58を記録するフィールドを有してもよい。ユーザの操作に応じて速やかに横断層像57および縦断層像58を表示するカテーテルシステム10を提供できる。
The file names of the three-
図4から図13は、カテーテルシステム10が表示する画面の例である。制御部21は、図4から図13に例示する画面を表示装置31に表示する。
4 to 13 are examples of screens displayed by the
図4は、三次元分類データ54が表示された画面を示す。前述のように、制御部21はユーザによる操作に基づき、三次元分類データ54の回転、拡大、縮小、透明化および半透明化等を行なう。図4に示す画面の表示により、制御部21は本実施の形態の三次元画像出力部の機能を実現する。
FIG. 4 shows a screen on which the three-
図5は、第1インジケータ81および第2インジケータ82が表示された画面を示す。ユーザがキーボードまたは音声入力等を介してインジケータの表示を指示した場合、制御部21は三次元分類データ54の近傍に第1インジケータ81および第2インジケータ82を表示する。
FIG. 5 shows a screen on which the
なお制御部21は、第1インジケータ81および第2インジケータ82の表示と非表示とを切り替えるボタンを画面に表示してもよい。図5に示す画面の表示により、制御部21は本実施の形態の第1インジケータ出力部および第2インジケータ出力部の機能を実現する。
The
第1インジケータ81は、カテーテル画像51を撮影したプローブ部41の長手方向、すなわち、複数のカテーテル画像51の中心を結ぶ方向に長い略長円形状である。第1インジケータ81の内部に楕円形状の第1スライダ811が配置されている。
The
第2インジケータ82は、三次元分類データ54の主要部分と第1インジケータ81とを囲む円形である。第2インジケータ82は、一部が三次元分類データ54等により隠された円弧状であってもよい。第2インジケータ82の内側に略長方形形状のフレームインジケータ86が表示されている。前述の第1スライダ811は、フレームインジケータ86の下辺の延長線上に配置されている。
The
第1インジケータ81は、三次元走査を行なった際のプローブ部41の長手方向に対応する。第2インジケータ82は三次元走査を行なった際にセンサ42が回転した走査方向に対応する。
The
図5に示す画面では、ユーザはカーソル89を操作して第1スライダ811を第1インジケータ81に沿って移動させることができる。制御部21は、フレームインジケータ86の下辺の延長線上に第1スライダ811が存在するように、フレームインジケータ86を移動させる。
In the screen shown in FIG. 5, the user can operate the
制御部21は、フレームインジケータ86により三次元分類データ54を切断したようにみえる断面を表示する。ユーザは第1スライダ811を移動させながら、三次元分類データ54の横断面を観察して、たとえば狭窄部の位置または分岐の位置等を確認する。
The
なお、図示を省略するが、情報処理装置20に複数の表示装置31が接続されていてもよい。制御部21は、一方の表示装置31に図5に示す画像を表示し、他方の表示装置31に三次元分類データ54を切断した位置に対応するカテーテル画像51を表示してもよい。表示装置31の解像度が十分に高い場合には、制御部21は図5に示す画像と、カテーテル画像51とを1台の表示装置31に並べて表示してもよい。ユーザは、三次元分類データ54の切断面を変更しながら同時にカテーテル画像51を観察できる。
Although not shown, a plurality of
さらに制御部21は、リアルタイムで撮影されたカテーテル画像51を図5に示す画像と同時に表示してもよい。
Further, the
図6は、ユーザがカーソル89を水平方向、すなわち第1インジケータ81に対して略垂直な方向に動かした場合に制御部21が表示する画面を示す。カーソル89を水平方向に動かす操作により、制御部21は第1ブックマークを記録する指示を受け付ける。第1インジケータ81の右側に、四角形で囲んだ「1」により第1ブックマークの位置を示す第1マーカ812が表示されている。四角形の内側の数字は、第1ブックマークの番号を意味する。
FIG. 6 shows a screen displayed by the
三次元分類データ54の右側に第1ブックマークに対応する横断層像57がサムネール形式で表示されている。横断層像57の左下に、第1ブックマークの番号が表示されている。制御部21は、第1マーカ812の右側に記録中マーク85を表示することにより、第1ブックマークを記録中であることを示す。図6に示す横断層像57により、制御部21は本実施の形態の横断層像出力部の機能を実現する。
The
図7は、第1ブックマークの記録後、さらにユーザが第1スライダ811を第1インジケータ81に沿って移動させた状態を示す。図7では、ユーザは分岐部の状態を観察できる。
FIG. 7 shows a state in which the user further moves the
なお、図7で明らかであるようにフレームインジケータ86はカテーテル画像51の撮影範囲を示すものではない。本実施の形態のカテーテルシステム10は、プローブ部41が図の右側の管腔内に挿入された状態で、左側の分岐を描出可能である。すなわち、カテーテル画像51の撮影範囲は、図7に示すフレームインジケータ86および第2インジケータ82で囲まれた範囲よりも広い。
As is clear from FIG. 7, the
カテーテル画像51の撮影範囲よりも狭い範囲を囲むフレームインジケータ86および第2インジケータ82を画面上に表示することにより、ユーザは三次元分類データ54の立体構造および断面の位置を容易に把握できる。なお、フレームインジケータ86および第2インジケータ82のサイズは、観察対象の状態に応じてユーザが適宜設定できることが望ましい。
By displaying the
図8は、3番目の第1ブックマークの記録が終了した状態を示す。「2」番の第1マーカ812および「3」番の第1マーカ812が第1インジケータ81の右側に表示されている。それぞれのブックマークに対応する横断層像57が、画面の右側にサムネール形式で表示されている。
FIG. 8 shows a state in which the recording of the third first bookmark is completed. The
ユーザは、横断層像57の左下に表示された数字と、第1マーカ812に表示された数字とを対比することにより、どの横断層像57が第1インジケータ81上のどの位置に対応するかを確認できる。
By comparing the number displayed in the lower left of the
なお、図8においては、三次元分類データ54および2番目および3番目の横断層像57に黒塗りで示す石灰化した部分が描出されている。ユーザは、第1スライダ811を操作して石灰化した部分の広がり具合を確認できる。
In FIG. 8, the calcified portion shown in black is depicted in the three-
図9は、三次元分類データ54の縦断面を表示した画面例を示す。ユーザがカーソル89を第2インジケータ82上に移動させた場合、制御部21は第2インジケータ82上に第2スライダ821を表示する。ユーザは、カーソル89を操作して第2インジケータ82に沿って第2スライダ821を移動させることができる。
FIG. 9 shows an example of a screen displaying a vertical cross section of the three-
制御部21は、第2スライダ821と第2インジケータ82の中心とを結ぶ直線と、カテーテル画像51を撮影したプローブ部41の長手方向を示す直線との2本の直線により定められる平面で三次元分類データ54を切断した縦断面を表示する。すなわち、ユーザは第2インジケータ82および第2スライダ821を使用して、縦断面の角度を指定できる。
The
ユーザは第2スライダ821を移動させながら、三次元分類データ54の縦断面を観察して、たとえば狭窄部の長さまたは石灰化した部分の長さ等を確認する。
While moving the
なお、図示を省略するが、情報処理装置20に複数の表示装置31が接続されている場合、制御部21は、一方の表示装置31に図9に示す画像を表示し、他方の表示装置31に三次元分類データ54を切断した位置に対応する縦断層像58を表示してもよい。表示装置31の解像度が十分に高い場合には、制御部21は図5に示す画像と、縦断層像58とを1台の表示装置31に並べて表示してもよい。ユーザは、三次元分類データ54の切断面を変更しながら同時に縦断層像58を観察できる。
Although not shown, when a plurality of
図10は、ユーザがカーソル89を第2インジケータ82の半径方向、すなわち第2インジケータ82に対して略垂直な方向に動かした場合に制御部21が表示する画面を示す。図10においては、カーソル89は第2インジケータ82の中心方向に動かされている。
FIG. 10 shows a screen displayed by the
カーソル89を半径方向に動かす操作により、制御部21は第2ブックマークを記録する指示を受け付ける。第2インジケータ82の内側に、円形で囲んだ「1」により第2ブックマークの位置を示す第2マーカ822が表示されている。四角形の内側の数字は、第2ブックマークの番号を意味する。制御部21は第2インジケータ82の内側に、第2マーカ822と、第2インジケータ82の中心とを結ぶ直線、すなわち縦断面の方向を示す直線を表示する。
By the operation of moving the
三次元分類データ54の左側に第2ブックマークに対応する縦断層像58が表示されている。縦断層像58の左上に、第2ブックマークの番号が表示されている。制御部21は、第2マーカ822の下側に記録中マーク85を表示することにより、第2ブックマークを記録中であることを示す。図10に示す縦断層像58により、制御部21は本実施の形態の縦断層像出力部の機能を実現する。
The vertical
図11は、第2ブックマークの記録後、さらにユーザが第1マーカ812を第2インジケータ82に沿って移動させた状態を示す。図7では、分岐部の一部の断面が表示されている。
FIG. 11 shows a state in which the user further moves the
図12は、2番目の第2ブックマークの記録が終了した状態を示す。図12においては、ユーザはカーソル89を第2インジケータ82の外側に動かすことにより、第2ブックマークの記録を指示している。「2」番の第2マーカ822が第2インジケータ82の外側に表示されている。2番目の第2ブックマークに対応する縦断層像58が、三次元分類データ54の左側に追加で表示されている。
FIG. 12 shows a state in which recording of the second second bookmark is completed. In FIG. 12, the user instructs the recording of the second bookmark by moving the
ユーザは、縦断層像58の左上に表示された数字と、第2マーカ822に表示された数字とを対比することにより、どの縦断層像58が第2インジケータ82上のどの位置に対応するかを確認できる。なお、図12においては、分岐後の2本の管腔の両方の中心軸が表示される縦断面が表示されている。ユーザは、分岐部の構造を確認できる。
By comparing the number displayed on the upper left of the vertical
ユーザは、図12の状態からカーソル89を第1インジケータ81上に動かして、三次元分類データ54の横断面を再度表示させて、第1ブックマークを追加できる。以上に説明した操作を適宜繰り返して、ユーザは任意の数の第1ブックマークおよび第2ブックマークを記録できる。
The user can add the first bookmark by moving the
図13は、ユーザが3番目の横断層像57の拡大率を変更する指示を行なった状態を示す。ユーザはたとえばキーボードの操作または音声入力等により、横断層像57および縦断層像58の拡大率を変更できる。図13においては、カテーテル画像51全体が横断層像57に表示された例を示す。
FIG. 13 shows a state in which the user has instructed to change the enlargement ratio of the third
図6から図13を使用して説明した画面において、制御部21は第1マーカ812の選択を受け付けてもよい。第1マーカ812の選択を受け付けた場合、制御部21は選択を受け付けた第1マーカ812に対応に対応する横断面を三次元分類データ54に表示する。制御部21は、横断面に対応する位置に第1スライダ811を表示する。
In the screen described with reference to FIGS. 6 to 13, the
同様に図6から図13を使用して説明した画面において、制御部21は第2マーカ822の選択を受け付けてもよい。第2マーカ822の選択を受け付けた場合、制御部21は選択を受け付けた第2マーカ822に対応に対応する縦断面を三次元分類データ54に表示する。制御部21は、縦断面に対応する位置に第2スライダ821を表示する。
Similarly, in the screen described with reference to FIGS. 6 to 13, the
図5から図13を使用して説明した画面において、制御部21は三次元分類データ54の回転、拡大、縮小、透明化または半透明化等の表示変更の指示を受け付けてもよい。制御部21は、ユーザの指示に基づいて三次元分類データ54、第1インジケータ81および第2インジケータ82の表示を変更する。
In the screen described with reference to FIGS. 5 to 13, the
たとえば、三次元分類データ54の回転させる指示を受け付けた場合、制御部21は三次元分類データ54を回転させるとともに、第1インジケータ81および第2インジケータ82も回転させる。なお、三次元分類データ54の回転にともない第1インジケータ81が三次元分類データ54に隠れる場合、制御部21は第1インジケータ81を並行移動させて、ユーザが三次元分類データ54と第1インジケータ81との両方を確認できる状態に表示する。
For example, when the instruction to rotate the three-
制御部21はユーザの指示に基づいて第1マーカ812、第2マーカ822、横断層像57および縦断層像58の表示と非表示とを切り替えてもよい。記録済のブックマークの数が多い場合に、ユーザは必要な第1マーカ812、第2マーカ822、横断層像57および縦断層像58適宜選択して表示させることができる。
The
記録済のブックマークの数が多い場合、制御部21は横断層像57および縦断層像58を表示した領域にそれぞれスクロールバーを表示してもよい。制御部21は横断層像57および縦断層像58のサイズを小さくして、多数の横断層像57および縦断層像58を表示可能にしてもよい。
When the number of recorded bookmarks is large, the
[変形例1]
図14は、変形例1のカテーテルシステム10が表示する画面の例である。それぞれの横断層像57に、三次元分類データ54に表示されている縦断面の位置を示す第1補助マーカ815が実線で表示されている。ユーザがカーソル89を操作して三次元分類データ54の断面を回転させた場合、制御部21は第1補助マーカ815も連動して回転させる。ユーザは第1補助マーカ815により、横断層像57と三次元分類データ54の断面との位置関係を容易に把握できる。
[Modification 1]
FIG. 14 is an example of a screen displayed by the
それぞれの縦断層像58に、第1ブックマークの位置に対応する第2補助マーカ825が実線で表示されている。第2補助マーカ825は、第1マーカ812と同様の内側に数字が表示された四角形と、第1ブックマークにより記録された横切断面571の位置を示す直線との組み合わせである。第2補助マーカ825により、縦断層像58と横断層像57との位置関係をユーザが容易に把握できるカテーテルシステム10を提供できる。
A second
[変形例2]
図15は、変形例2のカテーテルシステム10が表示する画面の例である。変形例1と同様に、横断層像57に第1補助マーカ815が、縦断層像58に第2補助マーカ825がそれぞれ表示されている。
[Modification 2]
FIG. 15 is an example of a screen displayed by the
第1補助マーカ815は、三次元分類データ54に表示されている縦断面の位置を示す破線と、破線の両端の三角形で表示されている。第2補助マーカ825は、内側に数字が表示された四角形と、縦断層像58の両側に配置された三角形との組み合わせである。三角形は、第1ブックマークにより記録された横切断面571の位置を示す。
The first
本変形例によると、第1補助マーカ815および第2補助マーカ825により横断層像57および縦断層像58の観察が妨げられにくいカテーテルシステム10を提供できる。
According to this modification, it is possible to provide the
なお、第1補助マーカ815および第2補助マーカ825の表示、非表示はユーザが適宜選択できることが望ましい。変形例1および変形例2の第1補助マーカ815および第2補助マーカ825はいずれも例示である。ユーザが、第1補助マーカ815および第2補助マーカ825の態様を適宜選択できることが望ましい。三次元分類データ54の断面に対して、横断層像57の位置または縦断層像58の位置を示す補助マーカが表示されてもよい。
It is desirable that the user can appropriately select the display / non-display of the first
制御部21は、マウス等を用いたカーソル89の操作の代わりに、タッチパネルへのタップ操作、ダブルタップ操作、ロングタップ操作、フリック操作等の各種のタッチ操作を介して、入力操作を受け付けてもよい。制御部21は、音声入力、ジェスチャ入力、または視線入力等の、非接触型のユーザインタフェースを介して入力操作を受け付けてもよい。
Even if the
図16は、プログラムの処理の流れを説明するフローチャートである。図16は、画像診断用カテーテル40を使用中に制御部21が実行するプログラムを示す。
FIG. 16 is a flowchart illustrating a flow of program processing. FIG. 16 shows a program executed by the
制御部21は、カテーテル制御部271からカテーテル画像51を取得する(ステップS501)。ステップS501により、制御部21は本実施の形態のカテーテル画像取得部の機能を実現する。制御部21は、カテーテル画像51を分類モデル62に入力して、分類データ52を取得する(ステップS502)。ステップS502により、制御部21は本実施の形態の分類モデル入力部の機能を実現する。
The
制御部21は、三次元走査を終了したか否かを判定する(ステップS503)。たとえば、所定の数のカテーテル画像51の取得した場合に、制御部21は三次元走査を完了したと判定する。
The
三次元走査を終了していないと判定した場合(ステップS503でNO)、制御部21はステップS501に戻る。三次元走査を終了したと判定した場合(ステップS503でYES)、制御部21はステップS501で取得した複数のカテーテル画像51に基づいて三次元カテーテルデータ53を生成する(ステップS504)。
When it is determined that the three-dimensional scanning is not completed (NO in step S503), the
前述のとおり、三次元カテーテルデータ53はボクセルデータである。複数枚のカテーテル画像51に基づいて三次元カテーテルデータ53を作成する方法は公知であるため、説明を省略する。
As described above, the three-
制御部21は、複数組の分類データ52に基づいて三次元分類データ54を生成する(ステップS505)。ステップS505により、制御部21は本実施の形態の三次元分類画像生成部の機能を実現する。
The
前述のとおり、三次元分類データ54はたとえばボクセルデータである。三次元分類データ54は、それぞれの領域の境界を示す複数のポリゴンにより構成されたポリゴンデータであってもよい。複数組の分類データ52に基づいて三次元分類データ54を作成する方法は公知であるため、説明を省略する。
As described above, the three-
制御部21は、ブックマークDB66に新規レコードを作成する。制御部21は、三次元カテーテルデータ53に固有のデータIDを付与して、データIDフィールドに記録する。制御部21は、三次元カテーテルデータフィールドに三次元カテーテルデータ53を、三次元分類データフィールドに三次元分類データ54をそれぞれ記録する(ステップS506)。
The
なお、ステップS506の段階では、第1ブックマークフィールドおよび第2ブックマークフィールドには、データが記録されていない。これらのフィールドは、後からデータを追加できる状態に設定されている。 At the stage of step S506, no data is recorded in the first bookmark field and the second bookmark field. These fields are set so that data can be added later.
制御部21は、ブックマークのサブルーチンを起動する(ステップS507)。ブックマークのサブルーチンは、ユーザによる指示に基づいて第1ブックマークおよび第2ブックマークを記録するサブルーチンである。その後、制御部21は処理を終了する。
The
図17は、ブックマークのサブルーチンの処理の流れを説明するフローチャートである。制御部21は、図4を使用して説明したように表示装置31に三次元分類データ54を表示する(ステップS511)。制御部21は、入力装置32を介してユーザによる操作を受け付ける(ステップS512)。
FIG. 17 is a flowchart illustrating the flow of processing of the bookmark subroutine. The
制御部21は、ステップS512で受け付けた操作が、三次元分類データ54の回転、拡大、縮小、透明化および半透明化等の表示変更の指示であるか否かを判定する(ステップS513)。表示変更の指示であると判定した場合(ステップS513でYES)、制御部21はユーザによる指示に基づいて三次元分類データ54の表示を変更する(ステップS514)。
The
表示変更の指示ではないと判定した場合(ステップS513でNO)、制御部21は第1スライダ811に対する操作を受け付けたか否かを判定する(ステップS521)。第1スライダ811に対する操作を受け付けたと判定した場合(ステップS521でYES)、制御部21は第1スライダ811の位置に基づいて三次元分類データ54の横断面を変更する(ステップS522)。
When it is determined that the instruction is not a display change instruction (NO in step S513), the
制御部21は、第1ブックマークを記録する指示を受け付けたか否かを判定する(ステップS523)。第1ブックマークを記録する指示を受け付けたと判定した場合(ステップS523でYES)、制御部21は第1ブックマークを記録する(ステップS524)。
The
具体的には、制御部21は第1ブックマークに固有の第1ブックマークIDを付与する。制御部21は第1ブックマークIDおよび第1ブックマークの位置を第1ブックマークフィールドに記録する。ステップS524により、制御部21は本実施の形態の第1記録部の機能を実現する。
Specifically, the
第1スライダ811に対する操作を受け付けていないと判定した場合(ステップS521でNO)、制御部21は第2インジケータ82に対する指示を受け付けたと判定する。制御部21は、第2スライダ821の位置に基づいて三次元分類データ54の縦断面を変更する(ステップS527)。
When it is determined that the operation for the
制御部21は、第2ブックマークを記録する指示を受け付けたか否かを判定する(ステップS528)。第2ブックマークを記録する指示を受け付けたと判定した場合(ステップS528でYES)、制御部21は第2ブックマークを記録する(ステップS529)。
The
具体的には、制御部21は第2ブックマークに固有の第2ブックマークIDを付与する。制御部21は第2ブックマークIDおよび第2ブックマークの角度を第2ブックマークフィールドに記録する。ステップS529により、制御部21は本実施の形態の第2記録部の機能を実現する。
Specifically, the
第1ブックマークを記録する指示を受け付けていないと判定した場合(ステップS523でNO)、第2ブックマークを記録する指示を受け付けていないと判定した場合(ステップS528でNO)、または、ステップS514、ステップS524もしくはステップS529の終了後、制御部21は処理を終了するか否かを判定する(ステップS515)。たとえば、ユーザが次の三次元走査の実行を指示した場合、制御部21は処理を終了すると判定する。
When it is determined that the instruction to record the first bookmark is not accepted (NO in step S523), when it is determined that the instruction to record the second bookmark is not accepted (NO in step S528), or step S514, step. After the end of S524 or step S529, the
処理を終了しないと判定した場合(ステップS515でNO)、制御部21はステップS512に戻る。処理を終了すると判定した場合(ステップS515でYES)、制御部21は処理を終了する。
If it is determined that the process is not completed (NO in step S515), the
本実施の形態によると、ユーザは第1インジケータ81に沿って第1スライダ811を動かす操作により三次元分類データ54の横断面の位置を容易に操作できる。ユーザは、第1インジケータ81を操作中のカーソル89を第1インジケータ81に対して略垂直方向に動かすことにより、第1ブックマークを容易に記録できる。
According to the present embodiment, the user can easily operate the position of the cross section of the three-
ユーザは第2インジケータ82に沿って第2スライダ821を動かす操作により三次元分類データ54の縦断面の位置を容易に操作できる。ユーザは、第2インジケータ82を操作中のカーソル89を第2インジケータ82に対して略垂直方向に動かすことにより、第2ブックマークを容易に記録できる。
The user can easily operate the position of the vertical cross section of the three-
以上により、ユーザはたとえば治療効果の確認または経過観察等に適した横断層像57および縦断層像58を示すブックマークを容易に記録して、必要に応じて後日確認できる。
As a result, the user can easily record a bookmark showing the
本実施の形態によると、ユーザが手技の実施中にリアルタイムでブックマークを記録可能なカテーテルシステム10を提供できる。ブックマークを記録するためにIVR(Interventional Radiology)等の処置を停滞させないため、医療者および患者の負担を低減可能なカテーテルシステム10を提供できる。
According to this embodiment, it is possible to provide a
なお、第1ブックマークおよび第2ブックマークを記録する指示は、たとえばクリック、ダブルクリック、タップ等の任意の操作により受け付けてもよい。第1ブックマークおよび第2ブックマークを記録する指示は、音声入力またはフットスイッチの操作等により受け付けても良い。第1インジケータ81および第2インジケータ82を使用することにより、ブックマークを行なう位置をユーザが簡単な操作で正確に指定できるカテーテルシステム10を提供できる。
The instruction to record the first bookmark and the second bookmark may be accepted by any operation such as clicking, double-clicking, and tapping. The instruction to record the first bookmark and the second bookmark may be accepted by voice input, operation of the foot switch, or the like. By using the
制御部21は、ユーザの指示に基づいて三次元分類データ54を横切断面571と縦切断面581の両方を用いて略L字型に切断した態様を表示してもよい。ユーザは、三次元分類データ54の横断面と縦断面との関係を容易に把握できる。
The
図6から図15を使用した画面において、制御部21は横断層像57または縦断層像58に対する計測の指示を受け付けてもよい。制御部21は、計測の指示を受け付けた横断層像57または縦断層像58を大きなサイズで表示して、計測に関する操作を受け付けても良い。ユーザは、たとえばプラークの厚さ、狭窄部の長さ、または狭窄率等の計測を行なえる。IVUS画像に対する種々の計測を行なう方法は公知であるため、説明を省略する。
In the screen using FIGS. 6 to 15, the
ブックマークDB66は、計測対象である横断層像57または縦断層像58のブックマークに関連づけて計測結果を記録するフィールドを備えてもよい。制御部21は、計測結果を対応するフィールドに記録する。
The
制御部21は、それぞれのブックマークに関連づけて所定の計測項目を自動的に計測し、ブックマークDB66に記録してもよい。
The
図4から図15を使用して説明した画面において、制御部21は三次元分類データ54の代わりに、三次元カテーテルデータ53を表示してもよい。制御部21は、たとえば血管壁に対応する輝度のボクセル以外を透過させた状態で表示することにより、三次元カテーテルデータ53に含まれる血管壁をユーザが視認しやすい状態で表示できる。
In the screen described with reference to FIGS. 4 to 15, the
[実施の形態2]
本実施の形態は、ブックマークDB66に保存済のデータを表示し、ブックマークの追加を受け付けるプログラムに関する。実施の形態1と共通する部分については、説明を省略する。
[Embodiment 2]
The present embodiment relates to a program that displays saved data in the
図18は、実施の形態2のプログラムの処理の流れを説明するフローチャートである。制御部21は、ブックマークDB66の三次元カテーテルデータフィールドから三次元カテーテルデータ53を取得する(ステップS541)。ステップS541により、制御部21は本実施の形態の三次元分類画像取得部の機能を実現する。
FIG. 18 is a flowchart illustrating a processing flow of the program of the second embodiment. The
制御部21は、ブックマークDB66の三次元分類データフィールドから三次元分類データ54を取得する(ステップS542)。制御部21は、ブックマークDB66の第1ブックマークフィールドおよび第2ブックマークフィールドからブックマークを取得する(ステップS543)。
The
制御部21は、ブックマークのサブルーチンを起動する(ステップS544)。ブックマークのサブルーチンは、図17を使用して説明したサブルーチンと同一のサブルーチンである。なお、制御部21は、ブックマークのサブルーチンのステップS511において、三次元分類データ54に加えてステップS543で取得したブックマークに対応する横断層像57、縦断層像58、第1マーカ812および第2マーカ822も表示する。その後、制御部21は処理を終了する。
The
本実施の形態によると、ブックマークDB66に記録したブックマークを表示し、必要に応じて追加のブックマークを記録可能なカテーテルシステム10を提供できる。たとえば、経過観察を行なう場合等に、ユーザは新しく撮影した三次元画像上の着目箇所に合わせて、過去に撮影した三次元画像にブックマークを記録できる。複数回におよぶ経過観察結果を、容易に比較可能なカテーテルシステム10を提供できる。
According to this embodiment, it is possible to provide a
[実施の形態3]
本実施の形態は、ステント留置術を支援するカテーテルシステム10に関する。実施の形態1と共通する部分については、説明を省略する。
[Embodiment 3]
The present embodiment relates to a
図19は、実施の形態3のカテーテルシステム10が表示する画面の例である。図12を使用して説明した画面に、ステントサイズ欄71およびステントマーカ72が追加で表示されている。
FIG. 19 is an example of a screen displayed by the
制御部21は、ステントサイズ欄71を介して留置を検討中のステントのサイズの入力を受け付ける。なお、制御部21はステントの型番を受け付けて、対応する外径および長さをステントサイズ欄71に表示してもよい。
The
制御部21は、受け付けたステントのサイズに合わせたステントマーカ72を、三次元分類データ54に重畳させて表示する。ユーザは、カーソル89を操作してステントマーカ72の位置を適宜変更できる。
The
本実施の形態によると、ステントのサイズおよび留置位置の検討を支援可能なカテーテルシステム10を提供できる。
According to this embodiment, it is possible to provide a
なお、制御部21は拡張用バルーンまたはロータブレータによる切削領域等を三次元分類データ54に重畳表示してもよい。種々のカテーテル治療を支援可能なカテーテルシステム10を提供できる。
The
[実施の形態4]
本実施の形態は、縦切断面581の回転軸を変更可能なカテーテルシステム10に関する。実施の形態1と共通する部分については、説明を省略する。
[Embodiment 4]
The present embodiment relates to a
図20は、実施の形態4のブックマークDB66のレコードレイアウトを説明する説明図である。データIDフィールド、三次元カテーテルデータフィールド、三次元分類データフィールドおよび第1ブックマークフィールドは、図3を使用して説明した実施の形態1のブックマークDB66と同一である。
FIG. 20 is an explanatory diagram illustrating the record layout of the
第2ブックマークフィールドは、第2ブックマークIDフィールドおよび角度フィールドに加えて、回転軸フィールドを有する。回転軸フィールドには、第2ブックマークを記録した際に使用した回転軸の座標が記録されている。 The second bookmark field has a rotation axis field in addition to the second bookmark ID field and the angle field. In the rotation axis field, the coordinates of the rotation axis used when recording the second bookmark are recorded.
図21は、実施の形態4のカテーテルシステム10が表示する画面の例である。図21は、図11を使用して説明した画面において、ユーザが縦切断面581の回転軸を変更する指示を入力した後の状態を示す。
FIG. 21 is an example of a screen displayed by the
制御部21は、軸指定欄73および軸選択欄74を表示する。軸指定欄73には、第2インジケータ82の表示を開始した際の横断層像57が拡大表示されている。
The
軸選択欄74には、ユーザが選択可能な回転軸の候補が表示されている。「A.カテーテル中心」は、プローブ部41の中心に沿う直線を回転軸に選択することを意味する。この候補を選択した場合の回転軸は、実施の形態1で説明した回転軸と同一である。
In the axis selection field 74, candidates for rotation axes that can be selected by the user are displayed. "A. Catheter center" means selecting a straight line along the center of the
「B.EEM中心」は、軸指定欄73に表示された横断層像に描出されたEEM(External Elastic Membrane:外弾性板)の中心を通るように回転軸を並行移動させる選択することを意味する。EEMは、たとえばユーザが入力装置32を操作して入力する。制御部21が自動的にEEMを検出してもよい。EEMの中心は、たとえばEEMの重心である。
"B. EEM center" means to select to translate the rotation axis so as to pass through the center of the EEM (External Elastic Membrane) depicted in the transverse layer image displayed in the
制御部21は、「カテーテル中心」および「EEM中心」を軸指定欄73内の横断層像に重畳して表示する。制御部21は、軸選択欄74を介して、ユーザによる選択を受け付ける。なお、ユーザが「C.手動入力」を選択した場合、制御部21はユーザによる位置の指定を受け付ける。以後、制御部21は軸選択欄74を介して指定された点を通り、複数のカテーテル画像51の中心を結ぶ方向に平行な軸を中心にして、縦切断面581を回転させる。
The
図22は、実施の形態4のマーキングのサブルーチンの処理の流れを説明するフローチャートである。図22のサブルーチンは、図17を使用して説明したサブルーチンの代わりに使用される。ステップS511からステップS521までの処理は、図17で説明したサブルーチンの処理と同一であるため、説明を省略する。 FIG. 22 is a flowchart illustrating a processing flow of the marking subroutine according to the fourth embodiment. The subroutine of FIG. 22 is used in place of the subroutine described with reference to FIG. Since the processing from step S511 to step S521 is the same as the processing of the subroutine described with reference to FIG. 17, the description thereof will be omitted.
第1スライダ811に対する操作を受け付けていないと判定した場合(ステップS521でNO)、制御部21は第2インジケータ82に対する指示を受け付けたと判定する。制御部21は、縦切断面581の回転軸を変更する指示を受け付けたか否かを判定する(ステップS561)。
When it is determined that the operation for the
たとえば制御部21は、回転軸を変更する指示をキーボードの操作または音声入力等により受け付ける。制御部21は、回転軸を変更する指示を受け付けるボタンを画面上に表示してもよい。
For example, the
回転軸を変更する指示を受け付けたと判定した場合(ステップS561でYES)、制御部21は軸変更のサブルーチンを起動する(ステップS562)。軸変更のサブルーチンは、回転軸の変更を受け付けるサブルーチンである。軸変更のサブルーチンの処理の流れは後述する。
When it is determined that the instruction to change the rotation axis has been accepted (YES in step S561), the
回転軸を変更する指示を受け付けていないと判定した場合(ステップS561でNO)、制御部21は、第2スライダ821の位置に基づいて三次元分類データ54の縦断面を変更する(ステップS527)。以後の処理は、図17を使用して説明したサブルーチンの処理と同一であるため、説明を省略する。
When it is determined that the instruction to change the rotation axis is not accepted (NO in step S561), the
図23は、軸変更のサブルーチンの処理の流れを説明するフローチャートである。軸変更のサブルーチンは、回転軸の変更を受け付けるサブルーチンである。制御部21は、たとえば図21を使用して説明した「EEM中心」のような回転軸の候補位置を算出する(ステップS571)。候補位置は、たとえば「内腔領域の中心」および、「血管外周の中心」等を含んでもよい。制御部21は、図21を使用して説明したように、軸指定欄73および軸選択欄74に候補を表示する(ステップS572)。
FIG. 23 is a flowchart illustrating the flow of processing of the axis change subroutine. The axis change subroutine is a subroutine that accepts a change in the rotation axis. The
制御部21は、たとえば軸選択欄74の左端に設けたチェックボックスを介してユーザによる選択を受け付ける(ステップS573)。制御部21は、ユーザから「C.手動入力」の選択を受け付けたか否かを判定する(ステップS574)。
The
「C.手動入力」の選択を受け付けたと判定した場合(ステップS574でYES)、制御部21はユーザによる軸の指定を受け付ける(ステップS575)。具体的には、ユーザは入力装置32を操作して軸指定欄73上の一点をクリック操作する。制御部21はクリック操作された位置に基づいて軸の指定を受け付ける。
When it is determined that the selection of "C. Manual input" has been accepted (YES in step S574), the
「C.手動入力」の選択を受け付けていないと判定した場合(ステップS574でNO)、または、ステップS575の終了後、制御部21はユーザが指定した軸を主記憶装置22または補助記憶装置23に記録する(ステップS576)。以後、再度軸変更のサブルーチンが起動されるまで、制御部21はステップS576で記憶した回転軸を使用する。その後、制御部21は処理を終了する。
When it is determined that the selection of "C. Manual input" is not accepted (NO in step S574), or after the end of step S575, the
なお、制御部21はブックマークDB66に第2ブックマークを記録する際、回転軸フィールドにステップS586で記憶した回転軸の位置を記録する。
When recording the second bookmark in the
本実施の形態によると、縦切断面581の回転軸を変更できるカテーテルシステム10を提供できる。たとえば、狭窄等によりカテーテル画像51の中心とEEMの中心とが離れている場合であっても、ユーザはEEMの中心を軸に用いて複数の縦断層像58を観察できる。
According to this embodiment, it is possible to provide a
[実施の形態5]
図24は、実施の形態5のカテーテルシステム10の構成を説明する説明図である。本実施の形態は、カテーテル制御装置27と、MDU33と、画像診断用カテーテル40と、汎用のコンピュータ90と、プログラム97とを組み合わせて動作させることにより、本実施の形態のカテーテルシステム10を実現する形態に関する。実施の形態1と共通する部分については、説明を省略する。
[Embodiment 5]
FIG. 24 is an explanatory diagram illustrating the configuration of the
カテーテル制御装置27は、MDU33の制御、センサ42の制御、および、センサ42から受信した信号に基づく横断層像57および縦断層像58の生成等を行なう、IVUS用の超音波診断装置である。カテーテル制御装置27の機能および構成は、従来から使用されている超音波診断装置と同様であるため、説明を省略する。
The
本実施の形態のカテーテルシステム10は、コンピュータ90を含む。コンピュータ90は、制御部21、主記憶装置22、補助記憶装置23、通信部24、表示部25、入力部26、読取部29およびバスを備える。コンピュータ90は、汎用のパーソナルコンピュータ、タブレット、スマートフォンまたはサーバコンピュータ等の情報機器である。
The
プログラム97は、可搬型記録媒体96に記録されている。制御部21は、読取部29を介してプログラム97を読み込み、補助記憶装置23に保存する。また制御部21は、コンピュータ90内に実装されたフラッシュメモリ等の半導体メモリ98に記憶されたプログラム97を読出してもよい。さらに、制御部21は、通信部24および図示しないネットワークを介して接続される図示しない他のサーバコンピュータからプログラム97をダウンロードして補助記憶装置23に保存してもよい。
The
プログラム97は、コンピュータ90の制御プログラムとしてインストールされ、主記憶装置22にロードして実行される。これにより、コンピュータ90は上述した情報処理装置20として機能する。
The
コンピュータ90は、汎用のパソコン、タブレット、スマートフォン、大型計算機、大型計算機上で動作する仮想マシン、クラウドコンピューティングシステム、または、量子コンピュータである。コンピュータ90は、分散処理を行なう複数のパソコン等であってもよい。
The
[実施の形態6]
図25は、実施の形態6の情報処理装置の機能ブロック図である。情報処理装置20は、三次元画像出力部91と、インジケータ出力部92と、第1記録部93とを備える。三次元画像出力部91は、ラジアル走査型の画像診断用カテーテル40により取得した複数のカテーテル画像51に基づく三次元画像54を出力する。
[Embodiment 6]
FIG. 25 is a functional block diagram of the information processing apparatus according to the sixth embodiment. The
インジケータ出力部92は、画像診断用カテーテル40の長手方向に対応する第1インジケータ81を出力する。第1記録部93は、第1インジケータ81を介して取得した第1ブックマークを記録する。
The
各実施例で記載されている技術的特徴(構成要件)はお互いに組合せ可能であり、組み合わせすることにより、新しい技術的特徴を形成することができる。
今回開示された実施の形態はすべての点で例示であって、制限的なものでは無いと考えられるべきである。本発明の範囲は、上記した意味では無く、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
The technical features (constituent requirements) described in each embodiment can be combined with each other, and by combining them, new technical features can be formed.
The embodiments disclosed this time should be considered to be exemplary in all respects and not restrictive. The scope of the present invention is shown by the scope of claims, not the above-mentioned meaning, and is intended to include all modifications within the meaning and scope equivalent to the scope of claims.
10 カテーテルシステム
20 情報処理装置
21 制御部
22 主記憶装置
23 補助記憶装置
24 通信部
25 表示部
26 入力部
27 カテーテル制御装置
271 カテーテル制御部
29 読取部
31 表示装置
32 入力装置
33 MDU
40 画像診断用カテーテル
41 プローブ部
42 センサ
43 シャフト
45 コネクタ部
51 カテーテル画像
52 分類データ
521 第1領域
522 第2領域
523 第3領域
524 第4領域
525 第5領域
53 三次元カテーテルデータ
54 三次元分類データ(三次元画像)
57 横断層像
571 横切断面
58 縦断層像
581 縦切断面
66 ブックマークDB
71 ステントサイズ欄
72 ステントマーカ
73 軸指定欄
74 軸選択欄
81 第1インジケータ
811 第1スライダ
812 第1マーカ
815 第1補助マーカ
82 第2インジケータ
821 第2スライダ
822 第2マーカ
825 第2補助マーカ
86 フレームインジケータ
89 カーソル
90 コンピュータ
91 三次元画像出力部
92 インジケータ出力部
93 第1記録部
96 可搬型記録媒体
97 プログラム
98 半導体メモリ
10
40 Diagnostic image
57
71
Claims (15)
前記画像診断用カテーテルの長手方向に対応する第1インジケータを出力する第1インジケータ出力部と、
前記第1インジケータを介して取得した第1ブックマークを記録する第1記録部とを備える
情報処理装置。 A 3D image output unit that outputs 3D images based on multiple catheter images acquired by a radial scanning type diagnostic imaging catheter, and a 3D image output unit.
A first indicator output unit that outputs a first indicator corresponding to the longitudinal direction of the diagnostic imaging catheter, and a first indicator output unit.
An information processing device including a first recording unit that records a first bookmark acquired via the first indicator.
請求項1に記載の情報処理装置。 The information processing apparatus according to claim 1, wherein the first bookmark is a position of a cross section of the three-dimensional image acquired through an operation on a first slider that can be moved along the first indicator.
請求項1または請求項2に記載の情報処理装置。 The information processing apparatus according to claim 1 or 2, wherein the first indicator output unit outputs a first marker indicating the position of the first bookmark recorded in the past in addition to the first indicator.
請求項1から請求項3のいずれか一つに記載の情報処理装置。 The information processing apparatus according to any one of claims 1 to 3, further comprising a cross-layer image output unit that outputs a catheter image of a cross-layer image corresponding to the first bookmark.
請求項4に記載の情報処理装置。 The information processing apparatus according to claim 4, wherein the cross-layer image output unit outputs a catheter image of a cross-layer image corresponding to each of the first bookmarks recorded in the past in a thumbnail format.
前記第2インジケータを介して取得した第2ブックマークを記録する第2記録部とを備える
請求項1から請求項5のいずれか一つに記載の情報処理装置。 A second indicator output unit that outputs a second indicator corresponding to the scanning direction of the diagnostic imaging catheter, and a second indicator output unit.
The information processing apparatus according to any one of claims 1 to 5, further comprising a second recording unit for recording a second bookmark acquired via the second indicator.
前記第2ブックマークは、前記第2インジケータに沿って移動可能な第2スライダに対する操作を介して取得した前記三次元画像の縦断面の位置である
請求項6に記載の情報処理装置。 The second indicator has an arc shape and has an arc shape.
The information processing apparatus according to claim 6, wherein the second bookmark is a position of a vertical cross section of the three-dimensional image acquired through an operation on a second slider that can be moved along the second indicator.
請求項6または請求項7に記載の情報処理装置。 The information processing apparatus according to claim 6 or 7, wherein the second indicator output unit outputs a second marker indicating the position of the second bookmark recorded in the past in addition to the second indicator.
請求項6から請求項8のいずれか一つに記載の情報処理装置。 The information processing apparatus according to any one of claims 6 to 8, further comprising a vertical tomographic image output unit that outputs a catheter image of a vertical tomographic image corresponding to the second bookmark.
請求項9に記載の情報処理装置。 The information processing device according to claim 9, wherein the vertical tomographic image output unit outputs a catheter image of a vertical tomographic image corresponding to each of the second bookmarks recorded in the past in a thumbnail format.
請求項1から請求項10のいずれか一つに記載の情報処理装置。 The three-dimensional image is one of claims 1 to 10, which is a three-dimensional classification image generated based on a plurality of classification data, in which the objects imaged for each of the plurality of catheter images are classified. The information processing device described.
取得した前記カテーテル画像のそれぞれを、前記カテーテル画像を入力した場合に、前記カテーテル画像のそれぞれの領域に撮影されているオブジェクトを分類した分類データを出力する分類モデルに入力する分類モデル入力部と、
前記分類モデルから出力された分類データに基づいて前記三次元分類画像を生成する三次元分類画像生成部とを備える
請求項11に記載の情報処理装置。 A catheter image acquisition unit that acquires a plurality of the catheter images, and a catheter image acquisition unit,
A classification model input unit that inputs each of the acquired catheter images to a classification model that outputs classification data that classifies the objects imaged in each area of the catheter image when the catheter image is input.
The information processing apparatus according to claim 11, further comprising a three-dimensional classification image generation unit that generates the three-dimensional classification image based on the classification data output from the classification model.
前記三次元分類画像を取得する三次元分類画像取得部とを備える
請求項11に記載の情報処理装置。 A catheter image acquisition unit that acquires a plurality of the catheter images, and a catheter image acquisition unit,
The information processing apparatus according to claim 11, further comprising a three-dimensional classification image acquisition unit for acquiring the three-dimensional classification image.
前記画像診断用カテーテルの長手方向に対応する第1インジケータを出力し、
前記第1インジケータを介して取得した第1ブックマークを記録する
処理をコンピュータに実行させるプログラム。 A three-dimensional image based on multiple catheter images acquired by a radial scanning type diagnostic imaging catheter is output.
A first indicator corresponding to the longitudinal direction of the diagnostic imaging catheter is output.
A program that causes a computer to execute a process of recording a first bookmark acquired via the first indicator.
前記画像診断用カテーテルの長手方向に対応する第1インジケータを出力し、
前記第1インジケータを介して取得した第1ブックマークを記録する
処理をコンピュータに実行させる情報処理方法。 A three-dimensional image based on multiple catheter images acquired by a radial scanning type diagnostic imaging catheter is output.
A first indicator corresponding to the longitudinal direction of the diagnostic imaging catheter is output.
An information processing method for causing a computer to execute a process of recording a first bookmark acquired via the first indicator.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020164604A JP2022056714A (en) | 2020-09-30 | 2020-09-30 | Information processing device, program, and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020164604A JP2022056714A (en) | 2020-09-30 | 2020-09-30 | Information processing device, program, and information processing method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022056714A true JP2022056714A (en) | 2022-04-11 |
Family
ID=81111272
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020164604A Pending JP2022056714A (en) | 2020-09-30 | 2020-09-30 | Information processing device, program, and information processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022056714A (en) |
-
2020
- 2020-09-30 JP JP2020164604A patent/JP2022056714A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11890117B2 (en) | Systems for indicating parameters in an imaging data set and methods of use | |
JP7375102B2 (en) | How an intravascular imaging system operates | |
US20230389799A1 (en) | Arterial Imaging And Assessment Systems And Methods And Related User Interface Based-Workflows | |
US20200129142A1 (en) | Intraluminal ultrasound navigation buidance and associated devices, systems, and methods | |
JP5685605B2 (en) | System for navigating an interventional device and its operating method, computer program element and computer readable medium | |
EP2903532B1 (en) | System for operation of three-dimesional imaging systems | |
US20140275996A1 (en) | Systems and methods for constructing an image of a body structure | |
WO2015074018A1 (en) | Tracking an intraluminal catheter | |
JP2014054398A (en) | Three-dimensional image display apparatus, and method and program for three-dimensional image display | |
US20140100453A1 (en) | Automatic image playback | |
US20080303818A1 (en) | Medical image display apparatus and program, and recording medium therefor | |
US20140257095A1 (en) | Shape sensing interventional catheters and methods of use | |
CN107019513A (en) | Intravascular virtual endoscope imaging system and its method of work based on electromagnetic location composite conduit | |
US9367965B2 (en) | Systems and methods for generating images of tissue | |
JP2021533940A (en) | Virtual toolkit for radiologists | |
US20240013385A1 (en) | Medical system, method for processing medical image, and medical image processing apparatus | |
JP2022055170A (en) | Computer program, image processing method and image processing device | |
WO2020148162A1 (en) | Intravascular imaging and pressure-sensing procedure case log with dynamic preview | |
JP2022056714A (en) | Information processing device, program, and information processing method | |
WO2023100979A1 (en) | Information processing device, information processing method, and program | |
US20240013514A1 (en) | Information processing device, information processing method, and program | |
WO2021199962A1 (en) | Program, information processing method, and information processing device | |
JP7421548B2 (en) | Diagnostic support device and diagnostic support system | |
US20240013386A1 (en) | Medical system, method for processing medical image, and medical image processing apparatus | |
WO2023100838A1 (en) | Computer program, information processing device, information processing method, and training model generation method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230410 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240304 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240409 |