JP7092346B2 - Image control device - Google Patents
Image control device Download PDFInfo
- Publication number
- JP7092346B2 JP7092346B2 JP2018149452A JP2018149452A JP7092346B2 JP 7092346 B2 JP7092346 B2 JP 7092346B2 JP 2018149452 A JP2018149452 A JP 2018149452A JP 2018149452 A JP2018149452 A JP 2018149452A JP 7092346 B2 JP7092346 B2 JP 7092346B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- control device
- marker
- tip
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000003550 marker Substances 0.000 claims description 60
- 239000000523 sample Substances 0.000 claims description 30
- 238000006243 chemical reaction Methods 0.000 claims description 11
- 238000003384 imaging method Methods 0.000 claims 3
- 238000000034 method Methods 0.000 description 14
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 238000002604 ultrasonography Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
Images
Landscapes
- Surgical Instruments (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Description
本開示は画像制御装置に関する。 The present disclosure relates to an image control device.
従来、HIFU(High Intensity Focused Ultrasound)治療システムが知られている。HIFU治療システムは、超音波を照射するプローブを備える。プローブから照射された超音波は焦点に収束する。術者は、超音波を照射する前に、プローブの先端の位置が目標照射位置と一致するように、プローブを移動させる。目標照射位置は治療したい患部である。HIFU治療システムは特許文献1に開示されている。
Conventionally, a HIFU (High Intensity Focused Ultrasound) treatment system is known. The HIFU treatment system includes a probe that irradiates ultrasonic waves. The ultrasonic waves emitted from the probe converge to the focal point. Before irradiating the ultrasonic wave, the operator moves the probe so that the position of the tip of the probe coincides with the target irradiation position. The target irradiation position is the affected area to be treated. The HIFU treatment system is disclosed in
プローブの周辺には水袋が取り付けられている。そのため、術者は、プローブの先端を直接視認することが困難である。その結果、術者は、プローブの先端の位置と、目標照射位置との位置関係を理解し難い。 A water bag is attached around the probe. Therefore, it is difficult for the operator to directly see the tip of the probe. As a result, it is difficult for the operator to understand the positional relationship between the position of the tip of the probe and the target irradiation position.
本開示の一局面は、プローブの先端の位置と、目標照射位置との位置関係を術者に理解させることができる画像制御装置を提供することを目的とする。 One aspect of the present disclosure is to provide an image control device capable of making an operator understand the positional relationship between the position of the tip of the probe and the target irradiation position.
本開示の一局面は、経皮的治療デバイス(13)の作業領域(37)を表す画像を取得するように構成された画像取得ユニット(21)と、前記画像取得ユニットが取得する前記画像において、前記経皮的治療デバイスが前記作業領域を遮蔽する程度を推測するように構成された画像推測ユニット(23)と、前記画像取得ユニットが取得した前記画像であって、前記遮蔽する程度が閾値以下であると前記画像推測ユニットにより推測された前記画像を記憶するように構成された記憶ユニット(25)と、前記記憶ユニットが最後に記憶した前記画像における、前記経皮的治療デバイスが備えるプローブの先端の位置を推測するように構成されたプローブ推測ユニット(27)と、前記記憶ユニットが最後に記憶した前記画像に、前記プローブ推測ユニットが推測した前記先端の位置を表す先端マーカ(59)を追加するように構成されたマーカ追加ユニット(29)と、前記先端マーカが追加された前記画像を出力するように構成された出力ユニット(31)と、を備える画像制御装置(3)である。 One aspect of the present disclosure is in an image acquisition unit (21) configured to acquire an image representing a working area (37) of a percutaneous treatment device (13) and in the image acquired by the image acquisition unit. An image estimation unit (23) configured to estimate the degree to which the percutaneous treatment device shields the work area, and the image acquired by the image acquisition unit, the degree of shielding is a threshold. A storage unit (25) configured to store the image estimated by the image estimation unit as follows, and a probe included in the percutaneous treatment device in the image last stored by the storage unit. A probe estimation unit (27) configured to infer the position of the tip of the probe, and a tip marker (59) indicating the position of the tip estimated by the probe estimation unit in the image last stored by the storage unit. The image control device (3) includes a marker addition unit (29) configured to add the image, and an output unit (31) configured to output the image to which the tip marker is added. ..
本開示の一局面である画像制御装置は、経皮的治療デバイスの作業領域を表す画像に、先端マーカを追加することができる。術者は、先端マーカが追加された画像を見ることで、プローブの先端の位置と、作業領域に含まれる目標照射位置との位置関係を容易に理解することができる。 The image control device, which is one aspect of the present disclosure, can add a tip marker to an image representing a working area of a percutaneous treatment device. The operator can easily understand the positional relationship between the position of the tip of the probe and the target irradiation position included in the work area by looking at the image to which the tip marker is added.
また、本開示の一局面である画像制御装置は、経皮的治療デバイスが作業領域を遮蔽する程度が閾値以下である画像を使用する。そのため、画像において、経皮的治療デバイスが目標照射位置を遮蔽してしまうことを抑制できる。 Further, the image control device, which is one aspect of the present disclosure, uses an image in which the degree to which the percutaneous treatment device shields the work area is equal to or less than the threshold value. Therefore, it is possible to prevent the percutaneous treatment device from blocking the target irradiation position in the image.
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述す
る実施形態に記載の具体的手段との対応関係を示すものであって、本開示の技術的範囲を限定するものではない。
In addition, the reference numerals in parentheses described in this column and the scope of claims indicate the correspondence with the specific means described in the embodiment described later as one embodiment, and the technical scope of the present disclosure is defined. It is not limited.
本開示の例示的な実施形態を、図面を参照しながら説明する。
1.治療システム1の構成
治療システム1の構成を図1、図2に基づき説明する。図1に示すように、治療システム1は、画像制御装置3と、カメラ5と、ディスプレイ7と、ロボット制御部9と、ロボットアーム11と、先端ユニット13と、監視用力覚センサ15と、を備える。先端ユニット13は経皮的治療デバイスに対応する。経皮的治療デバイスとは、超音波、放射線等を外部から患者の体内に照射するデバイスである。
An exemplary embodiment of the present disclosure will be described with reference to the drawings.
1. 1. Configuration of
画像制御装置3は、CPU17と、例えば、RAM又はROM等の半導体メモリ(以下、メモリ19とする)と、を有するマイクロコンピュータを備える。画像制御装置3の各機能は、CPU17が非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリ19が、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムが実行されることで、プログラムに対応する方法が実行される。なお、画像制御装置3は、1つのマイクロコンピュータを備えてもよいし、複数のマイクロコンピュータを備えてもよい。
The
画像制御装置3は、図2に示すように、画像取得ユニット21と、画像推測ユニット23と、記憶ユニット25と、プローブ推測ユニット27と、マーカ追加ユニット29と、出力ユニット31と、画像変換ユニット33と、読み出しユニット35と、を備える。
As shown in FIG. 2, the
画像制御装置3に含まれる各部の機能を実現する手法はソフトウェアに限るものではなく、その一部又は全部の機能は、一つあるいは複数のハードウェアを用いて実現されてもよい。例えば、上記機能がハードウェアである電子回路によって実現される場合、その電子回路は、デジタル回路、又はアナログ回路、あるいはこれらの組合せによって実現されてもよい。
The method for realizing the functions of each part included in the
図1に示すように、カメラ5は台36に固定されている。カメラ5は作業領域37を撮影することができる。カメラ5は作業領域37の斜め上方に位置する。作業領域37は患者39の一部である。患者39はベッド41の上に横臥している。作業領域37は、先端ユニット13が作業を行う領域である。カメラ5は、ステレオカメラ又はデプスカメラである。カメラ5は、カメラ5から作業領域37までの距離(以下では撮影距離とする)を表す情報を作成することができる。カメラ5の撮影方向及び撮影範囲は一定である。
As shown in FIG. 1, the
ディスプレイ7は、画像制御装置3が出力する画像を表示する。術者はディスプレイ7
に表示された画像を見ることができる。術者とは、治療システム1を使用する者である。
ロボット制御部9は、ロボットアーム11の動作を制御する。ロボットアーム11の根元部43は台36に固定されている。根元部43とカメラ5との位置関係は一定である。
The display 7 displays an image output by the
You can see the image displayed in. The surgeon is a person who uses the
The
ロボットアーム11の先端部45には、先端ユニット13及び監視用力覚センサ15が取り付けられている。ロボットアーム11は、動作することにより、先端ユニット13及び監視用力覚センサ15の位置を変化させることができる。ロボットアーム11は、先端ユニット13のうち、後述する水袋51を患者39に押し付けることができる。監視用力覚センサ15は、患者39が先端ユニット13に加える力を検出する。
A
先端ユニット13は、HIFU照射部47、診断プローブ49、水袋51、操作部53、及び操作用力覚センサ55を備える。HIFU照射部47は、焦点に収束した超音波を作業領域37に照射する。HIFU照射部47は、超音波を照射するプローブに対応する。
The
診断プローブ49は、超音波を用いて、患者39の体内を表す超音波画像を作成する。水袋51は、HIFU照射部47と患者39との間に位置する。水袋51は患者39に押し当てられる。
The
操作部53は、術者が把持可能なハンドルである。操作部53は術者により操作される。操作用力覚センサ55は、術者によって操作部53に加えられた力の大きさと方向とを検出する。ロボット制御部9は、操作用力覚センサ55が検出した力の大きさと方向とに応じてロボットアーム11を動作させる。
2.画像制御装置3が実行する処理
画像制御装置3が所定時間ごとに繰り返し実行する処理を図3~図6に基づき説明する。図3のステップ1では、画像推測ユニット23が、ロボット制御部9から、先端ユニット13の位置を取得する。先端ユニット13の位置とは、根元部43を基準とする3次元空間における位置である。
The
2. 2. Processing executed by the
ステップ2では、画像推測ユニット23が遮蔽比率を推測する。遮蔽比率とは、カメラ5が作業領域37を撮影して生じる画像のうち、先端ユニット13が占める部分の比率である。例えば、カメラ5が生成する画像全体の面積をAとする。その画像のうち、先端ユニット13が占める部分の面積をBとする。遮蔽比率は、(B/A)×100%である。遮蔽比率は、カメラ5が生成する画像において、先端ユニット13が作業領域を遮蔽する程度に対応する。
In step 2, the
カメラ5の撮影方向及び撮影範囲は一定であるから、先端ユニット13の位置が決まれば、遮蔽比率は一義的に決まる。メモリ19は、先端ユニット13の位置と、遮蔽比率との関係を規定するマップを予め記憶している。画像推測ユニット23は、前記ステップ1で取得した先端ユニット13の位置をマップに入力することで、遮蔽比率を推測する。すなわち、画像推測ユニット23は、前記ステップ1で取得した先端ユニット13の位置に基づき、遮蔽比率を推測する。
Since the shooting direction and shooting range of the
ステップ3では、前記ステップ2で推測した遮蔽比率が予め設定した閾値以下であるか否かを画像推測ユニット23が判断する。遮蔽比率が閾値以下であると判断した場合、本処理はステップ4に進む。遮蔽比率が閾値より大きいと判断した場合、本処理はステップ12に進む。
In
ステップ4では、画像取得ユニット21が、カメラ5を用いて画像を取得する。取得した画像は作業領域37を表す画像である。また、取得した画像は、遮蔽比率が閾値以下で
あると推測された画像である。
In step 4, the
ステップ5では、画像変換ユニット33が、前記ステップ4で取得した画像を、作業領域37の真上の視点から見た画像に変換する。このとき、画像変換ユニット33は、カメラ5から、撮影距離を表す情報を取得し、画像の変換に使用する。
In
ステップ6では、前記ステップ5で変換した画像を、記憶ユニット25がメモリ19に記憶する。記憶した画像を以下では記憶画像とする。メモリ19に既に記憶画像が記憶されていた場合、記憶ユニット25は既存の記憶画像を消去する。よって、メモリ19に記憶されている記憶画像は、記憶ユニット25が最後に記憶した記憶画像である。
In step 6, the
図4に、記憶画像57の例を示す。記憶画像57は作業領域37を表す。作業領域37には、目標照射位置を表すマーカ(以下では目標マーカ58とする)が術者によって記入されている。
FIG. 4 shows an example of the stored
ステップ7では、記憶画像における、HIFU照射部47の先端の位置(以下では照射部先端位置とする)をプローブ推測ユニット27が推測する。また、記憶画像における、HIFU照射部47の軸方向(以下では単に軸方向とする)をプローブ推測ユニット27が推測する。なお、ステップ7で使用される記憶画像は、前記ステップ6で記憶された記憶画像か、後述するステップ12で読み出された記憶画像である。
In step 7, the
カメラ5の位置及び撮影方向は一定であるから、先端ユニット13の位置及び撮影距離が決まれば、照射部先端位置及び軸方向は一義的に決まる。メモリ19は、先端ユニット13の位置と、撮影距離と、照射部先端位置及び軸方向との関係を規定するマップを予め記憶している。プローブ推測ユニット27は、前記ステップ1で取得した先端ユニット13の位置と、カメラ5から取得した撮影距離とをマップに入力することで、照射部先端位置及び軸方向を推測する。
Since the position and shooting direction of the
ステップ8では、記憶画像における、焦点の位置をプローブ推測ユニット27が推測する。焦点とは、HIFU照射部47が照射する超音波の焦点である。焦点の位置は、照射部先端位置から軸方向に沿って所定距離進んだ位置である。プローブ推測ユニット27は、前記ステップ7で推測した照射部先端位置及び軸方向に基づき焦点の位置を推測する。
In step 8, the
ステップ9では、図5に示すように、マーカ追加ユニット29が、記憶画像57に矢印マーカ59を追加する。矢印マーカ59の先端59Aの位置は、前記ステップ7で推測した照射部先端位置である。矢印マーカ59が示す方向は、前記ステップ7で推測した軸方向と平行である。よって、矢印マーカ59は、照射部先端位置及び軸方向を表す。矢印マーカ59は先端マーカ及び方向マーカに対応する。
In
ステップ10では、図5に示すように、マーカ追加ユニット29が、記憶画像57に焦点マーカ61を追加する。焦点マーカ61の位置は、前記ステップ8で推測した焦点の位置である。よって、焦点マーカ61は焦点の位置を表す。
In step 10, as shown in FIG. 5, the
ステップ11では、矢印マーカ59及び焦点マーカが追加された記憶画像を、出力ユニット31が出力する。出力された画像はディスプレイ7に表示される。
ステップ12では、読み出しユニット35がメモリ19から記憶画像を読み出す。読み出される記憶画像は、過去の前記ステップ6において記憶された記憶画像である。なお、前記ステップ6において、記憶ユニット25は、既存の記憶画像が存在する場合、その既存の記憶画像を消去し、新たな記憶画像を記憶する。よって、ステップ12において読み出しユニット35が読み出す記憶画像は、記憶ユニット25が最後に記憶した記憶画像で
ある。
3.画像制御装置3が奏する効果
(1A)画像制御装置3は、記憶画像57に矢印マーカ59を追加することができる。先端59Aの位置は照射部先端位置である。そのため、術者は、記憶画像57を見ることで、照射部先端位置と、目標マーカ58との位置関係を容易に理解することができる。
In
In step 12, the
3. 3. Effects of the image control device 3 (1A) The
(1B)画像制御装置3は、遮蔽比率が閾値以下である記憶画像を使用する。そのため、図6に示すように、ディスプレイ7に表示される記憶画像57において、先端ユニット13が目標マーカ58等を遮蔽してしまうことを抑制できる。
(1B) The
(1C)画像制御装置3は、カメラ5が生成した画像を、真上の視点から作業領域37を見た記憶画像57に変換する。そのため、術者は、記憶画像57を見ることで、矢印マーカ59、目標マーカ58、及び焦点マーカ61の位置関係を一層容易に理解することができる。
(1C) The
(1D)矢印マーカ59は軸方向を表す。そのため、術者は、記憶画像57を見ることで、軸方向を容易に理解することができる。
(1E)画像制御装置3は、記憶画像57に焦点マーカ61を追加することができる。焦点マーカ61の位置は、HIFU照射部47が照射する超音波の焦点の位置である。そのため、術者は、記憶画像57を見ることで、HIFU照射部47が照射する超音波の焦点の位置を容易に理解することができる。
(1D) The
(1E) The
(1F)画像制御装置3は、先端ユニット13の位置を取得する。画像制御装置3は、取得した先端ユニット13の位置に基づき、遮蔽比率を推測する。そのため、画像制御装置3は、遮蔽比率を容易に推測することができる。
(1F) The
<第2実施形態>
1.第1実施形態との相違点
第2実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
<Second Embodiment>
1. 1. Differences from the First Embodiment Since the basic configuration of the second embodiment is the same as that of the first embodiment, the differences will be described below. It should be noted that the same reference numerals as those in the first embodiment indicate the same configuration, and the preceding description will be referred to.
前述した第1実施形態では、図3に示す処理を実行する。これに対し、第2実施形態では、図7に示す処理を実行する点で、第1実施形態と相違する。
2.画像制御装置3が実行する処理
画像制御装置3が所定時間ごとに繰り返し実行する処理を図7に基づき説明する。図7のステップ21では、画像取得ユニット21が、カメラ5を用いて画像を取得する。取得した画像は作業領域37を表す画像である。
In the first embodiment described above, the process shown in FIG. 3 is executed. On the other hand, the second embodiment is different from the first embodiment in that the process shown in FIG. 7 is executed.
2. 2. Processing executed by the image control device 3 A process executed repeatedly by the
ステップ22では、画像推測ユニット23が、前記ステップ21で取得した画像において、色が水袋51の色と一致する領域(以下では水袋領域とする)を認識する。水袋領域は、前記ステップ21で取得した画像のうち、水袋51を表示している部分である。
In step 22, the
ステップ23では、画像推測ユニット23が、以下の式(1)により遮蔽比率X(%)を算出する。
式(1) X=(C/A)×100
式(1)においてCは水袋領域の面積である。Aは、前記ステップ21で取得した画像全体の面積である。上記のとおり、画像推測ユニット23は、前記ステップ21で取得した画像の表示内容に基づき、遮蔽比率Xを算出する。
In
Equation (1) X = (C / A) × 100
In formula (1), C is the area of the water bag region. A is the area of the entire image acquired in
ステップ24では、前記ステップ23で算出した遮蔽比率Xが予め設定した閾値以下であるか否かを画像推測ユニット23が判断する。遮蔽比率が閾値以下であると判断した場合、本処理はステップ25に進む。遮蔽比率が閾値より大きいと判断した場合、本処理はステップ32に進む。
In step 24, the
ステップ25では、画像変換ユニット33が、前記ステップ21で取得した画像を、作業領域37の真上の視点から見た画像に変換する。このとき、画像変換ユニット33は、カメラ5から、撮影距離を表す情報を取得し、画像の変換に使用する。
In
ステップ26では、記憶ユニット25が、前記ステップ25で変換した画像をメモリ19に記憶する。記憶された画像は記憶画像である。メモリ19に既に記憶画像が記憶されていた場合、記憶ユニット25は既存の記憶画像を消去する。よって、メモリ19に記憶されている記憶画像は、記憶ユニット25が最後に記憶した画像である。
In step 26, the
ステップ27~32の処理は、第1実施形態における前記ステップ7~12の処理と同様である。
3.画像制御装置3が奏する効果
以上詳述した第2実施形態によれば、前述した第1実施形態の効果(1A)~(1E)を奏し、さらに、以下の効果を奏する。
The processes of
3. 3. Effects of the
(2A)画像制御装置3は、カメラ5を用いて取得した画像の表示内容に基づき、遮蔽比率Xを算出する。そのため、画像制御装置3は、遮蔽比率Xを正確に算出することができる。
<他の実施形態>
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
(2A) The
<Other embodiments>
Although the embodiments of the present disclosure have been described above, the present disclosure is not limited to the above-described embodiments, and can be variously modified and implemented.
(1)画像制御装置3は、カメラ5を用いて取得した画像を、作業領域37の横の視点から見た画像(以下では横方向画像とする)に変換してもよい。画像制御装置3は、横方向画像に、矢印マーカ59、焦点マーカ61等を追加することができる。図8に、矢印マーカ59が追加された横方向画像63の例を示す。画像制御装置3は、横方向画像をディスプレイ7に出力することができる。
(1) The
(2)先端ユニット13が作業領域37を遮蔽する程度を表す指標は、遮蔽比率以外の指標であってもよい。
(3)照射部先端位置を表すマーカは、矢印マーカ59以外のマーカであってもよい。例えば、照射部先端位置を表すマーカは、円形、四角形、三角形、星印等のマーカ等であってもよい。画像制御装置3は、照射部先端位置を表すマーカと、軸方向を表すマーカとを、それぞれ記憶画像に追加してもよい。
(2) The index indicating the degree to which the
(3) The marker indicating the position of the tip of the irradiation unit may be a marker other than the
(4)記憶画像は、真上の視点から作業領域37を見た画像でなくてもよい。例えば、記憶画像は、斜め上の視点から作業領域37を見た画像であってもよい。
(5)画像制御装置3は、カメラ5を用いて取得した画像に矢印マーカ59及び焦点マーカ61を追加してから、画像を変換してもよい。
(4) The stored image does not have to be an image of the
(5) The
(6)HIFU照射部47の代わりに、他の経皮的治療デバイスを用いてもよい。他の経皮的治療デバイスとして、例えば、放射線照射デバイス等が挙げられる。
(7)上記実施形態における1つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、1つの構成要素が有する1つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、1つの構成要素によっ
て実現したり、複数の構成要素によって実現される1つの機能を、1つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言から特定される技術思想に含まれるあらゆる態様が本開示の実施形態である。
(6) Another percutaneous therapeutic device may be used instead of the
(7) A plurality of functions possessed by one component in the above embodiment may be realized by a plurality of components, or one function possessed by one component may be realized by a plurality of components. .. Further, a plurality of functions possessed by the plurality of components may be realized by one component, or one function realized by the plurality of components may be realized by one component. Further, a part of the configuration of the above embodiment may be omitted. Further, at least a part of the configuration of the above embodiment may be added or replaced with the configuration of the other above embodiment. It should be noted that all aspects included in the technical idea specified from the wording described in the claims are embodiments of the present disclosure.
(8)上述した画像制御装置の他、当該画像制御装置を構成要素とする治療システム、当該画像制御装置としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体、治療システムの制御方法等、種々の形態で本開示を実現することもできる。 (8) In addition to the above-mentioned image control device, a treatment system having the image control device as a component, a program for operating a computer as the image control device, a non-transitional actual state such as a semiconductor memory in which this program is recorded, etc. The present disclosure can also be realized in various forms such as a recording medium and a control method of a treatment system.
1…治療システム、3…画像制御装置、5…カメラ、7…ディスプレイ、9…ロボット制御部、11…ロボットアーム、13…先端ユニット、21…画像取得ユニット、23…画像推測ユニット、25…記憶ユニット、27…プローブ推測ユニット、29…マーカ追加ユニット、31…出力ユニット、33…画像変換ユニット、35…読み出しユニット、37…作業領域、47…HIFU照射部、51…水袋、57…記憶画像、58…目標マーカ、59…矢印マーカ、61…焦点マーカ 1 ... Treatment system, 3 ... Image control device, 5 ... Camera, 7 ... Display, 9 ... Robot control unit, 11 ... Robot arm, 13 ... Tip unit, 21 ... Image acquisition unit, 23 ... Image estimation unit, 25 ... Memory Unit, 27 ... probe estimation unit, 29 ... marker addition unit, 31 ... output unit, 33 ... image conversion unit, 35 ... readout unit, 37 ... work area, 47 ... HIFU irradiation unit, 51 ... water bag, 57 ... storage image , 58 ... target marker, 59 ... arrow marker, 61 ... focus marker
Claims (7)
前記画像取得ユニットが取得する前記画像において、前記経皮的治療デバイスが前記作業領域を遮蔽する程度を推測するように構成された画像推測ユニット(23)と、
前記画像取得ユニットが取得した前記画像であって、前記遮蔽する程度が閾値以下であると前記画像推測ユニットにより推測された前記画像を記憶するように構成された記憶ユニット(25)と、
前記記憶ユニットが最後に記憶した前記画像における、前記経皮的治療デバイスが備えるプローブの先端の位置を推測するように構成されたプローブ推測ユニット(27)と、
前記記憶ユニットが最後に記憶した前記画像に、前記プローブ推測ユニットが推測した前記先端の位置を表す先端マーカ(59)を追加するように構成されたマーカ追加ユニット(29)と、
前記先端マーカが追加された前記画像を出力するように構成された出力ユニット(31)と、
前記経皮的治療デバイスの位置と、前記カメラから前記作業領域までの距離である撮影距離と、前記先端の位置との関係を規定するマップを記憶したメモリと、
を備え、
前記プローブ推測ユニットは、前記経皮的治療デバイスの位置と、前記撮影距離とを取得し、取得した前記経皮的治療デバイスの位置と、前記撮影距離とを前記マップに入力することで、前記先端の位置を推測するように構成された画像制御装置(3)。 An image acquisition unit (21) configured to acquire an image representing the work area (37) of the percutaneous treatment device (13) using a fixed camera .
An image estimation unit (23) configured to estimate the degree to which the percutaneous treatment device shields the work area in the image acquired by the image acquisition unit.
A storage unit (25) configured to store the image acquired by the image acquisition unit and estimated by the image estimation unit that the degree of shielding is equal to or less than a threshold value.
A probe guessing unit (27) configured to guess the position of the tip of the probe included in the percutaneous treatment device in the image last stored by the memory unit.
A marker addition unit (29) configured to add a tip marker (59) indicating the position of the tip estimated by the probe guessing unit to the image last stored by the storage unit.
An output unit (31) configured to output the image to which the tip marker is added, and
A memory that stores a map that defines the relationship between the position of the percutaneous treatment device, the imaging distance that is the distance from the camera to the work area, and the position of the tip.
Equipped with
The probe guessing unit acquires the position of the percutaneous treatment device and the imaging distance, and inputs the acquired position of the percutaneous treatment device and the imaging distance into the map. An image control device (3) configured to infer the position of the tip .
前記画像取得ユニットが取得した前記画像を、予め設定された視点から前記作業領域を見た画像に変換するように構成された画像変換ユニット(33)をさらに備え、
前記出力ユニットは、前記画像変換ユニットにより変換された前記画像を出力するように構成された画像制御装置。 The image control device according to claim 1.
Further, an image conversion unit (33) configured to convert the image acquired by the image acquisition unit into an image obtained by viewing the work area from a preset viewpoint is further provided.
The output unit is an image control device configured to output the image converted by the image conversion unit.
前記画像変換ユニットが変換した画像のうち、少なくとも一部の画像は、前記作業領域を横方向から見た画像(63)である画像制御装置。 The image control device according to claim 2.
An image control device in which at least a part of the images converted by the image conversion unit is an image (63) of the work area viewed from the side.
前記マーカ追加ユニットは、前記記憶ユニットが最後に記憶した前記画像に、前記プローブの軸方向を表す方向マーカ(59)をさらに追加するように構成され、
前記出力ユニットは、前記方向マーカがさらに追加された前記画像を出力するように構成された画像制御装置。 The image control device according to any one of claims 1 to 3.
The marker addition unit is configured to further add a direction marker (59) indicating the axial direction of the probe to the image finally stored by the storage unit.
The output unit is an image control device configured to output the image to which the direction marker is further added.
前記プローブ(47)は超音波を照射するプローブであり、
前記マーカ追加ユニットは、前記記憶ユニットが最後に記憶した前記画像に、前記超音波の焦点の位置を表す焦点マーカ(61)をさらに追加するように構成され、
前記出力ユニットは、前記焦点マーカがさらに追加された前記画像を出力するように構成された画像制御装置。 The image control device according to any one of claims 1 to 4.
The probe (47) is a probe that irradiates ultrasonic waves.
The marker addition unit is configured to further add a focus marker (61) indicating the position of the focal point of the ultrasonic wave to the image last stored by the storage unit.
The output unit is an image control device configured to output the image to which the focus marker is further added.
前記画像推測ユニットは、前記経皮的治療デバイスの位置を取得し、取得した前記経皮的治療デバイスの位置に基づき、前記遮蔽する程度を推測するように構成された画像制御装置。 The image control device according to any one of claims 1 to 5.
The image estimation unit is an image control device configured to acquire the position of the percutaneous treatment device and estimate the degree of shielding based on the acquired position of the percutaneous treatment device.
前記画像推測ユニットは、前記画像の表示内容に基づき、前記遮蔽する程度を推測するように構成された画像制御装置。 The image control device according to any one of claims 1 to 5.
The image estimation unit is an image control device configured to estimate the degree of shielding based on the display content of the image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018149452A JP7092346B2 (en) | 2018-08-08 | 2018-08-08 | Image control device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018149452A JP7092346B2 (en) | 2018-08-08 | 2018-08-08 | Image control device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020022680A JP2020022680A (en) | 2020-02-13 |
JP7092346B2 true JP7092346B2 (en) | 2022-06-28 |
Family
ID=69617890
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018149452A Active JP7092346B2 (en) | 2018-08-08 | 2018-08-08 | Image control device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7092346B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7122483B1 (en) | 2022-01-18 | 2022-08-19 | ソニア・セラピューティクス株式会社 | Ultrasonic Imaging Probe and Ultrasonic Image Display Device for HIFU Irradiation Device |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004049558A (en) | 2002-07-19 | 2004-02-19 | Toshiba Corp | Ultrasonic therapeutic system |
WO2011118287A1 (en) | 2010-03-24 | 2011-09-29 | オリンパス株式会社 | Endoscope device |
JP2012507324A (en) | 2008-11-04 | 2012-03-29 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Method and system for ultrasound therapy |
JP2012228286A (en) | 2011-04-25 | 2012-11-22 | Hitachi Medical Corp | Treatment support system and medical image processing device |
JP2018047088A (en) | 2016-09-23 | 2018-03-29 | ソニー株式会社 | Control device, control method, and medical system |
JP2018065223A (en) | 2016-10-20 | 2018-04-26 | 株式会社デンソー | Arm device |
-
2018
- 2018-08-08 JP JP2018149452A patent/JP7092346B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004049558A (en) | 2002-07-19 | 2004-02-19 | Toshiba Corp | Ultrasonic therapeutic system |
JP2012507324A (en) | 2008-11-04 | 2012-03-29 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Method and system for ultrasound therapy |
WO2011118287A1 (en) | 2010-03-24 | 2011-09-29 | オリンパス株式会社 | Endoscope device |
JP2012228286A (en) | 2011-04-25 | 2012-11-22 | Hitachi Medical Corp | Treatment support system and medical image processing device |
JP2018047088A (en) | 2016-09-23 | 2018-03-29 | ソニー株式会社 | Control device, control method, and medical system |
JP2018065223A (en) | 2016-10-20 | 2018-04-26 | 株式会社デンソー | Arm device |
Also Published As
Publication number | Publication date |
---|---|
JP2020022680A (en) | 2020-02-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5877990B2 (en) | Laser guide medical device automatic positioning system and method | |
JP7178009B2 (en) | MEDICAL DEVICE, METHOD OF CONTROLLING MEDICAL DEVICE, AND PROGRAM | |
US8249216B2 (en) | X-ray moving image radiographing apparatus | |
KR102102942B1 (en) | Device of providing 3d image registration and method thereof | |
JP7298835B2 (en) | MEDICAL DEVICE, METHOD OF CONTROLLING MEDICAL DEVICE, AND PROGRAM | |
JP5117051B2 (en) | Ultrasonic diagnostic system and method | |
JP2004016268A (en) | Ultrasonic diagnostic equipment, ultrasonic probe, and method for providing navigation information in ultrasonography | |
JP2014117368A (en) | X-ray diagnostic apparatus and method for controlling the same | |
JP4779699B2 (en) | X-ray equipment | |
JP2010233875A (en) | Radiographic image capturing apparatus, biopsy apparatus, radiographic image capturing method, and biopsy method | |
CN113855287B (en) | Oral implantation operation robot with evaluation of implantation precision and control method | |
JP6385750B2 (en) | Medical dose information management apparatus, X-ray diagnostic apparatus, and medical dose information management method | |
JP7092346B2 (en) | Image control device | |
WO2019103053A1 (en) | Control device | |
CN108403131B (en) | X-ray diagnostic apparatus | |
JP5317933B2 (en) | Image display device and program thereof | |
JP2005040506A (en) | Method and apparatus for processing x-ray image | |
JP5279637B2 (en) | Bed positioning system and bed positioning method | |
EP3656305A1 (en) | Medical apparatus and method for operating the medical apparatus | |
KR102301422B1 (en) | Dental panoramic x-ray photographing apparatus and method | |
JP5314437B2 (en) | X-ray equipment | |
JP2010131170A (en) | Tomography apparatus | |
KR101748348B1 (en) | image acquisition apparatus and method | |
US11856316B2 (en) | Method and apparatus for changing image magnification power | |
JP7141875B2 (en) | Radiation therapy system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20210120 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210521 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220412 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220519 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220609 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7092346 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |