JP5476534B2 - Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same - Google Patents

Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same Download PDF

Info

Publication number
JP5476534B2
JP5476534B2 JP2008237241A JP2008237241A JP5476534B2 JP 5476534 B2 JP5476534 B2 JP 5476534B2 JP 2008237241 A JP2008237241 A JP 2008237241A JP 2008237241 A JP2008237241 A JP 2008237241A JP 5476534 B2 JP5476534 B2 JP 5476534B2
Authority
JP
Japan
Prior art keywords
irradiation
tracking target
target
hifu
focused ultrasound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008237241A
Other languages
Japanese (ja)
Other versions
JP2010068884A (en
Inventor
敏雄 千葉
権太郎 北角
紘正 山下
康允 勝池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Health Sciences Foundation
Original Assignee
Japan Health Sciences Foundation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Health Sciences Foundation filed Critical Japan Health Sciences Foundation
Priority to JP2008237241A priority Critical patent/JP5476534B2/en
Publication of JP2010068884A publication Critical patent/JP2010068884A/en
Application granted granted Critical
Publication of JP5476534B2 publication Critical patent/JP5476534B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Surgical Instruments (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本発明は、超音波画像処理による集束超音波(HIFU)自動照射システムにおいて、安全かつ正確に自動照射を行うことのできるHIFU自動照射システムに関する。   The present invention relates to a HIFU automatic irradiation system capable of performing automatic irradiation safely and accurately in a focused ultrasound (HIFU) automatic irradiation system using ultrasonic image processing.

超音波画像診断装置による超音波画像を用いたHIFU照射システムが、胎児左心低形成症候群等の胎児心疾患の治療を非接触で低侵襲に行うことができる治療システムとして注目されている(例えば、非特許文献1参照)。かかる従来の超音波画像を用いたHIFU照射システムでは、リアルタイムに取得した個々の画像の特徴をマスタ画像と比較し、単純なパターンマッチングによりその類似性を判断するものであるため、HIFUの自動照射における照射タイミングの確度には限界があり、特に心臓のような周期的な動きを伴う臓器への適切な照射タイミングを決定することは困難であった。   An HIFU irradiation system using an ultrasound image obtained by an ultrasound diagnostic imaging apparatus is attracting attention as a treatment system capable of performing non-contact and minimally invasive treatment of fetal heart diseases such as fetal left heart hypoplasia syndrome (for example, Non-Patent Document 1). In such a conventional HIFU irradiation system using ultrasonic images, features of individual images acquired in real time are compared with a master image, and the similarity is judged by simple pattern matching. There is a limit to the accuracy of irradiation timing in Japan, and it has been difficult to determine an appropriate irradiation timing for an organ with a periodic movement such as the heart.

また、画像処理による特徴抽出では、ある程度の広い領域を持つ濃淡のある特徴的な形状を抽出することはできるが、例えば心房中隔のようなあまり特徴を持たない部分の特徴抽出を行うことは困難であるため、従来のシステムでは、かかる特徴抽出の困難な部位に対しては、照射対象として追従することができずHIFUの自動照射を行うことができないという問題があった。
藤崎正之他「高密度集束超音波(HIFU)を利用した胎児心臓病治療応用への可能性」第13回日本胎児心臓病研究学術会予稿集2007年、63P
In addition, feature extraction by image processing can extract a characteristic shape with a certain degree of wide area, but it is not possible to extract features of parts that do not have much features, such as the atrial septum. Since it is difficult, the conventional system has a problem in that it is impossible to follow the irradiation target as the irradiation target, and thus the automatic irradiation of the HIFU cannot be performed.
Masayuki Fujisaki et al. “Possibility of fetal heart disease treatment application using high-density focused ultrasound (HIFU)” Proceedings of the 13th Annual Meeting of the Japan Fetal Heart Research 2007, 63P

本発明は上記従来技術の有する問題点に鑑みなされたものであり、その目的とするところは、超音波画像処理によるHIFU自動照射システムにおいて、正確な照射タイミングの判定を行うことができ、安全性を確保しつつ適切に自動照射を行うことのできるHIFU自動照射システムを提供することにある。   The present invention has been made in view of the above-described problems of the prior art, and an object of the present invention is to enable accurate determination of irradiation timing in a HIFU automatic irradiation system using ultrasonic image processing, and safety. It is to provide a HIFU automatic irradiation system capable of appropriately performing automatic irradiation while securing the above.

本発明の他の目的は、心臓のような周期的な動きを伴う臓器への適切な照射タイミングを決定することのできるHIFU自動照射システムを提供することにある。   Another object of the present invention is to provide an automatic HIFU irradiation system capable of determining an appropriate irradiation timing for an organ with a periodic movement such as a heart.

本発明のさらに他の目的は、心房中隔のような特徴抽出の困難な部位への自動照射を可能ならしめるHIFU自動照射システムを提供することにある。   Still another object of the present invention is to provide an automatic HIFU irradiation system that enables automatic irradiation to a site where feature extraction is difficult, such as an atrial septum.

本発明の上記目的は、下記の手段によって達成される。   The above object of the present invention is achieved by the following means.

(1)即ち、本発明は、対象物の超音波画像データを取得する超音波画像取得手段と、前記超音波画像取得手段により取得された画像データを画像形成する画像形成手段と、前記画像形成手段により形成された画像中の追尾対象を指定する追尾対象指定手段と、前記画像形成手段により形成された画像中の集束超音波の照射対象を指定する照射対象指定手段と、前記追尾対象指定手段により指定された追尾対象の特徴パラメータを抽出し前記特徴パラメータに基づいて前記追尾対象の位置情報を検出する位置情報検出手段と、前記位置情報検出手段により検出された追尾対象の位置情報に基づいて前記照射対象指定手段により指定された照射対象の相対位置を算出する相対位置算出手段と、前記相対位置算出手段により算出された照射対象の相対位置に集束超音波を照射する集束超音波照射手段と、前記追尾対象の面積が特定の周期変動をする場合に、前記追尾対象の面積を算出して前記追尾対象の面積の時間変化から周期変動情報を抽出する周期変動情報抽出手段と、前記周期変動情報抽出手段により抽出された周期変動情報に基づいて前記集束超音波照射手段により照射される集束超音波の照射タイミングを決定する照射タイミング決定手段と、を有し、前記周期変動情報抽出手段は、前記追尾対象の面積から前記追尾対象の面積の過去の移動平均を減じて短周期変動成分を分離し、前記短周期変動成分に基づいて前記周期変動情報を抽出することを特徴とする、超音波画像処理による集束超音波自動照射システムである。 (1) That is, the present invention provides an ultrasonic image acquisition unit that acquires ultrasonic image data of an object, an image formation unit that forms an image of the image data acquired by the ultrasonic image acquisition unit, and the image formation Tracking target designating means for designating the tracking target in the image formed by the means, irradiation target designating means for designating the irradiation target of the focused ultrasound in the image formed by the image forming means, and the tracking target designating means Based on the positional information of the tracking target detected by the positional information detecting means detected by the positional information detecting means for extracting the positional information of the tracking target based on the characteristic parameters A relative position calculating means for calculating a relative position of the irradiation target specified by the irradiation target specifying means; and an irradiation target calculated by the relative position calculating means. Focused ultrasound irradiating means for irradiating focused ultrasound to a pair position, and when the area of the tracking target has a specific periodic fluctuation, the area of the tracking target is calculated and the period from the time change of the area of the tracking target Periodic fluctuation information extracting means for extracting fluctuation information, and irradiation timing determination for determining the irradiation timing of the focused ultrasonic wave irradiated by the focused ultrasonic wave irradiation means based on the periodic fluctuation information extracted by the periodic fluctuation information extracting means and means, possess, the periodic variation information extraction means, said from the area of the tracking target subtracting the moving average of the past of the area of the tracking target to separate the short-period fluctuation component, based on the short-period fluctuation component The periodical fluctuation information is extracted , and the focused ultrasonic wave automatic irradiation system by ultrasonic image processing is provided.

(2)本発明はまた、前記周期変動情報抽出手段は、前記短周期変動成分を即時離散フーリエ変換することにより前記周期変動情報を抽出することを特徴とする、(1)に記載の集束超音波自動照射システムである。 (2) The present invention also relates to the periodic variation information extraction means and extracting the periodic variation information by immediate discrete Fourier transform the short-period fluctuation component, focusing greater according to (1) This is an automatic sound wave irradiation system.

(3)本発明はまた、前記照射タイミング決定手段は、前記照射対象の相対位置と集束超音波の焦点位置との距離が閾値以下である場合に前記集束超音波照射手段に集束超音波を照射させることを特徴とする、(1)又は(2)に記載の集束超音波自動照射システムである。 (3) In the present invention, the irradiation timing determination unit also irradiates the focused ultrasonic irradiation unit with the focused ultrasonic wave when the distance between the relative position of the irradiation target and the focal position of the focused ultrasonic wave is equal to or less than a threshold value. The focused ultrasonic automatic irradiation system according to (1) or (2) , wherein

(4)本発明はまた、前記相対位置算出手段は、前記追尾対象の位置情報から相似計算により照射対象の相対位置を算出することを特徴とする、(1)〜(3)の何れか1に記載の集束超音波自動照射システムである。 (4) The present invention is also characterized in that the relative position calculation means calculates the relative position of the irradiation target by similarity calculation from the position information of the tracking target, and any one of (1) to (3) It is a focused ultrasonic automatic irradiation system described in 1.

(5)本発明はまた、胎児左心低形成症候群の低侵襲治療、肺分画症の治療又は肺の先天性のう胞性腺腫様奇形の治療に用いることを特徴とする、(1)〜(4)の何れか1に記載の集束超音波自動照射システムである。 (5) The present invention also features the use fetal minimally invasive treatment of hypoplastic left heart syndrome, treatment of treatment or pulmonary congenital cystic adenomatous malformation of pulmonary sequestration, (1) - ( 4) it is a focused ultrasound automatic exposure system according to any one of.

(6)本発明はまた、対象物の超音波画像データを取得する超音波画像取得ステップと、前記超音波画像取得ステップにより取得された画像データを画像形成する画像形成ステップと、前記画像形成ステップにより形成された画像中の追尾対象を指定する追尾対象指定ステップと、前記画像形成ステップにより形成された画像中の集束超音波の照射対象を指定する照射対象指定ステップと、前記追尾対象指定ステップにより指定された追尾対象の特徴パラメータを抽出し前記特徴パラメータに基づいて前記追尾対象の位置情報を検出する位置情報検出ステップと、前記位置情報検出ステップにより検出された追尾対象の位置情報に基づいて前記照射対象指定ステップにより指定された照射対象の相対位置を算出する相対位置算出ステップと、前記相対位置算出ステップにより算出された照射対象の相対位置に集束超音波を照射する集束超音波照射ステップと、前記追尾対象の面積が特定の周期変動をする場合に、前記追尾対象の面積を算出して前記追尾対象の面積の時間変化から周期変動情報を抽出する周期変動情報抽出ステップと、前記周期変動情報抽出ステップにより抽出された周期変動情報に基づいて前記集束超音波照射ステップにより照射される集束超音波の照射タイミングを決定する照射タイミング決定ステップと、をコンピュータに実行させるものであり、前記周期変動情報抽出ステップは、前記追尾対象の面積から前記追尾対象の面積の過去の移動平均を減じて短周期変動成分を分離し、前記短周期変動成分に基づいて前記周期変動情報を抽出することを特徴とする、超音波画像処理による集束超音波自動照射プログラムである。 (6) The present invention also includes an ultrasonic image acquisition step for acquiring ultrasonic image data of an object, an image formation step for forming an image of the image data acquired by the ultrasonic image acquisition step, and the image formation step. A tracking target designating step for designating a tracking target in the image formed by the above, an irradiation target designating step for designating an irradiation target of the focused ultrasonic wave in the image formed by the image forming step, and the tracking target designating step. A position information detection step of extracting a specified tracking target feature parameter and detecting the tracking target location information based on the feature parameter, and the tracking target location information detected by the location information detection step. A relative position calculating step for calculating a relative position of the irradiation target specified in the irradiation target specifying step; When the relative position of the irradiation target calculated by the relative position calculation step irradiates the focused ultrasonic wave and the area of the tracking target has a specific periodic fluctuation, the area of the tracking target is calculated. Then, the periodic variation information extracting step for extracting periodic variation information from the time variation of the area of the tracking target, and the focused ultrasound irradiation step based on the periodic variation information extracted by the periodic variation information extracting step. An irradiation timing determination step for determining the irradiation timing of the focused ultrasonic wave , and the periodic variation information extraction step subtracts a past moving average of the area of the tracking target from the area of the tracking target. separating the short-period fluctuation component Te, and extracts the periodic variation information based on the short-period fluctuation component A focused ultrasound automatic exposure program by ultrasound imaging.

(7)本発明はまた、(6)に記載の集束超音波自動照射プログラムを記録したコンピュータ読み取り可能な記録媒体である。 (7) The present invention is also a computer-readable recording medium on which the focused ultrasound automatic irradiation program according to (6) is recorded.

本発明のHIFU自動照射システムによれば、追尾対象を指定して追尾対象の位置情報に基づいて照射対象の相対位置を算出するので、例えば心房中隔のような特徴抽出の困難な部位であっても、心室や心房のように比較的近傍にあって特徴抽出のし易い部位を追尾対象として指定して追従することにより、追尾対象の位置情報から間接的に照射対象の相対位置を検知して追従することができ、従来では不可能であった特徴抽出の困難な部位へのHIFUの自動照射を行うことができる。   According to the HIFU automatic irradiation system of the present invention, the tracking target is designated and the relative position of the irradiation target is calculated based on the position information of the tracking target. However, it is possible to indirectly detect the relative position of the irradiation target from the position information of the tracking target by designating and tracking as a tracking target a part that is relatively near and easy to extract features, such as the ventricle and the atrium. HIFU can be automatically irradiated to a site where feature extraction is difficult, which has been impossible in the past.

また、本発明のHIFU自動照射システムによれば、追尾対象の特徴パラメータをリアルタイムに抽出して、当該特徴パラメータに基づいて追尾対象の位置情報を検出するので、正確な照射タイミングの判定を行うことができ、安全性を確保しつつ適切に自動照射を行うことができる。   In addition, according to the HIFU automatic irradiation system of the present invention, the tracking target feature parameter is extracted in real time, and the tracking target position information is detected based on the feature parameter, so that accurate irradiation timing determination is performed. Therefore, automatic irradiation can be appropriately performed while ensuring safety.

さらに、本発明のHIFU自動照射システムによれば、追尾対象の面積が特定の周期変動をする場合に、その面積変動から周期変動情報を抽出し当該周期変動情報に基づいて照射タイミングを決定するので、心臓のような周期的な動きを伴う臓器に対しても適切な照射タイミングを決定することができる。   Furthermore, according to the HIFU automatic irradiation system of the present invention, when the area to be tracked has a specific periodic variation, the periodic variation information is extracted from the area variation, and the irradiation timing is determined based on the periodic variation information. An appropriate irradiation timing can be determined even for an organ with a periodic movement such as the heart.

以下、本発明の実施の形態を、図面を参照して詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明の実施形態にかかる集束超音波(HIFU)自動照射システムの全体構成を示すブロック図である。図1に示すように、本実施形態に係るHIFU自動照射システム10は、ワークステーション100と、二次元超音波画像処理装置200と、HIFU信号発生装置300と、二次元超音波プローブ410と、トランスデューサ420とからなり、ワークステーション100と二次元超音波画像処理装置200、二次元超音波画像処理装置200と二次元超音波プローブ410、ワークステーション100とHIFU信号発生装置300、及びHIFU信号発生装置300とトランスデューサ420とが、それぞれ専用通信ケーブル510、520、530及び540を介して相互に通信可能に接続されてなる。   FIG. 1 is a block diagram showing the overall configuration of a focused ultrasound (HIFU) automatic irradiation system according to an embodiment of the present invention. As shown in FIG. 1, the HIFU automatic irradiation system 10 according to the present embodiment includes a workstation 100, a two-dimensional ultrasonic image processing apparatus 200, a HIFU signal generation apparatus 300, a two-dimensional ultrasonic probe 410, and a transducer. 420, the workstation 100 and the two-dimensional ultrasonic image processing apparatus 200, the two-dimensional ultrasonic image processing apparatus 200 and the two-dimensional ultrasonic probe 410, the workstation 100, the HIFU signal generation apparatus 300, and the HIFU signal generation apparatus 300. And the transducer 420 are connected to each other via dedicated communication cables 510, 520, 530 and 540 so as to be able to communicate with each other.

つぎに、上記各機器の構成について説明するが、上記各機器は後述する構成要素以外の構成要素を含んでいてもよく、あるいは、後述する構成要素のうちの一部が含まれていなくてもよい。   Next, the configuration of each of the above devices will be described. However, each of the above devices may include a component other than the components described below, or may not include some of the components described below. Good.

図2は、本実施形態にかかるワークステーション100の構成の一例を示すブロック図である。図2に示すように、ワークステーション100は、CPU110、ROM120、RAM130、ハードディスク140、ディスプレイ150、入力装置160、ビデオキャプチャカード170、通信インタフェース180、及びバス190を有する。   FIG. 2 is a block diagram showing an example of the configuration of the workstation 100 according to the present embodiment. As shown in FIG. 2, the workstation 100 includes a CPU 110, a ROM 120, a RAM 130, a hard disk 140, a display 150, an input device 160, a video capture card 170, a communication interface 180, and a bus 190.

CPU110は、制御と演算の各種処理を行う。ROM120は各種プログラムを記憶し、RAM130は作業領域として一時的にデータを記憶し、ハードディスク140は各種プログラムやデータを記憶する。ディスプレイ150は、各種の表示を行う。入力装置160は、キーボードやマウス等であり、各種の入力を行うために使用される。ビデオキャプチャカード170は、ビデオ信号をキャプチャしてイメージデータに変換する。通信インタフェース180は、外部機器と各種信号の送受信を行うインタフェースである。上記各部は、信号をやり取りするためのバス190で相互に接続されている。   The CPU 110 performs various processes of control and calculation. The ROM 120 stores various programs, the RAM 130 temporarily stores data as a work area, and the hard disk 140 stores various programs and data. The display 150 performs various displays. The input device 160 is a keyboard, a mouse, or the like, and is used for performing various inputs. The video capture card 170 captures a video signal and converts it into image data. The communication interface 180 is an interface that transmits / receives various signals to / from an external device. The above units are connected to each other via a bus 190 for exchanging signals.

なお、本実施形態において、ワークステーション100は後述する所定の動作を行うが、このためのワークステーション100の動作を制御するプログラムは、ROM120又はハードディスク140に格納されており、動作開始の際にRAM130に読み出されてCPU110により実行される。   In this embodiment, the workstation 100 performs a predetermined operation to be described later. A program for controlling the operation of the workstation 100 for this purpose is stored in the ROM 120 or the hard disk 140, and the RAM 130 is started when the operation is started. And is executed by the CPU 110.

二次元超音波画像処理装置200は、ワークステーション100からの命令により、二次元超音波プローブ410を駆動して超音波スキャンを行いながら観測したターゲットのエコー信号から、物体の反射率の違いを利用して二次元超音波画像データを生成し、NTSC方式等のビデオ信号としてワークステーション100に出力する。   The two-dimensional ultrasonic image processing apparatus 200 uses a difference in reflectance of an object from an echo signal of a target observed while driving the two-dimensional ultrasonic probe 410 and performing an ultrasonic scan according to a command from the workstation 100. Then, two-dimensional ultrasonic image data is generated and output to the workstation 100 as a video signal of the NTSC system or the like.

HIFU信号発生装置300は、HIFUの駆動に必要な高周波電気信号を発生させる高周波発振器、高周波発振器で発生させた出力信号をHIFU照射に必要なレベルまで増幅する高周波増幅器、HIFU照射を制御するワークステーション100からのトリガー信号を高周波発振器の制御信号等に変換する信号変換ボックス等(いずれも図示せず)から構成されている。   The HIFU signal generator 300 includes a high-frequency oscillator that generates a high-frequency electric signal necessary for driving the HIFU, a high-frequency amplifier that amplifies an output signal generated by the high-frequency oscillator to a level necessary for HIFU irradiation, and a workstation that controls HIFU irradiation. A signal conversion box (not shown) for converting the trigger signal from 100 into a control signal for a high-frequency oscillator or the like is included.

二次元超音波プローブ410は、超音波を発振して対象物からのエコー信号を取得する。また、トランスデューサ420は、HIFU信号発生装置300で発生したHIFU信号を対象物に照射するためのパラボラ型のHIFU照射装置である。図3(a)〜(c)に示すように、本実施形態にかかるHIFU自動照射システム10では、二次元超音波プローブ装置420とトランスデューサ420とが一体化した二次元超音波プローブ一体型トランデューサ400が利用されている。二次元超音波プローブ一体型トランデューサ400では、二次元超音波プローブ410の捜査範囲411の特定の座標位置に、トランスデューサ420のHIFU照射焦点421が固定されるように構成されている。但し、本実施形態では、必ずしも二次元超音波プローブとトランスデューサとが一体化したものを用いる必要はなく、独立して構成された二次元超音波プローブとトランスデューサを組み合わせて利用するものであってもよい。   The two-dimensional ultrasonic probe 410 oscillates an ultrasonic wave and acquires an echo signal from the object. The transducer 420 is a parabolic HIFU irradiation device for irradiating an object with the HIFU signal generated by the HIFU signal generation device 300. As shown in FIGS. 3A to 3C, in the HIFU automatic irradiation system 10 according to the present embodiment, a two-dimensional ultrasonic probe integrated transducer in which a two-dimensional ultrasonic probe device 420 and a transducer 420 are integrated. 400 is used. The two-dimensional ultrasonic probe integrated transducer 400 is configured such that the HIFU irradiation focal point 421 of the transducer 420 is fixed at a specific coordinate position in the search range 411 of the two-dimensional ultrasonic probe 410. However, in this embodiment, it is not always necessary to use an integrated two-dimensional ultrasonic probe and transducer, and a combination of two-dimensional ultrasonic probe and transducer that are configured independently may be used. Good.

次に、本実施形態におけるHIFU自動照射システム10の動作の概要について、胎児心疾患治療用途を例にして、ワークステーション100によるHIFU照射処理の動作を中心にして説明する。図4は、本実施形態におけるワークステーション100のHIFU照射処理の手順を示すフローチャートである。   Next, an outline of the operation of the HIFU automatic irradiation system 10 according to the present embodiment will be described focusing on the operation of the HIFU irradiation processing by the workstation 100, taking the fetal heart disease treatment application as an example. FIG. 4 is a flowchart showing a procedure of HIFU irradiation processing of the workstation 100 in the present embodiment.

図4のステップS110において、ワークステーション100は、まず、HIFU照射処理の開始命令があるまで待機する(S110のNO)。ここで、本実施形態におけるHIFU自動照射システム10のHIFU照射処理には、HIFU照射モードとして、照射安全条件、心拍同期条件、焦点一致条件等の所定の設定条件を満たす場合にのみHIFU照射を行う「自動照射モード」と、条件設定なしに強制的にHIFU照射を行う「手動照射モード」とがある。オペレータは、HIFU照射モードを指定してHIFU照射処理の開始命令を入力する。   In step S110 of FIG. 4, the workstation 100 first waits until there is a command to start the HIFU irradiation process (NO in S110). Here, in the HIFU irradiation processing of the HIFU automatic irradiation system 10 in the present embodiment, the HIFU irradiation is performed only when the predetermined conditions such as the irradiation safety condition, the heartbeat synchronization condition, and the focus matching condition are satisfied as the HIFU irradiation mode. There are “automatic irradiation mode” and “manual irradiation mode” in which HIFU irradiation is forcibly performed without setting conditions. The operator designates the HIFU irradiation mode and inputs a HIFU irradiation processing start command.

ワークステーション100は、ステップS110においてHIFU照射処理の開始命令があると(S110のYES)、ステップS120に進み、HIFU照射モードが「自動照射モード」か「手動照射モード」かを判断する。   If there is a HIFU irradiation process start command in step S110 (YES in S110), the workstation 100 proceeds to step S120 and determines whether the HIFU irradiation mode is “automatic irradiation mode” or “manual irradiation mode”.

ステップS120において、HIFU照射モードが「手動照射モード」である場合(S120のNO)、ステップS130に進み、手動照射命令があるまで待機し(S130のNO)、手動照射命令があると(S130のYES)、ステップS140に進んで、HIFU信号発生装置300にHIFU照射命令を送信することにより直ちにHIFU照射を行い、HIFU照射処理を終了する。   In step S120, when the HIFU irradiation mode is “manual irradiation mode” (NO in S120), the process proceeds to step S130 and waits for a manual irradiation command (NO in S130). If there is a manual irradiation command (in S130). YES), the process proceeds to step S140, where a HIFU irradiation command is transmitted to the HIFU signal generator 300 to immediately perform HIFU irradiation, and the HIFU irradiation process is terminated.

一方、ステップS120において、HIFU照射モードが「自動照射モード」である場合に(S120のYES)、ステップS150に進み、HIFUの自動照射処理を開始する。   On the other hand, when the HIFU irradiation mode is “automatic irradiation mode” in step S120 (YES in S120), the process proceeds to step S150, and the HIFU automatic irradiation process is started.

図5は、本実施形態におけるワークステーション100のHIFU自動照射処理の手順を示すフローチャートである。図5のステップS210において、ワークステーション100は、まず、HIFU焦点設定処理を行う。本実施形態にかかるHIFU自動照射システム10では、二次元超音波プローブと一体化したトランスデューサを使用しており、二次元超音波画像の特定の位置にHIFUの焦点が固定されているため、HIFU照射を正確に行うには、予めファントム等を使用してHIFU照射を行い、実際の照射位置に合わせて焦点位置を補正しておく必要がある。   FIG. 5 is a flowchart showing a procedure of HIFU automatic irradiation processing of the workstation 100 in the present embodiment. In step S210 of FIG. 5, the workstation 100 first performs HIFU focus setting processing. In the HIFU automatic irradiation system 10 according to the present embodiment, a transducer integrated with a two-dimensional ultrasonic probe is used, and the focus of the HIFU is fixed at a specific position of the two-dimensional ultrasonic image. In order to perform accurately, it is necessary to perform HIFU irradiation using a phantom or the like in advance and correct the focal position according to the actual irradiation position.

図6は、本実施形態におけるワークステーション100のHIFU焦点設定処理の手順を示すフローチャートである。図6のステップ310において、ワークステーション100は、手動照射命令があるまで待機する(S310のNO)。オペレータはファントムを対象物としてセットし、手動照射命令を入力する。   FIG. 6 is a flowchart illustrating a procedure of HIFU focus setting processing of the workstation 100 according to the present embodiment. In step 310 of FIG. 6, the workstation 100 waits until a manual irradiation command is issued (NO in S310). The operator sets the phantom as an object and inputs a manual irradiation command.

ステップ310において手動照射命令があると(S310のYES)、ステップ320に進んで、HIFU信号発生装置300にHIFU照射命令を送信することにより対象物にHIFUを照射する。更に、ステップS330において、二次元超音波画像処理装置200から受信した入力画像データを画像形成して入力画像をディスプレイ150に表示し、更にステップS340において、ディスプレイ150の入力画像上に、現在設定されている初期のHIFUの焦点位置を表示し、ステップS350に進んで、焦点位置の設定入力があるまで待機する(S350のNO)。   If there is a manual irradiation command in step 310 (YES in S310), the process proceeds to step 320, where the object is irradiated with HIFU by transmitting the HIFU irradiation command to the HIFU signal generator 300. Further, in step S330, the input image data received from the two-dimensional ultrasonic image processing apparatus 200 is imaged and the input image is displayed on the display 150. Further, in step S340, the input image data currently set on the input image of the display 150 is displayed. The focus position of the initial HIFU is displayed, and the process proceeds to step S350 and waits until there is a focus position setting input (NO in S350).

図7は、HIFU焦点設定処理においてワークステーション100のディスプレイ150に表示される画面の一例を示す図である。図7の画面610において、710は二次元超音波プローブにより捜査した二次元超音波画像であり、画像710中にはファントムの画像721が映し出されている。また、731及び732は、現在設定されているHIFUの焦点位置(図7では初期状態)を示すX座標軸及びY座標軸であり、これらの交点が焦点位置である。オペレータは、HIFUの焦点座標をディスプレイ150に表示されたファントム画像中のHIFU照射痕跡に一致させるように、焦点位置の設定入力を行う。   FIG. 7 is a diagram illustrating an example of a screen displayed on the display 150 of the workstation 100 in the HIFU focus setting process. In the screen 610 of FIG. 7, reference numeral 710 denotes a two-dimensional ultrasonic image searched by a two-dimensional ultrasonic probe, and a phantom image 721 is displayed in the image 710. Reference numerals 731 and 732 denote an X coordinate axis and a Y coordinate axis indicating the currently set focus position of the HIFU (the initial state in FIG. 7), and the intersection of these is the focus position. The operator inputs the focal position so that the focal coordinates of the HIFU coincide with the HIFU irradiation trace in the phantom image displayed on the display 150.

ステップS350において焦点位置の設定入力があると(S350のYES)、S360に進んで、入力された焦点位置を本実施形態におけるHIFU照射の焦点位置として設定する。   If there is a focus position setting input in step S350 (YES in S350), the process proceeds to S360, where the input focus position is set as the focus position for HIFU irradiation in this embodiment.

更に、ステップS370に進んで、HIFUの自動照射を許可する範囲である焦点有効範囲の設定入力があるまで待機する(S370のNO)。図7の733は、焦点有効範囲を表しており、ターゲットがこの範囲内に入った場合にHIFUの自動照射が行われる。オペレータにより焦点有効範囲の設定入力が行われると(S370のYES)、ステップ380において、入力された焦点有効範囲を本実施形態におけるHIFU照射の焦点有効範囲として設定し、HIFU焦点設定処理を終了する。   Further, the process proceeds to step S370 and waits until there is an input of an effective focus range that is a range in which automatic irradiation of HIFU is permitted (NO in S370). Reference numeral 733 in FIG. 7 represents the effective focus range. When the target falls within this range, automatic irradiation of the HIFU is performed. When the setting input of the effective focus range is performed by the operator (YES in S370), the input effective focus range is set as the effective focus range of HIFU irradiation in the present embodiment in step 380, and the HIFU focus setting process is terminated. .

次に、ワークステーション100は、図5のステップS220に戻って二値化条件設定処理を行う。ワークステーション100が二次元超音波画像処理装置200から取得する画像データはグレースケールであるので、後述する特徴抽出等の画像処理を行うために画像データを適切な白黒閾値で二値化処理する必要がある。   Next, the workstation 100 returns to step S220 in FIG. 5 to perform binarization condition setting processing. Since the image data acquired by the workstation 100 from the two-dimensional ultrasonic image processing apparatus 200 is grayscale, it is necessary to binarize the image data with an appropriate black and white threshold in order to perform image processing such as feature extraction described later. There is.

図8は、本実施形態におけるワークステーション100の二値化条件設定処理の手順を示すフローチャートである。図8のステップS410において、ワークステーション100は、まず、初期の白黒閾値に基づいて二次元超音波画像処理装置200から得られた入力画像データを二値化し、ステップS420において、二値化処理により得られた二値画像をディスプレイ150に表示する。そして、ステップS430に進んで、白黒閾値の設定入力があるか否かを判断する。オペレータはディスプレイ150上の二値画像を確認しながら、適切な白黒閾値を設定入力する。   FIG. 8 is a flowchart showing the procedure of the binarization condition setting process of the workstation 100 in the present embodiment. In step S410 of FIG. 8, the workstation 100 first binarizes the input image data obtained from the two-dimensional ultrasonic image processing apparatus 200 based on the initial black and white threshold value. In step S420, the workstation 100 performs binarization processing. The obtained binary image is displayed on the display 150. Then, the process proceeds to step S430, and it is determined whether or not there is a black and white threshold setting input. The operator sets and inputs an appropriate black and white threshold while checking the binary image on the display 150.

ステップ430において、白黒閾値の設定入力があると(S430のYES)、入力された白黒閾値に基づいて入力画像データを二値化して(S410)、得られた二値画像をディスプレイに再表示する(S420)。一方、ステップS430において白黒閾値の設定入力がない場合は(S430のNO)、ステップS440に進んで、現在の白黒閾値を本実施形態における二値化処理の白黒閾値として設定し、二値化条件設定処理を終了する。   In step 430, if there is a black and white threshold setting input (YES in S430), the input image data is binarized based on the input black and white threshold (S410), and the obtained binary image is redisplayed on the display. (S420). On the other hand, if there is no black-and-white threshold setting input in step S430 (NO in S430), the process proceeds to step S440, where the current black-and-white threshold is set as the black-and-white threshold for binarization processing in the present embodiment, and binarization conditions are set. The setting process ends.

図5のステップS230に戻って、ワークステーション100は、さらに画像処理条件設定処理を行う。本実施形態では、画像処理条件設定処理として、画像処理範囲(ROI)、追尾対象中心位置及び照射対象相対位置の設定を行う。すなわち、画像処理による形状抽出は、ある程度の広い領域を持つ濃淡のある特徴的な形状を抽出することはできるが、例えば心房中隔のようなあまり特徴を持たない部分は特徴抽出をすることは困難である。そこで、本発明のHIFU自動照射システムでは、そのような特徴抽出の困難な部位について、例えば心室や心房等の比較的近傍にあり特徴抽出のし易い部位を追尾対象として指定し、追尾対象との幾何学的な相対位置から照射対象の位置を推定しようとするものである。追尾対象の指定は、ROI及び追尾対象中心位置の指定により行う。   Returning to step S230 of FIG. 5, the workstation 100 further performs image processing condition setting processing. In the present embodiment, as the image processing condition setting process, an image processing range (ROI), a tracking target center position, and an irradiation target relative position are set. That is, shape extraction by image processing can extract characteristic shapes with shading with a certain wide area, but it is not possible to extract features that have few features such as the atrial septum, for example. Have difficulty. Therefore, in the HIFU automatic irradiation system of the present invention, for such a difficult part of feature extraction, for example, a part that is relatively close to the ventricle, the atrium, etc. and is easy to extract a feature is designated as a tracking target. The position of the irradiation object is to be estimated from the geometric relative position. The tracking target is specified by specifying the ROI and the tracking target center position.

図9は、本実施形態におけるワークステーション100の画像処理条件設定処理の手順を示すフローチャートである。図9のステップS510において、ワークステーション100は、ROIの設定入力があるまで待機し(S510のNO)、オペレータによりROIの設定入力がなされると(S510のYES)、ステップS520に進んで、入力された範囲に従ってROIを設定する。同様にして、ステップS530及びS540において追尾対象の中心位置を設定し、ステップS550及びS560において照射対象の相対位置を設定して、画像処理条件設定処理を終了する。なお、上記のROI、追尾対象中心位置及び照射対象相対位置の設定の手順は、いずれの順番で処理されるものであってもよい。   FIG. 9 is a flowchart showing a procedure of image processing condition setting processing of the workstation 100 in the present embodiment. In step S510 of FIG. 9, the workstation 100 waits until an ROI setting input is received (NO in S510). When the operator inputs an ROI setting (YES in S510), the process proceeds to step S520 and the input is performed. The ROI is set according to the specified range. Similarly, the center position of the tracking target is set in steps S530 and S540, the relative position of the irradiation target is set in steps S550 and S560, and the image processing condition setting process ends. The procedure for setting the ROI, the tracking target center position, and the irradiation target relative position may be processed in any order.

図10は、画像処理条件設定処理においてワークステーション100のディスプレイ150に表示される画面の一例を示す図である。図10の画面620において、722は追尾対象の画像であり、734は追尾対象画像722を取り囲んで設定されたROIを表しており、735は追尾対象画像722上に設定された追尾対象中心位置を表しており、736は設定された照射対象中心位置を表している。   FIG. 10 is a diagram illustrating an example of a screen displayed on the display 150 of the workstation 100 in the image processing condition setting process. In the screen 620 of FIG. 10, 722 is an image to be tracked, 734 represents an ROI set around the tracked image 722, and 735 is the tracking target center position set on the tracked image 722. 736 represents the set irradiation target center position.

次いで、図5のステップS240に戻って、ワークステーション100は、二次元超音波画像処理装置200からリアルタイムに受信した入力画像データに基づいて、追尾対象の位置情報をリアルタイムで検出することにより追尾対象のトラッキングを行う。追尾対象の位置情報の検出は、画像解析による特徴抽出によって追尾対象の重心、面積、フィレ径、真円度等の画像特徴パラメータを抽出することにより行う。なお、各特徴パラメータの追尾対象からの抽出方法は以下のとおりである。   Next, returning to step S240 of FIG. 5, the workstation 100 detects the position information of the tracking target in real time based on the input image data received in real time from the two-dimensional ultrasonic image processing apparatus 200, thereby tracking the tracking target. Tracking. The position information of the tracking target is detected by extracting image feature parameters such as the center of gravity, area, fillet diameter, and roundness of the tracking target by feature extraction by image analysis. The extraction method of each feature parameter from the tracking target is as follows.

(1)光学面積及び光学重心   (1) Optical area and optical center of gravity

追尾対象は輝度をもったピクセルの集合として認識されるので、光学面積は追尾対象として認識されたピクセルの数として、光学的重心は追尾対象として認識されたピクセルの平均座標として、それぞれ算出される。臓器の形状が三日月型、ひょうたん型等、楕円とかけ離れた形状である場合は、光学的面積と光学的重心を使用するほうが正確な面積と重心を計算することができる。   Since the tracking target is recognized as a set of pixels having luminance, the optical area is calculated as the number of pixels recognized as the tracking target, and the optical center of gravity is calculated as the average coordinates of the pixels recognized as the tracking target. . When the shape of the organ is a shape that is far from an ellipse, such as a crescent moon or a gourd, an accurate area and center of gravity can be calculated by using the optical area and the optical center of gravity.

(2)幾何学面積及び幾何学重心   (2) Geometric area and geometric center of gravity

幾何学面積は、追尾対象として認識されたピクセルのX座標上の最小値とY座標上の最小値を始点として、認識されたピクセルのX座標の最大値とY座標の最大値を終点とした矩形領域を示す長方形に内接する楕円体の面積として、幾何学重心は当該楕円体の重心として、それぞれ算出される。心臓のように認識する対象物の形状が楕円体に近い場合は、幾何学面積と幾何学重心を使用することにより画面上のノイズによる誤差を軽減することができる。   The geometric area has the minimum value on the X coordinate and the minimum value on the Y coordinate of the pixel recognized as the tracking target as the starting point, and the maximum value of the X coordinate and the maximum value of the Y coordinate of the recognized pixel as the end point. As the area of the ellipsoid inscribed in the rectangle indicating the rectangular area, the geometric centroid is calculated as the centroid of the ellipsoid. When the shape of an object to be recognized like a heart is close to an ellipsoid, the error due to noise on the screen can be reduced by using the geometric area and the geometric gravity center.

(3)フィレ径と真円度   (3) Fillet diameter and roundness

フィレ径は、追尾対象のX方向とY方向のピクセルを単位とした長さである。また、真円度は、X方向とY方向のピクセルを単位とした長さの比を、長いほうの径を分母として計算した結果を百分率で表したものであり、100に近ければ、認識した領域の形状が真円に近いことを意味する。   The fillet diameter is a length in units of pixels in the X direction and the Y direction to be tracked. In addition, the roundness is the ratio of the length in units of pixels in the X direction and the Y direction, expressed as a percentage of the result of calculating the longer diameter as the denominator. This means that the shape of the region is close to a perfect circle.

更に、ステップS250に進んで、ワークステーション100は、ステップS240で得られた追尾対象の位置情報から相似計算により照射対象の相対位置をリアルタイムで算出する。照射対象の相対位置の算出方法としては、以下のいずれかのアルゴリズムを利用することができる。   Further, the process proceeds to step S250, and the workstation 100 calculates the relative position of the irradiation target in real time by similarity calculation from the tracking target position information obtained in step S240. As a method for calculating the relative position of the irradiation target, any of the following algorithms can be used.

(a)単純相対座標を用いる方法   (A) Method using simple relative coordinates

画像処理により得られた追尾対象の重心座標から照射対象の相対座標を算出する。   The relative coordinates of the irradiation target are calculated from the barycentric coordinates of the tracking target obtained by image processing.

(b)相対座標と追尾対象のフィレ径の変化の比を相対位置に反映する方法   (B) A method of reflecting the relative position and the ratio of change in the fillet diameter of the tracking target in the relative position

現在と照射対象の位置の設定を行った時点での追尾対象のフィレ径の比を計算し、照射対象の相対座標の長さにX方向、Y方向のそれぞれのフィレ径の比を乗じた長さを計算して、その結果を相対座標として、画像処理で計算された追尾対象の重心座標からの照射位置を特定する。このアルゴリズムは、心房中隔のように心臓の大きさに比例して相対位置が変化する照射対象の場合に使用される。   Calculate the ratio of the fillet diameter of the tracking target at the time of setting the position of the irradiation target and the current, and multiply the length of the relative coordinates of the irradiation target by the ratio of the fillet diameters in the X and Y directions. The irradiation position from the barycentric coordinates of the tracking target calculated by the image processing is specified using the result as relative coordinates. This algorithm is used in the case of an irradiation target whose relative position changes in proportion to the size of the heart, such as an atrial septum.

そして、ワークステーション100は、ステップS240及びS250において追尾対象の位置情報検出処理及び照射対象の相対位置算出処理をリアルタイムで行いながら、ステップS260において、ステップS250で算出した照射対象の相対位置がステップS210で設定した焦点有効範囲内にあるか否かを判断し、照射対象が焦点有効範囲内でない場合は(S260のNO)、追尾対象の位置情報検出処理及び照射対象の相対位置算出処理を続ける(S240及びS250)。一方、ステップS260において、照射対象が焦点有効範囲内にある場合は(S260のYES)、ステップS270に進んで、HIFUの心拍同期照射の設定がなされているか否かを判断し、心拍同期照射設定がなされていない場合に(S270のNO)、更にステップS280に進んで、HIFU信号発生装置300にHIFU照射命令を送信することによりHIFUの照射を行う。   The workstation 100 performs the tracking target position information detection process and the irradiation target relative position calculation process in steps S240 and S250 in real time, and in step S260, the irradiation target relative position calculated in step S250 is determined in step S210. It is determined whether or not the object is within the effective focus range set in step S3. If the irradiation target is not within the effective focus range (NO in S260), the tracking target position information detection process and the irradiation target relative position calculation process are continued ( S240 and S250). On the other hand, if it is determined in step S260 that the irradiation target is within the focus effective range (YES in S260), the process proceeds to step S270 to determine whether or not HIFU heartbeat synchronous irradiation is set, and heartbeat synchronous irradiation setting is performed. If NO has been made (NO in S270), the process further proceeds to step S280, where the HIFU irradiation command is transmitted to the HIFU signal generator 300 to irradiate the HIFU.

図11は、HIFUの自動照射が行われているワークステーション100のディスプレイ150に表示される画面の一例を示す図である。図11の画面630では、追尾対象722の位置情報から相似計算によりリアルタイムに算出された照射対象中心位置736が、HIFUの焦点有効範囲733の範囲内にあるため、HIFUの照射が行われていることを表している。   FIG. 11 is a diagram illustrating an example of a screen displayed on the display 150 of the workstation 100 where the automatic irradiation of the HIFU is performed. In the screen 630 of FIG. 11, since the irradiation target center position 736 calculated in real time by the similarity calculation from the position information of the tracking target 722 is within the range of the effective focus range 733 of the HIFU, the irradiation of the HIFU is performed. Represents that.

一方、ステップS270において心拍同期照射設定がなされている場合は(S270のYES)、ステップS285に進んで、心拍同期情報抽出処理を行う。すなわち、本実施形態に係るHIFU自動照射システム10では、追尾対象を心室等に設定することにより、追尾対象面積の周期変動から心拍数、心拍周波数、心拍周期(時間)等の心拍情報を抽出することが可能であり、これにより心室の収縮期や拡張期に同期してHIFU照射を行うことが可能である。   On the other hand, when the heartbeat synchronization irradiation setting is made in step S270 (YES in S270), the process proceeds to step S285 to perform heartbeat synchronization information extraction processing. That is, in the HIFU automatic irradiation system 10 according to the present embodiment, heart rate information such as a heart rate, a heart rate frequency, and a heart rate period (time) is extracted from the period variation of the tracking target area by setting the tracking target to a ventricle or the like. It is possible to perform HIFU irradiation in synchronization with the ventricular systole or diastole.

図12は、本実施形態におけるワークステーション100の心拍同期情報抽出処理の手順を示すフローチャートである。図12のステップS610において、ワークステーション100は、まず、二次元超音波画像処理装置200からリアルタイムに受信した入力画像データに基づいて、追尾対象の面積をリアルタイムで抽出する。追尾対象の面積は、上述の(1)又は(2)の方法により算出することができる。   FIG. 12 is a flowchart showing a procedure of heartbeat synchronization information extraction processing of the workstation 100 in the present embodiment. In step S610 of FIG. 12, the workstation 100 first extracts the tracking target area in real time based on the input image data received from the two-dimensional ultrasonic image processing apparatus 200 in real time. The area of the tracking target can be calculated by the method (1) or (2) described above.

次いで、ステップS620において、追尾対象面積の過去の移動平均を算出する。時刻tにおける追尾対象面積をS[t]とすると、追尾対象面積の過去n個分の移動平均S_av [t]は下記式(i)により求めることができる。

Figure 0005476534
Next, in step S620, a past moving average of the tracking target area is calculated. When the tracking target area at time t is S [t], the moving average S_av [t] for the past n tracking target areas can be obtained by the following equation (i).
Figure 0005476534

更に、ステップ630において、追尾対象面積の短周期変動成分を算出する。短周期変動成分S_hb [t]は、下記式(ii)により追尾対象面積S[t]から追尾対象面積の過去の移動平均S_av [t]を減じることにより求められる。

Figure 0005476534
Further, in step 630, a short period fluctuation component of the tracking target area is calculated. The short cycle fluctuation component S_hb [t] is obtained by subtracting the past moving average S_av [t] of the tracking target area from the tracking target area S [t] by the following equation (ii).
Figure 0005476534

図13は、本実施形態に係るHIFU自動照射システムにおいて、心室を追尾対象とした場合の追尾対象面積の周期変動を模式的に示したグラフである。図13において、810は追尾対象面積、820はその過去n個分の移動平均を表し、830は追尾対象面積810から過去の移動平均820を減じたものである。追尾対象面積810の周期変動の要因は、肺の動き(呼吸)等による長周期変動と心臓の動き(心拍)による短周期変動とが考えられるが、図13より、820が長周期変動成分、830が短周期変動成分を抽出するものであることは明白である。   FIG. 13 is a graph schematically showing periodic fluctuations in the tracking target area when the ventricle is a tracking target in the HIFU automatic irradiation system according to the present embodiment. In FIG. 13, 810 represents the tracking target area, 820 represents the moving average for the past n pieces, and 830 is obtained by subtracting the past moving average 820 from the tracking target area 810. The cause of the periodic fluctuation of the tracking target area 810 is considered to be a long-period fluctuation due to lung movement (breathing) or the like and a short-period fluctuation due to heart movement (heartbeat), but from FIG. It is clear that 830 extracts short-period fluctuation components.

そして、ステップS640に進んで、ステップS630で得られた短周期変動成分をリアルタイムに離散フーリエ変換することにより周期情報を解析し、ステップS650において、心拍数、心拍周波数、心拍周期(時間)等の心拍周期情報を抽出する。   Then, the process proceeds to step S640, and the cycle information is analyzed by performing discrete Fourier transform on the short cycle variation component obtained in step S630 in real time. In step S650, the heart rate, heart rate frequency, heart rate cycle (time), and the like are analyzed. Extract cardiac cycle information.

なお、本実施形態における心拍同期情報抽出処理では、心拍情報の解析に必ずしも離散フーリエ変換を用いなければならないわけではなく、離散フーリエ変換による方法以外にも、例えば、所定の論理判定を用いて短周期変動の極大値判定を行うことにより心室拡大期を検出するものであってもよい。   In the heartbeat synchronization information extraction process according to this embodiment, the discrete Fourier transform does not necessarily have to be used for the analysis of the heartbeat information. For example, in addition to the method using the discrete Fourier transform, a short process using a predetermined logic determination is performed. The ventricular expansion period may be detected by determining the maximum value of the periodic fluctuation.

そして、図5のステップS290に戻って、ステップS285で得られた心拍周期情報に基づいて、心拍に同期してHIFU信号発生装置300にHIFU照射命令を送信することによりHIFUの心拍同期照射を行う。なお、心拍同期照射に際しては、HIFU自動照射システム10内の信号遅延を考慮して、信号遅延分だけHIFUの照射タイミングを早めるようにHIFU照射命令を送信するように構成してもよい。   Then, returning to step S290 in FIG. 5, based on the heartbeat period information obtained in step S285, the HIFU is synchronized with the heartbeat by transmitting a HIFU irradiation command to the HIFU signal generator 300 in synchronization with the heartbeat. . In addition, in the case of heartbeat synchronous irradiation, a signal delay in the HIFU automatic irradiation system 10 may be considered, and a HIFU irradiation command may be transmitted so as to advance the irradiation timing of the HIFU by the signal delay.

以上のようにして、ワークステーション100は、ステップS295において自動照射処理の終了命令があるまでHIFUの自動照射処理を行い(S295のNO及びS240〜S290)、ステップS295において自動照射処理の終了命令があると(S295のYES)、HIFUの自動照射処理を終了して図4に戻り、HIFU照射の全体処理を終了する。   As described above, the workstation 100 performs the automatic irradiation processing of the HIFU until there is an automatic irradiation processing end command in step S295 (NO in S295 and S240 to S290), and in step S295, the automatic irradiation processing end command is issued. If there is (YES in S295), the HIFU automatic irradiation process is terminated and the process returns to FIG. 4 to end the entire HIFU irradiation process.

本発明によるHIFU自動照射システムは、上記各手順を実行するための専用のハードウエア回路によっても、また、上記各手順を記述したプログラムをCPUが実行することによっても実現することができる。後者により本発明を実現する場合、HIFU自動照射システムを動作させる上記プログラムは、フロッピー(登録商標)ディスクやCD−ROM等のコンピュータ読み取り可能な記録媒体によって提供されてもよいし、インターネット等のネットワークを介してオンラインで提供されてもよい。この場合、コンピュータ読み取り可能な記録媒体に記録されたプログラムは、通常、ROMやハードディスク等に転送され記憶される。また、このプログラムは、たとえば、単独のアプリケーションソフトとして提供されてもよいし、HIFU自動照射システムの一機能としてその装置の基本ソフトウエアに組み込んでもよい。   The HIFU automatic irradiation system according to the present invention can be realized by a dedicated hardware circuit for executing each of the above procedures, or by a CPU executing a program describing each of the above procedures. When the present invention is realized by the latter, the program for operating the HIFU automatic irradiation system may be provided by a computer-readable recording medium such as a floppy (registered trademark) disk or a CD-ROM, or a network such as the Internet. May be provided online via. In this case, the program recorded on the computer-readable recording medium is usually transferred and stored in a ROM, a hard disk or the like. In addition, this program may be provided as, for example, a single application software, or may be incorporated in the basic software of the apparatus as one function of the HIFU automatic irradiation system.

尚、本発明のHIFU自動照射システムは、上記した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。   The HIFU automatic irradiation system of the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the scope of the present invention.

上述したように、本発明のHIFU自動照射システムによれば、正確な照射タイミングの判定を行うことができ、安全かつ適切に自動照射を行うことのでき、特に周期的な動きを伴う臓器や、特徴抽出の困難な部位への的確なHIFUの自動照射を行うことができる。従って、本発明のHIFU自動照射システムは、胎児左心低形成症候群(HLHS)の低侵襲治療、肺分画症(BPS)の治療、肺の先天性のう胞性腺腫様奇形(CCAM)治療等に利用した場合極めて有用である。   As described above, according to the HIFU automatic irradiation system of the present invention, accurate irradiation timing can be determined, automatic irradiation can be performed safely and appropriately, especially an organ with periodic movement, Accurate HIFU automatic irradiation can be performed on a region where feature extraction is difficult. Therefore, the HIFU automatic irradiation system of the present invention is suitable for minimally invasive treatment of fetal left heart hypoplasia syndrome (HLHS), treatment of pulmonary sequestration (BPS), congenital cystic adenomatous malformation (CCAM) of the lung, etc. It is extremely useful when used.

本発明の実施形態にかかる集束超音波(HIFU)自動照射システムの全体構成を示すブロック図である。1 is a block diagram showing an overall configuration of a focused ultrasound (HIFU) automatic irradiation system according to an embodiment of the present invention. 本実施形態にかかるワークステーション100の構成の一例を示すブロック図である。It is a block diagram which shows an example of a structure of the workstation 100 concerning this embodiment. (a)は、本実施形態で利用される二次元超音波プローブ一体型トランデューサ400の構成を説明するための概略側面図であり、(b)はその概略正面図であり、(c)はその概略断面図である。(A) is a schematic side view for demonstrating the structure of the two-dimensional ultrasonic probe integrated transducer 400 utilized by this embodiment, (b) is the schematic front view, (c) is It is the schematic sectional drawing. 本実施形態におけるワークステーション100のHIFU照射処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the HIFU irradiation process of the workstation 100 in this embodiment. 本実施形態におけるワークステーション100のHIFU自動照射処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the HIFU automatic irradiation process of the workstation 100 in this embodiment. 本実施形態におけるワークステーション100のHIFU焦点設定処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the HIFU focus setting process of the workstation 100 in this embodiment. HIFU焦点設定処理においてワークステーション100のディスプレイ150に表示される画面の一例を示す図である。FIG. 6 is a diagram showing an example of a screen displayed on the display 150 of the workstation 100 in the HIFU focus setting process. 本実施形態におけるワークステーション100の二値化条件設定処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the binarization condition setting process of the workstation 100 in this embodiment. 本実施形態におけるワークステーション100の画像処理条件設定処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the image processing condition setting process of the workstation 100 in this embodiment. 画像処理条件設定処理においてワークステーション100のディスプレイ150に表示される画面の一例を示す図である。6 is a diagram showing an example of a screen displayed on the display 150 of the workstation 100 in the image processing condition setting process. FIG. HIFUの自動照射が行われているワークステーション100のディスプレイ150に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display 150 of the workstation 100 in which automatic irradiation of HIFU is performed. 本実施形態におけるワークステーション100の心拍同期情報抽出処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the heartbeat synchronous information extraction process of the workstation 100 in this embodiment. 本実施形態に係るHIFU自動照射システムにおいて、心室を追尾対象とした場合の追尾対象面積の周期変動を模式的に示したグラフである。In the HIFU automatic irradiation system which concerns on this embodiment, it is the graph which showed typically the periodic fluctuation | variation of the tracking object area at the time of making a ventricle into a tracking object.

100 ワークステーション
110 CPU
120 ROM
130 RAM
140 ハードディスク
150 ディスプレイ
160 入力装置
170 ビデオキャプチャカード
180 通信インタフェース
190 バス
200 二次元超音波画像処理装置
300 HIFU信号発生装置
400 二次元超音波プローブ一体型トランデューサ
410 二次元超音波プローブ
411 超音波捜査範囲
420 トランスデューサ
421 HIFU照射焦点
510、520、530、540 専用通信ケーブル
610、620、630 ディスプレイ表示画面
710 二次元超音波画像
721 ファントムの画像
722 追尾対象の画像
731 HIFUの焦点位置を示すX座標軸
732 HIFUの焦点位置を示すY座標軸
734 ROI
735 追尾対象中心位置
736 照射対象中心位置
810 追尾対象面積
820 追尾対象面積の過去n個分の移動平均
830 短周期変動成分
100 workstation 110 CPU
120 ROM
130 RAM
140 Hard Disk 150 Display 160 Input Device 170 Video Capture Card 180 Communication Interface 190 Bus 200 Two-Dimensional Ultrasonic Image Processing Device 300 HIFU Signal Generator 400 Two-Dimensional Ultrasonic Probe Integrated Transducer 410 Two-Dimensional Ultrasonic Probe 411 Ultrasonic Investigation Range 420 Transducer 421 HIFU irradiation focus 510, 520, 530, 540 Dedicated communication cable 610, 620, 630 Display display screen 710 Two-dimensional ultrasound image 721 Image of phantom 722 Image to be tracked 731 X coordinate axis indicating the focus position of HIFU 732 HIFU Y coordinate axis 734 ROI indicating the focal point position
735 Tracking target center position 736 Irradiation target center position 810 Tracking target area 820 Moving average of the past n tracking target areas 830 Short period fluctuation component

Claims (7)

対象物の超音波画像データを取得する超音波画像取得手段と、
前記超音波画像取得手段により取得された画像データを画像形成する画像形成手段と、
前記画像形成手段により形成された画像中の追尾対象を指定する追尾対象指定手段と、
前記画像形成手段により形成された画像中の集束超音波の照射対象を指定する照射対象指定手段と、
前記追尾対象指定手段により指定された追尾対象の特徴パラメータを抽出し前記特徴パラメータに基づいて前記追尾対象の位置情報を検出する位置情報検出手段と、
前記位置情報検出手段により検出された追尾対象の位置情報に基づいて前記照射対象指定手段により指定された照射対象の相対位置を算出する相対位置算出手段と、
前記相対位置算出手段により算出された照射対象の相対位置に集束超音波を照射する集束超音波照射手段と、
前記追尾対象の面積が特定の周期変動をする場合に、前記追尾対象の面積を算出して前記追尾対象の面積の時間変化から周期変動情報を抽出する周期変動情報抽出手段と、
前記周期変動情報抽出手段により抽出された周期変動情報に基づいて前記集束超音波照射手段により照射される集束超音波の照射タイミングを決定する照射タイミング決定手段と、
を有し、
前記周期変動情報抽出手段は、前記追尾対象の面積から前記追尾対象の面積の過去の移動平均を減じて短周期変動成分を分離し、前記短周期変動成分に基づいて前記周期変動情報を抽出することを特徴とする、
超音波画像処理による集束超音波自動照射システム。
Ultrasonic image acquisition means for acquiring ultrasonic image data of the object;
Image forming means for forming an image of the image data acquired by the ultrasonic image acquiring means;
Tracking target specifying means for specifying a tracking target in the image formed by the image forming means;
An irradiation target designating unit for designating an irradiation target of focused ultrasound in the image formed by the image forming unit;
Position information detecting means for extracting feature parameters of the tracking target designated by the tracking target designating means and detecting position information of the tracking target based on the feature parameters;
A relative position calculating means for calculating a relative position of the irradiation target specified by the irradiation target specifying means based on the position information of the tracking target detected by the position information detecting means;
Focused ultrasound irradiation means for irradiating focused ultrasound to the relative position of the irradiation target calculated by the relative position calculation means;
When the area of the tracking target has a specific periodic variation, a periodic variation information extracting unit that calculates the area of the tracking target and extracts periodic variation information from the time variation of the area of the tracking target;
An irradiation timing determining means for determining an irradiation timing of the focused ultrasonic wave irradiated by the focused ultrasonic wave irradiation means based on the periodic fluctuation information extracted by the periodic fluctuation information extracting means;
I have a,
The period variation information extracting means subtracts a short period variation component from the tracking target area by subtracting a past moving average of the area to be tracked, and extracts the period variation information based on the short period variation component. It is characterized by
A focused ultrasound automatic irradiation system using ultrasound image processing.
前記周期変動情報抽出手段は、前記短周期変動成分を即時離散フーリエ変換することにより前記周期変動情報を抽出することを特徴とする、
請求項に記載の集束超音波自動照射システム。
The period variation information extracting means extracts the period variation information by performing an immediate discrete Fourier transform on the short period variation component,
The focused ultrasound automatic irradiation system according to claim 1 .
前記照射タイミング決定手段は、前記照射対象の相対位置と集束超音波の焦点位置との距離が閾値以下である場合に前記集束超音波照射手段に集束超音波を照射させることを特徴とする、
請求項1又は2に記載の集束超音波自動照射システム。
The irradiation timing determining means causes the focused ultrasonic irradiation means to irradiate the focused ultrasonic wave when the distance between the relative position of the irradiation target and the focal position of the focused ultrasonic wave is a threshold value or less,
The focused ultrasound automatic irradiation system according to claim 1 or 2 .
前記相対位置算出手段は、前記追尾対象の位置情報から相似計算により照射対象の相対位置を算出することを特徴とする、
請求項1〜の何れか1項に記載の集束超音波自動照射システム。
The relative position calculation means calculates the relative position of the irradiation target by similarity calculation from the position information of the tracking target,
The focused ultrasound automatic irradiation system according to any one of claims 1 to 3 .
胎児左心低形成症候群の低侵襲治療、肺分画症の治療又は肺の先天性のう胞性腺腫様奇形の治療に用いることを特徴とする、
請求項1〜の何れか1項に記載の集束超音波自動照射システム。
It is used for minimally invasive treatment of fetal left heart hypoplasia syndrome, treatment of pulmonary sequestration, or congenital cystic adenoma-like malformation of the lung,
The focused ultrasound automatic irradiation system according to any one of claims 1 to 4 .
対象物の超音波画像データを取得する超音波画像取得ステップと、
前記超音波画像取得ステップにより取得された画像データを画像形成する画像形成ステップと、
前記画像形成ステップにより形成された画像中の追尾対象を指定する追尾対象指定ステップと、
前記画像形成ステップにより形成された画像中の集束超音波の照射対象を指定する照射対象指定ステップと、
前記追尾対象指定ステップにより指定された追尾対象の特徴パラメータを抽出し前記特徴パラメータに基づいて前記追尾対象の位置情報を検出する位置情報検出ステップと、
前記位置情報検出ステップにより検出された追尾対象の位置情報に基づいて前記照射対象指定ステップにより指定された照射対象の相対位置を算出する相対位置算出ステップと、
前記相対位置算出ステップにより算出された照射対象の相対位置に集束超音波を照射する集束超音波照射ステップと、
前記追尾対象の面積が特定の周期変動をする場合に、前記追尾対象の面積を算出して前記追尾対象の面積の時間変化から周期変動情報を抽出する周期変動情報抽出ステップと、
前記周期変動情報抽出ステップにより抽出された周期変動情報に基づいて前記集束超音波照射ステップにより照射される集束超音波の照射タイミングを決定する照射タイミング決定ステップと、
をコンピュータに実行させるものであり、
前記周期変動情報抽出ステップは、前記追尾対象の面積から前記追尾対象の面積の過去の移動平均を減じて短周期変動成分を分離し、前記短周期変動成分に基づいて前記周期変動情報を抽出することを特徴とする、
超音波画像処理による集束超音波自動照射プログラム。
An ultrasonic image acquisition step of acquiring ultrasonic image data of the object;
An image forming step of forming an image of the image data acquired by the ultrasonic image acquiring step;
A tracking target designating step of designating a tracking target in the image formed by the image forming step;
An irradiation target designating step of designating an irradiation target of focused ultrasound in the image formed by the image forming step;
A position information detection step of extracting feature parameters of the tracking target specified in the tracking target specifying step and detecting position information of the tracking target based on the feature parameters;
A relative position calculating step for calculating a relative position of the irradiation target specified by the irradiation target specifying step based on the position information of the tracking target detected by the position information detection step;
A focused ultrasound irradiation step for irradiating focused ultrasound to the relative position of the irradiation target calculated by the relative position calculating step;
When the area of the tracking target has a specific periodic variation, a periodic variation information extraction step of calculating the area of the tracking target and extracting periodic variation information from the time variation of the area of the tracking target;
An irradiation timing determination step for determining an irradiation timing of the focused ultrasonic wave irradiated by the focused ultrasonic wave irradiation step based on the periodic fluctuation information extracted by the periodic fluctuation information extraction step;
To run on a computer ,
The period fluctuation information extraction step subtracts a past moving average of the tracking target area from the area of the tracking target to separate short period fluctuation components, and extracts the period fluctuation information based on the short period fluctuation components. It is characterized by
A focused ultrasound automatic irradiation program using ultrasound image processing.
請求項に記載の集束超音波自動照射プログラムを記録したコンピュータ読み取り可能な記録媒体。 A computer-readable recording medium on which the focused ultrasound automatic irradiation program according to claim 6 is recorded.
JP2008237241A 2008-09-17 2008-09-17 Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same Active JP5476534B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008237241A JP5476534B2 (en) 2008-09-17 2008-09-17 Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008237241A JP5476534B2 (en) 2008-09-17 2008-09-17 Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same

Publications (2)

Publication Number Publication Date
JP2010068884A JP2010068884A (en) 2010-04-02
JP5476534B2 true JP5476534B2 (en) 2014-04-23

Family

ID=42201229

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008237241A Active JP5476534B2 (en) 2008-09-17 2008-09-17 Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same

Country Status (1)

Country Link
JP (1) JP5476534B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102641454B1 (en) * 2023-09-25 2024-02-28 주식회사 제이시스메디칼 Ultrasonic image processing device, image processing method thereof, system and program

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013117991A1 (en) * 2012-02-06 2013-08-15 Insightec, Ltd. Reference-based motion tracking during non-invasive therapy
KR102189678B1 (en) 2013-02-15 2020-12-11 삼성전자주식회사 A method, apparatus and HIFU system for generating ultrasound forming multi-focuses using medical image in region of interest

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002369888A (en) * 2001-06-15 2002-12-24 Mitsubishi Electric Corp Method for estimating three-dimensional movement of radiation irradiation target and radiation irradiation system
JP4722039B2 (en) * 2004-06-11 2011-07-13 株式会社日立メディコ Ultrasonic therapy device
WO2006068103A1 (en) * 2004-12-20 2006-06-29 Hitachi Medical Corporation Ultrasonographic system and method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102641454B1 (en) * 2023-09-25 2024-02-28 주식회사 제이시스메디칼 Ultrasonic image processing device, image processing method thereof, system and program

Also Published As

Publication number Publication date
JP2010068884A (en) 2010-04-02

Similar Documents

Publication Publication Date Title
JP5040377B2 (en) Video processing system and method
WO2017206023A1 (en) Cardiac volume identification analysis system and method
US20140340638A1 (en) Image display apparatus, image display method and imaging system
WO2014002963A1 (en) Diagnostic ultrasound apparatus and image processing method
US20100138191A1 (en) Method and system for acquiring and transforming ultrasound data
JP2007175235A (en) Ultrasonic image processor, and control program thereof
JP2011031040A (en) System and method for providing two-dimensional ct image corresponding to two-dimensional ultrasonic image
JP2006192254A (en) Ultrasonic diagnostic system and method
EP3936055A1 (en) Ultrasonic diagnostic device and method for controlling ultrasonic diagnostic device
JP2011240132A (en) Ultrasonic diagnostic apparatus measuring image using figure template, and display method of the image
US10433815B2 (en) Ultrasound diagnostic image generating device and method
JP2017023347A (en) Ultrasonic image processing apparatus and program
JP6875541B2 (en) Control method of acoustic wave diagnostic device and acoustic wave diagnostic device
JP5476534B2 (en) Focused ultrasound automatic irradiation system by ultrasound image processing, focused ultrasound automatic irradiation program, and computer-readable recording medium recording the same
CN112512436B (en) Apparatus, system and method for pulmonary beat detection in ultrasound
EP3181056A1 (en) Ultrasonic image processing device
JP2018079000A (en) Ultrasonic diagnosis device and image processing device
JP7282564B2 (en) Medical diagnostic device, medical image processing device, and image processing program
JP4129199B2 (en) Ultrasonic diagnostic equipment
US11213276B2 (en) Ultrasound image processing
KR101627319B1 (en) medical image processor and method thereof for medical diagnosis
JP4528247B2 (en) Ultrasonic diagnostic apparatus and ultrasonic image processing method
US9349190B2 (en) Ultrasound image processing apparatus
JP7434529B2 (en) Ultrasonic diagnostic device, control method for ultrasonic diagnostic device, and processor for ultrasonic diagnostic device
JP2019118694A (en) Medical image generation apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110906

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130226

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130709

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130909

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131008

R155 Notification before disposition of declining of application

Free format text: JAPANESE INTERMEDIATE CODE: R155

R150 Certificate of patent or registration of utility model

Ref document number: 5476534

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150